KR20140102515A - image processing apparatus and control method thereof - Google Patents

image processing apparatus and control method thereof Download PDF

Info

Publication number
KR20140102515A
KR20140102515A KR1020130015958A KR20130015958A KR20140102515A KR 20140102515 A KR20140102515 A KR 20140102515A KR 1020130015958 A KR1020130015958 A KR 1020130015958A KR 20130015958 A KR20130015958 A KR 20130015958A KR 20140102515 A KR20140102515 A KR 20140102515A
Authority
KR
South Korea
Prior art keywords
image
blood vessel
vessel map
selecting
unit
Prior art date
Application number
KR1020130015958A
Other languages
Korean (ko)
Inventor
정진구
조승기
스테판 튤리아코브
한희철
김경영
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020130015958A priority Critical patent/KR20140102515A/en
Publication of KR20140102515A publication Critical patent/KR20140102515A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/20—Processor architectures; Processor configuration, e.g. pipelining
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/50—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
    • A61B6/504—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for diagnosis of blood vessels, e.g. by angiography
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/73—Deblurring; Sharpening
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Medical Informatics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Dentistry (AREA)
  • Vascular Medicine (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Endoscopes (AREA)

Abstract

An image processing apparatus is disclosed. The image processing apparatus includes an image receiving unit for receiving an image; an image processing unit for signal processing the image received; a blood vessel map generation unit for extracting a blood vessel structure from the signal processed image and generating a blood vessel map image based on the extracted blood vessel structure; and a display unit for displaying the generated blood vessel map image.

Description

영상 처리 장치 및 그 제어 방법 { IMAGE PROCESSING APPARATUS AND CONTROL METHOD THEREOF }[0001] IMAGE PROCESSING APPARATUS AND CONTROL METHOD THEREOF [0002]

본 발명은 영상 처리 장치 및 그 제어 방법에 관한 것으로, 더욱 상세하게는 진단에 사용되는 영상 처리 장치 및 그 제어 방법에 관한 것이다.The present invention relates to an image processing apparatus and a control method thereof, and more particularly, to an image processing apparatus used for diagnosis and a control method thereof.

최근, 내시경, CT, X-ray 등 다양한 기기들이 인체를 진단하는데 사용되고 있다. Recently, various devices such as endoscope, CT, and X-ray have been used to diagnose the human body.

이 중 내시경은 인체 내부나, 기계 내부 등의 좁은 공간을 영상으로 촬영하여 관찰할 수 있도록 하는 것으로서, 특히 의료분야에 있어서의 내시경은 수술이나 부검과 같은 신체의 개복이나 절개 없이 소형 카메라를 이용하여 인체 내부(위, 기관지, 식도, 대내장, 소내장 등)를 관찰하여 그 이상 여부를 확인할 수 있게 한다.Among them, an endoscope is used to photograph and observe a narrow space such as inside of a human body or inside of a machine. Especially, in the field of medical endoscopes, a small camera is used without endoscopic surgery or autopsy Observe the inside of the human body (stomach, bronchus, esophagus, large intestine, small intestine, etc.) to check the abnormality.

현재의 내시경은 이러한 의료분야 뿐 아니라 정밀한 기계의 해체 없이 내부를 관찰할 수 있게 하거나 또는 파이프 내부의 이상 여부 등을 관찰할 수 있게 하는 등 다양한 산업분야에까지 확대 실시되고 있다.Current endoscopes are being extended to various industrial fields such as not only in the medical field but also in observing the inside of the pipe without disassembling the precision machine or observing the abnormality inside the pipe.

한편, 기존의 내시경에서는 관찰 영상의 확대, 축소를 용이하게 변경하는 기술은 존재하였으나, 특정 요소만을 부각시켜 디스플레이하는 기술은 없어 진단에 어려움이 있다는 문제점이 있었다. On the other hand, existing endoscopes have a technique for easily changing the enlargement or reduction of an observation image, but there is a problem that there is no technology for displaying only a specific element and displaying it.

본 발명은 상술한 문제점을 해결하기 위해 안출된 것으로, 본 발명의 목적은 입력된 영상에서 특정 인체 구성 요소 만을 부각시켜 디스플레이하는 영상 처리 장치 및 그 제어 방법을 제공함에 있다.It is an object of the present invention to provide an image processing apparatus and a control method thereof for displaying only a specific human body component on an input image.

상기 목적을 달성하기 위해 안출된 본 발명의 일 실시 예에 따른, 영상 처리 장치는, 영상을 수신하는 영상 수신부, 상기 수신된 영상을 신호 처리하는 영상 처리부, 상기 신호 처리된 영상에서 혈관 형태를 추출하고, 추출된 혈관 형태에 기초하여 혈관 맵 영상을 생성하는 혈관 맵 생성부 및, 상기 생성된 혈관 맵 영상을 디스플레이하는 디스플레이부를 포함한다. According to an aspect of the present invention, there is provided an image processing apparatus including an image receiving unit for receiving an image, an image processing unit for signal processing the received image, A blood vessel map generating unit for generating a blood vessel map image based on the extracted blood vessel shape, and a display unit for displaying the generated blood vessel map image.

이 경우, 상기 디스플레이부는, 디스플레이되는 영상 타입을 선택하기 위한 UI를 디스플레이하고, 상기 혈관 맵 생성부는, 상기 영상 타입을 선택하기 위한 UI를 통해 선택된 영상 타입에 따라 상기 혈관 맵 영상을 생성할 수 있다. In this case, the display unit displays a UI for selecting a displayed image type, and the vessel map generator may generate the blood vessel map image according to a selected image type through a UI for selecting the image type .

여기서, 상기 영상 타입을 선택하기 위한 UI는, 상기 혈관 맵 영상을 선택하기 위한 제1 항목, 상기 영상 및 상기 혈관 맵 영상이 합성된 형태의 영상을 선택하기 위한 제2 항목 및, 상기 영상을 선택하기 위한 제3 항목을 포함할 수 있다. The UI for selecting the image type may include a first item for selecting the blood vessel map image, a second item for selecting an image in which the image and the blood vessel map image are synthesized, And a third item to be used for the first time.

또한, 상기 디스플레이부는, 상기 영상 및 상기 혈관 맵 영상의 합성 정도, 상기 혈관 맵의 단계 및 상기 혈관 맵 색상 중 적어도 하나를 조정하기 위한 UI를 디스플레이할 수 있다. In addition, the display unit may display a UI for adjusting at least one of the degree of synthesis of the image and the blood vessel map image, the step of the blood vessel map, and the blood vessel map color.

또한, 상기 영상 처리부는, 상기 수신된 영상에 포함된 노이즈를 제거하는 노이즈 제거부 및, 상기 노이즈가 제거된 영상에 대한 디블러링(deblurring)을 수행하는 디블러링부를 포함한다. The image processing unit may include a noise removing unit that removes noise included in the received image, and a deblurring unit that performs deblurring on the image from which the noise is removed.

또한, 상기 혈관 맵 생성부는, 상기 신호 처리된 영상을 기초로 스펙트럼 영상을 생성하는 스펙트럼 영상 생성부, 상기 생성된 스펙트럼 영상의 컬러 특성을 분석하는 컬러 분석부 및, 상기 컬러 특성을 기초로 상기 스펙트럼 영상에 포함된 에지를 추출하는 에지 추출부를 포함한다. The blood vessel map generator may further include a spectral image generator for generating a spectral image based on the signal-processed image, a color analyzer for analyzing color characteristics of the generated spectral image, And an edge extracting unit for extracting an edge included in the image.

한편, 본 발명의 일 실시 예에 따른 영상 처리 장치의 제어 방법은, 영상을 수신하는 단계, 상기 수신된 영상을 신호 처리하는 단계, 상기 신호 처리된 영상에서 혈관 형태를 추출하고, 추출된 혈관 형태에 기초하여 혈관 맵 영상을 생성하는 단계 및, 상기 생성된 혈관 맵 영상을 디스플레이하는 단계를 포함한다. Meanwhile, a method of controlling an image processing apparatus according to an embodiment of the present invention includes receiving an image, signal processing the received image, extracting a blood vessel shape from the signal-processed image, Generating a blood vessel map image based on the generated blood vessel map image, and displaying the generated blood vessel map image.

또한, 디스플레이되는 영상 타입을 선택하기 위한 UI를 디스플레이하는 단계를 더 포함하고, 상기 혈관 맵 영상을 생성하는 단계는, 상기 영상 타입을 선택하기 위한 UI를 통해 선택된 영상 타입에 따라 상기 혈관 맵 영상을 생성할 수 있다. The method may further include displaying a UI for selecting a displayed image type, wherein the generating of the blood vessel map image comprises: displaying the blood vessel map image according to a selected image type through a UI for selecting the image type; Can be generated.

이 경우, 상기 영상 타입을 선택하기 위한 UI는, 상기 혈관 맵 영상을 선택하기 위한 제1 항목, 상기 영상 및 상기 혈관 맵 영상이 합성된 형태의 영상을 선택하기 위한 제2 항목 및, 상기 영상을 선택하기 위한 제3 항목을 포함할 수 있다. In this case, the UI for selecting the image type may include a first item for selecting the blood vessel map image, a second item for selecting an image in which the image and the blood vessel map image are synthesized, And a third item for selection.

또한, 상기 영상 및 상기 혈관 맵 영상의 합성 정도, 상기 혈관 맵의 단계 및 상기 혈관 맵 색상 중 적어도 하나를 조정하기 위한 UI를 디스플레이하는 단계를 더 포함할 수 있다. The method may further include displaying a UI for adjusting at least one of a degree of synthesis of the image and the blood vessel map image, a step of the blood vessel map, and a color of the blood vessel map.

또한, 상기 수신된 영상을 신호 처리하는 단계는, 상기 수신된 영상에 포함된 노이즈를 제거하는 단계 및, 상기 노이즈가 제거된 영상에 대한 디블러링(deblurring)을 수행하는 단계를 포함할 수 있다. The step of signal processing the received image may include a step of removing noise included in the received image and a step of performing deblurring on the image from which noise has been removed .

또한, 상기 혈관 맵 영상을 생성하는 단계는, 상기 신호 처리된 영상을 기초로 스펙트럼 영상을 생성하는 단계, 상기 생성된 스펙트럼 영상의 컬러 특성을 분석하는 단계 및, 상기 컬러 특성을 기초로 상기 스펙트럼 영상에 포함된 에지를 추출하는 단계를 포함할 수 있다. The generating of the blood vessel map image may include generating a spectral image based on the signal-processed image, analyzing a color characteristic of the generated spectral image, and analyzing the spectral image based on the color characteristic. And extracting an edge included in the edge.

상술한 실시 예에 따르면, 수신된 영상에서 특정 인체 요소를 부각시키는 영상을 생성하여 디스플레이할 수 있게 되므로, 사용자의 편의성이 향상된다. According to the above-described embodiment, an image for emphasizing a specific human element in the received image can be generated and displayed, thereby improving convenience for the user.

도 1은 본 발명의 일 실시 예에 따른 영상 처리 장치의 구성을 나타내는 블럭도이다.
도 2는 본 발명의 일 실시 예에 따른 혈관 맵 생성부의 세부 구성을 나타내는 블럭도이다.
도 3은 본 발명의 또 다른 실시 예에 따른, 영상 처리 장치(100')의 구성을 나타내는 블럭도를 도시한 도면이다.
도 4는 본 발명의 일 실시 예에 따른 영상 제공 방법을 설명하기 위한 도면이다.
도 5는 본 발명의 다른 실시 예에 따른 영상 제공 방법을 설명하기 위한 도면이다.
도 6은 본 발명의 또 다른 실시 예에 따른 영상 제공 방법을 설명하기 위한 도면이다.
도 7은 본 발명의 또 다른 실시 예에 따른 영상 제공 방법을 설명하기 위한 도면이다.
도 8은 본 발명의 일 실시 예에 따른 영상 처리 장치의 제어 방법을 설명하기 위한 흐름도이다. 1 is a block diagram showing a configuration of an image processing apparatus according to an embodiment of the present invention.
2 is a block diagram illustrating a detailed configuration of a blood vessel map generator according to an embodiment of the present invention.
FIG. 3 is a block diagram showing a configuration of an image processing apparatus 100 'according to another embodiment of the present invention.
4 is a view for explaining an image providing method according to an embodiment of the present invention.
5 is a view for explaining an image providing method according to another embodiment of the present invention.
6 is a view for explaining an image providing method according to another embodiment of the present invention.
7 is a view for explaining an image providing method according to another embodiment of the present invention.
8 is a flowchart illustrating a method of controlling an image processing apparatus according to an exemplary embodiment of the present invention.

이하에서 첨부된 도면을 이용하여 본 발명에 대하여 구체적으로 설명한다.Hereinafter, the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시 예에 따른 영상 처리 장치의 구성을 나타내는 블럭도이다. 1 is a block diagram showing a configuration of an image processing apparatus according to an embodiment of the present invention.

도 1에 따르면 영상 처리 장치(100)는 영상 수신부(110), 영상 처리부(120), 혈관 맵 생성부(130) 및 디스플레이부(140)를 포함한다. Referring to FIG. 1, the image processing apparatus 100 includes an image receiving unit 110, an image processing unit 120, a blood vessel map generating unit 130, and a display unit 140.

영상 처리 장치(100)는 체내 표면에 대한 영상을 처리하는 내시경 장치로 구현될 수 있으나, 이에 한정되는 것은 아니다. 예를 들어, CT/MRI, X-ray 등 다양한 진단 기기에도 활용될 수 있다. 다만, 설명의 편의를 위하여 내시경 영상을 수신하는 경우를 상정하여 설명하도록 한다. The image processing apparatus 100 may be embodied as an endoscope apparatus for processing an image of a body surface, but is not limited thereto. For example, it can be applied to various diagnostic devices such as CT / MRI and X-ray. For convenience of explanation, it is assumed that an endoscopic image is received.

영상 수신부(110)는 촬상 장치(미도시)를 통해 촬상된 내시경 영상을 수신한다. 여기서, 촬상 장치(미도시)는 렌즈 및 이미지센서(CCD)로 구성되는 카메라 유닛을 구비할 수 있다. 즉, CCD로 들어온 영상은 전자 신호로 변환되어 프로브에 내장된 전선을 통해 수신될 수 있다. 이 경우, 촬상 장치(미도시)는 영상 처리 장치(100) 내부에 구비되거나, 영상 처리 장치(100)와 별도의 촬상 장치로 구현될 수 있다. The image receiving unit 110 receives the endoscopic image imaged through the imaging device (not shown). Here, the imaging device (not shown) may include a camera unit composed of a lens and an image sensor (CCD). That is, an image input to the CCD can be converted into an electronic signal and can be received through a wire embedded in the probe. In this case, an image pickup device (not shown) may be provided inside the image processing apparatus 100 or may be implemented as an image pickup apparatus separate from the image processing apparatus 100.

영상 처리부(120)는 영상 수신부(110)를 통해 수신된 내시경 영상을 신호 처리한다. The image processing unit 120 processes the endoscopic image received through the image receiving unit 110.

이에 따라 영상 처리부(120)는 노이즈 제거부(미도시) 및 디블러링부(미도시) 중 적어도 하나를 포함한다. Accordingly, the image processing unit 120 includes at least one of a noise removing unit (not shown) and a deblurring unit (not shown).

구체적으로, 노이즈 제거부(미도시)는 수신된 내시경 영상에서 노이즈를 제거한다. 또한, 디블러링부(미도시)는 노이즈가 제거된 영상에 대해 디블러링(deblurring) 처리를 수행한다. More specifically, the noise removing unit (not shown) removes noise from the received endoscopic image. In addition, the deblurring unit (not shown) performs a deblurring process on the image from which noise has been removed.

예를 들어, 노이즈 제거부(미도시)는 대역 차단 필터(band-reject filter), 노치 필터(notch filter), 적응적 메디안 필터(adaptive median filter), 적응적 메디안 필터(adaptive median filter) 등을 사용하여 수신된 내시경 영상에 포함된 노이즈를 제거할 수 있다. For example, the noise elimination (not shown) may include a band-reject filter, a notch filter, an adaptive median filter, an adaptive median filter, It is possible to remove the noise included in the received endoscopic image.

또한, 디블러링부(미도시)는 하나 이상의 대역통과 필터(Bandpass Filter)를 이용하여 노이즈가 제거된 영상에 대해 디블러링 처리를 수행할 수 있다. In addition, the de-blurring unit (not shown) may perform a debloring process on an image from which noise has been removed by using one or more bandpass filters.

한편, 상술한 노이즈 제거부(미도시) 및 디블러링부(미도시)는 신호 처리의 일 형태를 예를 들어 설명한 것이며, 입력되는 영상에서 해당 신호 처리가 이용되지 않거나 새로운 신호 처리 요소가 추가될 수 있음은 물론이다. 예를 들어, 영상에 블러(blur) 발생한 경우에만 이를 제거하기 위한 디블러링(eblurring)이 수행될 수 있다. Meanwhile, the noise removing unit (not shown) and the debloring unit (not shown) described above illustrate one form of the signal processing. For example, when the corresponding signal processing is not used or a new signal processing element is added Of course. For example, eburring may be performed to remove the blur only when blur occurs in the image.

혈관 맵 생성부(130)는 신호 처리된 내시경 영상에서 혈관 형태를 추출하고, 추출된 추출된 혈관 형태에 기초하여 혈관 맵 영상을 생성한다. The blood vessel map generating unit 130 extracts a blood vessel shape from the signal-processed endoscopic image, and generates a blood vessel map image based on the extracted extracted blood vessel shape.

구체적으로, 혈관 맵 생성부(130)는, 수신된 내시경 영상을 기초로 스펙트럼 영상을 생성하고, 생성된 스펙트럼 영상의 컬러 특성을 분석한 후, 분석된 컬러 특성을 기초로 스펙트럼 영상에 포함된 에지를 추출하여 내시경 영상에 대응되는 혈관 맵 영상을 생성할 수 있다. Specifically, the blood vessel map generating unit 130 generates a spectral image based on the received endoscopic image, analyzes the color characteristics of the generated spectral image, and then, based on the analyzed color characteristics, So that a blood vessel map image corresponding to the endoscopic image can be generated.

또한, 혈관 맵 생성부(130)는 혈관 크기 별 영상을 생성하여 혈관 맵 단계 조정에 대응되는 혈관 크기 별 영상을 제공할 수 있다. In addition, the blood vessel map generator 130 may generate an image according to the size of the blood vessel, and may provide an image according to the size of the blood vessel corresponding to the adjustment of the blood vessel map.

디스플레이부(140)는 영상 처리부(120)에서 영상 처리된 내시경 영상 및 혈관 맵 생성부(130)에서 생성된 혈관 맵 영상, 영상 처리된 내시경 영상 및 혈관 맵 영상이 합성된 합성 영상(또는 중첩된 중첩 영상) 중 적어도 하나를 디스플레이한다. The display unit 140 displays a composite image (or a composite image) obtained by synthesizing an endoscopic image subjected to image processing in the image processing unit 120, a blood vessel map image generated in the blood vessel map generating unit 130, Superimposed image).

또한, 디스플레이부(140)는 디스플레이되는 영상 타입을 선택하기 위한 UI를 디스플레이할 수 있다. Also, the display unit 140 may display a UI for selecting a displayed image type.

이 경우 혈관 맵 생성부(130)는 디스플레이부(140)에 디스플레이되는 영상 타입을 선택하기 위한 UI를 통해 선택된 영상 타입에 따라 혈관 맵 영상을 생성할 수 있다. 이 경우, 디스플레이되는 영상 타입을 선택하기 위한 UI는 혈관 맵 영상을 선택하기 위한 제1 항목, 내시경 영상 및 혈관 맵 영상이 합성된 형태의 영상을 선택하기 위한 제2 항목 및, 내시경 영상을 선택하기 위한 제3 항목을 포함할 수 있다.In this case, the blood vessel map generating unit 130 may generate a blood vessel map image according to the selected image type through the UI for selecting the image type displayed on the display unit 140. In this case, the UI for selecting the displayed image type includes a first item for selecting a vein map image, a second item for selecting an image in which an endoscopic image and a vein map image are synthesized, and a second item for selecting an endoscopic image The third item may be included.

또한, 디스플레이부(140)는 내시경 영상 및 혈관 맵 영상의 합성 정도, 혈관 맵의 단계 및 혈관 맵 색상 중 적어도 하나를 조정하기 위한 UI를 디스플레이할 수 있다. 여기서 내시경 영상 및 혈관 맵 영상의 합성 정도는 내시경 영상 및 혈관 맵 영상 중 어느 영상에 더 부각시킬 것인지를 나타내는 정도가 될 수 있다. 또한, 혈관 맵의 단계는 혈관을 어느 정도까지 디스플레이할 것인지 나타내는 정도가 될 수 있다. 예를 들어, 기설정된 혈관 맵 단계에서 기설정된 임계값 이상의 굵기를 갖는 혈관 만을 디스플레이할 수 있다. Also, the display unit 140 may display a UI for adjusting at least one of the degree of synthesis of the endoscopic image and the blood vessel map image, the step of the blood vessel map, and the color of the blood vessel map. Here, the degree of synthesis of the endoscopic image and the blood vessel map image may be a degree indicating which of the endoscopic image and the blood vessel map image is to be more emphasized. Further, the step of the blood vessel map may be a degree indicating how much the blood vessel is to be displayed. For example, it is possible to display only blood vessels having a thickness greater than a predetermined threshold value in a predetermined vessel map step.

또한, 혈관 맵의 색상은 혈관을 디스플레이하는 색상이 될 수 있다.Further, the color of the blood vessel map may be a color for displaying blood vessels.

상술한 바와 같이 본 발명에 따르면, 다양한 진단 기기에서 다양한 형태로 영상을 디스플레이하여 진단에 도움을 줄 수 있게 된다. 예를 들어, 내시경 영상의 경우 혈관 맵 디스플레이를 통해 병변의 특징을 도출함으로써 진단 시 도움을 줄 수 있게 된다. X-ray의 경우 결과 영상에 대해 혈관 등의 부분을 강조하여 보여줄 수 있으며, CT/MRI의 경우 필요시 혈관 및 미세 신경 등을 강조하여 보여줄 수 있게 된다. As described above, according to the present invention, it is possible to display images in various forms in various diagnostic apparatuses to help diagnosis. For example, in the case of an endoscopic image, it is possible to help the diagnosis by deriving the characteristics of a lesion through a blood vessel map display. In the case of X-ray, it is possible to emphasize the part of blood vessels and the like in the result image, and in the case of CT / MRI, it is possible to emphasize blood vessels and micro nerves when necessary.

도 2는 본 발명의 일 실시 예에 따른 혈관 맵 생성부의 세부 구성을 나타내는 블럭도이다. 2 is a block diagram illustrating a detailed configuration of a blood vessel map generator according to an embodiment of the present invention.

도 2에 따르면, 혈관 맵 생성부(130)는 스펙트럼 영상 생성부(131), 컬러 분석부(132) 및 에지 추출부(133)를 포함한다. 2, the blood vessel map generator 130 includes a spectral image generator 131, a color analyzer 132, and an edge extractor 133.

스펙트럼 영상 생성부(131)는 수신된 내시경 영상을 기초로 스펙트럼 영상을 생성한다. 예를 들어, 스펙트럼 영상 생성부(131)는 수신된 내시경 영상으로부터 코히런트 빔을 형성하여 스펙트럼 영상을 생성할 수 있다. 경우에 따라서는 생성된 스펙트럼 영상을에서 노이즈를 제거할 수 있다. 예를 들어, 스펙트럼 영상을 다수의 영역으로 분할하고, 각 영역 내에서 소정 크기의 강도(Intensity)를 갖는 픽셀들의 평균 강도(Average Intensity)를 산출하고 산출된 평균 강도들을 비교하여 가장 작은 평균 강도를 갖는 영역을 검출한다. 여기서, 최저의 평균 강도를 갖는 영역은 스펙트럼 영상에서 스펙트럼이 존재하지 않고 노이즈만 존재하는 영역을 의미한다. 이 경우, 최저의 평균 강도를 갖는 영역의 히스토그램을 분석하여 노이즈의 최고 강도를 검출하고, 검출된 노이즈의 최고 강도를 스펙트럼 영상에서 노이즈와 스펙트럼을 구분하는 임계값으로 설정한다. 이 후, 설정된 임계값에 기초하여 스펙트럼 영상에서 노이즈를 제거한다. 즉, 설정된 임계값에 기초하여 노이즈를 포함하는 스펙트럼 영상에서 노이즈를 제거함으로써, 스펙트럼만을 포함하는 스펙트럼 영상을 생성할 수 있다. The spectral image generation unit 131 generates a spectral image based on the received endoscopic image. For example, the spectral image generator 131 may generate a spectral image by forming a coherent beam from the received endoscopic image. In some cases, noise may be removed from the generated spectral image. For example, the spectral image is divided into a plurality of regions, an average intensity of pixels having a predetermined intensity in each region is calculated, and the calculated average intensities are compared to determine the smallest average intensity Is detected. Here, the region having the lowest average intensity means a region in which there is no spectrum but only noise in the spectral image. In this case, the histogram of the region having the lowest average intensity is analyzed to detect the highest intensity of the noise, and the highest intensity of the detected noise is set as a threshold value for distinguishing noise and spectrum from the spectrum image. Thereafter, the noise is removed from the spectral image based on the set threshold value. That is, by removing noise from a spectral image including noise based on a set threshold value, a spectral image including only a spectrum can be generated.

컬러 분석부(132)는 생성된 스펙트럼 영상의 컬러 특성을 분석한다. 컬러 특성을 분석하는 방법은 종래 기술과 동일하므로 자세한 설명을 생략하도록 한다. The color analyzer 132 analyzes the color characteristics of the generated spectral image. Since the method of analyzing the color characteristics is the same as that of the conventional art, a detailed description will be omitted.

또한, 에지 추출부(133)는 컬러 분석부(132)를 통해 분석된 컬러 특성을 기초로 스펙트럼 영상에 포함된 에지를 추출한다. 여기서, 에지는 분석된 컬러 특성을 기초로 밝기가 높은 값에서 낮은 값으로 또는 낮은 값에서 높은 값으로 변화하는 경계에 해당하는 값으로 검출될 수 있다. In addition, the edge extracting unit 133 extracts edges included in the spectral image based on the color characteristics analyzed through the color analyzing unit 132. Here, the edge can be detected as a value corresponding to a boundary where the brightness changes from a high value to a low value or from a low value to a high value based on the analyzed color characteristics.

도 3은 본 발명의 또 다른 실시 예에 따른, 영상 처리 장치(100')의 구성을 나타내는 블럭도를 도시한 도면이다. 도 3을 참조하면, 영상 처리 장치(100)는 영상 수신부(110), 영상 처리부(120), 혈관 맵 생성부(130), 디스플레이부(140), 제어부(150), UI 처리부(160), 사용자 인터페이스부(170) 및 저장부(180)를 포함한다. FIG. 3 is a block diagram showing a configuration of an image processing apparatus 100 'according to another embodiment of the present invention. 3, the image processing apparatus 100 includes an image receiving unit 110, an image processing unit 120, a blood vessel map generating unit 130, a display unit 140, a control unit 150, a UI processing unit 160, A user interface unit 170 and a storage unit 180.

한편, 도 3에 도시된 구성요소 중 도 1에 도시된 구성요소와 중복되는 부분에 대해서는 자세한 설명을 생략하도록 한다. 3 will not be described in detail. As shown in FIG.

제어부(150)는 영상 처리 장치(100')의 전체적인 동작을 제어하는 기능을 한다. The control unit 150 controls the overall operation of the image processing apparatus 100 '.

예를 들어, 제어부(150)는 UI를 통해 선택된 영상 타입에 대응되는 영상이 디스플레이될 수 있도록 관련된 구성 요소를 제어하는 기능을 한다. 또한, UI를 통해 선택된 혈관 맵 단계, 혈관 맵 색상, 내시경 영상 및 혈관 맵 영상의 합성 정도에 기초하여 대응되는 영상이 디스플레이될 수 있도록 관련된 구성 요소를 제어하는 기능을 한다. For example, the control unit 150 controls a related component so that an image corresponding to a selected image type can be displayed through the UI. In addition, it controls the related components so that a corresponding image can be displayed based on the degree of combination of the selected blood vessel map step, the blood vessel map color, the endoscopic image, and the blood vessel map image through the UI.

또한, 제어부(150)는 사용자 조작에 따라 디스플레이된 영상이 축소되거나, 확대되어 디스플레이되도록 관련된 구성 요소를 제어하는 기능을 한다. In addition, the control unit 150 controls the related components so that the displayed image is reduced or enlarged according to a user's operation.

한편, 제어부(150)는 RAM(151), ROM(152), 메인 CPU(153), 그래픽 처리부(154), 제1 내지 n 인터페이스(155-1 ~ 155-n), 버스(156)를 포함한다.The control unit 150 includes a RAM 151, a ROM 152, a main CPU 153, a graphics processing unit 154, first to n interfaces 155-1 to 155-n, and a bus 156 do.

RAM(151), ROM(152), 메인 CPU(153), 그래픽 처리부(154), 제1 내지 n 인터페이스(155-1 ~ 155-n) 등은 버스(156)를 통해 서로 연결될 수 있다. The RAM 151, the ROM 152, the main CPU 153, the graphics processing unit 154, the first through n interfaces 155-1 through 155-n, etc. may be connected to each other via the bus 156. [

제1 내지 n 인터페이스(155-1 내지 155-n)는 상술한 각종 구성요소들과 연결된다. 인터페이스들 중 하나는 네트워크를 통해 외부 장치와 연결되는 네트워크 인터페이스가 될 수도 있다.The first to n interfaces 155-1 to 155-n are connected to the various components described above. One of the interfaces may be a network interface connected to an external device via a network.

메인 CPU(153)는 저장부(180)에 액세스하여, 저장부(180)에 저장된 O/S를 이용하여 부팅을 수행한다. 그리고, 저장부(180)에 저장된 각종 프로그램, 컨텐츠, 데이터 등을 이용하여 다양한 동작을 수행한다. The main CPU 153 accesses the storage unit 180 and performs booting using the O / S stored in the storage unit 180. [ Then, various operations are performed using various programs, contents, data, and the like stored in the storage unit 180.

ROM(152)에는 시스템 부팅을 위한 명령어 세트 등이 저장된다. 턴온 명령이 입력되어 전원이 공급되면, 메인 CPU(153)는 ROM(152)에 저장된 명령어에 따라 저장부(180)에 저장된 O/S를 RAM(151)에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, 메인 CPU(153)는 저장부(180)에 저장된 각종 어플리케이션 프로그램을 RAM(151)에 복사하고, RAM(151)에 복사된 어플리케이션 프로그램을 실행시켜 각종 동작을 수행한다. The ROM 152 stores a command set for booting the system and the like. When the turn-on command is input and power is supplied, the main CPU 153 copies the O / S stored in the storage unit 180 to the RAM 151 according to the instruction stored in the ROM 152, executes O / S Boot the system. When the booting is completed, the main CPU 153 copies various application programs stored in the storage unit 180 to the RAM 151, executes the application program copied to the RAM 151, and performs various operations.

그래픽 처리부(154)는 연산부(미도시) 및 렌더링부(미도시)를 이용하여 아이콘, 이미지, 텍스트 등과 같은 다양한 객체를 포함하는 화면을 생성한다. 연산부(미도시)는 화면의 레이아웃에 따라 각 객체들이 표시될 좌표값, 형태, 크기, 컬러 등과 같은 속성값을 연산한다. 렌더링부(미도시)는 연산부(미도시)에서 연산한 속성값에 기초하여 객체를 포함하는 다양한 레이아웃의 화면을 생성한다. 렌더링부(미도시)에서 생성된 화면은 디스플레이부(110)의 디스플레이 영역 내에 표시된다.The graphic processing unit 154 generates a screen including various objects such as an icon, an image, and a text using an operation unit (not shown) and a rendering unit (not shown). The operation unit (not shown) calculates an attribute value such as a coordinate value, a shape, a size, and a color to be displayed by each object according to the layout of the screen. The rendering unit (not shown) creates screens of various layouts including the objects based on the attribute values calculated by the operation unit (not shown). The screen generated in the rendering unit (not shown) is displayed in the display area of the display unit 110.

UI 처리부(160)는 다양한 형태의 GUI를 생성할 수 있다. The UI processing unit 160 can generate various types of GUIs.

또한, UI 처리부(160)는 다양한 UI 화면을 2D 또는 3D 형태로 처리/생성하는 기능을 한다. 여기서, UI 화면은 상술한 바와 같이 영상 타입을 선택하기 위한 UI 화면, 다양한 디스플레이 상태를 조정하기 위한 UI 화면이 될 수 있다. In addition, the UI processing unit 160 functions to process / generate various UI screens in 2D or 3D form. Here, the UI screen may be a UI screen for selecting a video type and a UI screen for adjusting various display states as described above.

또한, UI 처리부(160)는 UI 요소의 2D/3D 전환, 투명도, 색상, 크기, 형태 및 위치 조정, 하이라이트, 애니메이션 효과 등의 작업을 수행할 수 있다.In addition, the UI processing unit 160 can perform operations such as 2D / 3D conversion of UI elements, transparency, color, size, shape and position adjustment, highlighting, and animation effects.

사용자 인터페이스부(170)는 사용자 명령을 입력받아 제어부(150)에 전달하기 위한 입력 수단으로써, 입력 패널로 구현될 수 있다. 여기서, 입력 패널은 터치패드(Touch Pad) 혹은 각종 기능키, 숫자키, 특수키, 문자키 등을 구비한 키패드(Key Pad) 또는 터치스크린(Touch Screen) 방식으로 이루어질 수 있다. The user interface unit 170 is an input unit for receiving a user command and transmitting the user command to the control unit 150, and may be implemented as an input panel. Here, the input panel may be a key pad or a touch screen having a touch pad, various function keys, numeric keys, special keys, and character keys.

구체적으로, 사용자 인터페이스부(170)는 디스플레이부(140)에 디스플레이되는 다양한 메뉴 항목 중 하나의 항목을 선택하기 위한 사용자 명령을 입력받을 수 있다. The user interface unit 170 may receive a user command for selecting one of various menu items displayed on the display unit 140. [

저장부(180)는 영상 처리 장치(100')를 구동하고 제어하기 위한 다양한 데이터 및 프로그램을 저장한다. 예를 들어, 제어부(180)는 디스플레이부(140)에 디스플레이되는 다양한 UI 화면을 구성하기 위한 UI 요소에 대한 데이터를 저장할 수 있다. The storage unit 180 stores various data and programs for driving and controlling the image processing apparatus 100 '. For example, the control unit 180 may store data on UI elements for configuring various UI screens displayed on the display unit 140.

한편, 도면에는 도시되지 않았지만, 영상 처리 장치(100')가 내시경 장치로 구현되는 경우, 영상 처리 장치(100')는 채내 표면을 촬상하기 위한 조명을 제공하는 광원부(미도시), 체내 표면을 촬상하는 촬상부(미도시), 광원부(미도시)에서 방출되는 광을 체강 내로 제공하여 체강 내의 특정 부위를 조명하는 기능을 하는 광 전달 부재(미도시)를 등을 더 포함할 수 있다. Although not shown in the drawing, when the image processing apparatus 100 'is implemented as an endoscope apparatus, the image processing apparatus 100' includes a light source unit (not shown) for providing illumination for imaging the surface of the object, (Not shown) that functions to illuminate a specific region in the body cavity by providing light emitted from an imaging unit (not shown) for capturing an image and a light source (not shown) into the body cavity.

도 4는 본 발명의 일 실시 예에 따른 영상 제공 방법을 설명하기 위한 도면이다. 4 is a view for explaining an image providing method according to an embodiment of the present invention.

도 4(a)에 따르면 내시경 영상이 디스플레이되는 화면 상에는 디스플레이되는 영상 타입을 결정하기 위한 UI(410, 420, 430)가 디스플레이될 수 있다.4A, UIs 410, 420, and 430 for determining a type of a displayed image may be displayed on a screen on which an endoscopic image is displayed.

예를 들어, 도시된 바와 같이 디스플레이된 전체 영상에 대한 혈관 맵을 디스플레이하기 위한 "전체 혈관 맵 display" 항목(410), 디스플레이된 전체 영상 중 사용자에 의해 선택된 관심 영역(ROI:Region Of Interest)에 대한 혈관 맵을 디스플레이하기 위한 "관심 영역 혈관 맵 display" 항목(420), 입력된 내시경 영상 자체 및 혈관 맵 영상을 합성하여 디스플레이하기 위한 "입력 영상 + 혈관 맵 display" 항목(430)을 포함하는 UI를 디스플레이할 수 있다. 이 경우, 관심 영역을 선택하기 위한 GUI(421)가 함께 디스플레이될 수 있으며 "관심 영역 혈관 맵 display" 항목(420)이 선택되면, 해당 GUI(421)에 의해 선택된 영역이 디스플레이될 수 있다. For example, a "whole blood vessel map display" item 410 for displaying a blood vessel map for a displayed entire image as shown in FIG. 4, a region 410 of a region of interest (ROI) UI " including an "input image + blood vessel map display" item 430 for synthesizing and displaying the input endoscopic image itself and the blood vessel map image for displaying the blood vessel map for the user Can be displayed. In this case, a GUI 421 for selecting a region of interest may be displayed together, and an area selected by the GUI 421 may be displayed when the item " display of ROI map 420 " is selected.

도 4(b)는 도 4(a)에 도시된 화면에서 "관심 영역 혈관 맵 display" 항목(420)이 선택된 경우를 나타낸다. 4 (b) shows a case where the "display of the area of interest blood vessel map" item 420 is selected on the screen shown in FIG. 4 (a).

도시된 바와 같이 사용자에 의해 선택된 관심 영역(450)에는 그에 대응되는 혈관 맵 영상이 디스플레이되고, 나머지 영역에는 입력 영상이 그대로 디스플레이될 수 있다. As shown in the figure, the blood vessel map image corresponding thereto is displayed in the region of interest 450 selected by the user, and the input image can be displayed as it is in the remaining region.

또한, 혈관 맵 단계를 조정하기 위한 항목(461) 및 혈관 맵 합성 정도를 정하기 위한 항목(462)을 포함하는 UI(460)가 디스플레이될 수 있다. 해당 항목을 통해 사용자는 관심 영역에 디스플레이된 혈관 맵 영상(450)에 대한 혈관 맵 단계 및 혈관 맵와 입력 영상의 합성 정도를 조정할 수 있다. In addition, a UI 460 including an item 461 for adjusting the blood vessel map step and an item 462 for determining the degree of vessel map compositing can be displayed. The user can adjust the blood vessel map step for the blood vessel map image 450 displayed on the ROI and the degree of the combination of the blood vessel map and the input image through the item.

도 5는 본 발명의 다른 실시 예에 따른 영상 제공 방법을 설명하기 위한 도면이다. 5 is a view for explaining an image providing method according to another embodiment of the present invention.

도 5(a)는 입력된 전체 영상에 대한 혈관 맵 영상이 디스플레이된 경우로서, 해당 영상 타입을 제외한 다른 영상 타입으로 변경하기 위한 UI 항목(420, 430, 440)이 디스플레이될 수 있다. FIG. 5A shows a case where a blood vessel map image for the input whole image is displayed, and UI items 420, 430, and 440 for changing to a different image type except the corresponding image type can be displayed.

예를 들어, "관심 영역 혈관 맵 display" 항목(420), "입력 영상 + 혈관 맵 display" 항목(430), 입력 영상 display" 항목(440)이 디스플레이될 수 있다. 또한, 디스플레이된 혈관 맵 영상에서의 혈관 맵 단계를 조정하기 위한 UI 항목(510)이 디스플레이될 수 있다. 해당 UI 항목(510)에서 사용자는 바(bar) 형태의 GUI(511)에 디스플레이된 오브젝트(512)의 위치를 조정하여 디스플레이된 혈관 맵 영상에 대한 혈관 맵 디스플레이 정도를 조정할 수 있다. For example, an item 420 of the "interest area blood vessel map display", an "input image + blood vessel map display" item 430, and an input image display "item 440 may be displayed. A UI item 510 for adjusting the vein map step in the UI 510 may be displayed on the GUI 511. In the corresponding UI item 510 the user may adjust the position of the object 512 displayed in the bar- The degree of display of the blood vessel map with respect to the displayed blood vessel map image can be adjusted.

도 5(b)에 도시된 바와 같이 바(bar) 형태의 GUI(511)에 디스플레이된 오브젝트(512)를 우측 방향으로 이동시키는 경우 혈관 맵이 좀더 선명하고 상세하게 디스플레이될 수 있다. When the object 512 displayed in the bar-shaped GUI 511 is moved in the right direction as shown in FIG. 5 (b), the blood vessel map can be displayed more clearly and in detail.

또한, 도 5(c)에 도시된 바와 같이 바(bar) 형태의 GUI(511)에 디스플레이된 오브젝트(512)가 도 5(b)에 도시된 상태보다 좀더 우측 방향으로 이동되면, 혈관 맵이 더욱더 선명하고 상세하게 디스플레이될 수 있다.5 (c), when the object 512 displayed in the bar-shaped GUI 511 is moved further to the right than the state shown in FIG. 5 (b), the blood vessel map Can be displayed more clearly and in detail.

또한, 도 5(d)에 도시된 바와 같이 바(bar) 형태의 GUI(511)에 디스플레이된 오브젝트(512)가 도 5(c)에 도시된 상태보다 좀더 우측 방향으로 이동되면, 모세 혈관까지 표시될 정도로 혈관 맵이 더욱 상세하게 디스플레이될 수 있다.5 (d), when the object 512 displayed in the bar-shaped GUI 511 is moved to the right direction more than the state shown in Fig. 5 (c), the capillary blood vessels The blood vessel map can be displayed in greater detail so that it is displayed.

도 6은 본 발명의 또 다른 실시 예에 따른 영상 제공 방법을 설명하기 위한 도면이다.  6 is a view for explaining an image providing method according to another embodiment of the present invention.

도 6(a)는 입력 영상 및 혈관 맵 영상이 합성된 타입의 영상이 디스플레이된 경우로서, 해당 영상 타입을 제외한 다른 영상 타입으로 변경하기 위한 UI 항목(410, 420, 440)이 디스플레이될 수 있다. 6A shows a case where an image of a combined type of an input image and a blood vessel map image is displayed, and UI items 410, 420, and 440 for changing to a different image type except the corresponding image type may be displayed .

이 경우, 혈관 맵 합성 정도를 조정하기 위한 항목(611), 혈관 맵 단계를 조정하기 위한 항목(612), 및 혈관 맵 컬러를 조정하기 위한 항목(613)을 포함하는 UI(610)가 디스플레이될 수 있다.In this case, a UI 610 including an item 611 for adjusting the degree of vein map synthesis, an item 612 for adjusting the vein map step, and an item 613 for adjusting the vein map color is displayed .

혈관 맵 합성 정도를 조정하기 위한 항목(611)에서 바(bar) 형태의 GUI에 디스플레이된 오브젝트(611-1)의 이동을 통해 입력 영상과 혈관 맵 영상의 합성 정도를 조정할 수 있다. The degree of combining of the input image and the vein map image can be adjusted through the movement of the object 611-1 displayed in the bar-shaped GUI in the item 611 for adjusting the degree of vein map synthesis.

또한, 혈관 맵 단계를 조정하기 위한 항목(612)에서 바(bar) 형태의 GUI에 디스플레이된 오브젝트(612-1)의 이동을 통해 혈관 맵 영상의 혈관 맵 단계를 조정할 수 있다. Also, in the item 612 for adjusting the blood vessel map step, the blood vessel map step of the blood vessel map image can be adjusted through the movement of the object 612-1 displayed in the bar-shaped GUI.

또한, 혈관 맵 컬러를 조정하기 위한 항목(613)에서 바(bar) 형태의 GUI에 디스플레이된 오브젝트(613-1)의 이동을 통해 혈관 맵 컬러를 조정할 수 있다. 즉, 해당 항목을 통해 혈관 맵을 사용자가 원하는 색상으로 디스플레이할 수 있게 된다. In addition, the vein map color can be adjusted through the movement of the object 613-1 displayed in the bar-shaped GUI in the item 613 for adjusting the vein map color. That is, it is possible to display the blood vessel map in a color desired by the user through the item.

도 6(b)는 도 6(a)에 도시된 영상에서 혈관 맵 합성 정도가 조정된 영상을 도시된다. 6 (b) shows an image in which the degree of vessel vein map synthesis is adjusted in the image shown in Fig. 6 (a).

즉, 도 6(b)에 도시된 바와 같이 혈관 맵 합성 정도를 조정하기 위한 항목(611)에서 바(bar) 형태의 GUI에 디스플레이된 오브젝트(611-1)가 사용자 조작에 따라 우측으로 이동되면, 입력 영상의 비중이 증가되도록 합성된 영상이 디스플레이될 수 있다. That is, as shown in FIG. 6B, when the object 611-1 displayed in the bar-shaped GUI in the item 611 for adjusting the degree of vein map composition is moved to the right according to the user's operation , The synthesized image can be displayed so that the specific gravity of the input image is increased.

또한, 도 6(c)에 도시된 바와 같이 혈관 맵 합성 정도를 조정하기 위한 항목(611)에서 바(bar) 형태의 GUI에 디스플레이된 오브젝트(611-1)가 사용자 조작에 따라 도 6(b)보다 더 우측으로 이동되면, 입력 영상의 비중이 더욱 증가되도록 합성된 영상이 디스플레이될 수 있다. 6 (c), the object 611-1 displayed on the bar-shaped GUI in the item 611 for adjusting the degree of vein map compositing is displayed on the screen of FIG. 6 (b The synthesized image can be displayed so that the specific gravity of the input image is further increased.

도 7은 본 발명의 또 다른 실시 예에 따른 영상 제공 방법을 설명하기 위한 도면이다. 7 is a view for explaining an image providing method according to another embodiment of the present invention.

본 발명의 다른 실시 예에 따르면, 하나의 화면 상에 다양한 타입의 영상이 함께 디스플레이될 수도 있다. According to another embodiment of the present invention, various types of images may be displayed together on one screen.

예를 들어, 도시된 바와 같이 입력 영상(720), 혈관 맵 영상(730), 입력 영상+혈관 맵 영상의 합성 영상(740), 및 다른 색상을 갖는 혈관 맵 영상(750)이 분할된 화면 상에 디스플레이될 수 있다. For example, the input image 720, the vein map image 730, the combined image 740 of the input image + vein map image, and the vein map image 750 of different colors are displayed on a divided screen Lt; / RTI >

또한, 혈관 맵 단계를 조정하기 위한 UI(710)가 디스플레이될 수 있으며 해당 UI(710)에는 바(bar) 형태의 GUI(711) 및 해당 GUI(711)를 통해 혈관 맵 단계를 조정하기 위한 오브젝트(711-1)가 포함될 수 있다. In addition, a UI 710 for adjusting the blood vessel map step can be displayed, and an object 710 for adjusting the blood vessel map step through the GUI 711 in the form of a bar and the GUI 711 in the UI 710 can be displayed. (711-1).

도 8은 본 발명의 일 실시 예에 따른 영상 처리 장치의 제어 방법을 설명하기 위한 흐름도이다. 8 is a flowchart illustrating a method of controlling an image processing apparatus according to an exemplary embodiment of the present invention.

도 8에서 도시된 영상 처리 장치의 제어 방법에 따르면, 내시경 영상을 수신하면(S810), 수신된 내시경 영상을 신호 처리 한다(S820).According to the control method of the image processing apparatus shown in FIG. 8, when the endoscopic image is received (S810), the received endoscopic image is processed (S820).

이어서, 신호 처리된 내시경 영상에서 혈관 형태를 추출하고, 추출된 혈관 형태에 기초하여 혈관 맵 영상을 생성한다(S830).Subsequently, a blood vessel shape is extracted from the signal-processed endoscopic image, and a blood vessel map image is generated based on the extracted blood vessel shape (S830).

이 후, 생성된 혈관 맵 영상을 디스플레이한다(S840).Thereafter, the generated blood vessel map image is displayed (S840).

또한, 디스플레이되는 영상 타입을 선택하기 위한 UI를 디스플레이하고, 해당 UI에서 혈관 맵 영상이 선택되면, 혈관 맵 영상을 생성할 수 있다. 이 경우, 혈관 맵 영상 그 자체가 선택되는 경우 뿐 아니라 내시경 영상 및 혈관 맵 영상이 합성된 합성 영역이 선택되는 경우까지 포함할 수 있다.In addition, a UI for selecting a displayed image type is displayed, and when a blood vessel map image is selected in the UI, a blood vessel map image can be generated. In this case, not only the case where the blood vessel map image itself is selected, but also the case where the combined region in which the endoscope image and the blood vessel map image are combined is selected.

한편, 디스플레이되는 영상 타입을 선택하기 위한 UI는, 혈관 맵 영상을 선택하기 위한 제1 항목, 내시경 영상 및 혈관 맵 영상이 합성된 형태의 합성 영상을 선택하기 위한 제2 항목 및, 내시경 영상을 선택하기 위한 제3 항목을 포함할 수 있다. The UI for selecting a displayed image type includes a first item for selecting a blood vessel map image, a second item for selecting a composite image in which an endoscope image and a blood vessel map image are synthesized, and a second item for selecting an endoscope image And a third item to be used for the first time.

또한, 내시경 영상 및 혈관 맵 영상의 합성 정도, 혈관 맵의 단계 및 혈관 맵 색상 중 적어도 하나를 조정하기 위한 UI를 디스플레이할 수 있다. 이에 따라 해당 UI를 통해 선택된 정보에 기초하여 대응되는 형태의 영상을 디스플레이할 수 있다. In addition, a UI for adjusting at least one of the degree of synthesis of the endoscopic image and the blood vessel map image, the stage of the blood vessel map, and the color of the blood vessel map can be displayed. Accordingly, it is possible to display an image of a corresponding type based on the information selected through the UI.

또한, 수신된 내시경 영상을 신호 처리하는 단계는, 수신된 내시경 영상에 포함된 노이즈를 제거하고, 노이즈가 제거된 내시경 영상에 대한 디블러링(deblurring)을 수행할 수 있다. In addition, in the step of processing the received endoscopic image, noise included in the received endoscopic image may be removed, and deburring may be performed on the endoscopic image from which the noise is removed.

또한, 혈관 맵 영상을 생성하는 단계는, 수신된 내시경 영상을 기초로 스펙트럼 영상을 생성하고, 생성된 스펙트럼 영상의 컬러 특성을 분석한 후, 컬러 특성을 기초로 스펙트럼 영상에 포함된 에지를 추출할 수 있다. The generating of the blood vessel map image may include generating a spectral image based on the received endoscopic image, analyzing color characteristics of the generated spectral image, and extracting an edge included in the spectral image based on the color characteristic .

상술한 실시 예에 따르면, 내시경 영상에 대한 혈관 맵 영상을 디스플레이할 수 있게 되므로, 사용자의 편의성이 향상된다. According to the embodiment described above, since the blood vessel map image for the endoscopic image can be displayed, convenience for the user is improved.

상술한 바와 같이 본 발명에 따르면, 혈관 맵 만을 디스플레이하고, 그 단계를 조절함으로 병변의 상태를 분석, 관찰하는 데 도움을 줄 수 있게 된다. As described above, according to the present invention, it is possible to display and display only the blood vessel map, and to control the steps to help analyze and observe the state of the lesion.

또한, 사용자의 설정에 따라서 관심 영역에 대해서만 혈관 맵을 디스플레이하고 그 단계를 조절함으로 병변의 상태를 분석, 관찰하는 데 도움을 줄 수 있게 된다. In addition, according to the user's setting, it is possible to display and analyze the blood vessel map only for the region of interest and to help analyze and observe the state of the lesion by adjusting the step.

또한, 입력 영상에 대해 혈관을 합성하거나 혈관만을 강조하여 디스플레이함으로서 병변 진단에 도움을 줄 수 있게 된다. In addition, it is possible to help diagnose a lesion by synthesizing blood vessels for the input image or displaying only the blood vessels with emphasis.

다만, 상술한 실시 예에서는 혈관 맵 영상을 생성하여 디스플레이하는 경우에 대해서만 설명하였지만, 혈관이 아닌 다른 요소들에서 본 발명에 따른 기술이 적용될 수 있음을 물론이다. In the above-described embodiment, only the case of generating and displaying a blood vessel map image has been described, but it goes without saying that the technique according to the present invention can be applied to other elements than the blood vessels.

한편, 상술한 다양한 실시 예에 따른 내시경 장치의 제어 방법은 프로그램으로 구현되어 내시경 장치에 제공될 수 있다.Meanwhile, the control method of the endoscope apparatus according to various embodiments described above may be implemented by a program and provided to the endoscope apparatus.

일 예로, 수신된 내시경 영상을 신호 처리하고, 신호 처리된 내시경 영상에서 혈관 형태를 추출하고, 추출된 혈관 형태에 기초하여 혈관 맵 영상을 생성하는 구성을 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다. For example, a program for performing a signal processing of a received endoscopic image, extracting a blood vessel shape from a signal-processed endoscopic image, and generating a blood vessel map image based on the extracted blood vessel shape is stored in a non-transitory readable medium non-transitory computer readable medium may be provided.

비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.A non-transitory readable medium is a medium that stores data for a short period of time, such as a register, cache, memory, etc., but semi-permanently stores data and is readable by the apparatus. In particular, the various applications or programs described above may be stored on non-volatile readable media such as CD, DVD, hard disk, Blu-ray disk, USB, memory card, ROM,

또한, 전자 장치에 대해 도시한 상술한 블록도에서는 버스(bus)를 미도시하였으나, 전자 장치에서 각 구성요소 간의 통신은 버스를 통해 이루어질 수도 있다. 또한, 각 디바이스에는 상술한 다양한 단계를 수행하는 CPU, 마이크로 프로세서 등과 같은 프로세서가 더 포함될 수도 있다. In addition, although a bus is not shown in the above-described block diagram of the electronic apparatus, the communication between the respective components in the electronic apparatus may be performed via the bus. Further, each device may further include a processor such as a CPU, a microprocessor, or the like that performs the various steps described above.

또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, It will be understood by those skilled in the art that various changes in form and detail may be made therein without departing from the spirit and scope of the present invention.

100: 영상 처리 장치 110: 영상 수신부
120: 영상 처리부 130: 혈관 맵 생성부
140: 디스플레이부100: image processing apparatus 110: image receiving unit
120: image processor 130: blood vessel map generator
140:

Claims (14)

영상을 수신하는 영상 수신부;
상기 수신된 영상을 신호 처리하는 영상 처리부;
상기 신호 처리된 영상에서 혈관 형태를 추출하고, 추출된 혈관 형태에 기초하여 혈관 맵 영상을 생성하는 혈관 맵 생성부; 및
상기 생성된 혈관 맵 영상을 디스플레이하는 디스플레이부;를 포함하는 영상 처리 장치. An image receiving unit for receiving an image;
An image processor for signal processing the received image;
A blood vessel map generation unit for extracting a blood vessel shape from the signal-processed image and generating a blood vessel map image based on the extracted blood vessel shape; And
And a display unit for displaying the generated blood vessel map image. 제1항에 있어서,
상기 디스플레이부는,
디스플레이되는 영상 타입을 선택하기 위한 UI를 디스플레이하는 것을 특징으로 하는 영상 처리 장치. The method according to claim 1,
The display unit includes:
And displays a UI for selecting a video type to be displayed. 제2항에 있어서,
상기 혈관 맵 생성부는,
상기 영상 타입을 선택하기 위한 UI를 통해 선택된 영상 타입에 따라 상기 혈관 맵 영상을 생성하는 것을 특징으로 하는 영상 처리 장치. 3. The method of claim 2,
The blood vessel map generator may include:
And generates the blood vessel map image according to a selected image type through a UI for selecting the image type. 제2항에 있어서,
상기 영상 타입을 선택하기 위한 UI는,
상기 혈관 맵 영상을 선택하기 위한 제1 항목, 상기 영상 및 상기 혈관 맵 영상이 합성된 형태의 영상을 선택하기 위한 제2 항목 및, 상기 영상을 선택하기 위한 제3 항목을 포함하는 것을 특징으로 하는 영상 처리 장치. 3. The method of claim 2,
The UI for selecting the video type includes:
A first item for selecting the blood vessel map image, a second item for selecting an image in which the image and the blood vessel map image are combined, and a third item for selecting the image. Image processing apparatus. 제1항에 있어서,
상기 디스플레이부는,
상기 영상 및 상기 혈관 맵 영상의 합성 정도, 상기 혈관 맵의 단계 및 상기 혈관 맵 색상 중 적어도 하나를 조정하기 위한 UI를 디스플레이하는 것을 특징으로 하는 영상 처리 장치. The method according to claim 1,
The display unit includes:
And a UI for adjusting at least one of a degree of synthesis of the image and the blood vessel map image, a step of the blood vessel map, and a color of the blood vessel map. 제1항에 있어서,
상기 영상 처리부는,
상기 수신된 영상에 포함된 노이즈를 제거하는 노이즈 제거부; 및
상기 노이즈가 제거된 영상에 대한 디블러링(deblurring)을 수행하는 디블러링부;를 포함하는 영상 처리 장치.The method according to claim 1,
Wherein the image processing unit comprises:
A noise removing unit for removing noise included in the received image; And
And a deblurring unit for performing deblurring on the noise-removed image. 제1항에 있어서,
상기 혈관 맵 생성부는,
상기 신호 처리된 영상을 기초로 스펙트럼 영상을 생성하는 스펙트럼 영상 생성부;
상기 생성된 스펙트럼 영상의 컬러 특성을 분석하는 컬러 분석부; 및
상기 컬러 특성을 기초로 상기 스펙트럼 영상에 포함된 에지를 추출하는 에지 추출부;를 포함하는 것을 특징으로 하는 영상 처리 장치.The method according to claim 1,
The blood vessel map generator may include:
A spectral image generation unit for generating a spectral image based on the signal-processed image;
A color analyzer for analyzing color characteristics of the generated spectral image; And
And an edge extracting unit for extracting an edge included in the spectral image based on the color characteristic. 영상을 수신하는 단계;
상기 수신된 영상을 신호 처리하는 단계;
상기 신호 처리된 영상에서 혈관 형태를 추출하고, 추출된 혈관 형태에 기초하여 혈관 맵 영상을 생성하는 단계; 및
상기 생성된 혈관 맵 영상을 디스플레이하는 단계;를 포함하는 영상 처리 장치의 제어 방법.Receiving an image;
Processing the received video signal;
Extracting a blood vessel shape from the signal-processed image, and generating a blood vessel map image based on the extracted blood vessel shape; And
And displaying the generated blood vessel map image. 제8항에 있어서,
디스플레이되는 영상 타입을 선택하기 위한 UI를 디스플레이하는 단계;를 더 포함하는 것을 특징으로 하는 영상 처리 장치의 제어 방법.9. The method of claim 8,
And displaying a UI for selecting a video type to be displayed. 제9항에 있어서,
상기 혈관 맵 영상을 생성하는 단계는,
상기 영상 타입을 선택하기 위한 UI를 통해 선택된 영상 타입에 따라 상기 혈관 맵 영상을 생성하는 것을 특징으로 하는 영상 처리 장치의 제어 방법.10. The method of claim 9,
Wherein the step of generating the blood vessel map image comprises:
And the blood vessel map image is generated according to a selected image type through a UI for selecting the image type. 제10항에 있어서,
상기 영상 타입을 선택하기 위한 UI는,
상기 혈관 맵 영상을 선택하기 위한 제1 항목, 상기 영상 및 상기 혈관 맵 영상이 합성된 형태의 영상을 선택하기 위한 제2 항목 및, 상기 영상을 선택하기 위한 제3 항목을 포함하는 것을 특징으로 하는 영상 처리 장치의 제어 방법.11. The method of claim 10,
The UI for selecting the video type includes:
A first item for selecting the blood vessel map image, a second item for selecting an image in which the image and the blood vessel map image are combined, and a third item for selecting the image. A method of controlling an image processing apparatus. 제8항에 있어서,
상기 영상 및 상기 혈관 맵 영상의 합성 정도, 상기 혈관 맵의 단계 및 상기 혈관 맵 색상 중 적어도 하나를 조정하기 위한 UI를 디스플레이하는 단계;를 더 포함하는 것을 특징으로 하는 영상 처리 장치의 제어 방법. 9. The method of claim 8,
And displaying a UI for adjusting at least one of a degree of synthesis of the image and the blood vessel map image, a step of the blood vessel map, and a color of the blood vessel map. 제8항에 있어서,
상기 수신된 영상을 신호 처리하는 단계는,
상기 수신된 영상에 포함된 노이즈를 제거하는 단계; 및
상기 노이즈가 제거된 영상에 대한 디블러링(deblurring)을 수행하는 단계;를 포함하는 것을 특징으로 하는 영상 처리 장치의 제어 방법.9. The method of claim 8,
The step of signal processing the received image comprises:
Removing noise included in the received image; And
And performing deblurring on the image from which the noise has been removed. 제8항에 있어서,
상기 혈관 맵 영상을 생성하는 단계는,
상기 신호 처리된 영상을 기초로 스펙트럼 영상을 생성하는 단계;
상기 생성된 스펙트럼 영상의 컬러 특성을 분석하는 단계; 및
상기 컬러 특성을 기초로 상기 스펙트럼 영상에 포함된 에지를 추출하는 단계;를 포함하는 것을 특징으로 하는 영상 처리 장치의 제어 방법.



9. The method of claim 8,
Wherein the step of generating the blood vessel map image comprises:
Generating a spectral image based on the signal-processed image;
Analyzing a color characteristic of the generated spectral image; And
And extracting an edge included in the spectral image based on the color characteristic.



KR1020130015958A 2013-02-14 2013-02-14 image processing apparatus and control method thereof KR20140102515A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130015958A KR20140102515A (en) 2013-02-14 2013-02-14 image processing apparatus and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130015958A KR20140102515A (en) 2013-02-14 2013-02-14 image processing apparatus and control method thereof

Publications (1)

Publication Number Publication Date
KR20140102515A true KR20140102515A (en) 2014-08-22

Family

ID=51747298

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130015958A KR20140102515A (en) 2013-02-14 2013-02-14 image processing apparatus and control method thereof

Country Status (1)

Country Link
KR (1) KR20140102515A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017014406A1 (en) * 2015-07-17 2017-01-26 삼성전자 주식회사 Tomographic device and tomographic image processing method according to same
KR20200142807A (en) * 2019-06-13 2020-12-23 연세대학교 원주산학협력단 Apparatus for training eye movement and method for operating the same

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017014406A1 (en) * 2015-07-17 2017-01-26 삼성전자 주식회사 Tomographic device and tomographic image processing method according to same
KR20200142807A (en) * 2019-06-13 2020-12-23 연세대학교 원주산학협력단 Apparatus for training eye movement and method for operating the same

Similar Documents

Publication Publication Date Title
US9595088B2 (en) Method of, and apparatus for, visualizing medical image data
CN111295127B (en) Examination support device, endoscope device, and recording medium
JP6119719B2 (en) Medical skin inspection apparatus, method and program for inspecting skin lesions
US8848996B2 (en) System for suppressing vascular structure in medical images
JP5897308B2 (en) Medical image processing device
JP2007151881A (en) Blood stream kinetics analyzing apparatus
JP2014200339A (en) Medical image processing device, x-ray diagnostic apparatus, and medical image processing program
WO2018020558A1 (en) Image processing device, image processing method, and program
US8244013B2 (en) Medical image data processing and interventional instrument identification system
CN104968276B (en) Image processing apparatus and region extraction method
JP6273640B2 (en) Captured image display device
JP6563177B2 (en) Medical image processing apparatus and medical image processing program
WO2014061462A1 (en) Medical image display device
US20100188398A1 (en) X-ray tool for 3d ultrasound
JP4283303B2 (en) Image display control device, image display control program, and image display control method
WO2017175452A1 (en) Image processing device, image pickup device, image processing method, and program
US10324582B2 (en) Medical image display apparatus, method for controlling the same
KR20140102515A (en) image processing apparatus and control method thereof
JP2010131315A (en) Medical image processor and medical image processing program
JP2008512161A (en) User interface for CT scan analysis
JPWO2019156140A1 (en) Image processing device, image processing method and image processing program
JP5849791B2 (en) Image processing device
US10497103B2 (en) Information processing apparatus, information processing system, information processing method, and recording medium
JP6416350B2 (en) Medical image processing apparatus, X-ray diagnostic apparatus, and medical image processing program
JP2013078382A (en) Panoramic image producing program

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid