KR100931947B1

KR100931947B1 - 캡슐 내시경에 의하여 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법

Info

Publication number: KR100931947B1
Application number: KR1020090051237A
Authority: KR
Inventors: 김태권
Original assignee: 주식회사 인트로메딕
Priority date: 2009-06-10
Filing date: 2009-06-10
Publication date: 2009-12-15

Abstract

본 발명은 캡슐 내시경에 의하여 촬영된 소화 기관의 이미지들의 디스플레이 프로세싱 방법으로서, 세로 방향으로의 다수의 열과 가로 방향으로의 다수의 칼럼으로 이루어진 다수의 빈 칸에 상기 이미지들이 축소된 형태로 채워진 소스 맵뷰(source map view)로 상기 이미지들을 디스플레이하는 단계와; 상기 소스 맵뷰로부터 상기 소스 맵뷰의 이미지들의 일부로 서브 맵뷰를 생성하는 단계를 포함하여, 상기 소스 맵뷰로부터 분리되거나 복사된 서브 맵뷰를 이미지들의 촬영 순서에 무관하게 위치를 이동시킬 수 있도록 함으로써, 캡슐 내시경을 이용하여 촬영한 소화 기관의 수십여만장이나 되는 이미지들을 촬영 순서에 관계없이 살펴볼 수 있을 뿐만 아니라, 진단자에 의해 병증으로 의심되는 이미지들을 군(群)별로 따로 모아 촬영 순서에 관계없이 병증별로 따로 추려 분류하는 것도 가능해지며, 서브 맵뷰에 따로 추려진 이미지군(群) 별로 색처리를 행하여 진단자가 인체 시각 시스템의 결함에 의해 병증을 놓치는 것을 최소화할 수 있도록 하는 캡슐 내시경의 촬영 이미지 프로세싱 방법을 제공한다.

맵뷰, 소스 맵뷰, 서브 맵뷰, 이미지 군, 캡슐 내시경, 요약 맵뷰

Description

캡슐 내시경에 의하여 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법 {METHOD OF DISPLAY PROCESSING IMAGES IN DIGEST ORGANS OBTAINED BY CAPSULE ENDOSCOPE}

본 발명은 캡슐 내시경에 의하여 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법에 관한 것으로, 보다 상세하게는, 캡슐 내시경을 이용하여 촬영한 소화 기관의 수십여만장이나 되는 이미지들을 촬영 순서에 관계없이 살펴볼 수 있도록 맵뷰로 디스플레이하고, 진단 편의를 위한 다양한 기준에 의하여 상기 맵뷰의 일부 이미지들로 서브 맵뷰를 생성하여 공통된 주제별로 이미지들을 군(群)별로 묶어 분류 정리할 수 있으며, 이미지들이 모여 이루어진 맵뷰를 색처리함으로써 불완전한 인체의 시각 시스템에 의해 감지하기 어려운 병증을 쉽게 구별되어 알아볼 수 있도록 함으로써, 병증이나 질병의 진단을 보다 정확하고 신속하며 편리하게 할 수 있도록 하는 소화 기관 이미지들의 디스플레이 프로세싱 방법에 관한 것이다.

인체의 소화 기관은 식도, 위장, 소장 (다시 말하면, 십이지장, 공장, 회장) 및 결장을 포함하는 몇가지 다른 기관으로 구성된다. 지금까지, 위경 검사법이나 푸쉬 엔테로스코피 콜로노스코피(push enteroscopy colonoscopy)와 같은 다양한 내시경 방법이 인체의 소화 기관을 시각적으로 보는 진단 도구로 지금까지 사용되어 왔다. 그러나, 이 종래 방법들에 의해서는 소장을 시각적으로 살펴보는 데 있어서 정밀한 진단 검사를 위한 필요조건을 만족시키지 못하였다.

이와 같은 문제점을 처리하기 위해 제한된 한가지 접근법은 영상 비디오 기술을 무선 전송에 통합시킨 무선 캡슐 내시경(Wireless Capsule Endoscope, WCE)을 이용하는 것이었다. 특히, 무선 캡슐 내시경 방식은 예를 들어 직경이 11mm이고 길이가 25mm인 작은 캡슐을 사용한다. 도1에 도시된 바와 같이, 캡슐 내시경(50)은 발광 다이오드(LED)와 마이크로 카메라를 탑재하여, 발광 다이오드에 의해 장기(41)의 내벽을 밝게 하고, 마이크로 카메라에 의해 소화 기관의 이미지를 촬영하여 피검사자(40)가 착용하고 있는 수신기(60)로 무선 전송한다. 전송된 이미지 데이터는 프로세싱 시스템(1)으로 전송되어 전문가가 촬영된 이미지를 해석하여 병증이 있는지 여부를 진단한다.

이 때, 캡슐 내시경(50)에 의해 촬영된 이미지들은 캡슐 내시경의 성능에 따라 수만장 내지 수십만장의 소화기관의 이미지들을 촬영하므로, 진단 전문가인 의사가 이와 같이 많은 이미지들을 일일히 살펴보는 것은 매우 지루하고 오랜 시간이 소요되어, 집중력을 갖고 촬영 이미지들을 살펴보지 못하여 잘못된 진단 결과를 초래하는 결과가 야기되기도 한다. 이에 따라, 유럽 등록특허공보 제1474927호는 연속하는 2개 이상의 화면을 동시에 디스플레이하면서 촬영 순서대로 재생하는 디스플레이 프로세싱 기술이 공지되어 있다. 그러나, 유럽 등록특허공보 제1474927호에 기재된 디스플레이 프로세싱 기술도 12여만장의 이미지들을 촬영 순서에 따라 천편일률적으로 살펴보면서 피검사자(40)의 소화 기관(41)에서의 병증 여부를 진단하므로, 화면에 하나의 이미지를 하나씩 살펴보는 것 보다는 진단 시간을 줄일 수 있지만, 여전히 촬영 순서대로 살펴보는 것 이외에 진단할 수 있는 방법이 없으므로, 여전히 지루하고 오랜 시간이 소요되는 문제점이 있었다. 이에 따라, 촬영 순서대로 디스플레이되는 이미지들을 하나하나 살펴보는 데에는 진단자의 집중력이 낮아진 상태로 너무 오랜 시간 동안 기다려야 하므로, 오히려 해당 이미지가 디스플레이되더라도 이를 놓치게 되는 현실적인 오진 가능성 문제도 발생된다.

더욱이, 이와 같이 촬영 순서에 따라 12여만장의 이미지를 하나하나 살펴본 이후에, 병증으로 의심되는 소화 기관(41)의 이미지를 다시 살펴보기 위해서는, 이미 살펴본 촬영 이미지를 다시 촬영 순서대로 빨리 재생하는 것 등에 의해 확인해야 하는 등 번거로고 불필요하게 시간이 낭비되는 문제점도 있었다.

따라서, 진단자가 피검사자(40)의 소화기관(41)의 촬영 이미지를 진단자의 입맛에 맞게 그리고 피검사자(40)의 병력을 고려하여 특정 위치부터 먼저 볼 수 있도록 할 뿐만 아니라, 1회의 진단시에 체크해둔 병증으로 의심되는 이미지들을 촬영 순서와 무관하게 재정리하여, 차후에 병증의 확진을 위해 살펴보는 작업을 간단하고 편리하게 조작할 수 있도록 하는 이미지 디스플레이 프로세싱 방법이 절실히 요구되고 있다.

한편, 상기 종래 기술에서 설명한 장치 등의 구성은 오로지 본 발명의 기술적 배경을 이해하기 위하여 기술한 것으로서, 본 발명의 기술 분야의 당업자에게 이미 알려진 선행 기술을 의미하는 것은 아니다.

본 발명은 상기와 같은 문제점을 해결하기 위하여, 캡슐 내시경을 이용하여 촬영한 소화 기관의 수십여만장이나 되는 이미지들을 맵뷰로 표시함으로써 촬영 순서에 관계없이 진단자의 자유자재로 살펴볼 수 있도록 함으로써, 피검사자의 병력등으로부터 유추되는 병증을 빠른 시간 내에 확인할 수 있도록 하는 소화 기관 이미지들의 디스플레이 프로세싱 방법을 제공하는 것을 그 목적으로 한다.

무엇보다도, 본 발명은 진단자에 의해 상기 맵뷰를 분할하거나 상기 맵뷰의 이미지들을 분리/복사하여 서브 맵뷰를 생성할 수 있도록 함으로써, 다양한 이벤트나 유사도가 낮게 평가된 이미지들을 별도의 서브 맵뷰로 생성하여, 이를 진단에 활용할 수 있도록 하여, 진단의 효율과 편의를 증진시키는 것을 다른 목적으로 한다.

또한, 본 발명은 불완전한 인체의 시각 시스템에 의하여 소화 기관의 주변 색깔과 혼동이 되거나 알아보기 힘든 이미지 상의 병증을 색처리에 의해 분별이 용이해지도록 함으로써, 피검사자의 소화 기관 내에 미약한 병증이 발현되더라도 놓치지 않고 찾아낼 수 있도록 보조함으로써 진단의 정확성을 향상시키는 것을 또 다른 목적으로 한다.

본 발명은 상기와 같은 목적을 달성하기 위하여 안출된 것으로서, 캡슐 내시경에 의하여 촬영된 소화 기관의 이미지들의 디스플레이 프로세싱 방법으로서, 세 로 방향으로의 다수의 열과 가로 방향으로의 다수의 칼럼으로 이루어진 다수의 빈 칸에 상기 이미지들이 축소된 형태로 채워진 소스 맵뷰(source map view)로 상기 이미지들을 디스플레이하는 단계와; 상기 소스 맵뷰로부터 상기 소스 맵뷰의 이미지들의 일부로 서브 맵뷰를 생성하는 단계를; 포함하여 구성되어, 상기 이미지들이 맵뷰에 의해 디스플레이되는 것을 특징으로 하는 특징으로 하는 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법을 제공한다.

즉, 캡슐 내시경이 소화 기관을 통과하면서 촬영한 이미지를 살펴보며 진단하는 과정에서, 촬영 순서대로 이미지들을 살펴보는 것이 아니라, 세로 방향으로의 다수의 열과 가로 방향으로의 다수의 칼럼으로 이루어진 다수의 빈 칸에 상기 이미지들이 축소된 형태로 틈새없이 채워지는 맵뷰 형식으로 이미지를 디스플레이함으로써, 맵뷰를 확대하여 스크롤 이동시키는 것에 의하여 피검사자의 촬영 이미지를 살펴볼 수 있도록 하여 관심있는 장기의 촬영 이미지가 디스플레이될 때까지 기다리지 않고서도, 피검사자의 이전 병력 등을 고려하여 병증이 있는 것으로 의심되는 장기의 위치로 신속하게 이동하여 해당 촬영 이미지들을 살펴볼 수 있게 되어 진단자의 편의에 보다 부합하고 신속한 진단을 가능하게 한다.

여기서, 맵뷰의 일부를 확대하거나 확대된 맵뷰의 영역을 이동시키는 것은 진단자의 조작에 의해 이루어질 수도 있고, 장치에 미리 입력된 방법과 순서로 조작될 수 있다. 한편, 본 명세서 및 특허청구범위의 전반에 걸쳐 "맵뷰"라는 용어는 "소스 맵뷰"와 "서브 맵뷰"를 모두 포괄하는 의미를 갖는 것이다.

본 발명의 가장 큰 특징은 맵뷰로 표현되는 촬영 이미지들의 일부로 새로운 서브 맵뷰를 생성할 수 있다는 것이다.

여기서, 상기 서브 맵뷰는 상기 소스 맵뷰를 분할(split)하여 생성된 스플릿 맵뷰일 수도 있고, 상기 소스 맵뷰의 일부 이미지들을 분리(separate)하여 생성한 분리 맵뷰일 수도 있으며, 상기 소스 맵뷰의 일부 이미지들을 복사(copy)하여 생성한 에디팅 맵뷰일 수도 있다. 분리 맵뷰는 소스 맵뷰의 이미지들이 삭제되고 삭제된 이미지들이 생성되는 맵뷰로 이동하여 생성된다는 점에서, 소스 맵뷰의 이미지들이 그대로 남아 있는 상태로 생성되는 맵뷰에 복사되어 생성되는 에디팅 맵뷰와 차별된다. 이 때, 서브 맵뷰는 소스 맵뷰로부터만 생성되는 것이 아니라, 생성된 다른 서브 맵뷰로부터 생성될 수 있다.

이를 통해, 촬영 이미지들이 축소된 이미지로 표시된 소스 맵뷰를 확대하여 살펴보는 과정에서, 다양한 기준에 의하여 소스 맵뷰를 분할하거나 분리/복사할 수 있으므로, 진단자는 촬영 이미지들을 수동적으로 살펴보는 것에 그치지 않고 보다 적극적으로 패턴이 유사한 병증별로 이미지들을 새로운 서브 맵뷰에 모아 분류할 수 있으므로, 장기의 제1영역의 병증 이미지들을 장기의 제2영역의 유사한 병증 이미지들과 대비하거나 대표적인 병증 이미지와 대비하는 것 등을 통해 보다 정확한 진단이 가능해진다.

즉, 확진의 이전 단계에서 병증으로 의심되는 이미지들을 이미지별로 기억해두는 것에 그치지 않고, 병증 이미지들만을 복사/분리하여 요약 맵뷰를 생성할 수 있으므로, 이를 통해, 한 눈에 전체의 병증 이미지를 모아 살펴본 후 최종적으로 질병이 있는 것인지 확진을 하게 되므로, 확진의 근거가 보다 명확해지고 보다 정확한 진단을 할 수 있게 된다. 더욱이, 병증과 질병이 1:1로 대응하는 것이 아니라, 다양한 병증을 종합하여 질병 소견의 진단을 내리는 경우가 많으므로, 이와 같이 병증 이미지들이 모인 요약 맵뷰를 토대로 종합적으로 병증을 살펴본 후 최종 진단을 할 수 있게 되어, 진단의 정확도가 크게 향상된다.

또한, 이미 살펴본 촬영 이미지를 반복하여 살펴보아야 진단 보고서를 작성할 수 있었던 종래의 디스플레이 프로세싱 방법과 달리, 소스 맵뷰를 분할하거나 소스 맵뷰로부터 복사/분리된 이미지들로 이루어진 서브 맵뷰에 발견된 병증을 장기의 영역별로 분류/요약하는 것이 가능하므로, 분류/요약된 서브 맵뷰를 살펴보는 것에 의해 이미 살펴본 촬영 이미지들을 불필요하게 다시 봐야 원하는 이미지를 볼 수 있는 종래에 비해 진단 시간을 단축할 수 있다.

그리고, 소스 맵뷰의 일부 이미지들로 생성된 서브 맵뷰는 이미지들의 촬영 순서에 관계없이 위치 이동이 가능하므로, 병증과 관련이 높은 이미지들로 구성된 서브 맵뷰는 앞부분으로 이동시키고, 병증과 관계없는 이미지들로 구성된 서브 맵뷰는 뒷부분으로 이동시키는 것에 의해, 진단 편의가 증진되고 진단 효율이 향상된다.

이 때, 서브 맵뷰의 이미지들이 소화 기관의 어느 부분에 관한 것인지를 표시하는 타임바가 서브 맵뷰에 표시되어, 서브 맵뷰의 이미지들이 장기의 어느 영역에 위치한 것인지를 한 눈에 알아 볼 수 있다. 그리고, 서브 맵뷰에 모여진 이미지 들의 정보나 병증 진단 내용을 이후에 참고하거나 검색하기 용이하도록 각각의 서브 맵뷰에는 주석을 기재할 수 있는 주석란이 마련된다. 또한, 소스 맵뷰나 서브 맵뷰의 이미지들의 일부 영역을 지정하여, 지정 영역의 이미지들을 확대하여 썸네일로 디스플레이함으로써, 병증 이미지들을 보다 확실하게 관찰할 수 있다.

한편, 상기 서브 맵뷰는 사용자에 의해 정해진 임의의 시간 간격에 따라 시분할된 이미지들로 생성될 수도 있다. 즉, 상기 서브 맵뷰는 사용자에 의해 지정되거나 미리 설정된 시간에 따라, 일정 시간 간격으로 균등하게 분할된 다수의 서브 맵뷰일 수 있다. 예를 들어, 12만장의 소화 기관의 이미지들이 캡슐 내시경에 의해 촬영되었다면, 사용자가 12개의 서브 맵뷰를 만들고자 한다면, 순차적으로 1만장씩의 이미지들로 12개의 서브 맵뷰를 하나씩 생성할 수 있다. 또한, 상기 서브 맵뷰는 사용자에 의해 지정되거나 미리 설정된 다른 방법에 의하여, 임의의 시간 간격으로 이미지들을 비균등하게 분할된 다수의 서브 맵뷰일 수도 있다. 예를 들어, 12만장의 소화 기관의 이미지들이 캡슐 내시경에 의해 촬영되었다면, 이들을 장기의 영역별로 위장, 소장, 대장 등으로 구분하거나, 사용자가 임의로 정한 이미지들의 수(數) 또는 임의의 시간 간격으로 1만장, 5만장, 3만장, 3만장 등으로 분할하여 서브 맵뷰를 생성할 수도 있다. 이를 통해, 진단자는 분할된 서브 맵뷰를 원하는 순서를 임의로 정하여 중복없이 서브 맵뷰 별로 살펴보는 것에 의해 진단할 수 있다.

한편, 인간의 시각 시스템은 주변 색깔과 유사한 색분포를 갖는 형태를 인지하는 것이 용이하지 않으며, 특히 적색-녹색(Redish-Green)과 청색-황색(Bluwish-Yellow)를 잘 구분하지 못하는 색약 특성도 있다. 예를 들어, 녹색 소화액이 가득한 위장에서는 적색 계열의 병증을 쉽게 감지하기가 어렵고, 적색톤인 소장에서는 녹색 계열의 병증을 쉽게 감지하기 어렵다. 이와 같은 색분포에 의해 발생되는 인지 능력 저하 문제를 해소하기 위하여, 맵뷰(110conv)를 색처리한 상태로 병증을 진단하도록 함에 따라, 병증 별로 잘 나타나지 않는 색약 특성을 보완하여 보다 정확한 진단을 가능하게 한다. 이는, 진단자가 조금 덜 집중하더라도 올바른 병증을 찾아낼 수 있으므로 진단에 의해 발생되는 진단자의 피로도를 저감하는 부수적인 장점도 얻어진다.

즉, 맵뷰에 특정 색깔을 부가하거나 제거/변경하는 색처리를 함으로써 병증을 보다 쉽게 찾아낼 수 있게 된다. 이와 같은 상기 색처리는, HIS 색공간, HSL 색공간, HSV 색공간, YIQ 색공간, YCbCr 색공간, YUV 색공간, XYZ 색공간, CMY 색공간, 색파장(Color Wavelength), 보색 색공간(opponent color space) 분석 처리 중 어느 하나 이상을 행하는 것에 의하여 이루어질 수도 있고, 특정 색깔을 필터링하거나 부가할 수도 있고, 이미지의 색깔톤을 보색으로 변경하는 것에 의해서도 이루어질 수 있다.

한편, 서브 맵뷰를 생성하는 방법으로서, 촬영 이미지들의 바로 직전에 인접한 이미지들과 유사도가 낮은 이미지들만을 모아 새로운 서브 맵뷰를 생성할 수도 있다. 즉, 캡슐 내시경으로부터 촬영된 이미지들에 대하여 각각의 이미지가 그 직전의 이미지와의 유사한 정도를 정량적으로 산출하여, 유사도가 낮은 이미지들(즉, 촬영된 전체 이미지들 중 유사한 다수의 이미지들에 대해서는 이미지 변화가 큰 한 두개의 대표적인 이미지들)을 추려 하나의 서브 맵뷰에 표시하는 것이다. 이를 통해, 사실상 이미지 전체에 대해 진단자가 눈여겨 볼 만한 이미지들의 요약본을 살펴볼 수 있게 되므로, 피검사자의 소화 기관의 상태를 우선하여 개략적으로 살펴볼 수 있고, 이 때 얻어진 피검사자의 장기에 대한 병증 경향을 미리 염두에 두고 진단에 임할 수 있게 된다. 이 때, 촬영된 이미지들에 대하여 직전 이미지와의 유사한 유사도는 정량적인 수치로 산출되며, 완전히 동일한 이미지는 100으로 유사도가 산출되도록 유사도 수치는 정규화된다. 20개의 촬영 이미지에 대하여 예를 들어 설명하면 다음과 같다.

이미지 번호	유사도	이미지 번호	유사도	이미지 번호	유사도	이미지 번호	유사도
이미지#1	0.0	이미지#6	98.5	이미지#11	20.9	이미지#16	99.5
이미지#2	7.0	이미지#7	92.2	이미지#12	78.5	이미지#17	97.6
이미지#3	80.1	이미지#8	80.4	이미지#13	88.2	이미지#18	92.4
이미지#4	79.2	이미지#9	50.2	이미지#14	92.3	이미지#19	48.6
이미지#5	99.7	이미지#10	50.3	이미지#15	94.6	이미지#20	56.7

표1에 따르면, 이미지#1은 최초의 이미지이므로 직전 이미지와 유사도를 판별할 수 없어 유사도가 0.0이 되며, 이미지 #2는 이미지 #1에 대하여 유사도가 7%만큼 유사하다는 것을 의미하고, 이미지 #5는 이미지 #4와 99.7%만큼 유사하다는 것을 의미한다. 이와 같은 이미지들에 대하여, 이미지의 유사도가 낮으면 이미지의 급격한 장면 변환(scene change)을 의미하므로, 전체 이미지들의 요약본에 해당하는 유사도가 낮은 이미지들(즉, 직전 이미지와 대비하여 이미지 변화가 큰 이미지들)을 하나의 서브 맵뷰에 표시하여, 이미지 전체에 대해 진단자가 눈여겨 볼 만한 이미지들의 요약본을 살펴볼 수 있도록 할 수 있다. 이를 통해, 촬영 이미지들의 새로운 패턴을 갖는 이미지들을 먼저 살펴볼 수 있게 되어, 보다 신속하고 정확한 진단을 가능하게 한다.

한편, 상기 소스 맵뷰로부터 분할된 서브 맵뷰는 진단자에 의해 지정된 이벤트에 상응하는 상응도가 높은 이미지들을 모아 생성할 수도 있다. 즉, 캡슐 내시경으로부터 촬영된 이미지들에 대하여 다양한 이벤트에 대해 상응하는 상응도를 정량적인 수치로 산출하여, 진단자에 의해 입력된 이벤트에 대하여 상응도가 높은 이미지들만을 추려 하나의 서브 맵뷰를 생성할 수도 있다. 이를 통해, 이전에 병력이 있던 피검사자의 경우에는 해당 이벤트를 선택하여 그 상응도가 높은 이미지들을 추린 서브 맵뷰를 살펴보는 것에 의하여, 매우 짧은 시간 안에 소화 기관의 촬영 이미지들에 대한 진단을 마칠 수도 있다. 이는, 피검사자에게 의심되는 병증이 예상되어 이를 확인하려고 하거나 이미 알고 있는 병증의 경과를 확인하려는 경우에 매우 유용하다.

여기서, 상기 이벤트는 출혈(bleeding), 궤양(Ulcer), 폴립(Polyp), 암(cancer), 종양(tumor) 등과 같은 질병의 증상(즉, 병증)들이나 질병들 중 어느 하나 이상 또는 장기의 영역으로 다양하게 적용될 수 있다. 다만, 전술한 병증이나 질병은 예시적인 것으로서 앞에 나열된 병증이나 증상으로 본 발명에 적용할 수 있는 이벤트가 한정되는 것은 아니다. 그리고, 본 명세서 및 특허청구범위에 기재된 "병증"이라는 용어는 '질병의 증상'이라는 사전적 의미를 갖지만, 본 명세서 및 특허청구범위에서는 "병증"이라는 용어가 '질병의 증상'이라는 사전적 의미 뿐만 아니라 암(cancer) 등과 같은 '질병' 자체의 의미를 포함하며, 또한 질병과 직접적인 관련이 없더라도 진단 과정에서 기억해 둘만한 모든 증상을 포함하고, 그 밖에 음식물(food), 이물질(foreign body) 등과 같이 질병과 관련이 없더라도 진단 과정에서 필요한 일반적인 사항에 관한 모든 '발견(finding)'의 의미들을 모두 포함하는 용어로 사용된 것이다.

따라서, 캡슐 내시경 등으로부터 얻어진 장기 내부의 이미지들이 출혈, 궤양 등의 이벤트에 어느 정도 해당하는지를 분석하여, 이벤트 별로 이벤트에 상응하는 정도를 정량적으로 산출함으로써, 이벤트에 대한 상응도가 높은 이미지들을 추려 새로운 서브 맵뷰를 생성할 수 있으며, 이를 통해, 어느 위치에서 어떠한 병증이 어느정도 있는지를 금방 파악할 수 있게 된다. 그리고, 상기 이벤트는 2개 이상에 대해 행해지는 것이 보다 종합적인 병증이나 질병에 대한 정보를 얻을 수 있다는 점에서 매우 효과적이다.

그리고, 본 명세서 및 특허청구범위에서 상기 이미지들이 하나 이상의 이벤트와 “상응하는 정도” 또는 “상응도” 및 이와 유사하게 사용된 용어는 소화기관의 촬영 이미지들 각각이 증상이나 질병인 이벤트에 근접한 정도를 정량적으로 분석하여 근접한 정도를 환산한 값을 의미한다. 이 때, 이벤트에 상응하는 정도는 정규화(normalization)된 값(index)으로 산출된다. 이 때, 이미지들의 각각이 다양한 여러 이벤트에 상응하는 정도를 분석하는 데 있어서, 2개 이상의 다양한 이벤트들에 상응하는 상응도를 정규화(normalization)된 값(index)으로 사용할 수도 있다.

예를 들어, 소장에 출혈이 발생되었던 피검사자의 차도를 확인하기 위하여 캡슐 내시경을 이용하여 소화기관을 촬영한 20개의 이미지들을 살펴보면서 진단을 하고자 하는 경우에는, 진단하고자 하는 의사는 무엇보다도 소화기관의 출혈이 어떻게 진전되었는지에 대해 관심을 갖게 된다. 이에 따라, 캡슐 내시경에 의해 촬영된 이미지들에 대하여 서버에서는 다양한 이벤트(예컨대, 출혈, 폴립, 궤양 등)에 대한 상응도를 정량적으로 산출하지만, 진단자에 의해 지정된 이벤트가 '출혈'이라면, 출혈에 대한 상응도가 높은 순서대로 이미지들을 모아 새로운 서브 맵뷰를 생성한다. 즉, 진단을 담당하는 의사는 촬영 이미지를 촬영 순서에 따라 하나하나 살펴보지 않더라도 '출혈'이라는 이벤트에 상응도가 높은 이미지를 중심으로 모은 서브 맵뷰를 통해 먼저 확인할 수 있게 되어, 신속하면서 진단 효율이 매우 향상되는 효과가 얻어진다.

참고로, 이미지들에 대한 이벤트의 상응도를 분석하는 방법은 다양한 방법에 의해 이루어질 수 있다. 즉, 상기 이미지들의 스펙트럼 분석, 모션 유동 해석, 형상 해석, 파동(wavelet) 해석, 주파수 해석 중 어느 하나 또는 이들의 2개 이상의 조합에 의하여 이상 유무가 있는지를 파악할 수도 있다. 소화기의 수축 패턴을 인식하는 것에 의해서도 분석될 수도 있다. 무선 캡슐 내시경의 비디오는 소장의 수축과 같은 소화 기관의 연속적인 운동을 기록하고, 쉽게 기록된 화상을 보여줄 수 있다. 서로 다른 소화 기관은 서로 다른 형태의 연동 운동을 하며 서로 다른 기능을 갖기 때문에 이들의 운동 패턴들은 서로 다르다. 예를 들면, 무선 캡슐 내시경의 화상으로부터 에너지에 기초한 특징적 형상을 주파수 도메인 영역에 복사할 수 있고, 그리고 나서, 수축을 특징화할 수 있는 고주파 컨텐트 (High Frequency Content, HFC) 기능을 사용하여 이벤트 경계를 감지하여, 이벤트에 상응하는 정도를 분석하는 것이 가능하다.

또한, 병증이 있는 대표 영상과 대비하는 것에 의하여 이벤트에 상응하는 정도를 분석할 수도 있다. 예를 들어, 장기 내에서 출혈이 발생되면, 정상적인 장기에 비하여 적색의 비중이 높아지므로, 적색의 비율이 비정상적으로 일정 비율 이상 높아질수록 출혈이 발생되었을 가능성이 보다 높아진다. 이 때, 일반적으로 이미지는 적색(R), 녹색(G), 청색(B)으로 구성되는데, 이들 화상을 이루는 색깔의 분포나 특정 색깔의 비율이 유사할수록 상응하는 정도가 높은 것으로 간주할 수 있다. 이를 위한 한 방법으로서, 화상 색깔의 분포에 따른 구간 분할은 화상 각각의 휘도(luminance)를 기준으로 주파수변환을 하여 화상 분포가 하나의 색지수(color index)로 표시할 수 있는 데, 이 색지수가 유사하면 화상의 유사도가 높은 것으로 간주하여, 색지수의 분포에 따라 이벤트와 상응하는지 여부를 분석할 수 있다. 따라서, 휘도를 기준으로 주파수 변환된 이미지의 각각의 색지수가 이벤트의 색지수와 근접할수록 정량적인 상응도가 높은 것으로 분석된다.

그리고, 상기 이벤트는 상기 이미지들이 위치한 장기 영역을 의미할 수도 있다. 여기서, 이미지들이 위치한 소화 기관의 장기 영역을 파악하는 한 방법으로서, 소화 기관의 장기가 천이되는 영역에서는 이미지의 휘도(luminance)를 기준으로 주파수변환을 하여 화상 분포가 반영되게 얻어진 색지수(color index)가 급격히 변화한다는 것을 이용하여, 색지수가 급격히 변하는 지점을 기준으로 장기 영역을 식도, 위장, 십이지장, 소장, 대장 등의 영역으로 구분할 수 있다. 이와 같이, 이벤트에 각각의 이미지들이 위치한 장기의 영역을 포함함에 따라, 진단자에 의해 특정한 장기의 영역의 특정 병증에 대해 2개 이상으로 이벤트가 지정되었다면, 특정 장기 영역 내의 특정 병증에 부합하는 이미지들을 우선 서버로부터 단말기로 전송하여 단말기에는 그 조건에 부합하는 이미지들을 담당 진단 의사가 확인할 수 있게 된다.

한편, 발명의 다른 분야에 따르면, 본 발명은, 소화 기관의 이미지들을 촬영한 이미지들을 저장하는 기록매체와; 상기 기록 매체에 저장된 이미지들을 맵뷰로 표시하는 디스플레이 유닛과; 상기 맵뷰의 이미지들의 일부로 하나 이상의 서브 맵뷰를 생성하여 표시하고, 상기 서브 맵뷰를 임의로 이동시키는 프로세싱 유닛을; 포함하여 구성된 것을 특징으로 하는 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 장치를 제공한다.

상술한 바와 같이, 캡슐 내시경에 의하여 촬영된 소화 기관의 이미지들의 디스플레이 프로세싱 방법으로서, 세로 방향으로의 다수의 열과 가로 방향으로의 다수의 칼럼으로 이루어진 다수의 빈 칸에 상기 이미지들이 축소된 형태로 채워진 소스 맵뷰(source map view)로 상기 이미지들을 디스플레이하는 단계와; 상기 소스 맵뷰로부터 상기 소스 맵뷰의 이미지들의 일부로 서브 맵뷰를 생성하는 단계를 포함하여, 상기 소스 맵뷰로부터 분리되거나 복사된 서브 맵뷰를 이미지들의 촬영 순서에 무관하게 위치를 이동시킬 수 있도록 함으로써, 캡슐 내시경을 이용하여 촬영한 소화 기관의 수십여만장이나 되는 이미지들을 촬영 순서에 관계없이 살펴볼 수 있을 뿐만 아니라, 진단자에 의해 병증으로 의심되는 이미지들을 군(群)별로 따로 모아 촬영 순서에 관계없이 병증별로 따로 추려 분류하는 것도 가능해지며, 서브 맵뷰에 따로 추려진 이미지군(群) 별로 색처리를 행하여 진단자가 인체 시각 시스템의 결함에 의해 병증을 놓치는 것을 최소화할 수 있도록 하는 캡슐 내시경의 촬영 이미지 프로세싱 방법을 제공한다.

즉, 본 발명은 캡슐 내시경에 의해 촬영된 12여만장의 이미지들을 살펴보면서 진단하는 데 있어서, 촬영 순서에 얽메이지 않고 피검사자의 병력이나 의심되는 장기의 위치에 따라, 병증이 의심되는 장기의 영역을 진단자의 입맛에 맞게 살펴보면서 진단할 수 있도록 하여 진단의 편의를 도모하며, 불필요한 진단 시간이 소요되는 것을 방지하여 신속한 진단을 가능하게 한다.

그리고, 본 발명은 캡슐 내시경에 의해 촬영된 12여만장의 이미지들을 살펴보는 과정에서, 소스 맵뷰를 분할하거나 소스 맵뷰의 일부 이미지들을 분리/복사하여 서브 맵뷰를 생성할 수 있으므로, 진단 중에 의미있는 병증 이미지들을 개별 이미지별로 기억하는 것이 아니라, 하나의 군(群)단위의 서브 맵뷰로 분리하여 기억, 분류하여, 최종 확진의 단계에서 여러 병증 이미지들을 동시에 살펴보면서 질병 진단을 할 수 있으므로 진단의 정확도가 높아지며 진단 효율이 향상된다.

또한, 본 발명은 일부의 이미지들이 분리되거나 복사되어 생성된 서브 맵뷰에 대하여 색처리를 함으로써, 장기의 본연의 색깔과 유사하여 눈에 잘 띄지 않는 병증을 쉽게 발견할 수 있도록 하고, 동시에 인간의 시력 자체의 결함으로 혼동되는 색상의 병증도 쉽게 알아챌 수 있도록 하여 보다 정확한 진단을 가능하게 한다.

이하, 첨부 도면을 참조하여 본 발명의 제1실시예를 상술한다.

다만, 본 발명을 설명함에 있어서, 공지된 기능 혹은 구성에 대해서는 동일하거나 유사한 도면 부호를 부여하고 이에 대한 구체적인 설명은 본 발명의 요지를 명료하게 하기 위하여 생략하기로 한다.

첨부된 도2에 도시된 바와 같이, 본 발명의 일 실시예에 따른 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 장치(1)는 캡슐 내시경(50)으로부터 수신기(60)를 거쳐 이미지를 수신하는 이미지 수신 유닛(71)과, 수 신된 이미지를 저장하는 하드 디스크 등의 기록 매체(72)와, 기록 매체(72)에 저장된 이미지들을 맵뷰(110) 형태로 표시하는 디스플레이 유닛(80)과, 진단자가 소정의 명령을 입력하기 위하여 마우스(91)와 키보드(92)로 이루어진 입력 유닛(90)과, 캡슐 내시경(50)으로부터 수신된 이미지들을 표시하고 맵뷰(110)를 분할(split)하거나 맵뷰(110)의 일부 이미지를 분리/복사하여 다수의 서브 맵뷰(110a-110i)를 생성하고 이를 진단자의 의도대로 위치 이동할 수 있도록 하는 프로세싱 유닛(73)으로 구성된다.

상기 프로세싱 유닛(73)은 촬영 이미지들이 디스플레이 유닛(80)의 화면에 표시되는 것을 제어하는 화상표시제어부(73a)와, 맵뷰(110)의 분할 및 분리/복사를 제어하는 맵뷰 분할제어부(73b)와, 진단자가 입력 유닛(90)을 이용하여 지령한 것을 기억하여 실행하는 입력내용 기억지령부(73c)로 구성된다.

상기와 같이 구성된 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 장치(1)에 의하여 본 발명의 일 실시예에 따른 소화 기관의 이미지들의 디스플레이 프로세싱 방법이 구현된다.

먼저, 본 발명의 일 실시예에 따른 소화 기관의 이미지 디스플레이 프로세싱 방법은 도3에 도시된 바와 같이 세로 방향으로의 다수의 열과 가로 방향으로의 다수의 칼럼으로 이루어진 다수의 빈 칸에 캡슐 내시경(50)에 의해 촬영된 이미지들이 축소된 형태로 채워진 소스 맵뷰(source map view,110)로 상기 이미지들을 디스플레이한다. 여기서, 맵뷰(110)란 도면부호 110d이나 도면부호 110d'로 표시된 바 와 같이 미리 정해진 순서와 규칙에 따라 캡슐 내시경에 의해 촬영된 이미지(111)의 전부 또는 일부를 축소된 크기로 복수의 열과 행으로 이루어진 테이블의 빈 칸(110s)에 표시한 것이다. 참고로 캡슐 내시경(50)에 의해 촬영되는 이미지는 대략 12여만장에 이르는 방대한 양이므로, 도3에 도시된 소스 맵뷰(110)는 이해를 돕기 위하여 행과 열이 실제의 소스 맵뷰(110)에 비하여 훨씬 적은 수로 간략화한 것이다.

그리고, 맵뷰(110)의 이미지들(111) 상에 마우스 커서(92a)를 위치시키면, 마우스 커서(92a)의 이동에 따라 마우스 커서(92a)가 위치한 이미지(119) 주변을 확대하여 확대창(140)에 표시한다. 이에 따라, 진단자는 마우스 커서(92a)를 이동시켜 확대창(140)을 통해 촬영 이미지를 확대된 형태로 살펴볼 수 있으며, 이를 통해 촬영 이미지들의 상세 모양을 확인하며 병증 여부를 진단할 수 있게 된다. 여기서, 확대창(140)의 확대 정도는 미리 정해진 키(예컨대, "+"키와 "-"키)에 의해 조절된다. 그리고, 타임바(120)에는 각각의 이미지들을 재생하는 경우라면 어느정도의 재싱시간(120i)이 소요되는지를 표시하고, 마우스 커서(92)가 위치한 이미지 또는 맵뷰가 전체 이미지들의 분포 중 어느 위치에 해당하는지도 표시바(128)로 표시한다.

한편, 맵뷰(110)의 국부적인 영역을 확대하는 확대창(140)과 달리, 화면(80)의 우측 상부에 위치한 확대 버튼(L, 133)을 선택하여 클릭하는 것에 의하여, 이미지들(111)이 보다 크게 보이도록 화면(80) 전체를 확대할 수도 있다. 확대 버튼(L, 133)의 선택을 취소하고 이전의 상태로 되돌리기 위해서는 취소 버튼(I, 134)을 선 택하여 입력한다.

캡슐 내시경(50)에 의해 촬영된 이미지들을 살펴보는 과정에서 병증으로 의심되는 이미지를 발견한 경우에는. 마우스(91)의 오른쪽 버튼을 누른 후 나타나는 팝업창에서 "지정"버튼(미도시)을 선택하여, 도4에 도시된 바와 같이 관심있는 이미지들에 대해 깃발 모양의 표식(150)을 맵뷰(110) 상에 표시한다. 이는, 맵뷰(110)를 확대하지 않은 상태에서는 개별 이미지의 모양이 어떠한지를 알 수가 없으므로, 확대창(140)을 통해 이미지(111)를 상세하게 살펴본 후 관심이 있는 이미지들가 어느 위치에 있었는지를 기억하고자 하는 경우에 유용하다. 도면에는 깃발 모양의 표식(150)으로 표시되었지만, 위치를 알아볼 수 있는 굵은 외곽선이나 'V'표시 등 그 밖에 다른 형태로 표시할 수도 있다. 이를 통해, 맵뷰(110)를 확대하지 않은 상태에서도 장기의 어느 위치에 병증으로 의심되는 이미지가 발견되었는지를 쉽게 파악할 수 있다.

한편, 진단자가 해당 맵뷰(110)에 대한 주석(113a)을 기재하고자 하는 경우에는, 도5에 도시된 바와 같이, 마우스 커서(92a)로 주석버튼(C, 131)을 클릭하고 맵뷰(110)의 하부에 제공되는 주석란(113)에 키보드(92)를 이용하여 주석(113a)을 기재한다. 맵뷰(110)에 주석(113a)을 기재하는 것은 병증, 유사도, 이벤트 상응도 등 다양한 기준에 따른 이미지들을 모아 생성한 서브 맵뷰(110a-110i...)에 대해서도 적용된다.

또한, 진단자가 해당 맵뷰(110)의 특정 영역(116)의 이미지들을 상세 관찰하는 경우에는, 도6에 도시된 바와 같이, 보다 상세하게 살펴보고자 하는 이미지들이 포함되는 영역의 경계에 위치한 2개의 이미지(111s1,111s2)를 각각 더블 클릭하여 지정 영역(116)을 설정한 후, 영역 디스플레이 버튼(D, 132)을 더블클릭하여, 지정 영역(116)의 이미지들을 확대된 이미지(115a)로 이미지 재생창(115)에 순차적으로 표시한다. 이 때, 확대 이미지(115a)의 진행은 디스플레이 버튼(132)을 선택하면 나타나는 진행제어버튼(114)의 전진 버튼(114f), 후진 버튼(114b) 및 종료 버튼(114c)에 의해 조절할 수 있다. 확대 이미지(115a)는 썸네일 방식으로 이미지 재생창(115)에 여러 이미지들이 동시에 표시되며, 그 중앙부에 있는 이미지의 위치가 지정 영역(116)에 굵은 테두리(116a)로 동시에 표시되어, 썸네일 방식으로 표시되는 이미지(115a)가 지정 영역(116)의 어느 부분을 나타내는 지를 용이하게 파악할 수 있다.

한편, 본 발명의 일 실시예에 따른 소화 기관의 이미지들의 디스플레이 프로세싱 방법은 맵뷰(110)를 분할(스플릿, split)하거나 맵뷰(110)의 일부 이미지들을 분리/복사하여 새로운 서브 맵뷰(110a-110i...)를 생성할 수 있다는 점에서 종래 기술과 큰 차이가 있다.

이를 보다 구체적으로 살펴보면, 도7a에 도시된 바와 같이, 맵뷰(110)의 가로축(118h)과 세로축(118v)을 따라 각각 마우스 커서(92a)의 이동에 따라 분할바(118ch, 118cv)가 이동하며, 이 때, 가로축(118h)의 분할바(118ch)에 마우스 커 서(92a)를 대고 오른쪽 마우스 버튼을 누른 후 나타나는 팝업창의 "분할" 항목(미도시)를 선택하는 것에 의하여, 도7b에 도시된 바와 같이, 하나의 맵뷰(110)를 2개의 서브 맵뷰(즉, 스플릿 맵뷰)로 좌우 분할할 수 있다. 마찬가지로, 도7b에 도시된 상태에서 세로축(118v)의 분할바(118cv', 118cv)에 마우스 커서(92a)를 대고 오른쪽 마우스 버튼을 누른 후 나타나는 팝업창의 "분할" 항목(미도시)를 선택하면, 도7c에 도시된 바와 같이, 하나의 맵뷰(110)를 2개의 서브 맵뷰(즉, 스플릿 맵뷰)로 상하 분할할 수 있다. 또한, 도7a에 도시된 상태에서, 맵뷰(110)의 가로축(118h)과 세로축(118v)을 따라 각각 마우스 커서(92a)의 이동에 따라 분할바(118ch, 118cv)가 이동하는데, 이 때, 세로축(118v)의 분할바(118cv)에 마우스 커서(92a)를 대고 오른쪽 마우스 버튼을 누른 후 나타나는 팝업창의 "분할" 항목(미도시)를 선택하는 것에 의하여, 도7d에 도시된 바와 같이, 하나의 맵뷰(110)를 2개의 서브 맵뷰(즉, 스플릿 맵뷰)로 상하 분할할 수도 있다.

맵뷰(110)가 다수의 서브 맵뷰(스플릿 맵뷰)로 분할된 상태에서는, 마우스 커서(92a)를 위치시킨 후 클릭된 서브 맵뷰에 굵은 외곽선(88)으로 활성 표시되어, 활성 표시된 서브 맵뷰에 대해 주석을 입력하거나 특정 영역의 이미지를 확대하여 보거나 색처리하는 조작이 가능해진다. 또한, 도8a에 도시된 바와 같이, 활성화된 서브 맵뷰(110g)의 이미지들이 전체 장기의 어느 영역에 해당하는 이미지들인지를 용이하게 파악할 수 있도록, 맵뷰(110g)의 이미지들의 위치가 타임바(120)의 맵뷰영역 표시구간(188)으로 표시된다. 이를 통해, 서브 맵뷰(110a-110i...)의 이미지들이 각각 장기의 어느 부분인지를 쉽게 알수 있게 되어, 서브 맵뷰(110a-110i...) 를 진단자의 편의대로 전후로 이동시키더라도 서브 맵뷰(110a-110i...)의 이미지들의 위치를 놓치지 않고 진단을 계속할 수 있다.

한편, 상기 도8a 내지 도8c에 도시된 서브 맵뷰들은 특히 사용자에 의해 지정된 일정 시간 동안 촬영된 이미지들을 시간순서대로 각각 모아 생성한 서브 맵뷰들일 수도 있다. 또한, 상기 도8a 내지 도8c에 도시된 서브 맵뷰들은 이벤트에 따라 장기의 영역별 이미지들을 각각 모아 생성한 서브 맵뷰들일 수도 있다. 이를 통해, 사용자는 촬영 이미지들을 중복하지 않게 시간(영역)별 서브 맵뷰를 살펴보면서 진단할 수 있게 된다.

그리고, 상기 도8a 내지 도8c에 도시된 서브 맵뷰들은 사용자가 임의로 정한 수의 이미지들을 중복없이 모아놓은 서브 맵뷰들일 수도 있다. 전술한 바와 같이, 도8a 내지 도8c에 도시된 서브 맵뷰들은 이벤트별 상응도에 따른 이미지들로 생성된 서브 맵뷰, 이미지들의 유사도에 따라 유사도가 미리 정해진 값보다 낮은 이미지들로 생성된 서브 맵뷰, 사용자에 의해 분할하거나 분리/복사하여 생성된 서브 맵뷰를 추가적으로 또는 대체하여 포함할 수도 있다.

도면에 도시되지는 않았지만, 하나의 맵뷰(110)를 스플릿하지 않더라도, 맵뷰(110)의 일부의 영역을 분리/복사하여 새로운 서브 맵뷰(110a-110i...)를 생성할 수도 있다. 즉, 도6에 도시된 바와 마찬가지로, 어느 하나의 맵뷰(110,110a-110i...)의 일부를 지정 영역(116)으로 설정한 후, 오른쪽 마우스 버튼을 눌러 나타나는 팝업창의 "서브 맵뷰 복사생성"(미도시) 항목을 선택하는 것에 의하여, 원 래의 맵뷰(110)에도 지정 영역(116)의 이미지들이 남게 되고, 동시에 지정 영역(116)의 이미지들만으로 이루어진 서브 맵뷰(즉, 에디팅 맵뷰)를 새롭게 생성할 수도 있다. 이와 유사하게, 어느 하나의 맵뷰(110,110a-110i...)의 일부를 지정 영역(116)으로 설정한 후, 오른쪽 마우스 버튼을 눌러 나타나는 팝업창의 "서브 맵뷰 분리생성"(미도시) 항목을 선택하는 것에 의하여, 원래의 맵뷰(110)에서는 지정 영역(116)의 이미지들이 제거되고, 지정 영역(116)의 이미지들만으로 이루어진 서브 맵뷰(즉, 분리 맵뷰)를 새롭게 생성할 수도 있다.

한편, 서브 맵뷰(110a-110i...)는 최초의 소스 맵뷰(110)를 분할하거나 이로부터 복사/분리하여 생성될 수도 있지만, 생성된 서브 맵뷰(110a-110i...)를 분할하거나 이를 복사/분리하여 생성할 수도 있다.

이와 같이 맵뷰(110,110a-110i...)를 분할하거나 이로부터 일부 이미지를 분리/복사하여 서브 맵뷰를 생성함에 따라, 진단자는 피검사자에게 발현되는 특정 병증이나 장기 영역별로 서브 맵뷰를 각각 생성할 수 있게 되고, 최종 진단시에 이들을 동시에 보면서 다양한 병증에 따른 질병을 보다 정확하게 진단할 수 있게 된다.

피검사자(40)의 소화 기관(41)의 촬영 이미지를 1차적으로 살펴보면서, 다양한 서브 맵뷰(110a-110i..)가 생성되는데, 이와 같이 생성된 서브 맵뷰(110a-110i..)는 다양한 형태의 배열로 표시될 수 있다. 도8a에 도시된 바와 같이 바둑판 형태로 배열될 수 있으며, 도8b에 도시된 바와 같이 캐스캐이드 형태로 배열될 수도 있고, 도8c에 도시된 바와 같이 탭 형태로 배열될 수도 있다.

도8a에 도시된 바와 같이, 서브 맵뷰(110a-110i...)가 바둑판 형태로 배열되는 경우에는, 가로축 전체에 이르는 통합가로축(118h')과 세로축 전체에 이르는 통합세로축(118v')이 생성되어, 통합가로축(118h')과 통합세로축(118v')의 분할바(118ch', 118cv')를 이용하여 다수의 서브 맵뷰(110a-110i...)를 한꺼번에 분할할 수도 있다.

그리고, 도8a 내지 도8c에 도시된 바와 같이 마우스 커서(92a)를 위치시킨 상태에서 클릭하여 활성화된 맵뷰는 마우스의 왼쪽 버튼을 누른 상태에서 잡아끄는 드래그에 의해, 도8c의 도면부호 55로 표시된 바와 같이 서브 맵뷰(110a-110i...)의 위치를 임의로 이동시킬 수 있다. 이와 같이, 서브 맵뷰(110a-110i)의 위치를 진단자가 임의로 변경할 수 있으므로, 진단에 필요한 병증 이미지를 포함하는 서브 맵뷰는 전방으로 이동시키고, 진단에 필요없는 이미지들이 모여진 서브 맵뷰는 후방으로 이동시키는 조작을 할 수 있게 되고, 진단자는 최종 진단에 필요한 서브 맵뷰만을 추린 상태에서 확진을 하게 되므로, 진단의 정확성이 향상되고 진단자의 진단 편의도 함께 향상된다.

그 결과, 진단자는 도9a에 도시된 바와 같이, 병증이 있는 것으로 의심되어 선택된 이미지(77,77')가 있는 모든 서브 맵뷰(110a, 110p, 110w)만을 한 화면에 표시하는 요약 화면을 보면서, 여러 병증에 대한 이미지를 하나씩 살펴보면서 최종적인 확진을 할 수 있게 된다. 이에 의해 최종 진단이 종합적이면서 정확하게 내려진다.

나아가, 병증이 있는 것으로 의심되어 선택된 이미지(77,77',77",77"', 77"")만을 하나의 요약 맵뷰(110x)에 모아 표시할 수 도 있다. 이 때, 요약 맵뷰(110x)는 다양한 서브 맵뷰(110a-110i...)로부터 복사하여 생성된 에디팅 맵뷰인 것이 좋다. 각각의 병증 이미지(77,77',77",77"', 77"")의 위치를 타임바(120)의 병증이미지 표시구간(177)에 표시함으로써, 해당 병증 이미지가 장기의 어느 위치인지를 금방 알 수 있다. 그리고, 요약 화면에 비하여 보다 집약된 형태인 요약 맵뷰(110x)를 통해, 관찰된 병증 이미지를 동시에 보면서 질병에 대한 종합적인 소견을 담은 정확한 진단이 가능해진다.

한편, 촬영 이미지를 통해 병증을 알아내는 데 있어서, 소화 기관의 색과 병증의 색이 유사한 경우나 인체의 시각 시스템의 취약한 색영역의 병증은 이미지에 촬영되었음에도 불구하고 간과되는 오진을 야기한다. 이에 따라, 맵뷰(110, 110a-110i..)에 색깔을 부가하거나 제거/변경하는 것에 의하여, 병증의 종류나 장기의 영역별로 병증이 눈에 잘 띄도록 색처리를 행함으로써 보다 적은 주의력을 기울이더라도 이미지에 나타난 병증을 쉽게 감지할 수 있도록 보조한다.

이와 같은 색처리는 도10a 내지 도10c에 도시된 바와 같이, 소스 맵뷰(110x-110z)의 일부 또는 전체에 대하여 영역(111c)을 지정하여 적색(R), 녹색(G), 청색(B) 등의 특정 색깔을 입히는 것에 의하여 이루어질 수 있다. 그 밖에, 맵뷰의 색처리는, 계층적으로 정보 공간을 구분해주는 HIS(hierarchical information space) 색공간, 색상과 채도와 명도를 조절하여 명도가 어느정도 이상 올라가는 것 을 제한하는 HSV 색공간, 빛의 밝기를 나타내는 휘도(Y) 신호와 색상신호 2개(U,V)로 표현하는 YUV색공간, Cyan(C)과 Magenta(M)과 Yellow(Y)의 3가지 색상에 진한 검정(Key; K)을 추가하여 CMY(K) 색공간, YUV색좌표계로부터 유도된 것으로 휘도(Y)와 위상(In-phase)과 색도(Quadrature phase; Q)를 조절하는 YIQ 색공간, 흑백신호를 전달하는 Y신호와 컬러색차에 관한 Cb, Cr을 조절하는 YCbCr 색공간, 적녹청색에 의해 이루어지는 RGB색공간, XYZ 색공간, 색파장(Color Wavelength) 처리, 보색 색공간(opponent colar space) 분석 중 어느 하나 이상을 행하는 것에 의하여 이루어질 수도 있고, 특정 색깔을 필터링하거나 부가할 수도 있고, 이미지의 색깔톤을 보색으로 변경하는 것에 의해서도 이루어질 수 있다.

이와 같은 색처리는 도11에 도시된 바와 같이, 서브 맵뷰(110prev)에 대해 선택된 영역(111c)에 대하여 색처리를 행하게 된다. 이를 통해, 인간의 시각 시스템에는 적색-녹색(Redish-Green)과 청색-황색(Bluwish-Yellow)을 잘 구분하지 못하는 색약 특성을 갖는 둔감 영역이 존재하는데, 인간의 시각 시스템의 결점을 보완하기 위하여 색처리된 서브 맵뷰(110conv)를 생성함에 따라, 색약 특성을 갖는 둔감 영역의 색깔로 병증이 발현되더라도 쉽게 진단자에 의해 감지되도록 함으로써 진단이 보다 정확해지고 편리해지는 유리한 효과가 얻어진다.

이상에서는 본 발명의 바람직한 실시예를 예시적으로 설명하였으나, 본 발명의 범위는 이와 같은 특정 실시예에만 한정되는 것은 아니며, 특허청구범위에 기재된 범주 내에서 적절하게 변경 가능한 것이다.

도1은 캡슐 내시경을 이용하여 소화 기관의 촬영 이미지를 프로세싱 장치에 전송하는 구성을 도시한 개략도

도2는 본 발명의 일 실시예에 따른 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법을 구현하는 프로세싱 장치의 구성을 도시한 블럭도.

도3은 본 발명의 일 실시예에 따른 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법에 따라 촬영 이미지들을 맵뷰 형식인 소스 맵뷰로 디스플레이한 상태를 도시한 도면

도4는 도2의 소스 맵뷰의 특정 이미지들에 표식을 한 상태를 도시한 도면

도5는 도2의 소스 맵뷰에 주석을 기재한 상태를 도시한 도면

도6은 도2의 소스 맵뷰의 지정된 영역의 이미지들을 확대하여 섬네일로 디스플레이한 상태를 도시한 도면

도7a 내지 도7d는 도2의 소스 맵뷰를 분할하여 서브 맵뷰를 생성하는 방법을 도시한 도면

도8a 내지 도8c는 생성된 서브 맵뷰를 다양한 방법으로 배열한 형태를 도시한 도면

도9a 및 도9b는 촬영된 소화기관의 이미지들의 요약 맵뷰를 표시한 도면

도10a 내지 도10c는 맵뷰에 대해 색처리한 상태를 도시한 개략도

도11은 종래의 소화 기관의 촬영 이미지를 디스플레이 프로세싱하는 구성을 도시한 도면

*** 도면의 주요 부분에 대한 부호설명 ***

1: 디스플레이 프로세싱 장치 30: 캡슐 내시경

40: 피검사자 41: 소화 기관

77-77"": 복사 이미지 80: 디스플레이 유닛

88: 지정 서브 맵뷰 90: 입력 유닛

110: 소스 맵뷰 120: 타임바

110a-110i: 서브 맵뷰 116: 지정 영역

130: 제어 버튼 188: 맵뷰영역 표시구간

177: 병증이미지 표시구간

Claims

캡슐 내시경에 의하여 촬영된 소화 기관의 이미지들의 디스플레이 프로세싱 방법으로서,

세로 방향으로의 다수의 열과 가로 방향으로의 다수의 칼럼으로 이루어진 다수의 빈 칸에 축소된 이미지들이 틈새없이 채워진 맵뷰 형식으로, 상기 이미지들이 상기 맵뷰 형식의 빈 칸에 축소된 이미지들로 표시되는 소스 맵뷰(source map view)를 디스플레이하는 소스맵뷰 디스플레이단계와;

상기 소스 맵뷰의 이미지들의 일부를 분할, 분리, 복사 중 어느 하나 이상의 방법으로 상기 소스 맵뷰와 별개의 서브 맵뷰를 상기 맵뷰 형식으로 생성하거나, 이미 생성된 상기 서브 맵뷰의 이미지들의 일부를 분할, 분리, 복사 중 어느 하나 이상의 방법으로 또 다른 서브 맵뷰를 생성하여 복수의 서브 맵뷰를 생성하는 서브맵뷰 생성단계와;

상기 서브 맵뷰들의 각각을 맵뷰 단위로 이동 및 분류시키는 맵뷰별 취급단계를;

포함하여 구성되어, 캡슐 내시경에 의해 촬영된 상기 이미지들의 촬영 순서에 관계없이, 상기 서브맵뷰 생성단계에서 생성된 상기 서브 맵뷰들을 맵뷰 단위로 이동 및 분류시키는 것을 가능하게 하는 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법.
제 1항에 있어서,

상기 서브 맵뷰는 진단자에 의해 지정된 이벤트에 상응하는 상응도가 높은 이미지들을 모아 생성한 것을 특징으로 하는 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법.
제 1항에 있어서,

상기 서브 맵뷰는 인접한 이미지에 대하여 유사도가 낮은 이미지들을 모아 생성한 것을 특징으로 하는 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법.
제 1항에 있어서,

상기 서브 맵뷰는 사용자에 의해 정해진 임의의 시간 간격에 따라 시분할된 이미지들로 생성된 것을 특징으로 하는 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법.
제 1항 내지 제 4항 중 어느 한 항에 있어서, 상기 맵뷰별 취급단계는,

상기 서브 맵뷰를 캐스케이드 배열, 바둑판 배열, 탭배열 중 어느 하나로 배열하는 단계를;

포함하는 것을 특징으로 하는 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법.
제 1항 내지 제 4항 중 어느 한 항에 있어서,

상기 맵뷰 중 하나 이상에는 주석이 기재되는 주석란을 제공되는 것을 특징으로 하는 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법.
제 1항 내지 제 4항 중 어느 한 항에 있어서,

상기 맵뷰의 이미지들 중 지정된 이미지들을 확대하는 단계를;

추가적으로 포함하는 것을 특징으로 하는 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법.
제 1항 내지 제4항 중 어느 한 항에 있어서,

상기 다수의 맵뷰들 중 사용자에 의해 지정된 맵뷰에 대해서는 지정된 맵뷰에 속하는 이미지들의 위치를 타임바에 표시하는 단계를;

추가적으로 포함하는 것을 특징으로 하는 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법.
제 1항 내지 제 4항 중 어느 한 항에 있어서,

사용자에 의해 지정된 상기 맵뷰의 이미지들에 대해 표식을 디스플레이하는 단계를;

추가적으로 포함하는 것을 특징으로 하는 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법.
제 1항 내지 제 4항 중 어느 한 항에 있어서,

병증이 있는 것으로 선택된 모든 서브 맵뷰를 표시하는 요약 화면을 디스플레이하는 단계를;

추가적으로 포함하는 것을 특징으로 하는 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법.
제 1항 내지 제 4항 중 어느 한 항에 있어서,

2개 이상의 맵뷰로부터 상기 맵뷰의 일부 이미지들을 복사하여 요약 맵뷰를 생성하는 단계를;

추가적으로 포함하는 것을 특징으로 하는 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법.
제 1항 내지 제 4항 중 어느 한 항에 있어서,

상기 맵뷰 중 하나 이상은 이미지들의 색깔을 변조하여 특정 병증이 부각되는 색처리된 것을 특징으로 하는 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법.
제 12항에 있어서, 상기 색처리는,

HIS 색공간, HSL 색공간, HSV 색공간, YIQ 색공간, YCbCr 색공간, YUV 색공간, XYZ 색공간, CMY 색공간, 색파장(Color Wavelength) 처리, 보색 색공간(opponent colar space) 분석 중 어느 하나 이상을 행하는 것을 특징으로 하는 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 방법.
소화 기관의 이미지들을 촬영한 이미지들을 저장하는 기록매체와;

세로 방향으로의 다수의 열과 가로 방향으로의 다수의 칼럼으로 이루어진 다수의 빈 칸에 축소된 이미지들이 틈새없이 채워진 맵뷰 형식으로, 상기 이미지들이 상기 맵뷰 형식의 빈 칸에 축소된 이미지들로 표시되는 소스 맵뷰(source map view)와, 상기 소스 맵뷰의 이미지들의 일부를 분할, 분리, 복사 중 어느 하나 이상의 방법으로 상기 소스 맵뷰와 독립적으로 생성된 서브 맵뷰를 동시에 디스플레이하는 디스플레이 유닛과;

상기 소스 맵뷰로부터 상기 서브 맵뷰를 생성하고, 상기 서브 맵뷰들의 각각을 맵뷰 단위로 이동 및 분류시키는 프로세싱 유닛을;

포함하여 구성되어, 캡슐 내시경에 의해 촬영된 상기 이미지들의 촬영 순서에 관계없이, 상기 서브맵뷰 생성단계에서 생성된 상기 서브 맵뷰들을 맵뷰 단위로 이동 및 분류시키는 것을 특징으로 하는 캡슐 내시경에 의해 촬영된 소화 기관 이미지들의 디스플레이 프로세싱 장치.
삭제
삭제
삭제