KR102123061B1

KR102123061B1 - 사용자의 인터랙션을 기반으로 영상 내의 윤곽선을 분할하는 장치 및 방법

Info

Publication number: KR102123061B1
Application number: KR1020120135473A
Authority: KR
Inventors: 김예훈; 우경구
Original assignee: 삼성전자주식회사
Priority date: 2012-11-27
Filing date: 2012-11-27
Publication date: 2020-06-16
Also published as: EP2736016A3; KR20140070791A; CN103839254A; EP2736016A2; US10186062B2; CN103839254B; EP2736016B1; JP2014106980A; US20140146076A1

Abstract

사용자의 인터랙션을 기반으로 영상에서 관심영역을 분할하는 장치에 관한 것이다. 일 실시예에 따른 관심영역 분할장치는 하나 이상의 윤곽선 수정 모드를 지원하는 인터페이스를 사용자 단말에 제공하고, 영상에서 추출된 관심영역의 윤곽선을 그 영상에 중첩하여 그 인터페이스에 표시하는 인터페이스부와 사용자가 인터페이스상에서 윤곽선 수정 모드 중의 어느 하나를 선택하고 윤곽선을 수정하기 위한 동작을 수행하면, 선택된 수정 모드 및 그 동작에 따른 입력을 기초로 윤곽선을 수정하는 윤곽선수정부를 포함할 수 있다.

Description

사용자의 인터랙션을 기반으로 영상 내의 윤곽선을 분할하는 장치 및 방법{BOUNDARY SEGMENTATION APPARATUS AND METHOD BASED ON USER INTERACTION}

사용자의 인터랙션을 기반으로 영상에서 병변영역의 윤곽선을 분할하는 장치 및 방법과 관련된다.

일반적으로 의료영상 내의 관심영역(Region Of Interest, ROI)의 정확한 윤곽선은 CAD(Computer-aided diagnosis) 시스템이 진단결과를 판단하는데 중요한 역할을 한다. 즉, 관심영역, 특히 병변영역에 대한 정확한 윤곽선이 그려지면 그에 대한 특징값(feature)을 정확하게 추출할 수 있으므로 이와 같이 추출된 특징값을 이용하면 양성(bengin) 또는 악성(malignant) 여부에 대한 정확한 분류(classification)가 가능해져 진단의 정확도가 향상된다.

하지만, 일반적인 CAD 시스템에서 제공하는 윤곽선이 항상 정확한 것은 아니므로 사용자의 수정이 필요하게 된다. 그러나, 일반적인 CAD 시스템에서 제공하는 윤곽선 수정 방법은 마우스나 터치 스크린에서 포인트를 입력하여 수정하는 방식이 대부분으로 윤곽선 수정 시간이 오래 걸리고 사용자가 정밀하게 윤곽선을 수정하기에 많은 불편함이 존재하였다.

사용자가 영상 내의 관심영역에 대한 윤곽선을 편리하게 수정할 수 있는 사용자 인터랙티브한 인터페이스를 제공함으로써 관심영역의 윤곽선을 정확하게 분할할 수 있는 장치 및 방법이 제시된다.

일 양상에 따르면, 관심영역 분할장치는 하나 이상의 윤곽선 수정 모드를 지원하는 인터페이스를 사용자 단말에 제공하고, 영상에서 추출된 관심영역의 윤곽선을 그 영상에 중첩하여 그 인터페이스에 표시하는 인터페이스부 및 사용자가 인터페이스상에서 윤곽선 수정 모드 중의 어느 하나를 선택하고 윤곽선을 수정하기 위한 동작을 수행하면, 선택된 수정 모드 및 그 동작에 따른 입력을 기초로 윤곽선을 수정하는 윤곽선수정부를 포함할 수 있다.

윤곽선수정부는 사용자가 윤곽선 내부에서 동작을 수행하면 윤곽선을 안쪽 방향으로 수정하고, 윤곽선 외부에서 동작을 수행하면 윤곽선을 바깥쪽 방향으로 수정할 수 있다.

윤곽선수정부는 인터페이스상에서 사용자가 수행하는 동작에 따른 입력의 종류, 입력 강도 및 입력 속도 중의 하나 이상을 기초로 임계치를 조정하고, 그 임계치를 윤곽선 분할 알고리즘에 적용하여 윤곽선을 재계산할 수 있다.

윤곽선수정부는 동작이 클릭의 반복, 패닝 및 드래그 중의 어느 하나이면 임계치의 조정 폭을 상대적으로 크게 하여 윤곽선이 불연속적으로 변화되도록 수정하고, 상기 동작이 소정 시간 누르기이면 상기 임계치의 조정 폭을 상대적으로 작게 하여 윤곽선이 연속적으로 변화되도록 수정할 수 있다.

인터페이스부는 윤곽선수정부에 의해 재계산되는 하나 이상의 윤곽선 정보를 기초로 윤곽선의 변화를 인터페이스에 표시할 수 있다.

인터페이스부는 윤곽선의 변화를 원래의 윤곽선과 선의 종류 및 선의 색 중의 하나 이상을 다르게 하여 인터페이스에 표시할 수 있다.

윤곽선수정부는 선택된 수정 모드가 부분 수정 모드이면 일정 범위 내에서 윤곽선 분할 알고리즘을 적용하여 윤곽선을 수정할 수 있다.

일정 범위는 사용자가 수행한 동작이 최초로 시작된 지점을 중심으로 일정 크기를 갖도록 미리 설정된 범위일 수 있다.

일정 범위는 사용자가 인터페이스상에서 원형, 타원형, 다각형, 자유영역 지정 및 자유 곡선을 포함하는 범위 설정 방식 중의 어느 하나를 이용하여 임의로 설정한 범위일 수 있다.

윤곽선수정부는 선택된 수정 모드가 전체 수정 모드이면 윤곽선의 전체 범위에 대해 윤곽선 분할 알고리즘을 적용하여 전체의 윤곽선을 수정할 수 있다.

윤곽선수정부는 선택된 수정 모드가 자유 수정 모드이면 사용자가 인터페이스에서 윤곽선을 직접 그리는 동작을 기초로 윤곽선을 수정할 수 있다.

인터페이스부는 사용자가 윤곽선을 직접 그리는 동작을 수행하는 동안 인터페이스의 소정 영역에 그 동작을 수행하는 물체를 제외하고 윤곽선이 그려지는 부분을 보여줄 수 있다.

인터페이스의 소정 영역은 윤곽선이 그려지는 부분을 하나 이상의 단계로 확대하여 보여주는 확대 모드를 지원하고, 인터페이스부는 사용자가 어느 하나의 단계를 지정하면 그 지정된 단계에 대응하는 크기로 윤곽선이 그려지는 부분을 확대하여 인터페이스의 소정 영역에 보여줄 수 있다.

일 양상에 따르면, 관심영역 분할방법은 하나 이상의 윤곽선 수정 모드를 지원하는 인터페이스를 사용자 단말에 제공하는 단계, 영상에서 추출된 관심영역의 윤곽선을 그 영상에 중첩하여 인터페이스에 표시하는 단계, 사용자가 인터페이스상에서 윤곽선 수정 모드 중의 어느 하나를 선택하고 윤곽선을 수정하기 위한 동작을 수행하면, 선택된 수정 모드 및 그 동작에 따른 입력을 기초로 윤곽선을 수정하는 단계를 포함할 수 있다.

윤곽선 수정 단계는 사용자가 윤곽선 내부에서 동작을 수행하면 윤곽선을 안쪽 방향으로 수정하고, 윤곽선 외부에서 동작을 수행하면 윤곽선을 바깥쪽 방향으로 수정할 수 있다.

윤곽선 수정 단계는 인터페이스상에서 사용자가 수행하는 동작에 따른 입력의 종류, 입력 강도 및 입력 속도 중의 하나 이상을 기초로 임계치를 조정하고, 그 임계치를 윤곽선 분할 알고리즘에 적용하여 윤곽선을 재계산할 수 있다.

윤곽선 수정 단계는 동작이 클릭의 반복, 패닝 및 드래그 중의 어느 하나이면 임계치의 조정 폭을 상대적으로 크게 하여 윤곽선이 불연속적으로 변화되도록 수정하고, 상기 동작이 소정 시간 누르기이면 상기 임계치의 조정 폭을 상대적으로 작게 하여 윤곽선이 연속적으로 변화되도록 수정할 수 있다.

또한, 윤곽선 분할방법은 윤곽선수정부에 의해 재계산되는 하나 이상의 윤곽선 정보를 기초로 윤곽선의 변화를 인터페이스에 표시하는 단계를 더 포함할 수 있다.

윤곽선의 변화를 표시하는 단계는 윤곽선의 변화를 원래의 윤곽선과 선의 종류 및 선의 색 중의 하나 이상을 다르게 하여 인터페이스에 표시할 수 있다.

윤곽선 수정 단계는 선택된 수정 모드가 부분 수정 모드이면 일정 범위 내에서 윤곽선 분할 알고리즘을 적용하여 윤곽선을 수정할 수 있다.

윤곽선 수정 단계는 선택된 수정 모드가 전체 수정 모드이면 전체 범위에 대해 윤곽선 분할 알고리즘을 적용하여 전체 윤곽선을 수정할 수 있다.

윤곽선 수정 단계는 선택된 수정 모드가 자유 수정 모드이면 사용자가 인터페이스에서 윤곽선을 직접 그리는 동작을 기초로 윤곽선을 수정할 수 있다.

윤곽선의 변화를 표시하는 단계는 사용자가 윤곽선을 직접 그리는 동작을 수행하는 동안 인터페이스의 소정 영역에 그 동작을 수행하는 물체를 제외하고 윤곽선이 그려지는 부분을 보여줄 수 있다.

인터페이스의 소정 영역은 윤곽선이 그려지는 부분을 하나 이상의 단계로 확대하여 보여주는 확대 모드를 지원하고, 윤곽선의 변화를 표시하는 단계는 사용자가 어느 하나의 단계를 지정하면 그 지정된 단계에 대응하는 크기로 윤곽선이 그려지는 부분을 확대하여 인터페이스의 소정 영역에 보여줄 수 있다.

사용자 인터렉티브한 인터페이스의 제공을 통해 사용자가 영상 내의 관심영역에 대한 윤곽선을 편리하고 수정할 수 있고 이로 인해 관심영역이 정확하게 분할되어 진단의 정확성을 향상시킬 수 있다.

도 1은 일 실시예에 따른 관심영역의 윤곽선 분할장치의 블록도이다.
도 2는 일 실시예에 따른 윤곽선 분할장치의 인터페이스의 예이다.
도 3a 내지 도 3d는 일 실시예에 따른 윤곽선 분할장치의 부분 수정 모드를 설명하기 위한 도면이다.
도 4는 일 실시예에 따른 윤곽선 분할장치의 전체 수정 모드를 설명하기 위한 도면이다.
도 5a 및 도 5b는 일 실시예에 따른 윤곽선 분할장치의 자유 수정 모드를 설명하기 위한 도면이다.
도 6은 일 실시예에 따른 관심영역의 윤곽선 분할방법의 흐름도이다.
도 7은 일 실시예에 따른 윤곽선 분할방법 중의 윤곽선 수정 단계의 상세 흐름도이다.

기타 실시예들의 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다. 기재된 기술의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.

이하, 영상 내 관심영역의 윤곽선 분할장치의 실시예들을 도면들을 참고하여 자세히 설명하도록 한다.

도 1은 일 실시예에 따른 영상 내 관심영역의 윤곽선 분할장치의 블록도이다. 일 실시예에 따르면 윤곽선 분할장치(100)는 CAD(Computer-Aided Diagnosis) 진단 시스템에 적용되어 CAD 진단 시스템이 의료영상에서 추출한 관심영역(Region Of Interest, ROI) 특히, 병변영역의 윤곽선을 사용자가 용이하게 수정할 수 있도록 인터페이스를 제시하고, 사용자의 입력을 기반으로 정확하게 윤곽선을 수정하여 진단의 정확성을 향상시킬 수 있다. 또한, 일 실시예에 따르면 윤곽선 분할장치(100)는 CAD 진단 시스템 외에 일반적인 영상 처리 시스템에도 적용이 가능하며, 일반적인 영상에서 관심영역의 윤곽선의 정확한 분할이 가능하도록 지원할 수 있다.

도 1을 참조하면, 윤곽선 분할장치(100)는 윤곽선입력부(110), 인터페이스부(120) 및 윤곽선수정부(130)를 포함한다.

윤곽선입력부(110)는 영상 및 그 영상에서 추출된 관심영역의 윤곽선을 입력받을 수 있다. 예를 들어, CAD 시스템에서 추출된 관심영역의 윤곽선 정보를 의료영상과 함께 입력받을 수 있다. 한편, 윤곽선입력부(110)는 영상을 입력받아 그 영상에서 액티브 컨투어 모델(Active Contour Model) 등의 윤곽선 분할 알고리즘을 적용하여 관심영역의 윤곽선을 추출할 수 있다.

인터페이스부(120)는 사용자 단말에 사용자 인터랙티브한 인터페이스를 제공할 수 있다. 이때, 사용자 단말은 컴퓨터, 노트북, 스마트폰, 태블릿 PC 등의 모든 하드웨어 장치가 될 수 있으며, 인터페이스는 그 사용자 단말의 디스플레이부(예: 모니터, 터치패널 등)에 출력된다. 사용자는 제공되는 사용자 인터랙티브 기반의 인터페이스를 통해 윤곽선 수정을 위한 각종 동작을 용이하게 수행할 수 있고, 윤곽선 분할장치(100)는 사용자가 수행하는 각종 동작에 따른 입력을 수신하고 처리할 수 있다.

또한, 인터페이스부(120)는 입력받은 윤곽선 정보를 기초로 윤곽선(25)을 생성하고 입력받은 영상에 그 생성된 윤곽선(25)을 중첩하여 인터페이스에 표시할 수 있다.

도 2는 일 실시예에 따른 윤곽선 분할장치의 인터페이스의 예이다. 도 1 및 도 2를 참조하여 일 실시예에 따른 인터페이스 및 그 인터페이스를 통한 윤곽선 수정에 대해 설명한다.

인터페이스부(120)에 의해 사용자 단말(10)의 디스플레이부에 출력되는 인터페이스(20)는 영상 출력 영역(23)과 윤곽선 수정 모드를 선택할 수 있는 윤곽선 수정 모드 선택 영역(21)으로 이루어져, 하나 이상의 윤곽선 수정 모드(예: 전체 수정 모드, 부분 수정 모드 및 자유 수정 모드)를 지원할 수 있다. 사용자는 윤곽선 수정 모드 선택 영역(21)에서 어느 하나의 모드를 선택하고, 손, 손가락, 마우스, 스타일러스 펜 등의 입력 물체(27)를 이용하여 영상 출력 영역(23)에서 소정 동작을 수행함으로써 윤곽선(25)을 수정할 수 있다.

예를 들어, 사용자는 클릭(click) 동작을 수회 반복하거나 마우스 등을 이용한 드래그 동작 또는 터치패널에서 일정 방향으로 이동하는 패닝(panning) 동작을 수행함으로써 윤곽선을 수정할 수 있다. 또는 일정 시간 동안 누르는 동작을 수행함으로써 윤곽선을 수정하는 것도 가능하다. 이러한 동작들은 하나의 예로서 이에 한정되지 않으며, 그 밖의 미리 설정된 다양한 제스처나 멀티 터치를 통해 윤곽선을 수정하는 것이 가능하다.

윤곽선수정부(130)는 사용자가 인터페이스상에서 입력 물체(27)를 통해 소정 동작을 수행하면, 그 동작에 따른 사용자의 입력을 수신하여 사용자가 선택한 모드에 맞도록 윤곽선을 수정한다. 윤곽선수정부(130)는 사용자가 윤곽선(25)의 내부에서 소정 동작을 수행하면, 예를 들어 사용자가 최초로 동작을 수행한 지점(예: 클릭 지점, 패닝이나 드래그 동작의 시작 지점 등)이 윤곽선 내부이면 윤곽선(25)을 안쪽 방향으로 수정하고, 윤곽선(25)의 외부에서 소정 동작을 수행하면, 예를 들어 사용자가 최초로 동작을 수행한 지점(예: 클릭 지점, 패닝이나 드래그 동작의 시작 지점 등)이 윤곽선 외부이면 윤곽선(25)을 바깥쪽 방향으로 수정할 수 있다. 또는, 사용자가 멀티 터치 동작을 수행하는 경우 두 손가락을 동시에 터치패널에 터치한 상태에서 서로 멀어지게 함으로써 윤곽선(25)을 바깥쪽 방향으로 수정하고, 서로 가까워지도록 함으로써 윤곽선(25)을 안쪽방향으로 수정할 수 있다.

윤곽선수정부(130)는 사용자가 수행한 동작에 따른 입력이 윤곽선(25)을 안쪽 방향으로 수정하는 것이면 윤곽선 분할 알고리즘의 임계치(threshold)를 원래의 임계치보다 더 높게 설정하여 윤곽선(25)을 줄이고, 윤곽선(25)을 바깥쪽 방향으로 수정하는 것이면, 임계치를 원래의 임계치보다 더 낮게 설정하여 윤곽선을 크게 할 수 있다.

윤곽선수정부(130)는 사용자가 수행한 동작에 따라 수신되는 입력의 종류, 입력의 강도 및 입력 속도 등을 기초로 윤곽선 분할 알고리즘의 임계치를 조정하고, 조정된 임계치를 윤곽선 분할 알고리즘에 적용하여 윤곽선을 수정할 수 있다.

예를 들어, 사용자가 수행한 동작이 클릭의 수회 반복, 패닝 및 드래그 동작과 같이 불연속적(discrete)인 입력을 발생시키는 동작인 경우 그 임계치의 조정 폭을 상대적으로 크게 하여 윤곽선을 재계산함으로써 윤곽선이 불연속적으로 변화되는 것처럼 보여줄 수 있다. 만약, 사용자가 수행한 동작이 소정 시간 동안 누르기 동작과 같이 연속적(continuous)인 입력을 발생시키는 동작인 경우 그 임계치의 조정폭을 상대적으로 매우 작게 하여 윤곽선을 재계산함으로써 윤곽선이 연속적으로 변화되는 것처럼 사용자에게 보여 줄 수 있다.

이때, 임계치의 조정 폭은 입력의 속도 등에 따라 더 미세하게 조정될 수 있다. 예를 들어, 사용자가 클릭 동작을 수회 반복할 때 그 클릭 속도를 빠르게 하면 임계치의 조정 폭을 상대적으로 작게 하고, 클릭 속도를 느리게 하면 임계치의 조정 폭을 상대적으로 크게 하여 윤곽선의 변화 정도를 조절할 수 있다. 마찬가지로, 사용자가 패닝 동작이나 드래그 동작을 빠르게 하거나 느리게 하면 임계치의 조정 폭을 상대적으로 크거나 작게 하여 윤곽선의 변화 정도를 조절할 수 있다.

또한, 임계치의 조정 폭은 입력의 강도에 따라 더 미세하게 조정하여 윤곽선의 변화 정도를 조절하는 것도 가능하다. 예를 들어, 사용자가 소정 시간 누르기 동작을 수행할 때 그 누르는 압력 즉, 입력 강도를 다르게 하면 즉, 입력 강도를 높이면 임계치의 조정 폭을 작게 하여 더 연속적으로 변화되도록 하고, 입력 강도를 낮추면 임계치의 조정 폭을 상대적으로 크게 함으로써 상대적으로 덜 연속적으로 변화되도록 할 수 있다.

또한, 소정 시간 동안 사용자가 누르는 동작을 수행하는 경우 미리 시간 단위를 설정하여 설정된 단위의 시간이 경과할 때마다 임계치의 조정 폭을 다르게 하여 임계치를 조정할 수 있다. 예를 들어, 3초 단위로 누르는 시간이 경과될 때마다 임계치의 조정 폭을 줄여 가면서 윤곽선의 변화된 폭이 줄어들도록 할 수 있다.

인터페이스부(120)는 윤곽선수정부(130)에 의해 윤곽선이 재계산되면 재계산된 윤곽선 정보를 기초로 윤곽선을 생성하여 인터페이스에 표시할 수 있다. 윤곽선수정부(130)에 의해 윤곽선이 계속해서 수정되면 인터페이스부(120)는 수정된 윤곽선의 변화를 인터페이스에 표시함으로써 사용자는 자신이 수행하는 동작에 따라 변화되는 윤곽선을 확인할 수 있다.

이때, 인터페이스부(120)는 사용자가 육안으로 쉽게 윤곽선의 변화를 확인할 수 있도록 원래의 윤곽선(25)과는 선의 색, 종류 및 두께 등을 다르게 하여 인터페이스에 표시할 수 있다. 예를 들어, 원래의 윤곽선의 색이 검정색 실선이라면 수정되는 윤곽선은 검정색 점선, 빨간색 실선, 빨간색 점선 등 다양한 조합으로 표시할 수 있다.

한편, 사용자는 윤곽선을 수정하기 위해 인터페이스의 윤곽선 수정 모드 선택 영역(21)에서 어느 하나의 윤곽선 수정 모드를 선택하고 윤곽선을 수정할 수 있다. 이하, 도 3a 내지 도 5b를 참조하여 일 실시예에 따른 윤곽선 수정 모드를 설명한다.

도 3a 내지 도 3d는 일 실시예에 따른 윤곽선 분할장치(100)의 부분 수정 모드를 설명하기 위한 도면이다. 도 3a는 부분 수정 모드에서 윤곽선을 수정하는 것을 설명하기 위한 도면으로, 도 3a에 도시된 바와 같이 사용자는 윤곽선 수정 모드 중에서 부분 수정 모드를 선택함으로써 윤곽선(30)의 일부분, 즉, 일정 범위 내에서 윤곽선(30)이 수정되도록 할 수 있다. 도 3a의 좌측은 사용자가 인터페이스에서 입력 물체(32)를 윤곽선(30)의 내부에서 동작시킴으로써 안쪽 방향으로 윤곽선이 수정되는 것이 도시되어 있으며, 도 3a의 우측은 사용자가 윤곽선(30)의 외부에서 입력 물체(32)를 동작시킴으로써 윤곽선(30)이 바깥쪽 방향으로 수정되는 것이 도시되어 있다.

윤곽선수정부(130)는 사용자가 윤곽선 수정 모드 중에서 부분 수정 모드를 선택하면 일정 범위에 대하여 윤곽선 분할 알고리즘을 적용하여 윤곽선(30)을 부분적으로 수정할 수 있다.

이때, 윤곽선 분할 알고리즘을 적용하기 위한 일정 범위는 도 3b에 예시된 바와 같이, 사용자가 입력 물체(32)를 통해 동작을 수행한 최초 지점(33)을 중심으로 미리 설정된 범위(34)일 수 있다. 만약, 미리 설정된 범위(34)가 윤곽선(30)을 모두 포함할 정도가 크게 설정되어 있는 경우에는 사용자가 부분 수정 모드를 선택한 경우라 할지라도 전체 수정 모드로 동작하여 전체 범위에 대한 윤곽선 분할 알고리즘이 적용될 수 있다.

또한, 사용자는 윤곽선 분할 알고리즘을 적용하기 위한 일정 범위를 도 3c 및 도 3d에 예시된 바와 같이 직접 설정하는 것이 가능하다. 도 3c에 도시된 바와 같이, 인터페이스부(120)는 사용자가 부분 수정 모드를 선택하면 기본으로 미리 지정되어 있거나 사용자가 선택한 일정 모양(예: 원형, 타원형 및 다각형 등)의 도형(35, 36)을 인터페이스에 출력하여 사용자가 입력 물체(32)를 이용해 그 도형(35, 36)의 크기를 조절함으로써 윤곽선(30)의 일정 범위를 설정하도록 할 수 있다.

또한, 도 3d의 상단에 도시된 바와 같이, 사용자는 윤곽선(30)의 일부분을 수정하기 위해 입력 물체(32)를 통해 자유 영역(37)을 지정함으로써 일정 범위의 설정이 가능하고, 도 3d의 하단에 도시된 바와 같이 입력 물체(32)를 이용해 윤곽선(30)의 일정 범위를 자유 곡선(38) 형식으로 선택하여 일정 범위를 선택할 수 있다.

인터페이스부(120)는 사용자가 부분 수정 모드를 선택하면 수정 범위를 설정하는 방식(예: 도형을 통한 수정, 자유 영역 지정 및 자유 곡선 수정 등)을 선택하기 위한 메뉴(예: 팝업 메뉴 등)를 인터페이스에 출력할 수 있으며, 만약, 사용자가 도형을 통한 수정을 선택하면 다양한 도형 중의 어느 하나를 선택할 수 있도록 추가적인 메뉴를 출력할 수 있다.

만약, 사용자가 윤곽선을 수정하기 위한 일정 범위를 설정할 때 전체의 윤곽선이 포함되도록 그 범위를 설정하는 경우에는 전체 수정 모드로 동작하여 전체 윤곽선 범위에 대해 윤곽선 분할 알고리즘이 적용될 수 있다.

도 4는 일 실시예에 따른 윤곽선 분할장치의 전체 수정 모드를 설명하기 위한 도면이다. 사용자가 인터페이스의 윤곽선 수정 모드 중에서 전체 수정 모드를 선택하면 윤곽선수정부(130)는 사용자의 수행하는 동작에 따른 입력을 기초로 윤곽선(40)의 전체 범위에 대해 임계치를 조정하여 윤곽선 분할 알고리즘을 적용함으로써 윤곽선을 재계산할 수 있다.

도 4의 상단에 도시된 바와 같이, 사용자가 윤곽선(40) 내부에서 입력 물체(42)를 통해 클릭 동작 등의 소정 동작을 수행하면 윤곽선수정부(130)는 임계치를 원래의 임계치보다 더 높게 조정하여 윤곽선(40)이 안쪽 방향으로 즉, 줄어드는 방향으로 수정되도록 할 수 있다. 또는 도 4의 하단에 도시된 바와 같이, 사용자가 윤곽선(40)의 외부에서 입력 물체(42)를 통해 동작을 수행하면 임계치를 원래의 임계치보다 낮게 조정하여 윤곽선(40)이 바깥쪽 방향, 즉 커지는 방향으로 수정되도록 할 수 있다.

도 5a 및 도 5b는 일 실시예에 따른 윤곽선 분할장치(100)의 자유 수정 모드를 설명하기 위한 도면이다. 도 5a 및 도 5b를 참조하면, 윤곽선 분할장치(100)는 사용자가 자유롭게 윤곽선을 수정할 수 있도록 자유 수정 모드를 지원할 수 있다.

도 5a의 상단에 도시된 바와 같이, 사용자가 원래의 윤곽선(50)에서 수정할 부분에 대해 입력 물체(52)를 이용하여 인터페이스에서 직접 윤곽선(51)을 그릴 수 있다. 사용자는 비교적 정밀하게 원하는 윤곽선(50) 부분 또는 전체를 수정할 수 있다. 윤곽선수정부(130)는 사용자가 윤곽선을 직접 그리는 동작에 따라 인터페이스부(120)에 의해 인터페이스에 그려지는 윤곽선으로 윤곽선을 수정할 수 있다. 이와 같이 최종적으로 수정된 윤곽선(53)은 도 5b에 도시된 바와 같이 인터페이스에 표시된다. 한편, 사용자는 몇 번이라도 자신이 원하는 윤곽선이 생성될 때까지 윤곽선을 다시 그려 수정하는 것이 가능하다.

인터페이스부(120)는 도 5b에 도시된 바와 같이, 사용자가 영상 출력 영역(61)에 출력된 원래의 윤곽선(50)을 수정하기 위해 입력 물체(52)를 이용하여 윤곽선(51)을 그리면, 인터페이스(60)의 소정 영역(62)에 그 입력 물체를 제외하고 윤곽선이 그려지는 부분을 표시할 수 있다. 이는 사용자가 직접 그리는 윤곽선(51)이 입력 물체(52)에 의해 가려 사용자가 볼 수 없는 경우가 발생하므로 사용자가 윤곽선이 정확하게 그려지는지를 확인할 수 있도록 하기 위함이다.

이때, 소정 영역(62)은 윤곽선이 그려지는 부분을 하나 이상의 단계로 확대하거나 축소하는 돋보기 모드를 지원할 수 있으며, 사용자는 윤곽선이 그려지는 부분을 단계적으로 확대 또는 축소하여 정확하게 그려지고 있는지를 용이하게 확인할 수 있다.

도 6은 일 실시예에 따른 관심영역의 윤곽선 분할방법의 흐름도이다. 도 7은 일 실시예에 따른 윤곽선 분할방법 중의 윤곽선 수정 단계의 상세 흐름도이다. 도 6 및 도 7을 참조하여, 도 1의 실시예에 따른 윤곽선 분할장치(100)를 통해 영상에서 윤곽선을 분할하는 방법을 설명한다.

먼저, 윤곽선 분할장치(100)는 하나 이상의 윤곽선 수정 모드를 지원하는 인터페이스를 사용자 단말에 제공할 수 있다(단계 610). 사용자는 제공되는 인터페이스에서 손이나 손가락, 마우스, 스타일러스 펜 등의 다양한 입력 물체를 통해 각종 동작의 수행이 가능하고, 윤곽선 분할장치(100)는 사용자가 인터페이스에서 수행하는 동작에 따른 입력을 수신하여 처리할 수 있다.

하나 이상의 윤곽선 수정 모드는 도 2에 도시된 바와 같이, 부분 수정 모드, 전체 수정 모드 및 자유 수정 모드 중의 어느 하나일 수 있으며, 사용자가 어느 하나의 모드를 선택할 수 있도록 인터페이스의 소정 영역(21)에 모드 선택 메뉴가 출력될 수 있다.

윤곽선 분할장치(100)는 영상에서 추출된 관심영역의 윤곽선을 그 영상에 중첩하여 인터페이스에 표시할 수 있다(단계 620). 윤곽선 분할장치(100)는 CAD 진단 시스템이나 일반 영상 처리시스템에서 영상과 추출된 관심영역의 윤곽선 정보를 입력받아 그 윤곽선 정보를 이용하여 윤곽선을 생성하고, 생성된 윤곽선을 그 영상에 중첩하여 인터페이스에 표시할 수 있다. 윤곽선 분할장치(100)는 영상만이 입력되는 경우에는 그 영상에서 윤곽선 정보를 추출할 수 있다.

윤곽선 분할장치(100)는 사용자가 윤곽선 수정 모드 중의 어느 하나를 선택하고, 윤곽선을 수정하기 위한 소정 동작을 수행하면, 그 선택된 윤곽선 수정 모드 및 그 소정 동작에 따른 입력을 기초로 윤곽선을 수정할 수 있다(단계 630).

도 7을 참조하여 일 실시예에 따른 윤곽선 수정 절차를 좀 더 구체적으로 설명하면, 먼저, 사용자가 윤곽선 수정 모드 중의 어느 하나를 선택함으로써 윤곽선 수정 요청을 입력하면(단계 701), 윤곽선 분할장치(100)는 사용자가 선택한 수정 모드를 확인한다(단계 702).

사용자가 선택한 윤곽선 수정 모드가 전체 수정 모드이면 인터페이스에 표시된 윤곽선의 전체 범위에 대해 임계치, 파라미터 등을 조정한다(단계703). 이때, 사용자가 수행한 동작이 수행된 지점(예: 클릭 지점, 패닝 및 드래그 동작의 시작 지점 등)을 확인하여 윤곽선의 안쪽 방향으로 수정할지 바깥쪽 방향으로 수정할지를 결정할 수 있다. 도 4를 참조하여 예를 들어 설명한 바와 같이, 윤곽선 내부에서 동작이 수행되면 임계치를 원래의 임계치보다 더 높게 설정하여 윤곽선이 줄어들도록 할 수 있으며, 윤곽선 외부에서 동작이 수행되면 임계치를 원래의 임계치보다 더 낮게 설정하여 윤곽선이 커지도록 할 수 있다.

또한, 사용자가 수행한 동작에 따른 입력의 종류, 강도 및 속도 등을 판단하여 판단된 입력의 종류, 강도 및 속도 등에 따라 임계치의 조정 폭을 서로 다르게 조절함으로써 윤곽선의 변화 정도를 다르게 할 수 있다. 전술한 바와 같이, 불연속적인 입력이 발생하는 클릭 동작의 반복, 패닝, 드래그 등의 동작이 수행되면 임계치의 조정 폭을 크게 하여 불연속적으로 윤곽선이 변화되도록 할 수 있으며, 반대로, 소정 시간 누르기와 같이 연속적인 입력이 들어오면 임계치의 조정 폭을 작게 하여 연속적으로 윤곽선이 변화되도록 할 수 있다.

그 다음, 조정된 임계치, 파라미터 등을 윤곽선 분할 알고리즘에 적용하여 전체의 윤곽선에 대해 재계산한다(단계 704).

단계 702에서 확인 결과 사용자가 선택한 모드가 부분 수정 모드이면 사용자가 윤곽선을 수정할 일정 범위를 설정하기 위한 요청이 입력되는지 확인할 수 있다(단계 705).

확인 결과 수정 요청이 입력되지 않으면 사용자가 동작을 수행한 지점을 중심으로 미리 설정된 크기의 일정 범위로 윤곽선 수정 범위를 한정할 수 있다(단계 706). 확인 결과 수정 요청이 입력되면, 도 3b 내지 도 3d를 참조하여 예시한 바와 같이, 인터페이스에 윤곽선 수정 범위를 설정하기 위한 다양한 모드 예를 들어, 원, 타원, 사각형 등의 다각형 등의 도형을 이용한 범위 설정, 자유 영역 지정을 통한 범위 설정, 자유 곡선을 지정을 통한 범위 설정 등의 모드 중에서 어느 하나를 선택할 수 있는 메뉴를 인터페이스에 표시할 수 있다(단계 707). 사용자가 어느 하나의 모드를 이용하여 일정 범위를 설정하면 그 설정된 범위로 윤곽선의 수정 범위를 한정한다(단계 708).

이때, 전술한 바와 같이, 미리 설정된 크기의 일정 범위 또는 사용자에 의해 설정된 일정 범위가 인터페이스에 표시된 윤곽선을 모두 포함하는 경우 전체 수정 모드로 동작하게 된다.

그 다음, 한정된 일정 범위에 대해 임계치, 파라미터 등을 조정하고(단계 709), 조정된 임계치 등을 윤곽선 분할 알고리즘에 적용하여 그 설정된 일정 범위의 윤곽선을 재계산할 수 있다. 전체 수정 모드와 마찬가지로, 그 설정된 범위 내에서 사용자가 동작을 수행한 지점, 동작에 따른 입력 종류, 입력 강도 및 입력 속도 등을 판단하여 임계치의 조정 폭을 다르게 조정하여 윤곽선의 변화 정도를 다르게 할 수 있다.

단계 702에서 확인 결과 사용자가 선택한 모드가 자유 수정 모드이면, 사용자가 인터페이스에서 윤곽선을 그리는 동작을 수행하면 그 동작에 따른 입력을 기초로 윤곽선을 수정하고, 사용자에 의해 그려지는 윤곽선을 인터페이스에 표시할 수 있다(단계 711).

이때, 인터페이스의 소정 영역에 손, 손가락, 스타일러스 펜 등의 입력 물체를 제외하고 윤곽선이 그려지는 부분을 표시하도록 하는 확대 요청 정보가 입력되는지를 확인하고(단계 712), 확대 요청 정보가 입력되면 그 윤곽선이 그려지는 부분을 인터페이스의 소정 영역에 표시할 수 있다(단계 713). 이때, 확대할 단계의 정보를 입력받을 수 있으며, 그 단계에 맞도록 확대하여 표시할 수 있다.

도 6을 참조하면, 마지막으로 사용자의 동작에 기초하여 수정된 윤곽선 정보를 기초로 윤곽선의 변화를 인터페이스에 표시할 수 있다(단계 640). 이때, 윤곽선의 변화를 사용자가 용이하게 파악할 수 있도록 원래의 윤곽선과 선의 종류나 색, 두께 등을 다르게 하여 표시할 수 있다.

한편, 본 실시 예들은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터가 읽을 수 있는 코드로 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다.

컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등을 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 실시예들을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술 분야의 프로그래머들에 의하여 용이하게 추론될 수 있다.

본 개시가 속하는 기술분야의 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다.

100: 윤곽선 분할장치 110 : 윤곽선입력부
120: 인터페이스부 130 : 윤곽선수정부

Claims

적어도 하나의 관심 영역을 포함하는 의료 영상을 하나 이상의 윤곽선 수정 모드를 지원하는 인터페이스에 표시하고, 지정된 임계치를 가지는 윤곽선 분할 알고리즘을 이용하여 상기 의료 영상에서 추출된 적어도 하나의 관심영역의 윤곽선을 상기 의료 영상에 중첩하여 상기 인터페이스에 표시하는 인터페이스부; 및
사용자에 의해 상기 인터페이스상에서 상기 하나 이상의 윤곽선 수정 모드 중 어느 하나가 선택되고, 상기 추출된 적어도 하나의 관심 영역의 윤곽선을 수정하기 위한 동작의 수행이 감지되면, 상기 선택된 윤곽선 수정 모드 및 상기 동작에 따른 입력에 기초하여 상기 추출된 적어도 하나의 관심영역의 윤곽선을 수정하는 윤곽선 수정부;를 포함하고,
상기 윤곽선수정부는
상기 추출된 적어도 하나의 관심 영역의 윤곽선의 내부에서 상기 입력이 감지되면, 상기 윤곽선 분할 알고리즘의 임계치를 상기 지정된 임계치보다 높게 설정하여, 상기 추출된 적어도 하나의 관심 영역의 윤곽선을 상기 추출된 적어도 하나의 관심 영역의 윤곽선의 안쪽 방향으로 수정하고, 및
상기 추출된 적어도 하나의 관심 영역의 윤곽선 외부에서 상기 입력이 감지되면, 상기 윤곽선 분할 알고리즘의 임계치를 상기 지정된 임계치보다 작게 설정하여, 상기 추출된 적어도 하나의 관심 영역의 윤곽선을 상기 추출된 적어도 하나의 관심 영역의 윤곽선의 바깥쪽 방향으로 수정하는 윤곽선 분할장치.
삭제
제1항에 있어서, 상기 윤곽선수정부는
상기 동작에 따른 입력의 종류, 입력 강도 및 입력 속도 중의 적어도 하나에 기초하여 상기 지정된 임계치를 조정하고, 상기 조정된 임계치를 상기 윤곽선 분할 알고리즘에 적용하여 상기 추출된 적어도 하나의 관심영역의 윤곽선을 재계산하는 윤곽선 분할 장치.
제3항에 있어서, 상기 윤곽선수정부는
상기 동작이 클릭의 반복, 패닝 및 드래그 중의 어느 하나이면 상기 지정된 임계치의 조정 폭을 상대적으로 크게 하여 상기 추출된 적어도 하나의 관심영역의 윤곽선이 불연속적으로 변화되도록 수정하고, 상기 동작이 소정 시간 누르기이면 상기 지정된 임계치의 조정 폭을 상대적으로 작게 하여 상기 추출된 적어도 하나의 관심영역의 윤곽선이 연속적으로 변화되도록 수정하는 윤곽선 분할장치.
제3항에 있어서, 상기 인터페이스부는
상기 윤곽선수정부에 의해 재계산된 적어도 하나의 관심 영역의 윤곽선 정보를 기초로 상기 추출된 적어도 하나의 관심영역의 윤곽선의 변화를 상기 인터페이스에 표시하는 윤곽선 분할장치.
제5항에 있어서, 상기 인터페이스부는
상기 추출된 적어도 하나의 관심영역의 윤곽선을 상기 추출된 적어도 하나의 관심영역의 윤곽선과 선의 종류, 색 및 두께 중의 하나 이상을 다르게 하여 상기 인터페이스에 표시하는 윤곽선 분할장치.
제1항에 있어서, 상기 윤곽선수정부는
상기 선택된 윤곽선 수정 모드가 부분 수정 모드이면 일정 범위 내에 상기 윤곽선 분할 알고리즘을 적용하여 상기 추출된 적어도 하나의 관심영역의 윤곽선을 수정하는 윤곽선 분할장치.
제7항에 있어서, 상기 일정 범위는
상기 동작이 최초로 시작된 지점을 중심으로 일정 크기를 갖도록 미리 설정된 범위인 윤곽선 분할 장치.
제7항에 있어서, 상기 일정 범위는
상기 인터페이스상에서 원형, 타원형, 다각형, 자유영역 지정 및 자유 곡선을 포함하는 범위 설정 방식 중의 어느 하나를 이용하여 상기 사용자가 임의로 설정한 범위인 윤곽선 분할장치.
제1항에 있어서, 상기 윤곽선수정부는
상기 선택된 윤곽선 수정 모드가 전체 수정 모드이면, 상기 추출된 적어도 하나의 관심영역의 윤곽선의 전체 범위에 대해 상기 윤곽선 분할 알고리즘을 적용하여 상기 추출된 적어도 하나의 관심영역의 윤곽선 전체를 수정하는 윤곽선 분할장치.
제1항에 있어서, 상기 윤곽선수정부는
상기 선택된 윤곽선 수정 모드가 자유 수정 모드이면, 상기 사용자가 상기 인터페이스에 윤곽선을 직접 그리는 동작을 기초로 상기 추출된 적어도 하나의 관심영역의 윤곽선을 수정하는 윤곽선 분할장치.
제11항에 있어서, 상기 인터페이스부는
상기 사용자가 윤곽선을 직접 그리는 동작을 수행하는 동안 상기 인터페이스의 소정 영역에 상기 동작을 수행하는 물체를 제외하고 윤곽선이 그려지는 부분을 보여주는 윤곽선 분할장치.
제12항에 있어서, 상기 인터페이스의 소정 영역은
상기 윤곽선이 그려지는 부분을 하나 이상의 단계로 확대하여 보여주는 확대 모드를 지원하고,
상기 인터페이스부는
상기 사용자가 어느 하나의 단계를 지정하면, 상기 지정된 단계에 대응하는 크기로 상기 윤곽선이 그려지는 부분을 확대하여 상기 인터페이스의 소정 영역에 보여주는 윤곽선 분할장치.
컴퓨터 판독 가능한 프로그램을 저장 가능한 비 일시적인(non-transitory) 기록 매체에 있어서, 상기 프로그램은 컴퓨터 시스템에 의해 실행되었을 때, 상기 컴퓨터 시스템이,
적어도 하나의 관심 영역을 포함하는 의료 영상을 하나 이상의 윤곽선 수정 모드를 지원하는 인터페이스에 표시하는 단계;
지정된 임계치를 가지는 윤곽선 분할 알고리즘을 이용하여, 상기 의료 영상에 포함된 상기 적어도 하나의 관심 영역의 윤곽선을 추출하는 단계;
상기 추출된 적어도 하나의 관심영역의 윤곽선을 상기 의료 영상에 중첩하여 상기 인터페이스에 표시하는 단계;
사용자에 의해 상기 인터페이스상에서 상기 하나 이상의 윤곽선 수정 모드 중 어느 하나가 선택되고, 상기 추출된 적어도 하나의 관심 영역의 윤곽선을 수정하기 위한 동작의 수행이 감지되면, 상기 선택된 윤곽선 수정 모드 및 상기 동작에 따른 입력에 기초하여, 상기 추출된 적어도 하나의 관심영역의 윤곽선을 수정하는 단계;를 포함하고,
상기 윤곽선을 수정하는 단계는
상기 추출된 적어도 하나의 관심 영역의 윤곽선의 내부에서 상기 입력이 감지되면, 상기 윤곽선 분할 알고리즘의 임계치를 상기 지정된 임계치보다 높게 설정하여, 상기 추출된 적어도 하나의 관심 영역의 윤곽선을 상기 추출된 적어도 하나의 관심 영역의 윤곽선의 안쪽 방향으로 수정하는 단계; 및
상기 추출된 적어도 하나의 관심 영역의 윤곽선 외부에서 상기 입력이 감지되면, 상기 윤곽선 분할 알고리즘의 임계치를 상기 지정된 임계치보다 작게 설정하여, 상기 추출된 적어도 하나의 관심 영역의 윤곽선을 상기 추출된 적어도 하나의 관심 영역의 윤곽선의 바깥쪽 방향으로 수정하는 단계를 수행하도록 하는 기록 매체.
삭제
제14항에 있어서, 상기 윤곽선을 수정 단계는
상기 동작에 따른 입력의 종류, 입력 강도 및 입력 속도 중의 적어도 하나에 기초하여, 상기 지정된 임계치를 조정하고, 상기 조정된 임계치를 상기 윤곽선 분할 알고리즘에 적용하여 상기 추출된 적어도 하나의 관심영역의 윤곽선을 재계산하는 단계를 포함하는 기록 매체.
제16항에 있어서, 상기 윤곽선을 수정 단계는
상기 동작이 클릭의 반복, 패닝 및 드래그 중의 어느 하나이면 상기 지정된 임계치의 조정 폭을 상대적으로 크게 하여 상기 추출된 적어도 하나의 관심영역의 윤곽선이 불연속적으로 변화되도록 수정하고, 상기 동작이 소정 시간 누르기이면 상기 지정된 임계치의 조정 폭을 상대적으로 작게 하여 상기 추출된 적어도 하나의 관심 영역의 윤곽선이 연속적으로 변화되도록 수정하는 단계를 포함하는 기록 매체.
제16항에 있어서,
상기 프로그램은 상기 컴퓨터 시스템에 의해 실행되었을 때, 상기 컴퓨터 시스템이,
상기 재계산된 적어도 하나의 관심 영역의 윤곽선 정보를 기초로 상기 추출된 적어도 하나의 관심 영역의 윤곽선의 변화를 상기 인터페이스에 표시하는 단계;를 더 포함하는 기록 매체.
제18항에 있어서, 상기 추출된 적어도 하나의 관심 영역의 윤곽선의 변화를 표시하는 단계는
상기 재계산된 적어도 하나의 관심 영역의 윤곽선을 상기 추출된 적어도 하나의 관심영역의 윤곽선과 선의 종류 및 선의 색 중의 하나 이상을 다르게 하여 상기 인터페이스에 표시하는 단계를 포함하는 기록 매체.
제14항에 있어서, 상기 윤곽선을 수정 단계는
상기 선택된 윤곽선 수정 모드가 부분 수정 모드이면 일정 범위 내에 상기 윤곽선 분할 알고리즘을 적용하여 상기 추출된 적어도 하나의 관심영역의 윤곽선을 수정하는 단계를 포함하는 기록매체.
제20항에 있어서, 상기 일정 범위는
상기 동작이 최초로 시작된 지점을 중심으로 일정 크기를 갖도록 미리 설정된 범위인 기록 매체.
제20항에 있어서, 상기 일정 범위는
상기 인터페이스상에서 원형, 타원형, 다각형, 자유영역 지정 및 자유 곡선을 포함하는 범위 설정 방식 중의 어느 하나를 이용하여 상기 사용자가 임의로 설정한 범위인 기록 매체.
제14항에 있어서, 상기 윤곽선을 수정 단계는
상기 선택된 윤곽선 수정 모드가 전체 수정 모드이면, 상기 추출된 적어도 하나의 관심영역의 윤곽선의 전체 범위에 대해 상기 윤곽선 분할 알고리즘을 적용하여 상기 추출된 적어도 하나의 관심영역의 윤곽선 전체를 수정하는 단계를 포함하는 기록 매체.
제14항에 있어서, 상기 윤곽선을 수정 단계는
상기 선택된 윤곽선 수정 모드가 자유 수정 모드이면, 상기 사용자가 상기 인터페이스에 윤곽선을 직접 그리는 동작을 기초로 상기 추출된 적어도 하나의 관심영역의 윤곽선을 수정하는 단계를 포함하는 기록 매체.
제24항에 있어서, 상기 추출된 적어도 하나의 관심 영역의 윤곽선의 변화를 표시하는 단계는
상기 사용자가 윤곽선을 직접 그리는 동작을 수행하는 동안 상기 인터페이스의 소정 영역에 상기 동작을 수행하는 물체를 제외하고 윤곽선이 그려지는 부분을 보여주는 단계를 포함하는 기록 매체.
제25항에 있어서, 상기 인터페이스의 소정 영역은
상기 윤곽선이 그려지는 부분을 하나 이상의 단계로 확대하여 보여주는 확대 모드를 지원하고,
상기 윤곽선의 변화를 표시하는 단계는
상기 사용자가 어느 하나의 단계를 지정하면, 상기 지정된 단계에 대응하는 크기로 상기 윤곽선이 그려지는 부분을 확대하여 상기 인터페이스의 소정 영역에 보여주는 단계를 포함하는 기록 매체.