KR20220154471A

KR20220154471A - 치아 영역을 확인하기 위한 재구성 영상 생성 방법

Info

Publication number: KR20220154471A
Application number: KR1020210062055A
Authority: KR
Inventors: 박수희; 주원형
Original assignee: 오스템임플란트 주식회사
Priority date: 2021-05-13
Filing date: 2021-05-13
Publication date: 2022-11-22
Also published as: KR102577339B1

Abstract

본 발명에 따르면, 파노라마 영상에 세그멘테이션(segmentation)을 적용하여 치아 외곽선을 얻는 단계, 상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계 및 상기 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성하는 단계를 포함하는 치아 영역을 확인하기 위한 재구성 영상 생성 방법이 개시된다.

Description

치아 영역을 확인하기 위한 재구성 영상 생성 방법 {METHOD FOR GENERATING RECONSTRUCTED IMAGES TO IDENTIFY TEETH AREA}

본 발명은 파노라마 영상에서 치아 영역을 확인하기 위한 재구성 영상 생성 방법에 관한 것이다.

파노라마 영상은 촬영 대상의 치아와 치아 주위 조직의 전반적인 상태에 대한 파악과 악골(턱뼈) 내 병소의 유무를 확인하기에 적합한 영상이다.

하지만 기존 파노라마 영상에서 치과적으로 문제가 될 수 있는 부위의 진단이 끝난 후, 해당 부위에 대한 치료를 거쳐 구강 센서 등으로 치료에 해당하는 특정 부위만 촬영 했을 경우, 초기 상태와 비교하고자 할 때 영상 규격 및 범위가 서로 달라 초진 시 환자 구강 상태와 치료 후 상태를 비교하기에 다소 불편한 점이 존재할 수 있다.

따라서 영상의 크기와 위치정보의 문제를 해결하기 위해 기존 파노라마 영상에서 특정 부위만을 별도 저장하고 싶을 경우가 필요할 수 있는데, 이러한 상황에서 사용자가 직접 FMX 템플릿에 맞는 형태로 영상의 크기 및 각도 조절 및 치식번호 설정 등을 수동으로 처리해야 할 작업이 늘어나기 때문에 불편하고 시간 소요가 많이 된다는 단점이 있다.

예를 들어, 하기 도 1의 (a)에 나타난 바와 같이, 종래의 경우 ‘사용자 영역 캡쳐’ 기능을 사용하여 원하는 구역(1a)을 수동으로 캡쳐한 후 각도 회전 및 클리핑(Clipping) 하여 영상을 편집하고, FMX 템플릿을 삽입한다.

또한, 하기 도 1의 (b)에 나타난 바와 같이, 종래의 또 다른 경우, 파노라마 영상에서 보이는 스마일라인(상/하악 교합면이 이루는 곡선)(1b)을 기준으로 FMX 캡쳐 툴을 제공하기 때문에, 프레임 크기 및 위치, 각도는 사용자의 수동적인 조정이 필요하다.

본 발명은 사용자가 직접 FMX 템플릿에 맞는 형태로 영상의 크기 및 각도 조절 및 치식번호 설정 등을 수동으로 처리하는 문제점을 해결하기 위한 것으로, 세그멘테이션(segmentation) 정보를 이용하여 각 치아에 해당하는 FMX 레이아웃을 자동으로 조정하여 치아 영역을 확인하도록 하는데 그 목적이 있다.

본 발명의 명시되지 않은 또 다른 목적들은 하기의 상세한 설명 및 그 효과로부터 용이하게 추론할 수 있는 범위 내에서 추가적으로 고려될 수 있다.

상기 과제를 해결하기 위해, 본 발명의 일 측면에 따른 컴퓨팅 장치에 의하여 수행되는 재구성 영상 생성 방법은, 파노라마 영상에 세그멘테이션(segmentation)을 적용하여 치아 외곽선을 얻는 단계, 상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계 및 상기 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성하는 단계를 포함한다.

여기서, 상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계는, 상기 치아가 제1 치아 및 제2 치아를 포함하는 경우, 상기 제1 치아의 치관 시작점부터 치근 끝점까지의 제1 길이 또는 상기 제2 치아의 치관 시작점부터 치근 끝점까지의 제2 길이 중 어느 하나와 상기 제1 치아 및 상기 제2 치아 양끝의 풍융부 사이의 길이에 기초하여 FMX 박스를 생성하는 단계를 포함할 수 있다.

또한, 상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계는, 상기 제1 치아의 치축 및 제2 치아의 치축의 평균 치축을 기준으로 상기 생성된 FMX 박스의 기울기를 조정하여, 상기 파노라마 영상의 상기 제1 관심 영역에 매핑하는 단계를 더 포함할 수 있다.

여기서, 상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계는, 상기 치아가 제1 치아, 제2 치아 및 제3 치아를 포함하는 경우, 상기 제1 치아의 치관 시작점부터 치근 끝점까지의 제1 길이, 상기 제2 치아의 치관 시작점부터 치근 끝점까지의 제2 길이 또는 상기 제3 치아의 치관 시작점부터 치근 끝점까지의 제3 길이 중 어느 하나와 상기 제1 치아 내지 상기 제3 치아의 풍융부 사이의 길이에 기초하여 FMX 박스를 생성하는 단계를 포함할 수 있다.

또한, 상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계는, 상기 제1 치아 및 제3 치아 사이에 위치한 제2 치아의 치축을 기준으로 상기 생성된 FMX 박스의 기울기를 조정하여, 상기 파노라마 영상의 상기 제1 관심 영역에 매핑하는 단계를 더 포함할 수 있다.

여기서, 상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계는, 상기 치아가 상악의 제1 치아 및 하악의 제2 치아를 포함하는 경우, 상기 상악의 치은의 최하단부터 상기 하악의 치은의 최상단까지의 제1 길이와 상기 상악의 제1 치아 및 상기 하악의 제2 치아 양끝의 풍융부 사이의 제2 길이에 기초하여 FMX 박스를 생성하는 단계를 포함할 수 있다.

또한, 상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계는, 상기 치아가 상악의 제1 치아 및 하악의 제2 치아의 교합면에 수직인 라인의 기울기를 기준으로 상기 생성된 FMX 박스의 기울기를 조정하여, 상기 파노라마 영상의 상기 제1 관심 영역에 매핑하는 단계를 더 포함할 수 있다.

여기서, 상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계는, 기 학습된 인공 지능 모델을 이용하여, 상기 파노라마 영상에서 상실치 영역을 인식하고, 인식한 상기 상실치 영역에 대해 상기 FMX 박스 생성 기준에 따라 제2 관심 영역을 구획하는 단계를 포함하고, 상기 인공 지능 모델은, 학습용 파노라마 세그멘테이션(segmentation) 영상을 입력 데이터로 하고, 상기 학습용 파노라마 세그멘테이션(segmentation) 영상에서 인식한 상실치 영역을 레이블로 하여 학습된 것일 수 있다.

여기서, 상기 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성하는 단계는, 상기 파노라마 영상에서, 상기 제1 관심 영역에 대응하는 일 영역을 컷팅하여 제1 뷰(view)의 영상으로 재구성 영상을 생성할 수 있다.

본 발명의 또 다른 측면에 따른 컴퓨팅 장치에 의하여 수행되는 재구성 영상 생성 방법은, 파노라마 영상에 세그멘테이션(segmentation)을 적용하여 치아 외곽선을 얻는 단계, 사용자로부터 상기 파노라마 영상에 포함된 적어도 하나의 치아에 대한 선택 입력을 수신하는 단계, 상기 선택 입력에 기초하여, 상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계 및 상기 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성하는 단계를 포함한다.

여기서, 상기 파노라마 영상에 포함된 치아들은 관련도에 따라 복수의 치아 그룹에 매칭되어 있으며, 상기 선택 입력에 기초하여, 상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계는, 상기 사용자에 의해 선택된 적어도 하나의 제1 치아, 상기 복수의 치아 그룹 중 상기 제1 치아에 매칭된 치아 그룹 내에 포함되는 제2 치아를 포함하여 FMX 박스를 생성하고 상기 파노라마 영상의 상기 제1 관심 영역에 매핑 할 수 있다.

여기서, 상기 파노라마 영상에 포함된 치아들은 관련도에 따라 복수의 치아 그룹에 매칭되어 있으며, 상기 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성하는 단계는, 상기 사용자에 의해 선택된 적어도 하나의 제1 치아를 포함하는 제1 관심 영역에 대응하는 제1 뷰(view)의 영상을 생성하는 단계, 상기 복수의 치아 그룹 중 상기 제1 치아에 매칭된 치아 그룹 내에 포함되는 제2 치아를 포함하는 제2 관심 영역에 대응하는 제2 뷰(view)의 영상을 생성하는 단계 및 상기 제1 뷰(view) 및 제2 뷰(view)의 영상으로 재구성 영상을 생성하는 단계를 포함할 수 있다.

본 발명의 또 다른 측면에 따른 컴퓨팅 장치에 의하여 수행되는 재구성 영상 생성 방법은, 파노라마 영상에 세그멘테이션(segmentation)을 적용하여 치아 외곽선을 얻는 단계, 사용자로부터 상기 파노라마 영상에 포함된 적어도 하나의 치아에 대한 선택 입력을 수신하는 단계, 상기 선택 입력에 기초하여, 상기 치아 외곽선을 기준으로 제1 관심 영역을 구획하는 단계 및 상기 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성하는 단계를 포함한다.

여기서, 상기 사용자로부터 상기 파노라마 영상에 포함된 적어도 하나의 치아에 대한 선택 입력을 수신하는 단계는, 상기 사용자로부터 상기 파노라마 영상에 포함되는 연속한 복수의 치아에 선택 입력을 일시에 수신할 수 있다.

또한, 컴퓨터 프로그램을 저장하고 있는 컴퓨터 판독 가능 기록매체로서, 상기 컴퓨터 프로그램은, 재구성 영상 생성 방법을 프로세서가 수행하도록 하기 위한 명령어를 포함하는, 컴퓨터 판독 가능한 기록매체를 제공할 수 있다.

또한, 컴퓨터 판독 가능한 기록매체에 저장되어 있는 컴퓨터 프로그램으로서, 상기 컴퓨터 프로그램은, 재구성 영상 생성 방법을 프로세서가 수행하도록 하기 위한 명령어를 포함하는, 컴퓨터 프로그램을 제공할 수 있다.

이상에서 설명한 바와 같이 본 발명의 실시예들에 의하면, 세그멘테이션 정보를 기반으로 하여 파노라마 영상에서 치아 크기 및 각도에 맞추어 FMX 레이아웃의 조절이 가능하기 때문에, 사용자의 수동적인 영역 수정 및 이동하는 과정을 불필요하게 하므로 사용자의 이용 시간을 단축시키고, 영상 획득의 정확성을 향상시킬 수 있다.

여기에서 명시적으로 언급되지 않은 효과라 하더라도, 본 발명의 기술적 특징에 의해 기대되는 이하의 명세서에서 기재된 효과 및 그 잠정적인 효과는 본 발명의 명세서에 기재된 것과 같이 취급된다.

도 1은 종래의 수동적인 FMX 캡쳐 툴 생성 방식을 나타낸 도면이다.
도 2는 본 발명의 일 실시예에 따른 치아 영역을 확인하기 위한 재구성 영상 생성 방법을 수행하는 컴퓨팅 장치의 블록도이다.
도 3은 본 발명의 일 실시예에 따른 FMX 레이아웃 구성을 예로 들어 나타낸 도면이다.
도 4는 본 발명의 일 실시예에 따른 파노라마 영상에서 FMX 캡쳐 툴이 적용된 화면을 예로 들어 나타낸 도면이다.
도 5a 내지 도 5d는 본 발명의 일 실시예에 따른 FMX 박스 생성 기준에 따라 관심 영역을 구획하는 방법을 나타낸 도면이다.
도 6은 본 발명의 제1 실시예에 따른 재구성 영상 생성 방법을 나타낸 흐름도이다.
도 7은 본 발명의 제2 실시예에 따른 재구성 영상 생성 방법을 나타낸 흐름도이다.
도 8은 본 발명의 제3 실시예에 따른 재구성 영상 생성 방법을 나타낸 흐름도이다.

이하, 본 발명에 관련된 치아 영역을 확인하기 위한 재구성 영상 생성 방법에 대하여 도면을 참조하여 보다 상세하게 설명한다. 그러나, 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며, 설명하는 실시예에 한정되는 것이 아니다. 그리고, 본 발명을 명확하게 설명하기 위하여 설명과 관계없는 부분은 생략되며, 도면의 동일한 참조부호는 동일한 부재임을 나타낸다.

이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.

본 발명은 치아 영역을 확인하기 위한 재구성 영상 생성 방법에 관한 것이다.

도 2는 본 발명의 일 실시예에 따른 치아 영역을 확인하기 위한 재구성 영상 생성 방법을 수행하는 컴퓨팅 장치의 블록도이다.

도 2를 참조하면, 본 발명의 일 실시예에 따른 컴퓨팅 장치(10)는 입력부(100), 출력부(200), 프로세서(300) 및 메모리(400)를 포함한다.

본 발명의 일 실시예에 따른 치아 영역을 확인하기 위한 재구성 영상 생성 방법을 수행하는 컴퓨팅 장치(10)는 사용자가 파노라마 영상에서 치아 영역을 선택적으로 확인할 수 있는 장치이다.

입력부(100)는 사용자로부터 파노라마 영상에 포함된 적어도 하나의 치아에 대한 선택 입력을 수신한다.

입력부(100)는 사용자가 컴퓨팅 장치(10)를 제어하기 위한 데이터를 입력하는 수단을 의미한다. 입력부(100)는 키 패드(key pad), 돔 스위치(dome switch), 터치 패드(접촉식 정전 용량 방식, 압력식 저항막 방식, 적외선 감지 방식, 표면 초음파 전도 방식, 적분식 장력 측정 방식, 피에조 효과 방식 등), 조그 휠, 조그 스위치 등이 있을 수 있으나 이에 한정되는 것은 아니다.

사용자는 입력부(100)를 이용하여 클릭, 드래그, 버튼을 누르는 다운 동작 등을 포함하는 동작을 수행할 수 있고, 드래그 동작의 경우 버튼다운 및 버튼 업 동작 사이의 궤적을 입력 위치로 판단하지만, 본 발명은 이에 한정되는 것은 아니고, 필요에 따라 버튼다운 및 업 동작 중 하나 또는 모든 동작을 이용하여 입력 위치를 판단할 수 있다.

출력부(200)는 파노라마 영상과 사용자가 확인하고자 하는 관심 영역에 대응하는 뷰(view)의 영상으로 재구성 영상을 출력할 수 있다.

본 발명의 일 실시예에 따른 출력부(200)는 디스플레이 기기를 포함하며, 여기서 디스플레이 기기는 디지털 TV, 모니터 등과 같이 디스플레이 기능이 있는 기기를 모두 포함한다.

프로세서(300)는 파노라마 영상에 세그멘테이션(segmentation)을 적용하여 치아 외곽선을 얻고, 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하여, 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성할 수 있다.

본 명세서에서는, FMX 박스가 관심 영역을 구획하기 위한 레이아웃을 의미하며, FMX 박스는, FMX 레이아웃, FMX 템플릿 등의 용어를 통칭할 수 있다.

또한, FMX 박스를 파노라마 영상의 관심 영역에 매핑하면, 하기 도 4에 나타난 바와 같이, 파노라마 영상에서 FMX 캡쳐 툴이 생성되는 것으로 설명한다.

또한, 프로세서(300)는 파노라마 영상에 세그멘테이션(segmentation)을 적용하여 치아 외곽선을 얻고, 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하고, 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성할 수 있다.

또한, 프로세서(300)는 파노라마 영상에 세그멘테이션(segmentation)을 적용하여 치아 외곽선을 얻고, 입력부(100)가 파노라마 영상에 포함된 적어도 하나의 치아에 대한 사용자의 선택 입력을 수신하면, 선택 입력에 기초하여, 치아 외곽선을 기준으로 제1 관심 영역을 구획하고, 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성할 수 있다.

또한, 프로세서(300)는, 파노라마 영상에 세그멘테이션(segmentation)을 적용하여 치아 외곽선을 얻고, 만일 상실치가 존재하는 경우, 기 학습된 인공 지능 모델을 이용하여, 상기 파노라마 영상에서 상실치 영역을 인식하고, 인식한 상기 상실치 영역에 대해 상기 FMX 박스 생성 기준에 따라 제2 관심 영역을 구획할 수 있다.

여기서, 인공 지능 모델은, 학습용 파노라마 세그멘테이션 영상을 입력 데이터로 하고, 상기 학습용 파노라마 세그멘테이션 영상에서 인식한 상실치 영역을 레이블로 하여 학습된 것일 수 있다.

여기서, 학습용 파노라마 세그멘테이션 영상은 동일한 대상체에서 얻은 영상 또는 다수의 대상체에서 얻은 영상일 수 있다.

본 발명의 일 실시예에 따르면, 인공 지능 모델은 심층신경망(Deep Neural Network; DNN), 나선형 신경망(즉, Convolutional Neural Network; CNN), 순환형 신경망(Recurrent Neural Network; RNN) 중 적어도 하나를 포함하는 신경망 구조로 형성될 수 있으며, 신경망의 구조가 이에 한정되는 것은 아니다.

구체적으로, 본 발명에 따른 인공 지능 모델의 신경망 구조는 컨볼루션 풀링 층(Convolutional Pooling Layer), 로컬 접속 층(a locally-connected layer) 및 완전 연결 층(fully-connected layer)을 포함하는 층들의 세트로 구현될 수 있다.

또한, 본 발명에 따른 인공 지능 모델의 신경망 구조는 다양한 판단기준(즉, 파라미터(Parameter))를 더 포함할 수 있고, 입력되는 영상 분석을 통해 새로운 판단기준(즉, 파라미터)를 추가할 수도 있다.

여기서, 프로세서(300)는 기능에 따라 복수 개의 모듈들로 구분될 수도 있고, 하나의 프로세서에서 기능들을 수행할 수도 있다. 프로세서는 중앙처리장치(central processing unit(CPU)), 어플리케이션 프로세서(application processor(AP)), 마이크로 컨트롤러 유닛(micro controller unit(MCU)) 또는 커뮤니케이션 프로세서(communication processor(CP)) 중 하나 또는 그 이상을 포함할 수 있다.

메모리(400)는 파노라마 영상을 저장한다.

또한, 메모리(400)는 프로세서(300)의 처리 및 제어를 위한 프로그램들(하나 이상의 인스트럭션들)을 저장할 수 있고, 미리 학습된 인공 지능 모델이 저장되며, 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어, SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 컴퓨터 판독 가능한 저장매체를 포함할 수 있다.

메모리(400)에 저장된 프로그램들은 기능에 따라 복수 개의 모듈들로 구분될 수 있다.

도 3은 본 발명의 일 실시예에 따른 FMX 레이아웃 구성을 예로 들어 나타낸 도면이다.

치과에서 촬영하는 구강 센서 (I/O Sensor) 영상 전악 촬영 시 촬영된 영상(30)에서 도 3과 같은 FMX 레이아웃 형태에 지정된 번호에 따라 영상을 정렬 및 관찰할 수 있다.

FMX 레이아웃 형태에 지정된 번호에 따라 정렬된 영상들은, 치아 번호(31)(예를 들면, #11, #12, #46, #47, #48 등)와 함께 매칭되는 전악 구강 센서 영상 전용 레이아웃(32)과 Bitewing 영상(33)을 포함할 수 있다.

도 4는 본 발명의 일 실시예에 따른 파노라마 영상에서 FMX 캡쳐 툴이 적용된 화면을 예로 들어 나타낸 도면이다.

도 4는 파노라마 영상에서 FMX 캡쳐 툴이 적용된 전체 화면(40)을 나타낸 것으로, 치식 번호 별로 FMX 박스 생성 기준을 관심 영역이 구획됨을 확인할 수 있다.

예를 들어, 상악의 제1 대구치 내지 제3 대구치를 포함하는 영역(41), 상악의 제1 소구치 및 제2 소구치를 포함하는 영역(42)을 구획할 수 있다.

또한, 본 발명의 일 실시예에서는 상악과 하악의 대구치가 맞물리는 영역(43)을 함께 표시할 수 있고, 상악과 하악의 소구치가 맞물리는 영역(44)을 함께 표시할 수 있다. 이에 따라, 상악과 하악에 위치한 개별 치아뿐만 아니라, Bitewing 영상도 함께 확인할 수 있는 장점이 있다.

도 5a 내지 도 5d는 본 발명의 일 실시예에 따른 FMX 박스 생성 기준에 따라 관심 영역을 구획하는 방법을 나타낸 도면이다.

도 5a는 본 발명의 일 실시예에 따른 FMX 박스 생성 기준에 따라 전치부 또는 소구치를 포함하는 관심 영역을 구획하는 방법을 나타낸 도면이다.

도 5a를 참조하면, 파노라마 영상(50)의 일 영역에서 치아가 제1 치아(51) 및 제2 치아(52)를 포함하는 경우, 제1 치아(51)의 치관 시작점부터 치근 끝점까지의 제1 길이 또는 제2 치아(52)의 치관 시작점부터 치근 끝점까지의 제2 길이 중 어느 하나와 제1 치아(51) 및 제2 치아(52) 양끝(P3, P4)의 풍융부 사이의 길이(L2)에 기초하여 FMX 박스를 생성한다.

구체적으로, 제1 치아(51) 및 제2 치아(52)를 포함하는 경우, 제1 치아(51)의 치관 시작점부터 치근 끝점까지의 제1 길이 또는 제2 치아(52)의 치관 시작점부터 치근 끝점까지의 제2 길이 중 길이가 더 긴 부분을 이용할 수 있으며, 예를 들어, 도 5a에서 제1 치아(51)의 치관 시작점(P1)부터 치근 끝점(P2)까지의 제1 길이(L1)를 이용할 수 있다.

이외에도, 사용자의 설정 조건에 따라 제2 치아의 길이를 이용할 수도 있다.

여기서, 치관 시작점, 치근 끝점, 치아 양끝의 풍융부 사이는 파노라마 영상에 세그멘테이션(segmentation)을 적용하여 얻어진 치아 외곽선을 통해 확인할 수 있다.

FMX 박스는 제1 길이(L1)에 기초한 제1 외곽선(A1) 및 제2 외곽선(A2)과 풍융부 사이의 길이(L2)에 기초한 제3 외곽선(A3) 및 제4 외곽선(A4)으로 구현된다.

이후, 생성된 FMX 박스의 기울기 조절을 위해, 제1 치아(51)의 치축 및 제2 치아의 치축(52)의 평균 치축(X1)을 기준으로 생성된 FMX 박스의 기울기를 조정한다. 여기서, 치축은 치아의 기울기를 의미한다.

이후, 기울기가 조정된 FMX 박스를 파노라마 영상의 제1 관심 영역에 매핑하면, 상기 도 4에 나타난 바와 같이, 파노라마 영상에서 FMX 캡쳐 툴이 적용된다.

도 5b는 본 발명의 일 실시예에 따른 FMX 박스 생성 기준에 따라 대구치를 포함하는 관심 영역을 구획하는 방법을 나타낸 도면이다.

도 5b를 참조하면, 파노라마 영상(60)의 일 영역에서 치아가 제1 치아(61), 제2 치아(62) 및 제3 치아(63)를 포함하는 경우, 제1 치아(61)의 치관 시작점부터 치근 끝점까지의 제1 길이, 제2 치아(62)의 치관 시작점부터 치근 끝점까지의 제2 길이 또는 제3 치아의 치관 시작점부터 치근 끝점까지의 제3 길이(63) 중 어느 하나와 제1 치아(61) 내지 제3 치아(63) 양끝(P7, P8)의 풍융부 사이의 길이(L4)에 기초하여 FMX 박스를 생성한다.

구체적으로, 제1 치아(61), 제2 치아(62) 및 제3 치아(63)를 포함하는 경우, 제1 치아(61)의 치관 시작점부터 치근 끝점까지의 제1 길이, 제2 치아(62)의 치관 시작점부터 치근 끝점까지의 제2 길이 또는 제3 치아의 치관 시작점부터 치근 끝점까지의 제3 길이(63) 중 길이가 가장 긴 부분을 이용할 수 있으며, 예를 들어, 도 5b에서 제1 치아(61)의 치관 시작점(P5)부터 치근 끝점(P6)까지의 제1 길이(L3)를 이용할 수 있다.

이외에도, 사용자의 설정 조건에 따라 제2 치아 또는 제3 치아의 길이를 이용할 수도 있다.

세그멘테이션(segmentation)은 의료 영상에서 밝기와 같은 영상의 특성값, 또는 이러한 특성의 임계값을 이용하여 단층 의료 영상에서 특정 영역을 검출하는 방법이다. 또한, 2차원 평면 이미지로 출력되는 특정 영역을 적층함으로써 3차원 모델링을 구현할 수도 있다.

FMX 박스는 제1 길이(L3)에 기초한 제1 외곽선(A7) 및 제2 외곽선(A8)과 풍융부 사이의 길이(L4)에 기초한 제3 외곽선(A5) 및 제4 외곽선(A6)으로 구현된다.

이후, 생성된 FMX 박스의 기울기 조절을 위해, 제1 치아(61) 및 제3 치아(63) 사이에 위치한 제2 치아(62)의 치축(X2)을 기준으로 생성된 FMX 박스의 기울기를 조정한다. 여기서, 치축은 치아의 기울기를 의미한다.

도 5c는 본 발명의 일 실시예에 따른 FMX 박스 생성 기준에 따라 Bitewing 영상에서 소구치를 포함하는 관심 영역을 구획하는 방법을 나타낸 도면이다.

도 5c를 참조하면, 파노라마 영상(70)의 일 영역에서 치아가 상악의 제1 치아 및 하악의 제2 치아를 포함하는 경우, 상악의 치은의 최하단(P10)부터 하악의 치은의 최상단(P9)까지의 제1 길이(L5)와 상악의 제1 치아 및 하악의 제2 치아 양끝(P11, P12)의 풍융부 사이의 제2 길이(L6)에 기초하여 FMX 박스를 생성한다.

구체적으로, 도 5c를 참조하면, 상악의 제1 치아 내지 제4 치아(71, 72, 73, 74), 하악의 제1 치아 내지 제4 치아(75, 76, 77, 78)를 포함하는 경우, 소구치를 포함하는 경우에 상악의 우측 끝에 위치한 치아의 끝(P12)과 하악의 좌측 끝에 위치한 치아의 끝(P11) 사이의 거리를 풍융부 사이의 제2 길이(L6)로 지정할 수 있으며, Bitewing 영상의 경우 상악의 치은과 하악의 치은 사이를 고려하여 제1 길이(L5)를 지정할 수 있다.

여기서, 상악의 치은의 최하단, 하악의 치은의 최상단, 치아 양끝의 풍융부 사이는 파노라마 영상에 세그멘테이션(segmentation)을 적용하여 얻어진 치아 외곽선을 통해 확인할 수 있다.

FMX 박스는 제1 길이(L5)에 기초한 제1 외곽선(A9) 및 제2 외곽선(A10)과 풍융부 사이의 길이(L6)에 기초한 제3 외곽선(A11) 및 제4 외곽선(A12)으로 구현된다.

이후, 생성된 FMX 박스의 기울기 조절을 위해, 치아가 상악의 제1 치아 및 하악의 제2 치아의 교합면에 수직인 라인의 기울기(X3)를 기준으로 생성된 FMX 박스의 기울기를 조정한다.

여기서, 교합면은 상악의 치아와 하악의 치아가 서로 맞닿는 일면을 의미한다.

도 5d는 본 발명의 일 실시예에 따른 FMX 박스 생성 기준에 따라 Bitewing 영상에서 대구치를 포함하는 관심 영역을 구획하는 방법을 나타낸 도면이다.

도 5d를 참조하면, 파노라마 영상(80)의 일 영역에서 치아가 상악의 제1 치아 및 하악의 제2 치아를 포함하는 경우, 상악의 치은의 최하단(P14)부터 하악의 치은의 최상단(P13)까지의 제1 길이(L7)와 상악의 제1 치아 및 하악의 제2 치아 양끝(P15, P16)의 풍융부 사이의 제2 길이(L8)에 기초하여 FMX 박스를 생성한다.

구체적으로, 도 5d를 참조하면, 상악의 제1 치아 내지 제4 치아(81, 82, 83, 84), 하악의 제1 치아 내지 제4 치아(85, 86, 87, 88)를 포함하는 경우, 대구치를 포함하는 경우에 상악의 우측 끝에 위치한 치아의 끝(P16)과 하악의 좌측 끝에 위치한 치아의 끝(P15) 사이의 거리를 풍융부 사이의 제2 길이(L8)로 지정할 수 있으며, Bitewing 영상의 경우 상악의 치은과 하악의 치은 사이를 고려하여 제1 길이(L7)를 지정할 수 있다.

FMX 박스는 제1 길이(L7)에 기초한 제1 외곽선(A15) 및 제2 외곽선(A16)과 풍융부 사이의 길이(L8)에 기초한 제3 외곽선(A13) 및 제4 외곽선(A14)으로 구현된다.

이후, 생성된 FMX 박스의 기울기 조절을 위해, 치아가 상악의 제1 치아 및 하악의 제2 치아의 교합면에 수직인 라인의 기울기(X4)를 기준으로 생성된 FMX 박스의 기울기를 조정한다.

도 6은 본 발명의 제1 실시예에 따른 재구성 영상 생성 방법을 나타낸 흐름도이다.

도 6을 참조하면, 본 발명의 일 실시예에 따른 재구성 영상 생성 방법은 컴퓨팅 장치에 의하여 수행되며, 단계 S110에서 파노라마 영상에 세그멘테이션(segmentation)을 적용하여 치아 외곽선을 얻는다.

이후, 단계 S120에서 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획한다.

단계 S130에서 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성한다.

여기서, 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성하는 단계(S130)는, 파노라마 영상에서, 제1 관심 영역에 대응하는 일 영역을 컷팅하여 제1 뷰(view)의 영상으로 재구성 영상을 생성한다.

이에 따라, 사용자는 관심 영역의 치아만을 확인할 수 있게 된다.

또한, 만일 상실치가 존재하는 경우, 기 학습된 인공 지능 모델을 이용하여, 상기 파노라마 영상에서 상실치 영역을 인식하고, 인식한 상기 상실치 영역에 대해 상기 FMX 박스 생성 기준에 따라 제2 관심 영역을 구획할 수 있다.

도 7은 본 발명의 제2 실시예에 따른 재구성 영상 생성 방법을 나타낸 흐름도이다.

도 7을 참조하면, 본 발명의 제2 실시예에 따른 재구성 영상 생성 방법은 컴퓨팅 장치에 의하여 수행되며, 단계 S210에서 파노라마 영상에 세그멘테이션(segmentation)을 적용하여 치아 외곽선을 얻는다.

이후, 단계 S220에서 사용자로부터 파노라마 영상에 포함된 적어도 하나의 치아에 대한 선택 입력을 수신한다.

단계 S230에서 선택 입력에 기초하여, 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획한다.

단계 S240에서 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성한다.

본 발명의 제2 실시예에 따른 재구성 영상 생성 방법은 사용자가 선정한 치아에 인접한 좌우 치아가 같이 보이는 경우를 나타낸 것이다.

본 발명의 실시예에 따르면, 사용자가 선정한 치아에 인접한 좌우 치아를 함께 제공하기 위해, 사용자가 선정한 치아에 인접한 좌우 치아를 제1 관심 영역에 함께 포함시켜 제공하는 방법과, 좌우 치아를 제1 관심 영역, 제2 관심 영역으로 나누어 제공하는 방법을 포함할 수 있다.

먼저, 사용자가 선정한 치아에 인접한 좌우 치아를 제1 관심 영역에 함께 포함시켜 제공하기 위해 파노라마 영상에 포함된 치아들은 관련도에 따라 복수의 치아 그룹에 매칭되어 있고, 사용자의 선택 입력에 기초하여, 사용자에 의해 선택된 적어도 하나의 제1 치아, 복수의 치아 그룹 중 제1 치아에 매칭된 치아 그룹 내에 포함되는 제2 치아를 포함하여 FMX 박스를 생성하고 파노라마 영상의 제1 관심 영역에 매핑한다.

여기서, 복수의 치아 그룹은 제1 치아와 인접한 치아를 포함하는 그룹, 제1 치아와 맞물리는 치아를 포함하는 그룹 등을 포함할 수 있으며, 본 발명의 실시예에서는 제1 치아에 매칭된 치아 그룹을 제1 치아와 인접한 치아를 포함하는 그룹으로 선정하고, 제1 치아와 인접한 제2 치아를 포함하여 FMX 박스를 생성하게 된다.

여기서, 제1 치아와 인접한 제2 치아를 포함하여 FMX 박스를 생성하는 방법은 상기 도 5a 내지 도 5d에서 상술한 방법을 이용할 수 있다.

또한, 좌우 치아를 제1 관심 영역, 제2 관심 영역으로 나누어 제공하기 위해 파노라마 영상에 포함된 치아들은 관련도에 따라 복수의 치아 그룹에 매칭되어 있으며, 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성하는 단계(S240)는, 사용자에 의해 선택된 적어도 하나의 제1 치아를 포함하는 제1 관심 영역에 대응하는 제1 뷰(view)의 영상을 생성하고, 복수의 치아 그룹 중 제1 치아에 매칭된 치아 그룹 내에 포함되는 제2 치아를 포함하는 제2 관심 영역에 대응하는 제2 뷰(view)의 영상을 생성하고, 제1 뷰(view) 및 제2 뷰(view)의 영상으로 재구성 영상을 생성한다.

여기서, 복수의 치아 그룹은 제1 치아와 인접한 치아를 포함하는 그룹, 제1 치아와 맞물리는 치아를 포함하는 그룹 등을 포함할 수 있으며, 본 발명의 실시예에서는 제1 치아에 매칭된 치아 그룹을 제1 치아와 인접한 치아를 포함하는 그룹으로 선정하고, 제1 치아를 포함하는 FMX 박스와 제2 치아를 포함하는 FMX 박스를 생성하여 함께 제공할 수 있다.

도 8은 본 발명의 제3 실시예에 따른 재구성 영상 생성 방법을 나타낸 흐름도이다.

도 8을 참조하면, 본 발명의 제3 실시예에 따른 재구성 영상 생성 방법은 컴퓨팅 장치에 의하여 수행되며, 단계 S310에서 파노라마 영상에 세그멘테이션(segmentation)을 적용하여 치아 외곽선을 얻는다.

이후, 단계 S320에서 사용자로부터 파노라마 영상에 포함된 적어도 하나의 치아에 대한 선택 입력을 수신한다.

단계 S330에서 선택 입력에 기초하여, 치아 외곽선을 기준으로 제1 관심 영역을 구획한다.

단계 S340에서 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성한다.

본 발명의 제3 실시예에 따른 재구성 영상 생성 방법은 사용자가 드래그하여 지정한 치아 영역을 관심영역으로 구획하고 뷰 영상을 생성한다.

이를 위해, 사용자로부터 파노라마 영상에 포함된 적어도 하나의 치아에 대한 선택 입력을 수신하는 단계(S320)는, 사용자로부터 파노라마 영상에 포함되는 연속한 복수의 치아에 선택 입력을 일시에 수신한다.

여기서, 드래그 영역에 포함된 치아에 대해 뷰 영상이 생성된다.

이러한 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 기록 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(Floptical disk)와 같은 자기-광매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.

이상의 설명은 본 발명의 일 실시예에 불과할 뿐, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명의 본질적 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현할 수 있을 것이다. 따라서 본 발명의 범위는 전술한 실시예에 한정되지 않고 특허 청구 범위에 기재된 내용과 동등한 범위 내에 있는 다양한 실시 형태가 포함되도록 해석되어야 할 것이다.

Claims

컴퓨팅 장치에 의하여 수행되는 재구성 영상 생성 방법에 있어서,
파노라마 영상에 세그멘테이션(segmentation)을 적용하여 치아 외곽선을 얻는 단계;
상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계; 및
상기 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성하는 단계;를 포함하는 재구성 영상 생성 방법.
제1항에 있어서,
상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계는,
상기 치아가 제1 치아 및 제2 치아를 포함하는 경우, 상기 제1 치아의 치관 시작점부터 치근 끝점까지의 제1 길이 또는 상기 제2 치아의 치관 시작점부터 치근 끝점까지의 제2 길이 중 어느 하나와
상기 제1 치아 및 상기 제2 치아 양끝의 풍융부 사이의 길이에 기초하여 FMX 박스를 생성하는 단계;를 포함하는 재구성 영상 생성 방법.
제2항에 있어서,
상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계는,
상기 제1 치아의 치축 및 제2 치아의 치축의 평균 치축을 기준으로 상기 생성된 FMX 박스의 기울기를 조정하여, 상기 파노라마 영상의 상기 제1 관심 영역에 매핑하는 단계;를 더 포함하는 재구성 영상 생성 방법.
제1항에 있어서,
상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계는,
상기 치아가 제1 치아, 제2 치아 및 제3 치아를 포함하는 경우, 상기 제1 치아의 치관 시작점부터 치근 끝점까지의 제1 길이, 상기 제2 치아의 치관 시작점부터 치근 끝점까지의 제2 길이 또는 상기 제3 치아의 치관 시작점부터 치근 끝점까지의 제3 길이 중 어느 하나와
상기 제1 치아 내지 상기 제3 치아의 풍융부 사이의 길이에 기초하여 FMX 박스를 생성하는 단계;를 포함하는 재구성 영상 생성 방법.
제4항에 있어서,
상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계는,
상기 제1 치아 및 제3 치아 사이에 위치한 제2 치아의 치축을 기준으로 상기 생성된 FMX 박스의 기울기를 조정하여, 상기 파노라마 영상의 상기 제1 관심 영역에 매핑하는 단계;를 더 포함하는 재구성 영상 생성 방법.
제1항에 있어서,
상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계는,
상기 치아가 상악의 제1 치아 및 하악의 제2 치아를 포함하는 경우, 상기 상악의 치은의 최하단부터 상기 하악의 치은의 최상단까지의 제1 길이와
상기 상악의 제1 치아 및 상기 하악의 제2 치아 양끝의 풍융부 사이의 제2 길이에 기초하여 FMX 박스를 생성하는 단계;를 포함하는 재구성 영상 생성 방법.
제6항에 있어서,
상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계는,
상기 치아가 상악의 제1 치아 및 하악의 제2 치아의 교합면에 수직인 라인의 기울기를 기준으로 상기 생성된 FMX 박스의 기울기를 조정하여, 상기 파노라마 영상의 상기 제1 관심 영역에 매핑하는 단계;를 더 포함하는 재구성 영상 생성 방법.
제1항에 있어서,
상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계는,
기 학습된 인공 지능 모델을 이용하여, 상기 파노라마 영상에서 상실치 영역을 인식하고, 인식한 상기 상실치 영역에 대해 상기 FMX 박스 생성 기준에 따라 제2 관심 영역을 구획하는 단계;를 포함하고,
상기 인공 지능 모델은, 학습용 파노라마 세그멘테이션 영상을 입력 데이터로 하고, 상기 학습용 파노라마 세그멘테이션 영상에서 인식한 상실치 영역을 레이블로 하여 학습된 것인 재구성 영상 생성 방법.
제1항에 있어서,
상기 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성하는 단계는,
상기 파노라마 영상에서, 상기 제1 관심 영역에 대응하는 일 영역을 컷팅하여 제1 뷰(view)의 영상으로 재구성 영상을 생성하는 재구성 영상 생성 방법.
컴퓨팅 장치에 의하여 수행되는 재구성 영상 생성 방법에 있어서,
파노라마 영상에 세그멘테이션(segmentation)을 적용하여 치아 외곽선을 얻는 단계;
사용자로부터 상기 파노라마 영상에 포함된 적어도 하나의 치아에 대한 선택 입력을 수신하는 단계;
상기 선택 입력에 기초하여, 상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계; 및
상기 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성하는 단계;를 포함하는 재구성 영상 생성 방법.
제10항에 있어서,
상기 파노라마 영상에 포함된 치아들은 관련도에 따라 복수의 치아 그룹에 매칭되어 있으며,
상기 선택 입력에 기초하여, 상기 치아 외곽선을 기준으로 기 설정된 FMX 박스 생성 기준에 따라 제1 관심 영역을 구획하는 단계는,
상기 사용자에 의해 선택된 적어도 하나의 제1 치아, 상기 복수의 치아 그룹 중 상기 제1 치아에 매칭된 치아 그룹 내에 포함되는 제2 치아를 포함하여 FMX 박스를 생성하고 상기 파노라마 영상의 상기 제1 관심 영역에 매핑하는 재구성 영상 생성 방법.
제10항에 있어서,
상기 파노라마 영상에 포함된 치아들은 관련도에 따라 복수의 치아 그룹에 매칭되어 있으며,
상기 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성하는 단계는,
상기 사용자에 의해 선택된 적어도 하나의 제1 치아를 포함하는 제1 관심 영역에 대응하는 제1 뷰(view)의 영상을 생성하는 단계;
상기 복수의 치아 그룹 중 상기 제1 치아에 매칭된 치아 그룹 내에 포함되는 제2 치아를 포함하는 제2 관심 영역에 대응하는 제2 뷰(view)의 영상을 생성하는 단계; 및
상기 제1 뷰(view) 및 제2 뷰(view)의 영상으로 재구성 영상을 생성하는 단계;를 포함하는 재구성 영상 생성 방법.
컴퓨팅 장치에 의하여 수행되는 재구성 영상 생성 방법에 있어서,
파노라마 영상에 세그멘테이션(segmentation)을 적용하여 치아 외곽선을 얻는 단계;
사용자로부터 상기 파노라마 영상에 포함된 적어도 하나의 치아에 대한 선택 입력을 수신하는 단계;
상기 선택 입력에 기초하여, 상기 치아 외곽선을 기준으로 제1 관심 영역을 구획하는 단계; 및
상기 제1 관심 영역에 대응하는 제1 뷰(view)의 영상으로 재구성 영상을 생성하는 단계;를 포함하는 재구성 영상 생성 방법.
제13항에 있어서,
상기 사용자로부터 상기 파노라마 영상에 포함된 적어도 하나의 치아에 대한 선택 입력을 수신하는 단계는,
상기 사용자로부터 상기 파노라마 영상에 포함되는 연속한 복수의 치아에 선택 입력을 일시에 수신하는 재구성 영상 생성 방법.
컴퓨터 프로그램을 저장하고 있는 컴퓨터 판독 가능 기록매체로서,
상기 컴퓨터 프로그램은,
제1항 내지 제14항 중 어느 한 항에 따른 방법을 프로세서가 수행하도록 하기 위한 명령어를 포함하는, 컴퓨터 판독 가능한 기록매체.
컴퓨터 판독 가능한 기록매체에 저장되어 있는 컴퓨터 프로그램으로서,
상기 컴퓨터 프로그램은,
제1항 내지 제14항 중 어느 한 항에 따른 방법을 프로세서가 수행하도록 하기 위한 명령어를 포함하는, 컴퓨터 프로그램.