TWI739054B - 用於齒顎矯正器之定位導引方法以及其系統 - Google Patents

Abstract

一種用於齒顎矯正器之定位導引方法，步驟包括：透過一影像擷取單元取得一口腔影像；透過一處理單元根據口腔影像中複數牙齒的輪廓取得一候選牙齒之一位置；透過處理單元根據候選牙齒之位置自一儲存單元中存取齒模資訊以取得對應於候選牙齒之一矯正器黏貼位置；透過處理單元自口腔影像中取得對應於一矯正器之一矯正器影像；以及透過處理單元根據矯正器影像所對應之一矯正器位置以及矯正器黏貼位置於一顯示單元中顯示一導引指示。

Description

用於齒顎矯正器之定位導引方法以及其系統

本發明係有關於用於齒顎矯正器之定位導引方法以及其系統，特別係有關於於一顯示單元上顯示矯正器之黏貼位置之用於齒顎矯正器之定位導引方法以及其系統。

由於牙齒的咬合不正將會直接影響其咀嚼功能，且於外形上較不美觀，因此現代醫學係開發出齒顎矯正技術以解決咬合不正的情況。然而，於黏貼矯正器以及植入相關植入物，如矯正釘時，需要透過牙醫師依照術前規劃與執行經驗黏貼矯正器以及植入矯正釘，而牙醫師的經驗多寡將影響黏貼時間以及後續重黏矯正器的次數以及門診時間，更可能會影響矯正的效果。因此，如何準確地將矯正器黏貼位置呈現於牙齒上並縮短黏貼時間為目前所需解決之問題。

本發明一實施例提供一種用於齒顎矯正器之定位導引方法，步驟包括：透過一影像擷取單元取得一口腔影像；透過一處理單元根據口腔影像中複數牙齒的輪廓取得一候選 牙齒之一位置；透過處理單元根據候選牙齒之位置自一儲存單元中存取齒模資訊以取得對應於候選牙齒之一矯正器黏貼位置；透過處理單元自口腔影像中取得對應於一矯正器之一矯正器影像；以及透過處理單元根據矯正器影像所對應之一矯正器位置以及矯正器黏貼位置於一顯示單元中顯示一導引指示。

本發明另一實施例更提供一種用於齒顎矯正器之定位導引系統，包括一影像擷取單元、一儲存單元、一處理單元以及一顯示單元。影像擷取單元用以取得一患者之一口腔影像。儲存單元儲存對應於患者之齒模資訊。處理單元用以根據口腔影像中複數牙齒的輪廓取得一候選牙齒之一位置、根據候選牙齒之位置自一儲存單元中存取齒模資訊以取得對應於候選牙齒之一矯正器黏貼位置、自口腔影像中取得對應於一矯正器之一矯正器影像以及根據矯正器影像所對應之一矯正器位置以及矯正器黏貼位置取得一導引指示。顯示單元用以顯示口腔影像以及導引指示。

根據本發明一實施例，其中影像擷取單元更取得包含上述口腔影像之一臉部影像，以及處理單元更根據臉部影像之複數臉部特徵取得一對稱軸，並根據對稱軸、牙齒之輪廓以及齒模資訊取得候選牙齒之位置。

根據本發明另一實施例，其中矯正器上塗佈有染料，使得影像擷取單元根據染料取得矯正器影像。

根據本發明另一實施例，其中處理單元更根據牙齒之輪廓取得對應於每顆牙齒的一外切矩形，以及根據外切矩形中一咬緣切端產生導引指示。

根據本發明另一實施例，其中矯正器黏貼位置係位於一臨床牙冠中軸上，以及臨床牙冠中軸係透過處理單元根據牙齒之一頂點以及最寬處之中點所取得。

100:定位導引系統

110:影像擷取單元

120:處理單元

130:儲存單元

140:顯示單元

150:通訊介面

301、302:外切矩形

350:對稱軸

400:矯正器黏貼位置

402:中心點

405:點

410:外切矩形

420:切線

430:虛線

S501~S508:步驟流程

第1圖係顯示根據本發明一實施例所述之用於齒顎矯正器之定位引導系統之系統架構圖。

第2圖係顯示根據本發明一實施例中所述之取得對稱軸之示意圖。

第3圖係顯示根據本發明一實施例所述之取得複數牙齒之外切矩形之示意圖。

第4圖係顯示根據本發明一實施例所述之牙齒所對應的切線矩形、咬緣切端以及臨床牙冠中軸之示意圖。

第5圖係顯示依據本發明另一實施例中之用於齒顎矯正器之定位導引方法之流程圖。

以下說明係為完成發明的較佳實現方式，其目的在於描述本發明的基本精神，但並不用以限定本發明。實際的發明內容必須參考之後的權利要求範圍。

必須了解的是，使用於本說明書中的”包含”、”包括”等詞，係用以表示存在特定的技術特徵、數值、方法步驟、作業處理、元件以及/或組件，但並不排除可加上更多的技術 特徵、數值、方法步驟、作業處理、元件、組件，或以上的任意組合。

第1圖係顯示根據本發明一實施例所述之用於齒顎矯正器之定位引導系統之系統架構圖。定位導引系統100至少包括一影像擷取單元110、一處理單元120、一儲存單元130、一顯示單元140以及一通訊介面150。影像擷取單元110為一攝像鏡頭，可設置於一診療椅之一照射燈座上，或者設置於一牙醫師所配戴之眼鏡上，用以取得一患者的一臉部影像。處理單元120可透過多種方式實施，例如以專用硬體電路或通用硬體(例如單一處理器、具平行處理能力的多處理器、圖形處理器或其他具運算能力的處理器)，並且在執行程式碼或軟體時，提供之後所描述的功能。儲存單元130用以儲存執行過程中需要的資料，例如患者的齒模資訊等。其中，齒模資訊可透過對患者的牙齒進行取模的動作，再透過3D掃描的方式對石膏模進行掃描所取得。此外，齒模資訊中更包括對應於每顆牙齒的矯正器黏貼位置，而每個矯正器黏貼位置皆位於每顆牙齒的一臨床牙冠中軸(Facial axis of the clinical crown,FACC)上。系統架構另包含通訊介面260，讓處理單元210可藉以跟儲存伺服器110、120、130或其他電子裝置進行溝通。顯示單元140可包含顯示面板(例如薄膜液晶顯示面板、有機發光二極體面板或其他具顯示能力的面板)或者google眼鏡(即配有光學頭戴式顯示器的可穿戴式電腦)，用以顯示口腔影像以及導引指示，以提供給牙醫師觀看。換言之，本發明所述之定位導引方法係可透過例如擴增實境、虛擬實境、混合實境、或任何其他結合 矯正器的黏貼位置資訊與實時影像之顯示方式，以顯示給牙醫師觀看，本發明並不以此為限。此外，定位導引系統100更包括介於處理單元120以及顯示單元140之間之通訊介面150。通訊介面150可為無線電信通訊模組(wireless telecommunications module)、區域網路(local area network,LAN)通訊模組或者無線區域網路通訊模組(WLAN)。無線電信通訊模組(wireless telecommunications module)可包含支援2G、3G、4G或以上技術世代的任意組合的調變解調器(modem)。

根據本發明一實施例，為了準確地定位患者的每顆牙齒，以於口腔影像中顯示矯正器之黏貼位置，響應於影像擷取單元110取得患者之臉部影像後，處理單元120首先於臉部影像中取得複數臉部特徵點，以取得對應於患者之臉部之一對稱軸。舉例來說，第2圖係顯示根據本發明一實施例中所述之取得對稱軸之示意圖。如第2圖所示，臉部特徵點至少可包括右眼內眼角S1、左眼內眼角S2、右嘴角S3、左嘴角S4、右眼外眼角S5、左眼外眼角S6以及鼻子S7。然而，於本發明之實施例中，處理單元120係根據患者兩眼之內眼角以及鼻子之特徵點取得對稱軸，即根據兩個內眼角(即右眼內眼角S1以及左眼內眼角S2)的中點與鼻子(即鼻子S7)的連線取得對稱軸(如右下角之圖中所示)。而如左下角的圖中所示，對稱軸係將患者的牙齒劃分為大致上對稱的左右兩邊。

接著，處理單元120將對口腔影像進行邊緣偵測，以取得每顆牙齒的輪廓，並進一步地根據輪廓取得每顆牙齒的一外切矩形。其中，由於一些外在因素(例如周圍環境的光線、拍攝角度等)的影響，使得處理單元120於取得外切矩形時可能會產生誤差，或者無法順利地取得每顆牙齒的外切矩形。因此，於本發明之實施例中，處理單元120更進一步地根據對稱軸、對應於一部份的牙齒的外切矩形以及齒模資訊取得每個牙齒的外切矩形。舉例來說，第3圖係顯示根據本發明一實施例所述之取得複數牙齒之外切矩形之示意圖。於取得對應於右邊門牙的右側牙齒之外切矩形301後，處理單元120即可透過對稱軸350推算得對應於左邊門牙的左側牙齒之外切矩形302。此外，根據對稱軸350以及外切矩形302之相對關係，處理單元120係可推算得外切矩形301為對應於門牙旁邊的牙齒，而配合事先儲存於儲存單元130中包含各個牙齒之間之相對關係之齒模資訊，處理單元即可取得對應於每個牙齒之外切矩形之位置(如第3圖右下圖所示)。或者，處理單元120亦可透過外切矩形的面積來判斷門牙的位置。換言之，具有最大面積的牙齒即為門牙。而透過候選牙齒與門牙之相對位置關係即可推得候選牙齒為第幾顆牙齒，使得處理單元120可自儲存單元130中存取對應於候選牙齒的矯正器黏貼位置。

其中，矯正器黏貼位置之定位係透過矯正器黏貼位置之中心點與一咬緣切端(Incisor edge)以及一臨床牙冠中軸之距離決定。咬緣切端係指牙齒最下方的切線，如第4圖所示，牙齒下方之切線420即為咬緣切端，以及臨床牙冠中軸則為牙冠之頂點(如圖中點405)與牙齒最寬處之中點之連線(如圖中虛線430所示)。而於儲存矯正器黏貼位置400時，係以矯 正器黏貼位置400的中心點402與咬緣切端之距離作為垂直方向距離(例如△y)以及矯正器黏貼位置400的中心點402與臨床牙冠中軸之距離作為水平方向距離(例如△x)紀錄之。根據先前之步驟，由於處理單元120已取得候選牙齒所對應之外切矩形410，亦可進一步地取得候選牙齒的咬緣切端以及臨床牙冠中軸，因此即可將矯正器黏貼位置400透過顯示單元140將矯正器黏貼位置400對應之影像疊加於原本的口腔影像上。

然而，除了將矯正器黏貼位置400疊加於口腔影像上，根據本發明另一實施例，處理單元120亦可於顯示單元140中改變矯正器黏貼位置400所對應之影像之顏色或者顯示對應於移動方向之指示以告知牙醫師如何移動矯正器。舉例來說，於本發明之實施例中，透過事先將矯正器上塗上醫學用染料，使得矯正器可於口腔影像中呈現特定的顏色，從而處理單元120可根據顏色追蹤矯正器之移動。而處理單元120即可根據矯正器之中心位置與矯正器黏貼位置400之中心點402之距離誤差顯示移動方向或者根據誤差大小給予矯正器黏貼位置400不同之顏色。例如，響應於誤差大於一第一門檻值時，處理單元120係將矯正器黏貼位置400以紅色呈現，以告知牙醫師矯正器仍距離預定矯正器黏貼位置400過遠。以及，響應於誤差小於第一門檻值但仍大於一第二門檻值時，則處理單元120將矯正器黏貼位置400以黃色呈現。而當誤差小於第二門檻值時，表示矯正器已大致上位於矯正器黏貼位置400上，則處理單元120將矯正器黏貼位置400以綠色呈現，以告知牙醫師可將矯正器固定於當前位置。

如上面所述，顯示單元140將矯正器黏貼位置400對應之影像疊加於原本的口腔影像上。在一些實施例中，顯示單元140會額外顯示一個局部放大影像。此局部放大影像只顯示當前欲黏貼之牙齒和此牙齒的矯正器黏貼位置400對應之影像，以利於進行矯正器黏貼。

第5圖係顯示依據本發明另一實施例中之用於齒顎矯正器之定位導引方法之流程圖。首先，於步驟S501，影像擷取單元110取得患者之臉部影像。於步驟S502，處理單元120取得臉部影像中複數臉部特徵點(例如眼睛之眼角、鼻子以及嘴角等)，並根據臉部特徵點取得對應於患者臉部之對稱軸。舉例來說，於本發明之實施例中，處理單元120係根據兩個眼角的中點與鼻子的連線取得對應於患者臉部之對稱軸。接著，於步驟S503，處理單元120自臉部影像中取得對應於患者口腔部位的口腔影像。於步驟S504，處理單元120透過對口腔影像進行邊緣偵測，以取得口腔影像中複數牙齒的輪廓。於步驟S505，為了正確地於口腔影像中正確地顯示對應於每顆牙齒的矯正器黏貼位置，處理單元120更根據複數牙齒的輪廓、對稱軸以及齒模資訊取得對應於每顆牙齒的外切矩形，以對每顆牙齒進行定位。舉例來說，由於處理單元120對口腔影像進行邊緣偵測時，可能會因為一些外在因素使得外切矩形產生誤差或者無法取得外切矩形，因此處理單元120係可基於對稱軸根據某一顆牙齒的外切矩形推得另一側之牙齒之外切矩形之位置。此外，於取得複數牙齒與對稱軸之相對關係後，處理單元120亦可根據相對位置判斷某顆牙齒的特定位置，藉此以根據 儲存單元130中所儲存之齒模資訊中所有牙齒之相對關係於口腔影像中標示出所有牙齒的外切矩形。

在取得每顆牙齒的外切矩形後，進入步驟S506，處理單元120於口腔影像中取得對應於矯正器之矯正器影像。其中，由於矯正器上已事先塗上醫學用染料，使得矯正器可於口腔影像中呈現特定的顏色，以利於處理單元120根據顏色來追蹤矯正器的位置。接著，處理單元120於取得矯正器之位置後，即可根據矯正器之位置判斷其位於哪顆牙齒(即候選牙齒)上，並自齒模資訊中取得候選牙齒所對應之矯正器黏貼位置。最後，於步驟S508，處理單元120更根據矯正器影像所對應之矯正器位置以及矯正器黏貼位置計算偏移誤差，以於顯示單元中顯示引導指示。舉例來說，處理單元120可將矯正器黏貼位置顯示於口腔影像中，並根據偏移誤差給予矯正器黏貼位置不同之顏色。例如，響應於誤差大於一第一門檻值時，處理單元120係將矯正器黏貼位置以紅色呈現，以告知牙醫師矯正器仍距離預定矯正器黏貼位置過遠。以及，響應於誤差小於第一門檻值但仍大於一第二門檻值時，則處理單元120將矯正器黏貼位置以黃色呈現。而當誤差小於第二門檻值時，表示矯正器已大致上位於矯正器黏貼位置上，則處理單元120將矯正器黏貼位置以綠色呈現，以告知牙醫師可將矯正器固定於當前位置。此外，於計算偏移誤差時，處理單元120係以咬緣切端作為矯正器黏貼位置之定位依據。即處理單元120將基於咬緣切端計算矯正器黏貼位置之中心點與矯正器之中心點之水平誤差以及垂直誤差，並於顯示單元中顯示偏移方向及/或偏移距離 等。再者，於本發明之實施例中，矯正器黏貼位置皆位於每顆牙齒的臨床牙冠中軸上。換言之，處理單元120可根據口腔影像中牙齒最寬處之中點與頂點的連線取得臨床牙冠中軸，再根據齒模資訊中矯正器黏貼位置與咬緣切端的相對關係於實際的口腔影像中基於候選牙齒的咬緣切端標示出正確的矯正器黏貼位置。

值得注意的是，儘管上述方法已在使用一系列步驟或方框之流程圖的基礎上描述，但本發明不侷限於這些步驟的順序，並且一些步驟可不同於其餘步驟的順序執行或其餘步驟可同時進行。此外，本領域技術人員將可理解在流程圖中所示的步驟並非唯一的，其可包括流程圖的其它步驟，或者一或多個步驟可被刪除而不會影響本發明的範圍。

此外，本發明之方法，或特定型態或其部份，可以以程式碼的型態存在。程式碼可以包含於實體媒體，如軟碟、光碟片、硬碟、或是任何其他機器可讀取(如電腦可讀取)儲存媒體，亦或不限於外在形式之電腦程式產品，其中，當程式碼被機器，如電腦載入且執行時，此機器變成用以參與本發明之裝置。程式碼也可以透過一些傳送媒體，如電線或電纜、光纖、或是任何傳輸型態進行傳送，其中，當程式碼被機器，如電腦接收、載入且執行時，此機器變成用以參與本發明之裝置。當在一般用途處理單元實作時，程式碼結合處理單元提供一操作類似於應用特定邏輯電路之獨特裝置。

綜上所述，根據本發明所述之用定位導引方法以及其系統，透過根據牙齒的輪廓定位每顆牙齒的位置，根據候 選牙齒的位置載入正確的矯正器黏貼位置，並於顯示器上顯示矯正器移動方向或者其它導引指示使得牙醫師可根據導引指示快速地將矯正器設置於正確位置上，如此將可減少手術的時間，並提升矯正器設置的準確度，以減少後續重黏矯正器次數與門診時間。

雖然本發明使用以上實施例進行說明，但需要注意的是，這些描述並非用以限縮本發明。相反地，此發明涵蓋了熟習此技藝人士顯而易見的修改與相似設置。所以，申請權利要求範圍須以最寬廣的方式解釋來包含所有顯而易見的修改與相似設置。

S501~508‧‧‧步驟流程

Claims (10)

1. 一種用於齒顎矯正器之定位導引方法，包括：透過一影像擷取單元取得包含一口腔影像之一臉部影像；透過一處理單元根據上述臉部影像之複數臉部特徵取得一對稱軸；透過上述影像擷取單元自上述臉部影像取得上述口腔影像；透過上述處理單元根據上述對稱軸、上述口腔影像中複數牙齒的輪廓以及自一儲存單元中所存取的齒模資訊取得一候選牙齒之一位置；透過上述處理單元根據上述候選牙齒之上述位置自上述儲存單元中存取上述齒模資訊以取得對應於上述候選牙齒之一矯正器黏貼位置；透過上述處理單元自上述口腔影像中取得對應於一矯正器之一矯正器影像；以及透過上述處理單元根據上述矯正器影像所對應之一矯正器位置以及上述矯正器黏貼位置於一顯示單元中顯示一導引指示。
2. 如申請專利範圍第1項所述之定位導引方法，其中上述導引指示以擴增實境、虛擬實境或混合實境的方式顯示在上述顯示單元中。
3. 如申請專利範圍第1項所述之定位導引方法，其中上述矯正器上塗佈有染料，使得上述影像擷取單元根據上述染料取得上述矯正器影像。
4. 如申請專利範圍第1項所述之定位導引方法，更包括：透過上述處理單元根據上述牙齒之上述輪廓取得對應於每顆上述牙齒的一外切矩形；以及透過上述處理器根據上述外切矩形中一咬緣切端產生導引指示。
5. 如申請專利範圍第4項所述之定位導引方法，其中上述矯正器黏貼位置係位於一臨床牙冠中軸上，以及上述臨床牙冠中軸係透過上述處理單元根據上述牙齒之一頂點以及最寬處之中點取得。
6. 一種用於齒顎矯正器之定位導引系統，包括：一影像擷取單元，用以取得一患者之一口腔影像，及包含上述口腔影像之一臉部影像；一儲存單元，儲存對應於上述患者之齒模資訊；一處理單元，用以：根據上述臉部影像之複數臉部特徵取得一對稱軸；根據上述對稱軸、上述口腔影像中複數牙齒的輪廓以及自上述儲存單元中所存取的齒模資訊取得一候選牙齒之一位置；根據上述候選牙齒之上述位置自上述儲存單元中存取上述齒模資訊以取得對應於上述候選牙齒之一矯正器黏貼位置；自上述口腔影像中取得對應於一矯正器之一矯正器影像；以及根據上述矯正器影像所對應之一矯正器位置以及上述 矯正器黏貼位置取得一導引指示；以及一顯示單元，用以顯示上述口腔影像以及上述導引指示。
7. 如申請專利範圍第6項所述之定位導引系統，其中上述導引指示以擴增實境、虛擬實境或混合實境的方式顯示在上述顯示單元中。
8. 如申請專利範圍第6項所述之定位導引系統，其中上述矯正器上塗佈有染料，使得上述影像擷取單元根據上述染料取得上述矯正器影像。
9. 如申請專利範圍第6項所述之定位導引系統，其中上述處理單元更根據上述牙齒之上述輪廓取得對應於每顆上述牙齒的一外切矩形，以及根據上述外切矩形中一咬緣切端產生導引指示。
10. 如申請專利範圍第9項所述之定位導引系統，其中上述矯正器黏貼位置係位於一臨床牙冠中軸上，以及上述臨床牙冠中軸係透過上述處理單元根據上述牙齒之一頂點以及最寬處之中點取得。

Images