TWI771905B - 內視鏡系統及三維結構重建方法 - Google Patents

內視鏡系統及三維結構重建方法 Download PDF

Info

Publication number
TWI771905B
TWI771905B TW110104881A TW110104881A TWI771905B TW I771905 B TWI771905 B TW I771905B TW 110104881 A TW110104881 A TW 110104881A TW 110104881 A TW110104881 A TW 110104881A TW I771905 B TWI771905 B TW I771905B
Authority
TW
Taiwan
Prior art keywords
processor
images
sensing
flexible cannula
information
Prior art date
Application number
TW110104881A
Other languages
English (en)
Other versions
TW202130320A (zh
Inventor
盧錫新
楊德威
Original Assignee
榮晶生物科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 榮晶生物科技股份有限公司 filed Critical 榮晶生物科技股份有限公司
Publication of TW202130320A publication Critical patent/TW202130320A/zh
Priority to US17/409,818 priority Critical patent/US20210378543A1/en
Application granted granted Critical
Publication of TWI771905B publication Critical patent/TWI771905B/zh

Links

Images

Landscapes

  • Instruments For Viewing The Inside Of Hollow Bodies (AREA)
  • Endoscopes (AREA)

Abstract

一種內視鏡系統,包括可撓式插管、運動感測模組與處 理器。可撓式插管具有中心軸。運動感測模組包括殼體、多個圖案與多個感測器。這些圖案依據以中心軸為基準的軸向間距分佈以及角度分佈設置於可撓式插管的表面。這些感測器設置於殼體內且位於殼體的導引孔旁。處理器設置於殼體內且電性連接於這些感測器。在可撓式插管經由導引孔對運動感測模組進行相對運動的期間中,這些感測器用以感測這些圖案的運動狀態而得到運動狀態感測結果。處理器根據運動狀態感測結果、軸向間距分佈與角度分佈決定插入深度資訊與插管旋轉角度資訊。一種三維結構重建方法亦被提出。

Description

內視鏡系統及三維結構重建方法
本發明是有關於一種內視鏡系統及三維結構重建方法,且特別是有關於一種能夠得知插入深度資訊與插管旋轉角度資訊並建構人體內部三維結構的內視鏡系統及方法。
內視鏡是一種可插入人體以診察器官內部的儀器。一般來說,內視鏡藉由將插管的一端設置鏡頭,供醫護人員藉由插管將鏡頭導入人體中,而拍攝人體內部的影像。但現有內視鏡並沒有辦法偵側插管的插入深度與旋轉角度,醫護人員難以得知病灶的確切位置,而必須藉由其他系統的輔助來得到上述資訊。因此,當病患在下一次診療時,醫護人員需要花費較多的時間來去尋找上次診療所發現的病灶,單就現有內視鏡難以實現精確醫療,且診斷時效性亦不理想。
本發明提供一種內視鏡系統,其能夠得知可撓式插管的 插入深度與旋轉角度等相關資訊,還可進一步建構人體內部的三維結構,而可實現精確醫療並具有良好的診斷時效性。
根據本發明一實施例,提供一種內視鏡系統,包括可撓式插管、運動感測模組與成像裝置。可撓式插管具有中心軸。運動感測模組包括殼體、多個圖案、多個訊號感測器與處理器。殼體具有導引孔。這些圖案依據中心軸為基準的一軸向間距分佈以及一角度分佈設置於可撓式插管的表面。這些感測器設置於殼體內且位於導引孔旁。處理器設置於殼體內且電性連接於這些感測器。成像裝置設置於可撓式插管的一端。在可撓式插管經由導引孔對運動感測模組進行相對運動的期間中,這些感測器用以感測這些圖案的運動狀態而得到運動狀態感測結果。處理器根據運動狀態感測結果、軸向間距分佈與角度分佈決定插入深度資訊與插管旋轉角度資訊。
在本發明的一實施例中,上述的這些感測器更包括多個深度感測器以及多個旋轉角度感測器。這些深度感測器沿著導引孔的延伸方向設置,這些旋轉角度感測器環繞導引孔設置。這些深度感測器用以感測這些圖案的沿著中心軸軸向的軸向運動狀態,以得到這些圖案的軸向運動感測結果。處理器根據軸向運動感測結果與軸向間距分佈以決定插入深度資訊。這些旋轉角度感測器用以感測這些圖案對運動感測模組旋轉的旋轉運動狀態,以得到這些圖案的旋轉運動感測結果。處理器根據旋轉運動感測結果與角度分佈以決定插管旋轉角度資訊。
在本發明的一實施例中,上述的運動感測模組更包括多個第一發光件。這些感測器為多個光感測器。各發光件用以發出感測光束。
在本發明的一實施例中,上述的這些第一發光件分別整合於這些圖案而使這些圖案為多個發光圖案。在可撓式插管經由導引孔對運動感測模組進行相對運動的期間中,這些發光圖案由可撓式導管發出這些感測光束,以傳遞至這些深度感測器與這些旋轉角度感測器得到軸向運動感測結果與旋轉運動感測結果。
在本發明的一實施例中,上述的這些第一發光件分別整合於這些光感測器。這些圖案為多個反射圖案。在可撓式插管經由導引孔對運動感測模組進行相對運動的期間中,這些第一發光件由這些光感測器的所在處發出這些感測光束至這些反射圖案。而這些反射圖案反射這些感測光束,反射後的這些感測光束傳遞至這些深度感測器與這些旋轉角度感測器得到軸向運動感測結果與旋轉運動感測結果。
在本發明的一實施例中,上述的這些圖案為多個磁性圖案,這些感測器為多個感應線圈,且這些深度感測器為多個深度感應線圈,這些旋轉角度感測器為多個旋轉角度感應線圈。在可撓式插管經由導引孔對運動感測模組進行相對運動的期間中,這些深度感應線圈與這些旋轉角度感測器感測這些磁性圖案的磁場變化而感應出至少一感應電流,且這些深度感測器與這些旋轉角度感測器根據至少一感應電流而得到軸向運動感測結果與旋轉運 動感測結果。
在本發明的一實施例中,上述的這些圖案為多個磁性圖案。這些感測器為多個霍爾感測器,且這些深度感測器為多個深度霍爾感測器,這些旋轉角度感測器為多個旋轉角度霍爾感測器。在可撓式插管經由導引孔對運動感測模組進行相對運動的期間中,這些深度霍爾感測器與這些旋轉角度霍爾感測器感測這些磁性圖案的磁場變化而感應出至少一感應電壓,且這些深度霍爾感測器與這些旋轉角度霍爾感測器根據至少一感應電壓而得到軸向運動感測結果與旋轉運動感測結果。
在本發明的一實施例中,上述的運動感測模組更包括第一角度感測器,設置於殼體內。第一角度感測器與處理器電性連接。第一角度感測器用以感測運動感測模組的第一角度資訊,並將第一角度資訊傳遞至處理器。
在本發明的一實施例中,上述的運動感測模組更包括設置於殼體內的第一電路載板與第二電路載板。第一電路載板與這些深度感測器電性連接,且第二電路載板與這些旋轉角度感測器電性連接。
在本發明的一實施例中,上述的運動感測模組更包括計時器。計時器與處理器電性連接並用以傳輸時間資訊至處理器。處理器根據時間資訊與插入深度資訊以決定可撓式插管的速度資訊。處理器根據時間資訊與插管旋轉角度資訊以決定可撓式插管的角速度資訊。
在本發明的一實施例中,上述的這些感測器的空間頻率不同於這些圖案的空間頻率。
在本發明的一實施例中,上述的軸向間距分佈為等間距分佈。
在本發明的一實施例中,上述的角度分佈為等角度分佈。
在本發明的一實施例中,上述的內視鏡系統更包括第二角度感測器。第二角度感測器設置於可撓式插管的該端且位於成像裝置旁。第二角度感測器與處理器電性連接,且用以感測可撓式插管的該端的第二角度資訊。
在本發明的一實施例中,上述的內視鏡系統更包括轉向搖桿。轉向搖桿設置於可撓式插管的另一端且與可撓式插管耦接。轉向搖桿用以控制可撓式插管中的末稍段的角度。
在本發明的一實施例中,上述的內視鏡系統更包括第三角度感測器。第三角度感測器設置於轉向搖桿。第三角度感測器與處理器電性連接,且用以感測轉向搖桿的第三角度資訊。
在本發明的一實施例中,上述的成像裝置更包括成像鏡頭、第二發光件與影像感測器。成像鏡頭與影像感測器光耦接,且第二發光件用以發出照明光束以照射待測物。待測物反射照明光束的至少一部分至成像鏡頭,而使影像感測器感測到待測物的影像。
根據本發明一實施例,提供一種內視鏡系統,包括可撓式插管、運動感測模組、成像裝置以及定位裝置。可撓式插管具 有中心軸。運動感測模組包括殼體、多個圖案、多個感測器以及處理器。殼體具有導引孔。多個圖案依據以中心軸為基準的軸向間距分佈設置於可撓式插管的表面。多個感測器設置於殼體內且位於導引孔旁。處理器設置於殼體內且電性連接於這些感測器。成像裝置設置於可撓式插管的一端,且連接處理器。定位裝置設置於可撓式插管的該端,且設置以獲得該端的定位資訊,並將定位資訊傳送至處理器。可撓式插管為設置以通過導引孔插入目標體內部的不同深度,在可撓式插管藉由導引孔對運動感測模組進行相對運動的期間中,這些感測器用以感測這些圖案的運動狀態而得到運動狀態感測結果,處理器用以根據運動狀態感測結果以及軸向間距分佈決定插入深度資訊。成像裝置為設置以在可撓式插管插入目標體內部的不同深度的期間中產生多個感測影像,處理器用以利用這些感測影像產生多個三維影像,並根據這些三維影像所對應的插入深度資訊以及定位資訊結合這些三維影像,以重建目標體內部的三維結構。
在本發明的一實施例中,處理器用以對這些三維影像進行特徵比對,得到特徵資訊,處理器用以利用特徵資訊結合這些三維影像,以重建目標體內部的三維結構。
在本發明的一實施例中,成像裝置包括發光件、第一成像鏡頭以及第一影像感測器,發光件發出照明光束,第一影像感測器感測自目標體內部反射且穿透第一成像鏡頭的照明光束的一部份,以對應產生多個第一感測影像。
在本發明的一實施例中,處理器用以根據影像處理演算法分析這些第一感測影像,以產生三維影像。
在本發明的一實施例中,成像裝置更包括第二成像鏡頭以及第二影像感測器,第二影像感測器感測自目標體內部反射且穿透第二成像鏡頭的照明光束的另一部分,以對應產生多個第二感測影像,處理器用以利用第一感測影像以及這些第二感測影像產生三維影像。
在本發明的一實施例中,處理器利用三角測距法產生三維影像。
在本發明的一實施例中,內視鏡系統更包括飛時測距裝置,設置於可撓式插管的該端且連接處理器,處理器用以利用飛時測距裝置在目標體內部進行飛時測距(time-of-flight ranging,ToF ranging),以產生三維深度資訊,處理器用以根據這些第一感測影像以及三維深度資訊產生三維影像。
在本發明的一實施例中,這些圖案依據以中心軸為基準的角度分佈設置於可撓式插管的表面,處理器用以根據運動狀態感測結果以及角度分佈決定插管旋轉角度資訊。
在本發明的一實施例中,定位裝置包括陀螺儀、加速度計以及電子羅盤。
在本發明的一實施例中,處理器用以根據電子羅盤校正陀螺儀。
在本發明的一實施例中,處理器用以根據插管旋轉角度 資訊校正陀螺儀。
在本發明的一實施例中,處理器用以根據插入深度資訊校正定位資訊。
基於上述,在本發明實施例的內視鏡系統中,運動感測模組的多個圖案以軸向間距分佈與角度分佈設於可撓式插管的表面,多個感測器設置於殼體內且位於導引孔旁。因此,這些圖案指定的間距或角度關係,以做為位置或運動狀態描述的量化基礎。當可撓式插管經由導引孔對運動感測模組進行相對運動時,這些感測器可感測這些圖案的運動狀態而得到運動狀態感測結果。處理器再根據運動狀態感測結果、軸向間距分佈與角度分佈來決定插入深度資訊與插管旋轉角度資訊。醫護人員可以從插入深度資訊與插管旋轉角度資訊得知病灶的位置,因此內視鏡系統可實現精確醫療並具有良好的診斷時效性。在本發明的其他實施例中,內視鏡系統更包括定位裝置,並利用處理器結合插入深度資訊、三維影像以及定位資訊,重建人體內部的三維結構。由於上述的三維影像可以對應於不同的插入深度,得以避免三維影像以及所重建的三維結構具有死角,大幅提升醫療精確度。除此之外,還可以存儲所重建的三維結構,提供病患在日後的診療中的重要依據。
為讓本發明的上述特徵和優點能更明顯易懂,下文特舉實施例,並配合所附圖式作詳細說明如下。
100、100a、100b:內視鏡系統
110:可撓式插管
120、120a、120b:運動感測模組
122:殼體
124、1241、1242:圖案
124a、1241a、1242a:反射圖案
124b、1241b、1242b:磁性圖案
126:第一發光件
128、128b:感測器
1281、1281b、12811~12819:深度感測器
1282、1282b:旋轉角度感測器
129:處理器
130:成像裝置
132、232:成像鏡頭
134:第二發光件
136、236:影像感測器
138:定位裝置
140:轉向搖桿
142:飛時測距裝置
210:插入深度資訊
220:插管旋轉角度資訊
230:深度計算
240:三維深度資訊
250:深度關聯性
260:定向關聯性
270:感測影像
280:局部三維重建
290:多個三維影像
310:三維影像融合/聯結
320:三維結構
1381:陀螺儀
1382:加速度計
1383:電子羅盤
1381A:角度改變資訊
1382A:速度改變資訊
1383A:定向資訊
a、b、c:時刻
AG1、AG2、AG3:角度感測器
AS:容置空間
BP:咬合部
BS:彎曲段
C:感應線圈
C1:深度感應線圈
C2:旋轉角度感應線圈
CA:中心軸
CB1:第一電路載板
CB2:第二電路載板
D:間距
DS:末梢段
E1、E2:可撓式插管的兩端
GH:導引孔
HB:人體
I:感應電流
IB:照明光束
R:光收發感測模組
S:表面
S1~S5:訊號
SB:感測光束
SB’:反射後的感測光束
T:計時器
OB:照明光束
θ:夾角
圖1A為本發明的一實施例的內視鏡系統應用於人體的應用示意圖。
圖1B為圖1A的可撓式插管與運動感測模組的外觀示意圖。
圖1C為圖1A中的內視鏡系統的局部剖面示意圖。
圖2A是圖1A至圖1C的可撓式插管在進行軸向運動的放大示意圖與對應的深度感測器所量測到的光強度電訊號時變圖。
圖2B是圖1A至圖1C的可撓式插管在進行旋轉運動的放大示意圖與對應的旋轉角度感測器所量測到的光強度電訊號時變圖。
圖2C是多個深度感測器與多個圖案之間的配置關係與深度感測器所感測到的光強度電訊號示意圖。
圖3A是本發明另一實施例的內視鏡系統的局部剖面示意圖。
圖3B是圖3A的可撓式插管在進行軸向運動的放大示意圖與對應的深度感測器所量測到的電訊號時變圖。
圖3C是圖3A的可撓式插管在進行旋轉運動的放大示意圖與對應的旋轉角度感測器所量測到的電訊號時變圖。
圖4A是本發明又一實施例的內視鏡系統的局部剖面示意圖。
圖4B是圖4A的可撓式插管在進行軸向運動的放大示意圖與對應的深度感測器所量測到的電訊號時變圖。
圖4C是圖4A的可撓式插管與對應的旋轉角度感測器在進行 旋轉運動的放大示意圖與對應的旋轉角度感測器所量測到的電訊號時變圖。
圖5至圖7為本發明的實施例的內視鏡系統的端部放大圖。
圖8為本發明的實施例的內視鏡系統的方塊圖。
圖1A為本發明的一實施例的內視鏡系統應用於人體的應用示意圖。圖1B為圖1A的可撓式插管與運動感測模組的外觀示意圖。圖1C為圖1A中的內視鏡系統的局部剖面示意圖。
請參照圖1A至圖1C,於本實施例中,內視鏡系統100為藉由插管進入人體HB以觀察人體HB內部狀況的醫療儀器。詳細來說,內視鏡系統100主要包括可撓式插管110、運動感測模組120、成像裝置130與轉向搖桿140。於以下的段落中會詳細地說明上述元件與元件之間的配置方式。
可撓式插管110由可撓式材料形成且具有可撓性。如圖1B、圖1C所示,可撓式插管110具有中心軸CA,本發明實施例中所指的軸向(axial orientation)係指可撓式插管110之沿著中心軸CA的延伸方向。
運動感測模組120可藉由光強度或磁場變化而感測可撓式插管110的運動狀態的模組。為求方便說明,於以下的段落中會以先以光學式運動感測模組為例作為說明。於本實施例中,運動感測模組120例如是光學式運動感測模組,其包括殼體122、多 個圖案124、多個第一發光件126、多個感測器128、處理器129、第一電路載板CB1、第二電路載板CB2與計時器T。於以下的段落中會詳細地說明運動感測模組120內部元件與元件之間的配置。
殼體122內部具有容置空間AS,其用以容置運動感測模組120中的各元件,並提供保護功能。殼體122具有對外連通的導引孔GH。可撓式插管110可經由導引孔GH往人體HB內部以拍攝其內部影像。
這些圖案124係依據以中心軸CA為基準的軸向間距分佈與一角度分佈設置於可撓式插管110的表面。具體來說,所謂「依據軸向間距分佈設置於可撓式插管110的表面S」的意思是這些圖案124沿著中心軸CA的軸向並以特定間距分佈來設置於可撓式插管110的表面S,其中特定間距分佈例如是等間距分佈,也就是說,在平行於中心軸CA軸向的方向上,任二個相鄰圖案124的間距D彼此相等,但本發明並不以此為限。另一方面,所謂的「依據一角度分佈設置於可撓式插管110的表面S」意思是這些圖案124以中心軸CA為中心進行一特定角度分佈來設置於可撓式插管110的表面,其中特定角度分佈例如是等角度分佈,也就是說,任二個相鄰圖案124對於中心軸CA所夾出的夾角彼此相等,但本發明並不以此為限。這些圖案124可選擇性地設置於可撓式插管110的外表面或內表面,本發明並不以此為限。因此,這些圖案124彼此之間具有指定的間距或角度關係,以做為位置或運動狀態描述的量化基礎。
這些第一發光件126在功能上係為可發光的光學件(optical member),其可例如是受電控而發光的發光元件或不受電控而可自發光的螢光件,其中發光元件例如是發光二極體(Light Emitting Diode,LED)、有機發光二極體(Organic Light Emitting Diode,OLED)或其他合適且可發光的電控發光元件,而螢光件包括螢光材料,本發明並不以此為限。第一發光件126所發出的光束稱為感測光束SB,這些圖案124的運動狀態可藉由感測光束SB來感測。於本實施例中,這些第一發光件126例如分別整合於這些圖案124中,因此各圖案124亦可被視為是一種發光圖案。
這些感測器128用以感測這些圖案124的運動狀態,從而得到關於可撓式插管110的運動狀態感測結果。於本實施例中,這些感測器128例如是可將光訊號轉換成電訊號的光感測器,且其種類例如是光電二極體(Photodiode)。這些感測器128設置於殼體122內且位於導引孔GH旁。並且,依據量測不同的運動狀態,這些感測器128可更分為多個深度感測器1281與多個旋轉角度感測器1282。這些深度感測器1281沿著導引孔GH的延伸方向設置且位於導引孔GH旁,這些旋轉角度感測器1282則是環繞導引孔GH設置且位於導引孔GH旁。於下方的段落中會再詳細說明如何感測圖案124的運動狀態。
處理器129例如是可對各種電訊號進行運算、處理或進行分析功能的電子元件,其例如是計算器、微處理器(Micro Controller Unit,MCU)、中央處理單元(Central Processing Unit, CPU),或是其他可程式化之控制器(Microprocessor)、數位訊號處理器(Digital Signal Processor,DSP)、可程式化控制器、特殊應用積體電路(Application Specific Integrated Circuits,ASIC)、可程式化邏輯裝置(Programmable Logic Device,PLD)或其他類似裝置。處理器129設置於殼體122內,且電性連接這些感測器128,並用以接收來自這些感測器128的電訊號以對其結果進行分析。
第一、第二電路載板CB1、CB2設置於殼體122內。第一電路載板CB1設置於鄰近導引孔GH的開口處且導引孔GH貫穿第一電路載板CB1。第二電路載板CB2設置於鄰近導引孔GH的中間部分且導引孔GH貫穿第二電路載板CB2。第一、第二電路載板CB1、CB2彼此互為垂直擺設。這些深度感測器1281設置於第一電路載板CB1上且與第一電路載板CB1電性連接,而這些旋轉角度感測器1282設置於第二電路載板CB2上且與第二電路載板CB2電性連接。處理器129與第一、第二電路載板CB1、CB2電性連接,並藉由第一、第二電路載板CB1、CB2接收來自這些深度感測器1281與這些旋轉角度感測器1282的電訊號。
計時器T係為用以量測時間的電子元件,其與處理器129電性連接。
成像裝置130係為用以擷取人體HB內部的影像的光電裝置,其包括成像鏡頭132、第二發光件134與影像感測器136。成像裝置130設置於可撓式插管110的一端E1(例如是末端)。成像 鏡頭132例如是由一或多個具有屈光度的鏡片所構成的鏡頭,其適於接收影像並與影像感測器136光耦接。第二發光件134的說明類似於第一發光件126,於此不再贅述,其用以發出照明光束IB,用以照射人體HB內部的待測物OB(例如是器官)。
轉向搖桿140係用以控制可撓式插管110中運動的機構件。轉向搖桿140設置於可撓式插管110的另一端E2(即不同於成像裝置130的設置端E1)且與可撓式插管110耦接。藉由轉向搖桿140控制末梢段DS的角度,而可改變鄰近末梢段DS的成像裝置130的位置,進一步探測不同器官的影像。
於以下的段落中會詳細地說明內視鏡系統100的運作方式與運動感測模組120中的如何具體感測圖案124的運動狀態感測結果。
首先,先說明內視鏡系統100的運作方式。
請參照圖1A,病患可咬合由殼體122下方延伸出的咬合部BP以避免使用者破壞可撓式插管110,並使運動感測模組120固定於使用者的嘴巴上方。可撓式插管110可經由導引孔GH導入於人體HB。當可撓式插管110進入人體HB後,第二發光件134則發出照明光束IB照射人體HB內部的待測物OB(例如是器官)。待測物OB反射至少一部分的照明光束IB至成像鏡頭132,而使影像感測器136感測影像。影像感測器136可將影像傳遞至後端的顯示裝置(未示出),以供醫護人員觀測人體HB內部的動態影像。而在進入人體HB的過程中,醫護人員更可藉由轉向搖桿140 直接控制可撓式插管110彎曲段BS的角度,又因可撓式插管110的末梢段DS與彎曲段BS連接,因此轉向搖桿140可間接控制末梢段DS的角度,成像裝置130可隨著末梢段DS的角度變化而觀測人體HB內不同的器官。
根據上述的說明,醫護人員會將可撓式插管110經由導引孔GH往人體內部延伸,並且可藉由轉向搖桿140控制末梢段DS的角度來觀測人體內部不同的器官。上述的做法導致了可撓式插管110對運動感測模組120進行相對運動,其中相對運動包括可撓式插管110沿著中心軸CA軸向的軸向運動與可撓式插管110對運動感測模組120所做的旋轉運動。也就是說,這些圖案124的運動感測結果包括了軸向運動感測結果與旋轉運動感測結果。於以下的段落中搭配圖2A至圖2C而會分段說明運動感測模組120如何感測軸向運動與旋轉運動。
圖2A是圖1A至圖1C的可撓式插管在進行軸向運動的放大示意圖與對應的深度感測器所量測到的光強度訊號時變圖。圖2B是圖1A至圖1C的可撓式插管在進行旋轉運動的放大示意圖與對應的旋轉角度感測器所量測到的光強度訊號時變圖。圖2C是多個深度感測器與多個圖案之間的配置關係與深度感測器所感測到的訊號示意圖。
針對感測軸向運動方式,先以單一個深度感測器1281的觀點來看。請參照圖2A,假設這些圖案124所發出的感測光束SB總合而成一總合感測光束,並假設深度感測器1281的位置一開始 對應於圖案1241(於此處標為1241,為發光圖案)的中央處,此時深度感測器1281感測到最大的總合感測光束光強度,如圖2A中的a時刻所示。隨著可撓式插管110往人體HB內部的方向行進,並假設深度感測器1281的位置對應到二圖案1241、1242的中央處,深度感測器1281感測到最小的總合感測光束光強度,如圖2A中的b時刻所示。接著,而隨著可撓式插管110更往人體HB內部的方向行進,並假設深度感測器1281的位置對應到下一個圖案1242的中央處,深度感測器1281又再次地感測到最大的總合感測光束光強度,如圖2A中的c時刻所示。因此,對於單一個深度感測器1281來說,只要感測到兩次最大的總合感測光束光強度,即可判定可撓式插管110往沿著軸向方向移動一間距D的大小。但是,其它的深度感測器1281則不一定是會感測到兩次最大的總合感測光束光強度,因此後端的處理器129會根據所有的深度感測器1281所量測出的訊號結果後進行運算,以得到插入深度資訊。
針對感測旋轉運動方式,請參照圖2B,類似於圖2A的說明,假設這些圖案124所發出的感測光束SB總合而成一總合感測光束,並假設旋轉角度感測器1282的位置一開始對應於圖案1241(於此處標為1241,為發光圖案)的中央處,此時旋轉角度感測器1282感測到最大的總合感測光束光強度,如圖2B中的a時刻所示。隨著可撓式插管110例如是對運動感測模組120進行順時針旋轉運動,以使旋轉角度感測器1282的位置對應的二圖案 1241、1242的中央處時,旋轉角度感測器1282感測到最小的總合感測光束光強度,如圖2B中的b時刻所示。接著,隨著可撓式插管110例如是再對運動感測模組120進行順時針旋轉運動,以使旋轉角度感測器1282的位置對應的圖案1242的中央處時,旋轉角度感測器1282又再次地感測到最大的總合感測光束光強度,如圖2B中的c時刻所示。因此,對於單一個旋轉角度感測器1282來說,只要感測到兩次最大的總合感測光束光強度,即可判定可撓式插管110往順時針方向轉動角度θ的大小。但是,其它的旋轉角度感測器1282則不一定是會感測到兩次最大的總合感測光束光強度,因此後端的處理器129會根據所有的旋轉角度感測器1282所量測出的訊號結果後進行運算,以得到插管旋轉角度資訊。
除了考量上述的因素之外,處理器129更會考慮這些感測器128所量測訊號相位因素,進而得到更為精確的插入深度資訊與插管旋轉角度資訊。請參照圖1C,這些感測器128的空間頻率與這些圖案124的空間頻率彼此不同。也就是說,對於這些深度感測器1281來說,二深度感測器1281之間的間距不同於沿著中心軸CA軸向方向設置的二圖案124之間的間距。對於這些旋轉角度感測器1282來說,二旋轉角度感測器1282對於中心軸CA的夾角不同於二圖案124對於中心軸CA的夾角。請參照圖2C,以多個深度感測器1281(例如是9個,但不以此為限)與多個圖案124(例如是10個,但不以此為限)作為說明的範例,於此圖式可看出二深度感測器1281之間的間距不同於二圖案124之間的 間距。基於以上的配置,每一個深度感測器12811~12819所量測到的光強度訊號相位或多或少有些不同(於此處僅以示例示出深度感測器12811~12815所感測到的訊號S1~S5)。因此,處理器129更可依據訊號相位不同對這些深度感測器12811~12819產生深度編碼的功能,進而得到更為精確的插入深度資訊。類似於圖2C的做法,處理器129也更可依據訊號相位不同對這些旋轉角度感測器1282產生角度編碼的功能,進而得到更為精確的插入旋轉角度資訊。
在計算出插入深度資訊與插管旋轉角度資訊後,處理器129可整合上述資訊以得知病灶的位置,並註記於影像資訊內,以供醫護人員參照。並且,處理器129更可藉由上述的影像及相關資訊輸出至3D模型製造機(未示出),以供3D模型製造機建立人體HB內部模型,或者是做為進階影像處理的基礎。
應注意的是,上述的計算方式只是舉例說明,於其它的實施例中亦可依據同樣的參數(即軸向間距分佈、角度分佈、運動狀態感測結果)並利用不同計算方式以得知插入深度資訊與插管旋轉角度資訊,本發明並不以此為限。
承上述,在本實施例的內視鏡系統100中,運動感測模組120的多個圖案124以軸向間距分佈與角度分佈設於可撓式插管110的表面S,多個感測器128設置於殼體122內且位於導引孔GH旁。當可撓式插管110經由導引孔GH對運動感測模組120進行相對運動時,這些感測器128可感測這些圖案124的運動狀態 而得到運動狀態感測結果。處理器129再根據運動狀態感測結果、軸向間距分佈與角度分佈來決定插入深度資訊與插管旋轉角度資訊。醫護人員可以從插入深度資訊與插管旋轉角度資訊得知病灶的位置。當病患在下一次進行診療時,醫護人員可根據前一次的量測結果而快速地找到病灶,因此內視鏡系統100可實現精確醫療。
進一步來說,處理器129更可依據計時器T所得到的時間資訊,並分別根據插入深度資訊與插管旋轉角度資訊以分別決定可撓式插管110的速度資訊與角速度資訊。
此外,於本實施例中,內視鏡系統100更可選擇性地包括第一至第三角度感測器AG1~AG3。於以下的段落中會詳細地說明上述第一至第三角度感測器AG1~AG3設置位置與對應功能。
如圖1C所示,第一角度感測器AG1設置於殼體122內且與處理器129電性連接,其中第一角度感測器AG1用以感測運動感測模組120本身的第一角度資訊,並將第一角度資訊傳遞至處理器129。因此,處理器129可根據第一角度資訊以得知運動感測模組120水平角度、垂直角度、傾斜角度或震動狀態,並進一步推算可撓式插管110與病患位置。並且,處理器129可依據第一角度資訊並配合計時器T的時間資訊,可進一步得知診療過程中的運動狀態的改變情形。
如圖1A所示,第二角度感測器AG2設置於可撓式插管110的一端E1且位於成像裝置130旁。第二角度感測器AG2與處 理器129電性連接,且用以感測可撓式插管110的一端E1的第二角度資訊。由於第二角度感測器AG2更靠近成像裝置130,因此其感測到的第二角度資訊可使運動感測模組120的感測精度進一步提升。
如圖1A所示,第三角度感測器AG3設置於轉向搖桿140。第三角度感測器AG3與轉向搖桿140與處理器129電性連接,且用以感測轉向搖桿140的第三角度資訊,以簡易地感測可撓式插管110的旋轉角度。
在此必須說明的是,下述實施例沿用前述實施例的部分內容,省略了相同技術內容的說明,關於相同的元件名稱可以參考前述實施例的部分內容,下述實施例不再重複贅述。
圖3A是本發明另一實施例的內視鏡系統的局部剖面示意圖。圖3B是圖3A的可撓式插管在進行軸向運動的放大示意圖與對應的深度感測器所量測到的電訊號時變圖。圖3C是圖3A的可撓式插管在進行旋轉運動的放大示意圖與對應的旋轉角度感測器所量測到的電訊號時變圖。
請參照圖3A至圖3C,圖3A的內視鏡系統100a大致類似於圖1A至圖1C的內視鏡系統100,其主要差異在於:內視鏡系統100a中的運動感測模組120a為反射式光學運動感測模組。詳細來說,這些圖案為具有反射功能的反射圖案124a,而這些第一發光件(未示出於圖3A)則分別整合於這些感測器128(光感測器)。因此,各第一發光件與對應的感測器128構成一光收發感 測模組R。
請參照圖3B與圖3C,本實施例的內視鏡系統100a的光學原理與內視鏡系統100的光學原理稍微不同,其差異在於:在可撓式插管110經由導引孔GH對運動感測模組120進行相對運動的期間中,這些第一發光件126分別由這些光感測器128的所在處發出多個感測光束SB(簡要示意為一個),而被反射圖案124a反射後的感測光束SB’傳遞至這些深度感測器1281與這些旋轉角度感測器1282以得到軸向運動感測結果與旋轉運動感測結果。量測的說明類似於圖2A至圖2C的相關說明,於此不再贅述。
圖4A是本發明又一實施例的內視鏡系統的局部剖面示意圖。圖4B是圖4A的可撓式插管在進行軸向運動的放大示意圖與對應的深度感測器所量測到的電訊號時變圖。圖4C是圖4A的可撓式插管與對應的旋轉角度感測器在進行旋轉運動的放大示意圖與對應的旋轉角度感測器所量測到的電訊號時變圖。
圖4A的內視鏡系統100b大致類似於圖1A至圖1C的內視鏡系統100,其主要差異在於:內視鏡系統100b中的運動感測模組120b為磁場運動感測模組。詳細來說,這些圖案為多個磁性圖案124b,而這些感測器128b為多個感應線圈C,即這些深度感測器1281b為多個深度感應線圈C1,而這些旋轉角度感測器1282b為多個旋轉角度感應線圈C2。磁性圖案124b的磁力線畫兩條為示例,但不以此為限。
請參照圖4B與圖4C,本實施例的內視鏡系統100b的量 測原理與內視鏡系統100的量測原理稍微不同,其差異在於:在可撓式插管110經由導引孔GH對運動感測模組120進行相對運動的期間中,這些磁性圖案124b因相對運動所產生的磁場變化導致這些深度感測器1281b與這些旋轉角度感測器1282b感應出至少一感應電流I,而據此得到軸向運動感測結果與旋轉運動感測結果。換言之,運動感測模組120b的訊號來源方式是由磁場變化而轉換的電訊號,而運動感測模組120的訊號來源方式是由感測光束SB轉換的電訊號。運動感測模組120b的量測方式大致上類似於圖2A與圖2B的說明,於此不再贅述。
於其它未示出的實施例中,圖4A的運動感測模組120b中的感測器128b也可以更換成霍爾感測器(Hall sensor),即這些深度感測器1281b為多個深度霍爾感測器,而這些旋轉角度感測器1282b為多個旋轉角度霍爾感測器。因此,這些深度感測器1281b與這些旋轉角度感測器1282b可感測這些磁性圖案124b的磁場變化而感應出至少一感應電壓,而據此得到軸向運動感測結果與旋轉運動感測結果。
圖5至圖7為根據本發明實施例的內視鏡系統的端部放大圖。這些實施例中的內視鏡系統與圖1A所示的內視鏡系統100的結構大致相同,為了避免贅述,僅繪示了這些實施例中的內視鏡系統與圖1A所示的內視鏡系統100的結構相異處。
圖5為本發明的一實施例的內視鏡系統的端部放大圖。本實施例的內視鏡系統與圖1A所示的內視鏡系統100的結構大致 相同,其不相同處描述如下。本實施例的內視鏡系統更包括了定位裝置138,定位裝置138設置於此內視鏡系統的一端E1並連接至處理器129。定位裝置138用以獲得端E1的定位資訊,並將此定位資訊傳送至處理器129。成像裝置130進一步連接至處理器129,並用以在其所設置的端E1插入人體內部的不同深度的期間中產生多個感測影像。
在本發明一實施例中,定位裝置包括陀螺儀、加速度計以及電子羅盤,其中陀螺儀基於角動量守恆的理論獲得端E1的角度改變資訊,即端E1的定向角度改變量;加速度計用以感測端E1的加速度,經過時間的積分還可以得出端E1的速度改變資訊及位移資訊等;電子羅盤用以感測端E1的定向資訊,相較於陀螺儀獲得端E1的定向角度改變量的性質,電子羅盤可以量測端E1在地理座標系中的角度分量。因此,在本發明一實施例中,處理器129可以根據電子羅盤校正陀螺儀。在本發明的另一實施例中,處理器129可以藉由內視鏡系統的插管旋轉角度資訊校正陀螺儀。除此之外,在本發明的再一實施例中,由於內視鏡系統的插入深度資訊包括了端E1的位移資訊,處理器129可以根據內視鏡系統的插入深度資訊校正定位資訊。
在圖5所示的實施例中,成像鏡頭132、第二發光件134與影像感測器136設置於可撓式插管的端E1,第二發光件134如同前述的實施例可以發出照明光束,影像感測器136用以感測照明光束自人體HB內部反射且穿透成像鏡頭132的部份,影像感測 器136得以對應產生不同插入深度下的多個第一感測影像。處理器129用以根據影像處理演算法(例如軟體演算法)分析這些第一感測影像,來產生對應的多個三維影像。
圖6為本發明的一實施例的內視鏡系統的端部放大圖。本實施例的內視鏡系統與圖5所示的內視鏡系統的結構大致相同,其不相同處描述如下。本實施例的內視鏡系統的成像裝置更包括了成像鏡頭232以及影像感測器236,影像感測器236感測自第二發光件134發出、經由人體HB內部反射且穿透成像鏡頭232的照明光束的一部分,以對應產生多個第二感測影像。由於影像感測器136以及影像感測器236設置於端E1的不同部分上,使得影像感測器136以及影像感測器236之間具有如圖6所示的一間距,處理器129得以將三角測距法運用於影像感測器136所對應產生的多個第一感測影像以及影像感測器236所對應產生的多個第二感測影像,得知這些第一感測影像以及第二感測影像中的不同組織、部位或器官的距離(即深度),因此產生多個三維影像。
圖7為本發明的一實施例的內視鏡系統的端部放大圖。本實施例的內視鏡系統與圖5所示的內視鏡系統的結構大致相同,其不相同處描述如下。本實施例的內視鏡系統更包括飛時測距裝置142,設置於端E1且連接處理器129,處理器129利用飛時測距裝置142在人體HB內部進行飛時測距(TOF),以產生三維深度資訊。具體而言,在圖7所示的實施例中,成像鏡頭132、第二發光件134與影像感測器136設置於可撓式插管的端E1,第 二發光件134如同前述的實施例可以發出照明光束,影像感測器136用以感測照明光束自人體HB內部反射且穿透成像鏡頭132的部份,影像感測器136得以對應產生多個第一感測影像。飛時測距裝置142向對應於這些第一感測影像的人體HB內部進行飛時測距,使得處理器得以獲得每個第一感測影像的三維深度資訊,處理器129再根據這些第一感測影像以及對應的三維深度資訊產生多個三維影像。
應當說明的是,本發明提供了如圖5至圖7所示的實施例來說明產生三維影像的不同方法。下面即將描述的圖8所示的實施例將結合圖5至圖7的部分技術方案並說明如何根據這些三維影像所對應的插入深度資訊、角度改變資訊以及定位資訊結合這些三維影像,以重建人體HB內部的三維結構。
還應當說明的是,在本發明的實施例中,處理器129例如為中央處理單元(central processing unit,CPU)、微處理器(microprocessor)、數位訊號處理器(digital signal processor,DSP)、可程式化控制器、可程式化邏輯裝置(programmable logic device,PLD)或其他類似裝置或這些裝置的組合,本發明並不加以限制。此外,在一實施例中,處理器129的各功能可被實作為多個程式碼。這些程式碼會被儲存在一個記憶體中,由處理器129來執行這些程式碼。或者,在一實施例中,處理器129的各功能可被實作為一或多個電路。本發明並不限制用軟體或硬體的方式來實作處理器129的各功能。
參照圖8,其繪示根據本發明實施例的內視鏡系統的方塊圖。如同前述,本發明實施例提供的處理器129的各功能可以被實作為多個程式碼。因此,在圖8中,將以方塊表示內視鏡系統的各個組成部分,包括各個裝置、部件以及功能。
在圖8所示的實施例中的內視鏡系統具備了插入深度資訊210以及插管旋轉角度資訊220,本實施例的插入深度資訊210以及插管旋轉角度資訊220如同前述實施例所述的插入深度資訊以及插管旋轉角度資訊,於此不再贅述。本實施例的內視鏡系統更包括陀螺儀1381、加速度計1382以及電子羅盤1383,其中陀螺儀1381可以提供角度改變資訊1381A,加速度計1382可以提供速度改變資訊1382A,電子羅盤1383可以提供定向資訊1383A。
本實施例的內視鏡系統更包括影像感測器136、影像感測器236以及飛時測距裝置142,其中影像感測器136可以產生感測影像270。影像感測器136以及影像感測器236也可以分別產生不同的感測影像(如上述圖6所示實施例中的第一感測影像以及第二感測影像),並利用例如三角測距法來進行深度計算230,產生三維深度資訊240。飛時測距裝置142可以進行飛時測距(TOF),以產生三維深度資訊240。
由於插管旋轉角度資訊220涉及可撓式插管的轉動角度,使得插管旋轉角度資訊220以及陀螺儀1381提供的角度改變資訊1381A之間具備定向關聯性260。類似的,插入深度資訊210以及三維深度資訊240之間具備深度關聯性250。
結合定向關聯性260、深度關聯性250、速度改變資訊1382A、定向資訊1383A以及感測影像270來進行局部三維重建280,可以獲得多個三維影像290。
接下來,將多個三維影像290進行三維影像融合/聯結310得以重建人體HB內部的三維結構320。在一實施例中,處理器129對多個三維影像290進行特徵比對,得到特徵資訊。具體而言,例如是在不同的三維影像中尋找並記錄相同的特徵,將這些資訊定義為特徵資訊。處理器129根據這些特徵資訊得知不同的三維影像之間的關係,進一步融合/聯結這些三維影像290,重建人體HB內部的三維結構320,並在過程中不斷進行校正與補償,得到最優化的三維結構320。
綜上所述,在本發明實施例的內視鏡系統中,運動感測模組的多個圖案以軸向間距分佈與一角度分佈設於可撓式插管的表面,多個感測器設置於殼體內且位於導引孔旁。因此,這些圖案指定的間距或角度關係,以做為位置或運動狀態描述的量化基礎。當可撓式插管經由導引孔對運動感測模組進行相對運動時,這些感測器可感測這些圖案的運動狀態而得到運動狀態感測結果。這些感測器可藉由這些圖案的光學變化或磁場變化而感測到這些圖案的運動狀態。並且,這些感測器依據感測功能的不同更分為多個深度感測器與多個旋轉角度感測器。這些深度感測器沿著導引孔的延伸方向而設置。這些旋轉角度感測器環繞導引孔而設置。當可撓式插管對運動感測模組進行相對運動時,這些深度 感測器可用來感測圖案的軸向運動狀態,來決定可撓式插管進入人體的插入深度資訊。另一方面,這些旋轉角度感測器則可用來感測這些圖案的旋轉運動狀態,來決定可撓式插管進入人體的插管旋轉角度資訊。當病患在下一次進行診療時,醫護人員可根據前一次的量測結果而快速地找到病灶,因此,醫療人員可藉由本發明實施例的內視鏡系統以實現精確醫療。在本發明的其他實施例中,內視鏡系統更包括定位裝置,並利用處理器結合插入深度資訊、三維影像以及定位資訊,重建人體內部的三維結構,例如虛擬的上消化道或下消化道。並且,由於上述的三維影像可以對應於不同的插入深度,得以避免三維影像以及所重建的三維結構具有死角,大幅提升醫療精確度。除此之外,還可以存儲所重建的三維結構,提供病患在日後的診療中的重要依據。
雖然本發明已以實施例揭露如上,然其並非用以限定本發明,任何所屬技術領域中具有通常知識者,在不脫離本發明的精神和範圍內,當可作些許的更動與潤飾,故本發明的保護範圍當視後附的申請專利範圍所界定者為準。
100:內視鏡系統
110:可撓式插管
120:運動感測模組
122:殼體
124:圖案
126:第一發光件
128:感測器
1281:深度感測器
1282:旋轉角度感測器
129:處理器
AS:容置空間
AG1:角度感測器
CA:中心軸
CB1:第一電路載板
CB2:第二電路載板
D:間距
GH:導引孔
S:表面
T:計時器

Claims (24)

  1. 一種內視鏡系統,包括:一可撓式插管,具有一中心軸;一運動感測模組,包括:一殼體,具有一導引孔;多個圖案,依據以該中心軸為基準的一軸向間距分佈設置於該可撓式插管的表面;多個感測器,設置於該殼體內且位於該導引孔旁;以及一處理器,設置於該殼體內且電性連接於該些感測器;一成像裝置,設置於該可撓式插管的一端,且連接該處理器;以及一定位裝置,設置於該可撓式插管的該端,且設置以獲得該端的一定位資訊,並將該定位資訊傳送至該處理器,其中該可撓式插管為設置以通過該導引孔插入一目標體內部的不同深度,在該可撓式插管藉由該導引孔對該運動感測模組進行相對運動的期間中,該些感測器用以感測該些圖案的運動狀態而得到一運動狀態感測結果,該處理器用以根據該運動狀態感測結果以及該軸向間距分佈決定一插入深度資訊;該成像裝置為設置以在該可撓式插管插入該目標體內部的不同深度的期間中產生多個感測影像,該處理器用以利用該些感測影像產生多個三維影像,並根據該些三維影像所對應的該插入深度資訊以及該定位資訊結合該些三維影像,以重建該目標體內部 的三維結構。
  2. 如請求項1所述的內視鏡系統,其中該處理器用以對該些三維影像進行特徵比對,得到一特徵資訊,該處理器用以利用該特徵資訊結合該些三維影像,以重建該目標體內部的三維結構。
  3. 如請求項1所述的內視鏡系統,其中該成像裝置包括一發光件、一第一成像鏡頭以及一第一影像感測器,該發光件發出一照明光束,該第一影像感測器感測自該目標體內部反射且穿透該第一成像鏡頭的該照明光束的一部份,以對應產生多個第一感測影像。
  4. 如請求項3所述的內視鏡系統,其中該處理器用以根據一影像處理演算法分析該些第一感測影像,以產生該些三維影像。
  5. 如請求項3所述的內視鏡系統,其中該成像裝置更包括一第二成像鏡頭以及一第二影像感測器,該第二影像感測器感測自該目標體內部反射且穿透該第二成像鏡頭的該照明光束的另一部分,以對應產生多個第二感測影像,該處理器用以利用該些第一感測影像以及該些第二感測影像產生該些三維影像。
  6. 如請求項5所述的內視鏡系統,其中該處理器利用三角測距法產生該些三維影像。
  7. 如請求項3所述的內視鏡系統,更包括一飛時測距裝置,設置於該可撓式插管的該端且連接該處理器,該處理器用以 利用該飛時測距裝置在該目標體內部進行一飛時測距,以產生一三維深度資訊,該處理器用以根據該些第一感測影像以及該三維深度資訊產生該些三維影像。
  8. 如請求項1所述的內視鏡系統,其中該些圖案依據以該中心軸為基準的一角度分佈設置於該可撓式插管的表面,該處理器用以根據該運動狀態感測結果以及該角度分佈決定一插管旋轉角度資訊。
  9. 如請求項8所述的內視鏡系統,其中該定位裝置包括一陀螺儀、一加速度計以及一電子羅盤。
  10. 如請求項9所述的內視鏡系統,其中該處理器用以根據該電子羅盤校正該陀螺儀。
  11. 如請求項9所述的內視鏡系統,其中該處理器用以根據該插管旋轉角度資訊校正該陀螺儀。
  12. 如請求項1所述的內視鏡系統,其中該處理器用以根據該插入深度資訊校正該定位資訊。
  13. 一種三維結構重建方法,包括:以一可撓式插管通過一運動感測模組的一導引孔插入一目標體內部的不同深度;以該可撓式插管藉由該導引孔對該運動感測模組進行相對運動的期間中,該運動感測模組的多個感測器感測該運動感測模組的多個圖案的運動狀態而得到一運動狀態感測結果;以一處理器根據該運動狀態感測結果以及該些圖案的一軸向 間距分佈決定一插入深度資訊;以一成像裝置在該可撓式插管插入該目標體內部的不同深度的期間中產生多個感測影像;以該處理器利用該些感測影像產生多個三維影像;以及以該處理器根據該些三維影像所對應的該插入深度資訊以及該可撓式插管的一端的一定位資訊結合該些三維影像,以重建該目標體內部的三維結構。
  14. 如請求項13所述的三維結構重建方法,更包括:以該處理器對該些三維影像進行特徵比對,得到一特徵資訊;以及該處理器利用該特徵資訊結合該些三維影像,以重建該目標體內部的三維結構。
  15. 如請求項13所述的三維結構重建方法,其中該成像裝置包括一發光件、一第一成像鏡頭以及一第一影像感測器,該方法更包括:以該發光件發出一照明光束;以及以該第一影像感測器感測自該目標體內部反射且穿透該第一成像鏡頭的該照明光束的一部份,以對應產生多個第一感測影像。
  16. 如請求項15所述的三維結構重建方法,更包括:以該處理器根據一影像處理演算法分析該些第一感測影像,以產生該些三維影像。
  17. 如請求項15所述的三維結構重建方法,其中該成像裝置更包括一第二成像鏡頭以及一第二影像感測器,該方法更包括:以該第二影像感測器感測自該目標體內部反射且穿透該第二成像鏡頭的該照明光束的另一部分,以對應產生多個第二感測影像;以及以該處理器利用該些第一感測影像以及該些第二感測影像產生該些三維影像。
  18. 如請求項17所述的三維結構重建方法,更包括:以該處理器利用三角測距法產生該些三維影像。
  19. 如請求項15所述的三維結構重建方法,其中該內視鏡系統更包括一飛時測距裝置,設置於該可撓式插管的該端且連接該處理器,該方法更包括:以該處理器利用該飛時測距裝置在該目標體內部進行一飛時測距,以產生一三維深度資訊;以及以該處理器根據該些第一感測影像以及該三維深度資訊產生該些三維影像。
  20. 如請求項13所述的三維結構重建方法,其中該些圖案依據以該可撓式插管的一中心軸為基準的一角度分佈設置於該可撓式插管的表面,且該方法更包括:以該處理器根據該運動狀態感測結果以及該角度分佈決定一插管旋轉角度資訊。
  21. 如請求項20所述的三維結構重建方法,其中該定位裝置包括一陀螺儀以及一電子羅盤,該方法更包括:以該處理器根據該電子羅盤校正該陀螺儀。
  22. 如請求項21所述的三維結構重建方法,更包括:以該處理器根據該插管旋轉角度資訊校正該陀螺儀。
  23. 如請求項13所述的三維結構重建方法,更包括:以該處理器根據該插入深度資訊校正該定位資訊。
  24. 一種內視鏡系統,包括:一可撓式插管,具有一中心軸;一運動感測模組,包括一殼體以及一處理器,且該殼體具有一導引孔,其中該可撓式插管通過該導引孔插入一目標體內部的不同深度;一成像裝置,設置於該可撓式插管的一端,且連接該處理器,該成像裝置包括一發光件、一成像鏡頭以及一影像感測器,其中該發光件發出一照明光束,該影像感測器感測自該目標體內部反射且穿透該成像鏡頭的該照明光束的一部份,以對應產生多個感測影像;一定位裝置,設置於該可撓式插管的該端,以獲得該端的一定位資訊,並將該定位資訊傳送至該處理器;以及一顯示裝置,連接該影像感測器,以顯示該些感測影像。
TW110104881A 2020-02-13 2021-02-09 內視鏡系統及三維結構重建方法 TWI771905B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US17/409,818 US20210378543A1 (en) 2020-02-13 2021-08-24 Endoscopy system and method of reconstructing three-dimensional structure

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202020167271.7U CN211834303U (zh) 2020-02-13 2020-02-13 内视镜系统
CN202020167271.7 2020-02-13

Publications (2)

Publication Number Publication Date
TW202130320A TW202130320A (zh) 2021-08-16
TWI771905B true TWI771905B (zh) 2022-07-21

Family

ID=73249157

Family Applications (1)

Application Number Title Priority Date Filing Date
TW110104881A TWI771905B (zh) 2020-02-13 2021-02-09 內視鏡系統及三維結構重建方法

Country Status (2)

Country Link
CN (1) CN211834303U (zh)
TW (1) TWI771905B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040111081A1 (en) * 1999-06-02 2004-06-10 Whitman Michael P. Electro-mechanical surgical device
EP3061408A1 (en) * 2015-02-27 2016-08-31 Ethicon Endo-Surgery, LLC Adaptable surgical instrument handle
CN108697457A (zh) * 2001-06-12 2018-10-23 伊西康有限责任公司 包括细长多层轴的模块化电池供电手持式外科器械
TW201922179A (zh) * 2017-06-29 2019-06-16 美商美國德州系統大學評議委員會 手術設備
WO2019139841A1 (en) * 2018-01-09 2019-07-18 Covidien Lp Sterile interface module for robotic surgical assemblies

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040111081A1 (en) * 1999-06-02 2004-06-10 Whitman Michael P. Electro-mechanical surgical device
CN108697457A (zh) * 2001-06-12 2018-10-23 伊西康有限责任公司 包括细长多层轴的模块化电池供电手持式外科器械
EP3061408A1 (en) * 2015-02-27 2016-08-31 Ethicon Endo-Surgery, LLC Adaptable surgical instrument handle
TW201922179A (zh) * 2017-06-29 2019-06-16 美商美國德州系統大學評議委員會 手術設備
WO2019139841A1 (en) * 2018-01-09 2019-07-18 Covidien Lp Sterile interface module for robotic surgical assemblies

Also Published As

Publication number Publication date
TW202130320A (zh) 2021-08-16
CN211834303U (zh) 2020-11-03

Similar Documents

Publication Publication Date Title
CN113243881B (zh) 内视镜系统及三维结构重建方法
JP6985262B2 (ja) 患者の体内における内視鏡の位置を追跡するための装置及び方法
JP6535020B2 (ja) 内視鏡画像内で可視の物体の3d距離および寸法を測定するシステム
CA2699336C (en) Method for determining the position of an intraoral measuring device
US7901348B2 (en) Catheterscope 3D guidance and interface system
KR101799281B1 (ko) 최소 절개 수술용 내시경
KR101043976B1 (ko) 구강용 스캐너
US20100272318A1 (en) Endoscopic measurement techniques
KR101371211B1 (ko) 구강용 스캐너
JP6141559B1 (ja) 医療装置、医療画像生成方法及び医療画像生成プログラム
JPWO2017002388A1 (ja) 画像処理装置、カプセル型内視鏡システム、及び内視鏡システム
EP3190944A2 (en) Systems and methods using spatial sensor data in full-field three-dimensional surface measurment
WO2021155045A1 (en) Method and apparatus for mapping tooth surfaces
TWI771905B (zh) 內視鏡系統及三維結構重建方法
KR20110068954A (ko) 구강용 스캐너
US20210378543A1 (en) Endoscopy system and method of reconstructing three-dimensional structure
WO2013063829A1 (zh) C型臂x线透视机及专用摄像机构
JP3772063B2 (ja) 位置検出装置、及び、位置検出システム
JP3943353B2 (ja) 可撓性超音波内視鏡装置
JP2004195151A (ja) 顎運動測定装置
JP2000189379A (ja) 内視鏡形状検出システム
KR102516406B1 (ko) 내시현미경에 의해 획득되는 이미지를 스티칭하기 위해 위치 정보를 캘리브레이션하는 방법 및 장치
US20050113701A1 (en) Rotating measuring device
US20240081915A1 (en) Instrument presence and rotational offset sensing in flexible system
JP2020141882A (ja) 内視鏡および内視鏡システム