JP2003265409A - Endoscope apparatus - Google Patents

Endoscope apparatus

Info

Publication number
JP2003265409A
JP2003265409A JP2002072932A JP2002072932A JP2003265409A JP 2003265409 A JP2003265409 A JP 2003265409A JP 2002072932 A JP2002072932 A JP 2002072932A JP 2002072932 A JP2002072932 A JP 2002072932A JP 2003265409 A JP2003265409 A JP 2003265409A
Authority
JP
Japan
Prior art keywords
branch
image
endoscope
signal
bronchial
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2002072932A
Other languages
Japanese (ja)
Inventor
Kazunori Segawa
和則 瀬川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Optical Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Optical Co Ltd filed Critical Olympus Optical Co Ltd
Priority to JP2002072932A priority Critical patent/JP2003265409A/en
Publication of JP2003265409A publication Critical patent/JP2003265409A/en
Withdrawn legal-status Critical Current

Links

Abstract

<P>PROBLEM TO BE SOLVED: To solve the problem wherein in observing a bronchus having a plurality of bifurcations and bifucation directions with an endoscope, it takes much time to perform observation because the observation diagnosis is performed while storing the information on the position of bronchus bifurcation, the number of bifurcations, an observed duct, and the position of the diseased bronchus bifurcation with reference to the bronchus model and a bronchus image taken with the endoscope. <P>SOLUTION: In this endoscope apparatus, an image pickup signal picked by an imaging means is processed by a binarization processing circuit 32 to obtain a binarized image signal. According to the binarized image signal, a branch path and the number of bifucations are discrimation-labelled, and according to the result of the discrimination labelling, the branch sequence information is related to the branch number information discriminated by matching the binary image signal to be branch information processed and displayed. <P>COPYRIGHT: (C)2003,JPO

Description

【発明の詳細な説明】 【0001】 【発明の属する技術分野】本発明は、複雑に分岐する管
路を有する器官(たとえば気管支)における内視鏡検査
効率を向上させるナビゲーションシステムを備えた電子
内視鏡装置に関する。 【0002】 【従来の技術】医療分野および工業分野において電子内
視鏡装置が広く用いられている。この電子内視鏡装置
は、微細で複雑な観察部位に対して高解像でかつ高画質
の電子画像が撮像できる手段が必要となる。 【0003】一般的な電子内視鏡装置においては、内視
鏡先端部にCCDやCMOSなどの固体撮像素子を設
け、この固体撮像素子で観察部位の電子画像信号を生成
するようになっている。この固体撮像素子で生成された
電子画像信号は、内視鏡外部に設けられたカメラコント
ロールニット(以下、CCUと称す)により各種信号処
理されてモニタに画像表示したり、および画像信号デー
タとして記録媒体に記録されるようになっている。 【0004】このような電子内視鏡装置において、医療
分野では、内視鏡先端部に設けられた固体撮像素子で撮
像生成された体腔内の電子画像信号を基にモニタに表示
された画像を見ながら術者は、体腔内への挿入操作と、
その画像から観察部位の観察診断を行っている。 【0005】 【発明が解決しようとする課題】従来の医療分野の電子
内視鏡装置において、特に気管支を内視鏡診断する際に
は、気管支管路の分岐する位置、その分岐位置での分岐
数、および分岐する方向などを確認し、気管支モデルと
照合しながら内視鏡診断を進める必要があった。 【0006】このような複数の分岐と複数の分岐方向を
有する気管支を内視鏡観察する際には、気管支モデルと
内視鏡で捕らえた気管支映像とを参照しながら気管支分
岐の位置、分岐数、観察済み管路、および患部を有する
管路の位置などの気管支分岐情報を記憶しながら観察診
察を進めて行くために観察診察に時間がかかり、術者お
よび被観察者の負担が大きかった。 【0007】本発明は、このような問題に鑑みなされた
もので、特に、気管支内視鏡診断において、内視鏡診断
時に観察された気管支分岐に関するデータを基に、気管
支モデルを作成し、その気管支モデルと電子内視鏡で撮
像した電子画像とモニタ画面上に表示させ、内視鏡検査
者の診察効率を向上させる内視鏡装置を提供することを
目的としている。 【0008】 【課題を解決するための手段】本発明の内視鏡装置は、
分岐路を有する管路を撮像可能な撮像手段を有する内視
鏡装置において、前記撮像手段で撮像された撮像信号を
2値化処理する2値化処理手段と、前記2値化処理手段
で処理された2値化画像信号に基づき、前記分岐路及び
分岐数を判別する判別手段と、前記判別手段の判別結果
に基づき、前記2値化画像信号を記憶可能な記憶手段
と、前記記憶手段に一時記憶された2値化画像信号と前
記2値化処理手段からの2値化画像信号とをマッチング
して前記判別手段で判別された前記分岐数情報に分岐順
序情報を関連付ける分岐情報処理手段と、を具備したこ
とを特徴とする。 【0009】本発明の電子内視鏡装置により、撮像され
た電子内視鏡画像から気管支分岐が見つかった位置、分
岐する数、分岐を見つけた回数などの気管支分岐情報を
抽出して電子データ化し、このデータを基に気管支分岐
モデルを作成する。この気管支分岐モデルを内視鏡電子
画像と共にモニタ上に表示させて、内視鏡術者は内視鏡
画像と分岐モデルを確認しながら内視鏡を挿入していく
ため、診察効率を向上させることができる。 【0010】 【発明の実施の形態】以下、図面を参照して本発明の実
施形態を説明する。図1は本発明にかかる内視鏡装置の
一実施形態の行為を示すブロック図、図2は本発明にか
かる内視鏡装置に用いるナビゲーション回路の構成を示
すブロック図、図3は本発明にかかる内視鏡装置の全体
構成を示す説明図、図4は本発明にかかる内視鏡装置の
観察部位像の2値化処理を説明する説明図、図5は本発
明にかかる内視鏡装置の観察部位のラベリング処理を説
明する説明図、図6は本発明にかかる内視鏡装置の気管
支分岐モデルを説明する説明図、図7は本発明にかかる
内視鏡装置のモニターに表示される観察像と気管支分岐
モデルを説明する説明図である。 【0011】最初に図3を用いて本発明にかかる内視鏡
装置の全体構成について説明する。体腔内に挿入されて
観察部位を電子撮像する内視鏡10と、内視鏡10から
の撮像信号を信号処理プロセス回路等によって映像信号
を生成出力するカメラコントロールユニット(CCU)1
1と、暗い観察部位を照明する為の照明光を生成出力す
る光源装置12、CCU11からの映像信号の基で画像
表示するためのモニター13で構成されている。 【0012】内視鏡10には、術者が把持する把持部を
兼ねる操作部14と、この操作部14の先端側から延出
した細長な挿入部15を備え、挿入部15の先端には観
察部位を光学像にする対物レンズ16と光学像を電子撮
像する為の固体撮像素子17を備えている。 【0013】また、前記操作部14と挿入部15には、
ライトガイドファイバー19が配置されている。このラ
イトガイドファイバー19には、ライトガイドケーブル
18の基端が接続配置されており、ライトガイドケーブ
ル18の他端は光源装置12に接続されている。 【0014】つまり、光源装置12からの照明光は、ラ
イトガイドケーブル18、ライトガイドファイバー19
を介して観察部位に投射されるようになっている。ま
た、前記固体撮像素子17は、ライトガイドケーブル1
8に併設された信号ケーブルを介して、前記CCU11
から駆動制御されると共に、撮像された電子撮像信号を
CCU11に供給するようになっている。 【0015】前記CCU11の構成について、図1を用
いて説明する。前記個体撮像素子17を駆動制御する駆
動回路20と、この駆動回路20の駆動制御の基で、前
記個体撮像素子17で光電変換生成されたアナログ電子
撮像信号を所定の信号の大きさに増幅する増幅回路21
と、この増幅されたアナログ電子撮像信号をサンプリン
グしてデジタル信号に変換するCDS・A/D変換回路
22と、デジタル化された電子撮像信号を輝度信号と色
差信号に分離する輝度/色差信号分離回路23と、分離
された輝度信号と色差信号から画質や色調等の補正調整
する為の映像信号処理回路24と、この映像処理回路2
4から出力されたデジタル映像信号をアナログ映像信号
に変換して、前記モニター13に出力するD/A変換回
路25と、前記輝度/色差信号分離回路23からの輝度
信号を用いて、内視鏡10の挿入部15を操作する際の
ナビゲーション情報生成するナビゲーション回路26
と、このナビゲーション回路26で生成したナビゲーシ
ョン情報を前記デジタル電子撮像信号に重畳させて、前
記モニター13の撮像画面の表示と共に、ナビゲーショ
ン情報を表示可能とする重畳回路27とからなってい
る。 【0016】つまり、個体撮像素子17で撮像したアナ
ログ電子撮像信号は、CDS・A/D変換回路22でデ
ジタル電子撮像信号に変換された後、輝度、色差毎の信
号処理が行われた映像信号は、D/A変換回路25でア
ナログ映像信号に変換されて、モニター13に表示され
る。すなわち、内視鏡10の挿入部15が体腔内に挿入
されて、挿入部15の先端の個体撮像素子17で撮像し
た観察部位の映像がモニター13に表示されるようにな
っている。 【0017】このモニター13に表示される観察部位の
映像に重畳するナビゲーション情報を生成するナビゲー
ション回路26の構成を図2を用いて説明する。 【0018】前記輝度/色差信号分離回路23で分離さ
れた1フレーム分の輝度信号データを記憶する第1のフ
レームメモリ31と、この第1のフレームメモリ31に
記憶された1フレーム分の輝度信号データを2値化処理
する2値化処理回路32と、この2値化処理回路32で
2値化処理された輝度信号データを記憶する第2のフレ
ームメモリ33と、この第2のフレームメモリ33から
の輝度信号データからラベリング処理34やマッチング
処理35及びそれら処理結果を記憶保存するデータ保存
メモリ36等を有するプロセッサ回路(CPU+Mem
ory)38と、このプロセッサ回路38で処理生成さ
れた各種データをナビゲーション情報としてモニター1
3に表示するためのキャラクタジェネレータ37とを有
している。 【0019】なお、前記第1のフレームメモリ31は、
前記輝度/色差信号分離回路23から分離された輝度信
号データが随時書き込む記憶されるが、フリーズ操作さ
れると、そのフリーズ操作された時点以降の輝度信号の
書込記憶が停止されるようになっている。 【0020】このような構成のナビゲーション回路26
の動作について図4乃至図7を併用して説明する。な
お、内視鏡10の挿入部15を気管支内に挿入し、その
挿入部15の先端の個体撮像素子17を駆動制御して撮
像した気管支映像をモニター13に表示させて気管支観
察する例を用いて説明する。 【0021】前述したように気管支は、複数の分岐と分
岐方向を有している。内視鏡1の挿入部15を気管支内
に挿入して、個体撮像素子17で撮像生成した映像信号
を基にモニター13に表示されている観察部位像を見な
がら気管支内視鏡観察を行っている際に、最初の気管支
分岐像がモニター13に表示された時点、つまり、気管
支分岐がはっきりとモニタ13上で認識できる位置(気
管支分岐の数がはっきりと認識でき、かつ、気管支分岐
の管路口がはっきりと見え、内視鏡先端の対物レンズ1
6と管路口ができるだけ正面で向き合うように撮像され
る状態)で、内視鏡10を固定させフリーズ操作を行
う。 【0022】このフリーズ操作により、それまで個体撮
像素子17で撮像生成され、輝度/色差信号分離回路2
3で分離された輝度信号は、ナビゲーション回路26内
の第1のフレームメモリ31に動画像データ(輝度信
号)として随時格納されるが、前記フリーズ操作により
この第1フレームメモリ31には、動画像データのデー
タ書き込みが一時中断され、フリーズ動作時点である最
初の気管支分岐の静止画像データが格納された状態にな
る。 【0023】この第1のフレームメモリ31に格納され
た最初の気管支分岐の静止画像データからこの最初の気
管支分岐位置で分岐数がいくつあるのかを抽出するため
に、第1のフレームメモリ31に格納された静止画像デ
ータを2値化処理回路32で2値化処理を行う。この2
値化処理は、図4のように気管支分岐の静止画像から気
管支管路部分と、気管支管路でない部分とに2値化し
て、管路部分の判別が容易にできる画像データに変換し
て、第2のフレームメモリ33に格納する。 【0024】この第2のフレームメモリ33に格納され
た2値化画像データで、管路部分を示している画像が連
結している領域、すなわち、画素が連結している領域に
図5に示すように、ラベリング処理回路34でラベリン
グを行う。つまり、このラベリングされた数が2値化画
像データから気管支分岐数が算出できることになる。 【0025】この2値化画像データとラベリングデータ
は、気管支内視鏡観察で最初に見つかった分岐画像デー
タとしてデータ保存メモリ36に記憶保存させる。な
お、最終的に抽出される気管支分岐数と2値化画像は、
この最初の分岐位置におけるデータとなる。 【0026】この最初の気管支分岐からいずれかの管路
に内視鏡10の挿入部15をさらに挿入し新たな気管支
分岐が現れた場合、上述した処理を再び繰り返す。その
後、内視鏡の挿入を繰り返して新たな気管支分岐が見つ
かった場合、また内視鏡を抜け出す方向に移動させ以前
に見つかっていた気管支分岐を再び見つけた場合にもこ
れまでと同様の処理を繰り返す。 【0027】この内視鏡10による気管支観察の詳細動
作について、図6を用いて説明する。気管支に内視鏡1
0の挿入部15を挿入あるいは抜き出す方向に移動させ
て観察を行った際に、図6(a)に示すように気管支分
岐a,b,c,d,eが見つけられたとする。この時の
内視鏡10の挿入操作の順番は、図6(b)に示すよう
に、気管支に内視鏡10の挿入部15を挿入して最初に
分岐aが発見され、この分岐aは2つの管路に分岐され
ている。この分岐aの図中左側の管路に挿入部15を挿
入すると分岐bが発見され、この分岐bは2つの管路に
分岐されている。 【0028】この分岐bの図中右側の管路に挿入部15
を挿入すると分岐cが発見され、この分岐cは2つの管
路に分岐されている。この分岐cの図中左側の管路に挿
入部15を挿入すると管路hへと挿入される。この管路
hから挿入部15を抜き取ると、分岐c,bと順次再発
見される。分岐bの図中左側の管路に挿入部15を再挿
入させると分岐dの発見され、この分岐dは3つの管路
に分岐されている。以降図中e,f,i、gの順に挿入
操作が繰り返される。 【0029】このようにして、内視鏡10の挿入操作で
最初に検出された分岐aとその後検出される分岐b〜e
の2値化画像データから分岐路位置と、その分岐位置の
分岐管路数の検出と、最初または既に検出されている2
値化画像データとの画像マッチング処理を行い、一致す
る場合は、既に検出した分岐と同じ分岐と判定識別して
同じ識別符号を設定し、一致しない場合には新たに検出
された気管支分岐として判定識別して、新たな識別符号
を設定する。 【0030】この識別符号について、図6(c)を用い
て説明する。最初に検出された気管支分岐aの2値化画
像データから2つの管路が検出される。この検出された
気管支分岐の検出順番と、その気管支分岐の分岐管路数
と、検出された回数の3つの要素からなる識別符号を設
定する。つまり、分岐aの識別符号は、検出順番1と、
この分岐の分岐管路数2と、1回目の検出を示す1とか
らなる(1,2,1)を設定する。次に、気管支分岐b
の2値化画像データは、前記分岐aの2値化画像データ
と比較され、分岐aとは異なる2値化画像データである
と判定されると、気管支分岐として2番目に検出され、
かつ、2つの管路に分岐されていることが検出され、か
つ、1回目の検出である識別符号(2,2,1)が設定
されるが、この分岐bから次の分岐cの検出後、再度分
岐bへと戻ると、その時点で2回目の検出を示す分岐識
別符号(2,2,2)となる。 【0031】次に、分岐cの2値化画像データと前記分
岐a,bの2値化画像データが比較され、新たな分岐c
と識別されて識別符号(3,2,1)が設定される。 【0032】この分岐cの識別符号設定後に、管路hへ
の挿入動作後に、抜き出されて再度分岐cが検出され
て、この再検出された分岐cの最終識別符号(3,2,
2)が設定される。 【0033】さらに、分岐cから抜き取ると再度分岐b
が検出され、この分岐bの検出が2度目であることから
分岐bの識別符号(2,2,2)が設定される。この分
岐bから分岐d方向に挿入されて分岐dが検出され、こ
の分岐dの2値化画像データと既に検出されている分岐
a〜cの2値化画像データと比較されて、4番目に新た
に検出された分岐dを示す識別符号(4,3,1)を設
定する。この分岐dから分岐e方向に挿入されて分岐e
が検出され、この分岐eの2値化画像データと既に検出
されている分岐a〜dの2値化画像データと比較され
て、5番目に新たに検出された分岐eを示す識別符号
(5,2,1)を設定する。 【0034】この分岐eから管路f、i方向にそれぞれ
挿入されて分岐eに戻るとこの分岐eの識別符号(5,
2,3)が設定される。この分岐eから再度分岐dに戻
るとこの分岐dの識別符号(4,3,2)となり、挿入
部15が分岐dの観察位置に位置していることが判明す
るようになっている。 【0035】つまり、気管支分岐毎に2値化画像データ
のラベリングを行い、そのラベリングされた2値化画像
データに順番(番号)をつけ、これら2値化画像データ
が一致した場合には、以前に検出された気管支分岐と認
定し、その以前に検出された気管支分岐番号を参照して
いる。 【0036】なお、内視鏡の撮像条件においては、たと
えば気管支分岐の2つの管路口が縦に配列された形で撮
像される場合もあるし、あるいは横に配列された形で撮
像される場合もある。また管路口の大きさも大きかった
り小さかったりする。画像のマッチング処理において
は、いかなる撮像条件においてもマッチング処理が可能
になるように、フレームメモリの画像に対してすでにメ
モリに保存されている別の気管支分岐の2値画像を回
転、拡大縮小しながらマッチングをとる必要がある。 【0037】このように分岐が見つかった順番と同じ分
岐が見つかった回数、分岐数と分岐のエッジ画像をあわ
せて管理することにより図6(c)に示すように気管支
分岐モデルを作成することができる。 【0038】この気管支分岐モデルデータを基に、前記
キャラクタジェネレータ37を介して、モニター13に
分岐モデル画像表示を行う。 【0039】このモニター13に表示される分岐モデル
は、図7に示すように、観察対象者の識別符号(I
D)、氏名(Name)、年齢(AGE)、日付(DA
TE)等と、及び前記映像信号処理回路24で映像信号
処理された現在観察されている気管支部位の映像と共に
表示されるようになっている。 【0040】以上説明したように、モニター13には、
現在観察している内視鏡画像が表示されていると共に、
既に観察した気管支の分岐モデルと、現在観察している
分岐位置を表示することにより、観察終了部位と今後観
察を行う部位の判別が容易となり、観察の重複や観察の
欠落等が起こりにくい内視鏡装置が提供可能となった。 【0041】[付記]以上詳述した本発明の実施形態に
よれば、以下のごとき構成を得ることができる。 【0042】(付記1)分岐路を有する管路を撮像可能
な撮像手段を有する内視鏡装置において、前記撮像手段
で撮像された撮像信号を2値化処理する2値化処理手段
と、前記2値化処理手段で処理された2値化画像信号に
基づき、前記分岐路及び分岐数を判別する判別手段と、
前記判別手段の判別結果に基づき、前記2値化画像信号
を記憶可能な第1の記憶手段と、前記第1の記憶手段に
一時記憶された2値化画像信号と前記2値化処理手段か
らの2値化画像信号とをマッチングして前記判別手段で
判別された前記分岐数情報に分岐順序情報を関連付ける
分岐情報処理手段と、を具備したことを特徴とする内視
鏡装置。 【0043】(付記2)複数の管路に分岐された被写体
内の被写体像を撮像して撮像信号を出力する撮像手段
と、前撮像手段から出力された前記撮像信号に対して信
号処理を行って画像信号を生成する信号処理手段と、前
記信号処理手段で生成された前記画像信号に対して2値
化画像を出力する為のを行う2値化処理回路と、前記2
値化処理回路で出力された2値化画像に応じて分岐する
管路の数を認識するラベリング処理手段と、前記ラベリ
ング処理手段で認識された分岐した管路の数を記憶する
記憶手段と、前記2値化処理回路で出力された2値化画
像に応じて分岐を見つけた順番と同じ分岐を見つけた回
数を抽出する画像マッチング手段と、前記画像マッチン
グ処理で認識された分岐を見つけた順番と同分岐を見つ
けた回数を記憶する記憶手段と、前記記憶手段に記憶さ
れた管路が分岐する数、分岐を見つけた順番、同じ分岐
をみつけた回数の情報に基づいて前記被写体内における
前記複数の管路の分岐モデルを生成するをモデル生成手
段と、前記モデル生成手段で生成された分岐モデルを出
力して表示手段に表示させる画像出力手段と、を具備し
たことを特徴とする内視鏡撮像装置。 【0044】(付記3)分岐路を有する管路を撮像可能
な撮像手段を有する内視鏡装置において、前記撮像手段
で撮像された撮像信号を2値化処理する2値化処理手段
と、この2値化処理手段で2値化処理された撮像信号に
基づいて、前記管路内の分岐路の判別と、その判別され
た分岐路の分岐数とを判別する分岐路判別手段と、この
分岐路判別手段で判別された分岐路の2値化撮像信号
と、この2値化撮像信号の検出順序、及び分岐数からな
る分岐路情報データを記憶する記憶手段と、この記憶手
段に既に記憶されている分岐路情報データと、前記分岐
路判別手段で随時判別された分岐路情報データとを比較
し、前記分岐路判別手段で判別された分岐路情報データ
が前記記憶手段に既に記憶されている分岐路情報データ
と同じである場合には、既存の分岐路情報データに関連
した分岐路情報データを生成付加する分岐路識別情報付
加手段と、を具備し、前記分岐路識別情報付加手段で付
加した分岐路識別情報をモニターに表示させることを特
徴とする内視鏡装置。 【0045】 【発明の効果】本発明の内視鏡装置は、内視鏡を挿入し
気管支分岐を検出した順番を画面上に表示しているた
め、新たに検出された分岐であるか、または以前に検出
されていた分岐なのかを判断することができ、またその
分岐を検出した回数と現在内視鏡で観察されいる分岐位
置もあわせて表示しているため、内視鏡で気管支観察操
作時の挿入ナビゲート情報となり、内視鏡観察診断の操
作を円滑に、かつ、効率よく実行できる効果を有してい
る。
Description: BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an electronic electronic device provided with a navigation system for improving the efficiency of endoscopy in an organ (eg, bronchi) having a complicated branching duct. The present invention relates to an endoscope apparatus. [0002] Electronic endoscope devices are widely used in the medical and industrial fields. This electronic endoscope apparatus requires a means capable of capturing a high-resolution and high-quality electronic image for a fine and complicated observation site. In a general electronic endoscope apparatus, a solid-state image pickup device such as a CCD or a CMOS is provided at the end of the endoscope, and the solid-state image pickup device generates an electronic image signal of an observation site. . The electronic image signal generated by the solid-state imaging device is subjected to various kinds of signal processing by a camera control unit (hereinafter, referred to as a CCU) provided outside the endoscope to display an image on a monitor or to record the image signal data. It is recorded on a medium. In such an electronic endoscope apparatus, in the medical field, an image displayed on a monitor is displayed on the basis of an electronic image signal in a body cavity which is imaged and generated by a solid-state image sensor provided at the end of the endoscope. While watching, the surgeon inserts into the body cavity,
Observation diagnosis of the observation site is performed from the image. [0005] In a conventional electronic endoscope apparatus in the medical field, particularly in the case of endoscopic diagnosis of the bronchi, the position at which the bronchial duct branches, and the branch at the branch position. It was necessary to confirm the number, direction of branching, etc., and proceed with endoscopic diagnosis while checking it against the bronchial model. [0006] When observing a bronchus having a plurality of branches and a plurality of branches in an endoscope, the position of the bronchial branch and the number of branches are determined by referring to the bronchial model and the bronchial image captured by the endoscope. In order to proceed with the observational examination while storing the bronchus bifurcation information such as the observed ducts and the position of the duct having the affected part, the observation examinations take a long time, and the burden on the operator and the subject is large. The present invention has been made in view of such a problem. In particular, in bronchial endoscopic diagnosis, a bronchial model is created based on data on bronchial bifurcations observed at the time of endoscopic diagnosis, and It is an object of the present invention to provide an endoscope apparatus that displays a bronchial model, an electronic image captured by an electronic endoscope, and a monitor screen to improve the examination efficiency of an endoscopic examiner. [0008] An endoscope apparatus according to the present invention comprises:
In an endoscope apparatus having an image pickup means capable of picking up an image of a pipe having a branch, a binarization processing means for performing a binarization process on an image signal picked up by the image pickup means, and a processing carried out by the binarization processing means Determining means for determining the branch path and the number of branches based on the binarized image signal obtained; storage means capable of storing the binary image signal based on the determination result of the determining means; Branch information processing means for matching the temporarily stored binary image signal with the binary image signal from the binary processing means and associating branch order information with the branch number information determined by the determination means; , Are provided. The electronic endoscope apparatus of the present invention extracts bronchial bifurcation information such as a position at which a bronchial branch is found, the number of branches, and the number of times a branch is found from a captured electronic endoscope image and converts it into electronic data. Then, a bronchial bifurcation model is created based on this data. This bronchial bifurcation model is displayed on the monitor together with the electronic image of the endoscope, and the endoscopist inserts the endoscope while checking the endoscopic image and the bifurcation model, thereby improving the examination efficiency. be able to. Embodiments of the present invention will be described below with reference to the drawings. FIG. 1 is a block diagram showing the operation of an embodiment of the endoscope apparatus according to the present invention, FIG. 2 is a block diagram showing the configuration of a navigation circuit used in the endoscope apparatus according to the present invention, and FIG. FIG. 4 is an explanatory view showing the entire configuration of such an endoscope apparatus, FIG. 4 is an explanatory view for explaining a binarization process of an observation region image of the endoscope apparatus according to the present invention, and FIG. 5 is an endoscope apparatus according to the present invention. FIG. 6 is an explanatory diagram for explaining a labeling process of an observation part of FIG. 6, FIG. 6 is an explanatory diagram for explaining a bronchial branch model of the endoscope device according to the present invention, and FIG. 7 is displayed on a monitor of the endoscope device according to the present invention. It is explanatory drawing explaining an observation image and a bronchus bifurcation model. First, the overall configuration of the endoscope apparatus according to the present invention will be described with reference to FIG. An endoscope 10 that is inserted into a body cavity to electronically image an observation site, and a camera control unit (CCU) 1 that generates and outputs a video signal from an imaging signal from the endoscope 10 by a signal processing circuit or the like.
1, a light source device 12 for generating and outputting illumination light for illuminating a dark observation site, and a monitor 13 for displaying an image based on a video signal from the CCU 11. The endoscope 10 is provided with an operating portion 14 also serving as a grip portion to be gripped by an operator, and an elongated insertion portion 15 extending from the distal end side of the operating portion 14. The system includes an objective lens 16 that converts an observation region into an optical image and a solid-state imaging device 17 that electronically captures an optical image. The operation unit 14 and the insertion unit 15 include:
A light guide fiber 19 is arranged. The proximal end of the light guide cable 18 is connected to the light guide fiber 19, and the other end of the light guide cable 18 is connected to the light source device 12. That is, the illumination light from the light source device 12 is supplied to the light guide cable 18 and the light guide fiber 19.
Is projected onto the observation site via the. In addition, the solid-state imaging device 17 includes the light guide cable 1
8 through the signal cable attached to the CCU 11
, And supplies an imaged electronic image signal to the CCU 11. The configuration of the CCU 11 will be described with reference to FIG. A drive circuit 20 for driving and controlling the solid-state imaging device 17, and amplifying the analog electronic imaging signal photoelectrically generated by the solid-state imaging device 17 to a predetermined signal size based on the drive control of the drive circuit 20. Amplifier circuit 21
A CDS / A / D conversion circuit 22 for sampling the amplified analog electronic image signal and converting it into a digital signal; and a luminance / color difference signal separation for separating the digitized electronic image signal into a luminance signal and a color difference signal. A circuit 23, a video signal processing circuit 24 for correcting and adjusting image quality, color tone, and the like from the separated luminance signal and color difference signal;
4 is converted into an analog video signal and output to the monitor 13 using a D / A conversion circuit 25 and a luminance signal from the luminance / color difference signal separation circuit 23. Navigation circuit 26 for generating navigation information when operating insertion section 15 of 10
And a superimposing circuit 27 that superimposes the navigation information generated by the navigation circuit 26 on the digital electronic image pickup signal and displays the image information on the monitor 13 and the navigation information. That is, the analog electronic image pickup signal picked up by the solid-state image pickup device 17 is converted into a digital electronic image pickup signal by the CDS / A / D conversion circuit 22 and then subjected to signal processing for each luminance and color difference. Is converted into an analog video signal by the D / A conversion circuit 25 and displayed on the monitor 13. That is, the insertion section 15 of the endoscope 10 is inserted into a body cavity, and an image of an observation region captured by the solid-state imaging device 17 at the distal end of the insertion section 15 is displayed on the monitor 13. The configuration of the navigation circuit 26 for generating navigation information to be superimposed on the image of the observation site displayed on the monitor 13 will be described with reference to FIG. A first frame memory 31 for storing the luminance signal data for one frame separated by the luminance / color difference signal separating circuit 23, and a luminance signal for one frame stored in the first frame memory 31 A binarization processing circuit 32 for binarizing data, a second frame memory 33 for storing the luminance signal data binarized by the binarization processing circuit 32, and a second frame memory 33 A processor circuit (CPU + Mem) having a labeling process 34 and a matching process 35 from the luminance signal data from
ory) 38 and various data processed and generated by the processor circuit 38 as the navigation information.
3 and a character generator 37 for display on the display 3. The first frame memory 31 has
The luminance signal data separated from the luminance / color difference signal separation circuit 23 is written and stored as needed. When a freeze operation is performed, the writing and storage of the luminance signal after the freeze operation is stopped. ing. The navigation circuit 26 having such a configuration is described.
Will be described with reference to FIGS. 4 to 7. Note that an example in which the insertion section 15 of the endoscope 10 is inserted into the bronchus, the individual imaging element 17 at the distal end of the insertion section 15 is driven and controlled, and a captured bronchi image is displayed on the monitor 13 to observe the bronchus is used. Will be explained. As described above, the bronchus has a plurality of branches and branch directions. The insertion section 15 of the endoscope 1 is inserted into the bronchus, and bronchial endoscope observation is performed while observing the observation site image displayed on the monitor 13 based on the video signal imaged and generated by the individual imaging element 17. At the time when the first bronchial branch image is displayed on the monitor 13, that is, a position where the bronchial branch can be clearly recognized on the monitor 13 (the number of bronchial branches can be clearly recognized, and the channel opening of the bronchial bifurcation can be recognized. Is clearly visible, and the objective lens 1 at the end of the endoscope
The endoscope 10 is fixed and the freeze operation is performed in a state where the image is captured so that the conduit 6 and the conduit opening face each other as much as possible. By this freeze operation, an image is generated and generated by the solid-state image sensor 17 so far, and the luminance / color difference signal separation circuit 2
The luminance signal separated in 3 is stored as needed in the first frame memory 31 in the navigation circuit 26 as moving image data (luminance signal), and the moving image is stored in the first frame memory 31 by the freeze operation. The data writing of the data is temporarily suspended, and the still image data of the first bronchial branch at the time of the freeze operation is stored. In order to extract the number of branches at the first bronchial bifurcation position from the still image data of the first bronchial bifurcation stored in the first frame memory 31, the number is stored in the first frame memory 31. The binarization processing circuit 32 performs binarization processing on the obtained still image data. This 2
The binarization process binarizes a still image of a bronchial branch into a bronchial duct part and a part that is not a bronchial duct as shown in FIG. 4, and converts the image data into image data that can easily discriminate the duct part. It is stored in the second frame memory 33. In the binarized image data stored in the second frame memory 33, FIG. 5 shows a region where the image showing the pipeline portion is connected, that is, a region where the pixels are connected. As described above, labeling is performed by the labeling processing circuit 34. That is, the number of bronchial branches can be calculated from the binarized image data. The binarized image data and labeling data are stored and stored in the data storage memory 36 as branch image data first found by bronchial endoscope observation. The number of bronchial branches and the binarized image that are finally extracted are as follows:
This is the data at the first branch position. When the insertion section 15 of the endoscope 10 is further inserted into one of the ducts from the first bronchial branch and a new bronchial branch appears, the above-described processing is repeated again. After that, when the insertion of the endoscope is repeated and a new bronchial branch is found, or when the endoscope is moved out of the endoscope and the previously found bronchial branch is found again, the same processing as before is performed. repeat. The detailed operation of bronchial observation by the endoscope 10 will be described with reference to FIG. Endoscope 1 for bronchi
It is assumed that bronchus bifurcations a, b, c, d, and e are found as shown in FIG. 6A when observation is performed by moving the insertion portion 15 of No. 0 in the insertion or extraction direction. As shown in FIG. 6B, the order of the insertion operation of the endoscope 10 at this time is such that the insertion section 15 of the endoscope 10 is inserted into the bronchus, and a branch a is first found. It is branched into two conduits. When the insertion portion 15 is inserted into the conduit on the left side of the branch a in the drawing, the branch b is found, and the branch b is branched into two conduits. The insertion portion 15 is inserted into the right conduit of the branch b in the drawing.
Is inserted, a branch c is found, and this branch c is branched into two conduits. When the insertion portion 15 is inserted into the conduit on the left side of the branch c in the drawing, it is inserted into the conduit h. When the insertion portion 15 is extracted from the conduit h, the branch c and b are sequentially rediscovered. When the insertion portion 15 is reinserted into the conduit on the left side of the branch b in the drawing, the branch d is found, and the branch d is branched into three conduits. Thereafter, the insertion operation is repeated in the order of e, f, i, and g in the figure. In this manner, the branch a first detected by the insertion operation of the endoscope 10 and the branches b to e subsequently detected
From the binarized image data, the detection of the branch path position, the number of branch pipes at the branch position, and the first or already detected 2
Performs image matching processing with the digitized image data. If they match, it is determined to be the same branch as the already detected branch, and the same identification code is set.If they do not match, it is determined as a newly detected bronchial branch. After identification, a new identification code is set. This identification code will be described with reference to FIG. Two ducts are detected from the binarized image data of the bronchial branch a detected first. An identification code including three elements of the detected order of the detected bronchial branch, the number of branches of the bronchial branch, and the number of times of detection is set. That is, the identification code of the branch a is the detection order 1, and
(1, 2, 1) is set, which is composed of 2 branch pipe lines and 1 indicating the first detection. Next, bronchial branch b
Is compared with the binarized image data of the branch a, and when it is determined that the binarized image data is different from the branch a, the binarized image data is secondly detected as a bronchial branch,
Further, it is detected that the branch is made into two pipelines, and the identification code (2, 2, 1), which is the first detection, is set. When returning to the branch b again, the branch identification code (2, 2, 2) indicating the second detection is obtained at that time. Next, the binarized image data of the branch c and the binarized image data of the branches a and b are compared, and a new branch c
And the identification code (3, 2, 1) is set. After setting the identification code of the branch c, after the insertion operation into the pipeline h, the branch c is extracted and detected again, and the final identification code (3, 2, 2) of the re-detected branch c is detected.
2) is set. Further, when extracted from the branch c, the branch b
Is detected, and since the detection of the branch b is the second time, the identification code (2, 2, 2) of the branch b is set. The branch d is inserted from the branch b in the direction of the branch d, the branch d is detected, and the binarized image data of the branch d is compared with the binarized image data of the already detected branches a to c. An identification code (4, 3, 1) indicating a newly detected branch d is set. The branch e is inserted in the direction from the branch d to the branch e.
Is detected, the binarized image data of the branch e is compared with the binarized image data of the already detected branches a to d, and the identification code (5) indicating the fifth newly detected branch e is detected. , 2,1) are set. When the branch e is inserted in the pipes f and i, respectively, and returns to the branch e, the identification code (5,
2, 3) are set. When the branch e returns to the branch d again, the identification code (4, 3, 2) of the branch d is obtained, and it becomes clear that the insertion portion 15 is located at the observation position of the branch d. That is, labeling of the binarized image data is performed for each bronchial branch, and the labeled binarized image data is numbered in order (number). The bronchial bifurcation detected is identified, and the bronchial bifurcation number detected before that is referred to. It should be noted that, depending on the imaging conditions of the endoscope, for example, there are cases where the two channel openings of the bronchial branch are imaged in a vertically arranged form, or in which the images are imaged in a horizontally arranged form. There is also. Also, the size of the conduit opening is large or small. In the image matching process, a binary image of another bronchial branch already stored in the memory is rotated and scaled with respect to the image in the frame memory so that the matching process can be performed under any imaging conditions. It is necessary to match. As shown in FIG. 6C, a bronchial bifurcation model can be created by managing the number of times the same branch is found in the order in which the branches were found, the number of branches, and the edge images of the branches. it can. Based on the bronchial branch model data, a branch model image is displayed on the monitor 13 via the character generator 37. As shown in FIG. 7, the branch model displayed on the monitor 13 is an identification code (I
D), name (Name), age (AGE), date (DA
TE) and the like, and an image of the currently observed bronchial region which has been subjected to the image signal processing by the image signal processing circuit 24. As described above, the monitor 13
While the currently observed endoscopic image is displayed,
By displaying the bronchial branch model that has already been observed and the branching position that is currently being observed, it is easy to distinguish between the observation end site and the site to be observed in the future. Mirror devices can now be provided. [Appendix] According to the embodiment of the present invention described in detail above, the following configuration can be obtained. (Supplementary Note 1) In an endoscope apparatus having an image pickup means capable of picking up an image of a pipeline having a branch path, a binarization processing means for binarizing an image pickup signal picked up by the image pickup means; Determining means for determining the branch path and the number of branches based on the binary image signal processed by the binary processing means;
A first storage unit capable of storing the binary image signal based on a result of the determination by the determination unit; and a binary image signal temporarily stored in the first storage unit and the binary processing unit. And a branch information processing unit for matching branch number information determined by the determination unit by matching with the binarized image signal. (Supplementary Note 2) Imaging means for imaging a subject image in a subject branched into a plurality of pipelines and outputting an imaging signal, and performing signal processing on the imaging signal output from the preceding imaging means. Signal processing means for generating an image signal by means of an image signal; a binarization processing circuit for outputting a binary image to the image signal generated by the signal processing means;
Labeling processing means for recognizing the number of pipelines branched according to the binarized image output by the binarization processing circuit; storage means for storing the number of branched pipelines recognized by the labeling processing means; Image matching means for extracting the number of times a branch is found according to the order in which the branches are found in accordance with the binary image output by the binary processing circuit; and an order in which the branches recognized in the image matching processing are found Storage means for storing the number of times the same branch was found, and the number of branches of the pipeline stored in the storage means, the order in which the branches were found, and the number of times the same branch was found. A model generating means for generating a branch model of a plurality of pipelines, and image output means for outputting the branch model generated by the model generating means and displaying it on a display means. Endoscopic imaging device. (Supplementary Note 3) In an endoscope apparatus having an image pickup means capable of picking up an image of a pipeline having a branch path, a binarization processing means for binarizing an image pickup signal picked up by the image pickup means, Branch path discriminating means for discriminating a branch path in the pipeline based on the image signal subjected to binarization processing by the binarization processing means and the number of branches of the discriminated branch path; Storage means for storing a binarized image signal of the branch road determined by the road determination means, a detection order of the binary image signal, and branch path information data comprising the number of branches; The branch road information data is compared with the branch road information data determined at any time by the branch road determination unit, and the branch road information data determined by the branch road determination unit is already stored in the storage unit. If it is the same as the branch information data Branching information adding means for generating and adding branching path information data related to existing branching path information data, and displaying on the monitor the branching path identification information added by the branching path information adding means. An endoscope apparatus characterized by the above-mentioned. According to the endoscope apparatus of the present invention, since the order in which the endoscope is inserted and the bronchial bifurcation is detected is displayed on the screen, whether the bifurcation is a newly detected bifurcation or It is possible to judge whether the branch was detected before, and also displays the number of times the branch was detected and the branch position currently observed by the endoscope, so that bronchial observation operation with the endoscope It becomes the insertion navigation information at the time, and has an effect that the operation of endoscopic observation diagnosis can be executed smoothly and efficiently.

【図面の簡単な説明】 【図1】本発明にかかる内視鏡装置の一実施形態の構成
を示すブロック図。 【図2】本発明にかかる内視鏡装置に用いるナビゲーシ
ョン回路の構成を示すブロック図。 【図3】本発明にかかる内視鏡装置の全体構成を示す説
明図。 【図4】本発明にかかる内視鏡装置の観察部位像の2値
化処理を説明する説明図。 【図5】本発明にかかる内視鏡装置の観察部位のラベリ
ング処理を説明する説明図。 【図6】本発明にかかる内視鏡装置の分岐モデルを説明
する説明図。 【図7】本発明にかかる内視鏡装置のモニタに表示され
る観察像と気管支分岐モデルを説明する説明図。 【符号の説明】 17…個体撮像素子 20…駆動制御回路 21…増幅回路 22…CDS・A/D変換回路 23…輝度/色差信号分離回路 24…映像信号処理回路 25…D/A変換回路 26…ナビゲーション回路 31…第1フレームメモリ 32…2値化処理回路 33…第2フレームメモリ 34…ラベリング処理部 35…マッチング処理部 36…データ保存メモリ 37…キャラクタジェネレータ
BRIEF DESCRIPTION OF THE DRAWINGS FIG. 1 is a block diagram showing a configuration of an embodiment of an endoscope apparatus according to the present invention. FIG. 2 is a block diagram showing a configuration of a navigation circuit used in the endoscope apparatus according to the present invention. FIG. 3 is an explanatory diagram showing the entire configuration of the endoscope apparatus according to the present invention. FIG. 4 is an explanatory diagram for explaining a binarization process of an observation region image of the endoscope apparatus according to the present invention. FIG. 5 is an explanatory diagram illustrating labeling processing of an observation site of the endoscope apparatus according to the present invention. FIG. 6 is an explanatory diagram illustrating a branch model of the endoscope apparatus according to the present invention. FIG. 7 is an explanatory diagram illustrating an observation image and a bronchial bifurcation model displayed on a monitor of the endoscope apparatus according to the present invention. [Description of Signs] 17 ... Individual imaging device 20 ... Drive control circuit 21 ... Amplification circuit 22 ... CDS / A / D conversion circuit 23 ... Brightness / color difference signal separation circuit 24 ... Video signal processing circuit 25 ... D / A conversion circuit 26 ... Navigation circuit 31 First frame memory 32 Binarization processing circuit 33 Second frame memory 34 Labeling processing unit 35 Matching processing unit 36 Data storage memory 37 Character generator

【手続補正書】 【提出日】平成14年5月8日(2002.5.8) 【手続補正1】 【補正対象書類名】明細書 【補正対象項目名】0006 【補正方法】変更 【補正内容】 【0006】このような複数の分岐と複数の分岐方向を
有する気管支を内視鏡観察する際には、気管支モデルと
内視鏡で捉えた気管支映像とを参照しながら気管支分岐
の位置、分岐数、観察済み管路、および患部を有する管
路の位置などの気管支分岐情報を記憶しながら観察診察
を進めて行くために観察診察に時間がかかり、術者およ
び被観察者の負担が大きかった。 【手続補正2】 【補正対象書類名】明細書 【補正対象項目名】0015 【補正方法】変更 【補正内容】 【0015】前記CCU11の構成について、図1を用
いて説明する。前記固体撮像素子17を駆動制御する駆
動回路20と、この駆動回路20の駆動制御の基で、前
固体撮像素子17で光電変換生成されたアナログ電子
撮像信号を所定の信号の大きさに増幅する増幅回路21
と、この増幅されたアナログ電子撮像信号をサンプリン
グしてデジタル信号に変換するCDS・A/D変換回路
22と、デジタル化された電子撮像信号を輝度信号と色
差信号に分離する輝度/色差信号分離回路23と、分離
された輝度信号と色差信号から画質や色調等の補正調整
する為の映像信号処理回路24と、この映像処理回路2
4から出力されたデジタル映像信号をアナログ映像信号
に変換して、前記モニター13に出力するD/A変換回
路25と、前記輝度/色差信号分離回路23からの輝度
信号を用いて、内視鏡10の挿入部15を操作する際の
ナビゲーション情報生成するナビゲーション回路26
と、このナビゲーション回路26で生成したナビゲーシ
ョン情報を前記デジタル電子撮像信号に重畳させて、前
記モニター13の撮像画面の表示と共に、ナビゲーショ
ン情報を表示可能とする重畳回路27とからなってい
る。 【手続補正3】 【補正対象書類名】明細書 【補正対象項目名】0016 【補正方法】変更 【補正内容】 【0016】つまり、固体撮像素子17で撮像したアナ
ログ電子撮像信号は、CDS・A/D変換回路22でデ
ジタル電子撮像信号に変換された後、輝度、色差毎の信
号処理が行われた映像信号は、D/A変換回路25でア
ナログ映像信号に変換されて、モニター13に表示され
る。すなわち、内視鏡10の挿入部15が体腔内に挿入
されて、挿入部15の先端の固体撮像素子17で撮像し
た観察部位の映像がモニター13に表示されるようにな
っている。 【手続補正4】 【補正対象書類名】明細書 【補正対象項目名】0019 【補正方法】変更 【補正内容】 【0019】なお、前記第1のフレームメモリ31は、
前記輝度/色差信号分離回路23から分離された輝度信
号データが随時書き込まれて記憶されるが、フリーズ操
作されると、そのフリーズ操作された時点以降の輝度信
号の書込記憶が停止されるようになっている。 【手続補正5】 【補正対象書類名】明細書 【補正対象項目名】0020 【補正方法】変更 【補正内容】 【0020】このような構成のナビゲーション回路26
の動作について図4乃至図7を併用して説明する。な
お、内視鏡10の挿入部15を気管支内に挿入し、その
挿入部15の先端の固体撮像素子17を駆動制御して撮
像した気管支映像をモニター13に表示させて気管支観
察する例を用いて説明する。 【手続補正6】 【補正対象書類名】明細書 【補正対象項目名】0021 【補正方法】変更 【補正内容】 【0021】前述したように気管支は、複数の分岐と分
岐方向を有している。内視鏡10の挿入部15を気管支
内に挿入して、固体撮像素子17で撮像生成した映像信
号を基にモニター13に表示されている観察部位像を見
ながら気管支内視鏡観察を行っている際に、最初の気管
支分岐像がモニター13に表示された時点、つまり、気
管支分岐がはっきりとモニタ13上で認識できる位置
(気管支分岐の数がはっきりと認識でき、かつ、気管支
分岐の管路口がはっきりと見え、内視鏡先端の対物レン
ズ16と管路口ができるだけ正面で向き合うように撮像
される状態)で、内視鏡10を固定させフリーズ操作を
行う。 【手続補正7】 【補正対象書類名】明細書 【補正対象項目名】0022 【補正方法】変更 【補正内容】 【0022】このフリーズ操作により、それまで固体
像素子17で撮像生成され、輝度/色差信号分離回路2
3で分離された輝度信号は、ナビゲーション回路26内
の第1のフレームメモリ31に動画像データ(輝度信
号)として随時格納されるが、前記フリーズ操作により
この第1フレームメモリ31には、動画像データのデー
タ書き込みが一時中断され、フリーズ動作時点である最
初の気管支分岐の静止画像データが格納された状態にな
る。 【手続補正8】 【補正対象書類名】明細書 【補正対象項目名】0026 【補正方法】変更 【補正内容】 【0026】この最初の気管支分岐からいずれかの管路
に内視鏡10の挿入部15をさらに挿入し新たな気管支
分岐が現れた場合、上述した処理を再び繰り返す。その
後、内視鏡の挿入を繰り返して新たな気管支分岐が見つ
かった場合、また内視鏡を抜き出す方向に移動させ以前
に見つかっていた気管支分岐を再び見つけた場合にもこ
れまでと同様の処理を繰り返す。 【手続補正9】 【補正対象書類名】明細書 【補正対象項目名】符号の説明 【補正方法】変更 【補正内容】 【符号の説明】 17…固体撮像素子 20…駆動制御回路 21…増幅回路 22…CDS・A/D変換回路 23…輝度/色差信号分離回路 24…映像信号処理回路 25…D/A変換回路 26…ナビゲーション回路 31…第1フレームメモリ 32…2値化処理回路 33…第2フレームメモリ 34…ラベリング処理部 35…マッチング処理部 36…データ保存メモリ 37…キャラクタジェネレータ
[Procedure amendment] [Submission date] May 8, 2002 (2002.5.8) [Procedure amendment 1] [Document name to be amended] Description [Item name to be amended] 0006 [Amendment method] Change [Amendment] When the bronchus having a plurality of branches and a plurality of branch directions are endoscopically observed, the position of the bronchus is determined by referring to the bronchi model and the bronchi image captured by the endoscope. It takes a long time to perform the observational examination while storing the bronchial bifurcation information such as the number of branches, the observed ducts, and the position of the duct having the diseased part, and the burden on the operator and the subject is large. Was. [Procedure amendment 2] [Document name to be amended] Description [Item name to be amended] 0015 [Correction method] Change [Contents of amendment] The configuration of the CCU 11 will be described with reference to FIG. A drive circuit 20 for driving and controlling the solid-state imaging device 17, under the drive control of the drive circuit 20 amplifies the analog electronic imaging signal photoelectric conversion generated by the solid-state imaging device 17 to the magnitude of the predetermined signal Amplifier circuit 21
A CDS / A / D conversion circuit 22 for sampling the amplified analog electronic image signal and converting it into a digital signal; and a luminance / color difference signal separation for separating the digitized electronic image signal into a luminance signal and a color difference signal. A circuit 23, a video signal processing circuit 24 for correcting and adjusting image quality, color tone, and the like from the separated luminance signal and color difference signal;
4 is converted into an analog video signal and output to the monitor 13 using a D / A conversion circuit 25 and a luminance signal from the luminance / color difference signal separation circuit 23. Navigation circuit 26 for generating navigation information when operating insertion section 15 of 10
And a superimposing circuit 27 that superimposes the navigation information generated by the navigation circuit 26 on the digital electronic image pickup signal and displays the image information on the monitor 13 and the navigation information. [Procedure amendment 3] [Document name to be amended] Description [Item name to be amended] 0016 [Correction method] Change [Content of amendment] In other words, the analog electronic image signal picked up by the solid-state image sensor 17 is a CDS · A After being converted to a digital electronic image signal by the / D conversion circuit 22, the video signal subjected to signal processing for each luminance and color difference is converted to an analog video signal by the D / A conversion circuit 25 and displayed on the monitor 13. Is done. That is, the insertion section 15 of the endoscope 10 is inserted into the body cavity, and an image of the observation site captured by the solid-state imaging device 17 at the distal end of the insertion section 15 is displayed on the monitor 13. [Procedure amendment 4] [Document name to be amended] Description [Item name to be amended] 0019 [Correction method] Change [Content of amendment] [0019] The first frame memory 31
The luminance signal data separated from the luminance / color difference signal separation circuit 23 is written and stored as needed. When a freeze operation is performed, the writing and storage of the luminance signal after the freeze operation is stopped. It has become. [Procedure amendment 5] [Document name to be amended] Description [Item name to be amended] 0020 [Correction method] Change [Content of amendment] Navigation circuit 26 having such a configuration
Will be described with reference to FIGS. 4 to 7. Note that an example in which the insertion portion 15 of the endoscope 10 is inserted into the bronchus, the solid-state imaging device 17 at the distal end of the insertion portion 15 is driven and controlled, and a captured bronchi image is displayed on the monitor 13 to observe the bronchus is used. Will be explained. [Procedure amendment 6] [Document name to be amended] Description [Item name to be amended] 0021 [Correction method] Change [Content of amendment] As described above, the bronchus has a plurality of branches and branch directions. . The insertion section 15 of the endoscope 10 is inserted into the bronchus, and bronchial endoscope observation is performed while observing the observation site image displayed on the monitor 13 based on the video signal imaged and generated by the solid-state imaging device 17. At the time when the first bronchial branch image is displayed on the monitor 13, that is, a position where the bronchial branch can be clearly recognized on the monitor 13 (the number of bronchial branches can be clearly recognized, and the channel opening of the bronchial bifurcation can be recognized. The endoscope 10 is fixed and a freeze operation is performed in a state in which the image is clearly seen and the objective lens 16 at the end of the endoscope and the channel opening face each other as close as possible. [Procedure amendment 7] [Document name to be amended] Description [Item name to be amended] 0022 [Correction method] Change [Contents of amendment] By the freeze operation, the solid-state imaging device 17 until then has taken an image. Generated luminance / color difference signal separation circuit 2
The luminance signal separated in 3 is stored as needed in the first frame memory 31 in the navigation circuit 26 as moving image data (luminance signal), and the moving image is stored in the first frame memory 31 by the freeze operation. The data writing of the data is temporarily suspended, and the still image data of the first bronchial branch at the time of the freeze operation is stored. [Procedure amendment 8] [Document name to be amended] Description [Item name to be amended] 0026 [Correction method] Change [Contents of amendment] Inserting the endoscope 10 into one of the ducts from this first bronchial branch When the part 15 is further inserted and a new bronchial branch appears, the above-described processing is repeated again. After that, when the insertion of the endoscope is repeated and a new bronchial branch is found, or when the endoscope is moved in the extracting direction and the previously found bronchial branch is found again, the same processing as before is performed. repeat. [Procedure amendment 9] [Document name to be amended] Description [Item name to be amended] Explanation of sign [Correction method] Change [Details of amendment] [Explanation of sign] 17 ... Solid-state imaging device 20 ... Drive control circuit 21 ... Amplification circuit Reference numeral 22 CDS / A / D conversion circuit 23 Luminance / color difference signal separation circuit 24 Video signal processing circuit 25 D / A conversion circuit 26 Navigation circuit 31 First frame memory 32 Binarization processing circuit 33 2 frame memory 34 labeling processing unit 35 matching processing unit 36 data storage memory 37 character generator

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) H04N 7/18 H04N 7/18 M Fターム(参考) 2H040 BA00 CA04 CA11 CA23 DA21 DA54 GA02 GA10 GA11 4C061 AA07 AA29 CC06 DD03 JJ20 LL02 NN01 NN05 SS11 SS21 WW01 WW10 WW18 5B057 AA07 BA02 CA01 CA08 CA12 CA16 CB02 CB06 CB12 CB16 CC01 CE12 CE18 DB02 DB05 DB08 DC14 DC32 DC36 5C054 CC07 ED07 FC05 GB15 HA12──────────────────────────────────────────────────続 き Continued on the front page (51) Int.Cl. 7 Identification symbol FI theme coat ゛ (Reference) H04N 7/18 H04N 7/18 MF term (Reference) 2H040 BA00 CA04 CA11 CA23 DA21 DA54 GA02 GA10 GA11 4C061 AA07 AA29 CC06 DD03 JJ20 LL02 NN01 NN05 SS11 SS21 WW01 WW10 WW18 5B057 AA07 BA02 CA01 CA08 CA12 CA16 CB02 CB06 CB12 CB16 CC01 CE12 CE18 DB02 DB05 DB08 DC14 DC32 DC36 5C054 CC07 ED07 FC05 GB15 HA12

Claims (1)

【特許請求の範囲】 【請求項1】 分岐路を有する管路を撮像可能な撮像手
段を有する内視鏡装置において、 前記撮像手段で撮像された撮像信号を2値化処理する2
値化処理手段と、 前記2値化処理手段で処理された2値化画像信号に基づ
き、前記分岐路及び分岐数を判別する判別手段と、 前記判別手段の判別結果に基づき、前記2値化画像信号
を記憶可能な記憶手段と、 前記記憶手段に一時記憶された2値化画像信号と前記2
値化処理手段からの2値化画像信号とをマッチングして
前記判別手段で判別された前記分岐数情報に分岐順序情
報を関連付ける分岐情報処理手段と、 を具備したことを特徴とする内視鏡装置。
Claims: 1. An endoscope apparatus having an image pickup means capable of picking up an image of a pipeline having a branch path, wherein the image pickup signal picked up by the image pickup means is binarized.
Binarization processing means; discrimination means for discriminating the branch path and the number of branches based on the binarized image signal processed by the binarization processing means; and binarization based on the discrimination result of the discrimination means. A storage unit capable of storing an image signal; a binarized image signal temporarily stored in the storage unit;
A branch information processing unit that matches a binary image signal from a binarization processing unit and associates branch order information with the branch number information determined by the determination unit. apparatus.
JP2002072932A 2002-03-15 2002-03-15 Endoscope apparatus Withdrawn JP2003265409A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002072932A JP2003265409A (en) 2002-03-15 2002-03-15 Endoscope apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002072932A JP2003265409A (en) 2002-03-15 2002-03-15 Endoscope apparatus

Publications (1)

Publication Number Publication Date
JP2003265409A true JP2003265409A (en) 2003-09-24

Family

ID=29202795

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002072932A Withdrawn JP2003265409A (en) 2002-03-15 2002-03-15 Endoscope apparatus

Country Status (1)

Country Link
JP (1) JP2003265409A (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006167080A (en) * 2004-12-15 2006-06-29 Aloka Co Ltd Ultrasonic diagnostic apparatus
JP2016002206A (en) * 2014-06-16 2016-01-12 オリンパス株式会社 Medical information processing system
JP2016163609A (en) * 2015-03-06 2016-09-08 富士フイルム株式会社 Branch structure determination device, method, and program
WO2016152042A1 (en) * 2015-03-25 2016-09-29 富士フイルム株式会社 Endoscopic examination support device, method, and program
JP2017029549A (en) * 2015-08-04 2017-02-09 国立大学法人佐賀大学 Endoscope image processing device, endoscope image processing method, and endoscope image processing program
US11278357B2 (en) 2017-06-23 2022-03-22 Auris Health, Inc. Robotic systems for determining an angular degree of freedom of a medical device in luminal networks

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006167080A (en) * 2004-12-15 2006-06-29 Aloka Co Ltd Ultrasonic diagnostic apparatus
JP4563788B2 (en) * 2004-12-15 2010-10-13 アロカ株式会社 Ultrasonic diagnostic equipment
JP2016002206A (en) * 2014-06-16 2016-01-12 オリンパス株式会社 Medical information processing system
JP2016163609A (en) * 2015-03-06 2016-09-08 富士フイルム株式会社 Branch structure determination device, method, and program
WO2016143312A1 (en) * 2015-03-06 2016-09-15 富士フイルム株式会社 Branched structure determination device, method and program
WO2016152042A1 (en) * 2015-03-25 2016-09-29 富士フイルム株式会社 Endoscopic examination support device, method, and program
JP2016179121A (en) * 2015-03-25 2016-10-13 富士フイルム株式会社 Endoscope inspection support device, method and program
JP2017029549A (en) * 2015-08-04 2017-02-09 国立大学法人佐賀大学 Endoscope image processing device, endoscope image processing method, and endoscope image processing program
US11278357B2 (en) 2017-06-23 2022-03-22 Auris Health, Inc. Robotic systems for determining an angular degree of freedom of a medical device in luminal networks
US11759266B2 (en) 2017-06-23 2023-09-19 Auris Health, Inc. Robotic systems for determining a roll of a medical device in luminal networks

Similar Documents

Publication Publication Date Title
US11212465B2 (en) Endoscopy video feature enhancement platform
US8353816B2 (en) Endoscopy system and method therefor
CN106256123B (en) Processing device, imaging device, and endoscope system
JPS6281193A (en) Endoscope
US8086005B2 (en) Medical image processing apparatus and medical image processing method
JP2007319478A (en) Medical image displaying unit and method, and endoscope device
WO2006087981A1 (en) Medical image processing device, lumen image processing device, lumen image processing method, and programs for them
JP2007236700A (en) Capsule endoscope system
WO2021176664A1 (en) Inspection support system, inspection support method, and program
WO2016159726A1 (en) Device for automatically sensing lesion location from medical image and method therefor
JPWO2019130868A1 (en) Image processing equipment, processor equipment, endoscopic systems, image processing methods, and programs
JP2007020727A (en) Image processing device
JP2003265409A (en) Endoscope apparatus
US20110261189A1 (en) Inspection apparatus and defect detection method using the same
CN100387181C (en) Endoscope system and endoscope device
CN112967276B (en) Object detection method, object detection device, endoscope system, electronic device, and storage medium
JP2005021516A (en) Electronic endoscope system
JP3923601B2 (en) Endoscope system
JP4804739B2 (en) Image display device, image display method, and image display program
WO2022114357A1 (en) Image diagnosis system for lesion
KR20210047630A (en) System and method for analyzing upper gastrointestinal endoscopy image, and a recording medium having computer readable program for executing the method
JP2006000276A (en) Camera head for endoscope, camera system for endoscope and endoscope system
CN114554937A (en) Endoscope system, control program, and display method
JPH10243919A (en) Endoscope device
US20220385818A1 (en) Endoscope processor, information processing method, and computer program

Legal Events

Date Code Title Description
A300 Withdrawal of application because of no request for examination

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20050607