JP2015096237A - 画像処理装置、内視鏡装置及び画像処理装置の作動方法 - Google Patents
画像処理装置、内視鏡装置及び画像処理装置の作動方法 Download PDFInfo
- Publication number
- JP2015096237A JP2015096237A JP2015016496A JP2015016496A JP2015096237A JP 2015096237 A JP2015096237 A JP 2015096237A JP 2015016496 A JP2015016496 A JP 2015016496A JP 2015016496 A JP2015016496 A JP 2015016496A JP 2015096237 A JP2015096237 A JP 2015096237A
- Authority
- JP
- Japan
- Prior art keywords
- image
- correction
- unit
- extraction
- degree
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Studio Devices (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Endoscopes (AREA)
Abstract
Description
1.1 内視鏡装置の構成例
図1は、本実施形態にかかる画像処理装置を含む内視鏡装置の構成例である。内視鏡装置は、照明部12と、撮像部13と、処理部11と、を含む。なお、構成はこれに限定されず、これらの構成要素の一部を省略するなどの種々の変形実施が可能である。
次に、処理の流れについて説明する。まず、白色光光源S02から白色光が発光される。図3に示すように、回転フィルタS03には白色光透過フィルタS16と狭帯域透過フィルタS17がセットされている。白色光透過フィルタS16は例えば、図4のような分光特性であり、狭帯域透過フィルタS17は例えば、図5のような分光特性である。
以上の処理により、ブレ補正が行われた動画像をユーザに提示することが可能になるが、本実施形態においては、抽出部170による抽出処理(具体的には位置ずれの補正度合いの強弱の決定)を、状況検出部160からの操作状況情報により制御する点が特徴となる。抽出部170は、状況検出部160の停止近接検出部161、注目領域検出部162、部位検出部163、観察状態検出部164、倍率取得部165、操作量情報取得部166、送気送水検出部167の少なくとも1つからの情報を受け取り、位置ずれの補正度合いの強弱を制御する。
近づいているか、遠ざかっているか、或いは停止しているかの判断は、停止近接検出部161で行われ、具体的な手法としては例えば、画像に基づくマッチング処理等が考えられる。つまり、撮像画像内の被検体のエッジ形状等をエッジ抽出等で認識し、認識したエッジ形状の大きさが時間的に後のフレームの画像において、大きくなっているか小さくなっているかを判定することで、近づいているか否かの判定を行う。なお、近づいているか否かを判定する手法は画像処理に限定されるものではなく、例えば、赤外線アクティブセンサ等の測距センサを用いて被写体との距離の変化を見る手法等、種々の手法が考えられる。
注目領域検出部162は、公知の領域検出、例えば病変検出のような処理を行うことで注目領域に関する情報である注目領域情報を検出する。画像の中に注目領域(病変領域)を検出したときには当該注目領域をじっくりと観察したい場合が多いので、抽出部170は位置ずれの補正度合いを強くする制御を行う。一方、病変等が検出されていないときにはじっくりと観察する必要がない場合が多いので、位置ずれの補正を弱くする(例えばオフにする)制御を行う。
部位検出部163により、スコープが位置する部位を判定し、補正度合いを決定してもよい。スコープが生体内のどの部位(例えば、十二指腸、結腸等)にあるかの判定には、例えばテンプレートマッチングなどの既知の認識アルゴリズム等を用いる。また、既知のシーン変化認識アルゴリズムを用いて基準画像の画素の特徴量変化に基づいて、どの器官か判定することも可能である。
近年の内視鏡装置では、通常観察の他に、高倍率(例えば100倍以上)での観察である拡大観察を行うことができるものがある。拡大観察モードにおいては、高倍率での観察を行っているため、基準画像から抽出領域が外れてしまう可能性が非常に高くなる。そのため、拡大観察モードにおいては、位置ずれの補正度合いを弱くする処理を行う。
倍率取得部165は、撮像部13における撮像倍率を倍率情報として取得する。そして、倍率情報により表される撮像倍率が所与の閾値より小さい場合には、ユーザは拡大観察を用いて被写体を詳細に観察しようとしていると判断できるため、図6に示したように、抽出部170は、倍率が大きくなるほど、位置ずれの補正度合いの強度を強くする制御を行う。しかし、倍率情報により表される撮像倍率が所与の閾値より大きい場合には、ユーザは所定の部分を詳細に観察しようとしていると判断できるものの、高倍率のためブレの影響が大きく、基準画像から抽出領域が外れてしまう可能性が高まる。そのため、図6に示したように、倍率が大きくなるほど、位置ずれの補正度合いの強度を弱くする制御を行う。
操作部130は、ユーザの操作による情報である操作量情報を取得し、抽出部170へ送信する。そして、抽出部170ではそのユーザの操作による情報に応じて位置ずれの補正度合いが決定される。
送気送水検出部167は、内視鏡装置による送気処理、送水処理を検出する。具体的には送気量や送水量を検出する。送気とは空気を送ることで、例えば管状の部位を広げたりすることに用いられる。また、送水とは水を流すことで、例えば観察位置にある残渣を洗い流したりすることに用いられる。
まず、公知の技術である通常の電子式位置ずれ補正について図8を用いて説明する。図8の縦軸が時間軸であり、左側の画像が画像取得部120で取得されバッファ140に保持される画像(基準画像)である。また、右側の基準画像に比べて小さい領域を切り出した後の画像がユーザに対して提示される画像(抽出画像)である。そして、画像中の線で囲まれた領域が注目領域であるとする。
次に、実際の診断・観察処理を想定した、具体的な実施形態例について説明する。
まず、肛門から挿入し、大腸等を観察するために用いられる下部内視鏡の実施形態例について説明する。なお本例においては、下部内視鏡は、最初に挿入しきってしまい、引き抜きながら観察していくものとする。
次に口や鼻から挿入され、食道や胃等を観察するために用いられる上部内視鏡について説明する。
150 設定部、160 状況検出部、161 停止近接検出部、
162 注目領域検出部、163 部位検出部、164 観察状態検出部、
165 倍率取得部、166 操作量情報取得部、167 送気送水検出部、
170 抽出部、180 表示制御部、
S01 光源装置、S02 白色光源、S03 回転フィルタ、S04 集光レンズ、
S05 外装、S06 ライトガイドファイバ、S07 照明光学系、
S08 集光レンズ、S09 撮像素子、S11 挿入口、S12 誘導管、
S13 ズームレンズ、S14 送水タンク、S15 送水管
S16 白色光透過フィルタ、S17 狭帯域透過フィルタ
Claims (7)
- 内視鏡装置の撮像部による連続的な撮像処理によって、被検体像を含む画像である基準画像を連続的に取得する画像取得部と、
前記内視鏡装置の操作状況を検出し、その検出結果を示す操作状況情報を取得する状況検出部と、
連続的に取得された前記基準画像から、前記被検体像を含む領域を抽出領域として抽出し、抽出画像を取得する抽出部と、
を含み、
前記抽出部は、
前記状況検出部において取得された前記操作状況情報に基づいて、前記被検体像の位置ずれの補正度合いの強弱を決定し、決定した補正度合いの強弱に対応した抽出態様に従って、前記基準画像から前記抽出画像を抽出し、
前記状況検出部は、
前記操作状況情報として、前記撮像部が拡大観察状態か否かの情報を取得し、
前記抽出部は、
前記撮像部が拡大観察状態か否かの情報により、前記内視鏡装置の前記撮像部が拡大観察状態であると判断された場合には、前記内視鏡装置の前記撮像部が拡大観察状態でないと判断された場合に比べて前記補正度合いを弱くすることを特徴とする画像処理装置。 - 内視鏡装置の撮像部による連続的な撮像処理によって、被検体像を含む画像である基準画像を連続的に取得する画像取得部と、
前記内視鏡装置の操作状況を検出し、その検出結果を示す操作状況情報を取得する状況検出部と、
連続的に取得された前記基準画像から、前記被検体像を含む領域を抽出領域として抽出し、抽出画像を取得する抽出部と、
を含み、
前記抽出部は、
前記状況検出部において取得された前記操作状況情報に基づいて、前記被検体像の位置ずれの補正度合いの強弱を決定し、決定した補正度合いの強弱に対応した抽出態様に従って、前記基準画像から前記抽出画像を抽出し、
前記状況検出部は、
前記操作状況情報として、拡大観察中の前記内視鏡装置の前記撮像部のズーム倍率に関する情報を取得し、
前記抽出部は、
前記ズーム倍率が所与の閾値よりも小さい場合には、前記補正度合いを、基準補正度合いよりも弱くしながら、前記ズーム倍率が大きくなるほど強くすることを特徴とする画像処理装置。 - 内視鏡装置の撮像部による連続的な撮像処理によって、被検体像を含む画像である基準画像を連続的に取得する画像取得部と、
前記内視鏡装置の操作状況を検出し、その検出結果を示す操作状況情報を取得する状況検出部と、
連続的に取得された前記基準画像から、前記被検体像を含む領域を抽出領域として抽出し、抽出画像を取得する抽出部と、
を含み、
前記抽出部は、
前記状況検出部において取得された前記操作状況情報に基づいて、前記被検体像の位置ずれの補正度合いの強弱を決定し、決定した補正度合いの強弱に対応した抽出態様に従って、前記基準画像から前記抽出画像を抽出し、
前記状況検出部は、
前記操作状況情報として、拡大観察中の前記内視鏡装置の前記撮像部のズーム倍率に関する情報を取得し、
前記抽出部は、
前記ズーム倍率が所与の閾値よりも大きい場合には、前記補正度合いを、基準補正度合いよりも弱くしながら、前記ズーム倍率が大きくなるほど弱くすることを特徴とする画像処理装置。 - 請求項1乃至3のいずれかに記載の画像処理装置と、
内視鏡スコープと、
を含むことを特徴とする内視鏡装置。 - 画像取得部と、状況検出部と、抽出部とを有する画像処理装置の作動方法であって、
前記画像取得部が、内視鏡装置の撮像部による連続的な撮像処理によって、被検体像を含む画像である基準画像を連続的に取得し、
前記状況検出部が、前記内視鏡装置の操作状況を検出し、その検出結果を示す操作状況情報を取得し、
前記抽出部が、連続的に取得された前記基準画像から、前記被検体像を含む領域を抽出領域として抽出し、抽出画像を取得する際に、前記状況検出部において取得された前記操作状況情報に基づいて、前記被検体像の位置ずれの補正度合いの強弱を決定し、決定した補正度合いの強弱に対応した抽出態様に従って、前記基準画像から前記抽出画像を抽出し、
前記操作状況情報の取得において、前記状況検出部は、前記操作状況情報として、前記撮像部が拡大観察状態か否かの情報を取得し、
前記補正度合いの強弱の決定において、前記抽出部は、前記撮像部が拡大観察状態か否かの情報により、前記内視鏡装置の前記撮像部が拡大観察状態であると判断された場合には、前記補正度合いを弱くすることを特徴とする画像処理装置の作動方法。 - 画像取得部と、状況検出部と、抽出部とを有する画像処理装置の作動方法であって、
前記画像取得部が、内視鏡装置の撮像部による連続的な撮像処理によって、被検体像を含む画像である基準画像を連続的に取得し、
前記状況検出部が、前記内視鏡装置の操作状況を検出し、その検出結果を示す操作状況情報を取得し、
前記抽出部が、連続的に取得された前記基準画像から、前記被検体像を含む領域を抽出領域として抽出し、抽出画像を取得する際に、前記状況検出部において取得された前記操作状況情報に基づいて、前記被検体像の位置ずれの補正度合いの強弱を決定し、決定した補正度合いの強弱に対応した抽出態様に従って、前記基準画像から前記抽出画像を抽出し、
前記操作状況情報の取得において、前記状況検出部は、前記操作状況情報として、拡大観察中の前記内視鏡装置の前記撮像部のズーム倍率に関する情報を取得し、
前記補正度合いの強弱の決定において、前記抽出部は、前記ズーム倍率が所与の閾値よりも小さい場合には、前記補正度合いを、基準補正度合いよりも弱くしながら、前記ズーム倍率が大きくなるほど強くすることを特徴とする画像処理装置の作動方法。 - 画像取得部と、状況検出部と、抽出部とを有する画像処理装置の作動方法であって、
前記画像取得部が、内視鏡装置の撮像部による連続的な撮像処理によって、被検体像を含む画像である基準画像を連続的に取得し、
前記状況検出部が、前記内視鏡装置の操作状況を検出し、その検出結果を示す操作状況情報を取得し、
前記抽出部が、連続的に取得された前記基準画像から、前記被検体像を含む領域を抽出領域として抽出し、抽出画像を取得する際に、前記状況検出部において取得された前記操作状況情報に基づいて、前記被検体像の位置ずれの補正度合いの強弱を決定し、決定した補正度合いの強弱に対応した抽出態様に従って、前記基準画像から前記抽出画像を抽出し、
前記操作状況情報の取得において、前記状況検出部は、前記操作状況情報として、拡大観察中の前記内視鏡装置の前記撮像部のズーム倍率に関する情報を取得し、
前記補正度合いの強弱の決定において、前記抽出部は、前記ズーム倍率が所与の閾値よりも大きい場合には、前記補正度合いを、基準補正度合いよりも弱くしながら、前記ズーム倍率が大きくなるほど弱くすることを特徴とする画像処理装置の作動方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015016496A JP5905130B2 (ja) | 2015-01-30 | 2015-01-30 | 画像処理装置、内視鏡装置及び画像処理装置の作動方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015016496A JP5905130B2 (ja) | 2015-01-30 | 2015-01-30 | 画像処理装置、内視鏡装置及び画像処理装置の作動方法 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010232931A Division JP5715372B2 (ja) | 2010-10-15 | 2010-10-15 | 画像処理装置、画像処理装置の作動方法及び内視鏡装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015096237A true JP2015096237A (ja) | 2015-05-21 |
JP5905130B2 JP5905130B2 (ja) | 2016-04-20 |
Family
ID=53373826
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015016496A Active JP5905130B2 (ja) | 2015-01-30 | 2015-01-30 | 画像処理装置、内視鏡装置及び画像処理装置の作動方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5905130B2 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018168261A1 (ja) * | 2017-03-16 | 2018-09-20 | ソニー株式会社 | 制御装置、制御方法、及びプログラム |
WO2018211709A1 (ja) * | 2017-05-19 | 2018-11-22 | オリンパス株式会社 | ブレ補正装置、内視鏡装置及びブレ補正方法 |
WO2020036224A1 (ja) | 2018-08-17 | 2020-02-20 | 富士フイルム株式会社 | 内視鏡システム |
US11341637B2 (en) * | 2017-05-26 | 2022-05-24 | Olympus Corporation | Endoscope image processing device and endoscope image processing method |
CN117221177A (zh) * | 2023-11-08 | 2023-12-12 | 湖南省华芯医疗器械有限公司 | 图像传输延迟监测方法及系统 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0549599A (ja) * | 1991-08-23 | 1993-03-02 | Olympus Optical Co Ltd | 電子内視鏡装置 |
JPH114379A (ja) * | 1997-06-12 | 1999-01-06 | Matsushita Electric Ind Co Ltd | 画像信号処理装置 |
JP2000270256A (ja) * | 1999-03-19 | 2000-09-29 | Fuji Photo Optical Co Ltd | 変倍機能を有する電子内視鏡装置 |
JP2001046331A (ja) * | 1999-08-06 | 2001-02-20 | Asahi Optical Co Ltd | 内視鏡装置 |
JP2001285698A (ja) * | 2000-03-29 | 2001-10-12 | Minolta Co Ltd | 電子カメラ |
JP2002112957A (ja) * | 2000-10-12 | 2002-04-16 | Olympus Optical Co Ltd | 電子内視鏡システム |
JP2012055498A (ja) * | 2010-09-09 | 2012-03-22 | Olympus Corp | 画像処理装置、内視鏡装置、画像処理プログラム及び画像処理方法 |
-
2015
- 2015-01-30 JP JP2015016496A patent/JP5905130B2/ja active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0549599A (ja) * | 1991-08-23 | 1993-03-02 | Olympus Optical Co Ltd | 電子内視鏡装置 |
JPH114379A (ja) * | 1997-06-12 | 1999-01-06 | Matsushita Electric Ind Co Ltd | 画像信号処理装置 |
JP2000270256A (ja) * | 1999-03-19 | 2000-09-29 | Fuji Photo Optical Co Ltd | 変倍機能を有する電子内視鏡装置 |
JP2001046331A (ja) * | 1999-08-06 | 2001-02-20 | Asahi Optical Co Ltd | 内視鏡装置 |
JP2001285698A (ja) * | 2000-03-29 | 2001-10-12 | Minolta Co Ltd | 電子カメラ |
JP2002112957A (ja) * | 2000-10-12 | 2002-04-16 | Olympus Optical Co Ltd | 電子内視鏡システム |
JP2012055498A (ja) * | 2010-09-09 | 2012-03-22 | Olympus Corp | 画像処理装置、内視鏡装置、画像処理プログラム及び画像処理方法 |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018168261A1 (ja) * | 2017-03-16 | 2018-09-20 | ソニー株式会社 | 制御装置、制御方法、及びプログラム |
US10904437B2 (en) | 2017-03-16 | 2021-01-26 | Sony Corporation | Control apparatus and control method |
WO2018211709A1 (ja) * | 2017-05-19 | 2018-11-22 | オリンパス株式会社 | ブレ補正装置、内視鏡装置及びブレ補正方法 |
US11196926B2 (en) | 2017-05-19 | 2021-12-07 | Olympus Corporation | Blur correction device, endoscope apparatus, and blur correction method |
US11341637B2 (en) * | 2017-05-26 | 2022-05-24 | Olympus Corporation | Endoscope image processing device and endoscope image processing method |
WO2020036224A1 (ja) | 2018-08-17 | 2020-02-20 | 富士フイルム株式会社 | 内視鏡システム |
JPWO2020036224A1 (ja) * | 2018-08-17 | 2021-08-26 | 富士フイルム株式会社 | 内視鏡システム |
CN117221177A (zh) * | 2023-11-08 | 2023-12-12 | 湖南省华芯医疗器械有限公司 | 图像传输延迟监测方法及系统 |
CN117221177B (zh) * | 2023-11-08 | 2024-01-09 | 湖南省华芯医疗器械有限公司 | 图像传输延迟监测方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
JP5905130B2 (ja) | 2016-04-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5715372B2 (ja) | 画像処理装置、画像処理装置の作動方法及び内視鏡装置 | |
JP5905130B2 (ja) | 画像処理装置、内視鏡装置及び画像処理装置の作動方法 | |
JP5855358B2 (ja) | 内視鏡装置及び内視鏡装置の作動方法 | |
JP5865606B2 (ja) | 内視鏡装置及び内視鏡装置の作動方法 | |
US11004197B2 (en) | Medical image processing apparatus, medical image processing method, and program | |
JP5993515B2 (ja) | 内視鏡システム | |
JP6132901B2 (ja) | 内視鏡装置 | |
WO2011070845A1 (ja) | 頭部装着型表示装置および頭部装着型表示システム | |
JP6774552B2 (ja) | プロセッサ装置、内視鏡システム及びプロセッサ装置の作動方法 | |
JPWO2018168261A1 (ja) | 制御装置、制御方法、及びプログラム | |
US20150363942A1 (en) | Image processing device, endoscope apparatus, image processing method, and information storage device | |
JP6688243B2 (ja) | 内視鏡システム及びその作動方法 | |
US20220400931A1 (en) | Endoscope system, method of scanning lumen using endoscope system, and endoscope | |
EP2962622A1 (en) | Image processing device, endoscope device, image processing method, and image processing program | |
CN113573624A (zh) | 内窥镜系统、非暂时性计算机可读介质及方法 | |
JP2004167010A (ja) | 内視鏡挿入方向検出装置 | |
JP5945614B2 (ja) | 画像処理装置、内視鏡装置及び画像処理装置の作動方法 | |
JP2013043007A (ja) | 焦点位置制御装置、内視鏡装置及び焦点位置制御方法 | |
WO2020008920A1 (ja) | 医療用観察システム、医療用観察装置、及び医療用観察装置の駆動方法 | |
WO2020009127A1 (ja) | 医療用観察システム、医療用観察装置、及び医療用観察装置の駆動方法 | |
EP3605179A1 (en) | Image capturing device, focus control method and focus determination method | |
JP6168878B2 (ja) | 画像処理装置、内視鏡装置及び画像処理方法 | |
JP7480779B2 (ja) | 医療用画像処理装置、医療用画像処理装置の駆動方法、医療用撮像システム、及び医療用信号取得システム | |
KR101630364B1 (ko) | 내시경을 이용한 의료 영상 시스템 및 이의 제어 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151127 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151208 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160202 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160308 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160315 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |