JP2014188223A5

JP2014188223A5 - 画像処理装置、内視鏡装置、プログラム及び画像処理装置の作動方法

Info

Publication number: JP2014188223A5
Application number: JP2013067423A
Authority: JP
Filing date: 2013-03-27
Publication date: 2016-05-12
Anticipated expiration: 2033-03-27

Description

本発明は、画像処理装置、内視鏡装置、プログラム及び画像処理装置の作動方法等に関する。

例えば、プロセッサー部３００の制御部３０２が腺管構造の標準的なサイズを記憶しており、既知特性情報取得部３４５は、そのサイズを制御部３０２から取得し、光学倍率によるサイズ調整を行う。具体的には、制御部３０２は、撮像部２００のメモリー２１２から入力されるスコープＩＤ情報に基づいて、観察部位を決定する。例えば撮像部２００が上部消化器用スコープである場合、観察部位は食道、胃、十二指腸と判定され、下部消化
器用スコープである場合、観察部位は大腸と判定される。制御部３０２には、これらの観察部位に応じた標準的な腺管サイズが、予め記録されている。なお、観察部位の決定をスコープＩＤ以外で行う手法として、例えばユーザーが操作可能なスイッチを外部Ｉ／Ｆ部５００が有し、そのスイッチによりユーザーが観察部位を選択する手法がある。

１生体表面、２ポリープ、４０正常腺管、５０異常腺管、
６０腺管消失領域、１００光源部、１０１白色光源、
１０２回転色フィルター、１０３回転駆動部、１０４集光レンズ、
２００撮像部、２０１ライトガイドファイバー、２０２照明レンズ、
２０３，２０４対物レンズ系、２０５，２０６ズームレンズ、
２０７，２０８ズームレンズ駆動部、２０９，２１０撮像素子、
２１１Ａ／Ｄ変換部、２１２メモリー、
２１３コネクター、２１４，２１５フォーカスレンズ、
２１６，２１７フォーカスレンズ駆動部、３００プロセッサー部、
３０１画像処理部、３０２制御部、３０３フォーカス制御部、
３０５画像取得部、３１０分類部、３２０画像構成部、
３３０強調処理部、３４０距離情報取得部、３４５既知特性情報取得部、
３５０表面形状算出部、３５１モルフォロジー特性設定部、
３５２クロージング処理部、３５３法線ベクトル算出部、
３６０分類処理部、３６１分類基準データ記憶部、３６２射影変換部、
３６３探索領域サイズ設定部、３６４類似度算出部、３６５領域設定部、
３６６分類基準データ生成部、３７０合焦判定部、
３７１距離情報修正部、３７２被写界深度取得部、３７３比較部、
３７４合焦判定マップ出力部、３８１フォーカスレンズ駆動モード判定部、
３８２フォーカスレンズ位置決定部、３８３制御部、４００表示部、
５００外部Ｉ／Ｆ部、５０１ズームレバー、５０２ＡＦボタン、
ＤＡ，ＤＦ１〜ＤＦ４被写界深度、Ｆ１，Ｆ２フレーム、
ＧＲ１〜ＧＲ３領域、ＬＰ１〜ＬＰ４ズームレンズ位置、
ＮＶ法線ベクトル、ＳＰ球

Claims

被写体の像を含む撮像画像を取得する画像取得部と、
撮像の際の撮像部から前記被写体までの距離に基づく距離情報を取得する距離情報取得部と、
前記距離情報と前記撮像部の被写界深度情報との比較結果に基づいて、前記撮像画像の画素又は領域において前記被写体が合焦しているか否かの判定を行う合焦判定部と、
前記被写体の構造物の分類処理を行い、前記画素又は前記領域における前記判定の結果に応じて前記分類処理の結果を修正する、又は、前記画素又は前記領域における前記判定の結果に応じて前記分類処理の対象を選択し、前記選択した対象に対して前記分類処理を行う分類部と、
前記分類処理の結果に基づいて、前記撮像画像に対して行う強調処理の種類を選択する又は前記強調処理の対象を選択する強調処理部と、
を含むことを特徴とする画像処理装置。
請求項１において、
前記分類部は、
前記判定の結果に応じて前記分類処理の結果を修正する場合において、前記被写体が非合焦であると判定された前記画素又は前記領域について、前記分類処理の結果を前記非合焦に対応する分類に修正することを特徴とする画像処理装置。
請求項２において、
前記分類部は、
前記分類処理において、前記画素又は前記領域が正常な構造物の特性に合致するか否かを判定することにより前記画素又は前記領域を正常部と非正常部に分類し、
前記判定の結果に応じて前記分類処理の結果を修正する場合において、前記被写体が非合焦であると判定された前記画素又は前記領域について、前記正常部と前記非正常部の分類結果を、前記正常部と前記非正常部の分類が不明である不明状態に修正することを特徴とする画像処理装置。
請求項１において、
前記分類部は、
前記判定の結果に応じて前記分類処理の対象を選択する場合において、前記被写体が非合焦であると判定された前記画素又は前記領域を、前記分類処理の対象から除き、
前記分類処理において、前記分類処理の対象から除いた前記画素又は前記領域を前記非合焦に対応する分類に設定することを特徴とする画像処理装置。
請求項４において、
前記分類部は、
前記判定の結果に応じて前記分類処理の対象を選択する場合において、前記被写体が非合焦であると判定された前記画素又は前記領域を、前記分類処理の対象から除き、
前記分類処理において、前記画素又は前記領域が正常な構造物の特性に合致するか否かを判定することにより前記画素又は前記領域を正常部と非正常部に分類し、前記分類処理の対象から除いた前記画素又は前記領域を、前記正常部と前記非正常部の分類が不明である不明状態に分類することを特徴とする画像処理装置。
請求項１において、
前記撮像部の前記被写界深度情報を取得する被写界深度取得部と、
前記距離情報と、前記被写界深度情報とを比較する比較部と、
を含み、
前記合焦判定部は、
前記比較部からの前記比較結果に基づいて前記合焦しているか否かの前記判定を行うことを特徴とする画像処理装置。
請求項６において、
前記合焦判定部は、
前記画素又は前記領域における前記距離情報が表す前記被写体までの距離が、前記被写界深度情報が表す被写界深度の範囲内であるとの前記比較結果が得られた場合に、前記画素又は前記領域における前記被写体が合焦していると判定することを特徴とする画像処理装置。
請求項６において、
前記撮像部が有するフォーカスレンズの位置を制御するフォーカス制御部を含み、
前記被写界深度取得部は、
前記フォーカスレンズの位置に対応する前記被写界深度情報を取得することを特徴とする画像処理装置。
請求項８において、
前記撮像部が有するズームレンズの位置を制御する制御部を含み、
前記被写界深度取得部は、
前記ズームレンズの位置及び前記フォーカスレンズの位置の組み合わせに対応する前記被写界深度情報を取得することを特徴とする画像処理装置。
請求項６において、
前記撮像部が有するズームレンズの位置を制御する制御部を含み、
前記被写界深度取得部は、
前記ズームレンズ位置に対応する前記被写界深度情報を取得することを特徴とする画像処理装置。
請求項１において、
前記撮像部のオートフォーカス動作を制御するＡＦ制御部を含み、
前記合焦判定部は、
前記オートフォーカス動作を行う複数のフレームの各フレームにおいて前記被写体が合焦しているか否かの判定を行い、
前記分類部は、
前記複数のフレームのいずれかのフレームにおいて前記被写体が合焦していると判定された前記画素又は前記領域については、当該フレームにおける分類処理の結果を最終的な分類結果として出力することを特徴とする画像処理装置。
請求項２において、
前記強調処理部は、
前記分類部により前記非合焦に対応する分類結果が出力された前記画素又は前記領域を強調することを特徴とする画像処理装置。
請求項１２において、
前記分類部は、
前記分類処理において、前記画素又は前記領域が正常な構造物の特性に合致するか否かを判定することにより前記画素又は前記領域を正常部と非正常部に分類し、
前記判定の結果に応じて前記分類処理の結果を修正する場合において、前記非合焦に対応する分類結果として、前記正常部と前記非正常部の分類が不明である不明状態に修正し、
前記強調処理部は、
前記分類部により前記不明状態に分類された前記画素又は前記領域を強調することを特徴とする画像処理装置。
請求項１において、
前記分類部は、
前記分類処理において、前記画素又は前記領域が正常な構造物の特性に合致するか否かを判定することにより前記画素又は前記領域を正常部と非正常部に分類し、
前記強調処理部は、
前記分類部により前記非正常部に分類された前記画素又は前記領域を強調することを特徴とする画像処理装置。
請求項１において、
前記被写体の構造に関する既知の特性を表す情報である既知特性情報を取得する既知特性情報取得部を含み、
前記分類部は、
前記距離情報と前記既知特性情報に基づいて前記被写体の構造物の分類処理を行うことを特徴とする画像処理装置。
請求項１５において、
前記被写体の構造に関する既知の特性を表す情報である既知特性情報を取得する既知特性情報取得部を含み、
前記分類部は、
前記距離情報と前記既知特性情報に基づいて、前記被写体の表面形状情報を求める表面形状算出部と、
前記表面形状情報に基づいて分類基準を生成し、生成した前記分類基準を用いた前記分類処理を行う分類処理部と、
を含むことを特徴とする画像処理装置。
請求項１６において、
前記既知特性情報取得部は、
所与の状態における前記被写体の前記構造物に対応する基準パターンを、前記既知特性情報として取得し、
前記分類処理部は、
前記基準パターンに対して前記表面形状情報に基づく変形処理を行うことで取得される修正パターンを、前記分類基準として生成し、生成した前記分類基準を用いて前記分類処理を行うことを特徴とする画像処理装置。
請求項１乃至１７のいずれかに記載の画像処理装置を含むことを特徴とする内視鏡装置。
被写体の像を含む撮像画像を取得し、
撮像の際の撮像部から前記被写体までの距離に基づく距離情報を取得し、
前記距離情報と前記撮像部の被写界深度情報との比較結果に基づいて、前記撮像画像の画素又は領域において前記被写体が合焦しているか否かの判定を行い、
前記被写体の構造物の分類処理を行い、前記画素又は前記領域における前記判定の結果に応じて前記分類処理の結果を修正する、又は、前記画素又は前記領域における前記判定の結果に応じて前記分類処理の対象を選択し、前記選択した対象に対して前記分類処理を行い、
前記分類処理の結果に基づいて、前記撮像画像に対して行う強調処理の種類を選択する又は前記強調処理の対象を選択する、
ステップをコンピューターに実行させるプログラム。
被写体の像を含む撮像画像を取得し、
撮像の際の撮像部から前記被写体までの距離に基づく距離情報を取得し、
前記距離情報に基づいて、前記撮像画像の画素又は領域において前記被写体が合焦しているか否かの判定を行い、
前記被写体の構造物の分類処理を行い、前記画素又は前記領域における前記判定の結果に応じて前記分類処理の結果を修正する、又は、前記画素又は前記領域における前記判定の結果に応じて前記分類処理の対象を選択し、前記選択した対象に対して前記分類処理を行い、
前記分類処理の結果に基づいて、前記撮像画像に対して行う強調処理の種類を選択する又は前記強調処理の対象を選択する、
ことを特徴とする画像処理装置の作動方法。