JPWO2018159347A1 - プロセッサ装置、内視鏡システム及びプロセッサ装置の作動方法 - Google Patents
プロセッサ装置、内視鏡システム及びプロセッサ装置の作動方法 Download PDFInfo
- Publication number
- JPWO2018159347A1 JPWO2018159347A1 JP2019502883A JP2019502883A JPWO2018159347A1 JP WO2018159347 A1 JPWO2018159347 A1 JP WO2018159347A1 JP 2019502883 A JP2019502883 A JP 2019502883A JP 2019502883 A JP2019502883 A JP 2019502883A JP WO2018159347 A1 JPWO2018159347 A1 JP WO2018159347A1
- Authority
- JP
- Japan
- Prior art keywords
- image
- inspection
- unit
- similarity
- reference image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/045—Control thereof
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/273—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the upper alimentary canal, e.g. oesophagoscopes, gastroscopes
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Biomedical Technology (AREA)
- Medical Informatics (AREA)
- Optics & Photonics (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Biophysics (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Heart & Thoracic Surgery (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Gastroenterology & Hepatology (AREA)
- Endoscopes (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Image Analysis (AREA)
Abstract
Description
・咽頭から十二指腸までで40コマ程度の撮影数が必要
・観察の順序(ルート)を一定にする
・観察していないところ(盲点)がないこと(噴門部全周、大部・前提部の後壁・小弯部)
・胃の膨らませ方が十分であること(定圧送気)
・適切な明るさで撮影されていること
・粘膜が除去されていること
・ランドマークを含めたシーンがされていること
図1に示すように、内視鏡システム10は、内視鏡12と、光源装置14と、プロセッサ装置16と、モニタ18(表示部)と、ユーザーインターフェース19とを有する。内視鏡12は、光源装置14と光学的に接続し、かつ、プロセッサ装置16と電気的に接続する。内視鏡12は、被検体内に挿入する挿入部12aと、挿入部12aの基端部分に設けた操作部12bと、挿入部12aの先端側に設けた湾曲部12c及び先端部12dを有している。操作部12bのアングルノブ13aを操作することにより、湾曲部12cが湾曲動作する。この湾曲動作によって、先端部12dが所望の方向に向けられる。
第1実施形態では、検査支援画像において、検査画像とともに基準画像との類似度を表示するようにしているが、第2実施形態では、図18に示すように、基準画像との類似度の表示に代えて、基準画像(例えば、幽門部の基準画像)を表示するようにしてもよい。この場合には、ユーザーは、検査画像が、基準画像と同じ構図になるように、内視鏡12を操作し、同じ構造となったときに、静止画取得指示部13bを操作して検査画像の静止画の取得を行う。更には、図19に示すように、検査支援画像では、検査画像と基準画像の他、スコープ操作情報84とスコープ位置情報86も合わせて表示するようにしてもよい。この場合には、ユーザーは、スコープ操作情報を見ながら、内視鏡12を操作し、基準画像の構造に合わせることになる。
第1及び第2実施形態では、ユーザーによる仮撮影で検査画像の静止画を取得したときに、基準画像との類似度又は基準画像を表示し、それら類似度や基準画像を確認してから、本撮影を行って検査画像の静止画を保存用画像記憶部に記憶するようにしているが、これに代えて、第3実施形態では、検査画像の動画表示中に、検査画像の取得タイミングに得られる検査時撮影条件が、基準画像を得るための基準撮影条件を満たしたときに、自動的に仮撮影を行って検査画像の静止画を取得する。
第3実施形態では、検査時撮影条件が基準撮影条件を満たしたときに、検査画像の静止画を自動的に取得するようにしているが、第4実施形態では、検査時撮影条件が基準撮影条件を満たしたときに、検査画像の静止画の取得タイミングであることを報知、即ち、シャッタータイミングであることを報知することにより、ユーザーによる検査画像の静止画の取得(撮影)を支援する。
12 内視鏡
12a 挿入部
12b 操作部
12c 湾曲部
12d 先端部
13a アングルノブ
13b 静止画取得指示部
13c モード切替部
13d ズーム操作部
14 光源装置
16 プロセッサ装置
18 モニタ
19 ユーザーインターフェース
20 光源部
22 光源制御部
24 ライトガイド
30a 照明光学系
30b 撮像光学系
32 撮像センサ
42 検出センサ
50 画像信号取得部
52 画像処理部
54 表示制御部
55 静止画記憶制御部
56 保存用画像記憶部
57 スコープ位置情報算出部
58 スコープ操作情報算出部
60 通常光モード用処理部
62 特殊光モード用処理部
64 検査支援モード用処理部
70 検査支援モード用画像処理部
72 ボケブレ判定部
73 欠陥領域除去部
74 基準画像選択部
74a 基準画像記憶部
76 類似度算出部
78 検査支援画像生成部
80 警告表示
82 操作支援情報
84 スコープ操作情報
86 スコープ位置情報
90 検査対象マップ
100 自動撮影モード用処理部
102 自動撮影モード用画像処理部
104 検査時撮影条件取得部
106 撮影条件取得部
108 基準撮影条件記憶部
108 静止画保存要求信号出力部
120 確認メッセージ
122 保存完了メッセージ
200 撮影アシストモード用処理部
202 撮影アシストモード用画像処理部
204 静止画取得タイミング報知部
210 シャッタータイミングの報知
Claims (15)
- 検査領域毎に予め定められた複数の基準画像を記憶する基準画像記憶部と、
前記基準画像に相当する基準相当画像を得るために前記検査領域を撮像して検査画像を取得する画像取得部と、
前記基準画像記憶部から、前記検査画像に対応する基準画像を選択する基準画像選択部と、
前記基準画像選択部で選択された基準画像の画像データと前記検査画像の画像データから、前記基準画像選択部で選択された基準画像と前記検査画像との類似度を算出する類似度算出部とを備えるプロセッサ装置。 - 前記類似度算出部は、前記基準画像の画像データに含まれるノイズ、構造又はランドマークと前記検査画像の画像データに含まれるノイズ、構造又はランドマークとの比較により前記類似度を算出する請求項1記載のプロセッサ装置。
- 前記基準画像に内視鏡の挿入部が含まれる場合は、前記検査画像に前記挿入部が含まれている場合に前記類似度を高くする請求項1または2記載のプロセッサ装置。
- 前記類似度算出部は、前記基準画像の複数の特徴量と前記検査画像の複数の特徴量を算出し、算出した基準画像の特徴量と検査画像の特徴量についてそれぞれ特徴量類似度を算出し、それら特徴量類似度を組み合せた総合類似度を前記類似度とする請求項1ないし3いずれか1項記載のプロセッサ装置。
- 前記類似度算出部は、前記基準画像選択部で選択された基準画像の画像データと前記検査画像の画像データに加えて、内視鏡の操作に関するスコープ操作情報から、前記類似度を算出する請求項1ないし4いずれか1項記載のプロセッサ装置。
- 前記スコープ操作情報には、内視鏡のアングル角度又は回転量、観察対象との距離、前記内視鏡の挿入部の挿入長、前記内視鏡の挿入部の形状が少なくとも1つが含まれる請求項5記載のプロセッサ装置。
- 前記類似度が特定の条件を満さない場合に、表示部に対して警告表示させる表示制御部を備える請求項1ないし6いずれか1項記載のプロセッサ装置。
- 前記類似度が特定の条件を満さない場合に、前記類似度が前記特定の条件を満たすための内視鏡の操作に関する操作支援情報を表示させる表示制御部を備える請求項1ないし7いずれか1項記載のプロセッサ装置。
- 前記特定の条件は、前記類似度が一定値以上である請求項7または8記載のプロセッサ装置。
- 前記基準画像はRAWデータ形式で前記基準画像記憶部に記憶されており、
前記類似度算出部は、前記検査画像に施された特定の画像処理を、前記RAWデータ形式の基準画像に施してから、前記類似度を算出する請求項1ないし9いずれか1項記載のプロセッサ装置。 - 前記検査画像から欠陥領域を除去する欠陥領域除去部を有し、
前記類似度算出部は、前記欠陥領域が除去された検査画像と前記基準画像との類似度を算出する請求項1ないし10いずれか1項記載のプロセッサ装置。 - 特定の検査領域における検査画像を保存用画像記憶部に記憶した場合には、前記特定の検査領域における検査画像が保存済みであることを、検査対象マップ上に表示する表示制御部を備える請求項1ないし11いずれか1項記載のプロセッサ装置。
- 前記検査画像は、静止画取得指示部が操作された場合に得られる画像である請求項1ないし12いずれか1項記載のプロセッサ装置。
- 請求項1ないし13いずれか1項記載のプロセッサ装置と、
前記類似度を表示する表示部を備える内視鏡システム。 - 画像取得部は、検査領域毎に予め定められた基準画像に相当する基準相当画像を得るために前記検査領域を撮像して検査画像を取得するステップと、
基準画像選択部が、前記基準画像を記憶する基準画像記憶部から、前記検査画像に対応する基準画像を選択するステップと、
類似度算出部が、前記基準画像選択部で選択された基準画像の画像データと前記検査画像の画像データから、前記基準画像選択部で選択された基準画像と前記検査画像との類似度を算出するステップとを有するプロセッサ装置の作動方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017035842 | 2017-02-28 | ||
JP2017035842 | 2017-02-28 | ||
PCT/JP2018/005654 WO2018159347A1 (ja) | 2017-02-28 | 2018-02-19 | プロセッサ装置、内視鏡システム及びプロセッサ装置の作動方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2018159347A1 true JPWO2018159347A1 (ja) | 2019-12-19 |
JP6774552B2 JP6774552B2 (ja) | 2020-10-28 |
Family
ID=63369966
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019502883A Active JP6774552B2 (ja) | 2017-02-28 | 2018-02-19 | プロセッサ装置、内視鏡システム及びプロセッサ装置の作動方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6774552B2 (ja) |
WO (1) | WO2018159347A1 (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020194472A1 (ja) * | 2019-03-25 | 2020-10-01 | オリンパス株式会社 | 移動支援システム、移動支援方法、および移動支援プログラム |
WO2021161369A1 (ja) * | 2020-02-10 | 2021-08-19 | オリンパス株式会社 | 内視鏡装置、情報処理方法及びプログラム |
CN115666361A (zh) * | 2020-05-28 | 2023-01-31 | 富士胶片株式会社 | 内窥镜处理器装置 |
CN116134363A (zh) * | 2020-07-21 | 2023-05-16 | 富士胶片株式会社 | 内窥镜系统及其工作方法 |
CN116471973A (zh) * | 2020-10-21 | 2023-07-21 | 日本电气株式会社 | 内窥镜操作支持装置、控制方法、计算机可读介质和程序 |
CN116322462A (zh) * | 2020-10-21 | 2023-06-23 | 日本电气株式会社 | 内窥镜操作辅助装置、控制方法、计算机可读介质和程序 |
CN118119329A (zh) * | 2021-11-24 | 2024-05-31 | 奥林巴斯株式会社 | 内窥镜插入引导装置、内窥镜插入引导方法、内窥镜信息取得方法、引导服务器装置及图像推导模型学习方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004016268A (ja) * | 2002-06-12 | 2004-01-22 | Toshiba Corp | 超音波診断装置、超音波プローブ、及び超音波診断におけるナビゲーション情報提供方法 |
JP2008259622A (ja) * | 2007-04-11 | 2008-10-30 | Fujifilm Corp | レポート作成支援装置およびそのプログラム |
JP2010142375A (ja) * | 2008-12-17 | 2010-07-01 | Olympus Corp | 画像処理装置、画像処理プログラムおよび画像処理方法 |
WO2014002565A1 (ja) * | 2012-06-26 | 2014-01-03 | ソニー株式会社 | 撮像制御装置、記憶システムおよび記憶媒体 |
JP2015112429A (ja) * | 2013-12-13 | 2015-06-22 | オリンパスメディカルシステムズ株式会社 | 画像処理装置 |
-
2018
- 2018-02-19 JP JP2019502883A patent/JP6774552B2/ja active Active
- 2018-02-19 WO PCT/JP2018/005654 patent/WO2018159347A1/ja active Application Filing
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004016268A (ja) * | 2002-06-12 | 2004-01-22 | Toshiba Corp | 超音波診断装置、超音波プローブ、及び超音波診断におけるナビゲーション情報提供方法 |
JP2008259622A (ja) * | 2007-04-11 | 2008-10-30 | Fujifilm Corp | レポート作成支援装置およびそのプログラム |
JP2010142375A (ja) * | 2008-12-17 | 2010-07-01 | Olympus Corp | 画像処理装置、画像処理プログラムおよび画像処理方法 |
WO2014002565A1 (ja) * | 2012-06-26 | 2014-01-03 | ソニー株式会社 | 撮像制御装置、記憶システムおよび記憶媒体 |
JP2015112429A (ja) * | 2013-12-13 | 2015-06-22 | オリンパスメディカルシステムズ株式会社 | 画像処理装置 |
Also Published As
Publication number | Publication date |
---|---|
WO2018159347A1 (ja) | 2018-09-07 |
JP6774552B2 (ja) | 2020-10-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6774552B2 (ja) | プロセッサ装置、内視鏡システム及びプロセッサ装置の作動方法 | |
EP3366191B1 (en) | Endoscope system | |
JP6688243B2 (ja) | 内視鏡システム及びその作動方法 | |
JP2018139848A (ja) | 内視鏡システム及びその作動方法 | |
CN110325100B (zh) | 内窥镜系统及其操作方法 | |
JP5291955B2 (ja) | 内視鏡検査システム | |
US8682418B2 (en) | Diagnosis supporting apparatus and control method of diagnosis supporting apparatus | |
US20170251159A1 (en) | Method and systems for diagnostic mapping of bladder | |
US20190183360A1 (en) | Methods and devices suitable for imaging blood-containing tissue | |
US20190082936A1 (en) | Image processing apparatus | |
JP2012070937A (ja) | 内視鏡システム | |
CN114945314A (zh) | 医疗图像处理装置、内窥镜系统、诊断辅助方法及程序 | |
WO2021171465A1 (ja) | 内視鏡システム及び内視鏡システムによる管腔走査方法 | |
WO2020178962A1 (ja) | 内視鏡システムおよび画像処理装置 | |
US10462440B2 (en) | Image processing apparatus | |
JP2019136241A (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
JP6266927B2 (ja) | 内視鏡システム | |
US20220202284A1 (en) | Endoscope processor, training device, information processing method, training method and program | |
WO2021241735A1 (ja) | 内視鏡プロセッサ装置 | |
JP2015226599A (ja) | 生体色度計測装置 | |
JP7397176B2 (ja) | 画像処理装置及びその作動方法 | |
US20240074638A1 (en) | Medical image processing apparatus, medical image processing method, and program | |
US20240000299A1 (en) | Image processing apparatus, image processing method, and program | |
US20220375089A1 (en) | Endoscope apparatus, information processing method, and storage medium | |
JP4776919B2 (ja) | 医療画像処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190808 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200414 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200609 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200707 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200826 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200923 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201002 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6774552 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |