JP7389823B2 - 画像処理装置、画像処理方法、及び、画像処理プログラム - Google Patents
画像処理装置、画像処理方法、及び、画像処理プログラム Download PDFInfo
- Publication number
- JP7389823B2 JP7389823B2 JP2021570594A JP2021570594A JP7389823B2 JP 7389823 B2 JP7389823 B2 JP 7389823B2 JP 2021570594 A JP2021570594 A JP 2021570594A JP 2021570594 A JP2021570594 A JP 2021570594A JP 7389823 B2 JP7389823 B2 JP 7389823B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- observation mode
- endoscopic
- automatic recording
- image processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 33
- 238000003672 processing method Methods 0.000 title claims description 5
- 210000002784 stomach Anatomy 0.000 claims description 18
- 238000007689 inspection Methods 0.000 claims description 12
- 210000002318 cardia Anatomy 0.000 claims description 11
- 210000001187 pylorus Anatomy 0.000 claims description 8
- 210000003238 esophagus Anatomy 0.000 claims description 2
- 210000002429 large intestine Anatomy 0.000 claims description 2
- 210000003800 pharynx Anatomy 0.000 claims description 2
- 210000000813 small intestine Anatomy 0.000 claims description 2
- 230000000052 comparative effect Effects 0.000 claims 3
- 238000000034 method Methods 0.000 description 24
- 238000010586 diagram Methods 0.000 description 13
- 238000003384 imaging method Methods 0.000 description 12
- 238000003780 insertion Methods 0.000 description 9
- 230000037431 insertion Effects 0.000 description 9
- 239000003550 marker Substances 0.000 description 6
- 238000001839 endoscopy Methods 0.000 description 5
- 238000005452 bending Methods 0.000 description 4
- 238000013136 deep learning model Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 230000002496 gastric effect Effects 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 230000003902 lesion Effects 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 210000004400 mucous membrane Anatomy 0.000 description 2
- 238000004590 computer program Methods 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 239000010794 food waste Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000012447 hatching Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000001727 in vivo Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 210000002438 upper gastrointestinal tract Anatomy 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00006—Operational features of endoscopes characterised by electronic signal processing of control signals
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000096—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope using artificial intelligence
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/0002—Operational features of endoscopes provided with data storages
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/045—Control thereof
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/273—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the upper alimentary canal, e.g. oesophagoscopes, gastroscopes
- A61B1/2736—Gastroscopes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/761—Proximity, similarity or dissimilarity measures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Surgery (AREA)
- Physics & Mathematics (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Optics & Photonics (AREA)
- Molecular Biology (AREA)
- Radiology & Medical Imaging (AREA)
- Biophysics (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- Software Systems (AREA)
- Gastroenterology & Hepatology (AREA)
- Endoscopes (AREA)
Description
なお、以下の説明に用いる各図において、各構成要素を図面上で認識可能な程度の大きさとするため、構成要素毎に縮尺を異ならせてあるものもある。即ち、本発明は、これらの図に記載された構成要素の数量、構成要素の形状、構成要素の大きさの比率、及び各構成要素の相対的な位置関係のみに限定されるものではない。
図1は、本発明の第1の実施形態に係る内視鏡システムの全体構成を示す図であり、図2は、ビデオプロセッサの構成の一例を示す図であり、図3は、予め定めた検査部位の一例を説明するための図である。
次に、第2の実施形態について説明する。
第2の実施形態の全体構成は、第1の実施形態と同一である。第2の実施形態では、自動記録処理が第1の実施形態と異なる。第1の実施形態では、予め定めた検査部位と、内視鏡画像の撮像部位とが同一または類似しているか否かを判断して自動記録を実行していた。これに対して、第2の実施形態では、予め定めた検査部位と、内視鏡画像の撮像部位とが同一または類似しているか否かを判断し、かつ、自動記録に適した条件か否かの判定を行い、自動記録を実行する。
Claims (13)
- 被検体の体内を撮像した被判定用内視鏡画像を入力する入力部と、
予め定めた検査部位に関する対比用内視鏡画像と、前記被判定用内視鏡画像とが同一または類似しているか否かを判断する部位判断部と、
条件判定部と、
自動記録部と、を有し、
前記条件判定部は、前記被判定用内視鏡画像の観察モードが、白色光観察モードおよび少なくとも1種の特殊光観察モードのうち自動記録に適した観察モードであるか否かを判定し、
前記自動記録部は、前記部位判断部により同一または類似していると判断された場合、かつ、前記条件判定部により前記自動記録に適した観察モードであると判定された場合に、前記入力部に入力した前記被判定用内視鏡画像を所定枚数、記録部に自動的に記録する画像処理装置。 - 前記条件判定部は、内視鏡の先端部と撮像部位との距離に応じて、前記自動記録に適した観察モードあるか否かを判定することを特徴とする請求項1に記載の画像処理装置。
- 前記条件判定部は、内視鏡に対する撮像部位の方向に応じて、前記自動記録に適した観察モードであるか否かを判定することを特徴とする請求項1に記載の画像処理装置。
- 前記条件判定部は、前記被判定用内視鏡画像から検出された対象物の種類に応じて、前記自動記録に適した観察モードであるか否かを判定することを特徴とする請求項1に記載の画像処理装置。
- 前記自動記録部は、前記記録部に記録された前記所定枚数の内視鏡画像から観察に適した代表画像を選定して前記記録部に記録することを特徴とする請求項1に記載の画像処理装置。
- 前記自動記録部は、前記所定枚数の内視鏡画像のうち、前記代表画像に選定されなかった内視鏡画像を前記記録部から削除することを特徴とする請求項5に記載の画像処理装置。
- 前記自動記録部は、検査部位毎に前記代表画像を選定することを特徴とする請求項5に記載の画像処理装置。
- 前記自動記録部は、前記代表画像を選定した後、前記代表画像を選定した検査部位に関する内視鏡画像を前記記録部に記録しないことを特徴とする請求項5に記載の画像処理装置。
- 前記予め定めた検査部位は、胃であることを特徴とする請求項1に記載の画像処理装置。
- 前記予め定めた検査部位は、前記胃の噴門部、胃底部、胃体部、胃角部及び幽門部であることを特徴とする請求項9に記載の画像処理装置。
- 前記予め定めた検査部位は、咽頭、食道、小腸、あるいは、大腸であることを特徴とする請求項1に記載の画像処理装置。
- 被検体の体内を撮像した被判定用内視鏡画像を入力し、
予め定めた検査部位に関する対比用内視鏡画像と、前記被判定用内視鏡画像とが同一または類似しているか否かを判断し、
前記被判定用内視鏡画像の観察モードが、白色光観察モードおよび少なくとも1種の特殊光観察モードのうち自動記録に適した観察モードであるか否かを判定し、
同一または類似していると判断された場合、かつ、前記自動記録に適した観察モードであると判定された場合に、入力した前記被判定用内視鏡画像を所定枚数、記録部に自動的に記録する、ことを特徴とする画像処理方法。 - 被検体の体内を撮像した被判定用内視鏡画像を入力するコードと、
予め定めた検査部位に関する対比用内視鏡画像と、前記被判定用内視鏡画像とが同一または類似しているか否かを判断するコードと、
前記被判定用内視鏡画像の観察モードが、白色光観察モードおよび少なくとも1種の特殊光観察モードのうち自動記録に適した観察モードであるか否かを判定するコードと、
同一または類似していると判断された場合、かつ、前記自動記録に適した観察モードであると判定された場合に、入力した前記被判定用内視鏡画像を所定枚数、記録部に自動的に記録するコードと、
をコンピュータに実行させることを特徴とする画像処理プログラム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2020/001476 WO2021144951A1 (ja) | 2020-01-17 | 2020-01-17 | 画像処理装置、画像処理方法、及び、画像処理プログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JPWO2021144951A1 JPWO2021144951A1 (ja) | 2021-07-22 |
JPWO2021144951A5 JPWO2021144951A5 (ja) | 2022-07-20 |
JP7389823B2 true JP7389823B2 (ja) | 2023-11-30 |
Family
ID=76864086
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021570594A Active JP7389823B2 (ja) | 2020-01-17 | 2020-01-17 | 画像処理装置、画像処理方法、及び、画像処理プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20220345659A1 (ja) |
JP (1) | JP7389823B2 (ja) |
WO (1) | WO2021144951A1 (ja) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008278964A (ja) | 2007-05-08 | 2008-11-20 | Olympus Corp | 画像処理装置および画像処理プログラム |
JP2016189812A (ja) | 2015-03-30 | 2016-11-10 | 富士フイルム株式会社 | 内視鏡撮影部位特定装置、方法、プログラム |
WO2019130924A1 (ja) | 2017-12-26 | 2019-07-04 | 富士フイルム株式会社 | 画像処理装置、内視鏡システム、画像処理方法、及びプログラム |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3958526B2 (ja) * | 2001-02-28 | 2007-08-15 | ペンタックス株式会社 | 電子内視鏡装置の観察部位表示システム |
JP5825886B2 (ja) * | 2011-07-04 | 2015-12-02 | Hoya株式会社 | 画像処理装置、内視鏡装置の画像処理方法、及び画像処理ソフトウェア |
CN104114077B (zh) * | 2012-10-18 | 2016-07-20 | 奥林巴斯株式会社 | 图像处理装置和图像处理方法 |
JP6438460B2 (ja) * | 2013-05-17 | 2018-12-12 | アヴァンティス メディカル システムズ, インコーポレイテッド | 二次撮像内視鏡デバイス |
WO2017006618A1 (ja) * | 2015-07-09 | 2017-01-12 | オリンパス株式会社 | サーバ、内視鏡システム、送信方法およびプログラム |
EP3777644A4 (en) * | 2018-04-13 | 2021-09-22 | FUJIFILM Corporation | IMAGE PROCESSING DEVICE, ENDOSCOPE SYSTEM AND IMAGE PROCESSING METHOD |
CN112105286B (zh) * | 2018-05-17 | 2024-09-10 | 富士胶片株式会社 | 内窥镜装置、内窥镜操作方法及计算机可读取记录介质 |
CN113543694B (zh) * | 2019-03-08 | 2024-02-13 | 富士胶片株式会社 | 医用图像处理装置、处理器装置、内窥镜系统、医用图像处理方法、及记录介质 |
-
2020
- 2020-01-17 JP JP2021570594A patent/JP7389823B2/ja active Active
- 2020-01-17 WO PCT/JP2020/001476 patent/WO2021144951A1/ja active Application Filing
-
2022
- 2022-07-11 US US17/861,628 patent/US20220345659A1/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008278964A (ja) | 2007-05-08 | 2008-11-20 | Olympus Corp | 画像処理装置および画像処理プログラム |
JP2016189812A (ja) | 2015-03-30 | 2016-11-10 | 富士フイルム株式会社 | 内視鏡撮影部位特定装置、方法、プログラム |
WO2019130924A1 (ja) | 2017-12-26 | 2019-07-04 | 富士フイルム株式会社 | 画像処理装置、内視鏡システム、画像処理方法、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
WO2021144951A1 (ja) | 2021-07-22 |
JPWO2021144951A1 (ja) | 2021-07-22 |
US20220345659A1 (en) | 2022-10-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8353816B2 (en) | Endoscopy system and method therefor | |
JP5280620B2 (ja) | 生体内のフィーチャーを検出するためのシステム | |
US20090051695A1 (en) | Image processing apparatus, computer program product, and image processing method | |
EP2727514B1 (en) | Image processing device | |
US8467615B2 (en) | Image display apparatus | |
JP6774552B2 (ja) | プロセッサ装置、内視鏡システム及びプロセッサ装置の作動方法 | |
US20210361142A1 (en) | Image recording device, image recording method, and recording medium | |
JP4749732B2 (ja) | 医用画像処理装置 | |
JP6313913B2 (ja) | 内視鏡画像観察支援システム | |
JP2018139846A (ja) | 内視鏡システム及びその作動方法 | |
JP3984230B2 (ja) | 画像情報の表示処理装置、その表示処理方法及び表示処理プログラム | |
US20190298159A1 (en) | Image processing device, operation method, and computer readable recording medium | |
US20240013389A1 (en) | Medical information processing apparatus, endoscope system, medical information processing method, and medical information processing program | |
US20230360221A1 (en) | Medical image processing apparatus, medical image processing method, and medical image processing program | |
JP7389823B2 (ja) | 画像処理装置、画像処理方法、及び、画像処理プログラム | |
JP4445742B2 (ja) | 画像表示装置、画像表示方法、及び画像表示プログラム | |
JP7138719B2 (ja) | 内視鏡システムに用いる画像処理装置、内視鏡システム及び内視鏡システムの作動方法 | |
US20230410304A1 (en) | Medical image processing apparatus, medical image processing method, and program | |
WO2021241735A1 (ja) | 内視鏡プロセッサ装置 | |
WO2024121885A1 (ja) | 情報処理装置、情報処理方法、及び、記録媒体 | |
WO2023195103A1 (ja) | 検査支援システムおよび検査支援方法 | |
KR20230163723A (ko) | 내시경 검사 판독 보조 시스템 | |
JPWO2021144951A5 (ja) |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220519 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220519 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230613 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230721 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231024 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231117 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7389823 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |