JPWO2020017089A1 - 撮像ユニット、内視鏡および内視鏡システム - Google Patents

撮像ユニット、内視鏡および内視鏡システム Download PDF

Info

Publication number
JPWO2020017089A1
JPWO2020017089A1 JP2020530889A JP2020530889A JPWO2020017089A1 JP WO2020017089 A1 JPWO2020017089 A1 JP WO2020017089A1 JP 2020530889 A JP2020530889 A JP 2020530889A JP 2020530889 A JP2020530889 A JP 2020530889A JP WO2020017089 A1 JPWO2020017089 A1 JP WO2020017089A1
Authority
JP
Japan
Prior art keywords
lens group
image
optical system
holding frame
optical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020530889A
Other languages
English (en)
Other versions
JP7181294B2 (ja
Inventor
祐一 綿谷
祐一 綿谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of JPWO2020017089A1 publication Critical patent/JPWO2020017089A1/ja
Application granted granted Critical
Publication of JP7181294B2 publication Critical patent/JP7181294B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000095Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000096Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope using artificial intelligence
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00064Constructional details of the endoscope body
    • A61B1/00071Insertion part of the endoscope body
    • A61B1/0008Insertion part of the endoscope body characterised by distal tip features
    • A61B1/00096Optical elements
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00147Holding or positioning arrangements
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163Optical arrangements
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163Optical arrangements
    • A61B1/00193Optical arrangements adapted for stereoscopic vision
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/05Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/02Mountings, adjusting means, or light-tight connections, for optical elements for lenses
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163Optical arrangements
    • A61B1/00188Optical arrangements with focusing or zooming features

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Optics & Photonics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Veterinary Medicine (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Public Health (AREA)
  • Signal Processing (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • General Physics & Mathematics (AREA)
  • Astronomy & Astrophysics (AREA)
  • Endoscopes (AREA)
  • Instruments For Viewing The Inside Of Hollow Bodies (AREA)

Abstract

2つの光学系のピント調整を簡易に行うことができる撮像ユニット、内視鏡および内視鏡システムを提供する。撮像ユニット(20)は、対物レンズ群(203)および第1のレンズ群(201)によって構成される第1の光学系(L1)のFナンバーが対物レンズ群(203)および第2のレンズ群(202)によって構成される第2の光学系L2のFナンバーと比べて大きい。

Description

本開示は、被検体内に挿入される内視鏡の挿入部の先端に設けられて被検体内を撮像する撮像ユニット、内視鏡および内視鏡システムに関する。
従来、内視鏡では、視差の異なる2つの画像を1つの撮像素子の撮像面に結像することによって、被検体の体内の立体画像(以下、単に「3D画像」という)を観察する技術が知られている(特許文献1参照)。この技術では、互いに視差を有する2つの光学像を生成する主光学系および従光学系それぞれに異なるピント調整用の保持枠を設けることによって、製造誤差による主光学系および従光学系それぞれのピント位置の差が一定の許容幅内に収めることで、3D画像を生成する。
国際公開第2017/104276号
ところで、近年、撮像素子の高画素化による画素ピッチの縮小および撮像ユニットの小型化に伴って光学系のレンズ径も縮小しているため、ピント調整の難易度が上がってきている。
しかしながら、上述した特許文献1では、主光学系に対して従光学系のピントを合わせるため、ピント調整手段の枠構造が複雑なため、簡易にピント調整を行うことができなかった。
本開示は、上記に鑑みてなされたものであって、2つの光学系のピント調整を簡易に行うことができる撮像ユニット、内視鏡および内視鏡システムを提供することを目的とする。
上述した課題を解決し、目的を達成するために、本開示に係る撮像ユニットは、第1の光学像を結像する第1のレンズ群と、前記第1のレンズ群と対をなし、第2の光学像を結像する第2のレンズ群と、物体光を前記第1のレンズ群へ導光する第1の領域と、物体光を前記第2のレンズ群へ導光する第2の領域と、を有する対物レンズ群と、前記第1の光学像および前記第2の光学像を受光することによって画像信号を生成する単一のイメージセンサと、前記第1のレンズ群を保持する第1の保持孔と、前記第2のレンズ群を保持する第2の保持孔と、を有する単一の第1の保持枠と、前記対物レンズ群を保持し、かつ、前記第1の保持枠の先端側と嵌合した状態で接着されることによって位置決めされて固定された第2の保持枠と、前記イメージセンサを保持し、内周面において前記第1の保持枠の基端側と嵌合した状態で接着されることによって位置決めされて固定された第3の保持枠と、を備え、前記対物レンズ群および前記第1のレンズ群によって構成される第1の光学系のFナンバーは、前記対物レンズ群および前記第2のレンズ群によって構成される第2の光学系のFナンバーと比べて大きい。
また、本開示に係る撮像ユニットは、前記第2の光学系は、前記第2の光学系の光路上に絞りをさらに備える。
また、本開示に係る内視鏡は、被検体に挿入される挿入部と、前記挿入部の先端側に設けられ、前記被検体を撮像することによって画像信号を生成する撮像ユニットと、前記挿入部の基端側に設けられた、前記画像信号に対して画像処理を行う処理装置に着脱自在に接続される基端部と、を備え、前記撮像ユニットは、第1の光学像を結像する第1のレンズ群と、前記第1のレンズ群と対をなし、第2の光学像を結像する第2のレンズ群と、物体光を前記第1のレンズ群へ導光する第1の領域と、物体光を前記第2のレンズ群へ導光する第2の領域と、を有する対物レンズ群と、前記第1の光学像および前記第2の光学像を受光することによって前記画像信号を生成する単一のイメージセンサと、前記第1のレンズ群を保持する第1の保持孔と、前記第2のレンズ群を保持する第2の保持孔と、を有する単一の第1の保持枠と、前記対物レンズ群を保持し、かつ、内周面において前記第1の保持枠の先端側の外周面と嵌合した状態で接着されることによって位置決めされて固定された第2の保持枠と、前記イメージセンサを保持し、内周面において前記第1の保持枠の基端側の外周面と嵌合した状態で接着されることによって位置決めされて固定された第3の保持枠と、を備え、前記対物レンズ群および前記第1のレンズ群によって構成される第1の光学系のFナンバーは、前記対物レンズ群および前記第2のレンズ群によって構成される第2の光学系のFナンバーと比べて大きい。
また、本開示に係る内視鏡システムは、上記記載の内視鏡と、処理装置と、を備え、前記処理装置は、前記画像信号に対して画像処理を行う画像処理部を備え、前記画像処理部は、前記画像信号に基づいて、前記第1の光学系によって生成された第1の画像および前記第2の光学系によって生成された第2の画像を取得し、前記第2の画像および前記第1の画像の各々の所定の位置のズレ量である視差値を算出し、前記視差値に基づいて、前記第2の画像と前記第1の画像の各画素の輝度情報の差分値を算出し、前記第2の画像の各画素の画素値に、前記差分値を加算する。
本開示によれば、2つの光学系のピント調整を簡易に行うことができるという効果を奏する。
図1は、本開示の一実施の形態に係る内視鏡システムの全体構成を模式的に示す概略図である。 図2は、本開示の一実施の形態に係る撮像ユニットの断面を模式的に示す図である。 図3は、本開示の一実施の形態に係る第1の光学系および第2の光学系の各々のFナンバーを同じ値にした際の解像度と被写体距離との関係を示す図である。 図4は、本開示の一実施の形態に係る第1の光学系のFナンバーを第2の光学系のFナンバーより大きい値にした際の解像度と被写体距離との関係を示す図である。 図5は、本開示の一実施の形態に係る処理装置の機能構成を示すブロック図である。 図6は、本開示の一実施の形態に係る処理装置が実行する処理の概要を示すフローチャートである。
以下、本開示を実施するための形態(以下、「実施の形態」という)として、被検体内に挿入する挿入部における先端側の先端部に撮像ユニット(撮像装置)を有する内視鏡を備えた内視鏡システムについて説明する。また、この実施の形態により、本開示が限定されるものでない。さらに、図面の記載において、同一の部分には同一の符号を付して説明する。さらにまた、図面は、模式的なものであり、各部材の厚みと幅との関係、各部材の比率等は、現実と異なることに留意する必要がある。また、図面の相互間において、互いの寸法や比率が異なる部分が含まれている。
〔内視鏡システムの構成〕
図1は、本開示の一実施の形態に係る内視鏡システムの全体構成を模式的に示す概略図である。図1に示す内視鏡システム1は、内視鏡2と、処理装置3と、表示装置4と、光源装置5と、を備える。
内視鏡2は、複数のケーブルおよびライトガイドを含む挿入部100を被検体の体腔内に挿入し、被検体の体内を撮像することによって生成した撮像信号を処理装置3へ出力する。内視鏡2は、挿入部100と、操作部200と、ユニバーサルコード300と、基端部400と、を備える。
挿入部100は、内部に複数のケーブルおよびライトガイドを有し、被検体の体腔内に挿入される。挿入部100は、被検体の体腔内に挿入される先端側の先端部101に、被検体の体内を撮像することによって撮像信号を生成する撮像ユニット20が設けられ、基端部102側に操作部200が接続される。挿入部100は、処理装置3から供給される電力および駆動信号を撮像ユニット20へ伝送するとともに、撮像ユニット20によって生成された撮像信号を基端側102へ伝送する。
操作部200は、内部に各種回路が実装された基板を内蔵するとともに、内視鏡2に関する各種操作の入力を受け付ける。また、操作部200は、ユニバーサルコード300が接続される。操作部200は、各種のスイッチ、トグルスイッチおよびボタン等を用いて構成される。
ユニバーサルコード300は、内部に複数のケーブルおよびライトガイドを有し、基端側301に基端部400が接続される。ユニバーサルコード300は、基端部400および操作部200を経由して処理装置3から供給された電力および駆動信号を挿入部100へ伝送するとともに、挿入部100および操作部200を経由して撮像ユニット20によって生成された撮像信号を基端側102へ伝送する。
基端部400は、処理装置3および光源装置5に着脱自在に接続される。基端部400は、処理装置3から供給される電力および駆動信号をユニバーサルコード300へ伝送するとともに、ユニバーサルコード300を経由して入力された撮像信号を処理装置3へ伝送する。
処理装置3は、基端部400へ電力および駆動信号を出力するとともに、基端部400から入力された撮像信号を受信する。処理装置3は、撮像信号に対して所定の画像処理を施して表示装置4へ出力する。処理装置3は、内視鏡システム1の各部を制御する。処理装置3は、例えばCPU(Central Processing Unit)、GPU(Graphics Processing Unit)、FPGA(Field Programmable Gate Array)およびDSP(Digital Signal Processing)、揮発性メモリおよび不揮発性メモリ等を用いて構成される。
表示装置4は、処理装置3が画像処理を施した撮像信号に対応する画像を表示する。また、表示装置4は、内視鏡システム1に関する各種情報を表示する。表示装置4は、液晶または有機EL(Electro Luminescence)等を用いて構成される。
光源装置5は、基端部400を経由して挿入部100の先端部101側から被検体(被写体)に向けて照明光を照射するため、照明光を供給する。光源装置5は、ハロゲンランプまたは白色光を発する白色LED(Light Emitting Diode)等を用いて構成される。なお、本実施の形態では、光源装置5に同時方式の照明方式を用いる場合について説明するが、撮像ユニット20の種別に応じて適宜変更することができ、例えば面順次方式の照明方式であってもよい。さらに、光源装置5は、白色光にも、特殊光を供給してもよい。特殊光としては、例えばNBI(Narrow Band Imaging)が可能な狭帯域光、赤外光、バイオレット光、オレンジ光等を供給してもよい。
〔撮像ユニットの構成〕
次に、撮像ユニット20の構成について説明する。図2は、撮像ユニット20の断面を模式的に示す図である。
図2に示す撮像ユニット20は、第1のレンズ群201と、第2のレンズ群202と、対物レンズ群203と、イメージセンサ204と、第1の保持枠205と、第2の保持枠206と、第3の保持枠207と、絞り208と、を備える。
第1のレンズ群201は、対物レンズ群203から導光された物体光をイメージセンサ204の受光面に第1の光学像として結像する。第1のレンズ群201は、複数のレンズを用いて構成される。
第2のレンズ群202は、第1のレンズ群と対をなし、対物レンズ群203から導光された物体光をイメージセンサ204の受光面に第2の光学像として結像する。第2のレンズ群202は、複数のレンズを用いて構成される。
対物レンズ群203は、物体光を第1のレンズ群201へ導光する第1の領域R1と、物体光を第2のレンズ群202へ導光する第2の領域R2と、を有する。対物レンズ群203は、複数のレンズを用いて構成される。以下においては、対物レンズ群203および第1のレンズ群201によって構成される光学系(左側光学系)を第1の光学系L1とし、対物レンズ群203および第2のレンズ群202によって構成される光学系(右側光学系)を第2の光学系L2として説明する。さらに、第1の光学系L1および第2の光学系L2は、視差を有するステレオ光学系として機能する。
イメージセンサ204は、第1のレンズ群201が結像した第1の光学像と、第2のレンズ群202が結像した第2の光学像と、を受光することによって撮像信号を生成する。イメージセンサ204は、単一のCCD(Charge Coupled Device)または単一のCMOS(Complementary Metal Oxide Semiconductor)等を用いて構成される。なお、イメージセンサ204は、単一のものに限定されることなく、第1の光学像および第2の光学像の各々を受光する複数板のものを用いて構成してもよい。
第1の保持枠205は、筒状をなし、第1のレンズ群201を保持する第1の保持孔205aと、第2のレンズ群202を保持する第2の保持孔205bとが一体的に形成される。第1の保持孔205aおよび第2の保持孔205bは、第1のレンズ群201の光軸O1と第2のレンズ群202の光軸O2とが所定の視差になるように内部で保持する。
第2の保持枠206は、筒状をなし、対物レンズ群203を保持する。第2の保持枠206は、内周面において第1の保持枠205の先端側(一端側)の外周面と嵌合させた状態で接着剤206a等を用いて接着されることによって位置決めされて固定される。なお、固定方法としては、接着剤以外にも、例えば第1の保持枠205の外周側に螺旋状の溝や雌ねじを設け、第2の保持枠206の内周側に雄ねじを設けることによって固定してもよい。
第3の保持枠207は、イメージセンサ204を保持する。第3の保持枠207は、筒状をなし、内周面において第1の保持枠205の基端側(他端側)の外周面が嵌合させた状態で接着剤207a等を用いて接着されることによって位置決めされて固定される。なお、固定方法としては、接着剤以外にも、例えば第1の保持枠205の外周側に螺旋状の溝や雌ねじを設け、第3の保持枠207の内周側に雌ねじを設けることによって固定してもよい。
絞り208は、第2の光学系L2の光路上に配置され、第2のレンズ群202に入射する光を制限することによって、第2の光学系L2のFナンバー(F値)を変更する。絞り208は、第2の光学系L2の光路上に配置される。具体的には、絞り208は、第2の光学系L2の光路上における対物レンズ群203と第2のレンズ群202との間に配置される。なお、絞り208の配置場所は、適宜変更することができ、例えば第2のレンズ群202とイメージセンサ204との間、対物レンズ群203の先端側、第2のレンズ群202のいずれかの間にすることができる。
このように構成された撮像ユニット20は、第1の光学系L1(主光学系)のFナンバー(F値)が、第2の光学系L2(従光学系)のFナンバー(F値)と比して大きい。具体的には、第2の光学系L2は、対物レンズ群203と第2のレンズ群202との間に絞り208が設けられているので、第1の光学系L1のFナンバー(F値)と比して小さい。
図3は、第1の光学系L1および第2の光学系L2の各々のFナンバーを同じ値にした際の解像度と被写体距離との関係を示す図である。図4は、第1の光学系L1のFナンバーを第2の光学系L2のFナンバーより大きい値にした際の解像度と被写体距離との関係を示す図である。図3および図4において、横軸が被写体距離を示し、縦軸が解像度を示す。また、図3および図4の曲線LL1および曲線LL2は、第1のレンズ群201の特性を示し、図3および図4の曲線LR1および曲線LR2は、第2のレンズ群202の特性を示す。さらに、図3および図4において、閾値LTがピントの閾値を示す。
図3に示すように、従来の構成(以下、「構成1」という)では、第1の光学系L1および第2の光学系L2の各々のFナンバーが同じであるため、第1の光学系L1および第2の光学系L2のどちらか一方のレンズ枠を調整する。これにより、構成1では、第1の光学系L1および第2の光学系L2の各々の被写界深度D1が同じため、第1の光学系L1および第2の光学系L2の各々が同じピント位置に合わせることができるが、ピント合わせの調整作業が煩雑となる。また、第1の光学系L1および第2の光学系L2のどちらか一方の一部のレンズだけを他方の光学系のピントに合うように調整が可能な構成(以下、「構成2」という)であっても、レンズ枠が複雑になるうえ、ピント合わせの調整作業が煩雑となる。具体的には、従来の構成2では、第1の光学系L1および第2の光学系L2の間でピント調整を行った後(調整工程1)、第2の光学系L2を構成する一部のレンズを光軸O2方向に動かしてピント調整を行う(調整工程2)。即ち、従来の構成2では、2回の調整工程を行わなければならないうえ、第2の光学系L2の一部のレンズのみを移動させる構造を別途設ける必要があるため、枠機構が複雑となる。
これに対して、図4に示すように、撮像ユニット20は、第1の光学系L1のFナンバー(F値)が、第2の光学系L2のFナンバー(F値)と比して大きく設定する。具体的には、図4に示すように、撮像ユニット20は、第1の光学系L1のFナンバーを第2の光学系L2のFナンバーより大きくすることで、第2の光学系L2の被写界深度D1を含むように被写体Pに対する被写界深度D2を拡大する。即ち、第1の光学系L1のピントが合う範囲に第2の光学系L2のピントの合う範囲を合わせる。この結果、特別なピント調整用の部材を設けることなく、第1の光学系L1および第2の光学系L2のピント調整を簡易な構成で行うことができる。さらに、撮像ユニット20は、上述した従来の構造2と比して、第1の保持枠206〜第3の保持枠207の構成を簡略化することができるとともに、1回の調整作業のみで、第1の光学系L1および第2の光学系L2のピント調整を行うことができる。さらにまた、3D合成画像の特徴として、2つの画像を合成した場合、人間の目では、片側の高分解能な画像の影響を強く受けるので、結果的に、片側のF値を大きくして分解能を落としてもよい。この効果を利用することによって、得られる3D画像は、高精細な印象となる。
〔処理装置の構成〕
次に、処理装置3の構成について説明する。図5は、処理装置3の機能構成を示すブロック図である。
図5に示す処理装置3は、画像処理部31と、制御部32と、記録部33と、を有する。
画像処理部31は、内視鏡2から入力された画像信号に対して、各種処理を行って表示装置4へ出力する。画像処理部31は、例えばGPU(Graphics Processing Unit)、ASIC(Application Specific Integrated Circuit)、DSP(Digital Signal
Processing)およびFPGA(Field Programmable Gate Array)等を用いて構成される。
制御部32は、内視鏡システム1の各部を制御する。制御部32は、CPU(Central
Processing Unit)等を用いて構成される。
記録部33は、内視鏡システム1に関する各種データや実行するプログラムを記録する。記録部33は、揮発性メモリ、不揮発性メモリおよびメモリーカード等を用いて構成される。
〔処理装置の処理〕
次に、処理装置3が実行する処理の概要について説明する。図6は、処理装置3が実行する処理の概要を示すフローチャートである。なお、内視鏡2は、3D観察時を行う場合であっても、基本的に2D画像、例えば第1の光学系L1によって生成された第1の画像(以下、副主画像」という)および第2の光学系L2によって生成された第2の画像(以下、「主画像」という)のどちらか一方を記録する。好ましくは、内視鏡2は、主画像を記録する。現在、内視鏡2では、超解像技術が知られているが、そのほとんどが表示装置4の表示画素数よりイメージセンサ204の撮像画素数が小さいため、表示画像数と撮像画素数との間に差が生じているため、内視鏡2が接続される処理装置3内で補間処理やエッジ強調処理を行うことによって精彩な画像を再生している。また、現在、内視鏡2では、学習型の超解像技術が知られているが、静物と異なり、被検体が動くので、教師データを得ることが難しいうえ、リアルタイム性に欠けるため、CADe、CADxといった自動検出・自動診断との親和性が欠ける問題点もある。さらに、現在、内視鏡2では、処理装置3がエッジ強調を行っているが、エッジに隣接する情報への影響、例えば濃いグレーが黒くなるだけなく、薄いグレーも白く変化する影響がある。このため、以下においては、内視鏡システム1が3D画像観察でなく、2D画像観察時または2D画像保存時に実行する処理装置3の処理について説明する。
図6に示すように、まず、画像処理部31は、内視鏡2のイメージセンサ204によって生成された画像信号から主画像および副画像を取得する(ステップS101)。
続いて、画像処理部31は、主画像に対する副画像の画像調整処理を実行する(ステップS102)。具体的には、画像処理部31は、主画像の所定の位置、例えば中心から副画素の中心とのズレ量である視差値を算出するオフセット処理、主画像および副画像の倍率を調整する倍率調整処理、主画像および副画像のディストーションを調整するディストーション調整処理および主画像と副画像の水平や垂直を調整する回転処理等を実行する。
その後、画像処理部31は、オフセット処理で算出した視差値に基づいて、主画像と副画像の各画素の輝度情報の差分値を算出する(ステップS103)。具体的には、画像処理部31は、オフセット処理で算出した視差分(ズレ量)に基づいて、主画像と副画像の各画素の位置を合わせた後に、主画像の各画素と副画素の各画素との輝度情報(画素値)の差分値を算出する。
続いて、画像処理部31は、主画像の各画素の画素値に、ステップS103で算出した差分値を加算し(ステップS104)、記録部33に記録する(ステップS105)。ステップS105の後、画像処理部31は、本処理を終了する。なお、画像処理部31は、主画像の各画素の画素値に、ステップS103で算出した差分値を単に加算していたが、これに限定されることなく、差分値の絶対値を主画像の各画素の画素値に加算してもよい。これにより、一実施の形態によれば、1つのイメージセンサ204を用いて主画像および副画像の2つを同時に取得することによって、簡易な計算で強調処理を行うことができるので、リアルタイム性を向上させることができる。一実施の形態によれば、簡易な計算で強調処理を行うことができるので、画像処理部31を構成する回路規模の縮小することができる。さらに、一実施の形態によれば、第2の光学系L2のFナンバー(F値)が第1の光学系L1のFナンバー(F値)より小さい。このため、第1の光学系L1(従光学系)は、被写体深度が深いため、強調処理によって保存される2D画像の被写体深度が拡大された画像となる。さらにまた、一実施の形態によれば、コントラストや解像感を向上させることができるうえ、副画像で生じる周辺画素への影響を防止することができるので、違和感のない強調画像を提供することができる。
以上説明した本開示の一実施の形態によれば、第1の光学系L1のFナンバー(F値)を第2の光学系L2のFナンバー(F値)と比して大きくすることによって、第1の光学系L1および第2の光学系L2のピント調整を簡易な構成で行うことができる。
なお、本開示の一実施の形態によれば、第1の光学系L1のFナンバー(F値)を第2の光学系L2のFナンバー(F値)と比して大きくしていたが、これに限定されることなく、第2の光学系L2のFナンバー(F値)を第1の光学系L1のFナンバー(F値)と比して大きくしてもよい。即ち、2つの光学系のうち、どちらか一方のFナンバーを他方のFナンバーと比して大きくすることによって、2つの光学系のピント調整を簡易な構成で行うことができる。
なお、本開示の一実施の形態では、第1の光学系L1および第2の光学系L2のどちらか一方に、一部の波長帯域の光をカットするフィルタを光路上に設けてもよいし、コーティングをレンズに施してもよい。ここで、一部の波長帯域の光としては、PDT(Photodynamic Therapy)の波長帯域(600〜800nm)、波長可変YAGレーザの波長帯域(例えば1064nm)およびLDレーザの波長帯域(650〜905nm)等をカットするフィルタの挿入またはコーティングを施してもよい。これにより、各モードに応じた2D画像の観察を行うことができる。
また、本開示の一実施の形態では、第1の光学系L1および第2の光学系L2のどちらか一方に焦点位置を切り替えるアクチュエーターを設けてもよいし、焦点距離を切り替えるアクチュエーターを設けてもよい。これにより、観察対象に合わせて焦点位置および焦点距離を変更することができる。
また、本開示の一実施の形態では、内視鏡2の先端部101に内視鏡の軸方向を中心に径方向に移動可能な扇状をなす絞り機構、フィルタ機構、レンズ機構等の切り替え機構を設けてもよい。この場合、切り替え機構は、内視鏡2の径方向に駆動するコイル等のアクチュエーターに電流を供給することによって、第1の光学系L1または第2の光学系L2の光路上に挿入される。これにより、観察対象や処置対象に合わせた観察を行うことができるうえ、第1の光学系L1および第2の光学系L2の光軸を結ぶ線に対して垂直方向に生じるデッドスペースを有効活用することができるので、小型化を行うことができる。
また、本開示の一実施の形態では、第1の光学系L1および第2の光学系L2のうち少なくとも一方の光学像を受光するイメージセンサ204の受光面に配置されるベイヤー配列のカラーフィルタに換えて、例えばBフィルタ(ブルーフィルタ)、Cyフィルタ(シアンフィルタ)、Yeフィルタ(イエローフィルタ)およびMgフィルタ(マゼンダフィルタ)で構成される補色フィルタを配置してもよい。
また、本開示の一実施の形態では、第1の光学系L1および第2の光学系L2のうち少なくとも一方の光学像を受光するイメージセンサ204の受光面の画素領域のフレームレートを他方の画素領域のフレームレート(例えば60fps)より高速(例えば120fps)にしてもよい。2D画像として記録する画素領域のフレームレートを高速化することで、被写体ブレを防止することができるうえ、第1の光学系L1および第2の光学系L2の両方の画素領域の高速化と比して処理回路を小型化することができる。さらに、高速で照明光の種類が切り替わる面順次発光モード時に、高速フレームレートで撮影することができるので、被写体ブレや色ズレを防止することができる。
また、本開示の一実施の形態に係る内視鏡システムに開示されている複数の構成要素を適宜組み合わせることによって、種々の実施の形態を形成することができる。例えば、上述した本開示の一実施の形態に係る内視鏡システムに記載した全構成要素からいくつかの構成要素を削除してもよい。さらに、上述した本開示の一実施に係る内視鏡システムで説明した構成要素を適宜組み合わせてもよい。
また、本開示の一実施の形態に係る内視鏡システムでは、上述してきた「部」は、「手段」や「回路」などに読み替えることができる。例えば、制御部は、制御手段や制御回路に読み替えることができる。
また、本開示の一実施の形態に係る内視鏡システムに実行させるプログラムは、インストール可能な形式または実行可能な形式のファイルデータでCD−ROM、フレキシブルディスク(FD)、CD−R、DVD(Digital Versatile Disk)、USB媒体、フラッシュメモリ等のコンピュータで読み取り可能な記録媒体に記録されて提供される。
また、本開示の一実施の形態に係る内視鏡システムに実行させるプログラムは、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。
なお、本明細書におけるタイミングチャートの説明では、「まず」、「その後」、「続いて」等の表現を用いてステップ間の処理の前後関係を明示していたが、本発明を実施するために必要な処理の順序は、それらの表現によって一意的に定められるわけではない。即ち、本明細書で記載したタイミングチャートにおける処理の順序は、矛盾のない範囲で変更することができる。
以上、本願の実施の形態のいくつかを図面に基づいて詳細に説明したが、これらは例示であり、本発明の開示の欄に記載の態様を始めとして、当業者の知識に基づいて種々の変形、改良を施した他の形態で本発明を実施することが可能である。
1 内視鏡システム
2 内視鏡
3 処理装置
4 表示装置
5 光源装置
20 撮像ユニット
31 画像処理部
32 制御部
33 記録部
100 挿入部
101 先端部
102 基端側
200 操作部
201 第1のレンズ群
202 第2のレンズ群
203 対物レンズ群
204 撮像素子
205 第1の保持枠
205a 第1の保持孔
205b 第2の保持孔
206 第2の保持枠
206a,207a 接着剤
207 第3の保持枠
208 絞り
300 ユニバーサルコード
301 基端側
400 基端部
L1 第1の光学系
L2 第2の光学系

Claims (4)

  1. 第1の光学像を結像する第1のレンズ群と、
    前記第1のレンズ群と対をなし、第2の光学像を結像する第2のレンズ群と、
    物体光を前記第1のレンズ群へ導光する第1の領域と、物体光を前記第2のレンズ群へ導光する第2の領域と、を有する対物レンズ群と、
    前記第1の光学像および前記第2の光学像を受光することによって画像信号を生成する単一のイメージセンサと、
    前記第1のレンズ群を保持する第1の保持孔と、前記第2のレンズ群を保持する第2の保持孔と、を有する単一の第1の保持枠と、
    前記対物レンズ群を保持し、かつ、前記第1の保持枠の先端側と嵌合した状態で接着されることによって位置決めされて固定された第2の保持枠と、
    前記イメージセンサを保持し、内周面において前記第1の保持枠の基端側と嵌合した状態で接着されることによって位置決めされて固定された第3の保持枠と、
    を備え、
    前記対物レンズ群および前記第1のレンズ群によって構成される第1の光学系のFナンバーは、前記対物レンズ群および前記第2のレンズ群によって構成される第2の光学系のFナンバーと比べて大きい
    撮像ユニット。
  2. 請求項1に記載の撮像ユニットであって、
    前記第2の光学系は、前記第2の光学系の光路上に絞りをさらに備える
    撮像ユニット。
  3. 被検体に挿入される挿入部と、
    前記挿入部の先端側に設けられ、前記被検体を撮像することによって画像信号を生成する撮像ユニットと、
    前記挿入部の基端側に設けられた、前記画像信号に対して画像処理を行う処理装置に着脱自在に接続される基端部と、
    を備え、
    前記撮像ユニットは、
    第1の光学像を結像する第1のレンズ群と、
    前記第1のレンズ群と対をなし、第2の光学像を結像する第2のレンズ群と、
    物体光を前記第1のレンズ群へ導光する第1の領域と、物体光を前記第2のレンズ群へ導光する第2の領域と、を有する対物レンズ群と、
    前記第1の光学像および前記第2の光学像を受光することによって前記画像信号を生成する単一のイメージセンサと、
    前記第1のレンズ群を保持する第1の保持孔と、前記第2のレンズ群を保持する第2の保持孔と、を有する単一の第1の保持枠と、
    前記対物レンズ群を保持し、かつ、内周面において前記第1の保持枠の先端側の外周面と嵌合した状態で接着されることによって位置決めされて固定された第2の保持枠と、
    前記イメージセンサを保持し、内周面において前記第1の保持枠の基端側の外周面と嵌合した状態で接着されることによって位置決めされて固定された第3の保持枠と、
    を備え、
    前記対物レンズ群および前記第1のレンズ群によって構成される第1の光学系のFナンバーは、前記対物レンズ群および前記第2のレンズ群によって構成される第2の光学系のFナンバーと比べて大きい
    内視鏡。
  4. 請求項3に記載の内視鏡と、
    処理装置と、
    を備え、
    前記処理装置は、前記画像信号に対して画像処理を行う画像処理部を備え、
    前記画像処理部は、
    前記画像信号に基づいて、前記第1の光学系によって生成された第1の画像および前記第2の光学系によって生成された第2の画像を取得し、
    前記第2の画像および前記第1の画像の各々の所定の位置のズレ量である視差値を算出し、
    前記視差値に基づいて、前記第2の画像と前記第1の画像の各画素の輝度情報の差分値を算出し、
    前記第2の画像の各画素の画素値に、前記差分値を加算する
    内視鏡システム。
JP2020530889A 2018-07-20 2019-03-07 撮像ユニット、内視鏡および内視鏡システム Active JP7181294B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018136697 2018-07-20
JP2018136697 2018-07-20
PCT/JP2019/009195 WO2020017089A1 (ja) 2018-07-20 2019-03-07 撮像ユニット、内視鏡および内視鏡システム

Publications (2)

Publication Number Publication Date
JPWO2020017089A1 true JPWO2020017089A1 (ja) 2021-08-02
JP7181294B2 JP7181294B2 (ja) 2022-11-30

Family

ID=69163630

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020530889A Active JP7181294B2 (ja) 2018-07-20 2019-03-07 撮像ユニット、内視鏡および内視鏡システム

Country Status (4)

Country Link
US (1) US11717138B2 (ja)
JP (1) JP7181294B2 (ja)
CN (1) CN112512395A (ja)
WO (1) WO2020017089A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115299843B (zh) * 2022-06-17 2023-04-07 中山市微视医用科技有限公司 一种内窥镜镜头平面度调节系统及其使用方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08194170A (ja) * 1995-01-13 1996-07-30 Olympus Optical Co Ltd 立体視内視鏡
JPH095643A (ja) * 1995-06-26 1997-01-10 Matsushita Electric Ind Co Ltd 立体内視鏡装置
JP2003060947A (ja) * 2001-08-15 2003-02-28 Canon Inc 撮像装置、撮影レンズ装置、立体撮像装置および立体撮影レンズ装置
JP2012118698A (ja) * 2010-11-30 2012-06-21 Fuji Heavy Ind Ltd 画像処理装置
WO2017104191A1 (ja) * 2015-12-17 2017-06-22 オリンパス株式会社 ステレオ撮像ユニット
WO2017199666A1 (ja) * 2016-05-16 2017-11-23 オリンパス株式会社 撮像装置
JP2018040927A (ja) * 2016-09-07 2018-03-15 オリンパス株式会社 立体内視鏡用撮像装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5973707B2 (ja) * 2011-10-14 2016-08-23 オリンパス株式会社 三次元内視鏡装置
JP2014178474A (ja) * 2013-03-14 2014-09-25 Sony Corp デジタル顕微鏡装置、その合焦位置探索方法およびプログラム
CN106199902B (zh) * 2015-04-29 2019-02-01 冠捷投资有限公司 双镜头对焦方法及装置
EP3392707A4 (en) 2015-12-14 2019-08-07 Olympus Corporation IMAGE FORMING DEVICE
DE102016117024B4 (de) * 2016-09-09 2021-08-05 Karl Storz Se & Co. Kg Vorrichtung zum Erfassen eines Stereobilds sowie Verfahren zum Justieren der Vorrichtung
JP6810009B2 (ja) * 2017-09-29 2021-01-06 トヨタ自動車株式会社 視差算出装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08194170A (ja) * 1995-01-13 1996-07-30 Olympus Optical Co Ltd 立体視内視鏡
JPH095643A (ja) * 1995-06-26 1997-01-10 Matsushita Electric Ind Co Ltd 立体内視鏡装置
JP2003060947A (ja) * 2001-08-15 2003-02-28 Canon Inc 撮像装置、撮影レンズ装置、立体撮像装置および立体撮影レンズ装置
JP2012118698A (ja) * 2010-11-30 2012-06-21 Fuji Heavy Ind Ltd 画像処理装置
WO2017104191A1 (ja) * 2015-12-17 2017-06-22 オリンパス株式会社 ステレオ撮像ユニット
WO2017199666A1 (ja) * 2016-05-16 2017-11-23 オリンパス株式会社 撮像装置
JP2018040927A (ja) * 2016-09-07 2018-03-15 オリンパス株式会社 立体内視鏡用撮像装置

Also Published As

Publication number Publication date
JP7181294B2 (ja) 2022-11-30
US20210137359A1 (en) 2021-05-13
WO2020017089A1 (ja) 2020-01-23
US11717138B2 (en) 2023-08-08
CN112512395A (zh) 2021-03-16

Similar Documents

Publication Publication Date Title
JP5695808B1 (ja) 内視鏡装置
JP5315482B1 (ja) 内視鏡システム
JP2008036035A (ja) 内視鏡装置
US20190246875A1 (en) Endoscope system and endoscope
CN110381804B (zh) 内窥镜设备
WO2016129062A1 (ja) 画像処理装置、内視鏡システム、撮像装置、画像処理方法およびプログラム
WO2018047369A1 (ja) 内視鏡システム
US11571111B2 (en) Endoscope scope, endoscope processor, and endoscope adaptor
WO2019026929A1 (ja) 医療用観察装置
US11717138B2 (en) Imaging unit, endoscope and endoscope system having optical systems with overlapping depth of fields
JPWO2019069414A1 (ja) 内視鏡装置、画像処理方法およびプログラム
JP7486331B2 (ja) 制御装置および医療用観察システム
JP6137892B2 (ja) 撮像システム
JP7068438B2 (ja) 画像処理装置、内視鏡システム、画像処理方法およびプログラム
US10901199B2 (en) Endoscope system having variable focal length lens that switches between two or more values
JP2020151090A (ja) 医療用光源装置及び医療用観察システム
JP7224963B2 (ja) 医療用制御装置及び医療用観察システム
JP5856943B2 (ja) 撮像システム
JP2018202006A (ja) 撮像システム、撮像方法およびプログラム
WO2022064659A1 (ja) オートフォーカスシステム、内視鏡システムおよび制御方法
US20230000314A1 (en) Medical observation system, apparatus, control method, and imaging apparatus
JP2021146198A (ja) 医療用画像処理装置及び医療用観察システム
JP2015027470A (ja) 内視鏡装置
JP2018192043A (ja) 内視鏡及び内視鏡システム
JP2016101331A (ja) 内視鏡システム及びその作動方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210118

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210430

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220510

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220707

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221018

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221117

R151 Written notification of patent or utility model registration

Ref document number: 7181294

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151