JP6987513B2 - 内視鏡装置 - Google Patents
内視鏡装置 Download PDFInfo
- Publication number
- JP6987513B2 JP6987513B2 JP2017043239A JP2017043239A JP6987513B2 JP 6987513 B2 JP6987513 B2 JP 6987513B2 JP 2017043239 A JP2017043239 A JP 2017043239A JP 2017043239 A JP2017043239 A JP 2017043239A JP 6987513 B2 JP6987513 B2 JP 6987513B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- signal
- pixel
- endoscope
- subject
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00006—Operational features of endoscopes characterised by electronic signal processing of control signals
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00064—Constructional details of the endoscope body
- A61B1/00105—Constructional details of the endoscope body characterised by modular construction
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00163—Optical arrangements
- A61B1/00195—Optical arrangements with eyepieces
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/042—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by a proximal camera, e.g. a CCD camera
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/07—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements using light-conductive means, e.g. optical fibres
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
- G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
- G02B23/2407—Optical details
- G02B23/2446—Optical details of the image relay
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
- G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
- G02B23/2476—Non-optical details, e.g. housings, mountings, supports
- G02B23/2484—Arrangements in relation to a camera or imaging device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
- H04N25/443—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array by reading pixels from selected 2D regions of the array, e.g. for windowing or digital zooming
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
- G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
- G02B23/2407—Optical details
- G02B23/2461—Illumination
- G02B23/2469—Illumination using optical fibres
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Surgery (AREA)
- Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Pathology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- Radiology & Medical Imaging (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Astronomy & Astrophysics (AREA)
- General Physics & Mathematics (AREA)
- Endoscopes (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Studio Devices (AREA)
Description
特許文献1に記載の内視鏡装置は、被検体内部に挿入され、先端から当該被検体内部の被写体像を取り込む挿入部と、当該被写体像を撮像する撮像素子を有し、当該撮像素子による撮像で得られた画像信号を出力する撮像装置(カメラヘッド)と、当該画像信号を処理して表示用の映像信号を生成する制御装置と、撮像装置から制御装置に画像信号を伝送する信号伝送路(複合ケーブル)とを備える。
そこで、画像信号の情報量を低減し、信号伝送路を小型化することができる技術が要望されている。
したがって、本発明に係る内視鏡装置によれば、画像信号の情報量を低減し、伝送路の本数を低減させる等、信号伝送路を小型化することができる、という効果を奏する。
〔内視鏡システムの概略構成〕
図1は、本実施の形態1に係る内視鏡装置1の構成を示す図である。
内視鏡装置1は、医療分野において用いられ、生体内を観察しながら生体組織を処置(切開等)する装置である。この内視鏡装置1は、図1に示すように、レゼクトスコープ2と、内視鏡用撮像装置3と、表示装置4と、制御装置5とを備える。
なお、以下で記載する「先端」は、生体内に挿入される側の端部(図1中、左側の端部)を意味する。また、以下で記載する「基端」は、当該「先端」から離間する側の端部(図1中、右側の端部)を意味する。
ガイド管22は、シース21の内径寸法よりも小さい外径寸法を有し、シース21の基端側から当該シース21内に挿通される。そして、ガイド管22は、その先端側が装着部材221(図1)を介してシース21の基端側に固定される。
ここで、装着部材221には、シース21内に液体を注入し、当該シース21の先端から当該液体を送水するための送水口222が設けられている。
挿入部231は、ガイド管22内に固定されるとともに、シース21内に挿通される。この挿入部231内には、1または複数のレンズを用いて構成され、被写体像を集光する光学系が設けられている。
接眼部232は、挿入部231の基端に連結されている。この接眼部232内には、挿入部231内の光学系により集光された被写体像を接眼部232の基端から外部に出射する接眼光学系2321(図3参照)が設けられている。そして、接眼部232は、基端側に向かうにしたがって拡径するテーパ状に形成され、当該拡径した部分に内視鏡用撮像装置3が着脱自在に接続される。
ハンドル部25は、医師等がレゼクトスコープ2を把持するとともにレゼクト電極部材24を操作する部分である。このハンドル部25は、図1に示すように、固定リング251と、スライダ252と、バネ部材253とを備える。
固定リング251は、医師等が親指を引っ掛ける部分であり、ガイド管22の基端側に固定されている。
このスライダ252には、図1に示すように、レゼクト電極部材24の基端が固定されている。すなわち、レゼクト電極部材24は、スライダ252の移動に伴い、シース21内を図1中、左右方向に進退移動する。
また、スライダ252には、高周波電源(図示略)に接続された高周波電源コード2521を接続するための電源コネクタ2522が設けられている。この電源コネクタ2522は、リード線(図示略)を介して、レゼクト電極部材24の基端と電気的に接続する。
さらに、スライダ252には、図1に示すように、医師等が親指以外の指を引っ掛け、スライダ252を移動(レゼクト電極部材24を進退移動)させるための指掛部材2523が設けられている。
すなわち、医師等は、固定リング251及び指掛部材2523に指を引っ掛け、バネ部材253の付勢力に抗して、指掛部材2523を引き寄せることで、スライダ252を基端側に移動させる(レゼクト電極部材24を基端側に移動させる)。一方、スライダ252(レゼクト電極部材24)は、医師等が指掛部材2523から指を離すと、バネ部材253の付勢力により、先端側に移動する。
なお、内視鏡用撮像装置3の詳細な構成については、後述する。
制御装置5は、CPU(Central Processing Unit)等を含んで構成され、内視鏡用撮像装置3、表示装置4、及び光源装置(図示略)の動作を統括的に制御する。
なお、制御装置5の詳細な構成については、後述する。
次に、内視鏡用撮像装置3の構成について説明する。
図2は、内視鏡用撮像装置3及び制御装置5の構成を示すブロック図である。なお、図2では、説明の便宜上、操作部8及びコネクタCN1,CN2の図示を省略している。
内視鏡用撮像装置3は、図1または図2に示すように、カメラヘッド6と、ケーブル7とを備える。
カメラヘッド6は、図1または図3に示すように、内視鏡23の接眼部232に着脱自在に接続される部分であり、本発明に係る撮像装置としての機能を有する。このカメラヘッド6は、図2または図3に示すように、カメラヘッド筐体61(図3)と、当該カメラヘッド筐体61内に収納されるプリズム62、レンズユニット63、駆動部64(図2)、撮像部65、及び通信部66(図2)とを備える。
このマウント部材67において、一端側の端面には、他端に向けて窪み、接眼部232が嵌合する嵌合穴671が設けられている。また、嵌合穴671の内周面には、接眼部232の外周面に係止する係止突起672が設けられている。そして、嵌合穴671に接眼部232が嵌合した状態では、内視鏡23の光軸L1は、マウント部材67の中心軸Ax2に一致する。
また、マウント部材67において、他端側の端面には、嵌合穴671に連通する連通孔673が設けられている。そして、マウント部材67は、連通孔673の縁部分が環状溝6111に嵌合することで、突出部611に取り付けられる。この状態では、マウント部材67の中心軸Ax2と突出部611の中心軸Ax1とは、一致する。また、マウント部材67は、中心軸Ax1(Ax2)を中心として回転可能とする。
したがって、カメラヘッド6は、マウント部材67を介して、内視鏡23の接眼部232に対し、光軸L1を中心として回転可能に構成されている。また、カメラヘッド6は、その重心O(図1)が光軸L1(接眼部232に対する回転中心軸)からずれた位置(図3では、光軸L1の下方の位置)となるように構成されている。そして、カメラヘッド6は、レゼクトスコープ2の光軸L1周りの回転に関係なく、光軸L1を中心として回転して、常時、カメラヘッド筐体61内に設定された光軸L2(図3)が鉛直方向に沿う姿勢(重心Oが光軸L1の下方に位置する姿勢)になるように構成されている。
レンズユニット63は、図3に示すように、光軸L2上に配設されている。そして、レンズユニット63は、1または複数のレンズを用いて構成され、プリズム62を介した被写体像を撮像部65(撮像素子651)の撮像面に結像する。また、レンズユニット63には、当該1または複数のレンズを移動させて画角を変化させる光学ズーム機構(図示略)や焦点を変化させるフォーカス機構(図示略)が設けられている。
駆動部64は、制御装置5または操作部8(図1)による制御の下、上述した光学ズーム機構やフォーカス機構を動作させ、レンズユニット63の画角や焦点を変化させる。
撮像素子651は、制御装置5による制御の下、図4に示すように、予め設定された読出開始位置PS及び読出終了位置PEに応じた指定画素領域SPA(図4中、斜線を付した領域)における各画素からのみ画素信号が読み出される。
本実施の形態1では、内視鏡用撮像装置3は、例えば泌尿器向けのレゼクトスコープ2専用の内視鏡用撮像装置である。すなわち、生体内で反射され、挿入部231内に集光された断面略円形の光(被写体像SI(図4))は、撮像素子651の全画素領域WPA(図4中、最も大きい矩形で示した領域)において、既定の位置に既定の大きさで結像する。そして、指定画素領域SPAは、撮像素子651の全画素領域WPAよりも小さく、被写体像SI全体を含む矩形領域に設定されている。
すなわち、撮像部65は、全画素領域WPAではなく、指定画素領域SPAにおける各画素のみから読み出された画素信号を画像信号(RAW信号(デジタル信号))として出力する。
なお、ケーブル7を介したカメラヘッド6から制御装置5への画像信号の伝送は、当該画像信号等を光信号で伝送してもよく、あるいは、電気信号で伝送しても構わない。ケーブル7を介した制御装置5からカメラヘッド6への制御信号、同期信号、クロックの伝送も同様である。
また、ケーブル7には、図1に示すように、医師等からの各種操作(例えば、観察画像の画質調整(ホワイトバランス調整、明るさ調整等)の指示や、レンズユニット63の画角や焦点を変化させる指示等)を受け付ける操作部8が設けられている。
次に、制御装置5の構成について図2を参照しながら説明する。
制御装置5は、図2に示すように、通信部51と、画像処理部52と、表示制御部53と、制御部54と、入力部55と、出力部56と、記憶部57とを備える。
通信部51は、ケーブル7を介して、カメラヘッド6(通信部66)から出力される画像信号(RAW信号(デジタル信号))を受信するレシーバとして機能する。この通信部51は、例えば、通信部66との間で、1Gbps以上の伝送レートで画像信号の通信を行う高速シリアルインターフェースで構成されている。
例えば、画像処理部52は、画像信号(RAW信号(デジタル信号))に対してオプティカルブラック減算処理、デモザイク処理等のRAW処理を施し、当該RAW信号(画像信号)をRGB信号(画像信号)に変換する。また、画像処理部52は、当該RGB信号(画像信号)に対して、ホワイトバランス調整処理、RGBガンマ補正、及びYC変換(RGB信号を輝度信号及び色差信号(Y,CB/CR信号)に変換)等のRGB処理を施す。さらに、画像処理部52は、当該Y,CB/CR信号(画像信号)に対して、色差補正及びノイズリダクション等のYC処理を実行する。
図5は、カメラヘッド6から出力された画像信号に基づく撮像画像CI1から合成画像CI2が生成される様子を示す図である。具体的に、図5(a)は、カメラヘッド6から出力された画像信号に基づく撮像画像CI1を示す図である。図5(b)は、合成画像生成処理にて生成された合成画像CI2を示す図である。
具体的に、合成画像生成部521は、図5に示すように、画像信号(RAW信号、RGB信号、あるいは、Y,CB/CR信号)に基づく撮像画像CI1の両側に黒レベルの画像BI1,BI2を付加して、表示装置4の表示画面と同一のアスペクト比を有する合成画像CI2を生成する合成画像生成処理を実行する。すなわち、合成画像生成部521は、本発明に係る第2合成画像生成部としての機能を有する。
制御部54は、例えば、CPU等を用いて構成され、カメラヘッド6、表示装置4、及び光源装置(図示略)の動作を制御するとともに、制御装置5全体の動作を制御する。この制御部54は、図2に示すように、撮像制御部541を備える。
撮像制御部541は、記憶部57から撮像素子651の読出開始位置PS及び読出終了位置PEを読み出し、ケーブル7を介して撮像部65に当該読出開始位置PS及び読出終了位置PEを指示する。そして、撮像素子651は、当該読出開始位置PS及び読出終了位置PEに応じた指定画素領域SPAにおける各画素からのみ画素信号が読み出される。
出力部56は、スピーカやプリンタ等を用いて構成され、各種情報を出力する。
記憶部57は、制御部54が実行するプログラムや、制御部54の処理に必要な情報等を記憶する。
本実施の形態1に係る内視鏡装置1では、カメラヘッド6は、ケーブル7を介して、撮像素子651における全画素領域WPAのうち、当該全画素領域WPAよりも小さく、被写体像SI全体を含む指定画素領域SPAにおける各画素の画素信号を画像信号(RAW信号)として制御装置5に出力する。すなわち、撮像素子651の全画素領域WPAにおける各画素からの画素信号を画像信号としてカメラヘッド6から制御装置5に出力する構成と比較して、観察に必要な被写体像SIの情報を含みつつ、カメラヘッド6から制御装置5に出力する画像信号(RAW信号)の情報量を低減することができる。
したがって、本実施の形態1に係る内視鏡装置1によれば、画像信号(RAW信号)の情報量を低減し、伝送路の本数を低減させる等、ケーブル7を小型化することができる、という効果を奏する。
また、レンズユニット63としては、比較的に小さい領域である指定画素領域SPAに被写体像SIを結像させればよい。このため、レンズユニット63として、大型のレンズユニットを採用する必要がなく、当該レンズユニット63を小型化することができる。すなわち、カメラヘッド6の小型化及び軽量化を図ることができるため、生体内に挿入されるレゼクトスコープ2を術者自身が手で持ちながら生体組織の処置を容易に行うことができる。
このため、全画素領域WPAにおける各画素から画素信号を読み出す構成と比較して、撮像素子651の消費電力を低減することができる。また、カメラヘッド6から制御装置5に出力する画像信号(RAW信号)の情報量を低減することができるため、通信部66の負荷を低減し、当該通信部66の消費電力も低減することができる。すなわち、カメラヘッド6全体の消費電力を低減することができる。
また、カメラヘッド6全体の消費電力の低減に伴い、撮像素子651や通信部66の発熱によるカメラヘッド6の温度上昇を抑制することができる。
次に、本発明の実施の形態2について説明する。
以下では、上述した実施の形態1と同様の構成には同一符号を付し、その詳細な説明は省略または簡略化する。
図6は、図2に対応した図であって、本実施の形態2に係る内視鏡装置1Aの概略構成を示す図である。
本実施の形態2に係る内視鏡装置1A(制御装置5A)では、図6に示すように、上述した実施の形態1で説明した内視鏡装置1に対して、画像処理部52の代わりに当該画像処理部52とは異なる方法で合成画像を生成する画像処理部52Aを採用している。
エッジ検出部522は、以下に示すマスクエッジ検出処理を実行する。
図7は、マスクエッジ検出処理を説明する図である。具体的に、図7(a)は、カメラヘッド6から出力された画像信号に基づく撮像画像CI1を示す図である。図7(b)は、図7(a)に示した撮像画像CI1中の水平ラインHL5での輝度値の分布を示す図である。
エッジ検出部522は、マスクエッジ検出処理を実行することにより、被写体像SIと当該被写体像SI以外のマスク領域MA(図7(a)の黒塗りの部分)との境界点BP(図7(a))を検出する。
具体的に、エッジ検出部522は、図7(a)に示すように、画像処理部52にて処理された画像信号(Y,CB/CR信号)のうち輝度信号(Y信号)を取得する。そして、エッジ検出部522は、当該輝度信号(Y信号)に基づいて、撮像画像CI1内の複数本(本実施の形態2では14本)の水平ラインHL1〜HL14での輝度値の分布をそれぞれ検出する。ここで、撮像画像CI1において、被写体像SIの領域は、マスク領域MAよりも輝度値が高い。すなわち、例えば、水平ラインHL5での輝度分布は、図7(b)に示すように、被写体像SIとマスク領域MAとの2つの境界点BP間で輝度値が高くなり、その他の部分で輝度値が低くなる。このため、エッジ検出部522は、複数本の水平ラインHL1〜HL14での輝度値の分布をそれぞれ検出することにより、被写体像SIとマスク領域MAとの複数の境界点BPを検出することができる。
第2画像切出部523は、図8(a)及び図8(b)に示すように、画像信号(RAW信号、RGB信号、あるいは、Y,CB/CR信号)に基づく撮像画像CI1から、エッジ検出部522にて検出された複数の境界点BPで囲まれる被写体像SIに相当する被写体像画像SI´を切り出す画像切出処理を実行する。
そして、表示制御部53は、合成画像生成部521Aにて生成された合成画像CI3を表示装置4に表示させる。
なお、背景画像BIは、黒レベルの画像に限らず、その他の色や模様を有する画像としても構わない。
ところで、上述した実施の形態1で説明した合成画像生成処理のように、撮像画像CI1の両側に黒レベルの画像BI1,BI2を付加して合成画像CI2を生成した場合には、以下の問題が生じる虞がある。
すなわち、マスク領域MAの黒レベルと画像BI1,BI2の黒レベルとが異なる場合には、合成画像CI2において、撮像画像CI1と画像BI1,BI2との境界が目立ち、観察画像(合成画像CI2)の表示品位が損なわれてしまう。
本実施の形態2に係る内視鏡装置1Aでは、背景画像BI上に被写体像画像SI´を重畳した合成画像CI3を生成する合成画像生成処理を実行する。このため、上述した境界が存在しないため、観察画像(合成画像CI3)の表示品位が損なわれることがない。
また、当該合成画像生成処理では、互いの中心位置CPが合致するように、背景画像BI上に被写体像画像SI´を重畳させている。このため、当該合成画像CI3に対して拡大縮小処理等を行う場合には、中心位置CPを中心として拡大縮小処理が行われる。すなわち、上記同様に、表示品位が損なわれることがない。
次に、本発明の実施の形態3について説明する。
以下では、上述した実施の形態2と同様の構成には同一符号を付し、その詳細な説明は省略または簡略化する。
図9は、図6に対応した図であって、本実施の形態3に係る内視鏡装置1Bの概略構成を示す図である。
本実施の形態3に係る内視鏡装置1B(制御装置5B)では、図9に示すように、上述した実施の形態2で説明した内視鏡装置1Aに対して、制御部54の代わりに当該制御部54に新たな機能を追加した制御部54B(撮像制御部541B)を採用している。
撮像制御部541Bは、エッジ検出部522によるマスクエッジ検出処理の処理結果に基づいて、図10Aまたは図10Bに示すように、ケーブル7を介して撮像部65に指示する読出開始位置PS及び読出終了位置PEを変更する。
具体的に、撮像制御部541Bは、撮像画像CI1内において、複数の境界点BPで囲まれる被写体像SIの位置が左右方向にずれている場合(撮像画像CI1の中心位置から被写体像SIの中心位置が左右方向にずれている場合)には、当該ずれに応じて読出開始位置PS及び読出終了位置PEを変更する。
なお、読出開始位置PS及び読出終了位置PEを変更した場合であっても、当該読出開始位置PS及び読出終了位置PEに応じた指定画素領域SPAは、図10Aまたは図10Bに示すように、撮像素子651の全画素領域WPAよりも小さく、被写体像SI全体を含む矩形領域である。
そして、撮像素子651は、撮像制御部541Bにて指示された読出開始位置PS及び読出終了位置PEに応じた指定画素領域SPAにおける各画素からのみ画像信号が読み出される。
本実施の形態3に係る内視鏡装置1Bでは、撮像画像CI1内での複数の境界点BPで囲まれる被写体像SIの位置に応じて、指定画素領域SPA(読出開始位置PS及び読出終了位置PE)を変更する。
このため、例えば内視鏡23の光軸L1が突出部611やマウント部材67の中心軸Ax1,Ax2からずれてしまった場合であっても、被写体像SI全体を含む指定画素領域SPAを適切に設定することができる。
次に、本発明の実施の形態4について説明する。
以下では、上述した実施の形態2と同様の構成には同一符号を付し、その詳細な説明は省略または簡略化する。
図11は、図6に対応した図であって、本実施の形態4に係る内視鏡装置1Cの概略構成を示す図である。
本実施の形態4に係る内視鏡装置1Cは、上述した実施の形態2で説明した内視鏡装置1Aに対して、以下の点が異なる。
すなわち、内視鏡装置1Cを構成するカメラヘッド6Cでは、上述した実施の形態2で説明したカメラヘッド6に対して、第1画像切出部68が追加されている。
また、内視鏡装置1C(制御装置5C)を構成する画像処理部52Cでは、上述した実施の形態2で説明した画像処理部52Aに対して、第2画像切出部523を省略しているとともに、合成画像生成部521Aの代わりに当該合成画像生成部521Aと略同様の合成画像生成処理を実行する合成画像生成部521Cを採用している。
さらに、内視鏡装置1C(制御装置5C)を構成する制御部54Cでは、上述した実施の形態2で説明した制御部54に対して、撮像制御部541とは異なる機能を有する撮像制御部541Cを採用している。
撮像制御部541Cは、撮像素子651の全画素領域WPAにおける各画素から画素信号を読み出すように、ケーブル7を介して撮像部65に読出開始位置PS及び読出終了位置PEを指示する。そして、撮像素子651は、当該読出開始位置PS及び読出終了位置PEに応じた全画素領域WPAにおける各画素から画素信号が読み出される。すなわち、撮像素子651にて撮像された撮像画像は、図12(a)に示すように、全画素領域WPAに応じた撮像画像CI0となる。
第1画像切出部68は、メモリ681を有し、撮像素子651にて撮像された撮像画像CI0を一端、当該メモリ681に記憶する。そして、第1画像切出部68は、図12(a)及び図12(b)に示すように、撮像制御部541Cからの通知に応じて、メモリ681に記憶された撮像画像CI0から複数の境界点BPで囲まれる被写体像SIに相当する被写体像画像SI´のみを読み出す画像切出処理を実行する。
そして、カメラヘッド6C(通信部66)は、ケーブル7を介して、被写体像画像SI´に応じた画像信号(RAW信号)を制御装置5Cに出力する。
そして、表示制御部53は、合成画像生成部521Cにて生成された合成画像CI3を表示装置4に表示させる。
本実施の形態4に係る内視鏡装置1Cでは、カメラヘッド6Cは、撮像素子651の全画素領域WPAに応じた撮像画像CI0から被写体像画像SI´を切り出し、ケーブル7を介して、当該被写体像画像SI´に応じた画像信号(RAW信号)を制御装置5に出力する。
このため、カメラヘッド6Cから制御装置5Cに出力される画像信号(RAW信号)は、観察に必要な被写体像SIの情報のみとなり、情報量を最も低減することができる。したがって、ケーブル7を小型化することができる、という効果を好適に実現することができる。
ここまで、本発明を実施するための形態を説明してきたが、本発明は上述した実施の形態1〜4によってのみ限定されるものではない。
図13は、本実施の形態1〜4の変形例を示す図である。
上述した実施の形態1〜4では、カメラヘッド6,6Cは、例えば泌尿器向けのレゼクトスコープ2に対して着脱自在に設けられていたが、これに限らず、図13に示すように、例えば消化器向けの内視鏡2Dに対して着脱自在に設けても構わない。
内視鏡2Dは、硬性鏡で構成されている。すなわち、内視鏡2Dは、硬質または少なくとも一部が軟質で細長形状を有し、生体内に挿入される。この内視鏡2D内には、1または複数のレンズを用いて構成され、被写体像SIを集光する光学系が設けられている。そして、光源装置9(図13)からライトガイド2322に供給された光は、内視鏡2Dの先端から出射され、生体内に照射される。生体内に照射され、当該生体内で反射された光(被写体像SI)は、内視鏡2D内の光学系により集光される。そして、カメラヘッド6は、内視鏡2D内の光学系により集光された被写体像SIを撮像する。
また、内視鏡2Dは、硬性鏡に限らず、軟性鏡としても構わない。
上述した実施の形態1〜4及びその変形例(図13)において、内視鏡装置1,1A〜1Dは、工業分野で用いられ、機械構造物等の被検体内部を観察する内視鏡装置としても構わない。
すなわち、カメラヘッド6,6Cは、ケーブル7を介して、撮像素子651における全画素領域WPAの各画素から読み出された画素信号(撮像画像CI0)を画像信号(RAW信号)として制御装置5,5A〜5Cに出力する。そして、制御装置5,5A〜5Cは、撮像画像CI0から指定画素領域SPAに相当する領域や被写体像画像SI´を切り出すとともに、上述した実施の形態1〜4で説明した合成画像生成処理を実行する。
上述した実施の形態1〜4及びその変形例(図13)では、指定画素領域SPAは、全画素領域WPAのうち、被写体像SIの左右の領域を除いた領域としていたが、これに限らず、被写体像SIの上下の領域を除いた領域としても構わない。
また、上述した実施の形態4及びその変形例(図13)では、第1画像切出部68は、撮像画像CI0から被写体像画像SI´を切り出していたが、これに限らない。例えば、撮像画像CI0から被写体像SI全体を含む矩形領域を切り出すように構成してもよい。
2 レゼクトスコープ
2D 内視鏡
3 内視鏡用撮像装置
4 表示装置
5,5A〜5C 制御装置
6,6C カメラヘッド
7 ケーブル
8 操作部
9 光源装置
21 シース
22 ガイド管
23 内視鏡
24 レゼクト電極部材
25 ハンドル部
51 通信部
52,52A,52C 画像処理部
53 表示制御部
54,54B,54C 制御部
55 入力部
56 出力部
57 記憶部
61 カメラヘッド筐体
62 プリズム
63 レンズユニット
64 駆動部
65 撮像部
66 通信部
67 マウント部材
68 第1画像切出部
221 装着部材
222 送水口
231 挿入部
232 接眼部
251 固定リング
252 スライダ
253 バネ部材
521,521A,521C 合成画像生成部
522 エッジ検出部
523 第2画像切出部
541,541B,541C 撮像制御部
611 突出部
651 撮像素子
671 嵌合穴
672 係止突起
673 連通孔
2321 接眼光学系
2322 ライトガイド
2323 光源コネクタ
2521 高周波電源コード
2522 電源コネクタ
2523 指掛部材
6111 環状溝
Ax1,Ax2 中心軸
BI 背景画像
BI1,BI2 画像
BP 境界点
CI0,CI1 撮像画像
CI2,CI3 合成画像
CN1,CN2 コネクタ
CP 中心位置
HL1〜HL14 水平ライン
L1,L2 光軸
MA マスク領域
O 重心
PE 読出終了位置
PS 読出開始位置
SI 被写体像
SI´ 被写体像画像
SPA 指定画素領域
WPA 全画素領域
Claims (5)
- 被検体内に挿入される内視鏡の接眼部に着脱自在に接続され、当該内視鏡にて取り込まれた当該被検体内部の被写体像を撮像する撮像素子を有し、当該撮像素子による撮像で得られた画像信号を出力する撮像装置と、
前記画像信号を処理して表示用の映像信号を生成する制御装置と、
前記撮像装置から前記制御装置に前記画像信号を伝送する信号伝送路とを備え、
前記撮像装置は、
前記撮像素子における全画素領域のうち、当該全画素領域よりも小さく、前記被写体像全体を含む指定画素領域における各画素の画素信号を前記画像信号として出力し、
前記制御装置は、
前記画像信号に基づく撮像画像における画素毎の輝度信号に基づいて、当該撮像画像に含まれる前記被写体像と当該被写体像以外のマスク領域との境界点を検出するマスクエッジ検出処理を実行するエッジ検出部と、
前記撮像装置の動作を制御する撮像制御部とを備え、
前記撮像制御部は、
前記撮像画像における前記エッジ検出部にて検出された境界点で囲まれる被写体像の領域に基づいて、前記指定画素領域を設定し、当該指定画素領域における各画素の画素信号を前記画像信号として前記撮像装置から出力させる
ことを特徴とする内視鏡装置。 - 前記撮像素子は、
前記指定画素領域における各画素からのみ画素信号が読み出される
ことを特徴とする請求項1に記載の内視鏡装置。 - 前記撮像装置は、
前記全画素領域における各画素から読み出された画素信号のうち、前記指定画素領域における各画素の画素信号のみを抽出する第1画像切出部を備える
ことを特徴とする請求項1に記載の内視鏡装置。 - 前記制御装置は、
前記撮像画像における前記エッジ検出部にて検出された境界点で囲まれる被写体像画像を切り出す第2画像切出部と、
外部の表示装置における表示画面と同一のアスペクト比を有する背景画像上に前記被写体像画像を重畳した合成画像を生成する第1合成画像生成部とを備える
ことを特徴とする請求項1〜3のいずれか一つに記載の内視鏡装置。 - 前記制御装置は、
前記画像信号に基づく撮像画像に対して黒レベルの画像を付加して、外部の表示装置における表示画面と同一のアスペクト比を有する合成画像を生成する第2合成画像生成部を備える
ことを特徴とする請求項1〜3のいずれか一つに記載の内視鏡装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017043239A JP6987513B2 (ja) | 2017-03-07 | 2017-03-07 | 内視鏡装置 |
US15/897,185 US10645307B2 (en) | 2017-03-07 | 2018-02-15 | Endoscope apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017043239A JP6987513B2 (ja) | 2017-03-07 | 2017-03-07 | 内視鏡装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018143594A JP2018143594A (ja) | 2018-09-20 |
JP6987513B2 true JP6987513B2 (ja) | 2022-01-05 |
Family
ID=63445698
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017043239A Active JP6987513B2 (ja) | 2017-03-07 | 2017-03-07 | 内視鏡装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US10645307B2 (ja) |
JP (1) | JP6987513B2 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3661191A1 (de) * | 2018-11-27 | 2020-06-03 | B&R Industrial Automation GmbH | Verfahren zum auslesen eines flächensensors |
US11694335B2 (en) * | 2018-12-05 | 2023-07-04 | Stryker Corporation | Systems and methods for displaying medical imaging data |
KR102405434B1 (ko) * | 2020-12-31 | 2022-06-07 | 주식회사 카이미 | 딥러닝 모델을 이용한 내시경 영상으로부터의 불필요한 이미지 제거 방법, 장치 및 프로그램 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4503875B2 (ja) * | 2000-04-19 | 2010-07-14 | 富士フイルム株式会社 | 撮像装置 |
JP4632577B2 (ja) * | 2001-05-30 | 2011-02-16 | オリンパス株式会社 | 計測内視鏡装置 |
JP4694306B2 (ja) * | 2005-08-17 | 2011-06-08 | Hoya株式会社 | 輪郭強調処理ユニット |
US20150145953A1 (en) * | 2012-03-17 | 2015-05-28 | Waseda University | Image completion system for in-image cutoff region, image processing device, and program therefor |
JP6230291B2 (ja) * | 2013-06-21 | 2017-11-15 | オリンパス株式会社 | 内視鏡用の画像処理装置、内視鏡システムおよび内視鏡用の画像処理方法 |
JP6021754B2 (ja) * | 2013-07-04 | 2016-11-09 | オリンパス株式会社 | 内視鏡画像記録装置 |
JP5806343B2 (ja) | 2014-01-16 | 2015-11-10 | ソニー・オリンパスメディカルソリューションズ株式会社 | 光電複合モジュール、カメラヘッド、及び内視鏡装置 |
JP2015156937A (ja) * | 2014-02-24 | 2015-09-03 | ソニー株式会社 | 画像処理装置、画像処理方法、並びにプログラム |
JP6140100B2 (ja) * | 2014-04-23 | 2017-05-31 | 富士フイルム株式会社 | 内視鏡装置及び画像処理装置並びに内視鏡装置の作動方法 |
US10015372B2 (en) * | 2016-10-26 | 2018-07-03 | Capsovision Inc | De-ghosting of images captured using a capsule camera |
-
2017
- 2017-03-07 JP JP2017043239A patent/JP6987513B2/ja active Active
-
2018
- 2018-02-15 US US15/897,185 patent/US10645307B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US10645307B2 (en) | 2020-05-05 |
US20180262696A1 (en) | 2018-09-13 |
JP2018143594A (ja) | 2018-09-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10485629B2 (en) | Endoscope device | |
WO2018123613A1 (ja) | 医療用画像処理装置、医療用画像処理方法、プログラム | |
WO2005102147A1 (ja) | 内視鏡及び内視鏡システム | |
JP6987513B2 (ja) | 内視鏡装置 | |
US11653824B2 (en) | Medical observation system and medical observation device | |
CN113518944A (zh) | 成像装置和开关 | |
US20200244893A1 (en) | Signal processing device, imaging device, signal processing method and program | |
JP6904727B2 (ja) | 内視鏡装置 | |
WO2015146836A1 (ja) | 内視鏡システム | |
JP2005312553A (ja) | 内視鏡及び内視鏡システム | |
JP6860378B2 (ja) | 内視鏡装置 | |
JP2018138143A (ja) | 内視鏡装置及びエッジ検出方法 | |
JP2011206185A (ja) | 内視鏡システム及びその故障検出方法 | |
CN110383817B (zh) | 图像拾取设备、视频信号处理设备和视频信号处理方法 | |
US10778889B2 (en) | Image pickup apparatus, video signal processing apparatus, and video signal processing method | |
JPWO2019244442A1 (ja) | 交換レンズ、撮像装置及び回転検出装置 | |
JPWO2017033858A1 (ja) | 内視鏡システム | |
JP6858522B2 (ja) | 内視鏡装置 | |
WO2020195186A1 (ja) | ケーブル、報知方法 | |
JP7166821B2 (ja) | 医療用撮像装置及び医療用観察システム | |
US20210360146A1 (en) | Imaging device, imaging control device, and imaging method | |
JP6663692B2 (ja) | 画像処理装置、内視鏡システム、及び画像処理装置の制御方法 | |
JP6407045B2 (ja) | 内視鏡装置 | |
JP2006055350A (ja) | 内視鏡装置 | |
JP7420141B2 (ja) | 画像処理装置、撮像装置、画像処理方法、プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200128 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201120 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201215 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210125 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20210622 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20210719 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20210831 |
|
C23 | Notice of termination of proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C23 Effective date: 20211012 |
|
C03 | Trial/appeal decision taken |
Free format text: JAPANESE INTERMEDIATE CODE: C03 Effective date: 20211109 |
|
C30A | Notification sent |
Free format text: JAPANESE INTERMEDIATE CODE: C3012 Effective date: 20211109 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211201 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6987513 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |