JP6818496B2 - 内視鏡用画像処理装置、内視鏡装置、内視鏡用画像処理装置の作動方法、及び画像処理プログラム - Google Patents
内視鏡用画像処理装置、内視鏡装置、内視鏡用画像処理装置の作動方法、及び画像処理プログラム Download PDFInfo
- Publication number
- JP6818496B2 JP6818496B2 JP2016198383A JP2016198383A JP6818496B2 JP 6818496 B2 JP6818496 B2 JP 6818496B2 JP 2016198383 A JP2016198383 A JP 2016198383A JP 2016198383 A JP2016198383 A JP 2016198383A JP 6818496 B2 JP6818496 B2 JP 6818496B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- endoscope
- installation state
- subject image
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/00048—Constructional features of the display
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00064—Constructional details of the endoscope body
- A61B1/00105—Constructional details of the endoscope body characterised by modular construction
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/042—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by a proximal camera, e.g. a CCD camera
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00163—Optical arrangements
- A61B1/00188—Optical arrangements with focusing or zooming features
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/683—Vibration or motion blur correction performed by a processor, e.g. controlling the readout of an image memory
Description
図12は、従来の内視鏡装置100の構成を示す図である。具体的に、図12は、従来の内視鏡装置100を用いて手術を行う際の手術室のレイアウトの一例を示す図である。
特許文献1に記載の内視鏡装置100(医療装置)は、図12に示すように、被検体SB内に挿入され、被写体像を取り込む内視鏡101と、内視鏡101の接眼部に着脱自在に接続され、被写体像を撮像して撮像画像を生成する内視鏡用撮像装置102(カメラヘッド)と、内視鏡用撮像装置102にて撮像された撮像画像を処理して映像信号を生成する制御装置103(ビデオプロセッサ装置)と、制御装置103にて処理された映像信号に基づく観察画像を表示する表示装置104(モニタ装置)とを備える。
ここで、ベッドBDの周囲には、図12に示すように、制御装置103及び表示装置104の他、複数の器材台201、電気メス装置202、麻酔装置203、及び周辺機器204等が配置される。そして、執刀医D1、助手D2,D3、ナースD4、及び麻酔科医D5は、ベッドBDの周囲において、上述した各部材103,104,201〜204を避けた空間に立つこととなる。
このように大型の画面サイズで構成された表示装置104を配置した場合には、表示装置104の横幅が特に大きいため、当該表示装置104の近傍に立つ人の動線(図12の例では助手D2がベッドBDの周囲から抜ける動線)を阻害することとなる。
すなわち、表示装置104等の設置場所を移動しなければ、当該人の動線を確保することができない。また、当該人の動線を確保した後は、表示装置104等を改めて元の設置場所(図12の例では執刀医D1が観察画像を観察し易い場所)に移動する必要がある。
したがって、表示装置104等の設置場所を移動する煩雑な作業が必要となり、利便性の向上を図ることができない、という問題がある。
本発明に係る内視鏡用画像処理装置の画像処理方法は、上記発明において、前記撮像画像内での前記被写体像の大きさを判別する被写体像判別ステップと、前記設置状態認識ステップによる認識結果、及び前記被写体像判別ステップによる判別結果に基づいて、前記被写体像の拡大縮小率を設定する倍率設定ステップとを含み、前記映像信号生成ステップでは、前記倍率設定ステップにて設定された拡大縮小率で前記被写体像の大きさを拡大縮小した前記映像信号を生成することを特徴とする。
すなわち、画像表示部を横置き状態から縦置き状態に変更すれば、表示画面の短辺が横方向となることで横幅が小さくなり、画像表示部の近傍に立つ人の動線を確保することができる。また、画像表示部を横置き状態から縦置き状態に変更しても、観察画像内の被写体像は、画像表示部の設置状態に対応した姿勢(被写体像の上下方向が鉛直方向に沿う姿勢)となる。このため、画像表示部の近傍に立つ人の動線を確保した後、画像表示部を縦置き状態から横置き状態に改めて変更する必要がない。
したがって、本発明に係る内視鏡用画像処理装置によれば、画像表示部の設置場所を移動する煩雑な作業を不要とし、利便性の向上を図ることができる、という効果を奏する。
〔内視鏡装置の概略構成〕
図1は、本発明の実施の形態1に係る内視鏡装置1の概略構成を示す図である。図2は、内視鏡装置1の構成を示すブロック図である。なお、図2では、説明の便宜上、光源装置3、ライトガイド4、及び第3伝送ケーブル10の図示を省略している。
内視鏡装置1は、医療分野において用いられ、生体内等の被検体を観察する装置である。この内視鏡装置1は、図1または図2に示すように、挿入部2と、光源装置3(図1)と、ライトガイド4(図1)と、内視鏡用撮像装置5と、第1伝送ケーブル6と、表示装置7と、第2伝送ケーブル8と、制御装置9と、第3伝送ケーブル10(図1)とを備える。
光源装置3は、ライトガイド4の一端が接続され、制御装置9による制御の下、当該ライトガイド4の一端に生体内を照明するための光を供給する。
ライトガイド4は、一端が光源装置3に着脱自在に接続されるとともに、他端が挿入部2に着脱自在に接続される。そして、ライトガイド4は、光源装置3から供給された光を一端から他端に伝達し、挿入部2に供給する。挿入部2に供給された光は、当該挿入部2の先端から出射され、生体内に照射される。生体内に照射された光(被写体像)は、挿入部2内の光学系により集光される。
レンズユニット51は、挿入部2にて集光された被写体像を撮像部52の撮像面に結像する。そして、レンズユニット51は、内視鏡用撮像装置5に設けられた駆動用モータ(図示略)により光軸方向に移動し、焦点距離やピントを調整可能とする。
撮像部52は、制御装置9による制御の下、生体内を撮像する。この撮像部52は、挿入部2にて集光され、レンズユニット51が結像した被写体像を受光して電気信号に変換するCCD(Charge Coupled Device)またはCMOS(Complementary Metal Oxide Semiconductor)等の撮像素子(図示略)、及び当該撮像素子からの電気信号(アナログ信号)に対して信号処理(A/D変換等)を行って画像信号を出力する信号処理部(図示略)等が一体形成されたセンサチップを用いて構成され、A/D変換後の画像信号(デジタル信号)を出力する。なお、上述した信号処理部は、撮像素子と一体形成せずに別体としても構わない。
なお、第1伝送ケーブル6を介した内視鏡用撮像装置5から制御装置9への画像信号の伝送は、当該画像信号を光信号で伝送してもよく、あるいは、電気信号で伝送しても構わない。第1伝送ケーブル6を介した制御装置9から内視鏡用撮像装置5への制御信号、同期信号、クロックの伝送も同様である。
表示装置7は、制御装置9にて処理された映像信号に基づく観察画像を表示する。この表示装置7は、図2、図3Aまたは図3Bに示すように、画像表示部71と、支持台72(図3A,図3B)と、状態検出部73と(図2)を備える。
画像表示部71は、液晶または有機EL(Electro Luminescence)等を用いた表示ディスプレイで構成され、表示画面Sc(図3A,図3B)に観察画像を表示する。本実施の形態1では、表示画面Scは、40インチ以上の画面サイズで構成されている。また、表示画面Scのアスペクト比(第2の辺Sc2(以下、長辺Sc2と記載)の長さ寸法と第1の辺Sc1(以下、短辺Sc1と記載)の長さ寸法との比)は、例えば、16:9で構成されている。
支柱721は、鉛直方向に沿う柱状部材で構成され、上端側で画像表示部71における背面の略中心位置に接続する。そして、支柱721は、画像表示部71を回動可能に支持する。具体的に、支柱721は、表示画面Scにおける短辺Sc1が鉛直方向に沿う第1の設置状態(図3A(以下、横置き状態と記載))と長辺Sc2が鉛直方向に沿う第2の設置状態(図3B(以下、縦置き状態と記載))とにそれぞれ回動可能(設置可能)に画像表示部71を支持する。
なお、画像表示部71の設置状態については、手動にて変更する構成としてもよく、あるいは、モータ及びフットスイッチ等を設け、当該フットスイッチへの操作に応じて当該モータが駆動することにより画像表示部71の設置状態を変更する構成を採用しても構わない。
複数の脚部722は、支柱721の下端から当該支柱721に略直交する方向にそれぞれ延在し、床面に当接する部分である。
画像取得部91は、内視鏡用撮像装置5(撮像部52)に被写体像を撮像させるとともに、当該撮像部52からの画像信号(撮像画像)を取得する。そして、画像取得部91は、取得した撮像画像を内視鏡用画像処理装置92に出力する。
内視鏡用画像処理装置92は、内視鏡用撮像装置5から取得した撮像画像に対して所定の処理を施すことで画像表示部71の設置状態(横置き状態または縦置き状態)に応じた映像信号を生成して出力する。
なお、内視鏡用画像処理装置92の詳細な構成については、後述する。
次に、内視鏡用画像処理装置92の構成について図2を参照して説明する。
内視鏡用画像処理装置92は、図2に示すように、設置状態認識部921と、被写体像判別部922と、倍率設定部923と、映像信号生成部924とを備える。
設置状態認識部921は、第2伝送ケーブル8を介して表示装置7(状態検出部73)から入力した検出信号に基づいて、画像表示部71の設置状態(横置き状態または縦置き状態)を認識する。
被写体像判別部922は、画像取得部91にて取得された撮像画像PF(図4)に基づいて、当該撮像画像PF内での被写体像SI(図4)(例えば、被写体像SIの位置SIO(図4)及び大きさ)を判別する。
なお、撮像部52にて撮像された撮像画像PF内の被写体像SIは、図4に示すように、略円形である。このため、被写体像判別部922は、撮像画像PF内での被写体像SIの大きさとして、当該被写体像SIの直径DM(図4)を判別する。
具体的に、倍率設定部923は、画像表示部71が横置き状態で設置されている場合には、被写体像SIの拡大縮小率をデフォルト値(例えば、「1(拡大縮小しない値)」)に設定する。そして、倍率設定部923は、撮像画像PF内での被写体像SIの直径DMが表示画面Scにおける短辺Sc1の長さ寸法に対応する閾値(以下、基準閾値と記載)以下であって、かつ、画像表示部71が縦置き状態で設置されている場合には、被写体像SIの拡大縮小率を画像表示部71が横置き状態で設置されている場合と同一の値(デフォルト値(例えば、「1」))に設定する。一方、倍率設定部923は、撮像画像PF内での被写体像SIの直径DMが基準閾値を超える場合であって、かつ、画像表示部71が縦置き状態で設置されている場合には、被写体像SIの拡大縮小率をデフォルト値よりも小さい値(例えば、「9/16(撮像画像PFのアスペクト比(16:9)に応じた値)」)に設定する。
ここで、上述した被写体像SIの拡大縮小調整は、以下の通りである。
映像信号生成部924は、倍率設定部923にて設定された拡大縮小率により、被写体像判別部922で判別された被写体像SIの拡大縮小調整を行う。
生体内に照射され、当該生体からの反射光による被写体像は、挿入部2の先端に設けられた対物光学系(図示略)、挿入部2内に設けられ当該対物光学系から接眼部21へと被写体像を伝送する像伝送光学系(図示略)、接眼部21内に設けられた接眼光学系(図示略)、及びレンズユニット51を介して、撮像部52にて撮像される。この際、対物光学系、像伝送光学系、接眼光学系、及びレンズユニット51の光軸がずれている場合等には、図4に示すように、被写体像SIの中心位置SIOが撮像画像PFの中心位置PFOからずれる(偏心する)場合がある。このように被写体像SIが偏心している場合には、表示画面Scにおいても偏心する(中心位置SIOが表示画面Scの中心位置からずれる)こととなる。
そこで、映像信号生成部924は、被写体像判別部922で判別された被写体像SIを移動させ、被写体像SIの中心位置SIOを撮像画像PFの中心位置PFOに一致(表示画面Scの中心位置に一致)させる処理(被写体像SIの偏心補正)を行う。
画像表示部71が横置き状態や縦置き状態で設置された場合には、当該画像表示部71の設置状態に対応させて、被写体像SIの上下方向が鉛直方向に沿うように調整する必要がある。
そこで、映像信号生成部924は、設置状態認識部921にて画像表示部71が縦置き状態で設置されていると認識された場合には、被写体像SIの姿勢が画像表示部71の縦置き状態に対応した姿勢(被写体像SIの上下方向が鉛直方向に沿う姿勢)となるように被写体像判別部922で判別された被写体像SIを90°回転させる処理(被写体像SIの回転補正)を行う。
なお、画像表示部71が横置き状態で設置されている場合には、上述した回転補正を行わなくても、被写体像SIの上下方向は鉛直方向(短辺Sc1の延在方向)に沿うように設定されている。このため、映像信号生成部924は、設置状態認識部921にて画像表示部71が横置き状態で設置されていると認識された場合には、被写体像SIの回転補正を行わない。
映像信号生成部924は、設置状態認識部921にて画像表示部71が縦置き状態で設置されていると認識された場合には、上述した回転補正を行うとともに、回転補正後の撮像画像PF内において、縦置き状態で設置された画像表示部71における表示画面Scの上方領域に対応する領域に、被写体像判別部922で判別された被写体像SIを位置付ける処理(被写体像SIの位置移動補正)を行う。
そして、映像信号生成部924は、上述した画像処理後の撮像画像PFに応じた映像信号を生成し、第2伝送ケーブル8を介して、当該映像信号を画像表示部71に出力する。
次に、上述した内視鏡用画像処理装置92の動作(画像処理方法)について説明する。
図6は、内視鏡用画像処理装置92の動作を示すフローチャートである。
先ず、画像取得部91は、撮像部52に被写体像SIを撮像させるとともに、当該撮像部52にて撮像された撮像画像PFを取得する(ステップS1)。そして、画像取得部91は、取得した撮像画像PFを被写体像判別部922及び映像信号生成部924にそれぞれ出力する。
次に、映像信号生成部924は、被写体像SIの中心位置SIOが撮像画像PFの中心位置PFOからずれている(位置ずれ有)か否かを判断する(ステップS3)。
位置ずれが有ると判断した場合(ステップS3:Yes)には、映像信号生成部924は、画像取得部91にて取得された撮像画像PFにおいて、被写体像SIの偏心補正を行う(ステップS4)。
次に、設置状態認識部921は、画像表示部71が横置き状態で設置されているか否かを判断する(ステップS6)。
横置き状態で設置されていると判断された場合(ステップS6:Yes)には、倍率設定部923は、被写体像SIの拡大縮小率をデフォルト値(例えば、「1」)に設定する(ステップS7)。
ステップS7の後、映像信号生成部924は、偏心補正(ステップS4)を施した撮像画像PF、または、偏心補正を施していない撮像画像PFにおいて、ステップS7で設定された拡大縮小率により、被写体像SIの拡大縮小調整を行う(ステップS8)。この後、内視鏡用画像処理装置92は、ステップS15に移行する。
被写体像SIの直径DMが基準閾値を超えると判断した場合(ステップS9:Yes)には、倍率設定部923は、被写体像SIの拡大縮小率をデフォルト値よりも小さい値(例えば、「9/16」)に設定する(ステップS10)。
一方、被写体像SIの直径DMが基準閾値以下であると判断した場合(ステップS9:No)には、倍率設定部923は、被写体像SIの拡大縮小率をデフォルト値(例えば、「1」)に設定する(ステップS11)。
ステップS10またはS11の後、映像信号生成部924は、偏心補正(ステップS4)を施した撮像画像PF、または、偏心補正を施していない撮像画像PFにおいて、ステップS10またはS11で設定された拡大縮小率により、被写体像SIの拡大縮小調整を行う(ステップS12)。
ステップS8またはS14の後、映像信号生成部924は、上述した画像処理が施された撮像画像PFに応じた映像信号を生成し、第2伝送ケーブル8を介して、当該映像信号を画像表示部71に出力する(ステップS15)。
以上説明したステップS13及びS15は、本発明に係る映像信号生成ステップに相当する。
以上説明した内視鏡用画像処理装置92の動作により画像表示部71に表示される観察画像の具体例について説明する。
以下、挿入部2が細径の内視鏡である場合の表示形態、及び挿入部2が太径の内視鏡である場合の表示形態を順に説明する。
図7A及び図7Bは、挿入部2が細径の内視鏡である場合に、内視鏡用画像処理装置92の動作により画像表示部71に表示される観察画像OFの一例を示す図である。なお、図7A及び図7Bでは、被写体像SIの上下方向が分かるように、便宜上、被写体像SI内に「A」の文字を記載している。
挿入部2が細径の内視鏡である場合には、当該挿入部2で取り込まれた被写体像SIは、その直径が小さいものとなる(直径DMが基準閾値以下(ステップS9:No))。このため、被写体像SI全体は、撮像画像PFの画像領域からはみ出すことなく、当該画像領域内に位置することとなる。
すなわち、当該映像信号は、被写体像SIの位置ずれ(ステップS3:Yes)に応じて当該被写体像SIの偏心補正(ステップS4)が行われており、かつ、被写体像SIの回転補正(ステップS13)が行われていない映像信号である。
このため、横置き状態で設置された画像表示部71には、当該映像信号に基づいて、図7Aに示す観察画像OFが表示される。
すなわち、当該観察画像OFでは、被写体像SIの中心位置SIOが表示画面Scの中心位置ScOに位置するとともに、円形の被写体像SI全体が表示画面Sc内に位置する。また、当該観察画像OFでは、被写体像SIは、その上下方向が短辺Sc1(鉛直方向)に沿った姿勢となる。
すなわち、当該映像信号は、被写体像SIの位置ずれ(ステップS3:Yes)に応じて当該被写体像SIの偏心補正(ステップS4)が行われているとともに、被写体像SIの回転補正(ステップS13)及び位置移動補正(ステップS14)が行われた映像信号である。また、当該映像信号は、画像表示部71が横置き状態で設置された場合と同一の拡大縮小率(デフォルト値(例えば、「1」)で被写体像SIの拡大縮小調整(ステップS12)が行われた映像信号である。
このため、縦置き状態で設置された画像表示部71には、当該映像信号に基づいて、図7Bに示す観察画像OFが表示される。
すなわち、当該観察画像OFでは、円形の被写体像SI全体が表示画面Sc内に位置するとともに、被写体像SIの中心位置SIOが表示画面Scの上方領域に位置する。また、当該観察画像OFでは、被写体像SIは、その上下方向が長辺Sc2(鉛直方向)に沿った姿勢となる。さらに、当該観察画像OFでは、被写体像SIの大きさは、画像表示部71が横置き状態で設置された場合での被写体像SIの大きさと同一となる。
図8A及び図8Bは、挿入部2が太径の内視鏡である場合に、内視鏡用画像処理装置92の動作により画像表示部71に表示される観察画像OFの一例を示す図である。なお、図8A及び図8Bでは、図7A及び図7Bと同様に、被写体像SIの上下方向が分かるように、便宜上、被写体像SI内に「A」の文字を記載している。
挿入部2が太径の内視鏡である場合には、当該挿入部2で取り込まれた被写体像SIは、その直径が大きいものとなる(直径DMが基準閾値を超える(ステップS9:Yes))。このため、被写体像SIは、円形の上下部分が撮像画像PFの画像領域からそれぞれはみ出したものとなる。
すなわち、当該映像信号は、被写体像SIの位置ずれ(ステップS3:Yes)に応じて当該被写体像SIの偏心補正(ステップS4)が行われており、かつ、被写体像SIの回転補正(ステップS13)が行われていない映像信号である。
このため、横置き状態で設置された画像表示部71には、当該映像信号に基づいて、図8Aに示す観察画像OFが表示される。
すなわち、当該観察画像OFでは、円形の上下部分がそれぞれカットされた被写体像SI全体が表示画面Sc内に位置するとともに、被写体像SIの中心位置SIOが表示画面Scの中心位置ScOに位置する。また、当該観察画像OFでは、被写体像SIは、その上下方向が短辺Sc1(鉛直方向)に沿った姿勢となる。
すなわち、当該映像信号は、被写体像SIの位置ずれ(ステップS3:Yes)に応じて当該被写体像SIの偏心補正(ステップS4)が行われているとともに、被写体像SIの回転補正(ステップS13)及び位置移動補正(ステップS14)が行われた映像信号である。また、当該映像信号は、画像表示部71が横置き状態で設置された場合よりも小さい値の拡大縮小率(例えば、「9/16」)で被写体像SIの拡大縮小調整(ステップS12)が行われた映像信号である。
このため、縦置き状態で設置された画像表示部71には、当該映像信号に基づいて、図8Bに示す観察画像OFが表示される。
すなわち、当該観察画像OFでは、円形の上下部分がそれぞれカットされた被写体像SI全体が表示画面Sc内に位置するととともに、被写体像SIの中心位置SIOが表示画面Scの上方領域に位置する。また、当該観察画像OFでは、被写体像SIは、その上下方向が長辺Sc2(鉛直方向)に沿った姿勢となる。さらに、当該観察画像OFでは、被写体像SIの大きさは、画像表示部71が横置き状態で設置された場合での被写体像SIの大きさよりも小さいものとなる。
本実施の形態1では、円形の上下部分がそれぞれカットされた被写体像SI全体を表示画面Sc内に収めるために、ステップS9を実行し、直径DMが基準閾値を超える場合(ステップS9:Yes)には、被写体像SIの拡大縮小率をデフォルト値よりも小さい値に設定している(ステップS10)。すなわち、被写体像SIを画像表示部71が横置き状態で設置されている場合での被写体像SIに対して縮小している(ステップS12)。
すなわち、画像表示部71を横置き状態から縦置き状態に変更すれば、表示画面Scの短辺Sc1が横方向となることで横幅が小さくなり、画像表示部71の近傍に立つ人の動線を確保することができる。また、画像表示部71を横置き状態から縦置き状態に変更しても、観察画像OF内の被写体像SIは、画像表示部71の設置状態に対応した姿勢(被写体像SIの上下方向が鉛直方向に沿う姿勢)となる。このため、画像表示部71の近傍に立つ人の動線を確保した後、画像表示部71を縦置き状態から横置き状態に改めて変更する必要がない。
したがって、本実施の形態1に係る内視鏡用画像処理装置92によれば、画像表示部71の設置場所を移動する煩雑な作業を不要とし、利便性の向上を図ることができる、という効果を奏する。
このため、例えば、細径の内視鏡で構成された挿入部2にて取り込まれた被写体像SIを観察する場合において、画像表示部71を横置き状態から縦置き状態に変更しても、被写体像SIの大きさを不要に小さくすることなく、横置き状態と縦置き状態とで同一の大きさの被写体像SIを観察することができる。
このため、例えば、太径の内視鏡で構成された挿入部2にて取り込まれた被写体像SIを観察する場合において、画像表示部71を横置き状態から縦置き状態に変更しても、被写体像SI全体を観察することができる。
このため、画像表示部71を横置き状態で設置した場合には、表示画面Scの中心領域に被写体像SIが位置付けられる。一方、画像表示部71を縦置き状態で設置した場合には、表示画面Scの上方領域に被写体像SIが位置付けられる。したがって、画像表示部71を横置き状態及び縦置き状態のいずれの設置状態で設置した場合であっても、被写体像SIを観察し易い表示形態を実現することができる。
次に、本発明の実施の形態2について説明する。
以下では、上述した実施の形態1と同様の構成には同一符号を付し、その詳細な説明は省略または簡略化する。
図9は、本発明の実施の形態2に係る内視鏡装置1Aの構成を示すブロック図である。なお、図9では、説明の便宜上、図2と同様に、光源装置3、ライトガイド4、及び第3伝送ケーブル10の図示を省略している。
上述した実施の形態1に係る内視鏡装置1では、内視鏡用画像処理装置92は、制御装置9に設けられていた。
これに対して本実施の形態2に係る内視鏡装置1Aでは、図9に示すように、制御装置9の代わりに内視鏡用画像処理装置92を省略した制御装置9Aを採用し、表示装置7の代わりに内視鏡用画像処理装置92を搭載した表示装置7Aを採用している。
画像処理部93は、画像取得部91にて取得された撮像画像PFに対して種々の画像処理を施す。当該画像処理としては、例えば、ゲイン調整、ホワイトバランス調整、ガンマ補正、輪郭強調補正等の既知の画像処理を挙げることができる。そして、画像処理部93は、第2伝送ケーブル8を介して、当該画像処理後の撮像画像PFに応じた信号を表示装置7A(内視鏡用画像処理装置92)に出力する。
ここまで、本発明を実施するための形態を説明してきたが、本発明は上述した実施の形態1,2によってのみ限定されるべきものではない。
上述した実施の形態1,2では、本発明に係る内視鏡用画像処理装置92を制御装置9や表示装置7Aに搭載していたが、これに限られない。例えば、本発明に係る内視鏡用画像処理装置92を制御装置及び表示装置とは別体となるモジュールで構成し、当該制御装置及び表示装置間の信号伝送路に設けた構成を採用しても構わない。
上述した実施の形態1,2において、図10Aまたは図10Bに示すように、観察画像OF内の被写体像SIを除く領域BIに各種情報(例えば、被検体情報(例えばID、生年月日、名前等)、挿入部2の識別情報(例えばIDや検査対応項目)、及び検査内容等)を表示するように構成しても構わない。
上述した実施の形態1,2では、画像表示部71は、その背面の略中心位置が支柱721に接続され、当該背面の略中心位置を中心として回動可能に構成されていたが、これに限られず、図11Aまたは図11Bに示す表示装置7Bを採用しても構わない。
表示装置7Bでは、画像表示部71は、その背面において長手方向の一端側が支柱721に接続され、当該長手方向の一端側を中心として回動可能に構成されている。
このように構成した場合には、図3Bと図11Bとを比較して分かるように、画像表示部71を横置き状態から縦置き状態に変更した場合において、画像表示部71の横方向片側(図3B,図11B中、右側)の空間を大きく空けることができる。したがって、画像表示部71の近傍に立つ人の動線を十分に確保することができる。
さらに、本明細書においてフローチャートを用いて説明した処理のアルゴリズムは、プログラムとして記述することが可能である。このようなプログラムは、コンピュータ内部の記録部に記録してもよいし、コンピュータ読み取り可能な記録媒体に記録してもよい。プログラムの記録部または記録媒体への記録は、コンピュータまたは記録媒体を製品として出荷する際に行ってもよく、あるいは、通信ネットワークを介したダウンロードにより行ってもよい。
2 挿入部(内視鏡)
3 光源装置
4 ライトガイド
5 内視鏡用撮像装置
6 第1伝送ケーブル
7,7A,7B 表示装置
8 第2伝送ケーブル
9,9A 制御装置
10 第3伝送ケーブル
51 レンズユニット
52 撮像部
71 画像表示部
72 支持台
73 状態検出部
91 画像取得部
92 内視鏡用画像処理装置
93 画像処理部
100 内視鏡装置
101 内視鏡
102 内視鏡用撮像装置
103 制御装置
104 表示装置
201 器材台
202 電気メス装置
203 麻酔装置
204 周辺機器
721 支柱
722 脚部
921 設置状態認識部
922 被写体像判別部
923 倍率設定部
924 映像信号生成部
BD ベッド
BI 領域
CN1,CN2 コネクタ
D1 執刀医
D2,D3 助手
D4 ナース
D5 麻酔科医
DM 直径
L1,L2 水平ライン
OF 観察画像
PF 撮像画像
PFO 中心位置
SB 被検体
Sc 表示画面
Sc1 短辺(第1の辺)
Sc2 長辺(第2の辺)
ScO 中心位置
SI 被写体像
SI1〜SI4 交点
SIO 中心位置
Claims (15)
- 内視鏡にて取り込まれた被写体像を含む撮像画像を処理して映像信号を生成するとともに、当該映像信号に基づく観察画像を表示する画像表示部に当該映像信号を出力する内視鏡用画像処理装置であって、
前記画像表示部は、
前記観察画像を表示する表示画面における第1の辺が当該第1の辺に交差する第2の辺よりも短く構成されているとともに、前記第1の辺が鉛直方向に沿う第1の設置状態と前記第2の辺が鉛直方向に沿う第2の設置状態とにそれぞれ設置可能に構成され、
当該内視鏡用画像処理装置は、
前記画像表示部が前記第1の設置状態及び前記第2の設置状態のいずれの設置状態で設置されているかを認識する設置状態認識部と、
前記観察画像内の前記被写体像が前記画像表示部の設置状態に対応した姿勢となる前記映像信号を生成する映像信号生成部と、
前記撮像画像内での前記被写体像の大きさを判別する被写体像判別部と、
前記設置状態認識部による認識結果、及び前記被写体像判別部による判別結果に基づいて、前記被写体像の拡大縮小率を設定する倍率設定部とを備え、
前記映像信号生成部は、
前記倍率設定部にて設定された拡大縮小率で前記被写体像の大きさを拡大縮小した前記映像信号を生成する
ことを特徴とする内視鏡用画像処理装置。 - 前記倍率設定部は、
前記撮像画像内での前記被写体像の大きさが前記表示画面における前記第1の辺の長さ寸法に対応する閾値以下である場合には、前記第1の設置状態での前記被写体像の拡大縮小率と前記第2の設置状態での前記被写体像の拡大縮小率とを同一の値に設定する
ことを特徴とする請求項1に記載の内視鏡用画像処理装置。 - 前記倍率設定部は、
前記撮像画像内での前記被写体像の大きさが前記表示画面における前記第1の辺の長さ寸法に対応する閾値を超える場合には、前記第1の設置状態での前記被写体像の拡大縮小率よりも前記第2の設置状態での前記被写体像の拡大縮小率を小さい値に設定する
ことを特徴とする請求項1または2に記載の内視鏡用画像処理装置。 - 前記撮像画像内での前記被写体像の位置を判別する被写体像判別部を備え、
前記映像信号生成部は、
前記画像表示部が前記第1の設置状態に設置されている場合には、前記撮像画像内での前記被写体像の位置に基づいて、前記観察画像内の中央領域に前記被写体像を位置付けた前記映像信号を生成する
ことを特徴とする請求項1〜3のいずれか一つに記載の内視鏡用画像処理装置。 - 前記撮像画像内での前記被写体像の位置を判別する被写体像判別部を備え、
前記映像信号生成部は、
前記画像表示部が前記第2の設置状態に設置されている場合には、前記撮像画像内での前記被写体像の位置に基づいて、前記観察画像内の上方領域に前記被写体像を位置付けた前記映像信号を生成する
ことを特徴とする請求項1〜4のいずれか一つに記載の内視鏡用画像処理装置。 - 被検体内に挿入され、被写体像を取り込む内視鏡と、
前記内視鏡の接眼部に着脱自在に接続され、前記被写体像を撮像して撮像画像を生成する内視鏡用撮像装置と、
前記内視鏡用撮像装置の動作を制御する制御装置と、
請求項1〜5のいずれか一つに記載の内視鏡用画像処理装置と、
前記内視鏡用画像処理装置から出力される映像信号に基づく観察画像を表示する画像表示部を有する表示装置とを備える
ことを特徴とする内視鏡装置。 - 前記内視鏡用画像処理装置は、
前記制御装置に設けられている
ことを特徴とする請求項6に記載の内視鏡装置。 - 前記内視鏡用画像処理装置は、
前記表示装置に設けられている
ことを特徴とする請求項6に記載の内視鏡装置。 - 内視鏡にて取り込まれた被写体像を含む撮像画像を処理して映像信号を生成するとともに、当該映像信号に基づく観察画像を表示する画像表示部に当該映像信号を出力する内視鏡用画像処理装置の作動方法であって、
前記画像表示部は、
前記観察画像を表示する表示画面における第1の辺が当該第1の辺に交差する第2の辺よりも短く構成されているとともに、前記第1の辺が鉛直方向に沿う第1の設置状態と前記第2の辺が鉛直方向に沿う第2の設置状態とにそれぞれ設置可能に構成され、
前記内視鏡用画像処理装置は、
前記画像表示部が前記第1の設置状態及び前記第2の設置状態のいずれの設置状態で設置されているかを認識する設置状態認識部と、
前記観察画像内の前記被写体像が前記画像表示部の設置状態に対応した姿勢となる前記映像信号を生成する映像信号生成部とを備え、
当該内視鏡用画像処理装置の作動方法は、
前記設置状態認識部が、前記画像表示部が前記第1の設置状態及び前記第2の設置状態のいずれの設置状態で設置されているかを認識する設置状態認識ステップと、
前記映像信号生成部が、前記観察画像内の前記被写体像が前記画像表示部の設置状態に対応した姿勢となる前記映像信号を生成する映像信号生成ステップとを含む
ことを特徴とする内視鏡用画像処理装置の作動方法。 - 前記内視鏡用画像処理装置は、
前記撮像画像内での前記被写体像の大きさを判別する被写体像判別部と、
前記設置状態認識部による認識結果、及び前記被写体像判別部による判別結果に基づいて、前記被写体像の拡大縮小率を設定する倍率設定部とをさらに備え、
当該内視鏡用画像処理装置の作動方法は、
前記被写体像判別部が、前記撮像画像内での前記被写体像の大きさを判別する被写体像判別ステップと、
前記倍率設定部が、前記設置状態認識ステップによる認識結果、及び前記被写体像判別ステップによる判別結果に基づいて、前記被写体像の拡大縮小率を設定する倍率設定ステップとを含み、
前記映像信号生成ステップでは、
前記倍率設定ステップにて設定された拡大縮小率で前記被写体像の大きさを拡大縮小した前記映像信号を生成する
ことを特徴とする請求項9に記載の内視鏡用画像処理装置の作動方法。 - 請求項9または10に記載の内視鏡用画像処理装置の作動方法を当該内視鏡用画像処理装置に実行させる
ことを特徴とする画像処理プログラム。 - 内視鏡にて取り込まれた被写体像を含む撮像画像を処理して映像信号を生成するとともに、当該映像信号に基づく観察画像を表示する画像表示部に当該映像信号を出力する内視鏡用画像処理装置であって、
前記画像表示部は、
前記観察画像を表示する表示画面における第1の辺が当該第1の辺に交差する第2の辺よりも短く構成されているとともに、前記第1の辺が鉛直方向に沿う第1の設置状態と前記第2の辺が鉛直方向に沿う第2の設置状態とにそれぞれ設置可能に構成され、
当該内視鏡用画像処理装置は、
前記画像表示部が前記第1の設置状態及び前記第2の設置状態のいずれの設置状態で設置されているかを認識する設置状態認識部と、
前記観察画像内の前記被写体像が前記画像表示部の設置状態に対応した姿勢となる前記映像信号を生成する映像信号生成部とを備える
ことを特徴とする内視鏡用画像処理装置。 - 前記画像表示部の設置状態に応じて、大きさが異なる領域に情報を表示する
ことを特徴とする請求項12に記載の内視鏡用画像処理装置。 - 前記第1の設置状態では、
前記表示画面の中央領域に前記被写体像を表示し、前記中央領域の少なくとも左右の一方に情報を表示し、
前記第2の設置状態では、
前記表示画面の上部領域に前記被写体像を表示し、前記表示画面の下部領域に情報を表示する
ことを特徴とする請求項12に記載の内視鏡用画像処理装置。 - 前記情報は、
被検体情報、前記内視鏡の識別情報、及び検査内容の少なくとも1つである
ことを特徴とする請求項13または14に記載の内視鏡用画像処理装置。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016198383A JP6818496B2 (ja) | 2016-10-06 | 2016-10-06 | 内視鏡用画像処理装置、内視鏡装置、内視鏡用画像処理装置の作動方法、及び画像処理プログラム |
US15/710,207 US10729308B2 (en) | 2016-10-06 | 2017-09-20 | Image processing device for endoscope, endoscope device, image processing method of image processing device for endoscope, and image processing program |
US16/907,333 US11744438B2 (en) | 2016-10-06 | 2020-06-22 | Image processing device for endoscope, endoscope device, image processing method of image processing device for endoscope, and image processing program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016198383A JP6818496B2 (ja) | 2016-10-06 | 2016-10-06 | 内視鏡用画像処理装置、内視鏡装置、内視鏡用画像処理装置の作動方法、及び画像処理プログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2018057656A JP2018057656A (ja) | 2018-04-12 |
JP2018057656A5 JP2018057656A5 (ja) | 2019-11-07 |
JP6818496B2 true JP6818496B2 (ja) | 2021-01-20 |
Family
ID=61830338
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016198383A Active JP6818496B2 (ja) | 2016-10-06 | 2016-10-06 | 内視鏡用画像処理装置、内視鏡装置、内視鏡用画像処理装置の作動方法、及び画像処理プログラム |
Country Status (2)
Country | Link |
---|---|
US (2) | US10729308B2 (ja) |
JP (1) | JP6818496B2 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10980397B1 (en) * | 2020-02-21 | 2021-04-20 | Ambu A/S | Video processing device |
US11109741B1 (en) | 2020-02-21 | 2021-09-07 | Ambu A/S | Video processing apparatus |
US11166622B2 (en) | 2020-02-21 | 2021-11-09 | Ambu A/S | Video processing apparatus |
US10835106B1 (en) | 2020-02-21 | 2020-11-17 | Ambu A/S | Portable monitor |
CN113256625A (zh) * | 2021-06-29 | 2021-08-13 | 北京天星博迈迪医疗器械有限公司 | 一种电子设备和识别装置 |
CN114466145B (zh) * | 2022-01-30 | 2024-04-12 | 北京字跳网络技术有限公司 | 视频处理方法、装置、设备和存储介质 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6690410B1 (en) * | 1999-06-09 | 2004-02-10 | Olympus Optical Co., Ltd. | Image processing unit with expandable image signal processing capability and endoscopic imaging system |
US20020033836A1 (en) * | 2000-06-06 | 2002-03-21 | Smith Scott R. | Device and method for changing the orientation and configuration of a display of an electronic device |
KR100411631B1 (ko) * | 2001-10-18 | 2003-12-18 | 주식회사 메디미르 | 형광 내시경 장치 및 그 장치를 이용한 진단부위 조상 방법 |
JP4297649B2 (ja) | 2002-05-31 | 2009-07-15 | オリンパス株式会社 | 医療装置及び医療装置の制御方法 |
JP2004240118A (ja) | 2003-02-05 | 2004-08-26 | Honko Mfg Co Ltd | 表示装置並びに表示装置を用いた広告方法 |
US20040201595A1 (en) * | 2003-04-11 | 2004-10-14 | Microsoft Corporation | Self-orienting display |
US20040263424A1 (en) * | 2003-06-30 | 2004-12-30 | Okuley James M. | Display system and method |
JP4882301B2 (ja) | 2005-07-28 | 2012-02-22 | ソニー株式会社 | 表示装置、表示制御方法、プログラム、および記録媒体 |
JP5315902B2 (ja) | 2008-10-01 | 2013-10-16 | 富士通株式会社 | 情報処理装置および表示制御方法 |
JP5842422B2 (ja) | 2011-07-13 | 2016-01-13 | 株式会社Jvcケンウッド | タッチパネル操作装置、タッチパネル操作装置の制御方法およびプログラム |
JP5921404B2 (ja) | 2012-09-28 | 2016-05-24 | 株式会社東芝 | 情報表示装置、情報表示方法及びプログラム |
-
2016
- 2016-10-06 JP JP2016198383A patent/JP6818496B2/ja active Active
-
2017
- 2017-09-20 US US15/710,207 patent/US10729308B2/en active Active
-
2020
- 2020-06-22 US US16/907,333 patent/US11744438B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US11744438B2 (en) | 2023-09-05 |
US20200315425A1 (en) | 2020-10-08 |
US10729308B2 (en) | 2020-08-04 |
JP2018057656A (ja) | 2018-04-12 |
US20180098684A1 (en) | 2018-04-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6818496B2 (ja) | 内視鏡用画像処理装置、内視鏡装置、内視鏡用画像処理装置の作動方法、及び画像処理プログラム | |
CN108697304B (zh) | 医疗用信息处理装置、信息处理方法、医疗用信息处理系统 | |
US10701339B2 (en) | Image processing device and image processing method | |
JP7226325B2 (ja) | 焦点検出装置および方法、並びにプログラム | |
EP3705018A1 (en) | Surgical arm system and surgical arm control system | |
US11503980B2 (en) | Surgical system and surgical imaging device | |
US20220008156A1 (en) | Surgical observation apparatus, surgical observation method, surgical light source device, and surgical light irradiation method | |
WO2021171465A1 (ja) | 内視鏡システム及び内視鏡システムによる管腔走査方法 | |
JP2021003531A (ja) | 手術支援システム、制御装置及び制御方法 | |
EP3603562B1 (en) | Medical observation apparatus and observation field correction method | |
CN110536629B (zh) | 手术图像处理设备、图像处理方法和手术系统 | |
WO2018179979A1 (ja) | 制御装置、外部機器、医療用観察システム、制御方法、表示方法およびプログラム | |
US11883120B2 (en) | Medical observation system, medical signal processing device, and medical signal processing device driving method | |
JP7092111B2 (ja) | 撮像装置、映像信号処理装置および映像信号処理方法 | |
US20210278653A1 (en) | Control device and medical observation system | |
US11778325B2 (en) | Image processing apparatus, image processing method, and image processing program | |
WO2017145606A1 (ja) | 画像処理装置、画像処理方法及び内視鏡システム | |
WO2020009127A1 (ja) | 医療用観察システム、医療用観察装置、及び医療用観察装置の駆動方法 | |
WO2018043205A1 (ja) | 医療用画像処理装置、医療用画像処理方法、プログラム | |
JP2021145726A (ja) | 医療用画像処理装置、医療用観察システム及び医療用画像処理装置の作動方法 | |
CN113613540A (zh) | 图像处理系统、图像处理装置和图像处理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190925 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190925 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200825 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200908 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201008 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201020 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201104 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201208 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201228 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6818496 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |