JP3766598B2

JP3766598B2 - Observation system

Info

Publication number: JP3766598B2
Application number: JP2001035768A
Authority: JP
Inventors: 征治山口
Original assignee: Olympus Corp
Current assignee: Olympus Corp
Priority date: 2001-02-13
Filing date: 2001-02-13
Publication date: 2006-04-12
Anticipated expiration: 2021-04-12
Also published as: JP2001290103A

Description

【０００１】
【発明の属する技術分野】
本発明は、ヘッドマウントディスプレイに視差のある画像を表示して３次元像を再現する観察システムに関する。
【０００２】
【従来の技術】
内視鏡の先端にＣＣＤ等の固体撮像素子を２つ設け、撮像された左右の像を基に、被検体の３次元情報を得ることができる点が従来より知られている。例えば、特開平４−１６８１２号公報には、先端部に２つの対物光学系及びＣＣＤを設けて被検体を立体視できるステレオ内視鏡が開示されている。
【０００３】
また、近年、ヘッドマウントディスプレイ（以下、ＨＭＤと略記）という液晶モニタを左右に設けたものを、顔に装着することによって、３次元像を再現することが行われている。
【０００４】
よって、このＨＭＤを用いて、ステレオ内視鏡より得られる視差のある被検体像を立体的に観察することができるようになる。
【０００５】
したがって、内視鏡を用いた診断、治療をより高度なものへ進歩させることができるといえる。
【０００６】
【発明が解決しようとする課題】
しかしながら、ＨＭＤは、通常液晶ディスプレイを使用者の両眼の前にメガネのように装着させる構造となっている。このため、使用者はＨＭＤに表示されている像以外は目に入らないことになる。
【０００７】
つまり、ＨＭＤを内視鏡システムに応用した場合、術者は、ＨＭＤによって表示される立体的な内視鏡像しか視野の中に入らず、内視鏡の操作や処置具を内視鏡に挿入する等の操作をしようとしても、それを目で確認しながら操作することはできない。
【０００８】
よって、立体像の観察時に装置の各種操作が容易にできず、内視鏡診断に要する時間も長くなる、というような問題点も発生する。
【０００９】
本発明は、これらの事情に鑑みてなされたもので、立体像の観察時に前方視野を得ることができ、これにより立体像の観察と共に前方視野によって装置の各種操作の確認が可能となり、操作性を向上させることができる立体像観察システムを提供することを目的としている。
【００１０】
また、本発明は、液晶モニタに表示する像の明るさを制御することのみで、術者の視野の確保と内視鏡像の観察との切換えを行うことができ、内視鏡像を立体観察しながら各種操作を容易に行うことができる観察システムを提供することを目的としている。
【００１１】
さらに、本発明は、室内の照明光量を調整することのみで、術者の視野の確保と内視鏡像の観察との切換えを行うことができ、内視鏡像を立体観察しながら各種操作を容易に行うことができる観察システムを提供することを目的としている。
【００１２】
【課題を解決するための手段】
上記の目的を達成するために本発明による観察システムは、被検体の観察像を撮像する撮像手段と、前記撮像手段からの撮像信号に基づいて画像信号を生成する画像信号処理手段と、前記画像信号処理手段とは別体であって、当該画像信号処理手段において生成した前記画像信号に基づいた観察画像を表示する表示画面を有した、顔面に装着可能な表示装置と、被観察像を生じる観察体を照明する照明光を発生する照明手段と、前記表示装置に設けられた、前記照明手段の光量を調節するための照明光調整操作部と、前記照明光調整操作部の操作に応じて、前記照明手段の光量を調節する照明光調節手段と、前記表示装置に設けられた、前記表示画面から出射される第１の入射光と当該第１の入射光とは異なる方向からの入射光であって前記照明光調整操作部の操作に応じて前記照明光調節手段において調節された前記照明光により照らされた前記観察体像に係る第２の入射光とを入射可能なハーフミラーと、を備えたことを特徴とする。
【００１４】
【発明の実施の形態】
以下、図面を参照して本発明の実施形態を説明する。
図１ないし図８は本発明の第１実施形態に係り、図１は立体視内視鏡システムの全体構成を示す構成説明図、図２はステレオスコープの構成を示す説明図、図３はステレオスコープによる超音波の送受を説明する説明図、図４はヘッドマウントディスプレイ（ＨＭＤ）の構成を示す説明図、図５はＨＭＤの側面図、図６はビデオプロセッサの構成を示すブロック図、図７は超音波距離検出部の構成を示すブロック図、図８は映像信号合成部とその周辺部の構成を示すブロック図である。
【００１５】
本実施形態は、立体像観察システムを内視鏡装置に適用した立体視内視鏡システムの構成例である。
【００１６】
図１に第１実施形態の立体視内視鏡システムの全体構成を示す。
立体視内視鏡システム１は、立体視可能なステレオスコープ２と、このステレオスコープ２と接続されたビデオプロセッサ３とを有しており、ステレオスコープ２で得られた視差のある被写体像を基にビデオプロセッサ３で画像信号を生成し、左用および右用のモニタ４ａ，４ｂに内視鏡で得られた左右の像をそれぞれ表示するようになっている。また、ステレオスコープ２には、照明光を供給するための光源５が接続されている。
【００１７】
ビデオプロセッサ３には、モニタ４ａ，４ｂと同様に、内視鏡像を表示するＨＭＤ６が接続されている。このＨＭＤ６は顔面装着用モニタ手段として術者の顔に装着され、それによって術者は、内視鏡像を３次元の立体像として観察できるようになっている。
【００１８】
図２に、ステレオスコープ２の構成を示す。
ステレオスコープ２は、その挿入部先端部に撮像部としての左右用のＣＣＤ７ａ，７ｂが設けられており、これにより２枚の被検体像を撮像する。このＣＣＤ７ａ，７ｂは、ビデオプロセッサ３からの駆動信号によって駆動され、出力信号は前置増幅器８ａ，８ｂによってそれぞれ増幅され、ビデオプロセッサ３へ出力されるようになっている。
【００１９】
また、内視鏡の先端部には、超音波振動子９が設けられている。この超音波振動子９は、内視鏡の先端と、被検体との間の距離を測定するためのもので、図３に示すように被検体１０に対して超音波を送受するためのものである。この送受波した超音波信号より、後述のように距離が求められるようになっている。
【００２０】
また、内視鏡の挿入部基端部の操作部１１には、静止画像を得るためのフリーズスイッチ１２と、後述する通常画像と実物大画像とを切換える拡大切換スイッチ１３と、内視鏡像とＨＭＤ視野像とを切換える視野切換スイッチ１４とが設けられている。
【００２１】
前記ＨＭＤ６の構成を図４および図５を参照して説明する。
ＨＭＤ６は、内側（目と対面する側）に像を表示するための左右の液晶ディスプレイ１５ａ，１５ｂを有する。前記ビデオプロセッサ３と液晶ディスプレイ１５ａ，１５ｂとにより画像表示手段が構成されている。またＨＭＤ６の表面側には、術者の視野の代りに、前方視野像を撮像するＣＣＤ１６ａ，１６ｂが設けられている。このＣＣＤ１６ａ，１６ｂと後述するビデオプロセッサ３内のＨＭＤ用信号処理部，信号合成部とにより前方視野像再現手段が構成されている。
【００２２】
またＨＭＤ６の側面には、前に述べた内視鏡の操作部１１に設けられている拡大切換スイッチ，視野切換スイッチと同じ機能を有する切換スイッチ１７が設けられている。そして、ＨＭＤ６の他の側面よりケーブルが延出しており、このケーブルを介してビデオプロセッサ３と接続されるようになっている。
【００２３】
次に、ビデオプロセッサ３の構成を図６を参照して説明する。
ビデオプロセッサ３は、内視鏡先端部に設けられているＣＣＤ７ａ，７ｂを駆動するため、ＣＣＤ駆動信号を発生する内視鏡用ＣＣＤ駆動部１８を有している。この内視鏡用ＣＣＤ駆動部１８等が接続されたコネクタ１９を介してステレオスコープ２と接続されるようになっている。内視鏡用ＣＣＤ駆動部１８によって駆動されたＣＣＤ７ａ，７ｂで得られた撮像信号は、コネクタ１９を介して内視鏡映像信号処理部２０へ入力される。内視鏡映像信号処理部２０では、前記撮像信号を処理してモニタに表示可能な信号とし、モニタ画像出力部２１を介して、モニタ４ａ，４ｂへ映像信号を出力する。また、内視鏡映像信号処理部２０で処理された映像信号は、映像信号合成部２２にも入力されるようになっている。
【００２４】
前記コネクタ１９には超音波距離検出部２３も接続されている。超音波距離検出部２３は、ステレオスコープ２に設けられた超音波振動子９を駆動し、また、被検体１０から反射された超音波を受信し、このときの送受信信号の位相のズレに基づいて、ステレオスコープ２の先端と被検体１０との間の距離を測定する。超音波距離検出部２３で検出された距離情報は、映像信号合成部２２へ入力されるようになっている。
【００２５】
また、ビデオプロセッサ３には、ＨＭＤ６に設けられたＣＣＤ１６ａ，１６ｂを駆動するためのＨＭＤ用ＣＣＤ駆動部２４が設けられている。ＨＭＤ用ＣＣＤ駆動部２４にはコネクタ２５が接続され、このコネクタ２５を介してＨＭＤ６と接続されるようになっている。前記ＣＣＤ１６ａ，１６ｂは、術者がＨＭＤを装着すると、液晶ディスプレイ１５ａ，１５ｂに表示されるもの以外は何も見えなくなるので、術者の目の代りに視野を確保するために前方視野を撮像するものである。ＣＣＤ１６ａ，１６ｂで撮像された撮像信号は、コネクタ２５を介してＨＭＤ映像信号処理部２６で信号処理され、映像信号合成部２２へ入力されるようになっている。
【００２６】
映像信号合成部２２は、ステレオスコープ２から得られた像およびＨＭＤ用ＣＣＤ１６ａ，１６ｂから得られた像をＨＭＤ６で表示するための処理を行うものであり、例えば、内視鏡像かＨＭＤの前方視野像（以下、ＨＭＤ像と略記）のどちらかを選択して表示するように合成処理を行う。または超音波距離検出部２３で得られた距離情報に基づき、画像の拡大・縮小を行う。さらには、動画像と静止画像を表示させるための合成処理等の各種処理を行うものである。このような処理をされた映像信号は、ＨＭＤ画像出力部２７を介してＨＭＤ６へ出力されるようになっている。
【００２７】
前記映像信号合成部２２での処理の指示は、ステレオスコープ２およびＨＭＤ６に設けられた各スイッチ、あるいはこれと同様に入力部２８から入力される命令に基づき動作するもので、制御部２９を介して行われるようになっている。すなわち、図示しないが、ステレオスコープ２の拡大切換スイッチ１３，視野切換スイッチ１４、ＨＭＤ６の切換スイッチ１７は、入力部２８同様に制御部２９に接続されている。
【００２８】
また、制御部２９には状態表示部３０が接続されており、制御部２９の制御状態を状態表示部３０へ表示させ、術者以外の人に制御状態を告知できるようになっている。
【００２９】
さらに、制御部２９は各種タイミングパルスを作成し、各部の動作を制御するようになっている。
【００３０】
次に、ビデオプロセッサ３の内部回路をさらに詳しく説明する。
図７は、超音波距離検出部２３の詳細の構成を示している。
【００３１】
超音波距離検出部２３は、超音波振動子９を駆動するため超音波送信回路３１が設けられ、ここから送出されるパルス信号によって、超音波振動子９が駆動される。また、超音波受信回路３２が設けられ、超音波振動子９で受信した超音波信号は、超音波受信回路３２によって検波される。
【００３２】
超音波送信回路３１と超音波受信回路３２とは、距離演算回路３３に接続されている。この距離演算回路３３は、送信時と受信時の超音波パルスの位相のズレに基づき、ステレオスコープ２先端と、被検体１０との間の距離を演算するものである。距離演算回路３３は、演算結果に基づき距離に比例した信号を、拡大・縮小制御信号発生回路３４に出力する。
【００３３】
拡大・縮小制御信号発生回路３４は、以下に述べる機能を発揮させるためのものである。
【００３４】
つまり、術者がＨＭＤ６を装着した時、あたかも自分の目の前に実寸大の被検体が存在して見えるように、距離演算回路３３の出力信号に基づいてステレオスコープ２で得られた像を実寸大に拡大または縮小するための制御信号を発生するものである。
【００３５】
これによって、術者は感覚的に被検体の大きさを知ることができる。
【００３６】
拡大・縮小制御信号発生回路３４から出力される制御信号は、映像信号合成部２２へ入力されるようになっている。
【００３７】
次に、図８を用いて映像信号合成部２２およびその周辺部の機能構成の詳細を説明する。
【００３８】
ステレオスコープ２から出力された撮像信号は、内視鏡映像信号処理部２０に設けられたＬ用およびＲ用映像信号処理回路３５ａ，３５ｂで処理される。また、Ｌ用，Ｒ用映像信号処理回路３５ａ，３５ｂから出力される信号は、それぞれＬ用，Ｒ用拡大・縮小回路３６ａ，３６ｂに入力されるとともにモニタ画像出力部２１へ入力されるようになっている。
【００３９】
Ｌ用およびＲ用拡大・縮小回路３６ａ，３６ｂは、前述した超音波距離検出部２３に設けられた拡大・縮小制御信号発生回路３４が出力する制御信号に基づき、Ｌ用およびＲ用の内視鏡像をそれぞれ、同じように拡大・縮小するものである。
【００４０】
このＬ用，Ｒ用拡大・縮小回路３６ａ，３６ｂは、常に内視鏡像の拡大・縮小を行うわけではなく、入力部２８によって、実寸大表示を指示された時のみ拡大・縮小が行われる。これは、内視鏡の診断時に常に実寸大表示していると術者は常に目の前に被検体があるように見え、不快感を覚えるようなことがあるため、これを防止するようにしている。このため、超音波距離検出部２３の出力信号は、スイッチ３７を介してＬ用，Ｒ用拡大・縮小回路３６ａ，３６ｂに入力されるようになっている。
【００４１】
入力部２８によって実寸大表示が指定されると、制御部２９は、像の拡大・縮小処理をするため、スイッチ３７を閉状態とし、超音波距離検出部２３からの制御信号をＬ用，Ｒ用拡大・縮小回路３６ａ，３６ｂに入力する。これによって、ＨＭＤ６には実寸大の内視鏡像が表示されることとなる。
【００４２】
また、スイッチ３７が開状態のときは、Ｌ用，Ｒ用拡大・縮小回路３６ａ，３６ｂは拡大・縮小処理を行わず、ステレオスコープ２で得られた映像信号は、そのまま次段の回路、すなわちＬ用，Ｒ用画像メモリ３８ａ，３８ｂ及び画像重合せ回路３９ａ，３９ｂへ出力されるようになっている。
【００４３】
Ｌ用画像メモリ３８ａおよびＲ用画像メモリ３８ｂは、それぞれフリーズ用のメモリである。よって、入力部２８等でフリーズが指示されると、Ｌ用，Ｒ用拡大・縮小回路３６ａ，３６ｂから出力される映像信号を記憶し、この映像信号を画像重合せ回路３９ａ，３９ｂへ出力する。このＬ用，Ｒ用画像メモリ３８ａ，３８ｂは、それぞれ制御部２９によってその動作が制御されるようになっている。
【００４４】
画像重合せ回路３９ａ，３９ｂは、Ｌ用，Ｒ用画像メモリ３８ａ，３８ｂの出力信号がそれぞれ入力されるとともに、Ｌ用，Ｒ用拡大・縮小回路３６ａ，３６ｂから出力された映像信号も、そのまま入力されるようになっている。この画像重合せ回路３９ａ，３９ｂは、Ｌ用，Ｒ用拡大・縮小回路３６ａ，３６ｂから出力される映像とＬ用，Ｒ用画像メモリ３８ａ，３８ｂで記憶された映像とを重合せて次段の回路へ出力するものである。
【００４５】
つまり、フリーズ指示がされていない場合には、Ｌ用，Ｒ用画像メモリ３８ａ，３８ｂからは映像信号が出力されず、Ｌ用，Ｒ用拡大・縮小回路３６ａ，３６ｂからの映像信号のみが画像重合せ回路３９ａ，３９ｂにそれぞれ入力され、このＬ用，Ｒ用拡大・縮小回路３６ａ，３６ｂから入力された信号をそのまま出力することとなる。
【００４６】
一方、フリーズが指示された場合には、Ｌ用，Ｒ用画像メモリ３８ａ，３８ｂから映像信号が出力される。よって、画像重合せ回路３９ａ，３９ｂは、このＬ用，Ｒ用画像メモリ３８ａ，３８ｂから出力される映像信号とＬ用，Ｒ用拡大・縮小回路３６ａ，３６ｂから出力される映像信号とをそれぞれ重合せて、次段の回路へ出力するようになっている。つまり、動画像と静止画像とを重合せた状態の映像信号を生成している。
【００４７】
前記画像重合せ回路３９ａ，３９ｂの出力信号は、それぞれ切換回路４０ａ，４０ｂにそれぞれ入力されるようになっている。切換回路４０ａ，４０ｂの他方の入力端には、ＨＭＤ映像信号処理部２６の出力信号が入力されるようになっている。ＨＭＤ映像信号処理部２６には、Ｌ用，Ｒ用映像信号処理回路４１ａ，４１ｂが設けられており、ＨＭＤ６に設けられたＣＣＤ１６ａ，１６ｂから得られる撮像信号を処理するようになっている。
【００４８】
切換回路４０ａ，４０ｂは、画像重合せ回路３９ａ，３９ｂから出力される像と、Ｌ用，Ｒ用映像信号処理回路４１ａ，４１ｂで処理された像とを選択するためのものである。つまり、ＨＭＤに内視鏡像を表示するか、ＨＭＤ像を表示するかを切換えるようになっている。この切換えは、入力部２８、またはステレオスコープ２に設けられた視野切換スイッチ１４またはＨＭＤ６に設けられた切換スイッチ１７によって切換操作でき、それに基づき制御部２９が切換回路４０ａ，４０ｂを制御する。
【００４９】
切換回路４０ａ，４０ｂによって選択された内視鏡像またはＨＭＤ像は、ＨＭＤ画像出力部２７を介してＨＭＤ６へ出力される。そして、図４に示したＨＭＤ６の液晶モニタ１５ａ，１５ｂに表示されるようになっている。
【００５０】
次に、本実施形態の作用について説明する。
被検体の観察を行う際には、被検体１０にステレオスコープ２の挿入部を挿入し、ＣＣＤ７ａ，７ｂによって被検体１０を撮像する。ＣＣＤ７ａ，７ｂで得られた撮像信号は、コネクタ１９を介して内視鏡映像信号処理部２０へ入力され、モニタに表示可能な映像信号となるよう処理される。そして、モニタ画像出力部２１を介してモニタ４ａ，４ｂへ出力され、モニタ４ａ，４ｂに内視鏡画像が表示されると共に、映像信号合成部２２へ入力される。映像信号合成部２２の出力画像信号は、ＨＭＤ画像出力部２７を介してＨＭＤ６へ出力され、ＨＭＤ６の液晶ディスプレイ１５ａ，１５ｂに内視鏡画像が表示される。術者はＨＭＤ６を装着して液晶ディスプレイ１５ａ，１５ｂを見ることにより、被検体１０の立体像を得ることができる。
【００５１】
一方、ＨＭＤ６において、ＣＣＤ１６ａ，１６ｂによってＨＭＤ６の前方（すなわち術者の顔の前方）の視野像が撮像される。ＣＣＤ１６ａ，１６ｂで得られた撮像信号は、コネクタ２５を介してＨＭＤ映像信号処理部２６へ入力され、ここで信号処理された後、映像信号合成部２２へ入力される。映像信号合成部２２では、前記内視鏡画像信号とＨＭＤ画像信号とが選択され、ＨＭＤ６へ出力される。
【００５２】
すなわち、本実施形態によれば、ステレオスコープ２で得た内視鏡像とＨＭＤ６のＣＣＤ１６ａ，１６ｂで得られたＨＭＤ前方視野像とのどちらかを選択して、ＨＭＤ６の液晶モニタ１５ａ，１５ｂに像を表示させることができる。
【００５３】
よって、術者はＨＭＤ６を装着したままの状態で、内視鏡像を立体視観察をし、また処置具を用いるなど各種操作を行うときは、一旦ＨＭＤ６にＨＭＤ像を表示させる。これによって、術者はあたかもＨＭＤ６をはずした時のような視野を得ることができ、この状態で処置具等をつかみ、内視鏡内に挿入する等の操作を容易に行うことができる。
【００５４】
そして、処置具の先端が内視鏡に挿入され、処置具を観察せずとも、内視鏡に処置具を挿入することができるようになったときには、ＨＭＤ６には再び内視鏡像を表示させる。
【００５５】
これにより術者は、被検体と処置具先端との位置関係を３次元像として感覚的に距離間をつかむことができる。よって、より迅速に処置具先端を被検体に近づけることができ、また、処置を行うことができる。
【００５６】
このように、内視鏡診断に関する操作性を向上させることができる。
【００５７】
さらに、この実施形態では、超音波を用いて被検体と内視鏡先端との間の距離を測定し、被検体を実物大に表示するように、拡大・縮小回路３６ａ，３６ｂによって画像の拡大・縮小の制御を行っている。よって、処置具と被検体との間の距離を、ＨＭＤ６に実物大に表示される３次元像に基づき、術者がより感覚的に知ることができるという効果を有している。
【００５８】
また、この実物大表示は常に行われるものではなく、必要なときだけ使用できるように切換え機能を有している。よって術者が、実物大表示のみをしていると不快感を覚えるときなどは、所定の大きさの画像（術者が不快感を生じないように、ある程度被検体が遠くに表示されるような画像）を表示することができる。
【００５９】
また、ＨＭＤ６に表示された像を静止画観察したいときにフリーズスイッチ１２を操作してフリーズすると、映像信号合成部２２の画像重合せ回路３９ａ，３９ｂによって、静止画のみでなく静止画と動画が重合された状態の像が、ＨＭＤ６に表示されるようになっている。
【００６０】
これは、ＨＭＤ６に静止画像のみ表示していると、術者は静止画像のみしか観察できなくなり、内視鏡が不用意に動いたときには患者に危険がおよぶこともあるため、リアルタイムの動画像も表示するようにしたものである。すなわち、フリーズした状態でも、現在、内視鏡先端がどのように動いているかを少なくとも感じとれるようにするため、静止画と動画とを重合せて表示する。
【００６１】
これによって、内視鏡先端が不用意に動いて患者を傷つける、というような問題が発生することを防止できる。
【００６２】
以上本発明の第１実施形態を説明したが、その中で切換信号を入力するための手段として、ビデオプロセッサ３に設けられた入力部２８、または、ステレオスコープ２の操作部１１に設けられた各スイッチ、またはＨＭＤ６に設けられた切換えスイッチ１７等がある。
【００６３】
ビデオプロセッサ３に設けられた入力部２８の操作は、術者以外のものでも容易に操作できるものである。また、操作部１１またはＨＭＤ６に設けられたスイッチは、術者が必ずしもスイッチのある場所を確認しなくても、ある程度自在に操作できるように設けられている。
【００６４】
つまり、術者は、内視鏡の操作には慣れており、どこがどのような形状になっているかがわかり、感覚的な操作が可能である。また、ＨＭＤ６に設けられたスイッチも、術者は自分の顔に対してスイッチがどのあたりにあるかは感覚的に知ることができる。よって、術者はＨＭＤ６で立体的な内視鏡像を見ながらフリーズ等の操作を行うことが可能である。
【００６５】
しかし、操作するスイッチが増加する場合等を考えると、やはりスイッチ類の操作は困難になってくる。
【００６６】
よって、例えば図９に示すような音声認識の機能を持たせると、より立体視内視鏡システムの操作性を向上することができる。
【００６７】
音声認識の機能を有した立体視内視鏡システムは、ＨＭＤ６に音声を検出するためのマイク４２が設けられると共に、ビデオプロセッサ３に音声認識装置４４が接続されている。前記マイク４２によって検出された音声信号は、アンテナ４３によって、音声認識装置４４へ送出される。音声認識装置４４には音声認識回路４６が設けられ、前記音声信号がアンテナ４５を介して音声認識回路４６へ入力される。この音声認識回路４６によって術者の音声を認識し、術者の音声による命令に応じてビデオプロセッサの制御等が行われる。
【００６８】
このように、スイッチの操作等を行うことなく、術者の命令に応じてビデオプロセッサの制御等を行うことができ、術者は指先等に神経を使う必要がなくなり術者の負担を軽減することができる。
【００６９】
図１０には第１実施形態の映像信号合成部２２の第１の変形例を示す。なお、同一構成要素については同一符号を付し説明を省略する。
【００７０】
第１実施形態では、画像をフリーズした時、単に得られた動画像と静止画像とを重合せて表示するようにしている。
【００７１】
しかし、画像を単に重合せただけでは、どちらの画像の優先度も同じに表示され見づらい像となってしまう恐れがある。そこで、第１の変形例では、映像信号合成部２２ａにモノクロ・カラー切換回路４７ａ，４７ｂを設けて、フリーズを指示したときには動画像をカラー画像からモノクロ画像に変更し、このモノクロの動画像とカラーの静止画像とを重合せるようにしたものである。
【００７２】
モノクロ・カラー切換回路４７ａ，４７ｂは、フリーズが指示されたときには動画像をモノクロに変換して出力し、フリーズが解除されるとカラーの動画像を出力するようになっており、出力された動画像とカラーの静止画像とが画像重合せ回路３９ａ，３９ｂで重合される。
【００７３】
これによると、実際に観察したい静止画像がカラーで表示され、この像が強調されることになる。よって、観察し易い良好な静止画像を得ることができる。
【００７４】
また、動画像と静止画像の重合せは、カラーとモノクロの画像の重合せだけではなく、輝度の高低の画像を重合せるということも可能である。このように輝度の異なる画像を重合せるようにした第２の変形例を図１１に示す。
【００７５】
この第２の変形例では、映像信号合成部２２ｂにおいて、図１０に示されるモノクロ・カラー切換回路４７ａ，４７ｂの代わりに、それぞれ輝度切換回路４８ａ，４８ｂを設けるようにしている。
【００７６】
輝度切換回路４８ａ，４８ｂは、フリーズが指示されると、入力される動画像の輝度を低くなるよう切換え、輝度の低い動画像を画像重合せ回路３９ａ，３９ｂへ出力する。これによって、輝度の高い静止画像と、輝度の低い動画像とが重合された状態でＨＭＤ６に表示される。また、フリーズが解除されると輝度切換回路４８ａ，４８ｂは高輝度の動画像を出力する。
【００７７】
このように、輝度の異なる画像を重合せた場合においても、実際に観察したい静止画像を強調することができる。
【００７８】
以上まではフリーズ時において動画像と静止画像とを電気的に重合せる方法について述べてきたが、機械的に像を重合せることもできる。
【００７９】
動画像と静止画像とを機械的に重合せる装置の構成例を図１２ないし図１４に示す。
【００８０】
例えば図１２に示すように、ハーフミラー４９を用いてＨＭＤ５０を構成することができる。
【００８１】
つまりＨＭＤ５０には、動画を表示するための第１の液晶モニタ５１と、静止画像を表示するための第２の液晶モニタ５２とが設けられている。これによると、第１の液晶モニタ５１に表示された動画像は、ハーフミラー４９を介して透過されたものを観察することができ、また、第２の液晶モニタ５２に表示された静止画像は、ハーフミラー４９に反射されることで観察することができる。
【００８２】
このようなＨＭＤ５０と接続されるビデオプロセッサ３の映像信号合成部２２は、例えば図１３に示されるように構成することができる。
【００８３】
図からわかるように、映像信号合成部２２ｃには画像重合せ回路は不要となり、Ｌ用，Ｒ用画像メモリ３８ａ，３８ｂから出力される映像信号は、直接静止画用の第２の液晶モニタ５２に入力されるようになっている。また、動画像となるＬ用，Ｒ用拡大・縮小回路３５ａ，３５ｂの出力映像信号は、切換回路４０ａ，４０ｂに直接入力され、切換回路４０ａ，４０ｂからの出力信号が第１の液晶モニタ５１に入力されるようになっている。
【００８４】
これによって、ＨＭＤ５０において動画像と静止画像とを重合せて表示できる。
【００８５】
また図１３に示す回路を用いることにより、動画像用のモニタと静止画像用のモニタの２つのモニタを駆動することができる。
【００８６】
すなわち、図１４に示すように、第１の液晶モニタ５１と第２の液晶モニタ５２とを上下に並べて配置し、２つのモニタを直接観察できるように構成したＨＭＤ５３へ応用することができる。
【００８７】
これによると、動画像と静止画像とが重合されないので、それぞれの像が見やすくなるという効果を有する。
【００８８】
次に図１５を用いて、本発明の第２実施形態を説明する。
図１５は本発明の第２実施形態に係る立体視内視鏡システムの全体構成を示す構成説明図である。
【００８９】
第１実施形態では、ＨＭＤに設けたＣＣＤで得られた前方視野像をＨＭＤ６で表示することで術者の視野を確保するようにしたが、この実施形態ではＨＭＤ６にＣＣＤを設けずに術者の視野を確保できるようにしたものである。
【００９０】
第２実施形態のＨＭＤ６１は、ステレオスコープ２で得られた像を表示するための液晶モニタ６２ａ，６２ｂを上部に有しており、このモニタに表示された像をハーフミラー６３で反射させて、術者が観察できるように構成されている。
【００９１】
また、ＨＭＤ６１には、液晶モニタ６２ａ，６２ｂに表示される像の輝度を調整するための輝度調整ボリューム６４が設けられている。
【００９２】
このＨＭＤ６１と接続されるビデオプロセッサ６５の主要部は、図１５のように構成されている。ビデオプロセッサ６５には、Ｌ用，Ｒ用映像信号処理回路３５ａ，３５ｂの出力側に信号レベル調整回路６６ａ，６６ｂが設けられ、ＨＭＤ６１の輝度調整ボリューム６４に接続されている。すなわち、ＨＭＤ６１に設けられた輝度調整ボリューム６４の操作によって、映像信号の輝度レベルが信号レベル調整回路６６ａ，６６ｂによって調整され、液晶モニタ６２ａ，６２ｂに表示される像の明るさが制御されるようになっている。これにより、内視鏡画像の明るさをコントロールすることができる。
【００９３】
従って、術者が自分の視野を確保しようとするときは、輝度調整ボリューム６４によってモニタに表示される像の明るさを暗くする。すると、周囲の照明の方がモニタの明るさより明るくなるので、術者はハーフミラー６３を介して周囲の状態を視覚できる。
【００９４】
一方、術者が内視鏡像を観察しようとするときは、輝度調整ボリューム６４を調整することによって液晶モニタ６２ａ，６２ｂの像の輝度を上げる。すると、周囲の明るさに対しても、液晶モニタ６２ａ，６２ｂに表示される像の明るさが明るくなり、ハーフミラー６３によって像が反射され内視鏡像を観察できる。
【００９５】
このように、第２実施形態によれば、液晶モニタ６２ａ，６２ｂに表示する像の明るさを制御することのみで、術者の視野の確保と内視鏡像の観察との切換えを行うことができ、内視鏡像を立体観察しながら各種操作を容易に行うことができる。
【００９６】
図１６は本発明の第３実施形態に係る立体視内視鏡システムの全体構成を示す構成説明図である。
【００９７】
第３実施形態は、第２実施形態が液晶モニタに表示される像の輝度を調整するのに対し、室内の照明光量を調整することによって術者の視野の確保するようにしたものである。
【００９８】
第３実施形態のＨＭＤ７１は、第２実施形態と同様に液晶モニタ６２ａ，６２ｂ、及びハーフミラー６３が設けられていると共に、内視鏡室内の照明光を調整するための照明光量調整ボリューム７２が設けられている。
【００９９】
このＨＭＤ７１に接続されるビデオプロセッサ７３は、接続ケーブル７４を介して照明制御部と接続されるようになっている。照明光量調整ボリューム７２からの調光信号は、切換スイッチ７７を介して接続ケーブル７４より照明制御部へ送出されるようになっている。また、切換スイッチ７７の他端にはワイヤレス発信器７５が接続されており、前記照明光量調整ボリューム７２からの調光信号を電波として飛ばして照明制御部へ送出できるようになっている。ワイヤレス発信器７５より発信された調光信号は、ワイヤレス受信器７６で受信されるようになっている。
【０１００】
前記接続ケーブル７４及びワイヤレス受信器７６は、切換スイッチ７８を介して室内照明コントロール装置７９に接続されており、この室内照明コントロール装置７９によって照明ランプ８０の照明光量が調整されるようになっている。また、室内照明コントロール装置７９には内視鏡室内の壁に設けられた光量調整ボリューム８１が接続されており、光量調整ボリューム８１によっても光量調整が可能となっている。
【０１０１】
照明光量調整ボリューム７２からの調光信号は、接続ケーブル７４の接続状態によって送出経路が切換えられる。すなわち、接続ケーブル７４の接続状態によって切換スイッチ７７，７８が自動的に切換えられる。これにより、接続ケーブル７４がビデオプロセッサ７３に接続されている場合は接続ケーブル７４を介して、また、接続ケーブル７４が接続されていない場合は、ワイヤレス発信器７５及びワイヤレス受信器７６によって電波として、室内照明コントロール装置７９へ調光信号が送られる。この調光信号に基づいて室内照明コントロール装置７９で照明ランプ８０の照明光量が調整される。
【０１０２】
このように構成されたシステムによれば、照明光量調整ボリューム７２を操作して室内の照明光量を明るくすると、術者はＨＭＤ７１のハーフミラー６３を介して、室内の様子を視覚することができる。一方、室内照明を暗くすると、液晶モニタ６２ａ，６２ｂに表示された内視鏡像がハーフミラー６３によって反射され、術者はこれに基づき３次元の内視鏡像を観察することができる。
【０１０３】
従って、室内の照明光量を調整することのみで、第２実施形態と同様に、術者の視野の確保と内視鏡像の観察との切換えを行うことができ、内視鏡像を立体観察しながら各種操作を容易に行うことができる。
【０１０４】
図１７は本発明の第４実施形態に係る立体視内視鏡システムの全体構成を示す構成説明図である。
【０１０５】
第４実施形態は、第２実施形態と第３実施形態とを組合せたものである。
【０１０６】
第４実施形態のＨＭＤ９１は、第２実施形態と同様に液晶モニタ６２ａ，６２ｂ、及びハーフミラー６３が設けられていると共に、観察像切換えボリューム９２が設けられている。
【０１０７】
ＨＭＤ９１に接続されるビデオプロセッサ９３には、輝度調整信号生成回路９４、及び照明光量調整信号生成回路９５が設けられており、観察像切換えボリューム９２からの出力信号が供給されるようになっている。前記輝度調整信号生成回路９４の出力の輝度調整信号は、Ｌ用，Ｒ用映像信号処理回路３５ａ，３５ｂに入力され、映像信号の輝度レベルが調整されるようになっている。また、照明光量調整信号生成回路９５の出力の照明光量調整信号は、切換スイッチ７７に入力され、第３実施形態と同様に室内照明コントロール装置７９へ送られるようになっている。
【０１０８】
よって、ＨＭＤ９１の観察像切換えボリューム９２を調整することにより、輝度調整信号生成回路９４は映像信号の輝度を調整するための信号を発生し、照明光量調整信号生成回路９５は照明光量を調整するための信号を発生する。これにより、液晶モニタ６２ａ，６２ｂに表示される像の明るさ、及び照明ランプ８０の照明光量が調整される。
【０１０９】
室内の様子を見たいときには、観察像切換えボリューム９２を操作して、映像信号の輝度を下げるとともに、室内の照明光量を上昇させる。これにより、術者はハーフミラー６３を透過して室内を視覚することができる。
【０１１０】
また、内視鏡像を観察したいときには、観察像切換えボリューム９２を操作して、映像信号の輝度を上げるとともに、室内の照明光量を低下させる。これによって、ＨＭＤ９１には高輝度の内視鏡像が表示され、周囲の室内は暗いため、液晶モニタ６２ａ，６２ｂの像がハーフミラー６３によって反射され、術者は内視鏡像を観察することができる。
【０１１１】
従って、液晶モニタに表示する像の明るさと室内の照明光量とを調整することによって、術者の視野の確保と内視鏡像の観察との切換えを行うことができる。
【０１１２】
以上説明したように、本実施形態は、術者の顔に装着するＨＭＤにおいて内視鏡像を観察するモードとＨＭＤ前方の室内を観察するモードとを切換えて、それぞれを観察できるようにしたものである。
【０１１３】
よって、従来のようにＨＭＤを装着したままでは内視鏡像しか観察することができず、他の作業を行うことが困難であるという問題点を解決でき、内視鏡像を立体観察しながら各種操作を容易に行うことができる。
【０１１４】
【発明の効果】
以上説明したように本発明によれば、立体像の観察時に前方視野を得ることができ、これにより立体像の観察と共に前方視野によって装置の各種操作の確認が可能となり、操作性を向上させることができる効果がある。
【０１１５】
また、液晶モニタに表示する像の明るさを制御することのみで、術者の視野の確保と内視鏡像の観察との切換えを行うことができ、内視鏡像を立体観察しながら各種操作を容易に行うことができる効果がある。
【０１１６】
さらに、室内の照明光量を調整することのみで、術者の視野の確保と内視鏡像の観察との切換えを行うことができ、内視鏡像を立体観察しながら各種操作を容易に行うことができる効果がある。
【図面の簡単な説明】
【図１】図１ないし図８は本発明の第１実施形態に係り、図１は立体視内視鏡システムの全体構成を示す構成説明図である。
【図２】ステレオスコープの構成を示す説明図である。
【図３】ステレオスコープによる超音波の送受を説明する説明図である。
【図４】ヘッドマウントディスプレイ（ＨＭＤ）の構成を示す説明図である。
【図５】ＨＭＤの側面図である。
【図６】ビデオプロセッサの構成を示すブロック図である。
【図７】超音波距離検出部の構成を示すブロック図である。
【図８】映像信号合成部とその周辺部の構成を示すブロック図である。
【図９】音声認識の機能を有した立体視内視鏡システムの構成を示す構成説明図である。
【図１０】図８に示した映像信号合成部の第１の変形例を示すブロック図である。
【図１１】図８に示した映像信号合成部の第２の変形例を示すブロック図である。
【図１２】動画像と静止画像とを機械的に重合せる装置におけるＨＭＤの第１の構成例を示す側面図である。
【図１３】動画像と静止画像とを機械的に重合せる装置における映像信号合成部の構成例を示すブロック図である。
【図１４】動画像と静止画像とを機械的に重合せる装置におけるＨＭＤの第２の構成例を示す側面図である。
【図１５】本発明の第２実施形態に係る立体視内視鏡システムの全体構成を示す説明図である。
【図１６】本発明の第３実施形態に係る立体視内視鏡システムの全体構成を示す説明図である。
【図１７】本発明の第４実施形態に係る立体視内視鏡システムの全体構成を示す説明図である。
【符号の説明】
１…立体視内視鏡システム
２…ステレオスコープ
３…ビデオプロセッサ
６…ヘッドマウントディスプレイ
７ａ，７ｂ…内視鏡用ＣＣＤ
９…超音波振動子
１２…フリーズスイッチ
１３，１４，１７…切換スイッチ
１５ａ，１５ｂ…液晶ディスプレイ
１６ａ，１６ｂ…ＨＭＤ用ＣＣＤ
２０…内視鏡映像信号処理部
２２…映像信号合成部
２３…超音波距離検出部
２６…ＨＭＤ映像信号処理部
２９…制御部
４０ａ，４０ｂ…切換回路
６１…ＨＭＤ
６２ａ、６２ｂ…液晶モニタ
６３…ハーフミラー
６４…輝度調整ボリューム
６６ａ、６６ｂ…信号レベル調整回路[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an observation system that reproduces a three-dimensional image by displaying an image with parallax on a head-mounted display.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, two solid-state imaging devices such as CCDs are provided at the distal end of an endoscope, and three-dimensional information of a subject can be obtained based on the captured left and right images. For example, Japanese Patent Laid-Open No. 4-16812 discloses a stereo endoscope that can provide a stereoscopic view of a subject by providing two objective optical systems and a CCD at the tip.
[0003]
In recent years, a three-dimensional image has been reproduced by attaching a liquid crystal monitor called a head-mounted display (hereinafter abbreviated as HMD) on the left and right sides.
[0004]
Therefore, this HMD can be used to stereoscopically observe a subject image with parallax obtained from a stereo endoscope.
[0005]
Therefore, it can be said that diagnosis and treatment using an endoscope can be advanced to a higher level.
[0006]
[Problems to be solved by the invention]
However, the HMD normally has a structure in which a liquid crystal display is worn like glasses in front of both eyes of the user. For this reason, the user cannot see anything other than the image displayed on the HMD.
[0007]
In other words, when the HMD is applied to an endoscope system, the operator can only enter the stereoscopic endoscope image displayed by the HMD into the field of view, and insert the endoscope operation and treatment tool into the endoscope. Even if you try to do something, you can't do it while checking it with your eyes.
[0008]
Therefore, various operations of the apparatus cannot be easily performed at the time of observing a stereoscopic image, and there arises a problem that the time required for the endoscopic diagnosis becomes long.
[0009]
The present invention has been made in view of these circumstances, and it is possible to obtain a front field of view when observing a stereoscopic image, thereby making it possible to confirm various operations of the apparatus by observing the stereoscopic image and using the front field of view. An object of the present invention is to provide a stereoscopic image observation system capable of improving the image quality.
[0010]
In addition, the present invention can perform switching between securing the visual field of the operator and observing the endoscopic image only by controlling the brightness of the image displayed on the liquid crystal monitor, and stereoscopically observing the endoscopic image. An object of the present invention is to provide an observation system that can easily perform various operations.
[0011]
Furthermore, according to the present invention, it is possible to switch between ensuring the operator's visual field and observing the endoscopic image only by adjusting the amount of illumination light in the room, and various operations can be easily performed while stereoscopically observing the endoscopic image. It aims at providing the observation system which can be performed.
[0012]
[Means for Solving the Problems]
In order to achieve the above object, an observation system according to the present invention is provided. , Covered An image pickup means for picking up an observation image of the specimen, an image signal processing means for generating an image signal based on an image pickup signal from the image pickup means, The image signal processing unit is separate from the image signal generated by the image signal processing unit. Display screen to display the observation image A display device that can be worn on the face, Illuminating means for generating illumination light for illuminating an observation body that generates an observation image; According to the operation of the illumination light adjustment operation unit provided in the display device for adjusting the light amount of the illumination means, and the illumination light adjustment operation unit Illumination light adjusting means for adjusting the amount of light of the lighting means; The first incident light emitted from the display screen provided in the display device and the first incident light are incident light from different directions, and the incident light is adjusted according to an operation of the illumination light adjustment operation unit. Second incident light related to the observation object image illuminated by the illumination light adjusted by the illumination light adjusting means can be incident. And a half mirror.
[0014]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
1 to 8 relate to the first embodiment of the present invention, FIG. 1 is a diagram illustrating the overall configuration of a stereoscopic endoscope system, FIG. 2 is a diagram illustrating the configuration of a stereoscope, and FIG. 3 is a stereo. FIG. 4 is a diagram illustrating the configuration of a head mounted display (HMD), FIG. 5 is a side view of the HMD, and FIG. 6 is a block diagram illustrating the configuration of a video processor. Is a block diagram showing the configuration of the ultrasonic distance detection unit, and FIG. 8 is a block diagram showing the configuration of the video signal synthesis unit and its peripheral part.
[0015]
The present embodiment is a configuration example of a stereoscopic endoscope system in which a stereoscopic image observation system is applied to an endoscope apparatus.
[0016]
FIG. 1 shows the overall configuration of the stereoscopic endoscope system according to the first embodiment.
The stereoscopic endoscope system 1 includes a stereoscope 2 capable of stereoscopic viewing and a video processor 3 connected to the stereoscope 2, and based on a subject image with parallax obtained by the stereoscope 2. The video processor 3 generates an image signal and displays the left and right images obtained by the endoscope on the left and right monitors 4a and 4b, respectively. The stereoscope 2 is connected with a light source 5 for supplying illumination light.
[0017]
Similarly to the monitors 4a and 4b, the video processor 3 is connected to an HMD 6 that displays an endoscopic image. The HMD 6 is attached to the surgeon's face as a face-mounting monitor, so that the surgeon can observe the endoscopic image as a three-dimensional stereoscopic image.
[0018]
FIG. 2 shows the configuration of the stereoscope 2.
The stereoscope 2 is provided with left and right CCDs 7a and 7b as image pickup units at the distal end portion of the insertion portion, thereby picking up two subject images. The CCDs 7 a and 7 b are driven by drive signals from the video processor 3, and output signals are amplified by the preamplifiers 8 a and 8 b, respectively, and output to the video processor 3.
[0019]
An ultrasonic transducer 9 is provided at the distal end of the endoscope. This ultrasonic transducer 9 is for measuring the distance between the distal end of the endoscope and the subject, and for transmitting and receiving ultrasonic waves to the subject 10 as shown in FIG. It is. The distance is obtained from the transmitted / received ultrasonic signal as described later.
[0020]
The operation unit 11 at the proximal end of the insertion portion of the endoscope includes a freeze switch 12 for obtaining a still image, an enlargement changeover switch 13 for switching between a normal image and a full-size image, which will be described later, and an endoscopic image. A visual field changeover switch 14 for switching between the HMD visual field images is provided.
[0021]
The configuration of the HMD 6 will be described with reference to FIGS.
The HMD 6 includes left and right liquid crystal displays 15a and 15b for displaying an image on the inner side (side facing the eyes). The video processor 3 and the liquid crystal displays 15a and 15b constitute image display means. Further, on the surface side of the HMD 6, CCDs 16 a and 16 b that capture a forward visual field image are provided instead of the operator's visual field. These CCDs 16a, 16b and a signal processing unit for HMD and a signal synthesis unit in the video processor 3 to be described later constitute a front visual field image reproducing means.
[0022]
A changeover switch 17 having the same functions as the enlargement changeover switch and the visual field changeover switch provided in the operation unit 11 of the endoscope described above is provided on the side surface of the HMD 6. A cable extends from the other side surface of the HMD 6 and is connected to the video processor 3 via this cable.
[0023]
Next, the configuration of the video processor 3 will be described with reference to FIG.
The video processor 3 has an endoscope CCD drive unit 18 for generating a CCD drive signal in order to drive the CCDs 7a and 7b provided at the distal end portion of the endoscope. The endoscope CCD drive unit 18 and the like are connected to the stereoscope 2 through a connector 19 connected thereto. Imaging signals obtained by the CCDs 7 a and 7 b driven by the endoscope CCD drive unit 18 are input to the endoscope video signal processing unit 20 through the connector 19. In the endoscope video signal processing unit 20, the imaging signal is processed into a signal that can be displayed on the monitor, and the video signal is output to the monitors 4 a and 4 b via the monitor image output unit 21. The video signal processed by the endoscope video signal processing unit 20 is also input to the video signal synthesis unit 22.
[0024]
An ultrasonic distance detector 23 is also connected to the connector 19. The ultrasonic distance detection unit 23 drives the ultrasonic transducer 9 provided in the stereoscope 2 and receives the ultrasonic wave reflected from the subject 10. Based on the phase shift of the transmission / reception signal at this time Then, the distance between the tip of the stereoscope 2 and the subject 10 is measured. The distance information detected by the ultrasonic distance detector 23 is input to the video signal synthesizer 22.
[0025]
Further, the video processor 3 is provided with an HMD CCD drive unit 24 for driving the CCDs 16 a and 16 b provided in the HMD 6. A connector 25 is connected to the HMD CCD drive unit 24 and is connected to the HMD 6 via the connector 25. When the surgeon wears the HMD, the CCDs 16a and 16b cannot see anything other than what is displayed on the liquid crystal displays 15a and 15b. Is. The image signals picked up by the CCDs 16 a and 16 b are processed by the HMD video signal processing unit 26 via the connector 25 and input to the video signal combining unit 22.
[0026]
The video signal synthesis unit 22 performs processing for displaying the image obtained from the stereoscope 2 and the image obtained from the HMD CCDs 16a and 16b on the HMD 6, for example, an endoscopic image or a front field of view of the HMD. Synthesis processing is performed so that either one of the images (hereinafter abbreviated as HMD image) is selected and displayed. Alternatively, the image is enlarged / reduced based on the distance information obtained by the ultrasonic distance detector 23. Furthermore, various processes such as a synthesis process for displaying a moving image and a still image are performed. The video signal subjected to such processing is output to the HMD 6 via the HMD image output unit 27.
[0027]
The processing instruction in the video signal synthesizing unit 22 is operated based on each switch provided in the stereoscope 2 and the HMD 6 or a command inputted from the input unit 28 in the same manner. It is supposed to be done. That is, although not shown, the enlargement changeover switch 13, the visual field changeover switch 14 of the stereoscope 2, and the changeover switch 17 of the HMD 6 are connected to the control unit 29 in the same manner as the input unit 28.
[0028]
In addition, a status display unit 30 is connected to the control unit 29, and the control status of the control unit 29 is displayed on the status display unit 30 so that the control status can be notified to a person other than the operator.
[0029]
Further, the control unit 29 creates various timing pulses and controls the operation of each unit.
[0030]
Next, the internal circuit of the video processor 3 will be described in more detail.
FIG. 7 shows a detailed configuration of the ultrasonic distance detection unit 23.
[0031]
The ultrasonic distance detection unit 23 is provided with an ultrasonic transmission circuit 31 for driving the ultrasonic transducer 9, and the ultrasonic transducer 9 is driven by a pulse signal transmitted therefrom. Further, an ultrasonic reception circuit 32 is provided, and an ultrasonic signal received by the ultrasonic transducer 9 is detected by the ultrasonic reception circuit 32.
[0032]
The ultrasonic transmission circuit 31 and the ultrasonic reception circuit 32 are connected to a distance calculation circuit 33. The distance calculation circuit 33 calculates the distance between the distal end of the stereoscope 2 and the subject 10 based on the phase difference between the ultrasonic pulses at the time of transmission and at the time of reception. The distance calculation circuit 33 outputs a signal proportional to the distance to the enlargement / reduction control signal generation circuit 34 based on the calculation result.
[0033]
The enlargement / reduction control signal generation circuit 34 is used to exhibit the functions described below.
[0034]
That is, when the surgeon wears the HMD 6, an image obtained by the stereoscope 2 based on the output signal of the distance calculation circuit 33 is displayed so that a full-size subject appears in front of his / her eyes. A control signal for enlarging or reducing the actual size is generated.
[0035]
Thus, the operator can know the size of the subject sensuously.
[0036]
The control signal output from the enlargement / reduction control signal generation circuit 34 is input to the video signal synthesis unit 22.
[0037]
Next, details of the functional configuration of the video signal synthesizer 22 and its peripheral parts will be described with reference to FIG.
[0038]
The imaging signal output from the stereoscope 2 is processed by the L and R video signal processing circuits 35a and 35b provided in the endoscope video signal processing unit 20. The signals output from the L and R video signal processing circuits 35a and 35b are input to the L and R enlargement / reduction circuits 36a and 36b and to the monitor image output unit 21, respectively. It has become.
[0039]
The L and R enlargement / reduction circuits 36a and 36b are based on the control signals output from the enlargement / reduction control signal generation circuit 34 provided in the ultrasonic distance detector 23 described above, and are used for the L and R endoscopes. Each mirror image is enlarged or reduced in the same manner.
[0040]
The L and R enlargement / reduction circuits 36a and 36b do not always enlarge / reduce the endoscopic image, but enlarge / reduce only when the actual size display is instructed by the input unit 28. This is to prevent the surgeon from seeing the subject always in front of the eyes and feeling uncomfortable if the actual size is always displayed at the time of diagnosis of the endoscope. ing. For this reason, the output signal of the ultrasonic distance detector 23 is input to the L and R enlargement / reduction circuits 36a and 36b via the switch 37.
[0041]
When the actual size display is designated by the input unit 28, the control unit 29 closes the switch 37 to perform the image enlargement / reduction processing, and uses the control signal from the ultrasonic distance detection unit 23 for L and R. To the enlargement / reduction circuits 36a and 36b. As a result, an actual-size endoscopic image is displayed on the HMD 6.
[0042]
When the switch 37 is in the open state, the enlargement / reduction circuits 36a and 36b for L and R do not perform enlargement / reduction processing, and the video signal obtained by the stereoscope 2 remains as it is in the next stage circuit, that is, The data is output to the L and R image memories 38a and 38b and the image superimposing circuits 39a and 39b.
[0043]
The L image memory 38a and the R image memory 38b are freeze memories, respectively. Therefore, when freeze is instructed by the input unit 28 or the like, the video signals output from the L and R enlargement / reduction circuits 36a and 36b are stored, and the video signals are output to the image superposition circuits 39a and 39b. . The operations of the L and R image memories 38a and 38b are controlled by the control unit 29, respectively.
[0044]
The image superimposing circuits 39a and 39b receive the output signals of the L and R image memories 38a and 38b, respectively, and the video signals output from the L and R enlargement / reduction circuits 36a and 36b remain as they are. It is designed to be entered. The image superimposing circuits 39a and 39b superimpose the video output from the L and R enlarging / reducing circuits 36a and 36b and the video stored in the L and R image memories 38a and 38b, to the next stage. Output to the circuit.
[0045]
That is, when no freeze instruction is given, no video signal is output from the L and R image memories 38a and 38b, and only the video signal from the L and R enlargement / reduction circuits 36a and 36b is an image. The signals input to the superposition circuits 39a and 39b and the signals input from the L and R enlargement / reduction circuits 36a and 36b are output as they are.
[0046]
On the other hand, when freeze is instructed, video signals are output from the L and R image memories 38a and 38b. Therefore, the image superimposing circuits 39a and 39b respectively receive the video signals output from the L and R image memories 38a and 38b and the video signals output from the L and R enlargement / reduction circuits 36a and 36b. It is superposed and output to the next stage circuit. That is, a video signal in a state where a moving image and a still image are superimposed is generated.
[0047]
The output signals of the image superimposing circuits 39a and 39b are input to the switching circuits 40a and 40b, respectively. The output signal of the HMD video signal processing unit 26 is input to the other input terminals of the switching circuits 40a and 40b. The HMD video signal processing unit 26 is provided with L and R video signal processing circuits 41 a and 41 b, and processes image signals obtained from the CCDs 16 a and 16 b provided in the HMD 6.
[0048]
The switching circuits 40a and 40b are for selecting an image output from the image superimposing circuits 39a and 39b and an image processed by the L and R video signal processing circuits 41a and 41b. That is, switching between displaying an endoscopic image on the HMD or displaying an HMD image is performed. This switching can be switched by the input unit 28, the visual field switching switch 14 provided in the stereoscope 2 or the switching switch 17 provided in the HMD 6, and the control unit 29 controls the switching circuits 40a and 40b based on the switching operation.
[0049]
The endoscopic image or HMD image selected by the switching circuits 40 a and 40 b is output to the HMD 6 via the HMD image output unit 27. And it is displayed on the liquid crystal monitors 15a and 15b of the HMD 6 shown in FIG.
[0050]
Next, the operation of this embodiment will be described.
When observing the subject, the insertion portion of the stereoscope 2 is inserted into the subject 10, and the subject 10 is imaged by the CCDs 7a and 7b. The imaging signals obtained by the CCDs 7a and 7b are input to the endoscope video signal processing unit 20 via the connector 19 and processed so as to become video signals that can be displayed on the monitor. And it outputs to the monitor 4a, 4b via the monitor image output part 21, and while displaying an endoscopic image on the monitor 4a, 4b, it inputs into the video signal synthetic | combination part 22. FIG. The output image signal of the video signal synthesis unit 22 is output to the HMD 6 via the HMD image output unit 27, and the endoscopic images are displayed on the liquid crystal displays 15a and 15b of the HMD 6. The operator can obtain a stereoscopic image of the subject 10 by wearing the HMD 6 and viewing the liquid crystal displays 15a and 15b.
[0051]
On the other hand, in the HMD 6, a field image in front of the HMD 6 (that is, the front of the operator's face) is captured by the CCDs 16a and 16b. The imaging signals obtained by the CCDs 16 a and 16 b are input to the HMD video signal processing unit 26 via the connector 25, subjected to signal processing here, and then input to the video signal combining unit 22. In the video signal synthesis unit 22, the endoscope image signal and the HMD image signal are selected and output to the HMD 6.
[0052]
That is, according to the present embodiment, either an endoscopic image obtained by the stereoscope 2 or an HMD front view image obtained by the CCDs 16a and 16b of the HMD 6 is selected, and the images are displayed on the liquid crystal monitors 15a and 15b of the HMD 6. Can be displayed.
[0053]
Therefore, the operator performs stereoscopic observation of the endoscopic image with the HMD 6 attached, and when performing various operations such as using a treatment tool, the HMD 6 is temporarily displayed on the HMD 6. As a result, the surgeon can obtain a field of view as if the HMD 6 was removed, and in this state, the operator can easily perform operations such as grasping the treatment tool and inserting it into the endoscope.
[0054]
When the distal end of the treatment instrument is inserted into the endoscope and the treatment instrument can be inserted into the endoscope without observing the treatment instrument, the endoscope image is displayed again on the HMD 6. .
[0055]
Thus, the surgeon can sensuously grasp the distance between the subject and the distal end of the treatment tool as a three-dimensional image. Therefore, the tip of the treatment tool can be brought closer to the subject more quickly, and a treatment can be performed.
[0056]
Thus, the operability regarding the endoscopic diagnosis can be improved.
[0057]
Furthermore, in this embodiment, the distance between the subject and the endoscope tip is measured using ultrasonic waves, and the enlargement / reduction circuits 36a and 36b enlarge the image so that the subject is displayed in full size.・ Reduction control is performed. Therefore, the operator can know the distance between the treatment tool and the subject more sensibly based on the three-dimensional image displayed on the HMD 6 in actual size.
[0058]
The actual size display is not always performed, and has a switching function so that it can be used only when necessary. Therefore, when the surgeon feels discomfort when only the full size display is performed, an image of a predetermined size (the subject is displayed to some extent so that the surgeon does not cause discomfort). Can be displayed.
[0059]
When the freeze switch 12 is operated to freeze the image displayed on the HMD 6 by observing the still image, not only the still image but also the still image and the moving image are displayed by the image superimposing circuits 39a and 39b of the video signal synthesis unit 22. An image in a superposed state is displayed on the HMD 6.
[0060]
This is because if only the still image is displayed on the HMD 6, the operator can only observe the still image, and the patient may be at risk if the endoscope moves carelessly. It is intended to be displayed. That is, even in a frozen state, still images and moving images are superimposed and displayed in order to at least feel how the endoscope tip is currently moving.
[0061]
As a result, it is possible to prevent such a problem that the endoscope tip moves carelessly and hurts the patient.
[0062]
Although the first embodiment of the present invention has been described above, it is provided in the input unit 28 provided in the video processor 3 or the operation unit 11 of the stereoscope 2 as means for inputting the switching signal therein. Each switch, or a changeover switch 17 provided in the HMD 6 is provided.
[0063]
The operation of the input unit 28 provided in the video processor 3 can be easily operated by a person other than the operator. In addition, the switch provided on the operation unit 11 or the HMD 6 is provided so that the operator can freely operate to some extent without necessarily checking the place where the switch is located.
[0064]
That is, the surgeon is accustomed to the operation of the endoscope, knows where and in what shape, and can perform a sensory operation. In addition, the switch provided on the HMD 6 also allows the operator to know sensuously where the switch is located with respect to his / her face. Therefore, the surgeon can perform operations such as freezing while viewing a stereoscopic endoscopic image with the HMD 6.
[0065]
However, considering the case where the number of switches to be operated is increased, it becomes difficult to operate the switches.
[0066]
Therefore, for example, if a voice recognition function as shown in FIG. 9 is provided, the operability of the stereoscopic endoscope system can be further improved.
[0067]
In the stereoscopic endoscope system having a voice recognition function, the HMD 6 is provided with a microphone 42 for detecting voice, and a voice recognition device 44 is connected to the video processor 3. The voice signal detected by the microphone 42 is sent to the voice recognition device 44 by the antenna 43. The voice recognition device 44 is provided with a voice recognition circuit 46, and the voice signal is input to the voice recognition circuit 46 via the antenna 45. The voice of the surgeon is recognized by the voice recognition circuit 46, and the video processor is controlled according to a command by the voice of the surgeon.
[0068]
In this way, the video processor can be controlled in accordance with the operator's command without operating the switch, etc., and the operator does not need to use a nerve at the fingertip or the like, reducing the burden on the operator. be able to.
[0069]
FIG. 10 shows a first modification of the video signal synthesis unit 22 of the first embodiment. In addition, the same code | symbol is attached | subjected about the same component and description is abbreviate | omitted.
[0070]
In the first embodiment, when an image is frozen, the obtained moving image and still image are superimposed and displayed.
[0071]
However, if the images are simply overlapped, the priority of both images may be displayed the same, and the image may be difficult to see. Therefore, in the first modification, the monochrome / color switching circuits 47a and 47b are provided in the video signal synthesizer 22a, and when the freeze is instructed, the moving image is changed from a color image to a monochrome image. A color still image is superposed.
[0072]
The monochrome / color switching circuits 47a and 47b convert the moving image to monochrome when the freeze is instructed, and output the moving image when the freeze is released. The image and the color still image are superposed by the image superposing circuits 39a and 39b.
[0073]
According to this, a still image to be actually observed is displayed in color, and this image is emphasized. Therefore, a good still image that is easy to observe can be obtained.
[0074]
In addition, the overlapping of the moving image and the still image can be performed not only by superimposing the color and monochrome images but also by superposing the images with high and low brightness. FIG. 11 shows a second modification example in which images having different luminances are superposed in this way.
[0075]
In the second modification, the video signal synthesis unit 22b is provided with luminance switching circuits 48a and 48b instead of the monochrome / color switching circuits 47a and 47b shown in FIG.
[0076]
When the freeze is instructed, the luminance switching circuits 48a and 48b switch so that the luminance of the input moving image is lowered, and output the low luminance moving image to the image superimposing circuits 39a and 39b. As a result, a still image with high luminance and a moving image with low luminance are displayed on the HMD 6 in a superimposed state. When the freeze is released, the luminance switching circuits 48a and 48b output a high luminance moving image.
[0077]
In this way, even when images with different luminance are superimposed, a still image that is actually desired to be observed can be emphasized.
[0078]
The method for electrically superimposing a moving image and a still image at the time of freezing has been described so far, but it is also possible to mechanically superimpose an image.
[0079]
Examples of the configuration of an apparatus that mechanically superimposes a moving image and a still image are shown in FIGS.
[0080]
For example, as shown in FIG. 12, the HMD 50 can be configured using a half mirror 49.
[0081]
That is, the HMD 50 is provided with a first liquid crystal monitor 51 for displaying a moving image and a second liquid crystal monitor 52 for displaying a still image. Accordingly, the moving image displayed on the first liquid crystal monitor 51 can be observed through the half mirror 49, and the still image displayed on the second liquid crystal monitor 52 is It can be observed by being reflected by the half mirror 49.
[0082]
The video signal synthesizer 22 of the video processor 3 connected to the HMD 50 can be configured as shown in FIG. 13, for example.
[0083]
As can be seen from the figure, the image signal synthesizing unit 22c does not require an image superposition circuit, and the video signals output from the L and R image memories 38a and 38b are directly displayed on the second liquid crystal monitor 52 for still images. To be input. The output video signals of the L and R enlargement / reduction circuits 35a and 35b, which are moving images, are directly input to the switching circuits 40a and 40b, and the output signals from the switching circuits 40a and 40b are the first liquid crystal monitor 51. To be input.
[0084]
Accordingly, the moving image and the still image can be superimposed and displayed on the HMD 50.
[0085]
Further, by using the circuit shown in FIG. 13, it is possible to drive two monitors, a moving image monitor and a still image monitor.
[0086]
That is, as shown in FIG. 14, the first liquid crystal monitor 51 and the second liquid crystal monitor 52 are arranged side by side, and can be applied to an HMD 53 configured so that the two monitors can be directly observed.
[0087]
According to this, since the moving image and the still image are not overlapped, there is an effect that each image is easy to see.
[0088]
Next, a second embodiment of the present invention will be described with reference to FIG.
FIG. 15 is a configuration explanatory view showing the overall configuration of the stereoscopic endoscope system according to the second embodiment of the present invention.
[0089]
In the first embodiment, the field of view of the operator is ensured by displaying the forward visual field image obtained by the CCD provided in the HMD on the HMD 6, but in this embodiment, the operator is not provided with the CCD in the HMD 6. The field of view can be secured.
[0090]
The HMD 61 of the second embodiment has liquid crystal monitors 62 a and 62 b for displaying an image obtained by the stereoscope 2 at the upper part, and reflects the image displayed on the monitor by the half mirror 63. It is configured so that the surgeon can observe.
[0091]
Further, the HMD 61 is provided with a brightness adjustment volume 64 for adjusting the brightness of the images displayed on the liquid crystal monitors 62a and 62b.
[0092]
The main part of the video processor 65 connected to the HMD 61 is configured as shown in FIG. The video processor 65 is provided with signal level adjustment circuits 66 a and 66 b on the output side of the L and R video signal processing circuits 35 a and 35 b and is connected to the luminance adjustment volume 64 of the HMD 61. That is, the brightness level of the video signal is adjusted by the signal level adjustment circuits 66a and 66b by the operation of the brightness adjustment volume 64 provided in the HMD 61, and the brightness of the images displayed on the liquid crystal monitors 62a and 62b is controlled. It has become. Thereby, the brightness of the endoscopic image can be controlled.
[0093]
Therefore, when the operator wants to secure his field of view, the brightness adjustment volume 64 darkens the brightness of the image displayed on the monitor. Then, since the surrounding illumination becomes brighter than the brightness of the monitor, the surgeon can visually see the surrounding state through the half mirror 63.
[0094]
On the other hand, when the operator intends to observe the endoscopic image, the brightness of the images on the liquid crystal monitors 62a and 62b is increased by adjusting the brightness adjustment volume 64. As a result, the brightness of the images displayed on the liquid crystal monitors 62a and 62b becomes brighter than the surrounding brightness, and the image is reflected by the half mirror 63 so that the endoscopic image can be observed.
[0095]
As described above, according to the second embodiment, it is possible to switch between ensuring the operator's visual field and observing the endoscopic image only by controlling the brightness of the images displayed on the liquid crystal monitors 62a and 62b. In addition, various operations can be easily performed while stereoscopically observing the endoscopic image.
[0096]
FIG. 16 is an explanatory diagram showing the overall configuration of the stereoscopic endoscope system according to the third embodiment of the present invention.
[0097]
In the third embodiment, the brightness of the image displayed on the liquid crystal monitor is adjusted in the second embodiment, whereas the visual field of the operator is secured by adjusting the amount of illumination light in the room.
[0098]
The HMD 71 of the third embodiment is provided with liquid crystal monitors 62a and 62b and a half mirror 63 as in the second embodiment, and an illumination light quantity adjustment volume 72 for adjusting the illumination light in the endoscope room. Is provided.
[0099]
The video processor 73 connected to the HMD 71 is connected to the illumination control unit via the connection cable 74. The dimming signal from the illumination light quantity adjustment volume 72 is sent from the connection cable 74 to the illumination control unit via the changeover switch 77. A wireless transmitter 75 is connected to the other end of the changeover switch 77 so that the dimming signal from the illumination light quantity adjustment volume 72 can be sent as a radio wave and sent to the illumination control unit. The dimming signal transmitted from the wireless transmitter 75 is received by the wireless receiver 76.
[0100]
The connection cable 74 and the wireless receiver 76 are connected to an indoor illumination control device 79 via a changeover switch 78, and the illumination light quantity of the illumination lamp 80 is adjusted by the indoor illumination control device 79. . In addition, a light amount adjustment volume 81 provided on a wall in the endoscope room is connected to the room illumination control device 79, and the light amount adjustment is also possible by the light amount adjustment volume 81.
[0101]
The transmission path of the dimming signal from the illumination light quantity adjustment volume 72 is switched depending on the connection state of the connection cable 74. That is, the changeover switches 77 and 78 are automatically switched according to the connection state of the connection cable 74. As a result, when the connection cable 74 is connected to the video processor 73, via the connection cable 74, and when the connection cable 74 is not connected, the wireless transmitter 75 and the wireless receiver 76 generate radio waves as A dimming signal is sent to the room lighting control device 79. Based on this light control signal, the illumination light quantity of the illumination lamp 80 is adjusted by the room illumination control device 79.
[0102]
According to the system configured as described above, when the illumination light quantity adjustment volume 72 is operated to increase the illumination light quantity in the room, the surgeon can visually observe the state of the room through the half mirror 63 of the HMD 71. On the other hand, when the room illumination is darkened, the endoscopic images displayed on the liquid crystal monitors 62a and 62b are reflected by the half mirror 63, and the operator can observe a three-dimensional endoscopic image based on this.
[0103]
Therefore, just by adjusting the amount of illumination light in the room, as in the second embodiment, it is possible to switch between ensuring the operator's visual field and observing the endoscopic image, while stereoscopically observing the endoscopic image. Various operations can be easily performed.
[0104]
FIG. 17 is a configuration explanatory view showing the overall configuration of the stereoscopic endoscope system according to the fourth embodiment of the present invention.
[0105]
The fourth embodiment is a combination of the second embodiment and the third embodiment.
[0106]
Similarly to the second embodiment, the HMD 91 of the fourth embodiment is provided with liquid crystal monitors 62a and 62b and a half mirror 63, and an observation image switching volume 92 is provided.
[0107]
The video processor 93 connected to the HMD 91 is provided with a luminance adjustment signal generation circuit 94 and an illumination light quantity adjustment signal generation circuit 95 so that an output signal from the observation image switching volume 92 is supplied. . The luminance adjustment signal output from the luminance adjustment signal generation circuit 94 is input to the L and R video signal processing circuits 35a and 35b, and the luminance level of the video signal is adjusted. The illumination light amount adjustment signal output from the illumination light amount adjustment signal generation circuit 95 is input to the changeover switch 77 and sent to the indoor illumination control device 79 as in the third embodiment.
[0108]
Therefore, by adjusting the observation image switching volume 92 of the HMD 91, the luminance adjustment signal generation circuit 94 generates a signal for adjusting the luminance of the video signal, and the illumination light amount adjustment signal generation circuit 95 adjusts the illumination light amount. Signal is generated. Thereby, the brightness of the image displayed on the liquid crystal monitors 62a and 62b and the illumination light quantity of the illumination lamp 80 are adjusted.
[0109]
When the user wants to see the situation in the room, the observation image switching volume 92 is operated to lower the luminance of the video signal and increase the amount of illumination light in the room. Thereby, the surgeon can see the room through the half mirror 63.
[0110]
When it is desired to observe the endoscopic image, the observation image switching volume 92 is operated to increase the luminance of the video signal and decrease the amount of illumination light in the room. As a result, a high-luminance endoscopic image is displayed on the HMD 91, and the surrounding room is dark, so the images on the liquid crystal monitors 62a and 62b are reflected by the half mirror 63, and the operator can observe the endoscopic image. .
[0111]
Therefore, by adjusting the brightness of the image displayed on the liquid crystal monitor and the amount of illumination light in the room, it is possible to switch between ensuring the operator's visual field and observing the endoscopic image.
[0112]
As described above, the present embodiment switches between the mode for observing an endoscopic image and the mode for observing the room in front of the HMD in the HMD attached to the operator's face so that each can be observed. is there.
[0113]
Therefore, it is possible to solve the problem that only the endoscopic image can be observed with the HMD attached as in the past, and it is difficult to perform other operations, and various operations are performed while stereoscopically observing the endoscopic image. Can be easily performed.
[0114]
【The invention's effect】
As described above, according to the present invention, it is possible to obtain a front visual field at the time of observing a stereoscopic image, thereby making it possible to confirm various operations of the apparatus by observing the stereoscopic image and the front visual field, thereby improving operability. There is an effect that can.
[0115]
In addition, by simply controlling the brightness of the image displayed on the LCD monitor, it is possible to switch between ensuring the operator's visual field and observing the endoscopic image, and perform various operations while stereoscopically observing the endoscopic image. There is an effect that can be easily performed.
[0116]
Furthermore, it is possible to switch between ensuring the operator's visual field and observing the endoscopic image only by adjusting the amount of illumination light in the room, and various operations can be easily performed while stereoscopically observing the endoscopic image. There is an effect that can be done.
[Brief description of the drawings]
FIG. 1 to FIG. 8 relate to a first embodiment of the present invention, and FIG. 1 is a configuration explanatory diagram showing an overall configuration of a stereoscopic endoscope system.
FIG. 2 is an explanatory diagram showing a configuration of a stereoscope.
FIG. 3 is an explanatory diagram for explaining transmission / reception of ultrasonic waves by a stereoscope;
FIG. 4 is an explanatory diagram showing a configuration of a head mounted display (HMD).
FIG. 5 is a side view of the HMD.
FIG. 6 is a block diagram illustrating a configuration of a video processor.
FIG. 7 is a block diagram showing a configuration of an ultrasonic distance detection unit.
FIG. 8 is a block diagram showing a configuration of a video signal synthesis unit and its peripheral part.
FIG. 9 is a configuration explanatory diagram showing a configuration of a stereoscopic endoscope system having a voice recognition function.
10 is a block diagram showing a first modification of the video signal synthesis unit shown in FIG. 8. FIG.
FIG. 11 is a block diagram illustrating a second modification of the video signal synthesis unit illustrated in FIG. 8;
FIG. 12 is a side view showing a first configuration example of an HMD in an apparatus that mechanically superimposes a moving image and a still image.
FIG. 13 is a block diagram illustrating a configuration example of a video signal synthesis unit in an apparatus that mechanically superimposes a moving image and a still image.
FIG. 14 is a side view showing a second configuration example of an HMD in an apparatus that mechanically superimposes a moving image and a still image.
FIG. 15 is an explanatory diagram showing an overall configuration of a stereoscopic endoscope system according to a second embodiment of the present invention.
FIG. 16 is an explanatory diagram showing an overall configuration of a stereoscopic endoscope system according to a third embodiment of the present invention.
FIG. 17 is an explanatory diagram showing an overall configuration of a stereoscopic endoscope system according to a fourth embodiment of the present invention.
[Explanation of symbols]
1 ... Stereoscopic endoscope system
2 ... Stereoscope
3 ... Video processor
6. Head mounted display
7a, 7b ... CCD for endoscope
9 ... Ultrasonic transducer
12 ... Freeze switch
13, 14, 17 ... changeover switch
15a, 15b ... Liquid crystal display
16a, 16b ... CCD for HMD
20 ... Endoscopic video signal processor
22 ... Video signal synthesizer
23 ... Ultrasonic distance detector
26. HMD video signal processing unit
29 ... Control unit
40a, 40b ... switching circuit
61 ... HMD
62a, 62b ... LCD monitor
63 ... Half mirror
64 ... Brightness adjustment volume
66a, 66b... Signal level adjustment circuit

Claims

Imaging means for imaging an observation image of the subject ;
Image signal processing means for generating an image signal based on an imaging signal from the imaging means;
A display device that is separate from the image signal processing means and has a display screen that displays an observation image based on the image signal generated by the image signal processing means ;
An illuminating means for generating illumination light for illuminating an observation body for generating an observed image;
An illumination light adjustment operation unit for adjusting the light amount of the illumination means provided in the display device;
In response to the operation of the illumination light adjustment operation part, and the illuminating light adjusting means for adjusting the amount of pre-Symbol illumination means,
The first incident light emitted from the display screen provided in the display device and the first incident light are incident light from different directions, and the incident light is adjusted according to an operation of the illumination light adjustment operation unit. A half mirror capable of entering the second incident light related to the observation object image illuminated by the illumination light adjusted by the illumination light adjusting means ;
An observation system characterized by comprising: