JP3650142B2 - 画像処理装置 - Google Patents
画像処理装置 Download PDFInfo
- Publication number
- JP3650142B2 JP3650142B2 JP10004994A JP10004994A JP3650142B2 JP 3650142 B2 JP3650142 B2 JP 3650142B2 JP 10004994 A JP10004994 A JP 10004994A JP 10004994 A JP10004994 A JP 10004994A JP 3650142 B2 JP3650142 B2 JP 3650142B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- character
- signal
- display
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Endoscopes (AREA)
- Closed-Circuit Television Systems (AREA)
Description
【０００１】
【産業上の利用分野】
本発明は、入力画像に対して該画像に関するコメントデータのキャラクタを重畳する機能を有する画像処理装置に関する。
【０００２】
【従来の技術】
入力画像に対してコメントデータのキャラクタを重畳したり、複数の画像を合成するなどの画像処理を行う装置は、例えば内視鏡装置において用いられ、患者のデータや装置の状態を表す情報などのコメントデータのキャラクタを被検部位の内視鏡画像に重畳して、モニタ画面上に表示することなどが従来より行われている。
【０００３】
近年、細長の挿入部を体腔内に挿入することによって、切開を必要とすることなく体腔内深部の対象部位を観察したり、必要に応じて処置具を用いて治療処置のできる内視鏡が広く用いられており、最近ではＣＣＤ等の固体撮像素子を備えた電子内視鏡や光学式内視鏡にテレビカメラを装着したものなどを用いて、被写体画像の電気信号を得てモニタ等に画像を表示する電子内視鏡装置が用いられつつある。
【０００４】
この電子内視鏡装置では、被写体画像を電気信号に変換した画像信号を信号ケーブルを介して画像処理装置に伝送し、映像信号をモニタ等に出力して内視鏡画像を表示したり、撮像した画像信号に関する文字情報もしくは図形情報（コメントデータ）を文字信号（キャラクタ信号）として映像信号に重畳して出力し、キャラクタを重畳した画像を表示したりできるようになっている。映像信号に重畳するコメントデータとしては、患者名、患部名、年月日等の内視鏡画像に関する情報が使用される。
【０００５】
前記のような入力画像にキャラクタを重畳する機能を有する画像処理装置として、本出願人は特願平５−３３７２２９号において、複数の入力画像に対しキャラクタを重畳した後、モニタに表示したり、ＶＴＲに録画することができる装置を提案している。この装置では、モニタやＶＴＲ等への出力画像を出力先の装置の役割に最適な形態にすることができるように、画像出力及び画像に重畳するキャラクタ出力を制御する構成が採られている。
【０００６】
【発明が解決しようとする課題】
前述したような従来の装置では、キャラクタとしての文字情報もしくは図形情報を出力画像に重畳するか否かの制御を行うことは可能であるが、画像の出力に合わせて自動的に重畳を開始したり、一旦重畳した後に文字情報の重畳を停止するなど、キャラクタの重畳時間を自由に設定することは困難であった。すなわち、内視鏡装置を用いて治療処置を行う際に手術開始と同時に文字情報を重畳させるために、重畳する文字情報及び文字情報の重畳制御用スイッチを予めセットしておく必要があったり、また、一度文字情報を画像出力に重畳させた後に文字情報が重畳されない出力画像に戻そうとした場合に、文字情報の重畳制御用スイッチ等を再度押さなければならないなど、キャラクタを重畳する際の操作が煩雑になる問題点があった。
【０００７】
本発明は、これらの事情に鑑みてなされたもので、出力画像にコメントデータを重畳する際の時間を任意に設定することができ、出力画像において必要なときに必要な時間だけコメントデータを容易に表示することが可能な画像処理装置を提供することを目的としている。
【０００８】
【課題を解決するための手段】
本発明による画像処理装置は、複数の入力画像信号を入力するための画像入力手段と、前記画像入力手段で入力された前記複数の入力画像信号から画像信号を選択する画像信号選択手段と、前記画像信号選択手段で選択された選択画像信号に関する情報のキャラクタ信号を前記選択画像信号に重畳するキャラクタ重畳手段と、前記キャラクタ重畳手段により前記キャラクタ信号が重畳された重畳画像信号と前記選択画像信号とを切り替えて選択的に出力可能な画像切り替え手段と、前記画像切り替え手段で前記重畳画像信号が選択出力される時間を設定可能な時間設定手段と、前記画像切り替え手段により前記重畳画像信号が選択されているとき、前記時間設定手段により設定された時間を選択する操作入力に基づき、前記時間設定手段で設定された設定時間の間、前記重畳画像信号を選択するように前記画像切り替え手段を制御する制御手段とを具備したものである。
また、本発明による画像処理装置は、複数の入力画像信号を入力するための画像入力手段と、前記画像入力手段で入力された前記複数の入力画像信号から画像信号を選択する画像信号選択手段と、前記画像信号選択手段で選択された選択画像信号に関する情報のキャラクタ信号を前記選択画像信号に重畳するキャラクタ重畳手段と、前記キャラクタ重畳手段により前記キャラクタ信号が重畳された重畳画像信号と前記入力画像信号とを切り替えて複数の機器に選択的に出力可能な複数の画像切り替え手段と、前記複数の画像切り替え手段で前記重畳画像信号が選択される時間を前記複数の画像切り替え手段の各出力毎にそれぞれ設定する重畳時間設定手段と、前記画像切り替え手段により前記重畳画像信号が選択されているとき、前記重畳時間設定手段により設定された時間を選択する操作入力に基づき、前記複数の機器に対して独立に、前記重畳時間設定手段で設定された設定時間の間、前記重畳画像信号を選択するように前記画像切り替え手段を制御する制御手段とを具備したものである。
【００１０】
【実施例】
以下、図面を参照して本発明の実施例を説明する。
図１ないし図３は本発明の第１実施例に係り、図１は画像処理装置を含む内視鏡装置の構成を示すブロック図、図２は内視鏡下外科手術に使用する内視鏡装置の全体構成を示す構成説明図、図３は画像処理装置の操作パネルの一部を拡大して示した説明図である。
【００１１】
本実施例は、体腔内等を観察する内視鏡を備えた内視鏡装置において画像処理装置を適用した例を示したものである。図２に内視鏡下外科手術に使用する内視鏡装置の全体構成を示す。
【００１２】
図２は内視鏡下外科手術時の手術室を上から見た図であり、内視鏡装置は、撮影機能を備えたＴＶカメラを装着したＴＶカメラ付き内視鏡（以下、単に内視鏡と記す）１と、この内視鏡に照明光を供給する光源装置２と、前記内視鏡に対応する信号処理を行う画像処理装置３と、前記画像処理装置から出力される映像信号を表示する映像表示手段としての第１モニタ４及び第２モニタ５と、前記画像処理装置から出力される映像信号の記録等を行う映像記録手段としてのＶＴＲ６とを備えて構成されている。
【００１３】
このような構成の内視鏡装置において、術者Ａは内視鏡１と処置具７とを持ち、第１モニタ４を見ながら手技を行うことになる。術者Ｂは処置具８を持ち第２モニタ５を見ながら手技を行うことになる。また、術者Ａ，術者Ｂの近傍には、処置具の受け渡しや補助操作等を行うナースＡ，ナースＢが位置している。
【００１４】
前記内視鏡１には、光源装置２よりライトガイドケーブルを介して照明光が送られ、体腔内の被検部位が照明される。そして、内視鏡１で得られた被検部位の画像は画像処理装置３に送られて信号処理され、外部入力装置としての第１モニタ４，第２モニタ５，及びＶＴＲ６に映像信号として送られて映像化及び録画がなされるようになっている。
【００１５】
図１に画像処理装置３の詳細の構成を示す。図１においては、撮像機能を有する複数（図示例では３つ）の内視鏡１ａ，１ｂ，１ｃを画像処理装置３に接続した例を示している。
【００１６】
画像処理装置３は、内視鏡１ａ，１ｂ，１ｃからの映像信号をそれぞれデジタル信号に変換するＡ／Ｄ変換器１１ａ，１１ｂ，１１ｃと、Ａ／Ｄ変換器１１ａ〜１１ｃの出力段に設けられ、画像処理装置３への複数の画像入力のうちモニタ等の外部入力装置へ出力する信号を選択するための入力選択回路１２とを有しており、画像処理装置３の出力端子に接続された第１モニタ４，第２モニタ５，ＶＴＲ６へ出力する画像を入力選択回路１２によって内視鏡１ａ〜１ｃからの画像入力より選択するようになっている。
【００１７】
また、画像処理装置３には、前記入力選択回路１２により選択された画像信号に、該画像信号に関する文字情報もしくは図形情報によるコメントデータのキャラクタ信号を重畳するためのキャラクタ重畳手段としてのキャラクタ重畳回路１３と、コメントデータを画像信号に重畳させる時間を設定する表示時間設定回路１４と、前記入力選択回路１２の出力及びキャラクタ重畳回路１３の出力が接続され、前記表示時間設定回路１４からの制御信号により画像信号にコメントデータを重畳するか否かを切り替えるキャラクタ重畳切替回路１５とが設けられ、キャラクタ重畳切替回路１５によってキャラクタ重畳回路１３からのコメントデータを重畳した画像信号か、あるいは入力選択回路１２からのコメントデータを重畳しない画像信号が選択されるようになっている。
【００１８】
前記キャラクタ重畳切替回路１５の出力段には、キャラクタ重畳切替回路１５の出力信号をアナログ信号に変換するＤ／Ａ変換器１６が設けられ、Ｄ／Ａ変換器１６の出力が映像信号として第１モニタ４，第２モニタ５，ＶＴＲ６へ出力されるようになっている。また、画像処理装置３には、入力選択回路１２，キャラクタ重畳回路１３，及びキャラクタ重畳切替回路１５の制御を行うＣＰＵ１７と、これらの回路の制御に係る操作指示を行うための操作パネル１８とが設けられている。さらに、コメントデータを入力するための入力装置としてのキーボード１９が設けられ、ＣＰＵ１７に接続されている。前記操作パネル１８及び表示時間設定回路１４により重畳時間設定手段が、前記ＣＰＵ１７，表示時間設定回路１４，及びキャラクタ重畳切替回路１５によりキャラクタ重畳制御手段がそれぞれ構成されるようになっている。
【００１９】
なお、図示しないが画像処理装置３にはモニタ等へ出力するのに適した映像信号を生成するための各種画像信号処理を行う回路が設けられている。
【００２０】
前記操作パネル１８の主要部の構成を図３に示す。操作パネル１８には、出力画像へのコメントデータの表示を切り替える文字表示切替部２１、コメントデータの表示時間を設定する表示時間設定部２２、入力画像の選択を行う入力選択部２３がそれぞれ配設され、各機能に係る操作スイッチや表示部が設けられている。
【００２１】
入力選択部２３には、入力された映像信号の選択を行うセレクトスイッチ２４と、選択した画像入力の表示を行うＬＥＤ等からなるセレクト表示器２５とが設けられている。文字表示切替部２１には、コメントデータとなる文字情報の重畳のＯＮ／ＯＦＦを選択する文字表示ＯＮ／ＯＦＦスイッチ２６が設けられている。表示時間設定部２２には、文字情報の重畳時間を設定する表示時間設定スイッチ２７と、文字表示の設定時間を数字により表示する設定時間表示器２８と、前記設定時間による文字情報の重畳を指示するための時間表示制御スイッチ２９とが設けられている。
【００２２】
本実施例の内視鏡装置によって内視鏡下外科手術を行う場合には、図２に示したように、内視鏡１を体腔内へ挿入して処置部位の像を撮像し、術者Ａは第１モニタ４の内視鏡画像を見ながら、術者Ｂは第２モニタ５の内視鏡画像を見ながらそれぞれ手技を行う。画像処理装置３からは、第１モニタ４，第２モニタ５に映像信号が送られて内視鏡画像が表示されると共に、ＶＴＲ６にも映像信号が送られて録画ができるようになっている。
【００２３】
図１に示した３つの内視鏡１ａ，１ｂ，１ｃからの画像入力のうち、内視鏡１ａからの被写体（Ａ）の画像をモニタに表示する場合には、画像処理装置３の操作パネル１８上のセレクトスイッチ２４によってVIDEO １を選択すると、図３に示すようにセレクト表示器２５のVIDEO １が点灯する。これにより、ＣＰＵ１７からの制御信号によって入力選択回路１２がＡ／Ｄ変換器１１ａ側に切り替わり、内視鏡１ａの映像信号が選択される。このとき、操作パネル１８上の文字表示ＯＮ／ＯＦＦスイッチ２６においてＯＦＦが選択されていれば、キャラクタ重畳切替回路１５が入力選択回路１２側に切り替わって文字信号の重畳が行われず、入力画像信号はそのままキャラクタ重畳切替回路１５，Ｄ／Ａ変換器１６を通ってアナログ変換され、外部入力装置としての第１モニタ４，第２モニタ５，ＶＴＲ６へ映像信号として出力される。
【００２４】
また、第１モニタ４，第２モニタ５等の画像表示装置やＶＴＲ６等の画像記録装置などの外部入力装置においてコメントデータの文字表示を行う場合は、操作パネル１８上の文字表示ＯＮ／ＯＦＦスイッチ２６によってＯＮを選択することにより、キャラクタ重畳切替回路１５がキャラクタ重畳回路１３の出力側に切り替わる。これにより、キーボード１９より入力されたキャラクタ信号はキャラクタ重畳回路１３により入力画像信号に重畳された後、キャラクタ重畳切替回路１５，Ｄ／Ａ変換器１６を通ってアナログ変換され、映像信号として画像処理装置３より出力される。コメントデータのキャラクタ（図中１２３４で示す）は図１に示すように内視鏡画像（被写体（Ａ））に重畳されて表示される。
【００２５】
このとき、操作パネル１８上の時間表示制御スイッチ２９を押下することにより、表示時間設定回路１４からの制御信号によってキャラクタ重畳切替回路１５が制御され、表示時間設定スイッチ２７によって設定された表示時間の期間、キャラクタは映像信号に重畳される。設定時間経過後、表示時間設定回路１４からの制御信号によってキャラクタ重畳切替回路１５は入力選択回路１２の出力側に切り替わり、キャラクタの重畳が停止される。
【００２６】
なお、内視鏡１ｂからの被写体（Ｂ）の入力画像、及び内視鏡１ｃからの被写体（Ｃ）の入力画像についても同様にして、画像選択及びキャラクタ重畳を行うことができる。
【００２７】
以上のように、本実施例の構成によれば、コメントデータを出力画像に重畳して表示する際の表示時間を任意に設定することができ、必要なときに必要な時間だけＴＶモニタやＶＴＲ等の外部入力装置において容易にコメントデータを出力し表示することができる。また、一度コメントデータを表示した後に表示を停止するには、表示時間を設定するだけで設定時間経過後にコメントデータの表示を消去することができ、操作の煩わしさもなく簡単な操作で所望の時間コメントデータの表示を行うことができる。このようにコメントデータの表示時間の制御を行うことにより、出力先の装置の役割に最適な出力画像を出力することが可能となる。
【００２８】
図４及び図５は本発明の第２実施例に係り、図４は画像処理装置の主要部の構成を示すブロック図、図５は画像処理装置の操作パネルの一部を拡大して示した説明図である。
【００２９】
第２実施例は第１実施例の変形例であり、モニタ等の外部入力装置へのコメントデータの表示設定を装置毎に可能とした例である。第１実施例の構成と異なる部分についてのみ説明する。
【００３０】
図４に示すように、第２実施例の画像処理装置３１は、図１に示した第１実施例の画像処理装置３の構成と比較して、入力選択回路１２及びキャラクタ重畳回路１３の出力側には３系統のキャラクタ重畳切替回路１５ａ，１５ｂ，１５ｃが設けられ、それぞれにＤ／Ａ変換器１６ａ，１６ｂ，１６ｃを介して第１モニタ４，第２モニタ５，ＶＴＲ６が接続されている。キャラクタ重畳切替回路１５ａ，１５ｂ，１５ｃには、第１実施例と同様に表示時間設定回路１４からの制御信号がそれぞれ入力されるようになっている。
【００３１】
操作パネル３２には、図５に示すように、文字表示のＯＮ／ＯＦＦを制御する文字表示選択スイッチ３３と、設定時間による文字表示のＯＮ／ＯＦＦを制御する時間表示選択スイッチ３４とが設けられ、第１実施例と同様に表示時間設定スイッチ２７及び設定時間表示器２８が設けられている。
【００３２】
本実施例の構成において、コメントデータの文字表示を行う場合は、操作パネル３２上の文字表示選択スイッチ３３の中のキャラクタ重畳を行う出力画像のスイッチを押下することにより、表示時間設定回路１４からの制御信号によってキャラクタ重畳切替回路１５ａ，１５ｂ，１５ｃがキャラクタ重畳回路１３の出力側に切り替わり、キャラクタ信号が映像信号に重畳される。従って、文字表示選択スイッチ３３の出力１，出力２及び出力３を同時に押下すれば、第１モニタ４，第２モニタ５，及びＶＴＲ６へ出力される画像にコメントデータが重畳されて表示される。
【００３３】
このとき、例えば出力３の画像のみコメントデータを消去したい場合は、文字表示選択スイッチ３３の出力３を再度押下すればＶＴＲ６へ出力される映像信号におけるコメントデータを消去することができる。
【００３４】
また、コメントデータを表示して特定時間経過後に消去したい場合は、表示時間設定スイッチ２７で表示時間を設定し、時間表示選択スイッチ３４の中のキャラクタ時間表示を行う出力画像のスイッチを押下することにより、設定された表示時間の期間、キャラクタが映像信号に重畳される。そして、設定時間経過後に表示時間設定回路１４からの制御信号によってキャラクタ重畳切替回路１５ａ，１５ｂ，１５ｃが入力選択回路１２の出力側に切り替わり、外部入力装置への映像信号からコメントデータが消去される。すなわち、時間表示選択スイッチ３４の出力１，出力２及び出力３を同時に押下すれば、設定時間経過後に第１モニタ４，第２モニタ５，及びＶＴＲ６へ出力される画像のコメントデータが消去される。
【００３５】
以上のように、本実施例の構成によれば、第１実施例の効果に加えて、モニタやＶＴＲ等の外部入力装置へのコメントデータの表示、非表示、及び任意時間表示の設定が装置毎に選択的に行うことが可能であり、より出力先の装置の役割に適した出力画像を得ることができる。
【００３６】
図６及び図７は本発明の第３実施例に係り、図６は画像処理装置の主要部の構成を示すブロック図、図７は画像処理装置の操作パネルの一部を拡大して示した説明図である。
【００３７】
第３実施例は第１実施例の他の変形例であり、モニタ等の外部入力装置へのコメントデータの表示設定及びコメントデータの表示時間設定を装置毎に各々可能とした例である。第１実施例の構成と異なる部分についてのみ説明する。
【００３８】
図６に示すように、第３実施例の画像処理装置３６は、第２実施例と同様に入力選択回路１２及びキャラクタ重畳回路１３の出力側に３系統のキャラクタ重畳切替回路１５ａ，１５ｂ，１５ｃが設けられると共に、さらに各系統のキャラクタ重畳切替回路１５ａ，１５ｂ，１５ｃ毎に表示時間設定回路１４ａ，１４ｂ，１４ｃが設けられ、それぞれ制御信号を送出するような構成となっている。
【００３９】
操作パネル３７には、図７に示すように、第１モニタ４への出力画像（出力１）に対して連続的にコメントデータを表示するか否かを選択する文字表示選択スイッチ３８ａと、表示時間設定スイッチ２７ａ及び設定時間表示器２８ａと、設定時間による文字表示を選択するための時間表示制御スイッチ３９ａとが設けられている。また、第２モニタ５への出力画像（出力２）及びＶＴＲ６への出力画像（出力３）に関しても、同様に文字表示選択スイッチ３８ｂ，３８ｃ、表示時間設定スイッチ２７ｂ，２７ｃ、設定時間表示器２８ｂ，２８ｃ、時間表示制御スイッチ３９ｂ，３９ｃが設けられている。
【００４０】
本実施例の構成において、第１モニタ４への出力画像にコメントデータの文字表示を行う場合は、操作パネル３７上の出力１の文字表示選択スイッチ３８ａを押下することにより、表示時間設定回路１４ａからの制御信号によってキャラクタ重畳切替回路１５ａはキャラクタ重畳回路１３の出力側に切り替わり、キャラクタ信号が映像信号に重畳されて第１モニタ４の画像にコメントデータが表示される。また、文字表示選択スイッチ３８ａ，３８ｂ，３８ｃを同時に押下すれば、第１モニタ４，第２モニタ５，及びＶＴＲ６へ出力される画像にコメントデータが同時に重畳されて表示される。
【００４１】
このとき、例えば出力３の画像のみコメントデータを消去したい場合は、出力３の文字表示選択スイッチ３８ｃを再度押下すればＶＴＲ６へ出力される映像信号におけるコメントデータを消去することができる。なお、出力１及び出力２についても同様に行うことができる。
【００４２】
また、出力１のみ特定時間経過後にコメントデータを消去したい場合は、出力１の表示時間設定スイッチ２７ａで表示時間を設定し、時間表示制御スイッチ３９ａを押下することにより、設定された表示時間の期間、キャラクタが映像信号に重畳され、設定時間経過後に表示時間設定回路１４ａからの制御信号によってキャラクタ重畳切替回路１５ａが入力選択回路１２の出力側に切り替わり、第１モニタ４への映像信号からコメントデータが消去される。図７の例ではコメントデータが表示されてから５秒間後に消去される。なお、出力２及び出力３についても同様に行うことができ、図７の例では出力２は３秒間後に、出力３は１秒間後にそれぞれコメントデータが消去される。
【００４３】
以上のように、本実施例の構成によれば、第１実施例の効果に加えて、モニタやＶＴＲ等の外部入力装置毎に独立してコメントデータの表示、非表示の選択及びコメントデータ表示時間の設定が可能であり、より出力先の装置の役割に適した出力画像を得ることができる。
【００４４】
図８及び図９は本発明の第４実施例に係り、図８は画像処理装置を含む内視鏡装置の構成を示すブロック図、図９は画像処理装置の操作パネルの一部を拡大して示した説明図である。
【００４５】
第４実施例は、外部入力装置のうちの映像記録手段であるＶＴＲの記録動作に連動してコメントデータの表示、非表示を行えるようにした例である。
【００４６】
図８に第４実施例の画像処理装置４１の構成を示す。ここでは図１に示した第１実施例と異なる部分についてのみ説明する。
【００４７】
第１実施例の構成に加えて、キーボード１９から入力されたコメントデータを記憶保持しておくための情報記憶手段としてのキャラクタメモリ４３と、ＶＴＲ６の記録動作を制御するための録画制御回路４４とが設けられ、それぞれＣＰＵ１７に接続されている。ＣＰＵ１７に接続された操作パネル４２からの指示に基づいて、録画制御回路４４より制御信号がＶＴＲ６へ送られ、映像信号の記録制御がなされるようになっている。
【００４８】
操作パネル４２の主要部の構成を図９に示す。操作パネル４２には、図３の第１実施例の構成に加えて、ＶＴＲ操作部４５が配設され、録画指示を行うＲＥＣスイッチ４６と、停止指示を行うＳＴＯＰスイッチ４７とが設けられている。
【００４９】
本実施例では、キーボード１９から入力されたコメントデータはキャラクタメモリ４３に保持されており、所望の時に読み出せるようになっている。コメントデータの文字表示を行う際に、キャラクタメモリ４３よりコメントデータが読み出され、キャラクタ重畳回路１３において画像信号にキャラクタ信号が重畳される。
【００５０】
コメントデータの文字表示を行う場合に、第１実施例と同様に操作パネル４２の文字表示ＯＮ／ＯＦＦスイッチ２６を操作することによって行うことができるが、本実施例では操作パネル４２上のＲＥＣスイッチ４６、またはＶＴＲの操作パネル上の図示しないＲＥＣスイッチによっても、録画動作と連動して出力画像にコメントデータを表示することができる。
【００５１】
操作パネル４２上のＲＥＣスイッチ４６を押すことにより、キャラクタ重畳切替回路１５はキャラクタ重畳回路１３の出力側に切り替わってキャラクタ信号が重畳され、これと同時に録画制御回路４４よりＶＴＲ６へ制御信号が出力されてＶＴＲ６の録画が開始される。このとき、時間表示制御スイッチ２９を押しておけば、ＲＥＣスイッチ４６の押下後から設定時間（図９の例では５秒間）の期間だけコメントデータが表示される。
【００５２】
また、操作パネル４２上のＳＴＯＰスイッチ４７を押すことにより、録画制御回路４４よりＶＴＲ６へ制御信号が出力されてＶＴＲ６の録画動作が停止すると共に、キャラクタ重畳切替回路１５が入力選択回路１２の出力側に切り替わり、外部入力装置への映像信号からコメントデータの表示が消去される。
【００５３】
同様にＶＴＲ６上のＲＥＣスイッチを押した場合には、ＶＴＲ６の録画動作が開始されると同時に、録画状態を示す信号が録画制御回路４４へ送られてこの信号を基にＣＰＵ１７によってキャラクタ重畳切替回路１５の制御が行われ、コメントデータが重畳された映像信号が画像処理装置４１から出力される。
【００５４】
以上のように、本実施例の構成によれば、外部入力装置のうちの映像記録を行うＶＴＲの記録動作に連動してコメントデータの表示、非表示動作を行うことが可能となり、出力画像にコメントデータを重畳する際にいくつものスイッチを押すことなく録画操作を行うだけで簡単にキャラクタ重畳動作を制御することが可能となる。これにより、手術開始時など録画開始と同時にコメントデータのキャラクタ重畳を行うことができ、コメントデータの表示、非表示の操作を忘れて画像へのキャラクタ重畳を失敗するおそれを防止できると共に、操作の煩わしさを解消することができる。また、映像信号を録画する際に必ず画像の先頭部にコメントデータを付加することができるため、録画後の画像の判別、整理を容易にすることが可能となる。
【００５５】
図１０及び図１１は本発明の第５実施例に係り、図１０は画像処理装置の操作パネルの一部を拡大して示した説明図、図１１はコメントデータを表示する際の動作を示すフローチャートである。
【００５６】
第５実施例は、コメントデータとしてＶＴＲの録画テープのテープ残時間または録画経過時間を表示可能とした例である。画像処理装置の構成は第４実施例の構成と同様であり、説明を省略する。
【００５７】
図１０に示すように、操作パネル５０には、図９の第４実施例の構成に加えて、録画時間表示設定部５１が配設され、テープ長を設定するためのテープ長選択スイッチ５２と、テープ残時間表示を選択するテープ残時間表示スイッチ５３と、録画経過時間表示を選択する録画経過時間表示スイッチ５４とが設けられている。
【００５８】
本実施例の画像処理装置の動作を図１１を参照しながら説明する。図１１は主に画像処理装置中のＣＰＵの動作を示したものである。
【００５９】
まずステップＳ１（以下、ステップは省略する）で、ＶＴＲの録画テープのテープ長を設定する。ここでは操作パネル５０上のテープ長選択スイッチ５２より使用する録画テープのテープ長に該当するスイッチを選択することにより行う。テープ長を設定した後、Ｓ２で、ＣＰＵ１７はＣＰＵ１７自身またはキャラクタメモリ４３に記憶された録画経過時間をリセットし、Ｓ３で操作パネル上の文字表示ＯＮ／ＯＦＦスイッチがＯＮか否かを判断する。ここで、文字表示ＯＮ／ＯＦＦスイッチが選択されていない場合はコメントデータ表示の指示がなされるまでＳ３の動作を繰り返す。
【００６０】
Ｓ３で文字表示ＯＮ／ＯＦＦスイッチが押された場合はＳ４に進み、テープ残時間表示スイッチ５３がＯＮか否かを判断する。ここでテープ残時間表示スイッチ５３が選択されている場合はＳ５に進む。Ｓ５で操作パネル５０あるいはＶＴＲ自身のＲＥＣスイッチが押されるまで待機した後、ＲＥＣスイッチが押されるとＳ６に進んで前記設定されたテープ長より録画経過時間を減算し、コメントデータとしてのテープの残時間を演算する。そして、Ｓ７で、映像信号に重畳するコメントデータの表示としてテープ残時間表示を行う。表示後は、Ｓ３に戻り以下同じ動作を繰り返す。
【００６１】
一方、文字表示ＯＮ／ＯＦＦスイッチが押されておりかつ録画経過時間表示スイッチ５４が押された場合は、Ｓ３，Ｓ４からＳ８に進む。Ｓ８で操作パネル５０あるいはＶＴＲ自身のＲＥＣスイッチが押されるまで待機した後、ＲＥＣスイッチが押されるとＳ９に進んで映像信号に重畳するコメントデータの表示として録画経過時間表示を行う。表示後は、Ｓ３に戻り以下同じ動作を繰り返す。
【００６２】
なお、第２実施例や第３実施例の構成と組み合わせて、第１モニタ４や第２モニタ５へ出力する映像信号にのみテープ残時間表示や録画経過時間表示を行い、ＶＴＲ６へ出力する映像信号にはコメントデータの表示を停止したり、録画時間表示以外のコメントデータの表示を行うようにすることが可能である。
【００６３】
モニタやＶＴＲ等へ出力する映像信号に重畳するコメントデータとしては、従来は内視鏡画像信号に関するものとか、画像表示装置等の接続状態などの情報が用いられており、ＶＴＲの録画テープの残り時間表示などは行われていなかった。このため、手術中に録画テープの残り具合が気になって手技に集中できなかったり、途中でテープがなくなるのを防ぐために手術途中でテープを交換したりする等テープの無駄使いをしてしまうなどの不具合のおそれがあったが、本実施例のようにコメントデータとして映像記録手段の記録可能時間表示または記録経過時間の表示を可能にすることにより、前記不具合を解決することができる。
【００６４】
すなわち、本実施例によれば、ＶＴＲのテープ長の残り時間表示や録画経過時間表示を行うことにより、録画テープの残り時間やテープ切れを気にせずに手術を継続して行うことができ、手技に集中でき内視鏡装置使用時の操作性を向上させることができる。
【００６５】
なお、本実施例では映像信号に重畳させてテープ残時間表示または録画経過時間表示のいずれかを行うようにしたが、テープ残時間表示と録画経過時間表示を交互に行うようにしても良い。
【００６６】
図１２ないし図１７は本発明の第６実施例に係り、図１２は画像処理装置の主要部の構成を示すブロック図、図１３は画像処理装置の操作パネルの一部を拡大して示した説明図、図１４は画像合成を行わない場合のモニタの表示画像を示す作用説明図、図１５は親子画面に画像合成を行った場合のモニタの表示画像を示す作用説明図、図１６は画像回転を行った場合のモニタの表示画像を示す作用説明図、図１７は画像合成及び画像回転を行った場合のモニタの表示画像を示す作用説明図である。
【００６７】
第６実施例は、画像合成及び画像回転機能を有する装置に前述の実施例の構成を適用した例である。
【００６８】
図１２に示すように、第６実施例の画像処理装置６１は、図１に示した第１実施例の構成における入力選択回路１２の出力側に、入力選択回路１２の出力信号を記憶するためのフレームメモリ６２と、入力選択回路１２の出力信号に対して補間処理を行う補間回路６３と、補間回路６３の出力信号を１／４サイズで記憶するための１／４フレームメモリ６４と、前記フレームメモリ６２及び１／４フレームメモリ６４の後段に接続され画像合成処理を行うための合成回路６５と、画像回転処理を行うための回転回路６６とが設けられ、回転回路６６の出力がキャラクタ重畳回路１３及びキャラクタ重畳切替回路１５に接続されて構成されている。合成回路６５及び回転回路６６は、ＣＰＵ６７からの制御信号によって画像合成処理及び画像回転処理が制御されるようになっている。
【００６９】
操作パネル６８には、図１３に示すように、図３の第１実施例と同様に文字表示切替部２１，表示時間設定部２２が設けられると共に、親子画面の入力画像の選択を行う入力選択部６９と、画像処理機能の選択を行う画像処理選択部７０とが配設されている。
【００７０】
入力選択部６９には、親画面の映像信号の選択を行う親画面選択スイッチ７１と、子画面の映像信号の選択を行う子画面選択スイッチ７２と、選択時の親子画面の切り替えを行う親子切替スイッチ７３と、選択した親子画面それぞれの画像入力の表示を行うＬＥＤ等からなるセレクト表示器７４とが設けられている。画像処理選択部７０には、親画面に子画面を挿入する画像合成を指示するためのＰinＰ（picture in picture）スイッチ７５と、画像回転の例として反転を指示するための反転スイッチ７６とが設けられている。
【００７１】
次に、本実施例の画像処理装置における画像合成機能及び画像回転機能に係る動作について説明する。コメントデータの重畳処理については前述の第１実施例と同様であり、説明を省略する。
【００７２】
本実施例の構成において、操作パネル６８上の画像処理選択部７０のスイッチが選択されていない場合は、合成回路６５による画像合成処理や回転回路６６による画像回転処理が行われず、入力選択回路１２の出力信号がそのままキャラクタ重畳回路１３及びキャラクタ重畳切替回路１５に入力され、キャラクタ重畳処理等が行われた後、Ｄ／Ａ変換器１６によってアナログ変換され、映像信号として画像処理装置６１より第１モニタ４，第２モニタ５，ＶＴＲ６に出力されて例えば図１４に示すように画像が表示される。
【００７３】
画像合成を行う場合には、まず操作パネル６８上の親画面選択スイッチ７１を押すことにより親画面の入力信号を選択する。このとき、親画面選択スイッチ７１で選択された画像入力に対応するセレクト表示器７４が点灯し、入力信号としていずれの画像入力が選択されているかが判別できる。図１３の例では親画面の入力信号としてVIDEO １（内視鏡１ａからの被写体（Ａ）の画像）が選択されていることを示している。また、親子切替スイッチ７３を押すことにより子画面選択スイッチ７２が有効になり、子画面用の入力信号の選択が可能となる。選択方法及びセレクト表示については親画面の場合と同様である。図１３の例では子画面の入力信号としてVIDEO ２（内視鏡１ｂからの被写体（Ｂ）の画像）が選択されていることを示している。
【００７４】
このように選択された画像信号は、親画面の信号は入力選択回路１２よりフレームメモリ６２に入力されて逐次記憶され、子画面の信号は入力選択回路１２より補間回路６３に入力されて補間処理が行われた後、１／４フレームメモリ６４で逐次記憶される。ここで、操作パネル６８のＰinＰスイッチ７５が選択されると、合成回路６５によって画像合成処理が行われ、親子画面に合成された映像信号が第１モニタ４，第２モニタ５，ＶＴＲ６に出力されて図１５に示すように親子画面の合成画面が表示される。また、ＰinＰスイッチ７５を再度押すことにより、図１４に示したように親画面選択スイッチ７１で選択された親画面の画像（被写体（Ａ）の画像）だけが表示される。
【００７５】
画像回転を行う場合には、操作パネル６８上の反転スイッチ７６を操作する。入力選択部６９の各スイッチ及びＰinＰスイッチ７５の操作、及びこれに係る動作は前述と同様である。
【００７６】
ＰinＰスイッチ７５が押されていない場合で、反転スイッチ７６が押されたときには、フレームメモリ６２に記憶された映像信号は回転回路６６で画像回転処理が施された後、第１モニタ４，第２モニタ５，ＶＴＲ６に出力されて図１６に示すように反転された画像が表示される。なお、画像回転した像としては倒立像、回転像、鏡像などを生成し表示することができる。また、この状態から反転スイッチ７６を再度押すと、画像をもとの原画像に戻すことができる。
【００７７】
また、ＰinＰスイッチ７５が押されている場合で、かつ反転スイッチ７６が押されたときには、フレームメモリ６２及び１／４フレームメモリ６４に記憶された映像信号が合成回路６５によって画像合成された後、回転回路６６によって画像回転され、第１モニタ４，第２モニタ５，ＶＴＲ６に出力されて図１７に示すように画像合成及び反転された画像が表示される。
【００７８】
なお、コメントデータのキャラクタ（図中１２３４で示す）は図１４ないし図１７に示したように、前述の実施例と同様にして任意の設定時間あるいは連続的に内視鏡画像に重畳されて表示される。
【００７９】
以上のように、本実施例の構成によれば、画像合成及び画像回転機能を有する装置においても、画像合成及び画像回転処理を行った映像信号に対して任意にコメントデータの重畳ができ、また、コメントデータの表示時間を任意に設定することが可能であり、これにより、容易にコメントデータを出力画像に表示することができ、出力先の装置の役割に最適な出力画像を出力することが可能となる。
【００８０】
［付記］
以上詳述したように本発明の実施態様によれば、以下のような構成を得ることができる。すなわち、
（１） 映像信号に対して該映像信号に関する情報のキャラクタを重畳するキャラクタ重畳手段を備え、映像信号を画像として表示する映像表示手段、映像信号を記録する映像記録手段の少なくとも一方を含む外部入力装置へ映像信号を出力する画像処理装置において、
前記外部入力装置へ出力する映像信号に対して、前記キャラクタ重畳手段によってキャラクタを重畳する際のキャラクタ重畳時間を設定する重畳時間設定手段と、
前記重畳時間設定手段により設定された設定時間に基づいて前記キャラクタ重畳手段の動作を制御するキャラクタ重畳制御手段と、
を備えたことを特徴とする画像処理装置。
【００８１】
この構成により、映像信号に関する情報としてのコメントデータの表示時間の制御を行うことができ、出力先の装置の役割に最適な出力画像を出力できる効果を有する。
【００８２】
（２） 映像信号に対して該映像信号に関する情報のキャラクタを重畳するキャラクタ重畳手段を備え、映像信号を画像として表示する映像表示手段、映像信号を記録する映像記録手段の少なくとも一方を含む外部入力装置へキャラクタを重畳した映像信号を出力する画像処理装置において、
前記外部入力装置へ出力する映像信号に対して、前記キャラクタ重畳手段によってキャラクタを重畳する際のキャラクタ重畳時間を設定する重畳時間設定手段と、
前記映像信号に重畳する情報を記憶する情報記憶手段と、
前記重畳時間設定手段により設定された設定時間に基づいて前記キャラクタ重畳手段の動作を制御するキャラクタ重畳制御手段と、
を備えたことを特徴とする画像処理装置。
【００８３】
（３） 複数の映像信号を入力する映像入力手段と、前記入力された映像信号に対して該映像信号に関する情報のキャラクタを重畳するキャラクタ重畳手段を備え、映像信号を画像として表示する映像表示手段、映像信号を記録する映像記録手段の少なくとも一つを含む外部入力装置へキャラクタを重畳した映像信号を出力する画像処理装置において、
前記複数の映像信号のうち２以上の映像信号を合成し合成画像を得る画像合成手段と、
前記映像信号の画像に対する回転画像を得るための信号処理を行う画像回転手段と、
前記画像合成手段あるいは前記画像回転手段の出力信号に対して、前記キャラクタ重畳手段によってキャラクタを重畳する際のキャラクタ重畳時間を設定する重畳時間設定手段と、
前記重畳時間設定手段により設定された設定時間に基づいて前記キャラクタ重畳手段の動作を制御するキャラクタ重畳制御手段と、
を備えたことを特徴とする画像処理装置。
【００８４】
（４） 前記画像処理装置は、さらに、
前記複数の映像信号の画像、前記複数の映像信号のうち２以上を合成した合成画像、前記映像信号の画像が回転された回転画像、前記合成画像のうち少なくとも一部が回転された回転画像、のいずれかを前記外部入力装置へ出力するよう前記画像合成手段及び前記画像回転手段の入力または出力を選択的に切り替える画像選択手段を備えたことを特徴とする前記付記（３）に記載の画像処理装置。
【００８５】
（５） 前記キャラクタ重畳制御手段は、前記重畳時間設定手段によって設定されたキャラクタ重畳時間の期間、前記キャラクタ重畳手段によって映像信号に対してキャラクタを重畳させることを特徴とする前記付記（１）に記載の画像処理装置。
【００８６】
（６） 前記キャラクタ重畳制御手段は、前記設定時間による映像信号に対するキャラクタ重畳を、前記外部入力装置毎に選択的に実行可能としたことを特徴とする前記付記（１）に記載の画像処理装置。
【００８７】
（７） 前記重畳時間設定手段は、前記キャラクタ重畳時間の設定を前記外部入力装置毎に実行可能としたことを特徴とする前記付記（１）に記載の画像処理装置。
【００８８】
（８） 映像信号に対して該映像信号に関する情報のキャラクタを重畳するキャラクタ重畳手段を備え、映像信号を記録する映像記録手段を含む外部入力装置へ映像信号を出力する画像処理装置において、
前記外部入力装置へ出力する映像信号に対して、前記キャラクタ重畳手段によってキャラクタを重畳する際のキャラクタ重畳時間を設定する重畳時間設定手段と、
前記映像記録手段の録画制御を行う録画制御手段と、
前記映像記録手段の記録動作に連動して、前記重畳時間設定手段により設定されたキャラクタ重畳時間の期間、前記キャラクタ重畳手段の動作を制御して映像信号に対してキャラクタを重畳させるキャラクタ重畳制御手段と、
を備えたことを特徴とする画像処理装置。
【００８９】
この構成により、煩雑な操作を行うことなく、映像信号に関する情報としてのコメントデータの表示制御を行うことができる効果を有する。
【００９０】
（９） 前記画像処理装置は、前記映像記録手段を含む外部入力装置へ映像信号を出力するものであって、
前記映像記録手段の録画制御を行う録画制御手段を備え、
前記キャラクタ重畳制御手段は、前記映像記録手段の記録動作に連動して、前記重畳時間設定手段により設定されたキャラクタ重畳時間の期間、前記キャラクタ重畳手段によって映像信号に対してキャラクタを重畳させることを特徴とする前記付記（１）に記載の画像処理装置。
【００９１】
（１０） 前記画像処理装置は、前記映像記録手段を含む外部入力装置へ映像信号を出力するものであって、
前記映像信号に関する情報として、前記映像記録手段の記録動作に関する情報のキャラクタを映像信号に対して重畳することを特徴とする前記付記（１）に記載の画像処理装置。
【００９２】
この構成により、映像記録手段の録画テープの残り時間を気にせずに他の操作を継続して行うことができる効果を有する。
【００９３】
（１１） 前記映像信号に対して重畳する前記映像記録手段の記録動作に関する情報を演算するための演算手段を備えた前記付記（１０）に記載の画像処理装置。
【００９４】
（１２） 前記映像記録手段の記録動作に関する情報は、ＶＴＲ（ビデオテープレコーダ）のテープ残時間である前記付記（１０）に記載の画像処理装置。
【００９５】
（１３） 前記映像記録手段の記録動作に関する情報は、ＶＴＲの記録経過時間である前記付記（１０）に記載の画像処理装置。
【００９６】
（１４） 前記映像記録手段の記録動作に関する情報として、ＶＴＲのテープ残時間と記録経過時間とを交互に表示するよう映像信号に対して重畳することを特徴とする前記付記（１０）に記載の画像処理装置。
【００９７】
（１５） 内視鏡装置と接続され、該内視鏡装置からの映像信号に対して該映像信号に関する情報のキャラクタを重畳するキャラクタ重畳手段を備え、映像信号を画像として表示する映像表示手段、映像信号を記録する映像記録手段の少なくとも一方を含む外部入力装置へ映像信号を出力する画像処理装置において、
前記外部入力装置へ出力する映像信号に対して、前記キャラクタ重畳手段によってキャラクタを重畳する際のキャラクタ重畳時間を設定する重畳時間設定手段と、
前記重畳時間設定手段により設定された設定時間に基づいて前記キャラクタ重畳手段の動作を制御するキャラクタ重畳制御手段と、
を備えたことを特徴とする画像処理装置。
【００９８】
【発明の効果】
以上説明したように本発明によれば、出力画像にコメントデータを重畳する際の時間を任意に設定することができ、出力画像において必要なときに必要な時間だけコメントデータを容易に表示することが可能となる効果がある。
【図面の簡単な説明】
【図１】図１ないし図３は本発明の第１実施例に係り、図１は画像処理装置を含む内視鏡装置の構成を示すブロック図
【図２】内視鏡下外科手術に使用する内視鏡装置の全体構成を示す構成説明図
【図３】第１実施例に係る画像処理装置の操作パネルの一部を拡大して示した説明図
【図４】図４及び図５は本発明の第２実施例に係り、図４は画像処理装置の主要部の構成を示すブロック図
【図５】第２実施例に係る画像処理装置の操作パネルの一部を拡大して示した説明図
【図６】図６及び図７は本発明の第３実施例に係り、図６は画像処理装置の主要部の構成を示すブロック図
【図７】第３実施例に係る画像処理装置の操作パネルの一部を拡大して示した説明図
【図８】図８及び図９は本発明の第４実施例に係り、図８は画像処理装置を含む内視鏡装置の構成を示すブロック図
【図９】第４実施例に係る画像処理装置の操作パネルの一部を拡大して示した説明図
【図１０】図１０及び図１１は本発明の第５実施例に係り、図１０は画像処理装置の操作パネルの一部を拡大して示した説明図
【図１１】コメントデータを表示する際の動作を示すフローチャート
【図１２】図１２ないし図１７は本発明の第６実施例に係り、図１２は画像処理装置の主要部の構成を示すブロック図
【図１３】第６実施例に係る画像処理装置の操作パネルの一部を拡大して示した説明図
【図１４】画像合成を行わない場合のモニタの表示画像を示す作用説明図
【図１５】親子画面に画像合成を行った場合のモニタの表示画像を示す作用説明図
【図１６】画像回転を行った場合のモニタの表示画像を示す作用説明図
【図１７】画像合成及び画像回転を行った場合のモニタの表示画像を示す作用説明図
【符号の説明】
１ａ，１ｂ，１ｃ…内視鏡
３…画像処理装置
４…第１モニタ
５…第２モニタ
６…ＶＴＲ
１２…入力選択回路
１３…キャラクタ重畳回路
１４…表示時間設定回路
１５…キャラクタ重畳切替回路
１７…ＣＰＵ
１８…操作パネル
１９…キーボード
２１…文字表示切替部
２２…表示時間設定部
２３…入力選択部
【産業上の利用分野】
本発明は、入力画像に対して該画像に関するコメントデータのキャラクタを重畳する機能を有する画像処理装置に関する。
【０００２】
【従来の技術】
入力画像に対してコメントデータのキャラクタを重畳したり、複数の画像を合成するなどの画像処理を行う装置は、例えば内視鏡装置において用いられ、患者のデータや装置の状態を表す情報などのコメントデータのキャラクタを被検部位の内視鏡画像に重畳して、モニタ画面上に表示することなどが従来より行われている。
【０００３】
近年、細長の挿入部を体腔内に挿入することによって、切開を必要とすることなく体腔内深部の対象部位を観察したり、必要に応じて処置具を用いて治療処置のできる内視鏡が広く用いられており、最近ではＣＣＤ等の固体撮像素子を備えた電子内視鏡や光学式内視鏡にテレビカメラを装着したものなどを用いて、被写体画像の電気信号を得てモニタ等に画像を表示する電子内視鏡装置が用いられつつある。
【０００４】
この電子内視鏡装置では、被写体画像を電気信号に変換した画像信号を信号ケーブルを介して画像処理装置に伝送し、映像信号をモニタ等に出力して内視鏡画像を表示したり、撮像した画像信号に関する文字情報もしくは図形情報（コメントデータ）を文字信号（キャラクタ信号）として映像信号に重畳して出力し、キャラクタを重畳した画像を表示したりできるようになっている。映像信号に重畳するコメントデータとしては、患者名、患部名、年月日等の内視鏡画像に関する情報が使用される。
【０００５】
前記のような入力画像にキャラクタを重畳する機能を有する画像処理装置として、本出願人は特願平５−３３７２２９号において、複数の入力画像に対しキャラクタを重畳した後、モニタに表示したり、ＶＴＲに録画することができる装置を提案している。この装置では、モニタやＶＴＲ等への出力画像を出力先の装置の役割に最適な形態にすることができるように、画像出力及び画像に重畳するキャラクタ出力を制御する構成が採られている。
【０００６】
【発明が解決しようとする課題】
前述したような従来の装置では、キャラクタとしての文字情報もしくは図形情報を出力画像に重畳するか否かの制御を行うことは可能であるが、画像の出力に合わせて自動的に重畳を開始したり、一旦重畳した後に文字情報の重畳を停止するなど、キャラクタの重畳時間を自由に設定することは困難であった。すなわち、内視鏡装置を用いて治療処置を行う際に手術開始と同時に文字情報を重畳させるために、重畳する文字情報及び文字情報の重畳制御用スイッチを予めセットしておく必要があったり、また、一度文字情報を画像出力に重畳させた後に文字情報が重畳されない出力画像に戻そうとした場合に、文字情報の重畳制御用スイッチ等を再度押さなければならないなど、キャラクタを重畳する際の操作が煩雑になる問題点があった。
【０００７】
本発明は、これらの事情に鑑みてなされたもので、出力画像にコメントデータを重畳する際の時間を任意に設定することができ、出力画像において必要なときに必要な時間だけコメントデータを容易に表示することが可能な画像処理装置を提供することを目的としている。
【０００８】
【課題を解決するための手段】
本発明による画像処理装置は、複数の入力画像信号を入力するための画像入力手段と、前記画像入力手段で入力された前記複数の入力画像信号から画像信号を選択する画像信号選択手段と、前記画像信号選択手段で選択された選択画像信号に関する情報のキャラクタ信号を前記選択画像信号に重畳するキャラクタ重畳手段と、前記キャラクタ重畳手段により前記キャラクタ信号が重畳された重畳画像信号と前記選択画像信号とを切り替えて選択的に出力可能な画像切り替え手段と、前記画像切り替え手段で前記重畳画像信号が選択出力される時間を設定可能な時間設定手段と、前記画像切り替え手段により前記重畳画像信号が選択されているとき、前記時間設定手段により設定された時間を選択する操作入力に基づき、前記時間設定手段で設定された設定時間の間、前記重畳画像信号を選択するように前記画像切り替え手段を制御する制御手段とを具備したものである。
また、本発明による画像処理装置は、複数の入力画像信号を入力するための画像入力手段と、前記画像入力手段で入力された前記複数の入力画像信号から画像信号を選択する画像信号選択手段と、前記画像信号選択手段で選択された選択画像信号に関する情報のキャラクタ信号を前記選択画像信号に重畳するキャラクタ重畳手段と、前記キャラクタ重畳手段により前記キャラクタ信号が重畳された重畳画像信号と前記入力画像信号とを切り替えて複数の機器に選択的に出力可能な複数の画像切り替え手段と、前記複数の画像切り替え手段で前記重畳画像信号が選択される時間を前記複数の画像切り替え手段の各出力毎にそれぞれ設定する重畳時間設定手段と、前記画像切り替え手段により前記重畳画像信号が選択されているとき、前記重畳時間設定手段により設定された時間を選択する操作入力に基づき、前記複数の機器に対して独立に、前記重畳時間設定手段で設定された設定時間の間、前記重畳画像信号を選択するように前記画像切り替え手段を制御する制御手段とを具備したものである。
【００１０】
【実施例】
以下、図面を参照して本発明の実施例を説明する。
図１ないし図３は本発明の第１実施例に係り、図１は画像処理装置を含む内視鏡装置の構成を示すブロック図、図２は内視鏡下外科手術に使用する内視鏡装置の全体構成を示す構成説明図、図３は画像処理装置の操作パネルの一部を拡大して示した説明図である。
【００１１】
本実施例は、体腔内等を観察する内視鏡を備えた内視鏡装置において画像処理装置を適用した例を示したものである。図２に内視鏡下外科手術に使用する内視鏡装置の全体構成を示す。
【００１２】
図２は内視鏡下外科手術時の手術室を上から見た図であり、内視鏡装置は、撮影機能を備えたＴＶカメラを装着したＴＶカメラ付き内視鏡（以下、単に内視鏡と記す）１と、この内視鏡に照明光を供給する光源装置２と、前記内視鏡に対応する信号処理を行う画像処理装置３と、前記画像処理装置から出力される映像信号を表示する映像表示手段としての第１モニタ４及び第２モニタ５と、前記画像処理装置から出力される映像信号の記録等を行う映像記録手段としてのＶＴＲ６とを備えて構成されている。
【００１３】
このような構成の内視鏡装置において、術者Ａは内視鏡１と処置具７とを持ち、第１モニタ４を見ながら手技を行うことになる。術者Ｂは処置具８を持ち第２モニタ５を見ながら手技を行うことになる。また、術者Ａ，術者Ｂの近傍には、処置具の受け渡しや補助操作等を行うナースＡ，ナースＢが位置している。
【００１４】
前記内視鏡１には、光源装置２よりライトガイドケーブルを介して照明光が送られ、体腔内の被検部位が照明される。そして、内視鏡１で得られた被検部位の画像は画像処理装置３に送られて信号処理され、外部入力装置としての第１モニタ４，第２モニタ５，及びＶＴＲ６に映像信号として送られて映像化及び録画がなされるようになっている。
【００１５】
図１に画像処理装置３の詳細の構成を示す。図１においては、撮像機能を有する複数（図示例では３つ）の内視鏡１ａ，１ｂ，１ｃを画像処理装置３に接続した例を示している。
【００１６】
画像処理装置３は、内視鏡１ａ，１ｂ，１ｃからの映像信号をそれぞれデジタル信号に変換するＡ／Ｄ変換器１１ａ，１１ｂ，１１ｃと、Ａ／Ｄ変換器１１ａ〜１１ｃの出力段に設けられ、画像処理装置３への複数の画像入力のうちモニタ等の外部入力装置へ出力する信号を選択するための入力選択回路１２とを有しており、画像処理装置３の出力端子に接続された第１モニタ４，第２モニタ５，ＶＴＲ６へ出力する画像を入力選択回路１２によって内視鏡１ａ〜１ｃからの画像入力より選択するようになっている。
【００１７】
また、画像処理装置３には、前記入力選択回路１２により選択された画像信号に、該画像信号に関する文字情報もしくは図形情報によるコメントデータのキャラクタ信号を重畳するためのキャラクタ重畳手段としてのキャラクタ重畳回路１３と、コメントデータを画像信号に重畳させる時間を設定する表示時間設定回路１４と、前記入力選択回路１２の出力及びキャラクタ重畳回路１３の出力が接続され、前記表示時間設定回路１４からの制御信号により画像信号にコメントデータを重畳するか否かを切り替えるキャラクタ重畳切替回路１５とが設けられ、キャラクタ重畳切替回路１５によってキャラクタ重畳回路１３からのコメントデータを重畳した画像信号か、あるいは入力選択回路１２からのコメントデータを重畳しない画像信号が選択されるようになっている。
【００１８】
前記キャラクタ重畳切替回路１５の出力段には、キャラクタ重畳切替回路１５の出力信号をアナログ信号に変換するＤ／Ａ変換器１６が設けられ、Ｄ／Ａ変換器１６の出力が映像信号として第１モニタ４，第２モニタ５，ＶＴＲ６へ出力されるようになっている。また、画像処理装置３には、入力選択回路１２，キャラクタ重畳回路１３，及びキャラクタ重畳切替回路１５の制御を行うＣＰＵ１７と、これらの回路の制御に係る操作指示を行うための操作パネル１８とが設けられている。さらに、コメントデータを入力するための入力装置としてのキーボード１９が設けられ、ＣＰＵ１７に接続されている。前記操作パネル１８及び表示時間設定回路１４により重畳時間設定手段が、前記ＣＰＵ１７，表示時間設定回路１４，及びキャラクタ重畳切替回路１５によりキャラクタ重畳制御手段がそれぞれ構成されるようになっている。
【００１９】
なお、図示しないが画像処理装置３にはモニタ等へ出力するのに適した映像信号を生成するための各種画像信号処理を行う回路が設けられている。
【００２０】
前記操作パネル１８の主要部の構成を図３に示す。操作パネル１８には、出力画像へのコメントデータの表示を切り替える文字表示切替部２１、コメントデータの表示時間を設定する表示時間設定部２２、入力画像の選択を行う入力選択部２３がそれぞれ配設され、各機能に係る操作スイッチや表示部が設けられている。
【００２１】
入力選択部２３には、入力された映像信号の選択を行うセレクトスイッチ２４と、選択した画像入力の表示を行うＬＥＤ等からなるセレクト表示器２５とが設けられている。文字表示切替部２１には、コメントデータとなる文字情報の重畳のＯＮ／ＯＦＦを選択する文字表示ＯＮ／ＯＦＦスイッチ２６が設けられている。表示時間設定部２２には、文字情報の重畳時間を設定する表示時間設定スイッチ２７と、文字表示の設定時間を数字により表示する設定時間表示器２８と、前記設定時間による文字情報の重畳を指示するための時間表示制御スイッチ２９とが設けられている。
【００２２】
本実施例の内視鏡装置によって内視鏡下外科手術を行う場合には、図２に示したように、内視鏡１を体腔内へ挿入して処置部位の像を撮像し、術者Ａは第１モニタ４の内視鏡画像を見ながら、術者Ｂは第２モニタ５の内視鏡画像を見ながらそれぞれ手技を行う。画像処理装置３からは、第１モニタ４，第２モニタ５に映像信号が送られて内視鏡画像が表示されると共に、ＶＴＲ６にも映像信号が送られて録画ができるようになっている。
【００２３】
図１に示した３つの内視鏡１ａ，１ｂ，１ｃからの画像入力のうち、内視鏡１ａからの被写体（Ａ）の画像をモニタに表示する場合には、画像処理装置３の操作パネル１８上のセレクトスイッチ２４によってVIDEO １を選択すると、図３に示すようにセレクト表示器２５のVIDEO １が点灯する。これにより、ＣＰＵ１７からの制御信号によって入力選択回路１２がＡ／Ｄ変換器１１ａ側に切り替わり、内視鏡１ａの映像信号が選択される。このとき、操作パネル１８上の文字表示ＯＮ／ＯＦＦスイッチ２６においてＯＦＦが選択されていれば、キャラクタ重畳切替回路１５が入力選択回路１２側に切り替わって文字信号の重畳が行われず、入力画像信号はそのままキャラクタ重畳切替回路１５，Ｄ／Ａ変換器１６を通ってアナログ変換され、外部入力装置としての第１モニタ４，第２モニタ５，ＶＴＲ６へ映像信号として出力される。
【００２４】
また、第１モニタ４，第２モニタ５等の画像表示装置やＶＴＲ６等の画像記録装置などの外部入力装置においてコメントデータの文字表示を行う場合は、操作パネル１８上の文字表示ＯＮ／ＯＦＦスイッチ２６によってＯＮを選択することにより、キャラクタ重畳切替回路１５がキャラクタ重畳回路１３の出力側に切り替わる。これにより、キーボード１９より入力されたキャラクタ信号はキャラクタ重畳回路１３により入力画像信号に重畳された後、キャラクタ重畳切替回路１５，Ｄ／Ａ変換器１６を通ってアナログ変換され、映像信号として画像処理装置３より出力される。コメントデータのキャラクタ（図中１２３４で示す）は図１に示すように内視鏡画像（被写体（Ａ））に重畳されて表示される。
【００２５】
このとき、操作パネル１８上の時間表示制御スイッチ２９を押下することにより、表示時間設定回路１４からの制御信号によってキャラクタ重畳切替回路１５が制御され、表示時間設定スイッチ２７によって設定された表示時間の期間、キャラクタは映像信号に重畳される。設定時間経過後、表示時間設定回路１４からの制御信号によってキャラクタ重畳切替回路１５は入力選択回路１２の出力側に切り替わり、キャラクタの重畳が停止される。
【００２６】
なお、内視鏡１ｂからの被写体（Ｂ）の入力画像、及び内視鏡１ｃからの被写体（Ｃ）の入力画像についても同様にして、画像選択及びキャラクタ重畳を行うことができる。
【００２７】
以上のように、本実施例の構成によれば、コメントデータを出力画像に重畳して表示する際の表示時間を任意に設定することができ、必要なときに必要な時間だけＴＶモニタやＶＴＲ等の外部入力装置において容易にコメントデータを出力し表示することができる。また、一度コメントデータを表示した後に表示を停止するには、表示時間を設定するだけで設定時間経過後にコメントデータの表示を消去することができ、操作の煩わしさもなく簡単な操作で所望の時間コメントデータの表示を行うことができる。このようにコメントデータの表示時間の制御を行うことにより、出力先の装置の役割に最適な出力画像を出力することが可能となる。
【００２８】
図４及び図５は本発明の第２実施例に係り、図４は画像処理装置の主要部の構成を示すブロック図、図５は画像処理装置の操作パネルの一部を拡大して示した説明図である。
【００２９】
第２実施例は第１実施例の変形例であり、モニタ等の外部入力装置へのコメントデータの表示設定を装置毎に可能とした例である。第１実施例の構成と異なる部分についてのみ説明する。
【００３０】
図４に示すように、第２実施例の画像処理装置３１は、図１に示した第１実施例の画像処理装置３の構成と比較して、入力選択回路１２及びキャラクタ重畳回路１３の出力側には３系統のキャラクタ重畳切替回路１５ａ，１５ｂ，１５ｃが設けられ、それぞれにＤ／Ａ変換器１６ａ，１６ｂ，１６ｃを介して第１モニタ４，第２モニタ５，ＶＴＲ６が接続されている。キャラクタ重畳切替回路１５ａ，１５ｂ，１５ｃには、第１実施例と同様に表示時間設定回路１４からの制御信号がそれぞれ入力されるようになっている。
【００３１】
操作パネル３２には、図５に示すように、文字表示のＯＮ／ＯＦＦを制御する文字表示選択スイッチ３３と、設定時間による文字表示のＯＮ／ＯＦＦを制御する時間表示選択スイッチ３４とが設けられ、第１実施例と同様に表示時間設定スイッチ２７及び設定時間表示器２８が設けられている。
【００３２】
本実施例の構成において、コメントデータの文字表示を行う場合は、操作パネル３２上の文字表示選択スイッチ３３の中のキャラクタ重畳を行う出力画像のスイッチを押下することにより、表示時間設定回路１４からの制御信号によってキャラクタ重畳切替回路１５ａ，１５ｂ，１５ｃがキャラクタ重畳回路１３の出力側に切り替わり、キャラクタ信号が映像信号に重畳される。従って、文字表示選択スイッチ３３の出力１，出力２及び出力３を同時に押下すれば、第１モニタ４，第２モニタ５，及びＶＴＲ６へ出力される画像にコメントデータが重畳されて表示される。
【００３３】
このとき、例えば出力３の画像のみコメントデータを消去したい場合は、文字表示選択スイッチ３３の出力３を再度押下すればＶＴＲ６へ出力される映像信号におけるコメントデータを消去することができる。
【００３４】
また、コメントデータを表示して特定時間経過後に消去したい場合は、表示時間設定スイッチ２７で表示時間を設定し、時間表示選択スイッチ３４の中のキャラクタ時間表示を行う出力画像のスイッチを押下することにより、設定された表示時間の期間、キャラクタが映像信号に重畳される。そして、設定時間経過後に表示時間設定回路１４からの制御信号によってキャラクタ重畳切替回路１５ａ，１５ｂ，１５ｃが入力選択回路１２の出力側に切り替わり、外部入力装置への映像信号からコメントデータが消去される。すなわち、時間表示選択スイッチ３４の出力１，出力２及び出力３を同時に押下すれば、設定時間経過後に第１モニタ４，第２モニタ５，及びＶＴＲ６へ出力される画像のコメントデータが消去される。
【００３５】
以上のように、本実施例の構成によれば、第１実施例の効果に加えて、モニタやＶＴＲ等の外部入力装置へのコメントデータの表示、非表示、及び任意時間表示の設定が装置毎に選択的に行うことが可能であり、より出力先の装置の役割に適した出力画像を得ることができる。
【００３６】
図６及び図７は本発明の第３実施例に係り、図６は画像処理装置の主要部の構成を示すブロック図、図７は画像処理装置の操作パネルの一部を拡大して示した説明図である。
【００３７】
第３実施例は第１実施例の他の変形例であり、モニタ等の外部入力装置へのコメントデータの表示設定及びコメントデータの表示時間設定を装置毎に各々可能とした例である。第１実施例の構成と異なる部分についてのみ説明する。
【００３８】
図６に示すように、第３実施例の画像処理装置３６は、第２実施例と同様に入力選択回路１２及びキャラクタ重畳回路１３の出力側に３系統のキャラクタ重畳切替回路１５ａ，１５ｂ，１５ｃが設けられると共に、さらに各系統のキャラクタ重畳切替回路１５ａ，１５ｂ，１５ｃ毎に表示時間設定回路１４ａ，１４ｂ，１４ｃが設けられ、それぞれ制御信号を送出するような構成となっている。
【００３９】
操作パネル３７には、図７に示すように、第１モニタ４への出力画像（出力１）に対して連続的にコメントデータを表示するか否かを選択する文字表示選択スイッチ３８ａと、表示時間設定スイッチ２７ａ及び設定時間表示器２８ａと、設定時間による文字表示を選択するための時間表示制御スイッチ３９ａとが設けられている。また、第２モニタ５への出力画像（出力２）及びＶＴＲ６への出力画像（出力３）に関しても、同様に文字表示選択スイッチ３８ｂ，３８ｃ、表示時間設定スイッチ２７ｂ，２７ｃ、設定時間表示器２８ｂ，２８ｃ、時間表示制御スイッチ３９ｂ，３９ｃが設けられている。
【００４０】
本実施例の構成において、第１モニタ４への出力画像にコメントデータの文字表示を行う場合は、操作パネル３７上の出力１の文字表示選択スイッチ３８ａを押下することにより、表示時間設定回路１４ａからの制御信号によってキャラクタ重畳切替回路１５ａはキャラクタ重畳回路１３の出力側に切り替わり、キャラクタ信号が映像信号に重畳されて第１モニタ４の画像にコメントデータが表示される。また、文字表示選択スイッチ３８ａ，３８ｂ，３８ｃを同時に押下すれば、第１モニタ４，第２モニタ５，及びＶＴＲ６へ出力される画像にコメントデータが同時に重畳されて表示される。
【００４１】
このとき、例えば出力３の画像のみコメントデータを消去したい場合は、出力３の文字表示選択スイッチ３８ｃを再度押下すればＶＴＲ６へ出力される映像信号におけるコメントデータを消去することができる。なお、出力１及び出力２についても同様に行うことができる。
【００４２】
また、出力１のみ特定時間経過後にコメントデータを消去したい場合は、出力１の表示時間設定スイッチ２７ａで表示時間を設定し、時間表示制御スイッチ３９ａを押下することにより、設定された表示時間の期間、キャラクタが映像信号に重畳され、設定時間経過後に表示時間設定回路１４ａからの制御信号によってキャラクタ重畳切替回路１５ａが入力選択回路１２の出力側に切り替わり、第１モニタ４への映像信号からコメントデータが消去される。図７の例ではコメントデータが表示されてから５秒間後に消去される。なお、出力２及び出力３についても同様に行うことができ、図７の例では出力２は３秒間後に、出力３は１秒間後にそれぞれコメントデータが消去される。
【００４３】
以上のように、本実施例の構成によれば、第１実施例の効果に加えて、モニタやＶＴＲ等の外部入力装置毎に独立してコメントデータの表示、非表示の選択及びコメントデータ表示時間の設定が可能であり、より出力先の装置の役割に適した出力画像を得ることができる。
【００４４】
図８及び図９は本発明の第４実施例に係り、図８は画像処理装置を含む内視鏡装置の構成を示すブロック図、図９は画像処理装置の操作パネルの一部を拡大して示した説明図である。
【００４５】
第４実施例は、外部入力装置のうちの映像記録手段であるＶＴＲの記録動作に連動してコメントデータの表示、非表示を行えるようにした例である。
【００４６】
図８に第４実施例の画像処理装置４１の構成を示す。ここでは図１に示した第１実施例と異なる部分についてのみ説明する。
【００４７】
第１実施例の構成に加えて、キーボード１９から入力されたコメントデータを記憶保持しておくための情報記憶手段としてのキャラクタメモリ４３と、ＶＴＲ６の記録動作を制御するための録画制御回路４４とが設けられ、それぞれＣＰＵ１７に接続されている。ＣＰＵ１７に接続された操作パネル４２からの指示に基づいて、録画制御回路４４より制御信号がＶＴＲ６へ送られ、映像信号の記録制御がなされるようになっている。
【００４８】
操作パネル４２の主要部の構成を図９に示す。操作パネル４２には、図３の第１実施例の構成に加えて、ＶＴＲ操作部４５が配設され、録画指示を行うＲＥＣスイッチ４６と、停止指示を行うＳＴＯＰスイッチ４７とが設けられている。
【００４９】
本実施例では、キーボード１９から入力されたコメントデータはキャラクタメモリ４３に保持されており、所望の時に読み出せるようになっている。コメントデータの文字表示を行う際に、キャラクタメモリ４３よりコメントデータが読み出され、キャラクタ重畳回路１３において画像信号にキャラクタ信号が重畳される。
【００５０】
コメントデータの文字表示を行う場合に、第１実施例と同様に操作パネル４２の文字表示ＯＮ／ＯＦＦスイッチ２６を操作することによって行うことができるが、本実施例では操作パネル４２上のＲＥＣスイッチ４６、またはＶＴＲの操作パネル上の図示しないＲＥＣスイッチによっても、録画動作と連動して出力画像にコメントデータを表示することができる。
【００５１】
操作パネル４２上のＲＥＣスイッチ４６を押すことにより、キャラクタ重畳切替回路１５はキャラクタ重畳回路１３の出力側に切り替わってキャラクタ信号が重畳され、これと同時に録画制御回路４４よりＶＴＲ６へ制御信号が出力されてＶＴＲ６の録画が開始される。このとき、時間表示制御スイッチ２９を押しておけば、ＲＥＣスイッチ４６の押下後から設定時間（図９の例では５秒間）の期間だけコメントデータが表示される。
【００５２】
また、操作パネル４２上のＳＴＯＰスイッチ４７を押すことにより、録画制御回路４４よりＶＴＲ６へ制御信号が出力されてＶＴＲ６の録画動作が停止すると共に、キャラクタ重畳切替回路１５が入力選択回路１２の出力側に切り替わり、外部入力装置への映像信号からコメントデータの表示が消去される。
【００５３】
同様にＶＴＲ６上のＲＥＣスイッチを押した場合には、ＶＴＲ６の録画動作が開始されると同時に、録画状態を示す信号が録画制御回路４４へ送られてこの信号を基にＣＰＵ１７によってキャラクタ重畳切替回路１５の制御が行われ、コメントデータが重畳された映像信号が画像処理装置４１から出力される。
【００５４】
以上のように、本実施例の構成によれば、外部入力装置のうちの映像記録を行うＶＴＲの記録動作に連動してコメントデータの表示、非表示動作を行うことが可能となり、出力画像にコメントデータを重畳する際にいくつものスイッチを押すことなく録画操作を行うだけで簡単にキャラクタ重畳動作を制御することが可能となる。これにより、手術開始時など録画開始と同時にコメントデータのキャラクタ重畳を行うことができ、コメントデータの表示、非表示の操作を忘れて画像へのキャラクタ重畳を失敗するおそれを防止できると共に、操作の煩わしさを解消することができる。また、映像信号を録画する際に必ず画像の先頭部にコメントデータを付加することができるため、録画後の画像の判別、整理を容易にすることが可能となる。
【００５５】
図１０及び図１１は本発明の第５実施例に係り、図１０は画像処理装置の操作パネルの一部を拡大して示した説明図、図１１はコメントデータを表示する際の動作を示すフローチャートである。
【００５６】
第５実施例は、コメントデータとしてＶＴＲの録画テープのテープ残時間または録画経過時間を表示可能とした例である。画像処理装置の構成は第４実施例の構成と同様であり、説明を省略する。
【００５７】
図１０に示すように、操作パネル５０には、図９の第４実施例の構成に加えて、録画時間表示設定部５１が配設され、テープ長を設定するためのテープ長選択スイッチ５２と、テープ残時間表示を選択するテープ残時間表示スイッチ５３と、録画経過時間表示を選択する録画経過時間表示スイッチ５４とが設けられている。
【００５８】
本実施例の画像処理装置の動作を図１１を参照しながら説明する。図１１は主に画像処理装置中のＣＰＵの動作を示したものである。
【００５９】
まずステップＳ１（以下、ステップは省略する）で、ＶＴＲの録画テープのテープ長を設定する。ここでは操作パネル５０上のテープ長選択スイッチ５２より使用する録画テープのテープ長に該当するスイッチを選択することにより行う。テープ長を設定した後、Ｓ２で、ＣＰＵ１７はＣＰＵ１７自身またはキャラクタメモリ４３に記憶された録画経過時間をリセットし、Ｓ３で操作パネル上の文字表示ＯＮ／ＯＦＦスイッチがＯＮか否かを判断する。ここで、文字表示ＯＮ／ＯＦＦスイッチが選択されていない場合はコメントデータ表示の指示がなされるまでＳ３の動作を繰り返す。
【００６０】
Ｓ３で文字表示ＯＮ／ＯＦＦスイッチが押された場合はＳ４に進み、テープ残時間表示スイッチ５３がＯＮか否かを判断する。ここでテープ残時間表示スイッチ５３が選択されている場合はＳ５に進む。Ｓ５で操作パネル５０あるいはＶＴＲ自身のＲＥＣスイッチが押されるまで待機した後、ＲＥＣスイッチが押されるとＳ６に進んで前記設定されたテープ長より録画経過時間を減算し、コメントデータとしてのテープの残時間を演算する。そして、Ｓ７で、映像信号に重畳するコメントデータの表示としてテープ残時間表示を行う。表示後は、Ｓ３に戻り以下同じ動作を繰り返す。
【００６１】
一方、文字表示ＯＮ／ＯＦＦスイッチが押されておりかつ録画経過時間表示スイッチ５４が押された場合は、Ｓ３，Ｓ４からＳ８に進む。Ｓ８で操作パネル５０あるいはＶＴＲ自身のＲＥＣスイッチが押されるまで待機した後、ＲＥＣスイッチが押されるとＳ９に進んで映像信号に重畳するコメントデータの表示として録画経過時間表示を行う。表示後は、Ｓ３に戻り以下同じ動作を繰り返す。
【００６２】
なお、第２実施例や第３実施例の構成と組み合わせて、第１モニタ４や第２モニタ５へ出力する映像信号にのみテープ残時間表示や録画経過時間表示を行い、ＶＴＲ６へ出力する映像信号にはコメントデータの表示を停止したり、録画時間表示以外のコメントデータの表示を行うようにすることが可能である。
【００６３】
モニタやＶＴＲ等へ出力する映像信号に重畳するコメントデータとしては、従来は内視鏡画像信号に関するものとか、画像表示装置等の接続状態などの情報が用いられており、ＶＴＲの録画テープの残り時間表示などは行われていなかった。このため、手術中に録画テープの残り具合が気になって手技に集中できなかったり、途中でテープがなくなるのを防ぐために手術途中でテープを交換したりする等テープの無駄使いをしてしまうなどの不具合のおそれがあったが、本実施例のようにコメントデータとして映像記録手段の記録可能時間表示または記録経過時間の表示を可能にすることにより、前記不具合を解決することができる。
【００６４】
すなわち、本実施例によれば、ＶＴＲのテープ長の残り時間表示や録画経過時間表示を行うことにより、録画テープの残り時間やテープ切れを気にせずに手術を継続して行うことができ、手技に集中でき内視鏡装置使用時の操作性を向上させることができる。
【００６５】
なお、本実施例では映像信号に重畳させてテープ残時間表示または録画経過時間表示のいずれかを行うようにしたが、テープ残時間表示と録画経過時間表示を交互に行うようにしても良い。
【００６６】
図１２ないし図１７は本発明の第６実施例に係り、図１２は画像処理装置の主要部の構成を示すブロック図、図１３は画像処理装置の操作パネルの一部を拡大して示した説明図、図１４は画像合成を行わない場合のモニタの表示画像を示す作用説明図、図１５は親子画面に画像合成を行った場合のモニタの表示画像を示す作用説明図、図１６は画像回転を行った場合のモニタの表示画像を示す作用説明図、図１７は画像合成及び画像回転を行った場合のモニタの表示画像を示す作用説明図である。
【００６７】
第６実施例は、画像合成及び画像回転機能を有する装置に前述の実施例の構成を適用した例である。
【００６８】
図１２に示すように、第６実施例の画像処理装置６１は、図１に示した第１実施例の構成における入力選択回路１２の出力側に、入力選択回路１２の出力信号を記憶するためのフレームメモリ６２と、入力選択回路１２の出力信号に対して補間処理を行う補間回路６３と、補間回路６３の出力信号を１／４サイズで記憶するための１／４フレームメモリ６４と、前記フレームメモリ６２及び１／４フレームメモリ６４の後段に接続され画像合成処理を行うための合成回路６５と、画像回転処理を行うための回転回路６６とが設けられ、回転回路６６の出力がキャラクタ重畳回路１３及びキャラクタ重畳切替回路１５に接続されて構成されている。合成回路６５及び回転回路６６は、ＣＰＵ６７からの制御信号によって画像合成処理及び画像回転処理が制御されるようになっている。
【００６９】
操作パネル６８には、図１３に示すように、図３の第１実施例と同様に文字表示切替部２１，表示時間設定部２２が設けられると共に、親子画面の入力画像の選択を行う入力選択部６９と、画像処理機能の選択を行う画像処理選択部７０とが配設されている。
【００７０】
入力選択部６９には、親画面の映像信号の選択を行う親画面選択スイッチ７１と、子画面の映像信号の選択を行う子画面選択スイッチ７２と、選択時の親子画面の切り替えを行う親子切替スイッチ７３と、選択した親子画面それぞれの画像入力の表示を行うＬＥＤ等からなるセレクト表示器７４とが設けられている。画像処理選択部７０には、親画面に子画面を挿入する画像合成を指示するためのＰinＰ（picture in picture）スイッチ７５と、画像回転の例として反転を指示するための反転スイッチ７６とが設けられている。
【００７１】
次に、本実施例の画像処理装置における画像合成機能及び画像回転機能に係る動作について説明する。コメントデータの重畳処理については前述の第１実施例と同様であり、説明を省略する。
【００７２】
本実施例の構成において、操作パネル６８上の画像処理選択部７０のスイッチが選択されていない場合は、合成回路６５による画像合成処理や回転回路６６による画像回転処理が行われず、入力選択回路１２の出力信号がそのままキャラクタ重畳回路１３及びキャラクタ重畳切替回路１５に入力され、キャラクタ重畳処理等が行われた後、Ｄ／Ａ変換器１６によってアナログ変換され、映像信号として画像処理装置６１より第１モニタ４，第２モニタ５，ＶＴＲ６に出力されて例えば図１４に示すように画像が表示される。
【００７３】
画像合成を行う場合には、まず操作パネル６８上の親画面選択スイッチ７１を押すことにより親画面の入力信号を選択する。このとき、親画面選択スイッチ７１で選択された画像入力に対応するセレクト表示器７４が点灯し、入力信号としていずれの画像入力が選択されているかが判別できる。図１３の例では親画面の入力信号としてVIDEO １（内視鏡１ａからの被写体（Ａ）の画像）が選択されていることを示している。また、親子切替スイッチ７３を押すことにより子画面選択スイッチ７２が有効になり、子画面用の入力信号の選択が可能となる。選択方法及びセレクト表示については親画面の場合と同様である。図１３の例では子画面の入力信号としてVIDEO ２（内視鏡１ｂからの被写体（Ｂ）の画像）が選択されていることを示している。
【００７４】
このように選択された画像信号は、親画面の信号は入力選択回路１２よりフレームメモリ６２に入力されて逐次記憶され、子画面の信号は入力選択回路１２より補間回路６３に入力されて補間処理が行われた後、１／４フレームメモリ６４で逐次記憶される。ここで、操作パネル６８のＰinＰスイッチ７５が選択されると、合成回路６５によって画像合成処理が行われ、親子画面に合成された映像信号が第１モニタ４，第２モニタ５，ＶＴＲ６に出力されて図１５に示すように親子画面の合成画面が表示される。また、ＰinＰスイッチ７５を再度押すことにより、図１４に示したように親画面選択スイッチ７１で選択された親画面の画像（被写体（Ａ）の画像）だけが表示される。
【００７５】
画像回転を行う場合には、操作パネル６８上の反転スイッチ７６を操作する。入力選択部６９の各スイッチ及びＰinＰスイッチ７５の操作、及びこれに係る動作は前述と同様である。
【００７６】
ＰinＰスイッチ７５が押されていない場合で、反転スイッチ７６が押されたときには、フレームメモリ６２に記憶された映像信号は回転回路６６で画像回転処理が施された後、第１モニタ４，第２モニタ５，ＶＴＲ６に出力されて図１６に示すように反転された画像が表示される。なお、画像回転した像としては倒立像、回転像、鏡像などを生成し表示することができる。また、この状態から反転スイッチ７６を再度押すと、画像をもとの原画像に戻すことができる。
【００７７】
また、ＰinＰスイッチ７５が押されている場合で、かつ反転スイッチ７６が押されたときには、フレームメモリ６２及び１／４フレームメモリ６４に記憶された映像信号が合成回路６５によって画像合成された後、回転回路６６によって画像回転され、第１モニタ４，第２モニタ５，ＶＴＲ６に出力されて図１７に示すように画像合成及び反転された画像が表示される。
【００７８】
なお、コメントデータのキャラクタ（図中１２３４で示す）は図１４ないし図１７に示したように、前述の実施例と同様にして任意の設定時間あるいは連続的に内視鏡画像に重畳されて表示される。
【００７９】
以上のように、本実施例の構成によれば、画像合成及び画像回転機能を有する装置においても、画像合成及び画像回転処理を行った映像信号に対して任意にコメントデータの重畳ができ、また、コメントデータの表示時間を任意に設定することが可能であり、これにより、容易にコメントデータを出力画像に表示することができ、出力先の装置の役割に最適な出力画像を出力することが可能となる。
【００８０】
［付記］
以上詳述したように本発明の実施態様によれば、以下のような構成を得ることができる。すなわち、
（１） 映像信号に対して該映像信号に関する情報のキャラクタを重畳するキャラクタ重畳手段を備え、映像信号を画像として表示する映像表示手段、映像信号を記録する映像記録手段の少なくとも一方を含む外部入力装置へ映像信号を出力する画像処理装置において、
前記外部入力装置へ出力する映像信号に対して、前記キャラクタ重畳手段によってキャラクタを重畳する際のキャラクタ重畳時間を設定する重畳時間設定手段と、
前記重畳時間設定手段により設定された設定時間に基づいて前記キャラクタ重畳手段の動作を制御するキャラクタ重畳制御手段と、
を備えたことを特徴とする画像処理装置。
【００８１】
この構成により、映像信号に関する情報としてのコメントデータの表示時間の制御を行うことができ、出力先の装置の役割に最適な出力画像を出力できる効果を有する。
【００８２】
（２） 映像信号に対して該映像信号に関する情報のキャラクタを重畳するキャラクタ重畳手段を備え、映像信号を画像として表示する映像表示手段、映像信号を記録する映像記録手段の少なくとも一方を含む外部入力装置へキャラクタを重畳した映像信号を出力する画像処理装置において、
前記外部入力装置へ出力する映像信号に対して、前記キャラクタ重畳手段によってキャラクタを重畳する際のキャラクタ重畳時間を設定する重畳時間設定手段と、
前記映像信号に重畳する情報を記憶する情報記憶手段と、
前記重畳時間設定手段により設定された設定時間に基づいて前記キャラクタ重畳手段の動作を制御するキャラクタ重畳制御手段と、
を備えたことを特徴とする画像処理装置。
【００８３】
（３） 複数の映像信号を入力する映像入力手段と、前記入力された映像信号に対して該映像信号に関する情報のキャラクタを重畳するキャラクタ重畳手段を備え、映像信号を画像として表示する映像表示手段、映像信号を記録する映像記録手段の少なくとも一つを含む外部入力装置へキャラクタを重畳した映像信号を出力する画像処理装置において、
前記複数の映像信号のうち２以上の映像信号を合成し合成画像を得る画像合成手段と、
前記映像信号の画像に対する回転画像を得るための信号処理を行う画像回転手段と、
前記画像合成手段あるいは前記画像回転手段の出力信号に対して、前記キャラクタ重畳手段によってキャラクタを重畳する際のキャラクタ重畳時間を設定する重畳時間設定手段と、
前記重畳時間設定手段により設定された設定時間に基づいて前記キャラクタ重畳手段の動作を制御するキャラクタ重畳制御手段と、
を備えたことを特徴とする画像処理装置。
【００８４】
（４） 前記画像処理装置は、さらに、
前記複数の映像信号の画像、前記複数の映像信号のうち２以上を合成した合成画像、前記映像信号の画像が回転された回転画像、前記合成画像のうち少なくとも一部が回転された回転画像、のいずれかを前記外部入力装置へ出力するよう前記画像合成手段及び前記画像回転手段の入力または出力を選択的に切り替える画像選択手段を備えたことを特徴とする前記付記（３）に記載の画像処理装置。
【００８５】
（５） 前記キャラクタ重畳制御手段は、前記重畳時間設定手段によって設定されたキャラクタ重畳時間の期間、前記キャラクタ重畳手段によって映像信号に対してキャラクタを重畳させることを特徴とする前記付記（１）に記載の画像処理装置。
【００８６】
（６） 前記キャラクタ重畳制御手段は、前記設定時間による映像信号に対するキャラクタ重畳を、前記外部入力装置毎に選択的に実行可能としたことを特徴とする前記付記（１）に記載の画像処理装置。
【００８７】
（７） 前記重畳時間設定手段は、前記キャラクタ重畳時間の設定を前記外部入力装置毎に実行可能としたことを特徴とする前記付記（１）に記載の画像処理装置。
【００８８】
（８） 映像信号に対して該映像信号に関する情報のキャラクタを重畳するキャラクタ重畳手段を備え、映像信号を記録する映像記録手段を含む外部入力装置へ映像信号を出力する画像処理装置において、
前記外部入力装置へ出力する映像信号に対して、前記キャラクタ重畳手段によってキャラクタを重畳する際のキャラクタ重畳時間を設定する重畳時間設定手段と、
前記映像記録手段の録画制御を行う録画制御手段と、
前記映像記録手段の記録動作に連動して、前記重畳時間設定手段により設定されたキャラクタ重畳時間の期間、前記キャラクタ重畳手段の動作を制御して映像信号に対してキャラクタを重畳させるキャラクタ重畳制御手段と、
を備えたことを特徴とする画像処理装置。
【００８９】
この構成により、煩雑な操作を行うことなく、映像信号に関する情報としてのコメントデータの表示制御を行うことができる効果を有する。
【００９０】
（９） 前記画像処理装置は、前記映像記録手段を含む外部入力装置へ映像信号を出力するものであって、
前記映像記録手段の録画制御を行う録画制御手段を備え、
前記キャラクタ重畳制御手段は、前記映像記録手段の記録動作に連動して、前記重畳時間設定手段により設定されたキャラクタ重畳時間の期間、前記キャラクタ重畳手段によって映像信号に対してキャラクタを重畳させることを特徴とする前記付記（１）に記載の画像処理装置。
【００９１】
（１０） 前記画像処理装置は、前記映像記録手段を含む外部入力装置へ映像信号を出力するものであって、
前記映像信号に関する情報として、前記映像記録手段の記録動作に関する情報のキャラクタを映像信号に対して重畳することを特徴とする前記付記（１）に記載の画像処理装置。
【００９２】
この構成により、映像記録手段の録画テープの残り時間を気にせずに他の操作を継続して行うことができる効果を有する。
【００９３】
（１１） 前記映像信号に対して重畳する前記映像記録手段の記録動作に関する情報を演算するための演算手段を備えた前記付記（１０）に記載の画像処理装置。
【００９４】
（１２） 前記映像記録手段の記録動作に関する情報は、ＶＴＲ（ビデオテープレコーダ）のテープ残時間である前記付記（１０）に記載の画像処理装置。
【００９５】
（１３） 前記映像記録手段の記録動作に関する情報は、ＶＴＲの記録経過時間である前記付記（１０）に記載の画像処理装置。
【００９６】
（１４） 前記映像記録手段の記録動作に関する情報として、ＶＴＲのテープ残時間と記録経過時間とを交互に表示するよう映像信号に対して重畳することを特徴とする前記付記（１０）に記載の画像処理装置。
【００９７】
（１５） 内視鏡装置と接続され、該内視鏡装置からの映像信号に対して該映像信号に関する情報のキャラクタを重畳するキャラクタ重畳手段を備え、映像信号を画像として表示する映像表示手段、映像信号を記録する映像記録手段の少なくとも一方を含む外部入力装置へ映像信号を出力する画像処理装置において、
前記外部入力装置へ出力する映像信号に対して、前記キャラクタ重畳手段によってキャラクタを重畳する際のキャラクタ重畳時間を設定する重畳時間設定手段と、
前記重畳時間設定手段により設定された設定時間に基づいて前記キャラクタ重畳手段の動作を制御するキャラクタ重畳制御手段と、
を備えたことを特徴とする画像処理装置。
【００９８】
【発明の効果】
以上説明したように本発明によれば、出力画像にコメントデータを重畳する際の時間を任意に設定することができ、出力画像において必要なときに必要な時間だけコメントデータを容易に表示することが可能となる効果がある。
【図面の簡単な説明】
【図１】図１ないし図３は本発明の第１実施例に係り、図１は画像処理装置を含む内視鏡装置の構成を示すブロック図
【図２】内視鏡下外科手術に使用する内視鏡装置の全体構成を示す構成説明図
【図３】第１実施例に係る画像処理装置の操作パネルの一部を拡大して示した説明図
【図４】図４及び図５は本発明の第２実施例に係り、図４は画像処理装置の主要部の構成を示すブロック図
【図５】第２実施例に係る画像処理装置の操作パネルの一部を拡大して示した説明図
【図６】図６及び図７は本発明の第３実施例に係り、図６は画像処理装置の主要部の構成を示すブロック図
【図７】第３実施例に係る画像処理装置の操作パネルの一部を拡大して示した説明図
【図８】図８及び図９は本発明の第４実施例に係り、図８は画像処理装置を含む内視鏡装置の構成を示すブロック図
【図９】第４実施例に係る画像処理装置の操作パネルの一部を拡大して示した説明図
【図１０】図１０及び図１１は本発明の第５実施例に係り、図１０は画像処理装置の操作パネルの一部を拡大して示した説明図
【図１１】コメントデータを表示する際の動作を示すフローチャート
【図１２】図１２ないし図１７は本発明の第６実施例に係り、図１２は画像処理装置の主要部の構成を示すブロック図
【図１３】第６実施例に係る画像処理装置の操作パネルの一部を拡大して示した説明図
【図１４】画像合成を行わない場合のモニタの表示画像を示す作用説明図
【図１５】親子画面に画像合成を行った場合のモニタの表示画像を示す作用説明図
【図１６】画像回転を行った場合のモニタの表示画像を示す作用説明図
【図１７】画像合成及び画像回転を行った場合のモニタの表示画像を示す作用説明図
【符号の説明】
１ａ，１ｂ，１ｃ…内視鏡
３…画像処理装置
４…第１モニタ
５…第２モニタ
６…ＶＴＲ
１２…入力選択回路
１３…キャラクタ重畳回路
１４…表示時間設定回路
１５…キャラクタ重畳切替回路
１７…ＣＰＵ
１８…操作パネル
１９…キーボード
２１…文字表示切替部
２２…表示時間設定部
２３…入力選択部
Claims (2)
- 複数の入力画像信号を入力するための画像入力手段と、
前記画像入力手段で入力された前記複数の入力画像信号から画像信号を選択する画像信号選択手段と、
前記画像信号選択手段で選択された選択画像信号に関する情報のキャラクタ信号を前記選択画像信号に重畳するキャラクタ重畳手段と、
前記キャラクタ重畳手段により前記キャラクタ信号が重畳された重畳画像信号と前記選択画像信号とを切り替えて選択的に出力可能な画像切り替え手段と、
前記画像切り替え手段で前記重畳画像信号が選択出力される時間を設定可能な時間設定手段と、
前記画像切り替え手段により前記重畳画像信号が選択されているとき、前記時間設定手段により設定された時間を選択する操作入力に基づき、前記時間設定手段で設定された設定時間の間、前記重畳画像信号を選択するように前記画像切り替え手段を制御する制御手段と、
を具備したことを特徴とする画像処理装置。 - 複数の入力画像信号を入力するための画像入力手段と、
前記画像入力手段で入力された前記複数の入力画像信号から画像信号を選択する画像信号選択手段と、
前記画像信号選択手段で選択された選択画像信号に関する情報のキャラクタ信号を前記選択画像信号に重畳するキャラクタ重畳手段と、
前記キャラクタ重畳手段により前記キャラクタ信号が重畳された重畳画像信号と前記入力画像信号とを切り替えて複数の機器に選択的に出力可能な複数の画像切り替え手段と、
前記複数の画像切り替え手段で前記重畳画像信号が選択される時間を前記複数の画像切り替え手段の各出力毎にそれぞれ設定する重畳時間設定手段と、
前記画像切り替え手段により前記重畳画像信号が選択されているとき、前記重畳時間設定手段により設定された時間を選択する操作入力に基づき、前記複数の機器に対して独立に、前記重畳時間設定手段で設定された設定時間の間、前記重畳画像信号を選択するように前記画像切り替え手段を制御する制御手段と、
を具備したことを特徴とする画像処理装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP10004994A JP3650142B2 (ja) | 1994-05-13 | 1994-05-13 | 画像処理装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP10004994A JP3650142B2 (ja) | 1994-05-13 | 1994-05-13 | 画像処理装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH07307939A JPH07307939A (ja) | 1995-11-21 |
| JP3650142B2 true JP3650142B2 (ja) | 2005-05-18 |
Family
ID=14263651
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP10004994A Expired - Fee Related JP3650142B2 (ja) | 1994-05-13 | 1994-05-13 | 画像処理装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3650142B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113632460A (zh) * | 2019-03-29 | 2021-11-09 | 索尼集团公司 | 医疗图像传输系统、医疗图像处理设备和医疗图像传输方法 |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4574965B2 (ja) * | 2003-07-25 | 2010-11-04 | 株式会社島津製作所 | 放射線治療計画装置 |
| JP2006288912A (ja) * | 2005-04-14 | 2006-10-26 | Ge Medical Systems Global Technology Co Llc | 超音波診断装置及び画像表示方法 |
| JP2007054097A (ja) * | 2005-08-22 | 2007-03-08 | Pentax Corp | 医療用画像プロセッサ装置 |
| JP4813178B2 (ja) * | 2005-12-28 | 2011-11-09 | オリンパスメディカルシステムズ株式会社 | 内視鏡装置 |
| WO2019026367A1 (ja) * | 2017-08-01 | 2019-02-07 | オリンパス株式会社 | 内視鏡システム |
-
1994
- 1994-05-13 JP JP10004994A patent/JP3650142B2/ja not_active Expired - Fee Related
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113632460A (zh) * | 2019-03-29 | 2021-11-09 | 索尼集团公司 | 医疗图像传输系统、医疗图像处理设备和医疗图像传输方法 |
| EP3934242A4 (en) * | 2019-03-29 | 2022-04-27 | Sony Group Corporation | MEDICAL IMAGE TRANSMISSION SYSTEM, MEDICAL IMAGE PROCESSING APPARATUS, AND MEDICAL IMAGE TRANSMISSION METHOD |
| US11818464B2 (en) | 2019-03-29 | 2023-11-14 | Sony Group Corporation | Medical image transmission system, medical image processing apparatus, and medical image transmission method |
| CN113632460B (zh) * | 2019-03-29 | 2024-09-06 | 索尼集团公司 | 医疗图像传输系统、医疗图像处理设备和医疗图像传输方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JPH07307939A (ja) | 1995-11-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6224542B1 (en) | Endoscopic camera system with non-mechanical zoom | |
| JP2009219573A (ja) | 内視鏡用画像処理装置及び内視鏡用画像処理方法 | |
| JP2001359039A (ja) | 画像記録装置 | |
| JP3650142B2 (ja) | 画像処理装置 | |
| JP3431983B2 (ja) | 画像処理装置 | |
| JPH10155737A (ja) | 電子内視鏡装置 | |
| JP2000271147A (ja) | 遠隔手術支援システム | |
| JP2011110281A (ja) | 電子内視鏡装置 | |
| JP3483923B2 (ja) | 画像処理装置 | |
| JPH0818861A (ja) | 画像処理装置 | |
| JP3402710B2 (ja) | 画像処理表示装置 | |
| JPH07154687A (ja) | 画像合成装置 | |
| JP2002290783A (ja) | 電子内視鏡装置 | |
| JP2000245692A (ja) | 内視鏡装置 | |
| JP4499875B2 (ja) | 内視鏡システム | |
| JP3098974B2 (ja) | 画像合成表示装置 | |
| JP4315750B2 (ja) | 画像処理装置及び画像撮像装置 | |
| JPH02277430A (ja) | 内視鏡装置 | |
| JP2001137183A (ja) | 内視鏡装置 | |
| JPH10276973A (ja) | 電子内視鏡装置 | |
| JP2005334426A (ja) | 口腔内観察装置 | |
| JP2000271081A (ja) | 内視鏡カメラ視野制御方法 | |
| JPH10314121A (ja) | 画像処理装置および画像処理装置用記録媒体 | |
| CN113164007B (zh) | 图像记录装置、图像记录方法以及内窥镜系统 | |
| JP3730735B2 (ja) | 内視鏡システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20031219 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20031224 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040219 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20040601 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040802 |
|
| A911 | Transfer of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20041111 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20050208 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20050217 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090225 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090225 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100225 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110225 Year of fee payment: 6 |
|
| LAPS | Cancellation because of no payment of annual fees |