JP4503931B2 - 電子内視鏡装置 - Google Patents
電子内視鏡装置 Download PDFInfo
- Publication number
- JP4503931B2 JP4503931B2 JP2003058876A JP2003058876A JP4503931B2 JP 4503931 B2 JP4503931 B2 JP 4503931B2 JP 2003058876 A JP2003058876 A JP 2003058876A JP 2003058876 A JP2003058876 A JP 2003058876A JP 4503931 B2 JP4503931 B2 JP 4503931B2
- Authority
- JP
- Japan
- Prior art keywords
- circuit
- signal
- imaging
- detection
- output
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
【発明の属する技術分野】
本発明は、自動調光可能な電子内視鏡装置の改良に関する。
【0002】
【従来の技術】
近年、挿入部先端に固体撮像素子(CCD)を搭載し、CCDを用いて撮像した観察像をビデオプロセッサからテレビモニターに映出する電子内視鏡装置が普及している。電子内視鏡装置においては、体腔内を観察すると共に処置を行うことを容易とするために、被写体を明るく観察できるようにするための光源装置と、被写体に照射する光量を自動的に調整する(自動調光)機能は必要不可欠である。
【0003】
自動調光機能を達成するために、従来の電子内視鏡装置において、被写体の明るさを算出する測光回路が内蔵されいる。この測光回路で算出した明るさに応じて、光源装置の絞りを制御して自動的に光量の調整を行っている。
【0004】
従来、測光方式としては、例えば特公平7−108278号公報に平均測光方式とピーク測光方式とが示されている。平均測光方式は、被写体からの反射光の平均値に基づいて被写体に照射する光量を調整するものであり、これに対してピーク測光方式は被写体からの反射光のピーク値に基づいて被写体に照射する光量を調整するものである。
【0005】
平均測光は、撮像素子からの出力を積分して反射光の平均値を得ており、被写体の輝度分布が一様な場合に有利な方式である。また、平均測光方式においては処置具等の高輝度で小面積の物体によって、関心領域が暗くなってしまうことを避けることができるように、所定レベル以上の映像信号をクリップするためのクリップ回路が設けられる。
【0006】
しかし、胃角などの突出した高輝度な被写体を観察する場合に平均測光方式を採用すると、ハレーションが発生してしまう。そこで、このような場合には、ピーク測光方式が採用される。
【0007】
ピーク測光は、撮像素子からの出力のピーク値を検出して光量を制御するものであり、被写体の輝度差が大きい場合等に用いられる。しかし、ピーク測光方式採用時に処置具を使用すると、画面全体が暗くなり関心領域の観察が困難となる。
【0008】
つまり、ピーク測光方式では輝度差が大きい被写体の高輝度部分に注目領域がある場合に有効であり、平均測光方式は輝度分布が一様な場合や、処置具を用いた観察時に有効である。
【0009】
また、関連技術としては、特開2000−333901号公報に中央部がピーク測光で、周辺部が平均測光である測光方式をもつ電子内視鏡が示されている。
【0010】
この提案の電子内視鏡では、測光手段によって、領域指定信号出力手段から出力される、撮像範囲の中央部と周辺部とを指定するための第1及び第2の領域指定信号に基づき、撮像範囲の中央部と周辺部とで測光方式を切り換えることで、周辺部の測光結果による悪影響及び中央部の測光結果による悪影響を緩和した測光結果を得、調光レベル制御手段により、該測光結果に基づいて被写体像の調光レベルを制御するように構成したことが特徴である。
【0011】
これにより、観察者がピーク測光と平均測光とを切り換え操作することなく、常に最適な調光状態で観察が行える電子内視鏡装置の実現を達成しようとしている。
【0012】
【特許文献1】
特公平7−108278号公報(第3頁ー第7頁、第1図)
【0013】
【特許文献1】
特開2000−333901号公報(第5頁ー第12頁、第1図)
【0014】
【発明が解決しようとする課題】
しかしながら、上述した従来の電子内視鏡装置においては、観察者は、観察場面に応じて、平均測光方式とピーク測光方式とを切換えながら観察を行わなければならなかったので、使い勝手が悪いという問題があった。
【0015】
また、従来の電子内視鏡装置における平均測光方式では、積分結果は平均値であるので積分回路入力レベルのおよそ50%ぐらいに設定されており、また、ピーク測光方式では、積分結果は約100%ぐらいに設定されている。そのため輝度分布が一様な被写体が写された場合に、平均測光、ピーク測光の被写体の明るさが同じになるように、平均測光では積分結果に約2倍のゲインをかけている。よって、従来の平均測光方式ではこのゲインで、測光結果が大きくなるため、光源装置の絞りが絞られ光量が抑えられることになる。
【0016】
しかしながら、前述した特開2000−333901号公報に記載の電子内視鏡装置においては、単に周辺部を平均測光の時定数、中央部をピーク測光の時定数で積分し、測光結果を従来の方式の値と同じレベルにする、すなわち、平均測光領域に従来の平均測光のゲインでしか乗じられていないために、例えば管腔状の被写体で平均測光領域にのみ被写体が写る場合にはハレーションが起きやすくなり、これを抑制することが望まれている。
【0017】
そこで、本発明は上記事情に鑑みてなされたものであり、観察者がピーク測光と平均測光とを切換え操作することなく、常に最適な調光状態で観察を行えるとともに、平均測光を行う場合にはハーレーションの発生を抑制できる電子内視鏡装置を提供することを目的とする。
【0018】
【課題を解決するための手段】
上記目的を達成するために、本発明の第1の電子内視鏡装置は、被写体を所定の撮像範囲で撮像するための撮像手段を備えた電子内視鏡と、前記被写体を照明するための光源装置と、前記撮像範囲の中央部領域と当該撮像範囲の周辺部領域とに応じた領域指定信号を発生し出力する領域指定信号発生手段と、前記撮像手段から出力される撮像信号であって表示手段に表示するための映像信号を生成するための信号処理回路に供給する撮像信号と同じ信号を測光用撮像信号として入力する測光回路を構成し、当該入力した測光用撮像信号を、前記領域指定信号発生手段から出力される前記領域指定信号が示す前記撮像範囲の領域の種別に応じた所定の増幅率をもって増幅する増幅手段と、前記測光回路を構成し、前記増幅手段により増幅された前記測光用撮像信号を、前記領域指定信号発生手段から出力される前記領域指定信号が示す前記撮像範囲の領域の種別に応じた時定数をもって1フィールド分積分することにより、当該測光用撮像信号を1フィールド分毎に検波する検波手段と、前記測光回路を構成し、前記検波手段により検波された前記測光用撮像信号の明るさを測光する測光手段と、前記測光手段の測光結果に基づき、前記光源装置による前記被写体を照明する光量を制御する光量制御手段と、を具備したことを特徴とする。
【0019】
また、本発明の第2の電子内視鏡装置は、被写体を所定の撮像範囲で撮像するための撮像手段を備えた電子内視鏡と、前記被写体を照明するための光源装置と、前記撮像手段から出力される映像信号の平均値を検波する第1の検波手段と、前記撮像手段から出力される映像信号のピーク値を検波する第2の検波手段と、前記第2の検波手段による検波出力に基づき、前記第1の検波手段により検波処理する際の閾値を決定する閾値決定手段と、前記閾値決定手段により決定された閾値と前記第1の検波手段による検波出力とを比較し、比較結果に基づき、前記第1の検波手段により検波処理する時定数を切り換え制御する比較制御手段と、前記比較制御手段により切り換えられた時定数に基づき得られた前記第1の検波手段の検波出力に基づいて、前記撮像手段からの出力される映像信号の明るさを測光する測光手段と、前記測光手段の測光結果に基づき、前記光源装置による前記被写体を照明する光量を制御する光量制御手段と、を具備したことを特徴とする。
【0020】
この構成により、胃角などの平均測光ではハレーションを起こしてしまうような被写体の観察が容易にできる自動調光が可能となり、また、鉗子などの処置具は内視鏡像周辺部に現れるが、周辺部は平均測光領域であるため、処置具に調光が影響されることはないので、観察が容易に行える自動調光が可能となる。また、周辺部にのみ被写体が写された場合も、従来の平均測光レベルのハレーションに抑えることができ、また、中央部にのみ被写体が写された場合も従来のピーク測光レベルの観察ができる。さらに、平均測光領域のハレーションを低減することができ、従来の平均測光にも適用可能で、ハレーションを低減することができる。
【0021】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態を説明する。
【0022】
第1の実施の形態:
(構成)
図1乃至図3は本発明の電子内視鏡装置の第1の実施の形態を示し、図1は本実施の形態の電子内視鏡装置全体の構成を示すブロック図、図2は図1に示す測光回路の具体的な回路構成を示すブロック図、図3は図2の測光回路の作用を説明するための説明図である。なお、本発明を、光源の赤(R),緑(G),青(B)面順次方式の内視鏡装置に適用した場合の実施の形態について後述する。
【0023】
図1に示すように、本実施の形態の電子内視鏡装置は、電子内視鏡1とビデオプロセッサ2と光源装置3とテレビモニター4とによって構成される。
【0024】
前記電子内視鏡1は、可撓性を有する細長の挿入部を有し、この挿入部の先端側部にはCCD6を内蔵している。前記挿入部の先端には対物レンズ5が設けられ、被写体(図示せず)からの光学像をCCD6の撮像面に結像させるようになっている。また挿入部には、鉗子等の処置具を挿通するための鉗子チャンネル8や光源装置3からの照明光を伝送して被写体へ照射するためのライトガイド9が設けられている。
【0025】
前記光源装置3は、絞り制御回路19,絞り20,光源用ランプ21,回転フィルタ22及び明るさ制御ボタン23を有して構成されている。
【0026】
前記光源用ランプ21から照射された光は、赤(R)、緑(G)、青(B)の色透過フィルタが取り付けてある回転フィルタ22を通過し、絞り20を介してライトガイド9に導かれる。ライトガイド9は、入射した光を電子内視鏡1の先端まで伝送して、赤、緑、青の各波長の光を順次(時系列的に)図示しない被写体に向けて照射する。
【0027】
前記ビデオプロセッサ2のCCDドライバ7は、前記CCD6を駆動するための駆動信号を出力する。この駆動信号は、挿入部に設けた信号線を介してCCD6に供給される。これにより、CCD6は被写体からの光学像を光電変化し、R,G,B各フィールドの映像信号を挿入部内の信号線を介してビデオプロセッサ2のアナログ処理回路10に供給するようになっている。
【0028】
前記アナログ処理回路10は、図示はしないがCCD出力信号を増幅するためのプリアンプや、相関二重サンプリング処理を行うCDS回路(相関2重サンプリング回路)などが設けられている。このアナログ処理回路10では、前記プリアンプによりCCD出力信号を増幅して前記CDS回路に供給し、該CDS回路により前記CCD6からの読み出し信号をダブルサンプリングしてホールドした後、A/D変換器11に出力する。この場合、前記CDS回路によって、CCD6の出力信号に含まれる1/fノイズ及びリセットノイズが除去されて、S/N比を改善した信号が得られることになる。
【0029】
前記A/D変換器11は、入力された信号をディジタル信号に変換する。前記A/D変換器12の出力は、患者回路側の測光回路17と、アイソレーション部13を介して二次回路側のデジタル処理回路12とに供給される。
【0030】
ビデオプロセッサ2内の二次回路側において、前記デジタル信号処理回路12は、伝送されたデジタル映像信号に対し、OBクランプ,ホワイトバランス,電子ズーム,画像強調等のデジタル信号処理を施し、同時化回路14に供給する。この場合、該デジタル信号処理回路12で処理された映像信号は、R、G、Bの時系列の信号である。
【0031】
そして、図示はしないが観察モニターに画像を表示するためには同時化処理を施す必要があるので、前記同時化回路14は、デジタル信号処理回路12の出力信号(R、G、Bの時系列信号)に同時化処理を施す。つまり、同時化回路14から同時に読み出された映像信号は、RGBそれぞれに対応するD/A変換器15に供給される。
【0032】
前記D/A変換器15は、入力された各デジタル信号をアナログ信号にそれぞれ変換し、図示しない観察モニターに供給する。これにより、図示しない観察モニタは、入力された映像信号に基づく画像表示を行うようになっている。
【0033】
一方、患者回路側において、前記A/D変換器11でA/D変換された映像信号は、被写体の明るさを算出するために測光回路17にも供給されている。この測光回路17では、CPU24に制御されて、入力された信号に基づき被写体の明るさを算出し、算出結果によって光源装置3の絞り制御回路19を制御するための調光信号を生成するようになっている。この測光回路17で生成された調光信号は、D/A変換器18に供給される。
【0034】
前記D/A変換器18は、この調光信号をアナログ信号に変換して光源装置3の絞り制御回路19へ出力する。この絞り制御回路19は、この調光信号に基づき、絞り20を制御することによって、調光用ランプ21から出射された後のR,G,Bの回転フィルタ22を通過してきた光の量が調整されるようになっている。
【0035】
この場合、絞り制御回路19は、測光回路17で算出した被写体の明るさと、光源装置3のフロントパネル(図示せず)に設けられている明るさ制御ボタン23の設定値によって出力される信号とを比較して、被写体の明るさの方が大きいと判断した場合には、絞り20を閉じて被写体へ照射する光量を減らすように制御する。一方、絞り制御回路19は、被写体の明るさが明るさ制御ボタン23によって出力される信号と比較して小さいと判断した場合には、絞り20を開いて被写体へ照射する光量を増やすように制御する。
【0036】
前記CPU24は、図2に示すように、処置具等の高輝度で小面積である物体の明るさを測光対象から除外するためのクリップレベル信号や、測光モードを指示する測光モード指定信号を測光回路17へ出力している。クリップレベル信号は、前記明るさ制御ボタン23の設定値に基づいて決定されるようになっている。つまり、この明るさ設定ボタン23を用いて、明るく設定される場合はクリップレベルを高くし、逆に暗く設定される場合はクリップレベルを低くすることになる。
【0037】
また、測光回路17は、図1に示すように、ビデオプロセッサ2内の2次回路を経由して、図示はしないが第2の光源装置にも測光結果を供給するようになっている。この場合、該測光回路17で得られた測光結果は、P/S変換器4にてP/S変換し、アイソレーション部13を介して2次回路へ伝送される。そして、2次回路に伝送された測光結果は、該ビデオプロセッサ2のリアパネルの図示しないケーブルを経由して、このケーブルと接続される図示しない第2の光源装置に供給されるようになっている。
【0038】
第2の光源装置(図示せず)側では、前記第1の光源装置3と略同様に測光結果をD/A変換し、第2の光源装置の絞り制御回路へ入力され、上記同様に該絞り制御回路による絞りの制御により、光の調整が調整されるようになっている。
【0039】
次に、前記測光回路17の具体的な構成について、図2乃至図3を参照しながら詳細に説明する。
【0040】
図1に示す測光回路17は、図2に示すように、ゲート信号発生回路29,サブサンプリング回路32,クリップ回路33,ゲイン回路34,検波回路35,輝度算出回路36及び係数出力回路37を含んで構成されている。
【0041】
前記サブサンプリング回路32は、図1に示すA/D変換器11からの映像出力信号が入力され、デジタル映像信号から測光に必要な画素のみ、サンプリングパルスに基づきサンプリングされてクリップ回路33に供給する。
【0042】
クリップ回路33は、ゲート信号発生回路29からのゲート信号によってクリップ動作が制御されるようになっている。このゲート信号発生回路29は、CCD6の撮像範囲内の位置に応じたゲート信号、例えば、撮像範囲の中央部に相当する部分(ピーク測光領域27)にはハイレベル(以下、“H”と略記する)で、撮像範囲の周辺部に相当する部分(平均測光領域28)にはローレベル(以下、“L”という)のゲート信号を出力する。
【0043】
したがって、前記クリップ回路33は、ゲート信号の“L”が出力されている期間に、クリップレベル設定信号に基づくレベルで入力された映像信号(図3に示す平均測光領域28に対応する映像信号)をクリップしてゲイン回路34に出力する一方、ゲート信号の“H”が出力されている期間には入力された映像信号(図3に示すピーク測光領域27に対応する映像信号)をクリップすることなくそのままゲイン回路34に出力するようになっている。
【0044】
この場合、ゲート信号発生回路29は、供給される測光モード指定信号により従来の平均測光モードが選択された場合には常に“L”のゲート信号を出力し、また、ピーク測光モードが選択された場合には常に“H”のゲート信号を出力する。
【0045】
前記ゲイン回路34は、前記ゲート信号に基づき、前記クリップ回路33にて所定の処理を施された映像信号に所定のゲイン定数を乗じて利得を調整する。
【0046】
すなわち、本実施の形態においてゲイン回路34は、ゲート信号が図3に示す平均測光領域28に相当する“L”が出力されている期間には従来の平均測光時と同等のゲインを乗じて利得を調整する。一方、ゲート信号が図3に示すピーク測光領域27に相当する“H”が出力されている期間には従来のピーク測光時と同等のゲインを乗じて利得を調整する。この場合、例えば従来のピーク測光時のゲイン定数が1倍ならピーク測光時についても1倍程度のゲイン定数を乗じる。
【0047】
例えば、ゲイン回路34により乗じられるゲイン定数は、従来の平均測光では、検波回路35の出力が入力レベルの約50%になるように設定されており、また、ピーク測光では、検波回路35の出力が入力レベルの約100%になるように設定されている。このため、平均測光モードが選択された場合、一様な被写体(例えば全画面白など)を写したときにピーク測光時、平均測光時どちらも同じ検波回路35の出力レベルとなるように、2倍程度のゲイン定数を乗じている(ピーク測光時は1倍程度となる)。これにより、検波回路35の出力が同じ値になるため測光結果についても同様であり、その結果、内視鏡像の明るさは同じになる。このような理由により、前記ゲイン回路35では、平均モード測光時には、予め設定されている2倍程度のゲインを、平均測光領域28に対応するクリップ回路33からの映像信号に乗じるようにしている。
【0048】
前記ゲイン回路34の出力信号は、検波回路35に供給される。この検波回路35は、積分回路になっており、前記ゲート信号発生回路29からのゲート信号及び係数出力回路37からの係数に基づき、入力されたゲイン回路35の出力信号を積分する。なお、前記係数出力回路37は、前記ゲート信号発生回路29からのゲート信号が供給されており、該ゲート信号に基づき、平均測光領域28に相当する部分については従来の平均測光時と同等の比較的大きい時定数に対応する係数を前記検波回路に出力し、また、ピーク測光領域27に相当する部分については従来のピーク測光時と同等の比較的小さい時定数に対応する係数を前記検波回路35に出力する。
【0049】
つまり、検波回路35は、ゲート信号の“L”が出力されている期間(平均測光領域28に相当)には従来の平均測光時と同等の比較的大きな時定数で入力された信号をR,G,Bフィールド毎に積分する。一方、ゲート信号の“H”が出力されている期間(ピーク測光領域27に相当)には従来のピーク測光時と同等の比較的小さな時定数で入力された信号をR,G,Bフィールド毎に積分する。そして、この検波回路35の出力は、輝度算出回路36に供給される。
【0050】
前記輝度算出回路36は、検波回路35のR,G,Bフィールド毎の積分出力に基づいて被写体の輝度を算出する。即ち、輝度算出回路36は、R,G,Bフィールドの積分出力をそれぞれ0.30倍、0.59倍、0.11倍した後加算して、被写体輝度を求め、その後、求めた輝度信号を、図1に示すP/S変換回路4及びD/A変換器18に供給する。こうして、該輝度算出回路36により得られた撮像範囲中央のピーク測光結果と撮像範囲周辺の平均測光結果とに基づく調光信号が光源装置3側の絞り制御回路17に与えられる。
【0051】
前記光源装置3には、図示しないフロントパネル上に、明るさを複数段階に制御するための明るさ制御ボタン23が設けられている。観察者の明るさ制御ボタン23の操作に基づく信号はCPU24に供給され、CPU24は入力された信号に基づく明るさを設定値として、絞り制御回路19を制御するようになっている(図示省略)。
【0052】
前記絞り制御回路19は、CPU24が明るさ制御ボタン23の操作に基づいて設定した明るさと調光信号によって示される明るさとを一致させるように絞り20を制御する。
【0053】
したがって、本実施の形態では、撮像範囲の周辺部に相当する部分(平均測光領域28)については従来の平均測光と同等のゲイン定数がクリップ回路33の出力信号に乗じられて、且つ平均測光と同等の時定数で検波されていることから、CCD6の撮像範囲の周辺部(図3に示す平均測光領域28)のみに被写体が写される場合も、測光結果の出力が従来の平均測光と同等の結果を得ることができ、被写体へ照射する光量が従来の平均測光時と同等のレベルになるため、ハレーションは従来の平均測光と同程度に抑えることができる。また、CCD6の撮像範囲の中央部(図3に示すピーク測光領域27)にのみ被写体が写される場合も、従来のピーク測光と同等のゲイン定数が乗じられて、且つ同等の時定数で検波されていることから、最適な明るさで観察することができる。
【0054】
なお、本実施の形態では、上述した回路ブロックにおいて、CCD6の種類に応じて、動作を切り替えられるように構成しても良い。また、ゲイン定数や係数は、輝度信号Yが従来の平均測光やピーク測光と同じレベルになるように微調整するように構成しても良い。
【0055】
(作用)
上述のように構成されている電子内視鏡装置の動作について図3を参照しながら説明する。
【0056】
いま、図1に示す電子内視鏡装置を用いて患者の体腔内を観察するものとする。この場合、電子内視鏡1の挿入部を図示しない体腔内に挿入し、光源装置3からの照明光をライトガイド9を介して体腔内に導いて被写体を照明する。光源装置3では、例えば、前記回転フィルタ22を3フィールド周期で1回転させて、フィールド周期(1/60秒)でR(赤),G(緑),B(青)の照明光を出射する。
【0057】
被写体からの反射光は、挿入部の先端に設けた対物レンズ5を介してCCD6の撮像面に結像する。これにより、CCD6ではビデオプロセッサ2のCCDドライバ7に制御されて、撮像面に結像した被写体の光学像を面順次に取込んで光電変換する。
【0058】
前記CCD6からの映像信号は、ビデオプロセッサ2のアナログ処理回路10に与えられ、このアナログ処理回路10にて、プリアンプにより増幅された後、内部のCDS回路によりダブルサンプリングしてホールドし、A/D変換器11に出力される。そして、アナログ信号処理回路10の出力信号は、A/D変換器11によってディジタル信号に変換された後、アイソレーション部13を介してデジタル処理回路12に供給される。
【0059】
前記デジタル処理回路12に入力された映像信号は、OBクランプ,ホワイトバランス,電子ズーム,画像強調等の所定のデジタル信号処理が施された後、同時化回路14にてRGB同時化処理が施され、その後、D/A変換器15によって元のアナログ信号に戻される。このD/A変換器15の出力は、図示しない観察モニタに出力される。
【0060】
前記観察モニタ(図示せず)の表示画面に表示される内視鏡像の明るさは、明るさ制御ボタン23の操作に応じて、測光回路17の測光結果に基づいて自動調光される。
【0061】
この場合、測光回路17内のゲート信号発生回路29は、撮像範囲の中央部でピーク測光を行い、周辺部で平均測光を行うためのゲート信号を発生する。
【0062】
即ち、ゲート信号発生回路29は、図3に示す観察モニタの表示画面上に表示される内視鏡像26を得るCCD6の撮像範囲のうち、中央部(ピーク測光領域27)は“H”のゲート信号を出力し、周辺部(平均測光領域28)は“L”のゲート信号を出力する。前記ゲート信号は、クリップ回路27,ゲイン回路34及び係数出力回路37に供給される。
【0063】
前記クリップ回路33では、ゲート信号の“L”が出力されている期間に、クリップレベル設定信号に基づくレベルで入力された映像信号(図3に示す平均測光領域28に対応する映像信号)をクリップしてゲイン回路34に出力する一方、ゲート信号の“H”が出力されている期間には入力された映像信号(図3に示すピーク測光領域27に対応する映像信号)をクリップすることなくそのままゲイン回路34に出力する。これにより、たとえ撮像範囲周辺で鉗子(図示せず)が撮像された場合でも、この鉗子(図示せず)によるCDS出力信号の高輝度部分はクリップされ、調光に影響を与えない。
【0064】
さらに、本実施の形態においては、ゲイン回路34は、ゲート信号が図3に示す平均測光領域28に相当する“L”が出力されている期間には従来の平均測光時と同等のゲインを乗じて利得を調整する。一方、ゲート信号が図3に示すピーク測光領域27に相当する“H”が出力されている期間には従来のピーク測光時と同等のゲインを乗じて利得を調整する。即ち、前記ゲイン回路35では、平均モード測光時には、平均測光領域28に対応するクリップ回路33からの映像信号に対し、予め設定されている2倍程度のゲインを乗じるようにしている。
【0065】
前記ゲイン回路34の出力信号は、検波回路35に供給され、該検波回路35によって、ゲート信号の“L”が出力されている期間(平均測光領域28に相当)には従来の平均測光時と同等の比較的大きな時定数で入力された信号をR,G,Bフィールド毎に積分する。一方、ゲート信号の“H”が出力されている期間(ピーク測光領域27に相当)には従来のピーク測光時と同等の比較的小さな時定数で入力された信号をR,G,Bフィールド毎に積分する。そして、この検波回路35の出力は、輝度算出回路36に供給されて、被写体の輝度が算出される。この輝度算出回路36は、算出結果を調光信号として前記光源装置3の絞り制御回路19に出力する。
【0066】
一方、観察者は、光源装置3に設けられた明るさ制御ボタン23を操作して、内視鏡像26の明るさを所望の明るさに設定する。明るさ制御ボタン23の操作に基づく信号はCPU24に供給され、CPU24は入力された信号に基づく明るさを絞り制御回路19に設定する。
【0067】
絞り制御回路19は、測光回路17から調光信号が与えられており、調光信号に基づく明るさがCPU24に設定された明るさに一致するように、絞り20を制御する。即ち、絞り制御回路19は、調光信号によって与えられる被写体の明るさの方が設定された明るさよりも明るい場合には、絞り20を閉じて被写体に照射する光量を減らし、調光信号によって与えられる被写体の明るさが設定された明るさよりも暗い場合には、絞り20を開いて被写体に照射する光量を増加させる。
【0068】
これにより、被写体の明るさは、観察者の明るさ制御ボタン23の操作に基づく明るさに自動調光される。
【0069】
(効果)
したがって、本実施の形態によれば、撮像範囲の周辺部に相当する部分(平均測光領域28)については従来の平均測光と同等のゲイン定数がクリップ回路33の出力信号に乗じられて、且つ平均測光と同等の時定数で検波されていることから、CCD6の撮像範囲の周辺部(図3に示す平均測光領域28)のみに被写体が写される場合も、測光結果の出力が従来の平均測光と同等の結果を得ることができ、被写体へ照射する光量が従来の平均測光時と同等のレベルになるため、ハレーションは従来の平均測光と同程度に抑えることができる。
【0070】
また、CCD6の撮像範囲の中央部(図3に示すピーク測光領域27)にのみ被写体が写される場合も、従来のピーク測光と同等のゲイン定数が乗じられて、且つ同等の時定数で検波されていることから、最適な明るさで観察することができる。
【0071】
第2の実施の形態:
(構成)
図4及び図5は本発明の電子内視鏡装置の第2の実施の形態を示し、図4は本実施の形態の電子内視鏡装置内の測光回路の具体的な回路構成を示すブロック図、図5は図4の検波回路の1フィールドに対応する出力特性例を表す特性図である。なお、図4は、前記第1の実施の形態の電子内視鏡装置と同様な構成要素については同一の符号を付して説明を省略し、異なる部分のみを説明する。
【0072】
本実施の形態の電子内視鏡装置では、前記第1の実施の形態の電子内視鏡装置の測光回路17において、さらに第2の検波回路38,閾値決定回路39及び比較回路40を設けて測光回路17Aとして構成したことが前記第1の実施の形態と異なる点である。
【0073】
ここで、説明を簡略化するために、平均測光時に関し説明する。
【0074】
前記測光回路17Aにおいて、例えば測光モードが平均測光を示すもので、該平均測光が実行された場合、ゲート信号発生回路29から出力されるゲート信号は常に“L”である。測光回路17Aへの入力からサブサンプリング回路32の出力までは、前記第1の実施の形態と同様に動作する。
【0075】
本実施の形態では、サブサンプリング回路32の出力信号は、クリップ回路33,及び第2の検波回路38に供給される。なお、前記クリップ回路33から輝度算出回路36までの信号処理動作は、前記第1の実施の形態と同様である。
【0076】
前記第2の検波回路38は、入力されたサンプリングされた映像信号に対し、被写体の高輝度部分を検出するために略ピーク測光の特性に等しい検波特性でRフィールド,Gフィールド,Bフィールドごとに検波し、閾値決定手段としての閾値決定回路39に供給する。
【0077】
前記閾値決定回路39は、第2の検波回路38からの検波結果に基づき、検波回路(本実施の形態では第1の検波回路と称す)35の閾値を、RGB各フィールド毎に算出し、算出結果を比較制御手段としての比較回路40に供給する。
【0078】
前記比較回路40は、前記第1の検波回路35のRGB毎に検波された検波結果も入力され、該検波結果と前記閾値決定回路39からの閾値とをRGB各フィールド毎に比較する。即ち、この比較する閾値は、RGBそれぞれの前のフィールドで求めた閾値である。
【0079】
例えば、本実施の形態において前記比較回路40は、比較結果が、第1の検波回路35の検波結果が前記閾値以下の場合と判断した場合には、比較的小さい時定数に対応する係数(例えばピーク測光と平均測光の中間値)が、比較回路40の制御によって係数出力回路41から検波回路35に供給されるようになっている。また、第1の検波回路35の検波結果が閾値以上になったと判断した場合には、比較的大きい時定数に対応する係数(例えば平均測光の係数より少し大きい値)が、比較回路40の制御によって係数出力回路41から第1の検波回路35に供給されるようになっている。
【0080】
本実施の形態における前記第1の検波回路35の1フィールドに対応する出力特性例が図5に示されている。なお、図5において、縦軸は入力映像信号レベルを示し、横軸は検波開始から終了までの検波回路に入力される画素数を示し、符号50は第1の検波回路の出力特性を示すグラフで、符号100は従来の検波回路の出力特性を示すグラフをそれぞれ示している。
【0081】
図5に示すように、本実施の形態の電子内視鏡装置においては、前記第1の検波回路35と前記第2の検波回路38に、映像信号レベルが“100”である映像信号が入力されるものする。
【0082】
この場合、前記第2の検波回路38の特性を略ピーク測光であるとし、該第2の検波回路38の出力映像信号レベルがおよそ“100”で、この場合の該第2の検波回路38の出力の1/10を、前記係数出力回路41にて係数を切り換える閾値とすると、前記閾値決定回路39は閾値をこの“10”に設定する。
【0083】
その後、前記第1の検波回路35の出力(検波結果)と“10”であるこの閾値とを前記比較回路40により比較して、この比較結果が、前記第1の検波波回路35の検波結果が“10”の閾値になる比較結果となるまで、前記係数出力回路41が比較的小さい時定数に対応する係数を出力するように、前記比較回路40は制御信号を前記係数出力回路41に供給して係数の出力を制御する(図5中に示す(a)の期間)。
【0084】
そして、前記比較回路40による比較結果が、前記第1の検波回路35の出力(検波結果)が“10”の閾値以上となる比較結果になった際には、前記係数出力回路41が比較的大きい時定数に対応する係数を出力するように、前記比較回路40は制御信号を前記係数出力回路41に供給して係数の出力を制御する(図5中に示す(b)の期間)。
【0085】
ここで、本実施の形態では、前記係数出力回路41は、前記第1の検波回路35による1フイールドの検波結果が従来の平均測光と同じになるように、図5中に示す(b)の期間については、従来の平均測光より時定数がやや大きめとなる時定数に対応する係数を出力するように設定されている。
図5中に示す横軸は前記第1の検波回路35に入力される画素数を示しているが、例えば検波開始から検波終了までに前記第1の検波回路35に入力される全画素数の内、1/3だけ“100”の映像信号レベルである映像信号が、前記第1の検波回路35に入力された場合(図5中に示す1/3と記載している箇所)、本実施の形態の第1の検波回路35による検波結果(符号50)は、従来の平均測光の検波結果(符号100)より大きくなる。
【0086】
即ち、前記第1の検波回路35による検波結果が大きいため、前記輝度算出回路36により算出する輝度信号も大きくなり、その結果、光源装置3の絞り制御回路19は絞り20を絞る方向に駆動制御する。
【0087】
その他の構成は、前記第1の実施の形態と略同様である。
【0088】
また、本実施の形態の電子内視鏡装置では、CCD6の撮像範囲の中央部(図3に示すピーク測光領域27)をピーク測光、周辺部(図3に示す平均測光領域28)を平均測光とする測光方式(前記第1の実施の形態と同様)の測光領域にも、本実施の形態における測光回路17Aは適用することができ、その結果、ハレーションを低減でき、前記第1の実施の形態と同様の効果を得られる。
【0089】
なお、本実施の形態においても、前記第1の実施の形態例と同様に上述した回路ブロックにおいて、CCD6の種類に応じて、動作を切り替えられるように構成しても良い。
【0090】
(作用)
本実施の形態の電子内視鏡装置において、前記第1の実施の形態の電子内視鏡装置と略同様に動作する他に、上記構成により、高輝度で面積の比較的少ないハレーションを起こすような被写体では、第1の検波回路35の検波出力が従来の平均測光の結果より大きくなり、測光回路17Aの出力が大きくなる。これにより、光源装置3の絞り20が、被写体へ照射する光量を絞るため、従来の平均測光のハレーションを低減させることができる。
【0091】
また、中央部をピーク測光、周辺部を平均測光とする測光方式においても、上記と同様の作用により周辺部のハレーションを低減させることができる。
【0092】
(効果)
したがって、本実施の形態によれば、前記第1の実施の形態と同様の効果が得られる他に、高輝度で面積の比較的少ないハレーションを起こすような被写体であっても、従来の平均測光時に生じるハレーションを低減させることができ、また、中央部をピーク測光、周辺部を平均測光とする測光方式においても、同様に周辺部のハレーションを低減させることができるので、最適な明るさで観察することができる。
【0093】
なお、本発明は前記第1及び第2の実施の形態に限定されるものではなく、前記第1及び第2の実施の形態の組み合わせや応用も本発明に適用される。
【0094】
[付記]
以上詳述したような本発明の上記実施の形態によれば、以下の如き構成を得ることができる。
【0095】
(付記項1) 被写体を所定の撮像範囲で撮像するための撮像手段を備えた電子内視鏡と、
前記被写体を照明するための光源装置と、
前記撮像範囲の中央部及び周辺部を指定する領域指定信号を発生させる領域指定信号発生手段と、
前記撮像手段から出力される映像信号を増幅する増幅手段と、
前記増幅手段から出力される映像信号を所定の時定数をもって1フィールド分積分する積分手段と、
前記領域指定信号に応じて前記増幅手段で増幅する増幅率及び前記積分手段で積分する時定数を切り換えながら、前記積分手段から出力される映像信号を1フィールド分毎に検波する検波手段と、
前記検波手段の検波出力に基づき、前記撮像手段からの出力される映像信号の明るさを測光する測光手段と、
前記測光手段の測光結果に基づき、前記光源装置による前記被写体を照明する光量を制御する光量制御手段と、
を具備したことを特徴とする電子内視鏡装置。
【0096】
(付記項2) 被写体を所定の撮像範囲で撮像するための撮像手段を備えた電子内視鏡と、
前記被写体を照明するための光源装置と、
前記撮像手段から出力される映像信号の平均値を検波する第1の検波手段と、
前記撮像手段から出力される映像信号のピーク値を検波する第2の検波手段と、
前記第2の検波手段による検波出力に基づき、前記第1の検波手段により検波処理する際の閾値を決定する閾値決定手段と、
前記閾値決定手段により決定された閾値と前記第1の検波手段による検波出力とを比較し、比較結果に基づき、前記第1の検波手段により検波処理する時定数を切り換え制御する比較制御手段と、
前記比較制御手段により切り換えられた時定数に基づき得られた前記第1の検波手段の検波出力に基づいて、前記撮像手段からの出力される映像信号の明るさを測光する測光手段と、
前記測光手段の測光結果に基づき、前記光源装置による前記被写体を照明する光量を制御する光量制御手段と、
を具備したことを特徴とする電子内視鏡装置。
【0097】
(付記項3) 被写体を所定の撮像範囲で撮像するための撮像手段を備えた電子内視鏡と、
前記被写体を照明するための光源装置と、
前記撮像範囲の中央部に対応する第1の領域指定信号と、前記撮像範囲の周辺部に対応する第2の領域指定信号とを出力する領域指定信号発生手段と、
前記撮像手段から出力される映像信号を増幅する増幅手段と、
前記増幅手段から出力される映像信号を所定の時定数をもって1フィールド分積分する積分手段と、
前記第1及び第2の領域指定信号に応じて前記増幅手段で増幅する増幅率及び前記積分手段で積分する時定数を切り換えながら、前記積分手段から出力される映像信号を1フィールド分毎に検波する検波手段と、
前記第1及び第2の領域指定信号に基づいて測光方式をピーク測光方式と平均測光方式とで切り換えながら、前記検波手段の検波出力に基づき、前記撮像手段からの出力される映像信号の明るさを測光する測光手段と、
前記測光手段の測光結果に基づき、前記光源装置による前記被写体を照明する光量を制御する光量制御手段と、
を具備したことを特徴とする電子内視鏡装置。
【0098】
(付記項4) 前記検波手段は、前記撮像範囲の周辺部を指定する前記領域指定信号が出力している期間は平均測光時と同等の増幅率を前記増幅手段に供給して増幅させ、前記撮像範囲の中央部を指定する前記領域指定信号が出力されている期間はピーク測光時と同等の増幅率を前記増幅手段に供給して増幅させることを特徴とする付記項1に記載の電子内視鏡装置。
【0099】
(付記項5) 前記検波手段は、前記撮像範囲の周辺部を指定する前記領域指定信号が出力している期間は平均測光時と同等の比較的大きい時定数に対応する係数を前記積分手段に供給して積分させ、前記撮像範囲の中央部を指定する前記領域指定信号が出力されている期間はピーク測光時と同等の比較的小さい時定数に対応する係数を前記積分手段に供給して積分させることを特徴とする付記項1に記載の電子内視鏡装置。
【0100】
(付記項6) 前記測光手段は、前記領域指定信号発生手段,前記増幅手段,前記積分手段及び前記検波手段を含んで構成されたことを特徴とする付記項1に記載の電子内視鏡装置。
【0101】
(付記項7) 前記測光手段は、前記積分手段の積分結果に対する演算によって撮像信号の輝度を算出して前記測光結果として出力する輝度算出手段を含んで構成されたことを特徴とする付記項6に記載の電子内視鏡装置。
【0102】
(付記項8) 前記光量制御手段は、観察者の操作に基づいて設定された明るさと前記測光結果に基づく明るさとを一致させることによって調光を行う付記項1に記載の電子内視鏡装置。
【0103】
【発明の効果】
以上、説明したように本発明によれば、観察場面に応じて測光方式を切り換える必要がなくなり、従来の平均測光、ピーク測光の欠点を補える最適な調光が行えるという効果が得られる。また、従来の平均測光においてもハレーションを低減し、観察しやすい調光が行えるという効果が得られる。
【図面の簡単な説明】
【図1】本発明の電子内視鏡装置の第1の実施の形態を示し、本実施の形態の電子内視鏡装置全体の構成を示すブロック図。
【図2】図1に示す測光回路の具体的な回路構成を示すブロック図。
【図3】図2の測光回路の作用を説明するための説明図。
【図4】本発明の電子内視鏡装置の第2の実施の形態を示し、本実施の形態の測光回路の具体的な回路構成を示すブロック図。
【図5】図4の検波回路の1フィールドに対応する出力特性例を表す特性図。
【符号の説明】
1…電子内視鏡、
2…ビデオプロセッサ、
3…光源装置、
6…CCD、
8…鉗子チャンネル、
9…ライトガイド、
10…アナログ処理回路、
11…A/D変換器、
12…デジタル処理回路、
13…アイソレーション部、
14…同時化回路、
15,18…D/A変換器、
17,17A…測光回路、
19…絞り制御回路、
20…絞り、
21…光源用ランプ、
22…回転フィルタ、
23…明るさ制御ボタン
24…CPU、
29…ゲート信号発生回路、
32…サブサンプリング回路子、
33…クリップ回路、
34…ゲイン回路、
35…検波回路(第1の検波回路)、
36…輝度算出回路、
37,41…係数出力回路、
38…第2の検波回路、
39…閾値決定回路、
40…比較回路。
Claims (2)
- 被写体を所定の撮像範囲で撮像するための撮像手段を備えた電子内視鏡と、
前記被写体を照明するための光源装置と、
前記撮像範囲の中央部領域と当該撮像範囲の周辺部領域とに応じた領域指定信号を発生し出力する領域指定信号発生手段と、
前記撮像手段から出力される撮像信号であって表示手段に表示するための映像信号を生成するための信号処理回路に供給する撮像信号と同じ信号を測光用撮像信号として入力する測光回路を構成し、当該入力した測光用撮像信号を、前記領域指定信号発生手段から出力される前記領域指定信号が示す前記撮像範囲の領域の種別に応じた所定の増幅率をもって増幅する増幅手段と、
前記測光回路を構成し、前記増幅手段により増幅された前記測光用撮像信号を、前記領域指定信号発生手段から出力される前記領域指定信号が示す前記撮像範囲の領域の種別に応じた時定数をもって1フィールド分積分することにより、当該測光用撮像信号を1フィールド分毎に検波する検波手段と、
前記測光回路を構成し、前記検波手段により検波された前記測光用撮像信号の明るさを測光する測光手段と、
前記測光手段の測光結果に基づき、前記光源装置による前記被写体を照明する光量を制御する光量制御手段と、
を具備したことを特徴とする電子内視鏡装置。 - 被写体を所定の撮像範囲で撮像するための撮像手段を備えた電子内視鏡と、
前記被写体を照明するための光源装置と、
前記撮像手段から出力される映像信号の平均値を検波する第1の検波手段と、
前記撮像手段から出力される映像信号のピーク値を検波する第2の検波手段と、
前記第2の検波手段による検波出力に基づき、前記第1の検波手段により検波処理する際の閾値を決定する閾値決定手段と、
前記閾値決定手段により決定された閾値と前記第1の検波手段による検波出力とを比較し、比較結果に基づき、前記第1の検波手段により検波処理する時定数を切り換え制御する比較制御手段と、
前記比較制御手段により切り換えられた時定数に基づき得られた前記第1の検波手段の検波出力に基づいて、前記撮像手段からの出力される映像信号の明るさを測光する測光手段と、
前記測光手段の測光結果に基づき、前記光源装置による前記被写体を照明する光量を制御する光量制御手段と、
を具備したことを特徴とする電子内視鏡装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003058876A JP4503931B2 (ja) | 2003-03-05 | 2003-03-05 | 電子内視鏡装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003058876A JP4503931B2 (ja) | 2003-03-05 | 2003-03-05 | 電子内視鏡装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2004267290A JP2004267290A (ja) | 2004-09-30 |
JP4503931B2 true JP4503931B2 (ja) | 2010-07-14 |
Family
ID=33121882
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003058876A Expired - Fee Related JP4503931B2 (ja) | 2003-03-05 | 2003-03-05 | 電子内視鏡装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4503931B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012014678A1 (ja) | 2010-07-26 | 2012-02-02 | オリンパスメディカルシステムズ株式会社 | 内視鏡装置および内視鏡装置の制御方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07194527A (ja) * | 1993-12-30 | 1995-08-01 | Olympus Optical Co Ltd | 内視鏡装置 |
JPH07108278B2 (ja) * | 1989-11-08 | 1995-11-22 | オリンパス光学工業株式会社 | 電子内視鏡装置 |
JPH10165363A (ja) * | 1996-12-06 | 1998-06-23 | Olympus Optical Co Ltd | 内視鏡用撮像信号処理装置 |
JPH11225954A (ja) * | 1998-02-16 | 1999-08-24 | Olympus Optical Co Ltd | 電子内視鏡装置 |
JP2000333901A (ja) * | 1999-05-26 | 2000-12-05 | Olympus Optical Co Ltd | 電子内視鏡装置 |
JP2001154232A (ja) * | 1999-11-24 | 2001-06-08 | Olympus Optical Co Ltd | 測光装置 |
-
2003
- 2003-03-05 JP JP2003058876A patent/JP4503931B2/ja not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07108278B2 (ja) * | 1989-11-08 | 1995-11-22 | オリンパス光学工業株式会社 | 電子内視鏡装置 |
JPH07194527A (ja) * | 1993-12-30 | 1995-08-01 | Olympus Optical Co Ltd | 内視鏡装置 |
JPH10165363A (ja) * | 1996-12-06 | 1998-06-23 | Olympus Optical Co Ltd | 内視鏡用撮像信号処理装置 |
JPH11225954A (ja) * | 1998-02-16 | 1999-08-24 | Olympus Optical Co Ltd | 電子内視鏡装置 |
JP2000333901A (ja) * | 1999-05-26 | 2000-12-05 | Olympus Optical Co Ltd | 電子内視鏡装置 |
JP2001154232A (ja) * | 1999-11-24 | 2001-06-08 | Olympus Optical Co Ltd | 測光装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2004267290A (ja) | 2004-09-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9029755B2 (en) | Imaging system with illumination controller to variably control illumination light | |
JP2821141B2 (ja) | 内視鏡用自動調光制御装置 | |
EP1712177B1 (en) | Signal processing device for endoscope | |
JP5355799B2 (ja) | 内視鏡装置および内視鏡装置の作動方法 | |
US9900484B2 (en) | White balance adjustment method and imaging device for medical instrument | |
US7258663B2 (en) | Endoscope system with irradiated light switching feature | |
KR101050882B1 (ko) | 생체 관측 시스템 | |
JPH07111978A (ja) | 内視鏡用画像処理装置 | |
US10958852B2 (en) | Imaging apparatus and control method having a plurality of synchronized light source devices | |
JP3752272B2 (ja) | 電子内視鏡装置 | |
JPH0690900A (ja) | 電子内視鏡装置 | |
JP3607816B2 (ja) | 電子内視鏡装置 | |
JP2001154232A (ja) | 測光装置 | |
JP4503931B2 (ja) | 電子内視鏡装置 | |
JP2000197604A (ja) | 内視鏡装置 | |
JPH11313247A (ja) | 内視鏡装置 | |
JP3140548B2 (ja) | 内視鏡像の明るさ制御装置 | |
JPH0815617A (ja) | 内視鏡装置 | |
EP2854391A2 (en) | Driving method of imaging element, imaging device, and endoscopic device | |
JP4033565B2 (ja) | 内視鏡装置 | |
JP4648593B2 (ja) | 電子内視鏡システム用プロセッサ | |
WO2023090044A1 (ja) | 電子内視鏡用プロセッサ及び電子内視鏡システム | |
JP2000333901A (ja) | 電子内視鏡装置 | |
JPH08313826A (ja) | 電子内視鏡装置 | |
JP2013094489A (ja) | 内視鏡装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060217 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090319 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090428 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090629 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090721 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090924 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100413 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100422 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 4503931 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130430 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140430 Year of fee payment: 4 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |