JP5635565B2 - 撮像装置の作動方法 - Google Patents

撮像装置の作動方法 Download PDF

Info

Publication number
JP5635565B2
JP5635565B2 JP2012167375A JP2012167375A JP5635565B2 JP 5635565 B2 JP5635565 B2 JP 5635565B2 JP 2012167375 A JP2012167375 A JP 2012167375A JP 2012167375 A JP2012167375 A JP 2012167375A JP 5635565 B2 JP5635565 B2 JP 5635565B2
Authority
JP
Japan
Prior art keywords
light
imaging
image
subject
photosensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012167375A
Other languages
English (en)
Other versions
JP2013013736A (ja
Inventor
愼一 今出
愼一 今出
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2012167375A priority Critical patent/JP5635565B2/ja
Publication of JP2013013736A publication Critical patent/JP2013013736A/ja
Application granted granted Critical
Publication of JP5635565B2 publication Critical patent/JP5635565B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Instruments For Viewing The Inside Of Hollow Bodies (AREA)
  • Endoscopes (AREA)
  • Closed-Circuit Television Systems (AREA)

Description

本発明は、撮像装置、内視鏡及び電子機器等に関する。
昨今、極細の内視鏡等のニーズが高まり、小型の撮像装置が求められている。このよう
な小型の撮像装置においては、高解像度のカラー撮像を行うことが困難であるという課題
がある。
例えば、カラー撮像を実現する手法として、カラーフィルタ付きのイメージセンサ(2
次元撮像素子)を用いる手法がある。しかしながら、この手法では、モノクロのイメージ
センサに比べて解像度が不利なため撮像装置の小型化が困難になる。あるいは、カラー撮
像を実現する他の手法として、各色成分の照明光を時分割に被写体に照射する面順次照明
方式がある。しかしながら、この手法では、各色成分の照明光を時分割に照射するため色
ずれが発生するおそれがある。
また、撮像装置の小型化を実現するためには撮像系の小型化が必要であるため、撮像素
子も小さくする必要がある。そして、撮像素子を小型化すれば画素数が減少し、解像度が
劣化する。そのため、所望の解像度を確保しつつ撮像装置を小型化することは困難となる
なお、内視鏡等に用いられる撮像装置についての従来技術として、特許文献1には、複
数の光変調器により1つの光源からの光を光強度変調して光送信する手法が開示されてい
る。
また、特許文献2及び特許文献3には、レーザー光のビームを光ファイバ先端から出射
し、その光ファイバを振動させることで被写体にスポット光を走査させ、被写体からの反
射光をフォトセンサで検出して撮像する手法が開示されている。
特開平6−104867号公報 特開2008−43763号公報 米国特許第6,959,130号明細書
本発明の態様によれば、小型で且つ解像度の高い光走査画像の構築方法を提供できる。
本発明は、照明光を被写体に照明して得られる光信号により結像された撮像面を遮光ポイントにより一部遮光するとともに、前記撮像面または遮光ポイントを走査することで撮像面から得られる受光量の変化を算定し、その算定結果に基づいて遮光ポイントにより遮光された撮像面上のポイントごとの画像を形成することを特徴とする画像構築方法である。ここで、前記照明光は、互いに異なる周波数で変調された複数の光源からの光であることが好ましい。また、前記照明光は、互いに異なる周波数で変調された複数のレーザ光であることが好ましい。
また、本発明の一態様では、前記被写体からの反射光が入射され、撮像面に前記被写体
を結像する結像光学系と、前記被写体が結像された前記撮像面の一部を遮光する遮光ポイ
ントと、前記遮光ポイントを前記撮像面内において走査する走査部と、前記撮像面に入射
する前記被写体からの反射光を光電変換する前記フォトセンサからの出力信号から画像を
構成する画像構成部と、を含んでもよい。
このようにすれば、フォトセンサを用いて被写体を撮像できる。具体的には、遮光ポイ
ントが撮像面の一部を遮光し、走査部が遮光ポイントを撮像面内において走査することで
、被写体の像を走査して撮像することができる。これにより、イメージセンサを用いるこ
となく被写体を撮像できる。
また、本発明の一態様では、前記被写体からの反射光が入射され、撮像面に前記被写体
を結像する結像光学系と、前記被写体が結像された前記撮像面の一部に入射端面を有し、
前記入射端面から入射した光を導光する導光体と、前記導光体の前記入射端面を前記撮像
面内において走査する走査部と、前記導光体で導光した前記被写体からの反射光を光電変
換する前記フォトセンサからの出力信号から画像を構成する画像構成部と、を含んでもよ
い。
このようにすれば、操作部が導光体の入射端面を撮像面内において走査し、導光体が入
射端面に入射した光をフォトセンサに導光することで、被写体の像を走査して撮像するこ
とができる。これにより、フォトセンサを用いて被写体を撮像できる。
また、本発明の一態様としては、第1〜第3の色成分の照明光を生成する第1〜第3の光源と、前記第1〜第3の色成分の照明光を、その周波数が互いに異なる第1〜第3の周波数で光強度変調する変調部と、前記第1〜第3の色成分の照明光を照射して得られる被写体からの反射光を光電変換するフォトセンサと、前記フォトセンサの出力信号から、前記第1〜第3の色成分の信号を復調する復調部と、を含む撮像装置にも関係する。
本発明の他の一態様によれば、第1〜第3の光源が第1〜第3の色成分の照明光を生成し、変調部が、その第1〜第3の色成分の照明光を第1〜第3の周波数で光強度変調し、光強度変調された第1〜第3の色成分の照明光が被写体に照射される。そしてフォトセンサが、照明光を照射することで得られる被写体からの反射光をセンシングして出力信号を出力し、復調部が、その出力信号から第1〜第3の色成分の信号を復調することとなる。
このように本発明の他の一態様によれば、変調部が、第1〜第3の色成分の照明光を第1〜第3の周波数で光強度変調し、復調部が、フォトセンサの出力信号から第1〜第3の色成分の信号を復調することで、カラー撮像を行う撮像装置を実現できる。また、第1〜第3の色成分の照明光を連続的に照射できるため、高感度のカラー撮像を行うことができる。この本発明の他の一態様によれば、撮像素子としてフォトセンサを用いることで、小型で高解像度の撮像装置を実現できる。例えば、2次元の撮像素子であるイメージセンサを用いた撮像装置に比べて、イメージセンサの画素ピッチによって解像度が制限されることがない。そのため、高解像度のカラー撮像を行うことができる。
また、本発明のさらに他の一態様では、前記第1〜第3の色成分の照明光をスポット光として射出する光ファイバと、前記光ファイバを振動させて、前記スポット光によって被写体を走査するアクチュエータと、前記スポット光によって被写体を走査して得られる反射光を光電変換する前記フォトセンサからの出力信号から画像を構成する画像構成部と、を含んでもよい。
このようにすれば、光ファイバが第1〜第3の色成分の照明光をスポット光として射出
し、アクチュエータがスポット光によって被写体を走査することで、スポット光によって
被写体を走査して得られる反射光をフォトセンサで光電変換できる。このようにして、フ
ォトセンサを用いた撮像装置を実現できる。
また、本発明の他の一態様では、前記変調部が、前記第1〜第3の光源の駆動電流を変調して、前記第1〜第3の色成分の照明光を光強度変調してもよい。あるいは、本発明の一態様では、前記変調部が、前記第1〜第3の光源からの前記第1〜第3の色成分の照明光を光強度変調するための第1〜第3の光学素子を有し、前記光強度変調するための変調信号を前記第1〜第3の光学素子の各光学素子に供給してもよい。
これらの態様によれば、互いに異なる周波数である第1〜第3の周波数で第1〜第3の
色成分の照明光を光強度変調することができる。
また、本発明の他の一態様では、前記変調部が、前記第1〜第3の周波数の第1〜第3のキャリア信号に基づいて、前記第1〜第3の色成分の照明光を光強度変調し、前記復調部が、前記第1〜第3のキャリア信号に基づいて、前記フォトセンサの出力信号から前記第1〜第3の色成分の信号を検波してもよい。
このようにすれば、フォトセンサの出力信号から第1〜第3の色成分の信号を復調する
ことができる。例えば、本発明の一態様では、第1〜第3のキャリア信号に基づく同期検
波により第1〜第3の色成分の信号が検波されてもよい。
また、本発明の態様の別な例として、前記遮光ポイントまたは前記導光体の前記入射端面が、棒状体の一端の端面で構成され、前記棒状体の前記一端が走査されることで、前記遮光ポイントまたは前記導光体の前記入射端面が前記撮像面内において走査されてもよい。
このように、遮光ポイントが棒状体の一端の端面で構成されることで、撮像面の一部を
遮光する遮光ポイントを実現できる。また、導光体の入射端面が棒状体の一端の端面で構
成されることで、撮像面の一部に入射端面を有し、その入射端面から入射した光を導光す
る導光体を実現できる。そして、棒状体の一端が走査されることで、遮光ポイントまたは
導光体の入射端面の撮像面内における走査を実現できる。
また、本発明の上記例では、前記棒状体が、帯電された帯電振動棒であり、前記帯電振
動棒の一端が、印加された電圧により走査されてもよい。
あるいは、本発明の一態様では、前記棒状体の一端が、圧電アクチュエータにより走査
されてもよい。
これらの態様によれば、棒状体の一端の端面で構成された遮光ポイントの撮像面内にお
ける走査を実現できる。また、帯電振動棒または圧電アクチュエータに印加された電圧に
基づいて遮光ポイントの位置情報を求め、その位置情報に基づいて画像を構成することも
できる。
また、本発明の一態様では、前記被写体からの反射光が入射され、撮像面に前記被写体
を結像する結像光学系と、前記被写体が結像された前記撮像面に固定され、前記撮像面の
一部を遮光する遮光ポイントと、前記撮像面自体を走査して、前記遮光ポイントを走査す
る走査部と、前記撮像面に入射する前記被写体からの反射光を光電変換する前記フォトセ
ンサの出力信号から画像を構成する画像構成部と、を含んでもよい。
このようにすれば、撮像面に遮光ポイントが固定され、遮光ポイントが撮像面の一部を
遮光し、その撮像面自体が走査されることで、被写体の像を走査することができる。これ
により、フォトセンサを用いた撮像を実現し、小型の撮像装置を実現できる。
また、本発明の他の態様は、上記のいずれかに記載の撮像装置を含む内視鏡に関係する
また、本発明の他の態様は、上記のいずれかに記載の撮像装置を含む電子機器に関係す
る。
本実施形態の構成例。 変調動作及び、復調動作の説明図。 変調動作及び、復調動作の説明図。 変調動作及び、復調動作の説明図。 図5(A)、図5(B)は、撮像装置先端部の構造構成例。 図6(A)、図6(B)は、遮光ポイントの走査手法の説明図。 本実施形態のシステム構成例のブロック図。 画像構成手法の説明図。 画像構成手法の説明図。 帯域制限処理の説明図。 撮像装置先端部の第1の変形例。 撮像装置先端部の第2の変形例。 撮像装置先端部の第3の変形例。 本実施形態の変形例。
以下、本発明の好適な実施の形態について詳細に説明する。なお以下に説明する本実施
形態は特許請求の範囲に記載された本発明の内容を不当に限定するものではなく、本実施
形態で説明される構成の全てが本発明の解決手段として必須であるとは限らない。
1.カラー撮像装置
1.1.構成例
図1に本実施形態の構成例を示す。図1に示す構成例は、第1〜第3の光源310−1〜310−3、変調部320、復調部330、結像光学系10(光学素子)、遮光ポイン
ト20、フォトセンサ50(光電変換素子)、ライトガイド300を含む。そして、この
構成例は、光源310−1〜310−3からの照明光を変調して被写体Objに照射し、
被写体Objの反射光をフォトセンサ50でセンシングし、センシングされた信号を復調
してカラー撮像を行う。
なお、被写体Objの画像は、被写体Objの像が結像された撮像面PF内において遮
光ポイント20が走査され、フォトセンサ50でセンシングされた信号から画像構成され
ることで撮像される。この撮像手法については、図5(A)等で後述する。
光源310−1〜310−3は、第1〜第3の色成分の照明光を生成する。具体的には
、光源310−1〜310−3は、第1〜第3の色成分の照明光としてRGB(R:赤色
、G:緑色、B:青色)の照明光を生成する。この光源310−1〜310−3は、例え
ばLED(Light Emitting Diode)により構成できる。
変調部320は、RGBの照明光を互いに異なる周波数で光強度変調(振幅変調)する
。具体的には、変調部320は、第1〜第3の変調部322−1〜322−3を含む。そ
して、変調部322−1がR成分の照明光を第1の周波数で変調し、変調部322−2が
G成分の照明光を第2の周波数で変調し、変調部322−3がB成分の照明光を第3の周
波数で変調する。
ライトガイド300は、変調されたRGBの照明光を撮像装置先端部に導光する。そし
て、撮像装置先端部からRGBの照明光が被写体Objに照射され、被写体Objからの
反射光がフォトセンサ50によってセンシング(光電変換)される。例えば、RGBの照
明光は、クロスダイクロイックプリズム340により合成され、レンズ350(光学素子
)を介してライトガイド300に導入される。
復調部330は、フォトセンサ50の出力信号(受光量信号)を受けて、RGBの信号
(RGBの各色成分に対応する被写体の反射係数信号)を復調(検波)する。具体的には
、復調部330は、第1〜第3の復調部332−1〜332−3を含む。そして、復調部
332−1がR成分の信号を復調し、復調部332−2がG成分の信号を復調し、復調部
332−1がR成分の信号を復調する。
この復調されたRGBの信号は、例えばA/D変換回路(Analog to Digital Converte
r)によりサンプリングされ、サンプリングされたデータに基づいてRGBのカラー画像
が構成される。
ところで、内視鏡等に用いる小型の撮像装置においては、高解像度のカラー撮像を行う
ことが困難であるという課題がある。
この点、図1の構成例によれば、光源310−1〜310−3がRGBの照明光を生成
し、変調部320が、そのRGBの照明光を、互いに異なる周波数の第1〜第3の周波数
で光強度変調し、光強度変調されたRGBの色成分の照明光が被写体Objに照射され、
フォトセンサ50が、被写体Objからの反射光をセンシングして出力信号を出力し、復
調部330が、その出力信号からRGBの信号を復調する。
このように本実施形態では、変調部320が、RGBの照明光を互いに異なる周波数の
第1〜第3の周波数で光強度変調し、復調部330が、フォトセンサ50の出力信号から
RGBの信号を復調することで、被写体Objの各色成分の反射係数に対応する信号を取
得できる。これにより、カラー撮像を行う撮像装置を実現できる。
例えば、カラー撮像を実現する手法として、カラーフィルタ付きのイメージセンサ(イ
メージャ)を用いる手法がある。しかしながら、カラーフィルタ付きのイメージセンサを
用いると、小型化の際に解像度が不足してしまう。
この点、本実施形態では、フォトセンサ50が、被写体Objからの反射光をセンシン
グして出力信号を出力する。例えば本実施形態では、被写体Objの像が結像された撮像
面PF内において遮光ポイント20を走査し、撮像面PFに入射した光をフォトセンサ50でセンシングしてもよい。あるいは、図14で後述するように、RGBの照明光をスポ
ット光として射出し、スポット光によって被写体Objを走査して得られる反射光をフォ
トセンサ520でセンシングしてもよい。
このように、撮像素子としてフォトセンサを用いることで、小型の撮像装置を実現でき
る。そして、イメージセンサの画素ピッチによって解像度が制限されないため、高解像度
のカラー撮像を行うことができる。
カラー撮像を実現する他の手法として、各色成分の照明光を時分割に被写体に照射する
面順次照明方式がある。この面順次照明方式を用いれば、フォトセンサや、モノクロのイ
メージセンサによりカラー撮像を行うこともできる。しかしながら面順次照明方式を用い
ると、各色成分の照明光を時分割に照射するため、被写体や撮像装置が動いたときに色ず
れが発生してしまう。
この点、本実施形態によれば、変調部320がRGBの照明光を第1〜第3の周波数で
光強度変調し、復調部330がフォトセンサ50の出力信号からRGBの信号を復調する
ことで、各色成分の照明光を連続的に被写体Objに照射できる。これにより、被写体や
撮像装置が動いたときでも色ずれのないカラー撮像を行うことができる。また、各色成分
の照明光を連続的に被写体Objに照射するため、各色成分の照明光を時分割に照射する
面順次照明方式に比べて、各色成分の照明光の照射時間が長い。これにより、面順次照明
方式に比べて高感度のカラー撮像を行うことができる。
なお、本実施形態では、変調部320が、光源310−1〜310−3の駆動電流を変
調して、RGBの照明光を光強度変調してもよい。例えば、光源310−1〜310−3
を赤色LED・緑色LED・青色LEDで構成し、各LEDの駆動電流をそれぞれ第1〜
第3の周波数で変調して、RGBの照明光を光強度変調してもよい。
あるいは、本実施形態では、変調部320が、RGBの照明光を光強度変調するための
第1〜第3の光学素子を有し、第1〜第3の光学素子に変調信号を供給して、RGBの照
明光を光強度変調してもよい。例えば、第1〜第3の光学素子は、電気光学素子や音響光
学素子で構成されてもよい。そして、RGBの照明光としてRGBのレーザー光を用い、
第1〜第3の光学素子がそれぞれRGBのレーザー光を第1〜第3の周波数で変調しても
よい。
本実施形態によれば、これらの変調手法を用いることで、互いに異なる周波数である第
1〜第3の周波数でRGBの照明光を光強度変調することができる。
1.2.変復調動作
図2〜図4を用いて、本実施形態の変調動作及び復調動作の動作例について説明する。
図2のA1に示すように、R成分の照明光は第1の周波数frで変調され、G成分の照
明光は第2の周波数fgで変調され、B成分の照明光は第3の周波数fbで変調される。
そして、A2に示すように、これらの照明光が合成されて被写体に照射される。
上述の図1の構成例では、この照明光の被写体からの反射光は結像面に結像され、その
結像面で遮光ポイントが走査される。そのためA3に示すように、フォトセンサによって
センシングされた信号には、周波数fr、fg、fbを中心として被写体の反射係数情報
(遮光ポイントの走査に伴う反射係数の時系列情報)を含む。そして、A4に示すように
、RGBの各色成分に対応する信号が復調され、これらの信号に基づいてRGBの各色成
分の画像が構成される。
より具体的には、図3のB1に示すように、角周波数ωのキャリア信号(搬送波)cosωt+1に比例する強度の照明光が被写体に照射される。ここで、R成分の照明光は、
ω=2πfrの第1のキャリア信号に比例し、G成分の照明光は、ω=2πfgの第2の
キャリア信号に比例し、B成分の照明光は、ω=2πfbの第3のキャリア信号に比例す
る。
そして、B2に示すように、遮光ポイント(または、スポット光)の走査に従って被写
体の反射係数R(t)が時系列に変化するため、B3に示すように、被写体からの反射光
強度は、被写体の反射係数とキャリア信号との積L=R(t)(cosωt+1)に比例
する。
図4のC1に示すように、この反射光がフォトセンサによりセンシングされることでL=R(t)×(cosωt+1)に比例する出力信号が得られる。そして、この出力信号
からC2に示すキャリア信号cosωtに基づいて反射係数信号が検波される。反射係数
信号の検波は、例えば同期検波により行うことができる。具体的には、下式(1)に示す
ように、フォトセンサの出力信号とキャリア信号とがミキシング(乗算処理)される。
R(t)(cosωt+1)・cosωt
=R(t)(cos2ωt+cosωt)
=R(t){1/2(cos2ωt+cos0)+cosωt}
=1/2R(t)cos2ωt+R(t)cosωt+1/2R(t)
・・・ (1)
C3に示すように、ミキシングされた信号には、被写体の反射係数1/2R(t)のス
ペクトルが含まれ、C4に示すように、このスペクトルをローパスフィルタにより取り出
すことで、被写体の反射係数1/2R(t)の情報を含む反射係数信号が復調される。
本実施形態によれば、上記の変調動作・復調動作を行うことで、RGBの照明光の光強
度変調及び、フォトセンサの出力信号からのRGBの信号の復調を実現できる。
2.遮光ポイントによる撮像手法
図5(A)に撮像装置先端部の構造の構成例を示す。図5(A)の構成例は、結像光学
系10(光学素子)、遮光ポイント20、フォトセンサ50(光電変換素子)、ライトガイド300を含む。
結像光学系10は、被写体Objの像を結像面IF(結像位置、焦点面)に結像させる
。例えば、結像光学系10は、1又は複数のレンズにより構成されるレンズユニットや、
ピンホール等によって構成できる。
遮光ポイント20は、撮像面PFに設けられ、撮像面PFの一部を遮光する。この撮像
面PFは、結像面IF上の領域であり、撮像面PFには、本実施形態の撮像対象である撮
像被写体面Obj’の像が結像されている。そして図5(A)のD1に示すように、遮光
ポイント20は、撮像面PF内において2次元的に順次走査され、撮像被写体面Obj’
の像の一部を順次遮光する。遮光ポイント20は、走査部(例えば図7に示す走査部60)により走査される。
フォトセンサ50は、遮光ポイント20により遮光された一部を除く撮像面PFを通過
した光をセンシング(光電変換)する。センシングされた信号は、画像構成部(例えば図
7の画像構成部140)によって画像として構成される。フォトセンサ50は、例えばフ
ォトダイオードやフォトトランジスタ等の光電変換素子により構成できる。
図5(B)に示すように、ライトガイド300としてライトガイド300−1〜300−4を、遮光ポイント20を走査するための電極PP1、NP1、PP2、NP2の外側
に設けることができる。これらの電極については後述する。
なお本実施形態は、図5(A)に示すように、導光路40を含むこともできる。この導
光路40は、撮像面PFを通過する光を導光路40の内面で反射して、フォトセンサ50
に導光する。このようにすれば、撮像面PFに結像された撮像被写体面Obj’の像を効
率よくセンシングできる。これにより、フォトセンサ50の信号強度が増し、S/Nを向
上できる。
ここで、極細の内視鏡などの小型撮像装置を実現するためには、小型の撮像素子を用い
る必要があるという課題がある。例えば、小型の撮像素子として2次元の撮像を行うイメ
ージセンサを用いると、画素の微細化に限度があるため、小型化により解像度が劣化する
という課題がある。
この点、本実施形態によれば、結像光学系10が被写体Objを撮像面PFに結像し、
遮光ポイント20が撮像面PFの一部を遮光し、走査部が遮光ポイント20を撮像面PF
内において走査し、フォトセンサ50が遮光ポイント20により遮光された撮像面PFに
入射する光をセンシングし、画像構成部がフォトセンサ50の出力信号から画像を構成す
る。
このように本実施形態によれば、遮光ポイント20が撮像面PFの一部を遮光し、走査
部が遮光ポイント20を撮像面PF内において走査することで、被写体の像を走査して撮
像することができる。これにより、2次元の撮像を行うイメージセンサを用いることなく
被写体Objを撮像できるため、小型の撮像素子を用いて高解像度の撮像を実現できる。
このようにして、小型で高解像度の撮像装置や、極細の内視鏡を実現できる。
また本実施形態によれば、フォトセンサ50が、遮光された一部以外の撮像面PFに入
射する光をセンシングすることで、フォトセンサ50の暗電流に比べて被写体からの反射
光量を十分に確保できる。これにより、高S/Nで高感度な撮像を実現できる。
3.遮光ポイントの走査
図6(A)、図6(B)を用いて、遮光ポイント20の走査手法について説明する。
遮光ポイント20は、上述の図5(A)に示す振動棒30(棒状体)の一端の端面によ
り構成できる。そして、その振動棒30の他端を固定し、遮光ポイント20側の一端を振
動させることで、遮光ポイント20を撮像面PF内において走査できる。
例えば本実施形態では、図6(A)に示すように、帯電された帯電振動棒を振動棒30
として用いてもよい。帯電振動棒は、例えば弾力性のある金属で振動棒30を構成し、そ
の振動棒30に電圧を印加して分極させることで実現できる。そして、帯電振動棒の周囲
に電極PP1、NP1、PP2、NP2を設け、これらの電極に電圧を印加する電源PS1、PS2の出力電圧を変化させて、帯電振動棒の一端を振動させてもよい。
あるいは本実施形態では、図6(B)に示すように、遮光ポイント20が圧電アクチュ
エータPZ1〜PZ4(圧電素子、ピエゾ素子)により走査されてもよい。具体的には、
振動棒30が弾力性のある金属や樹脂等で構成され、振動棒30の固定された側の他端に
圧電アクチュエータが設けられ、その圧電アクチュエータPZ1〜PZ4によって振動棒
30の一端が振動させられてもよい。
このようにすれば、振動棒30の一端の端面により遮光ポイント20を構成することが
できる。そして、帯電振動棒あるいは圧電アクチュエータを用いることで、振動棒30の
遮光ポイント20側の一端を振動させ、撮像面PF内において遮光ポイント20を走査で
きる。
また本実施形態によれば、帯電振動棒あるいは圧電アクチュエータを用いることで、電
極に印加された電圧または圧電アクチュエータに印加された電圧から、遮光ポイント20
の位置情報(座標)を得ることができる。これにより、遮光ポイント20の位置情報とフ
ォトセンサ50の出力信号に基づいて画像を構成できる。
4.システム構成例
図7に、本実施形態のシステム構成例のブロック図を示す。図7の構成例は、光学的帯
域制限フィルタ100、フォトセンサ50、フォトセンサ駆動部120、信号処理部130、画像構成部140、帯域制限処理部150、走査部60、システム制御部180を含
む。
光学的帯域制限フィルタ100(光学的ローパスフィルタ)は、撮像面PFに設けられ
、サンプリングによるエイリアシングノイズ(折り返しノイズ)を防ぐために、被写体の
結像の空間周波数を帯域制限する。例えば、撮像面PFにおけるサンプリングピッチをs
とすれば、光学的帯域制限フィルタ100は、fo≦1/2sを満たすカットオフ周波数
foで帯域制限する。
フォトセンサ駆動部120は、フォトセンサ50を駆動する。例えば、フォトセンサ50としてフォトダイオード用いた場合には、フォトセンサ駆動部120は、フォトダイオ
ードに逆バイアスを印加してフォトダイオードを駆動する。
信号処理部130は、フォトセンサ50の出力信号を信号処理する。具体的には、信号
処理部130は、フォトセンサ50の出力信号を伝送し、伝送された出力信号をローパス
フィルタ処理する。そして信号処理部130は、ローパスフィルタ処理された信号をA/
D変換処理(Analog to Digital conversion)してサンプリングし、デジタルデータを出
力する。
画像構成部140は、信号処理部130からのデジタルデータと走査部60からの位置
情報i,jとを受けて、画像を構成し、画像データを出力する。例えば、画像構成部140は、図4及び図5で後述する画像構成手法により画像を構成する。
帯域制限処理部150(帯域制限フィルタ、ローパスフィルタ)は、画像構成部140
からの画像データを受けて、画像データの空間周波数をカットオフ周波数fcで帯域制限
処理(ローパスフィルタ処理)する。帯域制限処理部150は、例えばデジタルローパス
フィルタにより構成され、デジタルローパスフィルタには、システム制御部180からカ
ットオフ周波数fcが設定される。
走査部60は、遮光ポイント走査駆動部160、遮光ポイント制御部170を含み、遮
光ポイント20を撮像面PFにおいて走査する。
具体的には、遮光ポイント走査駆動部160は、遮光ポイント20の走査を駆動する。
例えば図6(A)で説明したように、遮光ポイント走査駆動部160は、電極と電源を含
んでもよく、電極と電源により帯電振動棒を振動させることで遮光ポイント20の走査を
駆動してもよい。あるいは、図6(B)で説明したように、圧電アクチュエータを含んで
もよく、圧電アクチュエータにより振動棒30を振動させることで遮光ポイント20の走
査を駆動してもよい。
遮光ポイント制御部170は、遮光ポイント走査駆動部160を制御する。例えば、遮
光ポイント制御部170は、図6(A)で説明した電極に印加する電圧を制御する。ある
いは、図6(B)で説明した圧電アクチュエータに印加する電圧を制御する。そして、遮
光ポイント制御部170は、印加した電圧値に基づいて遮光ポイント20の位置情報i,
jを求め、位置情報i,jを画像構成部140に出力する。
システム制御部180は、本実施形態の制御を行う。具体的には、システム制御部180は、遮光ポイント制御部170、フォトセンサ駆動部120を制御する。また、システ
ム制御部180は、帯域制限処理部150のカットオフ周波数fcを設定する。
なお本発明では、出力処理部200、表示装置210を含んでもよい。そして、これら
を含むことで、内視鏡が構成されてもよく、デジタルカメラ・デジタルビデオカメラ等の
電子機器が構成されてもよい。
出力処理部200は、帯域制限処理部150からの画像データを受けて、その画像デー
タを出力処理して表示装置210に出力する。出力処理部200は、例えば画像データの
ガンマ補正処理や色彩強調処理を行って、画像データを出力処理する。
表示装置210(電気光学装置)は、出力処理部200からの画像データを受けて、画
像表示を行う。表示装置210は、例えば、液晶パネル(LCD:Liquid Crystal Display)やELパネル(EL:Electro-Luminescence)等の電気光学パネル、及び電気光学パ
ネルを駆動するドライバを含む。
なお、本実施形態の構成は、図7に示す構成に限定されず、他の構成要素を追加したり
、構成要素を省略したりする等の種々の変形実施が可能である。
5.画像構成手法
図8、図9を用いて、画像構成部140が行う画像構成の手法例について説明する。
図8に示すように、X方向に直交する方向をY方向とし、撮像面PFがXY平面上にあ
るものとする。そうすると、遮光ポイント20は、例えばX方向に走査され、そのX方向
の走査が順次Y方向に移動して繰り返されることで、撮像面PFにおいて走査される。
このとき、遮光ポイント20が走査されるのに従って、複数のサンプリングポイントに
おいて撮像面PFの入射光量が順次サンプリングされる。ここで、この遮光ポイント20
の位置情報(または、サンプリングポイントの位置情報)をX方向についてiで表し、Y
方向についてjで表すものとする(i,jは自然数)。そして、位置情報i,jに対応す
る撮像面PFの入射光量として、フォトセンサ受光量Lijがサンプリングされるものと
する。
そうすると、フォトセンサ受光量Lijが、遮光ポイント20によって遮光された部分
以外の撮像面PFに入射する光量であることから、位置情報i,jに対応する画素値Iijは、下式(2)で表される。
Iij=P−Lij ・・・ (2)
Pは、遮光ポイント20によって遮光された部分を含む撮像面PF全体に入射する光量
である。この全入射光量Pは、実際には測定されない光量であるため、実際にサンプリン
グされる光量であるLijを用いて画素値Iijを求める必要がある。
そこで本実施形態では、下式(3)に示すように、隣接する画素値の差分ΔIijをフ
ォトセンサ受光量Lijを用いて求める。
ΔIij=I(i+1)j−Iij
=(P−L(i+1)j)−(P−Lij)
=Lij−L(i+1)j ・・・ (3)
そして、図5に示すように、この差分ΔIijを積算して画素値Iijを求める。具体
的には、図5に示すようにY方向の位置情報がjである画素を例にすれば、下式(4)に
示すように、I0jを基点に差分ΔIijを積算して画素値Iijを求める。
I1j=I0j+ΔI0j,
I2j=I1j+ΔI1j,
・・・,
I(i+1)j=Iij+ΔIij ・・・ (4)
なお画素値I0jは、例えば、上式(3)、(4)と同様に求めることができる。例え
ば、位置情報j-1の最後のフォトセンサ受光量と位置情報jの最初のフォトセンサ受光量
の差分を求め、その差分を位置情報j-1の最後の画素値に加算することで求めることがで
きる。このようにすれば、画素値I00を基点に画素値の差分を積算して画素値Iijを
求めることができる。
ここで、基点となる画素値I00は、例えば被写体の明るさに応じて適応的に設定され
る。例えば、フォトセンサ受光量L00は被写体の明るさを反映した受光量と考えられる
ことから、画素値I00としてL00を全画素数で除算した値が用いられてもよい。また
は、画素値I00は、求められた画素値Iijの最小値がゼロ以上になるように任意に設
定されてもよい。
このように、本実施形態によれば、上式(3)、(4)に示すように、フォトセンサ受
光量Lijと、その次のサンプリングポイントに対応するフォトセンサ受光量L(i+1)j
との差分から求められた画素値の差分ΔIijが積算されて、画素値Iijが求められる
このようにすれば、遮光ポイント20の位置情報i,jと、フォトセンサ50の出力信
号であるフォトセンサ受光量Lijとに基づいて、画像を構成することができる。また、
上式(3)、(4)に示すように、全入射光量Pを用いることなく、実測されるフォトセ
ンサ受光量Lijを用いて画素値Iijを求めることができる。
6.帯域制限処理
図10に、帯域制限処理部150が行う帯域制限処理の説明図を示す。
図10のE1に示すように、例えば一辺の大きさaの遮光ポイント20が撮像面におい
て走査され、サンプリングピッチs毎にフォトセンサ受光量がサンプリングされて画素値
が求められるものとする。
E2に示すように、求められた画素値は、被写体の明るさの時間分布(または、空間分
布)がピッチsでサンプリングされた画素値に対応する。そしてE3に示すように、この
画素値により構成された画像が帯域制限処理部150により帯域制限処理(ローパスフィ
ルタ処理)される。
これを周波数分布(または、空間周波数分布)で見れば、E4に示すように、一辺の大
きさaの遮光ポイント20は、周波数1/aでゼロクロスするシンク関数(標本化関数)
で表される。そのため、撮像された画像の周波数分布は、E4に示すシンク関数とE5に
示す被写体の明るさの周波数分布との積により表される。そしてE6に示すように、この
撮像された画像の周波数分布は、カットオフ周波数fcで帯域制限処理される。
画素値のサンプリングピッチがsであることから、画像の周波数分布の再現帯域は1/
2sとなる。そのため、カットオフ周波数fcは、fc≦1/2sを満たす範囲で設定さ
れる。
例えば、カットオフ周波数fcは、画像の明るさを優先して低周波数側(例えばfc<
1/a)に設定されてもよい。このようにすれば、例えば被写体の明るさが不足するとき
に、高周波数側のノイズを抑制して高S/Nの撮像を行うことができる。
あるいは、カットオフ周波数fcは、高精細化を優先して高周波数側(例えばfc=1/2s)に設定されてもよい。このようにすれば、例えば被写体が十分明るいときに、画
像の周波数成分を高周波数側まで有効利用して、高精細な撮像を行うことができる。
7.撮像装置先端部の変形構成例
図11に、撮像装置先端部の第1の変形例を示す。第1の変形例は、結像光学系10、
遮光ポイント20、導光路40、フォトセンサ50、圧電アクチュエータPZB1、PZB2を含み、撮像面PFに固定された遮光ポイント20により、撮像面PFの一部が遮光
される変形例である。
第1の変形例では、撮像面PFを含む撮像装置先端部が、圧電アクチュエータPZB1
、PZB2(走査部)によって走査されて、遮光ポイント20が走査される。フォトセン
サ50にセンシングされた撮像面PFの入射光量は、図8等で説明した画像構成手法と同
様の手法により、画像構成される。
上記第1の変形例によれば、遮光ポイント20が固定された撮像面PF自体を走査する
ことで、遮光ポイント20を走査して被写体Objを撮像できる。また、例えば撮像面PFに設けられたガラス・樹脂等の表面に、微少な遮光ポイント20を容易に形成すること
もできる。
なお、図11の撮像装置により微細な構造物や血管内を撮像すると、撮像装置先端部の
振動によって構造物内壁や血管内壁を傷つける可能性も考えられる。このような場合には
、振動部外側をチューブで覆ったり、内壁を支持するバルーンを設けたりして、振動部と
内壁との間隔を確保してもよい。
図12に、撮像装置先端部の第2の変形例を示す。第2の変形例は、結像光学系10、
遮光ポイント20(振動棒30の端面)、導光路40、フォトセンサ50、圧電アクチュ
エータPZCを含む。
図12のF1に示すように、第2の変形例では、遮光ポイント20が撮像面PFにおい
てらせん状に走査される。このように本発明では、遮光ポイント20がらせん状に走査さ
れてもよく、図8等で説明したように1ラインずつ走査されてもよい。
図13に、撮像装置先端部の第3の変形例を示す。第3の変形例は、結像光学系10、
導光チューブ400(導光体)、フォトセンサ50、圧電アクチュエータPZDを含み、
導光チューブ400により撮像面PFの入射光を導光する変形例である。
第3の変形例は、撮像面PFに入射する光の一部が導光チューブ400の一端である入
射端面に入射して、その一端に入射した光が導光チューブ400によりフォトセンサ50
に導光されるように構成される。そして、導光チューブ400が圧電アクチュエータPZDによって撮像面PFにおいて走査され、フォトセンサ50の出力信号から画像が構成さ
れる。
このように、導光チューブ400を用いることで撮像素子を小型化し、撮像装置の小型
化を図ることもできる。
8.カラー撮像装置の変形例
図14に、本実施形態の撮像装置の変形例を示す。図14に示す変形例は、光ファイバ
500、光学系510(光学素子)、フォトセンサ520、アクチュエータ530、第1〜第3の光源310−1〜310−3、変調部320、復調部330を含む。なお、上述
の図1等で説明した構成要素には、同一の符号を付して適宜説明を省略する。
この変形例は、光ファイバ500の先端から出射されるスポット光SPにより被写体Objを走査して、被写体Objを撮像する撮像装置である。
具体的には、光ファイバ500には、合成されたRGBの照明光が入射され、光ファイ
バ500の先端部から照明光が出射される。光ファイバ500から出射された照明光は、
光学系510(例えばレンズ)によりスポット光SPとして被写体Objに照射される。
アクチュエータ530(例えば、圧電アクチュエータ)は、光ファイバ500を振動さ
せる。例えば、アクチュエータ530は、光ファイバ500の先端部をらせん状に振動さ
せてもよく、あるいは、光ファイバ500の先端部を1ラインずつ走査するように振動さ
せてもよい。そして、アクチュエータ530が光ファイバ500を振動させることで、ス
ポット光SPにより被写体Objが走査される。
フォトセンサ520は、被写体Objからのスポット光SPの反射光をセンシングし、
センシングした信号を出力信号として復調部330に出力する。そして、上述の図1等で
説明したように、復調部330がRGBの各色成分の信号を復調し、画像構成部(例えば
、上述の図7に示す画像構成部140)が復調された信号に基づいてカラー画像を構成す
る。
この撮像装置の変形例によれば、被写体Objの各色成分の反射係数に対応する信号を
取得して、カラー撮像を実現できる。そして、撮像素子としてフォトセンサを用いること
で、小型で高解像度の撮像装置を実現できる。
なお、上記のように本実施形態について詳細に説明したが、本発明の新規事項および効
果から実体的に逸脱しない多くの変形が可能であることは当業者には容易に理解できるで
あろう。従って、このような変形例はすべて本発明の範囲に含まれるものとする。例えば
、明細書又は図面において、少なくとも一度、より広義又は同義な異なる用語(変調、復
調、第1〜第3の色成分、フォトセンサ、センシング、棒状体等)と共に記載された用語
(光強度変調、検波、RGB、光電変換素子、光電変換、振動棒等)は、明細書又は図面
のいかなる箇所においても、その異なる用語に置き換えることができる。また変調部、復
調部、走査部、画像構成部、撮像装置、内視鏡等の構成、動作も本実施形態で説明したも
のに限定に限定されず、種々の変形実施が可能である。
10 結像光学系、20 遮光ポイント、30 棒状体、40 導光路、50 フォトセンサ、60 走査部、100 光学的帯域制限フィルタ、120 フォトセンサ駆動部、130 信号処理部、140 画像構成部、150 帯域制限処理部、160 遮光ポイント走査駆動部、170 遮光ポイント制御部、180 システム制御部、200 出力処理部、210 表示装置、300 ライトガイド、310−1〜310−3 第1〜第3の光源、320 変調部、330 復調部、400 導光チューブ、500 光ファイバ、510 光学系、520 フォトセンサ、530 アクチュエータ、Obj 被写体、IF 結像面、PF 撮像面、PP1 電極、PZA1 圧電アクチュエータ、fo,fc カットオフ周波数、i,j 位置情報、Lij フォトセンサ受光量、Iij 画素値、s サンプリングピッチ、SP スポット光

Claims (3)

  1. 照明光を被写体に照明して得られる光信号により結像された撮像面を遮光ポイントによ
    り一部遮光するとともに、前記撮像面または遮光ポイントを走査することで撮像面から得
    られる受光量の変化を画像構成部が算定し、且つ該画像構成部が前記算定結果に基づいて遮光ポイントにより遮光された撮像面上のポイントごとの画像を形成することを特徴とする撮像装置の作動方法。
  2. 前記照明光は、互いに異なる周波数で変調された複数の光源からの光である請求項1に
    記載の撮像装置の作動方法。
  3. 前記照明光は、互いに異なる周波数で変調された複数のレーザ光である請求項1に記載
    撮像装置の作動方法。
JP2012167375A 2012-07-27 2012-07-27 撮像装置の作動方法 Active JP5635565B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012167375A JP5635565B2 (ja) 2012-07-27 2012-07-27 撮像装置の作動方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012167375A JP5635565B2 (ja) 2012-07-27 2012-07-27 撮像装置の作動方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2009021142A Division JP2010172638A (ja) 2009-02-02 2009-02-02 撮像装置、内視鏡及び電子機器

Publications (2)

Publication Number Publication Date
JP2013013736A JP2013013736A (ja) 2013-01-24
JP5635565B2 true JP5635565B2 (ja) 2014-12-03

Family

ID=47686978

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012167375A Active JP5635565B2 (ja) 2012-07-27 2012-07-27 撮像装置の作動方法

Country Status (1)

Country Link
JP (1) JP5635565B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101670243B1 (ko) * 2015-01-16 2016-10-28 주식회사 옵티메드 광전송 방식 카메라 내시경

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080039693A1 (en) * 2006-08-14 2008-02-14 University Of Washington Endoscope tip unit and endoscope with scanning optical fiber

Also Published As

Publication number Publication date
JP2013013736A (ja) 2013-01-24

Similar Documents

Publication Publication Date Title
US9195115B2 (en) Image projection device, image protection method, distance measuring device and distance measuring method
CN108333746B (zh) 光扫描装置、影像装置和距离测量装置
US20140332677A1 (en) Optical scanning observation apparatus
JP2013534083A (ja) 2センサー撮像システム
CN102472956A (zh) 通过改变扫描幅度来修正扫描的投影仪失真
US20170251911A1 (en) Imaging system
EP3571976B1 (en) Endoscope apparatus
JP6284433B2 (ja) 光走査型観察装置および光走査型観察方法
US20220038613A1 (en) Imaging device
CN103889302A (zh) 内窥镜系统
JP2010113312A (ja) 内視鏡装置および内視鏡プロセッサ
JP2021141446A (ja) 撮像装置及びその制御方法
JP2015206981A (ja) 光走査型画像形成装置及び光走査型画像形成方法
JP2009025189A (ja) 計測器
JP2016020896A (ja) 位置ずれ量測定方法、補正テーブル生成装置、撮像装置、および投影装置
US20090060381A1 (en) Dynamic range and amplitude control for imaging
CN116097298A (zh) 用于使用结构光进行深度图构建的红外和非红外通道混合器
JP5635565B2 (ja) 撮像装置の作動方法
JP2020193957A (ja) 測距異常を補正する距離画像生成装置
JP2010172638A (ja) 撮像装置、内視鏡及び電子機器
WO2007055082A1 (ja) 共焦点顕微鏡装置
WO2016079768A1 (ja) 光走査型内視鏡装置
WO2016208495A1 (ja) 走査型内視鏡システム
JP5239780B2 (ja) 画像表示装置
US11734807B2 (en) Method and system for correcting phase of image reconstruction signal

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130910

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140305

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140502

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140930

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141016

R151 Written notification of patent or utility model registration

Ref document number: 5635565

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250