JP2020192328A - 内視鏡システム、内視鏡用固体撮像素子、およびその駆動方法 - Google Patents
内視鏡システム、内視鏡用固体撮像素子、およびその駆動方法 Download PDFInfo
- Publication number
- JP2020192328A JP2020192328A JP2020092726A JP2020092726A JP2020192328A JP 2020192328 A JP2020192328 A JP 2020192328A JP 2020092726 A JP2020092726 A JP 2020092726A JP 2020092726 A JP2020092726 A JP 2020092726A JP 2020192328 A JP2020192328 A JP 2020192328A
- Authority
- JP
- Japan
- Prior art keywords
- solid
- image sensor
- state image
- command
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003384 imaging method Methods 0.000 title abstract description 15
- 238000000034 method Methods 0.000 title description 7
- 239000007787 solid Substances 0.000 title 1
- 230000003287 optical effect Effects 0.000 claims description 4
- 238000003780 insertion Methods 0.000 abstract description 11
- 230000037431 insertion Effects 0.000 abstract description 11
- 230000002093 peripheral effect Effects 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 9
- 238000012545 processing Methods 0.000 description 8
- 238000011282 treatment Methods 0.000 description 7
- 238000001356 surgical procedure Methods 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 5
- 230000000875 corresponding effect Effects 0.000 description 4
- 238000003745 diagnosis Methods 0.000 description 4
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 210000004351 coronary vessel Anatomy 0.000 description 2
- 239000003814 drug Substances 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000003449 preventive effect Effects 0.000 description 2
- 229910052710 silicon Inorganic materials 0.000 description 2
- 239000010703 silicon Substances 0.000 description 2
- 101100002951 Caenorhabditis elegans asp-17 gene Proteins 0.000 description 1
- 238000012327 Endoscopic diagnosis Methods 0.000 description 1
- 230000032683 aging Effects 0.000 description 1
- 229910052788 barium Inorganic materials 0.000 description 1
- DSAJWYNOEDNPEQ-UHFFFAOYSA-N barium atom Chemical compound [Ba] DSAJWYNOEDNPEQ-UHFFFAOYSA-N 0.000 description 1
- 238000001574 biopsy Methods 0.000 description 1
- 210000004204 blood vessel Anatomy 0.000 description 1
- 238000007675 cardiac surgery Methods 0.000 description 1
- 230000001276 controlling effect Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 238000013399 early diagnosis Methods 0.000 description 1
- 238000001839 endoscopy Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 210000000936 intestine Anatomy 0.000 description 1
- 210000004072 lung Anatomy 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000009416 shuttering Methods 0.000 description 1
- 210000002784 stomach Anatomy 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
- 230000002792 vascular Effects 0.000 description 1
Landscapes
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Endoscopes (AREA)
Abstract
Description
超音波など、ひとの通常の視覚に依らない方法で体内の状態をモニタするのに比べ、視覚で直接観察できるメリットは大きい。バリウムを飲んでの超音波健診では曖昧な診断結果しか得られず、再検査で胃カメラによる診断を受ける現状から考えて、最初から胃カメラを使う方がよいと感じるが、まだカメラが大きく、うまく飲み込めないひとも多いというのが日本の健康診断=予防医療の状況である。
たとえば、心臓外科が担当する冠動脈手術に内視鏡がすでに使われているが、小型化ができれば、内視鏡を使った冠動脈手術がさらに安全になり、さらに、もっと細い血管の観察やこれを経由した手術、肺の内側からの観察なども可能になると期待できる。
また、挿入ケーブルの小型化は、細径化を意味するので、固体撮像素子に接続するケーブルの本数を削減する必要がある。
1端子は必ず出力に使うことを考えると、入力も1端子しか確保し得ないことが判る。
端子数削減は、ケーブルの細径化に必要な接続配線本数削減の必要性に合致してはいるものの、固体撮像素子の小型化とは、以下のような矛盾が生じることが分かった。
但し、観察による診断に加えて観察部位の生体検査や処置が可能な内視鏡においても、本発明によるカメラ部の細径化により、その適用範囲が広がるという有効性は明らかであり、発明の効果が、撮像機能のみを備えた内視鏡に限定されるわけではないことを注記しておく。
内視鏡診断医は、内視鏡の挿入ケーブル6の長さの許す範囲であるが、カメラヘッド4を要観察部位にできるだけ近接させて、ライトガイド経由で適切な色温度の照明を当て、ディスプレー10を見ながら、できるだけ鮮明に撮像した画像を取得して、診断に活用することとなる。
12はカメラ制御パラメータレジスタ、13は垂直制御論理部、14はコマンド生成部、15はコマンド送信部、16は画像信号入力、17はASP(アナログ信号処理部)、18は画像信号処理部、19は画像出力部、20は画素アレー、21は読出走査回路、22はシャッタ走査回路、23は列CDS回路、24は水平走査回路、25はアナログ回路の基準電圧/電流生成回路、26は出力バッファ、27はコマンド受信部、28はコマンドデコード部、29は水平制御論理部である。
ロジックリセットコマンド(Logic Reset)は論理回路の構成にもよるが、Logic回路のState管理を行うコア回路やクロック分周回路のDFFの初期化に必要である。
垂直読出開始コマンド(Read Start)、水平制御開始コマンド(H−Start)、垂直シャッタ開始コマンド(Shutter Start)の、計3つのコマンドのいずれかを1水平走査期間毎にCCU9から入力することで、固体撮像素子を動作させるのが、本発案の特徴であり、極めて重要である。
コマンドの種類は、論理回路規模抑制観点から必要最低限の4種類としたが、さらに増やしてもよい。また、コマンドコードのビット幅は、冗長性確保のため、コマンド数に比べて長めがよい。
固体撮像素子3には、回路占有面積の観点からPLLなどクロック生成回路を通常は搭載できないので、外部クロック入力とコマンド(波形例はH−Startコマンド)を同じ端子から入力できる回路構成を一例として示した。
コマンド受信部27は、電圧比較器31と32を並列に並べ、両方の+端子を短絡して、コマンド送信部15からの信号をそのまま接続している。電圧比較器31の−端子にはVrefH(2.5V、電源電圧3.3Vの3/4程度)、電圧比較器32の−端子にはVrefL(0.8V、電源電圧の1/4程度)を入力し、低い方のしきい値を持つ比較器32の出力をクロックとし、高い方の比較器31の出力をコマンドとする構成を採る。クロックの振幅を1.65V程度とし、コマンドの信号振幅を3.3Vとすることで、クロック入力を続けながら、コマンドのH/Lレベルを区別することが可能となる。
実際に、コマンドデコード部28で、コマンドを正しくデコードするためには、クロック側に入力波形を考慮した遅延が必要である。そのためにコマンド受信部27にクロック遅延回路33を備えており、この出力を使うことで、コマンド10011100=H−Startを認識できる。
カメラ制御パラメータレジスタ12には、固体撮像素子3の制御パラメータを保存し、これに基づいて、カメラ制御を行う。
具体的には以下のパラメータである。
1水平走査時間THと、これを1フレームに繰り返す水平走査回数NV、露光時間TEXP、1画素を出力する画素サイクル時間TPIX、1水平走査時間の画素サイクル数NPIX、露光時間TEXP、ウェイト時間TWAIT、露光時間の水平走査回数NEXP、ウェイト時間の水平走査回数NWAITなどである。
これらのパラメータには、以下の関係があるので、保存するパラメータを一部に絞って、他を保存したパラメータから計算するように構成しても問題はない。
1フレーム時間TFRAME=TH×NV
露光時間TEXP=TH×NEXP
ウェイト時間TWAIT=TH×NWAIT=TH×(NV−NEXP)=TFRAME−TEXP
まず、垂直読出走査を開始するため、CCU9の垂直制御論理部13は、コマンド生成部14で垂直読出開始コマンド(Read Start)を生成する。同時に、垂直制御論理部13の中で、画素サイクル時間TPIXを基準として、画素サイクルを計数し、1水平走査時間THになるまで、時間計測回路(図示せず)で時間の計測を開始する。また同時に、垂直制御論理部13において、水平走査回数Nのカウントを開始する。
(逆に言うと、固体撮像素子内の水平制御論理部29は1水平走査時間の管理はせず、水平走査回数のカウントもしない。)
ここで、「水平制御」とは、画素アレー20において選択されたある1行分の「シャッタ制御」、および、画素アレー20の別途、選択されたある1行分の「読出制御」のことである。さらに、「シャッタ制御」とは、選択された1行分の画素のフォトダイオードに蓄積された光電子を排出、初期化(画素のリセットを)して、実質的に画素の露光を開始させることであり、「読出制御」とは、選択された1行分の画素のフォトダイオードの露光を終了させ、蓄積された光電子を読み出すことである。実際に、「シャッタ制御」は画素アレー20だけを制御すればよいが、「読出制御」では、画素アレー20を制御して画素信号を読み出すとともに、この信号を列CDS回路23で受信するなど、画素信号出力経路の回路制御も行う必要がある。
TEXP=TH×NEXP
と説明したが、これはつまり、NEXP行前にシャッタ走査回路22のS/Rに1がセットされたことを意味する。
但し、NEXPが画素アレーの行数を超えていると、すでにS/Rの中に1はなく、全画素で画素リセットは完了、露光動作中で、シャッタ走査回路22の選択行はないことになる。
水平制御の話に戻すと、次に、シャッタ制御のための画素制御信号を生成するので、シャッタ走査回路22が選択する行があれば、その行の画素リセットを行う。(なければ、画素リセット動作は行われない。)
次に、読出制御のための画素制御信号、および列CDS回路制御信号を生成し、読出走査回路が選択する1行目の画素をすべて同時に読出して、列CDS回路内にある一次元アレー状のアナログメモリ(容量)に電荷として保存する。次に、水平走査回路24で列を順に選択し、アナログメモリに保持された信号を出力バッファ26経由で、順次、CCUの画像信号入力16に向けて出力する。
この画像信号は、アナログ信号であり、また、CDS(Correlated Double Sampling)動作により、信号レベルからリセットレベルを減算する処理が必要であるため、ASP17でCDSを行ってから、信号の増幅やA/D変換を行う。さらに、画像の切り出しや色バランス処理など、各種デジタル信号処理をISP(画像信号処理部)18で行った画像データを、画像出力部19経由でディスプレーに表示したり、ディスクに保存したりすることになる。
「時間計測回路」は、1H経過を検知後、直ちに再度計測を開始するように構成しており、以後、1水平走査時間の経過毎に、水平制御開始コマンドを生成することになる。
したがって、この構成により、読出が、1H毎に1行目から2行目、3行目と順次進むことが分かる。
このコマンドは、コマンド送信部15からシリアル出力されて、固体撮像素子3のコマンド受信部27に入力され、直ちにコマンドデコード部28でデコードされて、シャッタ走査回路22の入力端子に1をセットするとともに、水平制御論理部29に「水平制御」を開始させる。
結果として、シャッタ走査回路22のS/R入力の1がシフトクロックで取り込まれて最初の行が選択され、その行のシャッタ動作に対応する各信号が生成される。またこのとき、読出とシャッタの走査回路は同じように動作するので、読出走査回路21のS/Rのどこかに”1”がすでに取り込まれている時は、これがシフトクロックでその次の行に移動して、その行が選択されることになる。
これにより、端子数の最少化と論理規模の大幅な削減を実現、内視鏡カメラ挿入部の細径化を実現できる。
本発明は、固体撮像素子として、CMOSイメージセンサ(CIS)が適しているが、いわゆるFSI(表面照射型)CISでも、BSI(裏面照射型)CISでも有効である。また、3D−Stack(3次元積層型)CISにおいては、単純に積層していくと、カメラヘッド部が巨大化して内視鏡先端の挿入や屈曲が困難になるが、各シリコン層を薄く削りその形状を小さく保てば、同様の効果を得られるので有効である。Stack型では追加のシリコン領域があるが、消費電力観点からもむやみに回路規模は増加できない。むしろ、変わらない端子制約の元、さらなるチップサイズ縮小で医療の高度化に資する内視鏡の実現に向けて、本発明の活用が期待できると言える。
また、固体撮像素子の事例として、1行ずつ選択して画素のリセット動作を行う、いわゆるRolling Shutter型のCMOSイメージセンサで構成した場合について説明を行ったが、プロセスの進化により、全画素同時にリセット動作を行うGlobal Shutter型のCMOSイメージセンサであっても、発明の有効性は期待できる。
2 光学レンズ
3 固体撮像素子
4 カメラヘッド(内視鏡先端部)
5 電気接続配線群(電源・接地、および入出力信号用)
6 挿入ケーブル
7 操作部
8 ユニバーサルケーブル
9 カメラ制御ユニット(CCU)
10 ディスプレー
11 内視鏡カメラ挿入部
12 カメラ制御パラメータレジスタ
13 垂直制御論理部
14 コマンド生成部
15 コマンド送信部
16 入力バッファ
17 ASP(アナログ信号処理部、CDS/PGA/ADCなど)
18 画像信号処理部
19 画像出力部
20 画素アレー
21 読出走査回路
22 シャッタ走査回路
23 列CDS回路
24 水平走査回路
25 基準電圧/電流生成回路
26 出力バッファ
27 コマンド受信部
28 コマンドデコード部
29 水平制御論理部
Claims (2)
- 内視鏡の先端に固体撮像素子を設けた電子内視鏡システムにおいて、
固体撮像素子と、前記固体撮像素子に光学像を結像させるための対物レンズユニットと、
前記固体撮像素子に電気的に接続する信号ケーブルを介して固体撮像素子へのコマンド送信と固体撮像素子からの画像信号受信を行うカメラ制御ユニットとを有する内視鏡システムにおいて、
前記固体撮像素子は、光に感応して電気信号を生成する画素を2次元アレー状に配置した画素アレーと、画素アレーの電子信号を1行ずつ、順次、読み出すための制御信号を生成する垂直読出走査回路と、同じく1行ずつ、順次、画素リセットを行うための制御信号を生成する垂直シャッタ走査回路と、画素から読み出した1行分の信号を受信して記憶する列回路と、上記列回路を、1または複数列毎に順次選択して、記憶した画素信号を出力するための制御信号を生成する水平走査回路と、その出力信号を増幅して出力する出力アンプと、出力アンプの出力が接続された出力端子と、を備え、
さらに、前記固体撮像素子は、コマンド入力端子と、コマンドに従って、固体撮像素子の1水平走査時間に必要な画素制御信号や列制御信号を生成する水平制御論理部を備え、
前記カメラ制御ユニットは、前記固体撮像素子の撮像動作の垂直動作を管理する垂直制御論理部と、前記垂直制御論理部の指示に従い、必要なコマンドを生成するコマンド生成部と、前記信号ケーブルの1本を介して前記固体撮像素子のコマンド入力端子に接続されたコマンド出力端子を備え、
前記垂直制御論理部は、固体撮像素子の水平制御の開始を指示する水平制御開始コマンドを、前記固体撮像素子に送信、前記固体撮像素子はこのコマンドを受信すると、前記水平制御論理部が1水平走査時間内に必要な制御信号を生成して、これを繰り返す事で、固体撮像素子の撮像動作を実現する事を特徴とする内視鏡システム。 - 前記カメラ制御ユニットは、さらに、固体撮像素子の読出開始を指示する読出開始コマンドと、画素リセット開始を指示するシャッタ開始コマンドを備え、各々のコマンドが必要なタイミングに前記固体撮像素子に送信することで、前記固体撮像素子のフレームサイクル時間と露光時間を制御できることを特徴とする請求項1の内視鏡システム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019098898 | 2019-05-27 | ||
JP2019098898 | 2019-05-27 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2020192328A true JP2020192328A (ja) | 2020-12-03 |
Family
ID=73548509
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020092726A Pending JP2020192328A (ja) | 2019-05-27 | 2020-05-27 | 内視鏡システム、内視鏡用固体撮像素子、およびその駆動方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2020192328A (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022270166A1 (ja) | 2021-06-22 | 2022-12-29 | キヤノン株式会社 | 光電変換装置、カメラモジュール、内視鏡、内視鏡システム、および、機器 |
CN116269170A (zh) * | 2023-03-21 | 2023-06-23 | 新光维医疗科技(苏州)股份有限公司 | 多像素内窥镜自适应识别主机及方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10224696A (ja) * | 1997-01-31 | 1998-08-21 | Toshiba Corp | 固体撮像素子及びこの固体撮像素子を用いる画像システム |
JPH1132982A (ja) * | 1997-07-18 | 1999-02-09 | Toshiba Iyou Syst Eng Kk | 電子内視鏡装置 |
JP2002102162A (ja) * | 2000-09-29 | 2002-04-09 | Fuji Photo Optical Co Ltd | 交流点灯光源を備えた内視鏡装置 |
-
2020
- 2020-05-27 JP JP2020092726A patent/JP2020192328A/ja active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10224696A (ja) * | 1997-01-31 | 1998-08-21 | Toshiba Corp | 固体撮像素子及びこの固体撮像素子を用いる画像システム |
JPH1132982A (ja) * | 1997-07-18 | 1999-02-09 | Toshiba Iyou Syst Eng Kk | 電子内視鏡装置 |
JP2002102162A (ja) * | 2000-09-29 | 2002-04-09 | Fuji Photo Optical Co Ltd | 交流点灯光源を備えた内視鏡装置 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022270166A1 (ja) | 2021-06-22 | 2022-12-29 | キヤノン株式会社 | 光電変換装置、カメラモジュール、内視鏡、内視鏡システム、および、機器 |
CN116269170A (zh) * | 2023-03-21 | 2023-06-23 | 新光维医疗科技(苏州)股份有限公司 | 多像素内窥镜自适应识别主机及方法 |
CN116269170B (zh) * | 2023-03-21 | 2024-03-22 | 新光维医疗科技(苏州)股份有限公司 | 多像素内窥镜自适应识别主机及方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8231522B2 (en) | Electronic endoscope system | |
US7877134B2 (en) | Apparatus and methods for in vivo imaging | |
JP5372269B2 (ja) | 撮像装置 | |
JP7176041B2 (ja) | 医療画像処理装置及び方法、内視鏡システム、プロセッサ装置、診断支援装置並びにプログラム | |
EP3085301A1 (en) | Endoscopic device | |
JP6224819B2 (ja) | 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法 | |
JP2020192328A (ja) | 内視鏡システム、内視鏡用固体撮像素子、およびその駆動方法 | |
JP2004535867A (ja) | 小さな横断面面積を有するインビボ・イメージング・デバイスおよびその構成方法 | |
US20190246875A1 (en) | Endoscope system and endoscope | |
JP2011206335A (ja) | 内視鏡装置におけるcmos撮像素子のリセット方法 | |
EP2704439A1 (en) | Medical image recording apparatus, recording method of the same, and medical image recording program | |
JP7326308B2 (ja) | 医療画像処理装置及び医療画像処理装置の作動方法、内視鏡システム、プロセッサ装置、診断支援装置並びにプログラム | |
US7632233B2 (en) | Ultrasonic endoscope and ultrasonic endoscopic apparatus | |
JP5593008B1 (ja) | 画像処理装置及び画像処理方法 | |
JP2005157227A (ja) | 画像表示装置、画像表示方法、及び画像表示プログラム | |
JP4526245B2 (ja) | 映像信号処理装置 | |
US10729309B2 (en) | Endoscope system | |
JP5289371B2 (ja) | 内視鏡システムにおける内視鏡装置及びプロセッサ装置 | |
JP7152490B2 (ja) | 撮像システムおよび内視鏡装置 | |
JP5932191B1 (ja) | 伝送システムおよび処理装置 | |
JP2005131031A (ja) | 画像表示装置、画像表示方法、及び画像表示プログラム | |
JP2006075331A (ja) | 内視鏡用撮像装置 | |
US10542866B2 (en) | Medical imaging device | |
US20220377202A1 (en) | Image processing device, imaging system, image processing method, and computer-readable recording medium | |
US20010030684A1 (en) | Electronic endoscope |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220524 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230228 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230404 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230602 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230725 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230915 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20231212 |