JP2021141433A - Imaging apparatus - Google Patents

Imaging apparatus Download PDF

Info

Publication number
JP2021141433A
JP2021141433A JP2020037542A JP2020037542A JP2021141433A JP 2021141433 A JP2021141433 A JP 2021141433A JP 2020037542 A JP2020037542 A JP 2020037542A JP 2020037542 A JP2020037542 A JP 2020037542A JP 2021141433 A JP2021141433 A JP 2021141433A
Authority
JP
Japan
Prior art keywords
mirror
detection signal
light
angle
timing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2020037542A
Other languages
Japanese (ja)
Inventor
秀一 柴岡
Shuichi Shibaoka
秀一 柴岡
哲夫 桜井
Tetsuo Sakurai
哲夫 桜井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Development and Engineering Corp
Original Assignee
Toshiba Development and Engineering Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Development and Engineering Corp filed Critical Toshiba Development and Engineering Corp
Priority to JP2020037542A priority Critical patent/JP2021141433A/en
Publication of JP2021141433A publication Critical patent/JP2021141433A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Mechanical Optical Scanning Systems (AREA)
  • Camera Bodies And Camera Details Or Accessories (AREA)
  • Image Input (AREA)
  • Studio Devices (AREA)

Abstract

To provide a suitable image with an imaging apparatus of a mirror driving type.SOLUTION: The imaging apparatus according to one embodiment of an invention comprises: a first sensor for detecting light and generating a first detection signal; a field angle mask for shielding light outside a field angle; a mirror for reflecting light having passed through the field angle mask to the first sensor; a mirror driving device for driving the mirror to scan the light having passed through the field angle mask; and an image generation part for generating an image based on the first detection signal.SELECTED DRAWING: Figure 1

Description

本発明の実施形態は、鏡駆動で光束を走査することによって画像を取得する撮像装置に関する。 An embodiment of the present invention relates to an imaging device that acquires an image by scanning a luminous flux driven by a mirror.

鏡駆動式の撮像装置として、特許文献1に開示される大視野画像入力装置が知られている。この画像入力装置は、撮像素子としてリニアセンサを使用し、リニアセンサの光軸上に配置されたガルバノミラーの角度を変化させることにより二次元画像を生成する。画像入力装置は、ミラーの振れ角を制御することにより歪み(ひずみ)のない画像を得ている。しかしながら、画像入力装置は、固定パタンで歪み補正を行うため、固定の非線形動作に対する歪み補正が可能なだけであり、ジッタ歪みに対応することはできない。 As a mirror-driven image pickup device, a large-field image input device disclosed in Patent Document 1 is known. This image input device uses a linear sensor as an image sensor, and generates a two-dimensional image by changing the angle of a galvanometer mirror arranged on the optical axis of the linear sensor. The image input device obtains a distortion-free image by controlling the deflection angle of the mirror. However, since the image input device performs distortion correction with a fixed pattern, it is only possible to correct distortion for a fixed non-linear operation, and it is not possible to deal with jitter distortion.

また、鏡駆動式の撮像装置においては、画像の明るさが適切であることなどの要求もある。 Further, in the mirror-driven image pickup device, there is also a requirement that the brightness of the image is appropriate.

特開平04−203915号公報Japanese Unexamined Patent Publication No. 04-203915

本発明は、鏡駆動式の撮像装置において好適な画像を得ることができる技術を提供することを目的とする。 An object of the present invention is to provide a technique capable of obtaining a suitable image in a mirror-driven image pickup device.

本発明の一態様に係る撮像装置は、光を検出して第1の検出信号を生成する第1のセンサと、画角外の光を遮光する画角マスクと、前記画角マスクを通過した光を前記第1のセンサへ反射する鏡と、前記画角マスクを通過した光を走査するために、前記鏡を駆動する鏡駆動装置と、前記第1の検出信号に基づいて画像を生成する画像生成部と、を備える。 The image pickup apparatus according to one aspect of the present invention has passed through a first sensor that detects light and generates a first detection signal, an angle-of-view mask that blocks light outside the angle of view, and the angle-of-view mask. An image is generated based on a mirror that reflects light to the first sensor, a mirror driving device that drives the mirror to scan the light that has passed through the angle of view mask, and the first detection signal. It includes an image generation unit.

本発明によれば、鏡駆動式の撮像装置において好適な画像を得ることができる。 According to the present invention, a suitable image can be obtained in a mirror-driven image pickup device.

本発明の実施形態に係る撮像装置を示す図。The figure which shows the image pickup apparatus which concerns on embodiment of this invention. 図1に示した撮影部を示す斜視図。The perspective view which shows the photographing part shown in FIG. 図2に示した画角マスクを示す斜視図。The perspective view which shows the angle-of-view mask shown in FIG. 図1の撮像装置が行うレベル補正及び時間軸補正を説明する図。The figure explaining the level correction and the time axis correction performed by the image pickup apparatus of FIG. ジッタによる歪みを説明するための図。The figure for demonstrating the distortion by a jitter. 三角波駆動モードでの時間経過と鏡位置を示す図。The figure which shows the time passage and the mirror position in a triangular wave drive mode. 鋸波駆動モードでの時間経過と鏡位置を示す図。The figure which shows the time passage and the mirror position in a sawtooth drive mode. 本発明の実施形態に係る、ガイド光源を備える撮像装置を示す斜視図。The perspective view which shows the image pickup apparatus provided with the guide light source which concerns on embodiment of this invention. 図8に示した撮像装置により得られる画像を示す図。The figure which shows the image obtained by the image pickup apparatus shown in FIG. 本発明の関連技術に係る撮像装置を示す図。The figure which shows the image pickup apparatus which concerns on the related technique of this invention.

以下、図面を参照しながら実施形態を説明する。 Hereinafter, embodiments will be described with reference to the drawings.

まず、図10を参照して、本発明の関連技術に係る鏡駆動式の撮像装置1000について簡単に説明する。図10に示すように、撮像装置1000は、センサ1002、鏡1004、鏡駆動装置1006、タイミング発生器1010、鏡制御部1012、及び画像処理部1020を備える。 First, with reference to FIG. 10, a mirror-driven image pickup apparatus 1000 according to a related technique of the present invention will be briefly described. As shown in FIG. 10, the image pickup device 1000 includes a sensor 1002, a mirror 1004, a mirror drive device 1006, a timing generator 1010, a mirror control unit 1012, and an image processing unit 1020.

鏡1004は撮像装置100に入射した光をセンサ1002へと反射する。鏡駆動装置1006は、撮像装置100に入射した光を二次元的に走査するために、鏡1004を駆動する。鏡駆動装置1006は、直交する2つの軸まわりに鏡1004を揺動可能である。鏡1004及び鏡駆動装置1006は1つのMEMS(Micro-Electro-Mechanical Systems)デバイスとして実施することができる。 The mirror 1004 reflects the light incident on the image pickup apparatus 100 to the sensor 1002. The mirror drive device 1006 drives the mirror 1004 in order to scan the light incident on the image pickup device 100 in two dimensions. The mirror drive device 1006 is capable of swinging the mirror 1004 around two orthogonal axes. The mirror 1004 and the mirror drive device 1006 can be implemented as one MEMS (Micro-Electro-Mechanical Systems) device.

センサ1002は、鏡1004によって反射された光を検出して検出信号を生成する。例えば、センサ1002は、入射光を光電変換して光の強度に応じた電気信号を得る光検出器を含む。検出信号は画像処理部1020に与えられる。 The sensor 1002 detects the light reflected by the mirror 1004 and generates a detection signal. For example, the sensor 1002 includes a photodetector that photoelectrically converts incident light to obtain an electric signal according to the intensity of the light. The detection signal is given to the image processing unit 1020.

タイミング発生器1010は、鏡1004を駆動するためのタイミング信号を発生させる。鏡制御部1012は、タイミング発生器1010からのタイミング信号に従って鏡1004を制御する。具体的には、鏡制御部1012は、タイミング信号に従って鏡駆動装置1006を動作させて、鏡1004の向き(姿勢)を変える。 The timing generator 1010 generates a timing signal for driving the mirror 1004. The mirror control unit 1012 controls the mirror 1004 according to a timing signal from the timing generator 1010. Specifically, the mirror control unit 1012 operates the mirror driving device 1006 according to the timing signal to change the direction (posture) of the mirror 1004.

画像処理部1020は、センサ1002から検出信号を受け取り、タイミング発生器1010からタイミング信号を受け取る。画像処理部1020は、タイミング信号に従って、受け取った検出信号から画像に対応する区間の検出信号を抽出し、抽出した検出信号に基づいて画像を生成する。上述したように、鏡1004はセンサ1002が光束を二次元走査するように駆動される。この場合、画像処理部1020は二次元画像を取得する。 The image processing unit 1020 receives a detection signal from the sensor 1002 and a timing signal from the timing generator 1010. The image processing unit 1020 extracts the detection signal of the section corresponding to the image from the received detection signal according to the timing signal, and generates an image based on the extracted detection signal. As described above, the mirror 1004 is driven so that the sensor 1002 scans the luminous flux in two dimensions. In this case, the image processing unit 1020 acquires a two-dimensional image.

画像処理部1020は、固定値(固定レベル)を用いて画像のレベル補正を行うレベル補正部1022を備える。例えば、レベル補正部1022は、画像内の各画素の画素値を固定値だけ下げる。画像処理部1020は、レベル補正を施した画像を出力する。例えば、画像処理部1020は、画像を表示装置(図示せず)上に表示するために、画像を表示装置に送る。 The image processing unit 1020 includes a level correction unit 1022 that corrects the level of an image using a fixed value (fixed level). For example, the level correction unit 1022 lowers the pixel value of each pixel in the image by a fixed value. The image processing unit 1020 outputs a level-corrected image. For example, the image processing unit 1020 sends an image to the display device in order to display the image on the display device (not shown).

上述した構成を有する撮像装置1000では、次のような問題が生じる。迷光により画像の黒レベルが浮き上がる。また、センサ1002の温度ドリフトなどにより黒レベルが変動する。このため、固定値を用いたレベル補正では、画像の明るさを適切に補正することができない。さらに、鏡駆動に起因して検出信号に生じるジッタにより画像に歪みが生じる。二次元画像を撮影する場合、低速軸方向の画素が揃わないため、画像処理が難しくなる。 The image pickup apparatus 1000 having the above-described configuration causes the following problems. The stray light raises the black level of the image. In addition, the black level fluctuates due to temperature drift of the sensor 1002 and the like. Therefore, the brightness of the image cannot be properly corrected by the level correction using the fixed value. Further, the image is distorted due to the jitter generated in the detection signal due to the mirror drive. When a two-dimensional image is taken, image processing becomes difficult because the pixels in the low-speed axial direction are not aligned.

図1は、本発明の一実施形態に係る鏡駆動式の撮像装置(カメラ)100を概略的に示している。図1に示すように、撮像装置100は、センサ102、鏡(ミラー)104、鏡駆動装置106、画角マスク108、タイミング発生器110、鏡制御部112、同期検出部114、光学黒処理部116、及び画像処理部120を備える。 FIG. 1 schematically shows a mirror-driven imaging device (camera) 100 according to an embodiment of the present invention. As shown in FIG. 1, the image pickup device 100 includes a sensor 102, a mirror 104, a mirror drive device 106, an angle of view mask 108, a timing generator 110, a mirror control unit 112, a synchronous detection unit 114, and an optical black processing unit. It includes 116 and an image processing unit 120.

画角マスク108は、鏡104の対物(被写体)側に設けられ、画角外の光を遮光する。鏡104は、画角マスク108を通過した光をセンサ102に向けて反射する。センサ102は、鏡104によって反射された光を検出して検出信号を生成する。例えば、センサ102は、入射光を光電変換して光の強度に応じた電気信号を得る1つの光検出器を含む。光検出器としては、フォトダイオードを使用することができる。光検出器は、単色の光検出器であってもよく、多色の光検出器であってもよい。例えば、光検出器は、入射光の赤色成分(R)、緑色成分(G)、青色成分(B)を検出して、赤色成分、緑色成分、青色成分のそれぞれの強度に応じた電気信号を生成する。検出信号は、同期検出部114、光学黒処理部116、及び画像処理部120に与えられる。 The angle-of-view mask 108 is provided on the objective (subject) side of the mirror 104 to block light outside the angle of view. The mirror 104 reflects the light that has passed through the angle of view mask 108 toward the sensor 102. The sensor 102 detects the light reflected by the mirror 104 and generates a detection signal. For example, the sensor 102 includes one photodetector that photoelectrically converts incident light to obtain an electrical signal according to the intensity of the light. A photodiode can be used as the photodetector. The photodetector may be a monochromatic photodetector or a multicolored photodetector. For example, a photodetector detects a red component (R), a green component (G), and a blue component (B) of incident light, and outputs an electric signal corresponding to the intensity of each of the red component, the green component, and the blue component. Generate. The detection signal is given to the synchronous detection unit 114, the optical black processing unit 116, and the image processing unit 120.

鏡駆動装置106は、画角マスク108を通過した光を二次元的に走査するために、鏡104を駆動する。鏡駆動装置106は、直交する2つの軸まわりに鏡104を揺動可能である。具体的には、鏡駆動装置106は、第1の軸まわりに第1の角度範囲内で鏡104を傾斜(回動)させることができ、さらに、第1の軸と直交する第2の軸まわりに第2の角度範囲内で鏡104を傾斜(回動)させることができる。第1の角度範囲は水平画角より広く、第2の角度範囲は垂直画角より広い。鏡104及び鏡駆動装置106は1つのMEMSデバイスとして実施することができる。鏡104の駆動は例えば静電駆動を利用した方法であってよい。このように、鏡104及び鏡駆動装置106は、光を反射させ、センサ102に対して二次元画像を結像させるように構成される。 The mirror driving device 106 drives the mirror 104 in order to two-dimensionally scan the light that has passed through the angle of view mask 108. The mirror drive device 106 can swing the mirror 104 around two orthogonal axes. Specifically, the mirror drive device 106 can tilt (rotate) the mirror 104 around the first axis within a first angle range, and further, a second axis orthogonal to the first axis. The mirror 104 can be tilted (rotated) around within a second angle range. The first angle range is wider than the horizontal angle of view, and the second angle range is wider than the vertical angle of view. The mirror 104 and the mirror drive device 106 can be implemented as one MEMS device. The mirror 104 may be driven by, for example, a method using electrostatic drive. In this way, the mirror 104 and the mirror driving device 106 are configured to reflect light and form a two-dimensional image on the sensor 102.

以下では、センサ102、鏡104、鏡駆動装置106、及び画角マスク108を撮影部と総称する。 Hereinafter, the sensor 102, the mirror 104, the mirror driving device 106, and the angle of view mask 108 are collectively referred to as a photographing unit.

図2は、撮影部の構造例を概略的に示している。図2において、鏡駆動装置106の図示を省略している。図2に示すように、センサ102、鏡104、及び鏡駆動装置106は鏡筒200内に収容されている。鏡筒200は鏡筒下部202及び天板(図示せず)を有する。鏡筒下部202に鏡104及び鏡駆動装置106が実装され、天板にセンサ102が実装される。鏡筒200は、センサ102、鏡104、及び鏡駆動装置106が配置される内部空間と、内部空間と外部空間とを連通する1つの開口と、を有する。鏡筒200の開口に画角マスク108が設けられている。この配置では、画角マスク108を通過した光だけが鏡筒200の内部空間に到達する。 FIG. 2 schematically shows a structural example of the photographing unit. In FIG. 2, the mirror drive device 106 is not shown. As shown in FIG. 2, the sensor 102, the mirror 104, and the mirror driving device 106 are housed in the lens barrel 200. The lens barrel 200 has a lens barrel lower portion 202 and a top plate (not shown). The mirror 104 and the mirror driving device 106 are mounted on the lower portion 202 of the lens barrel, and the sensor 102 is mounted on the top plate. The lens barrel 200 has an internal space in which the sensor 102, the mirror 104, and the mirror driving device 106 are arranged, and one opening that communicates the internal space and the external space. An angle-of-view mask 108 is provided in the opening of the lens barrel 200. In this arrangement, only the light that has passed through the angle of view mask 108 reaches the internal space of the lens barrel 200.

鏡駆動装置106は、直交する2つの軸AX1、AX2まわりに鏡104を揺動するように構成される。図2に示す例では、軸AX1は、鏡104の反射面の中心Oを通り、センサ102の中心と反射面の中心0とを結ぶ線分及び画角マスク108の開口中心と反射面の中心0とを結ぶ線分に対して、例えば45度の角度を成す。軸AX2は、反射面の中心Oを通り、これらの線分の両方に直交する。 The mirror driving device 106 is configured to swing the mirror 104 around two orthogonal axes AX1 and AX2. In the example shown in FIG. 2, the axis AX1 passes through the center O of the reflecting surface of the mirror 104, and is a line segment connecting the center of the sensor 102 and the center 0 of the reflecting surface, and the opening center of the angle mask 108 and the center of the reflecting surface. It forms an angle of, for example, 45 degrees with respect to the line segment connecting 0. Axis AX2 passes through the center O of the reflective surface and is orthogonal to both of these line segments.

画角マスク108を通過した光は、鏡104で反射されてセンサ102に入射する。走査位置が画角内である(例えば鏡104が水平画角より大きい角度で軸AX1まわりに傾斜される)最外縁付近では画角マスク108により光は遮光されセンサ102に入射することがない。 The light that has passed through the angle of view mask 108 is reflected by the mirror 104 and enters the sensor 102. In the vicinity of the outermost edge where the scanning position is within the angle of view (for example, the mirror 104 is tilted around the axis AX1 at an angle larger than the horizontal angle of view), the light is blocked by the angle of view mask 108 and does not enter the sensor 102.

図3は、画角マスク108の構造例を概略的に示している。図3に示すように、画角マスク108は、フード状の形状を有し、鏡104に近いほど開口面積が小さくなるように配置される。フード状の画角マスク108を使用することにより、回折などの迷光を効果的に軽減することができる。 FIG. 3 schematically shows a structural example of the angle of view mask 108. As shown in FIG. 3, the angle-of-view mask 108 has a hood-like shape, and is arranged so that the closer to the mirror 104, the smaller the opening area. By using the hood-shaped angle of view mask 108, stray light such as diffraction can be effectively reduced.

なお、画角マスク108は図3に示すものに限定されない。例えば、画角マスク108は平板を打ち抜いたものであってもよい。画角マスク108は鏡筒200の一部として実施されてもよい。 The angle of view mask 108 is not limited to the one shown in FIG. For example, the angle of view mask 108 may be a punched flat plate. The angle of view mask 108 may be implemented as part of the lens barrel 200.

図1を再び参照すると、タイミング発生器110は鏡104を駆動するタイミング信号を発生させる。タイミング信号は周期パルス信号であり得る。タイミング信号は、鏡制御部112、同期検出部114、及び光学黒処理部116に与えられる。 Referring again to FIG. 1, the timing generator 110 generates a timing signal to drive the mirror 104. The timing signal can be a periodic pulse signal. The timing signal is given to the mirror control unit 112, the synchronization detection unit 114, and the optical black processing unit 116.

鏡制御部112は、タイミング発生器110からのタイミング信号に従って鏡104を制御する。具体的には、鏡制御部112は、タイミング信号に従って鏡駆動装置106を動作させて、センサ102及び画角マスク108に対する鏡104の向き(姿勢)を変える。例えば、鏡制御部112は、画角マスク108を通過した光をラスタスキャンするように、鏡104を制御する。具体的には、鏡制御部112は、軸AX1まわりに鏡104を回転させる第1動作と、軸AX1まわりに逆方向に鏡104を回転させながら軸AX2まわりに鏡104を回転させる第2動作と、を有する動作を繰り返す。第1動作において得られた検出信号から画像が生成される。1回の第1動作の実行で1つの水平画素列に対応する検出信号が得られる。1回の第2動作の実行で1枚の二次元画像に対応する検出信号が得られる。軸AX1が高速軸であり、軸AX2が低速軸である。 The mirror control unit 112 controls the mirror 104 according to a timing signal from the timing generator 110. Specifically, the mirror control unit 112 operates the mirror driving device 106 according to the timing signal to change the direction (posture) of the mirror 104 with respect to the sensor 102 and the angle of view mask 108. For example, the mirror control unit 112 controls the mirror 104 so as to perform a raster scan of the light that has passed through the angle of view mask 108. Specifically, the mirror control unit 112 has a first operation of rotating the mirror 104 around the axis AX1 and a second operation of rotating the mirror 104 around the axis AX2 while rotating the mirror 104 in the opposite direction around the axis AX1. And, the operation having is repeated. An image is generated from the detection signal obtained in the first operation. A detection signal corresponding to one horizontal pixel sequence can be obtained by executing the first operation once. A detection signal corresponding to one two-dimensional image can be obtained by executing the second operation once. The axis AX1 is a high-speed axis, and the axis AX2 is a low-speed axis.

同期検出部114は、タイミング発生器110からタイミング信号を受け取り、センサ102から検出信号を受け取る。同期検出部114は、タイミング信号及び検出信号に基づいて同期タイミングを検出する。具体的には、同期検出部114は、タイミング信号及び検出信号に基づいて、走査位置が画角外へ出たタイミング及び走査位置が画角内へ入ったタイミングを検出する。以降では、走査位置が画角外へ出たタイミングをOB(optical black)入りタイミングと称し、走査位置が画角内へ入ったタイミングをOB明けタイミングと称する。同期検出部114は、OB入りタイミング及びOB明けタイミングを含む同期情報を画像処理部120に与える。本実施形態では、同期タイミングはOB入りタイミング及びOB明けタイミングを含む。他の実施形態では、同期タイミングはOB入りタイミングとOB明けタイミングとのいずれか一方だけを含んでもよい。 The synchronization detection unit 114 receives the timing signal from the timing generator 110 and the detection signal from the sensor 102. The synchronization detection unit 114 detects the synchronization timing based on the timing signal and the detection signal. Specifically, the synchronization detection unit 114 detects the timing when the scanning position goes out of the angle of view and the timing when the scanning position enters the angle of view based on the timing signal and the detection signal. Hereinafter, the timing at which the scanning position goes out of the angle of view is referred to as an OB (optical black) entry timing, and the timing at which the scanning position enters the angle of view is referred to as an OB break timing. The synchronization detection unit 114 gives the image processing unit 120 synchronization information including the OB entry timing and the OB break timing. In the present embodiment, the synchronization timing includes the OB entry timing and the OB end timing. In other embodiments, the synchronization timing may include only one of the OB entry timing and the OB break timing.

光学黒処理部116は、光学黒期間に得られた検出信号に基づいて画像の黒レベルを推定する。例えば、光学黒処理部116は、光学黒期間に得られた検出信号をラッチし、ラッチした検出信号をフィルタリングすることで黒レベルを求める。光学黒期間は、走査位置が画角外である期間である。光学黒処理部116は、タイミング信号に基づいて光学黒期間を特定する。光学黒処理部116は黒レベルの推定結果を示す黒レベル情報を画像処理部120に与える。 The optical black processing unit 116 estimates the black level of the image based on the detection signal obtained during the optical black period. For example, the optical black processing unit 116 latches the detection signal obtained during the optical black period and filters the latched detection signal to obtain the black level. The optical black period is a period in which the scanning position is outside the angle of view. The optical black processing unit 116 specifies the optical black period based on the timing signal. The optical black processing unit 116 gives the image processing unit 120 black level information indicating the estimation result of the black level.

画像処理部120は、センサ102から検出信号を受け取り、同期検出部114から同期情報を受け取り、光学黒処理部116から黒レベル情報を受け取る。画像処理部120は、検出信号、同期情報、及び黒レベル情報に基づいて2次元画像を生成する。例えば、画像処理部120は、同期情報及び黒レベル情報に基づいて検出信号を補正し、補正された検出信号に基づいて2次元画像を生成する。画像処理部120は、黒レベル情報に基づいて検出信号に対してレベル補正を行うレベル補正部122と、同期情報に基づいて検出信号に対して時間軸補正(TBC)を行う時間軸補正部124と、を備える。レベル補正後に時間軸補正を行ってもよく、又は、時間軸補正後にレベル補正を行ってもよい。レベル補正及び時間軸補正は水平画素列ごとに行うことができる。 The image processing unit 120 receives the detection signal from the sensor 102, the synchronization information from the synchronization detection unit 114, and the black level information from the optical black processing unit 116. The image processing unit 120 generates a two-dimensional image based on the detection signal, synchronization information, and black level information. For example, the image processing unit 120 corrects the detection signal based on the synchronization information and the black level information, and generates a two-dimensional image based on the corrected detection signal. The image processing unit 120 includes a level correction unit 122 that performs level correction on the detection signal based on the black level information, and a time axis correction unit 124 that performs time axis correction (TBC) on the detection signal based on the synchronization information. And. The time axis correction may be performed after the level correction, or the level correction may be performed after the time axis correction. Level correction and time axis correction can be performed for each horizontal pixel sequence.

レベル補正部122は、黒レベル情報により示される黒レベルと予め設定される基準黒レベルとの比較に基づいてレベル補正を行う。例えば、レベル補正部122は、黒レベルが基準黒レベルより高いときには、黒レベルから基準黒レベルを引いた差だけ画素値を下げ、黒レベルが基準黒レベルより低いときには、基準黒レベルから黒レベルを引いた差だけ画素値を上げる。一例として、基準黒レベルとして(R値,G値,B値)=(16,16,16)が設定される。黒レベル情報が(R値,G値,B値)=(18,20,19)を示す場合、各画素において、R値を2減じ、G値を4減じ、B値を3減じる。これにより、明るさが適正な画像を得ることができる。 The level correction unit 122 corrects the level based on the comparison between the black level indicated by the black level information and the preset reference black level. For example, when the black level is higher than the reference black level, the level correction unit 122 lowers the pixel value by the difference obtained by subtracting the reference black level from the black level, and when the black level is lower than the reference black level, the level correction unit 122 lowers the pixel value from the reference black level to the black level. Increase the pixel value by the difference minus. As an example, (R value, G value, B value) = (16, 16, 16) is set as the reference black level. When the black level information indicates (R value, G value, B value) = (18, 20, 19), the R value is decremented by 2, the G value is decremented by 4, and the B value is decremented by 3 in each pixel. As a result, it is possible to obtain an image having appropriate brightness.

時間軸補正部124は、同期情報に含まれるOB入りタイミング及びOB明けタイミングに基づいて検出信号に対して時間軸補正を行う。例えば、OB入りタイミングがタイミング信号により特定される基準タイミングより早い又は遅い場合には、時間軸補正部124は、それらの間の差だけ検出信号を抽出(ラッチ)する区間を光学センサ検出時間軸上でシフトさせる。OB入りタイミングからOB明けタイミングまでの期間がタイミング信号により特定される基準期間より長い又は短い場合には、時間軸補正部124は、それらの間の差だけ検出信号を光学センサ検出時間軸上で短縮又は伸長させる。これにより、低速軸方向の画素(垂直方向の画素)を揃えることができ、歪みのない又は小さい画像を得ることができる。 The time axis correction unit 124 corrects the time axis for the detection signal based on the OB entry timing and the OB break timing included in the synchronization information. For example, when the OB entry timing is earlier or later than the reference timing specified by the timing signal, the time axis correction unit 124 sets the section for extracting (latching) the detection signal by the difference between them with the optical sensor detection time axis. Shift on. When the period from the OB entry timing to the OB dawn timing is longer or shorter than the reference period specified by the timing signal, the time axis correction unit 124 transmits the detection signal by the difference between them on the optical sensor detection time axis. Shorten or stretch. As a result, the pixels in the low-speed axial direction (pixels in the vertical direction) can be aligned, and a distortion-free or small image can be obtained.

画像処理部120は画像を出力する。例えば、画像処理部120は、画像を表示装置(図示せず)上に表示するために、画像を表示装置に送る。 The image processing unit 120 outputs an image. For example, the image processing unit 120 sends an image to the display device in order to display the image on the display device (not shown).

図4から図7を参照して、撮像装置100が行うレベル補正及び時間軸補正を説明する。図4において、standard OB timingと表されるパルス信号がタイミング発生器(TG)110からのタイミング信号を示し、OB sampling gateと表されるパルス信号が光学黒期間を示す。図4に示す例では、光学黒処理部116は、タイミング信号がhighである期間の中央部分を光学黒期間と特定する。光学黒処理部116は、光学黒期間中の検出信号により示される画素値から推定黒レベルを求める。上述したように、光学黒処理部116は、推定黒レベルと基準黒レベルとの比較に基づいて検出信号に対してレベル補正を行う。 The level correction and the time axis correction performed by the image pickup apparatus 100 will be described with reference to FIGS. 4 to 7. In FIG. 4, the pulse signal represented by the standard OB timing indicates the timing signal from the timing generator (TG) 110, and the pulse signal represented by the OB sampling gate indicates the optical black period. In the example shown in FIG. 4, the optical black processing unit 116 identifies the central portion of the period when the timing signal is high as the optical black period. The optical black processing unit 116 obtains an estimated black level from the pixel values indicated by the detection signals during the optical black period. As described above, the optical black processing unit 116 performs level correction on the detection signal based on the comparison between the estimated black level and the reference black level.

図5は、鏡104が三角波駆動モードで駆動される場合における鏡104の位置(例えば軸AX1まわりの回転角に対応する)とタイミング信号との関係を概略的に示し、図6は、鏡104が鋸波駆動モードで駆動される場合における鏡104の位置とタイミング信号との関係を概略的に示している。図5及び図6の各々において丸で囲んだ箇所は、鏡104の回転方向が変わる期間に対応する。この期間には鏡104の変位速度が変化するため、この期間に得られた検出信号に基づいて得られる画像は大きく崩れる。また、この期間に得られた検出信号をサンプリングなどで補正することは難しい。よって、当該検出信号を画像領域として使用することは困難である。このため、鏡104の回転方向が変わる期間に走査位置が画角外にあるようにし、その期間に得られた検出信号を光学黒(OB)検出に使用するようにしている。これにより、有効領域を減ずることなしに、レベル補正が可能となる。 FIG. 5 schematically shows the relationship between the position of the mirror 104 (for example, corresponding to the rotation angle around the axis AX1) and the timing signal when the mirror 104 is driven in the triangular wave drive mode, and FIG. 6 shows the mirror 104. The relationship between the position of the mirror 104 and the timing signal when the mirror 104 is driven in the sawtooth drive mode is shown schematically. The circled parts in each of FIGS. 5 and 6 correspond to the period during which the rotation direction of the mirror 104 changes. Since the displacement rate of the mirror 104 changes during this period, the image obtained based on the detection signal obtained during this period is greatly distorted. Moreover, it is difficult to correct the detection signal obtained during this period by sampling or the like. Therefore, it is difficult to use the detection signal as an image area. Therefore, the scanning position is set to be outside the angle of view during the period when the rotation direction of the mirror 104 changes, and the detection signal obtained during that period is used for optical black (OB) detection. This makes it possible to correct the level without reducing the effective area.

図4を再び参照すると、同期検出部114は、OB入り検出期間(in OB sens gate)において示される期間に、OB入りタイミングの検出を行う。OB入りタイミングは、走査位置が画角内から画角外へ出るタイミングであり、検出信号により示される信号強度又は明るさが急峻に低下する(暗くなる)ことを検出することにより特定することができる。この例では、OB入り検出信号がHighの期間がOB入り検出期間であり、検出を行い、Lowの期間には行わない。 Referring to FIG. 4 again, the synchronization detection unit 114 detects the OB entry timing during the period indicated in the OB entry detection period (in OB sens gate). The OB entry timing is the timing at which the scanning position moves from the inside of the angle of view to the outside of the angle of view, and can be specified by detecting that the signal strength or brightness indicated by the detection signal suddenly decreases (darkens). can. In this example, the period when the OB entry detection signal is High is the OB entry detection period, and the detection is performed, but not during the Low period.

さらに、同期検出部114は、OB明け検出期間(out OB sens gate)において、OB明けタイミングの検出を行う。OB明けタイミングは、走査位置が画角外から画角内へ入るタイミングであり、検出信号により示される信号強度又は明るさが急峻に増大する(明るくなる)ことを検出することにより特定することができる。この例では、OB明け検出信号がHighの期間がOB明け検出期間であり、検出を行い、Lowの期間には行わない。 Further, the synchronous detection unit 114 detects the OB dawn timing during the OB dawn detection period (out OB sens gate). The OB dawn timing is the timing at which the scanning position enters the angle of view from outside the angle of view, and can be specified by detecting that the signal strength or brightness indicated by the detection signal sharply increases (becomes brighter). can. In this example, the period when the OB dawn detection signal is High is the OB dawn detection period, and the detection is performed, but not during the Low period.

時間軸補正部124は、同期情報に含まれるOB明けタイミング及びOB入りタイミングに従って、画像生成に使用する区間の検出信号を抽出する。図7に示すように、OB明けタイミングが所定のタイミングより早い場合(faster)、時間軸補正部124は、検出信号の抽出区間を光学センサ検出時間軸上で早い部分を使う様にシフトさせる。OB明けタイミングが所定のタイミングより遅い場合(later)場合、時間軸補正部124は、検出信号の抽出区間を光学センサ検出時間軸上で遅い部分を使う様にシフトさせる。時間軸補正部124は、OB明けタイミングからOB入りタイミングまでの期間が所定の期間より短い場合(shorter)、時間軸補正部124は、抽出した検出信号を光学センサ検出時間軸上で狭い部分を使って拡大する。OB明けタイミングからOB入りタイミングまでの期間が所定の期間より長い場合(longer)、時間軸補正部124は、抽出した検出信号を光学センサ検出時間軸上で広い部分使って縮小する。このようにして、時間軸補正部124はジッタなどによる時間方向の歪みを補正する。 The time axis correction unit 124 extracts the detection signal of the section used for image generation according to the OB dawn timing and the OB entry timing included in the synchronization information. As shown in FIG. 7, when the OB dawn timing is earlier than the predetermined timing (faster), the time axis correction unit 124 shifts the extraction section of the detection signal so as to use the earlier portion on the optical sensor detection time axis. When the OB dawn timing is later than the predetermined timing (later), the time axis correction unit 124 shifts the extraction section of the detection signal so as to use the later portion on the optical sensor detection time axis. When the time axis correction unit 124 has a shorter period from the OB dawn timing to the OB entry timing (shorter), the time axis correction unit 124 transmits the extracted detection signal to a narrow portion on the optical sensor detection time axis. Use to enlarge. When the period from the OB dawn timing to the OB entry timing is longer than a predetermined period (longer), the time axis correction unit 124 reduces the extracted detection signal by using a wide portion on the optical sensor detection time axis. In this way, the time axis correction unit 124 corrects distortion in the time direction due to jitter or the like.

OB明け又はOB入りを検出できない場合がある。例えば、撮影範囲の境界(写界境界)に黒い物体があったり、遮光に近い状態にある場合に、OB明け又はOB入りを検出できないことがある。撮影範囲は画角(水平画角及び垂直画角)により定まる。また、ジッタが大きい場合にもOB明け又はOB入りを検出できない。時間軸補正部124は、同期タイミングの検出結果が妥当であるか否かを判定する。例えば、時間軸補正部124は、OB明け又はOB入りを検出できない場合に、検出結果が妥当でないと判定し、OB明け及びOB入りの両方を検出できた場合に、検出結果が妥当であると判定する。時間軸補正部124は、検出結果が妥当でないと判定した場合には、時間方向の歪みを補正不可能であると認識し、基準同期タイミングを使用するか、近隣ライン(例えば上に隣接する水平画素列)の同期タイミングを使用するか、或いは、近隣ライン又は前フレーム(前に得た画像)の画素に関する情報(近隣画素情報)で処理中の水平画素列を補間することで、時間軸補正を行う。例えば測定などで厳密な値が必要な用途の場合において、時間軸補正部124は補正しなかった場所(画素列)にフラグを付してもよい。 It may not be possible to detect the end of OB or the entry of OB. For example, when there is a black object at the boundary of the shooting range (the boundary of the field of view) or the state is close to shading, it may not be possible to detect OB dawn or OB entry. The shooting range is determined by the angle of view (horizontal angle of view and vertical angle of view). Also, even when the jitter is large, it is not possible to detect the end of OB or the entry of OB. The time axis correction unit 124 determines whether or not the detection result of the synchronization timing is appropriate. For example, the time axis correction unit 124 determines that the detection result is not valid when the OB dawn or the OB entry cannot be detected, and determines that the detection result is valid when both the OB dawn and the OB entry can be detected. judge. When the time axis correction unit 124 determines that the detection result is not appropriate, it recognizes that the distortion in the time direction cannot be corrected, and either uses the reference synchronization timing or uses a neighboring line (for example, horizontal adjacent to the top). Time axis correction by using the synchronization timing of the pixel string) or by interpolating the horizontal pixel string being processed with information about the pixels of the neighboring line or the previous frame (previously obtained image) (neighboring pixel information). I do. For example, in the case of an application in which an exact value is required for measurement or the like, the time axis correction unit 124 may add a flag to a place (pixel string) that has not been corrected.

時間軸補正により低速軸方向(高速軸が水平軸の場合、垂直軸方向)の画素が揃うため、平面二次元フィルタ処理又は時間を付加した二次元若しくは三次元フィルタ処理を付加することが可能になる。これにより、パノラマ張り合わせのような複数枚の画像を位置合わせ合成することもできる。 Since the pixels in the low-speed axis direction (when the high-speed axis is the horizontal axis, the vertical axis direction) are aligned by the time axis correction, it is possible to add a plane two-dimensional filter process or a two-dimensional or three-dimensional filter process with time added. Become. As a result, it is possible to align and synthesize a plurality of images such as panoramic pasting.

以上のように、本実施形態では、画角を規定する画角マスク108が鏡104の対物側に設けられている。これにより、迷光を軽減することができ、黒レベルが適切な画像を得ることができる。 As described above, in the present embodiment, the angle of view mask 108 that defines the angle of view is provided on the objective side of the mirror 104. As a result, stray light can be reduced, and an image having an appropriate black level can be obtained.

撮像装置100は、走査位置が画角外にある期間にセンサ102により得られた検出信号に基づいて画像の黒レベルを推定し、黒レベルの推定結果に基づいてレベル補正を行う。これにより、黒浮きや、温度などによるセンサドリフトを軽減することができる。その結果、黒レベルがより適切な画像を得ることができる。 The image pickup apparatus 100 estimates the black level of the image based on the detection signal obtained by the sensor 102 during the period when the scanning position is outside the angle of view, and performs level correction based on the estimation result of the black level. As a result, it is possible to reduce black floating and sensor drift due to temperature and the like. As a result, an image having a more appropriate black level can be obtained.

撮像装置100は、OB入りタイミング及びOB明けタイミングを検出し、検出結果に基づいて時間軸補正を行う。これにより、ジッタによる時間方向の歪みを補正することができる。さらに、ジッタによる時間軸異常を検出することができる。その結果、歪みのない又は少ない画像を得ることができる。 The image pickup apparatus 100 detects the OB entry timing and the OB break timing, and corrects the time axis based on the detection result. As a result, distortion in the time direction due to jitter can be corrected. Further, it is possible to detect a time axis abnormality due to jitter. As a result, it is possible to obtain an image with no or little distortion.

同期検出部114、光学黒処理部116、及びレベル補正部122と時間軸補正部124とを含む画像処理部120は、モノリシックなIC(integrated circuit)、FPGA(field programmable gate array)、又はマイコンなどの処理回路に一緒に実装することができる。さらに、これらは共通部も多い。よって、少ないコストアップでレベル補正及び時間軸補正の両機能を追加することができる。 The image processing unit 120 including the synchronization detection unit 114, the optical black processing unit 116, and the level correction unit 122 and the time axis correction unit 124 may be a monolithic IC (integrated circuit), FPGA (field programmable gate array), microcomputer, or the like. Can be implemented together in the processing circuit of. Furthermore, these have many common parts. Therefore, both the level correction and the time axis correction functions can be added with a small cost increase.

なお、本発明は、上述した実施形態に限定されるものではない。上述した実施形態は、鏡を二次元駆動する二次元駆動式の撮像装置に関する。上述した手法は、鏡を一次元駆動する一次元駆動式の撮像装置、複数の鏡を備え、これらの鏡を駆動することで二次元又は三次元の画像を得る撮像装置、撮像スペクトル可変の鏡駆動式撮像装置、鏡で光源を走査する撮像装置などに適用することもできる。 The present invention is not limited to the above-described embodiment. The above-described embodiment relates to a two-dimensional drive type imaging device that drives a mirror two-dimensionally. The above-mentioned method includes a one-dimensional drive type imager that drives a mirror one-dimensionally, an imager that includes a plurality of mirrors and obtains a two-dimensional or three-dimensional image by driving these mirrors, and a mirror with a variable imaging spectrum. It can also be applied to a driven image pickup device, an image pickup device that scans a light source with a mirror, and the like.

撮像装置は、センサ102とは異なる、光を検出するセンサをさらに備えてもよい。このセンサは、画角マスク108を通過した光(鏡104により反射された光を含む)が当たらない位置に配置される。光学黒処理部116は、このセンサから出力される検出信号に基づいて画像の黒レベルを推定する。 The imaging device may further include a sensor that detects light, which is different from the sensor 102. This sensor is arranged at a position where the light passing through the angle of view mask 108 (including the light reflected by the mirror 104) does not hit. The optical black processing unit 116 estimates the black level of the image based on the detection signal output from this sensor.

撮像装置は、写界境界を強調する光を発生させる光源部(ガイド光源ともいう)を利用してもよい。 The image pickup apparatus may use a light source unit (also referred to as a guide light source) that generates light that emphasizes the boundary of the field.

図8は、本発明の一実施形態に係る鏡駆動式の撮像装置を概略的に示している。図8に示す撮像装置は、図1に示した構成に加えて、照明802及び反射装置804を備える。照明802及び反射装置804が写界境界を強調する光を発生させる光源部に対応する。 FIG. 8 schematically shows a mirror-driven imaging device according to an embodiment of the present invention. The image pickup apparatus shown in FIG. 8 includes an illumination 802 and a reflection apparatus 804 in addition to the configuration shown in FIG. The illumination 802 and the reflector 804 correspond to a light source unit that generates light that emphasizes the boundary of the field.

照明802及び反射装置804は、撮像装置の撮影部及び/又は被写体に相対的に固定される。図8に示す例では、照明802は撮影部の鏡筒200に固定され、照明802及び反射装置804はそれらの間に被写体が位置するように配置される。反射装置804は反射部806及び遮光部808を有する。反射部806は照明802から照射された光を反射する。遮光部808は照明802から照射された光を遮光(例えば吸収)する。図8に示す例では、反射部806は構造物の1つの面であり、遮光部808はこの面の一部に取り付けられた光吸収部材であり、撮影範囲の中央部分に遮光部808が位置し、撮影範囲の両端部に反射部806が位置する。遮光部808はすべての光を吸収せずともよく、例えば18%反射など、撮影バックとして一般的な反射率でもよい。 The illumination 802 and the reflection device 804 are relatively fixed to the photographing unit and / or the subject of the imaging device. In the example shown in FIG. 8, the illumination 802 is fixed to the lens barrel 200 of the photographing unit, and the illumination 802 and the reflector 804 are arranged so that the subject is positioned between them. The reflection device 804 has a reflection unit 806 and a light shielding unit 808. The reflection unit 806 reflects the light emitted from the illumination 802. The light-shielding unit 808 blocks (for example, absorbs) the light emitted from the illumination 802. In the example shown in FIG. 8, the reflection portion 806 is one surface of the structure, the light shielding portion 808 is a light absorbing member attached to a part of this surface, and the light shielding portion 808 is located in the central portion of the photographing range. Then, the reflecting portions 806 are located at both ends of the photographing range. The light-shielding unit 808 does not have to absorb all the light, and may have a reflectance that is common as a shooting back, such as 18% reflection.

図9は、図8に示した状況で被写体を撮像することで得られる画像を模式的に示している。図9に示すように、撮影範囲908の内側中央のガイド光遮光による撮像バック領域904は遮光部808に対応する。撮影範囲908の内側であって撮像バック領域904の両端にあるガイド光領域902は、反射部806に対応し、明るい領域である。撮影範囲908の外側の画像領域906は、走査位置が画角外であるときの画像領域であり、暗い領域である。ガイド光領域902及び画像領域906は隣接しており、ガイド光領域902と画像領域906との間でコントラストが大きくなっている。このように、照明802及び反射装置804を使用することにより、写界境界を強調することができる。その結果、OB入りタイミング及びOB明けタイミングをより正確に検出することができ、画像の歪みをより効果的に低減することができるようになる。 FIG. 9 schematically shows an image obtained by photographing a subject in the situation shown in FIG. As shown in FIG. 9, the imaging back region 904 by the guide light shading in the inner center of the photographing range 908 corresponds to the shading portion 808. The guide light regions 902 inside the photographing range 908 and at both ends of the imaging back region 904 are bright regions corresponding to the reflecting portion 806. The image area 906 outside the shooting range 908 is an image area when the scanning position is outside the angle of view, and is a dark area. The guide light region 902 and the image region 906 are adjacent to each other, and the contrast between the guide light region 902 and the image region 906 is large. In this way, the field boundary can be emphasized by using the illumination 802 and the reflector 804. As a result, the OB entry timing and the OB break timing can be detected more accurately, and the distortion of the image can be reduced more effectively.

図8に示す構成では、水平方向のジッタ補正を行うために、遮光部808の左右に反射部806が設けられている。これに変えて又は追加的に、垂直方向のジッタ補正を行うために、遮光部808の上下に反射部806を設けるようにしてもよい。 In the configuration shown in FIG. 8, reflecting portions 806 are provided on the left and right sides of the light-shielding portion 808 in order to perform jitter correction in the horizontal direction. Alternatively or additionally, reflecting portions 806 may be provided above and below the light shielding portion 808 in order to perform jitter correction in the vertical direction.

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 Although some embodiments of the present invention have been described, these embodiments are presented as examples and are not intended to limit the scope of the invention. These novel embodiments can be implemented in various other embodiments, and various omissions, replacements, and changes can be made without departing from the gist of the invention. These embodiments and modifications thereof are included in the scope and gist of the invention, and are also included in the scope of the invention described in the claims and the equivalent scope thereof.

100…撮像装置、102…センサ、104…鏡、106…鏡駆動装置、108…画角マスク、110…タイミング発生器、112…鏡制御部、114…同期検出部、116…光学黒処理部、120…画像処理部、122…レベル補正部、124…時間軸補正部、200…鏡筒、202…鏡筒下部、802…照明、804…反射装置、806…反射部、808…遮光部、902…ガイド光領域、904…カイド光遮光による撮像バック領域、906…画像領域、908…撮影範囲、1000…撮像装置、1002…センサ、1004…鏡、1006…鏡駆動装置、1010…タイミング発生器、1012…鏡制御部、1020…画像処理部、1022…レベル補正部。 100 ... Imaging device, 102 ... Sensor, 104 ... Mirror, 106 ... Mirror drive device, 108 ... Angle mask, 110 ... Timing generator, 112 ... Mirror control unit, 114 ... Synchronous detection unit, 116 ... Optical black processing unit, 120 ... Image processing unit, 122 ... Level correction unit, 124 ... Time axis correction unit, 200 ... Lens barrel, 202 ... Lower lens barrel, 802 ... Lighting, 804 ... Reflector, 806 ... Reflection unit, 808 ... Shading unit, 902 ... Guide light region, 904 ... Imaging back region by shielding light shading, 906 ... Image region, 908 ... Shooting range, 1000 ... Imaging device, 1002 ... Sensor, 1004 ... Mirror, 1006 ... Mirror drive device, 1010 ... Timing generator, 1012 ... Mirror control unit, 1020 ... Image processing unit, 1022 ... Level correction unit.

Claims (7)

光を検出して第1の検出信号を生成する第1のセンサと、
画角外の光を遮光する画角マスクと、
前記画角マスクを通過した光を前記第1のセンサへ反射する鏡と、
前記画角マスクを通過した光を走査するために、前記鏡を駆動する鏡駆動装置と、
前記第1の検出信号に基づいて画像を生成する画像生成部と、
を備える撮像装置。
A first sensor that detects light and generates a first detection signal,
An angle of view mask that blocks light outside the angle of view,
A mirror that reflects the light that has passed through the angle of view mask to the first sensor, and
A mirror drive device that drives the mirror to scan the light that has passed through the angle of view mask.
An image generation unit that generates an image based on the first detection signal, and an image generation unit.
An imaging device comprising.
走査位置が前記画角外にあるときに前記第1のセンサにより得られた第1の検出信号に基づいて画像の黒レベルを推定する光学黒処理部をさらに備え、
前記画像生成部は、前記黒レベルの推定結果に基づいて前記第1の検出信号に対して黒レベル補正を行う、
請求項1に記載の撮像装置。
An optical black processing unit that estimates the black level of an image based on the first detection signal obtained by the first sensor when the scanning position is outside the angle of view is further provided.
The image generation unit corrects the black level for the first detection signal based on the estimation result of the black level.
The imaging device according to claim 1.
前記画角マスクを通過した光が当たらない位置に配置され、光を検出して第2の検出信号を生成する第2のセンサと、
前記第2の検出信号に基づいて画像の黒レベルを推定する光学黒処理部と、
をさらに備え、
前記画像生成部は、前記黒レベルの推定結果に基づいて前記第1の検出信号に対して黒レベル補正を行う、
請求項1に記載の撮像装置。
A second sensor that is arranged at a position where the light that has passed through the angle of view mask does not hit, detects the light, and generates a second detection signal.
An optical black processing unit that estimates the black level of an image based on the second detection signal, and an optical black processing unit.
With more
The image generation unit corrects the black level for the first detection signal based on the estimation result of the black level.
The imaging device according to claim 1.
前記第1の検出信号に基づいて、走査位置が前記画角外から前記画角内に入ったタイミングと走査位置が前記画角内から前記画角外へ出たタイミングとの少なくとも一方を含む同期タイミングを検出する同期検出部をさらに備え、
前記画像生成部は、前記同期タイミングの検出結果に基づいて、前記第1の検出信号に対して時間軸補正を行う、
請求項1乃至3のいずれか1項に記載の撮像装置。
Synchronization including at least one of a timing at which the scanning position enters the angle of view from outside the angle of view and a timing at which the scanning position exits from within the angle of view based on the first detection signal. It also has a synchronous detector that detects the timing.
The image generation unit corrects the time axis for the first detection signal based on the detection result of the synchronization timing.
The imaging device according to any one of claims 1 to 3.
前記鏡駆動装置は、前記画角マスクを通過した光を二次元的に走査するために、前記鏡を駆動し、
前記第1の検出信号は、複数の画素列に対応する検出信号を含み、
前記画像生成部は、各画素列について前記検出結果が妥当であるか否かを判定し、前記検出結果が妥当である場合、当該画素列に対応する検出信号に対して時間軸補正を行い、前記検出結果が妥当でない場合、当該画素列に近接する画素列に対応する検出信号を用いて当該画素列に対応する検出信号に対して時間軸補正を行う、
請求項4に記載の撮像装置。
The mirror driving device drives the mirror in order to two-dimensionally scan the light that has passed through the angle of view mask.
The first detection signal includes detection signals corresponding to a plurality of pixel sequences, and includes detection signals.
The image generation unit determines whether or not the detection result is valid for each pixel sequence, and if the detection result is valid, performs time axis correction on the detection signal corresponding to the pixel sequence. If the detection result is not valid, the detection signal corresponding to the pixel string close to the pixel string is used to perform time axis correction on the detection signal corresponding to the pixel string.
The imaging device according to claim 4.
撮影範囲の境界を強調する光を発生させる光源部をさらに備える請求項1乃至5のいずれか1項に記載の撮像装置。 The imaging device according to any one of claims 1 to 5, further comprising a light source unit that generates light that emphasizes the boundary of the photographing range. 前記光源部は、光源と、前記光源からの光を反射する反射部及び前記光源からの光を遮光する遮光部を含む反射装置と、を備える、請求項6に記載の撮像装置。 The imaging device according to claim 6, wherein the light source unit includes a light source, a reflecting unit that reflects light from the light source, and a reflecting device that includes a light-shielding unit that blocks light from the light source.
JP2020037542A 2020-03-05 2020-03-05 Imaging apparatus Pending JP2021141433A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020037542A JP2021141433A (en) 2020-03-05 2020-03-05 Imaging apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020037542A JP2021141433A (en) 2020-03-05 2020-03-05 Imaging apparatus

Publications (1)

Publication Number Publication Date
JP2021141433A true JP2021141433A (en) 2021-09-16

Family

ID=77669153

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020037542A Pending JP2021141433A (en) 2020-03-05 2020-03-05 Imaging apparatus

Country Status (1)

Country Link
JP (1) JP2021141433A (en)

Similar Documents

Publication Publication Date Title
JP5315574B2 (en) Imaging device
JP4983271B2 (en) Imaging device
KR20120068655A (en) Method and camera device for capturing iris or subject of good quality with one bandpass filter passing both visible ray and near infra red ray
US20120200832A1 (en) Image projection device, image protection method, distance measuring device and distance measuring method
US9160918B2 (en) Focus control apparatus and method for performing focus control by phase difference detection, and image capturing apparatus
JP2009124573A (en) Imaging apparatus
JP4858179B2 (en) Focus detection apparatus and imaging apparatus
EP1944958B1 (en) Image capturing device and method of capturing an image
JP2010085472A (en) Image projection/imaging apparatus
US20080238820A1 (en) Motion picture image processing system and motion picture image processing method
US7724298B2 (en) Image processing system and method for pick up and display of an object including division of an optical image of the object into a spectrum
JP2021141433A (en) Imaging apparatus
WO2020250739A1 (en) Projection control device, projection apparatus, projection control method, and projection control program
JP2011040839A (en) Optical device and digital camera
US9638644B2 (en) Multiple mode inspection system and method for evaluating a substrate by a multiple mode inspection system
KR101145767B1 (en) Omnidirectional camera
JPWO2019045094A1 (en) Scanning fundus photography device
JP5621189B2 (en) LCD panel focus positioning method
WO2021019897A1 (en) Control device, projection system, control method, and control program
JPH11196315A (en) Image reader
JP5343249B2 (en) Camera with viewfinder display function by optical scanning
JP2006259078A (en) In-finder display apparatus for single-lens reflex camera
WO2020261852A1 (en) Projection device
JP4817637B2 (en) Image display apparatus and imaging apparatus having the same
WO2022209125A1 (en) Image capture control device, image capture device, image capture control method, and program