JP2017207450A - Imaging optical system and imaging apparatus - Google Patents

Imaging optical system and imaging apparatus Download PDF

Info

Publication number
JP2017207450A
JP2017207450A JP2016101824A JP2016101824A JP2017207450A JP 2017207450 A JP2017207450 A JP 2017207450A JP 2016101824 A JP2016101824 A JP 2016101824A JP 2016101824 A JP2016101824 A JP 2016101824A JP 2017207450 A JP2017207450 A JP 2017207450A
Authority
JP
Japan
Prior art keywords
optical system
lens
imaging optical
imaging
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016101824A
Other languages
Japanese (ja)
Other versions
JP6825231B2 (en
Inventor
渚 石原
Nagisa Ishihara
渚 石原
祥 永井
Sho Nagai
祥 永井
佐藤 裕之
Hiroyuki Sato
裕之 佐藤
大樹 美馬
Daiki Mima
大樹 美馬
丸山 剛
Takeshi Maruyama
剛 丸山
正幸 藤島
Masayuki Fujishima
正幸 藤島
宏之 山下
Hiroyuki Yamashita
宏之 山下
千恵子 畑下
Chieko Hatashita
千恵子 畑下
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2016101824A priority Critical patent/JP6825231B2/en
Publication of JP2017207450A publication Critical patent/JP2017207450A/en
Application granted granted Critical
Publication of JP6825231B2 publication Critical patent/JP6825231B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Spectrometry And Color Measurement (AREA)
  • Blocking Light For Cameras (AREA)
  • Lenses (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an imaging optical system capable of effectively utilizing a pixel number held in an image pick-up device.SOLUTION: An imaging optical system 101 includes: an image formation optical system 10 configured to condense light L from a subject Q to form an image at an image formation position 15; an aperture diaphragm 20 arranged in the image formation position 15; a lens array 31 arranged closer to an image than the aperture diaphragm 20 and having a plurality of lenses 32; and an image pick-up device 40 arranged at a position conjugate to the aperture diaphragm 20 interposing the lens array 31 and having a light-receiving surface 41 configured to receive light flux L' having penetrated the lens array 31. The lenses 32 are aligned on an XY plane vertical to an optical axis O of the lenses and have respectively different lens intervals in two directions orthogonal to each other and vertical to the optical axis O.SELECTED DRAWING: Figure 1

Description

本発明は、撮像光学系及び撮像装置に関する。   The present invention relates to an imaging optical system and an imaging apparatus.

結像光学系の像側位置にレンズアレイを配置して、光線の位置情報と方向情報とを取得して撮影後に画像のピント位置を変えることができるプレノプティックカメラと呼ばれる撮像装置が知られている(例えば特許文献1、2等参照)。
このような撮像装置の応用技術として、分光フィルタを光路上に挿入して波長別に光を分割して複数の分光が像を同時に取得する分光カメラと呼ばれる技術がある(例えば特許文献3〜6等参照)。
An imaging device called a plenoptic camera is known that can arrange a lens array at the image side position of the imaging optical system, acquire the position information and direction information of the light beam, and change the focus position of the image after shooting. (See, for example, Patent Documents 1 and 2).
As an application technique of such an image pickup apparatus, there is a technique called a spectroscopic camera in which a spectral filter is inserted in an optical path to divide light according to wavelength and a plurality of spectra acquire images simultaneously (for example, Patent Documents 3 to 6) reference).

分光カメラでは、光線の位置情報をレンズアレイのレンズの位置、光線の方向情報を色情報として撮像素子のセンサ面に受光することでそれぞれ記録する。開口絞りとセンサ面とは互いに共役関係にあり、開口絞りにおける中間像が共役像としてセンサ面に投影される。
ところで、色情報の分解能を向上させるためには、センサ面上になるべく多くの画像を投影する必要があるが、位置情報の分解能は共役像の大きさに反比例して減少する。
そのため、撮像素子の持つ画素数を最大限有効利用する技術が求められていた。
In the spectroscopic camera, the position information of the light beam is recorded on the sensor surface of the image sensor as the position of the lens of the lens array and the direction information of the light beam is received as color information. The aperture stop and the sensor surface are conjugate to each other, and an intermediate image at the aperture stop is projected onto the sensor surface as a conjugate image.
Incidentally, in order to improve the resolution of color information, it is necessary to project as many images as possible on the sensor surface, but the resolution of position information decreases in inverse proportion to the size of the conjugate image.
For this reason, there has been a demand for a technique that makes the maximum use of the number of pixels of the image sensor.

本発明は、以上のような問題点に鑑みてなされたものであり、撮像素子の持つ画素数を有効利用する撮像光学系の提供を目的とする。   The present invention has been made in view of the above problems, and an object thereof is to provide an imaging optical system that effectively uses the number of pixels of an imaging element.

上述した課題を解決するため、本発明の撮像光学系は、被写体からの光束を集光して結像位置に結像する結像光学系と、前記結像位置に配置された開口絞りと、前記開口絞りよりも像側に配置され、複数のレンズを備えるレンズアレイと、前記レンズアレイを挟んで前記開口絞りと共役な位置に配置されて、前記レンズアレイを透過した光束を受光する受光面を備える撮像素子と、を有し、前記レンズは、当該レンズの光軸に垂直な平面上に配列され、当該光軸に垂直で互いに直交する2方向において、互いに異なるレンズ間隔を有する。   In order to solve the above-described problem, an imaging optical system according to the present invention includes an imaging optical system that focuses a light beam from a subject and forms an image at an imaging position, an aperture stop disposed at the imaging position, A lens array that is disposed on the image side of the aperture stop and includes a plurality of lenses, and a light receiving surface that is disposed at a position conjugate with the aperture stop across the lens array and that receives a light beam transmitted through the lens array The lens is arranged on a plane perpendicular to the optical axis of the lens, and has different lens intervals in two directions perpendicular to the optical axis and perpendicular to each other.

本発明の撮像光学系によれば、撮像素子の持つ画素数を有効利用することができる。   According to the imaging optical system of the present invention, the number of pixels of the imaging element can be effectively used.

本発明の実施形態に係る撮像装置の全体構成の一例を示す図である。1 is a diagram illustrating an example of an overall configuration of an imaging apparatus according to an embodiment of the present invention. 図1に示した開口絞りの構成の一例を示す平面図である。It is a top view which shows an example of a structure of the aperture stop shown in FIG. 本発明の実施形態に係るレンズアレイの構成の一例を示す平面図である。It is a top view which shows an example of a structure of the lens array which concerns on embodiment of this invention. 本発明の実施形態に係るフィルタアレイの構成の一例を示す平面図である。It is a top view which shows an example of a structure of the filter array which concerns on embodiment of this invention. 本発明の実施形態に係る撮像素子の構成の一例を示す平面図である。It is a top view which shows an example of a structure of the image pick-up element which concerns on embodiment of this invention. 本発明の実施形態に係る光路の一例を示す模式図である。It is a schematic diagram which shows an example of the optical path which concerns on embodiment of this invention. 本発明の実施形態における各レンズ位置での光路長の差を示す図である。It is a figure which shows the difference of the optical path length in each lens position in embodiment of this invention. 本発明の実施形態におけるレンズの入射波長による焦点距離の変化を示す相関図である。It is a correlation diagram which shows the change of the focal distance by the incident wavelength of the lens in embodiment of this invention. 本発明の実施形態におけるレンズの波長の長さを考慮した実効焦点距離の一例を示す相関図である。It is a correlation diagram which shows an example of the effective focal distance which considered the length of the wavelength of the lens in embodiment of this invention. レンズ径の違いを誇張して一例として示す平面図である。It is a top view which exaggerates the difference in a lens diameter as an example.

本発明の実施形態の一例として図1に撮像装置たる分光カメラ100の概略構成を示す。   As an example of an embodiment of the present invention, FIG. 1 shows a schematic configuration of a spectroscopic camera 100 as an imaging apparatus.

分光カメラ100は、図1に示すように、第1群1と、第2群2と、第3群3とを有する撮像光学系101を有している。
分光カメラ100は、被写体Qからの光束たる光Lを集光して結像位置15に結像する結像光学系10を備える第1群1と、結像位置15に配置された開口絞り20と開口絞り20の像側に配置されたフィールドレンズ22とを備えた第2群2と、を有している。
分光カメラ100は、開口絞り20よりも像側に配置された第3群3と、第3群3を挟んで開口絞り20と共役な位置に配置されて、第3群3を透過した光束を受光する受光面41を備える撮像素子40を有している。
なお、以降の説明では、結像光学系10の光軸O’が延びる方向をZ方向とし、Z方向に垂直な方向のうち、鉛直上方をY方向、Z方向とY方向とに垂直な方向である水平方向をX方向とする。また、撮像素子40の中心と結像光学系10の光軸O’とは一致するように配置されることが望ましい。
As shown in FIG. 1, the spectroscopic camera 100 includes an imaging optical system 101 having a first group 1, a second group 2, and a third group 3.
The spectroscopic camera 100 includes a first group 1 including an imaging optical system 10 that focuses light L as a luminous flux from a subject Q and forms an image at an imaging position 15, and an aperture stop 20 disposed at the imaging position 15. And a second group 2 including a field lens 22 disposed on the image side of the aperture stop 20.
The spectroscopic camera 100 is arranged with a third group 3 disposed on the image side of the aperture stop 20 and a position conjugate with the aperture stop 20 with the third group 3 interposed therebetween. The imaging device 40 includes a light receiving surface 41 that receives light.
In the following description, the direction in which the optical axis O ′ of the imaging optical system 10 extends is the Z direction, and among the directions perpendicular to the Z direction, the vertical direction is the Y direction, and the directions perpendicular to the Z direction and the Y direction. The horizontal direction is defined as the X direction. In addition, it is desirable that the center of the image sensor 40 and the optical axis O ′ of the imaging optical system 10 are arranged to coincide with each other.

結像光学系10は、少なくとも1つの正のパワーのレンズを有する集光光学系であり、結像位置15に中間像を結像する。   The imaging optical system 10 is a condensing optical system having at least one positive power lens, and forms an intermediate image at the imaging position 15.

第2群2は、結像位置15に配置された開口絞り20と開口絞り20の像側に配置されたフィールドレンズ22とを有している。
開口絞り20は、図2に示すように、縦横比X:Y=4:3の矩形の視野画定領域たる開口21を有する視野絞りである。開口絞り20は、結像光学系10によって集光された光Lの入射光量を制限するための光量制限部としての機能を有している。
フィールドレンズ22は、開口21を通過した光Lの集光効率を向上させるために、結像位置15の+Z方向側の近傍に配置された凸レンズである。
フィールドレンズ22は、開口21を通過した光Lを、Z方向に平行な方向へと近づけるように偏向することで、光Lが不必要に散乱することを防いで、光Lの利用効率を向上させるための集光手段である。なお、フィールドレンズ22は本実施形態では単凸レンズであるとしたが、複数のレンズで構成するとしても良い。また、本実施形態ではフィールドレンズとしたが、フィールドレンズではなくコリメートレンズなどを用いて平行光へと変えるとしても良い。
なお、かかるフィールドレンズ22は、開口絞り20とレンズアレイ31との間に配置されれば良いが、開口21を通過した光Lを、Z方向に平行な方向へと近づけるように偏向するためには、開口絞り20の近傍であることが望ましい。
The second group 2 includes an aperture stop 20 disposed at the imaging position 15 and a field lens 22 disposed on the image side of the aperture stop 20.
As shown in FIG. 2, the aperture stop 20 is a field stop having an opening 21 that is a rectangular field defining region having an aspect ratio of X: Y = 4: 3. The aperture stop 20 has a function as a light quantity limiting unit for limiting the incident light quantity of the light L condensed by the imaging optical system 10.
The field lens 22 is a convex lens arranged in the vicinity of the imaging position 15 on the + Z direction side in order to improve the light collection efficiency of the light L that has passed through the opening 21.
The field lens 22 deflects the light L that has passed through the opening 21 so as to approach the direction parallel to the Z direction, thereby preventing the light L from being unnecessarily scattered and improving the utilization efficiency of the light L. It is the condensing means for making it. The field lens 22 is a single convex lens in this embodiment, but may be composed of a plurality of lenses. In this embodiment, the field lens is used. However, instead of the field lens, a collimating lens or the like may be used to change to parallel light.
The field lens 22 may be disposed between the aperture stop 20 and the lens array 31. However, in order to deflect the light L that has passed through the aperture 21 so as to approach the direction parallel to the Z direction. Is preferably in the vicinity of the aperture stop 20.

なお、以降の説明において、近傍とは光学的設計を変更しない程度の範囲で近しいことを指し、例えば結像位置15の近傍と言ったときには、結像位置15を含んで±Z方向に、光学設計上の誤差や公差を含んだ位置の範囲内であることを示す。   In the following description, the term “near” means that the optical design is close within a range that does not change the optical design. For example, when the term “near the imaging position 15” is used, Indicates that the position is within the range of the position including the design error and tolerance.

図1に示すように、第3群3は、XY平面に複数のレンズ32が並べて配置されたレンズアレイ31と、レンズアレイ31の+Z側に配置されて互いに異なる波長透過特性を備えた複数の分光フィルタ34を有する分光部たるフィルタアレイ33と、を有している。   As shown in FIG. 1, the third group 3 includes a lens array 31 in which a plurality of lenses 32 are arranged side by side on an XY plane, and a plurality of lenses having different wavelength transmission characteristics that are arranged on the + Z side of the lens array 31. And a filter array 33 serving as a spectroscopic unit having the spectroscopic filter 34.

レンズ32は、図3に示すように、XY平面上に2次元的に配列された態様でレンズアレイ31に支持された非球面レンズである。レンズ32のレンズ光軸Oは、何れもZ軸に平行である。
レンズ32は、X方向には互いにレンズ光軸O間の距離Lだけ離れて配置され、Y方向には互いにレンズ光軸O間の距離Lだけ離れて配置されている。言い換えると、レンズ32のX方向におけるレンズ間隔がLであり、レンズ32のY方向におけるレンズ間隔がLである。
また、本実施形態でのレンズ間隔の縦横比は、開口21の縦横比と等しく、さらに後述する撮像素子40の受光面41の縦横比とも等しく、縦横比L:L=4:3である。
レンズ32は本実施形態では4行4列の16個配置されており、それぞれ図3に示すようにA、B、C、Dのそれぞれのグループに分けられている。
As shown in FIG. 3, the lens 32 is an aspherical lens supported by the lens array 31 in a two-dimensional arrangement on the XY plane. The lens optical axis O of the lens 32 is parallel to the Z axis.
Lens 32, the X-direction are arranged at a distance L 1 between the lens optical axis O to each other and are spaced apart by a distance L 2 between the lens optical axis O to each other in the Y direction. In other words, the distance between the lenses in the X direction of the lens 32 is L 1, the distance between the lenses in the Y direction of the lens 32 is L 2.
Further, the aspect ratio of the lens interval in this embodiment is equal to the aspect ratio of the opening 21 and also to the aspect ratio of the light receiving surface 41 of the image sensor 40 described later, and the aspect ratio is L 1 : L 2 = 4: 3. is there.
In this embodiment, 16 lenses of 4 rows and 4 columns are arranged in this embodiment, and are divided into groups A, B, C, and D as shown in FIG.

レンズ32は、後述する表1に示すように、それぞれのレンズ32が対応する分光フィルタ34の波長透過特性によって、個々のレンズ32の−Z方向側のレンズ面R1と、+Z方向側のレンズ面R2との曲率によって、焦点距離fが異なるように設定されている。   As shown in Table 1 described later, the lens 32 has a lens surface R1 on the −Z direction side and a lens surface on the + Z direction side of each lens 32 depending on the wavelength transmission characteristics of the spectral filter 34 to which each lens 32 corresponds. The focal length f is set to be different depending on the curvature with R2.

フィルタアレイ33は、図4に示すように、互いに波長透過特性の異なる分光フィルタ34がXY平面にアレイ状に並べて配置される。なお、各分光フィルタ34は、レンズ32のA、B、C、Dそれぞれのグループに対応して配置され、同一の符号が付された各レンズ32からの光Lが入射するように位置が決定される。
すなわち分光フィルタ34は、対応するレンズ32を通過したそれぞれの光Lを分光して、分光フィルタ34の波長透過特性に従って特定の波長域のみを透過する分光手段である。
分光フィルタ34は、例えばバンドパスフィルタなどの光学フィルタが望ましい。なお、本実施形態では、分光フィルタ34を設けた場合についてのみ示すが、かかる分光フィルタ34を設けなくとも良い。その場合には、後述する撮像素子40の受光面41には、波長λに差のない複数画像が結像されることとなるので、色情報の代わりに被写体Qまでの距離情報を取得できる。
As shown in FIG. 4, in the filter array 33, spectral filters 34 having different wavelength transmission characteristics are arranged in an array on the XY plane. Each spectral filter 34 is arranged corresponding to each group of A, B, C, and D of the lens 32, and the position is determined so that the light L from each lens 32 to which the same reference numeral is attached enters. Is done.
That is, the spectral filter 34 is a spectroscopic unit that splits each light L that has passed through the corresponding lens 32 and transmits only a specific wavelength region according to the wavelength transmission characteristics of the spectral filter 34.
The spectral filter 34 is preferably an optical filter such as a bandpass filter. In the present embodiment, only the case where the spectral filter 34 is provided is shown, but the spectral filter 34 may not be provided. In this case, a plurality of images having no difference in wavelength λ are formed on the light receiving surface 41 of the image sensor 40 described later, so that distance information to the subject Q can be acquired instead of color information.

撮像素子40は、図5に示すように、縦横の長さの比すなわち縦横比が4:3の矩形形状の受光素子である。
撮像素子40は、撮像素子40の−Z方向側の表面に並べて配置され、レンズ32を透過した光Lを受光する矩形形状の複数の受光面41を有している。
受光面41は、分光フィルタ34あるいはレンズ32と同様に、A、B、C、Dの各グループに分けられて配置されている。また、各受光面41は、撮像素子40の表面を16分割した態様で並べて配置されている。すなわち受光面41の縦横比は何れも、撮像素子40の縦横比4:3と等しい。
このように受光面41の縦横比と、レンズ32のレンズ間隔L、Lの比とが一致することで、レンズ32と受光面41とが互いに対向して配置されることとなる。
従って受光面41には、それぞれ、対応するレンズ32のA、B、C、Dでグループ分けされた光Lが入射する。受光面41は、結像位置15において形成された中間像が、レンズ32を含む第3群3によって再度集光されて結像する焦点Fの近傍に配置されている。
As shown in FIG. 5, the image sensor 40 is a rectangular light-receiving element having a length-to-width ratio, that is, an aspect ratio of 4: 3.
The image sensor 40 is arranged side by side on the surface of the image sensor 40 on the −Z direction side, and has a plurality of rectangular light receiving surfaces 41 that receive the light L transmitted through the lens 32.
Similar to the spectral filter 34 or the lens 32, the light receiving surface 41 is arranged in groups of A, B, C, and D. The light receiving surfaces 41 are arranged side by side in a manner in which the surface of the image sensor 40 is divided into 16 parts. That is, the aspect ratio of the light receiving surface 41 is equal to the aspect ratio 4: 3 of the image sensor 40.
As described above, the aspect ratio of the light receiving surface 41 and the ratio of the lens intervals L 1 and L 2 of the lens 32 coincide with each other, so that the lens 32 and the light receiving surface 41 are arranged to face each other.
Accordingly, the light L grouped by A, B, C, and D of the corresponding lens 32 is incident on the light receiving surface 41, respectively. The light receiving surface 41 is disposed in the vicinity of the focal point F at which the intermediate image formed at the imaging position 15 is condensed again by the third group 3 including the lens 32 to form an image.

かかる構成の分光カメラ100を用いて、被写体Qの色情報を含む画像情報を取得する方法について説明する。   A method for acquiring image information including color information of the subject Q using the spectroscopic camera 100 having such a configuration will be described.

被写体Qから広がった光Lは、分光カメラ100の第1群1に入射し、結像光学系10の結像位置15において中間像を形成する。
結像位置15の近傍には、開口絞り20が配置されており、開口絞り20によって結像されない不要光は排除される。
開口21を透過した光Lは、フィールドレンズ22によって第1群1の光軸O’に沿った方向へと偏向される。
The light L spreading from the subject Q is incident on the first group 1 of the spectroscopic camera 100 and forms an intermediate image at the imaging position 15 of the imaging optical system 10.
An aperture stop 20 is disposed in the vicinity of the imaging position 15, and unnecessary light that is not imaged by the aperture stop 20 is excluded.
The light L that has passed through the opening 21 is deflected by the field lens 22 in the direction along the optical axis O ′ of the first group 1.

光Lがレンズアレイ31に入射すると、光Lは、レンズアレイ31上に配列されたレンズ32のそれぞれの位置に従って分割される。
それぞれのレンズ32を透過した光Lは、分光フィルタ34によって特定の波長λ(nm)の成分だけが透過されて、それぞれのレンズ32に対応する位置に配置された受光面41上で結像する。
言い換えると、レンズアレイ31と撮像素子40との間には互いに異なる波長透過特性を備える分光フィルタ34が配置されて受光面41のそれぞれへ向けて互いに異なる波長λ(nm)の帯域を持つ光束L’を照射する。
When the light L enters the lens array 31, the light L is divided according to the positions of the lenses 32 arranged on the lens array 31.
The light L transmitted through each lens 32 is transmitted only by a component having a specific wavelength λ (nm) by the spectral filter 34, and forms an image on the light receiving surface 41 disposed at a position corresponding to each lens 32. .
In other words, a spectral filter 34 having different wavelength transmission characteristics is disposed between the lens array 31 and the image sensor 40, and the light flux L having different wavelength λ (nm) bands toward the respective light receiving surfaces 41. Irradiate.

光束L’は受光面41において結像されるから、撮像素子40の受光面41上には、図6に示すように、同一の被写体Qについて、波長λ(nm)が異なる像が形成される。
例えば本実施形態においては、撮像素子40には、受光面41が16個形成されているから、16個の異なる波長λ(nm)の被写体Qの像が形成されることとなる。
分光カメラ100は、かかる構成により、被写体Qの異なる色情報を持った複数の画像を撮影することができる。
Since the light beam L ′ is imaged on the light receiving surface 41, images having different wavelengths λ (nm) are formed on the light receiving surface 41 of the image sensor 40 for the same subject Q as shown in FIG. .
For example, in the present embodiment, since 16 light receiving surfaces 41 are formed on the image sensor 40, 16 images of the subject Q having different wavelengths λ (nm) are formed.
With this configuration, the spectroscopic camera 100 can capture a plurality of images having different color information of the subject Q.

なお、本実施形態では説明を省略するが、分光カメラ100はかかる複数の画像を合成することで、被写体の色情報が正確に再現された画像を得ることが出来る。また、本実施形態では、受光面41は4行4列の16個としたが、複数であれば3×3の9個でも良いし、その他の個数であっても良い。   Although not described in the present embodiment, the spectroscopic camera 100 can obtain an image in which the color information of the subject is accurately reproduced by combining the plurality of images. In the present embodiment, the number of light receiving surfaces 41 is 16 in 4 rows and 4 columns. However, as long as there are a plurality of light receiving surfaces 41, the number of light receiving surfaces 41 may be 9 of 3 × 3, or any other number.

上述したように、分光カメラ100が正確に被写体Qの画像を得るためには、受光面41にそれぞれのレンズ32を通過した光束L’が像を結ぶ必要がある。
この点についてさらに詳しく説明する。
まず、図1に示すように、レンズアレイ31と撮像素子40とは互いに対向して配置されており、レンズアレイ31と撮像素子40との間の距離Zは一定である。
As described above, in order for the spectroscopic camera 100 to accurately obtain an image of the subject Q, the light beams L ′ that have passed through the respective lenses 32 need to form an image on the light receiving surface 41.
This point will be described in more detail.
First, as shown in FIG. 1, the lens array 31 and the image sensor 40 are arranged to face each other, and the distance Z 1 between the lens array 31 and the image sensor 40 is constant.

しかしながら、図6に誇張して示すように、レンズアレイ31を透過した光束L’は、撮像素子40の中心付近である光軸O’近傍と、撮像素子40の周縁部とでは、光束L’が光軸O’から傾斜する分だけ光路長Zが異なる。
具体的には、撮像素子40の光軸O’近傍である中心部分、グループAの受光面41に入射する光束L’と、グループB、C、Dの受光面41に入射する光束L’とでは、光路長Zが図7に示すように異なっている。
However, as exaggeratedly shown in FIG. 6, the light beam L ′ transmitted through the lens array 31 is light flux L ′ between the vicinity of the optical axis O ′ that is near the center of the image sensor 40 and the peripheral portion of the image sensor 40. There are different amount corresponding optical path length Z 2 inclined from the optical axis O '.
Specifically, the light flux L ′ incident on the light receiving surface 41 of the group A, the light beam L ′ incident on the light receiving surfaces 41 of the groups B, C, and D, and the central portion near the optical axis O ′ of the image sensor 40. in the optical path length Z 2 are different as shown in FIG.

さらに、レンズ32の屈折率Nは、ナトリウムのd線(波長λ=589.3nm)に対してN=1.53であるが、かかる屈折率Nには波長依存性がある。すなわち、レンズ32の焦点距離fは、透過する光束L’の波長λによって図8に示すように異なってしまう。   Further, the refractive index N of the lens 32 is N = 1.53 with respect to the d-line of sodium (wavelength λ = 589.3 nm), but the refractive index N has wavelength dependency. That is, the focal length f of the lens 32 varies depending on the wavelength λ of the transmitted light beam L ′ as shown in FIG.

以上のような問題に鑑みて、レンズ32の焦点Fまでの距離すなわち焦点距離fは、表1に示すように、それぞれのグループA、B、C、Dと、当該レンズ32に対応する分光フィルタ34の波長透過特性とを考慮して決定されることが望ましい。
本実施形態ではさらに、それぞれのグループA、B、C、Dに配置された分光フィルタ34の透過する光束L’の波長λを考慮しており、実効焦点距離は、図9に示すように設定される。
In view of the problems as described above, the distance to the focal point F of the lens 32, that is, the focal length f, as shown in Table 1, is a spectral filter corresponding to each group A, B, C, D and the lens 32. It is desirable to determine in consideration of the 34 wavelength transmission characteristics.
Further, in the present embodiment, the wavelength λ of the light beam L ′ transmitted through the spectral filters 34 arranged in the respective groups A, B, C, and D is taken into consideration, and the effective focal length is set as shown in FIG. Is done.

Figure 2017207450
Figure 2017207450

また、このようにレンズ32の個々の焦点距離fを変える場合には、単に焦点距離fを変えるのみでは、レンズ32のF値、すなわち焦点距離fと光束有効径たるレンズ径φとの比が異なってしまう。   Further, when the focal length f of each lens 32 is changed in this way, the F value of the lens 32, that is, the ratio between the focal length f and the lens diameter φ, which is the effective diameter of the light beam, is simply changed. It will be different.

かかるF値は、レンズ32に入射する光Lの集光の度合いを示す値であり、像の面積あたりの光量(照度)の指標となる値である。
つまり、レンズ32のそれぞれにおいて、かかるF値が大きく異なってしまうと、受光面41に結像される像は、面積あたりの光量差が著しく異なってしまうので、正確な色情報が得られないことになる。
かかる問題を解決するために、レンズ32の焦点距離fを個々に変える場合には、図10に誇張して示すように、レンズ径φを互いに異ならせることが望ましい。
本実施形態においては特に、表1に有効径として表示したとおりにレンズ径φを設定することで、かかる光量差を補正する。
The F value is a value indicating the degree of condensing of the light L incident on the lens 32, and serves as an index of the amount of light (illuminance) per area of the image.
In other words, if the F values are greatly different in each of the lenses 32, the image formed on the light receiving surface 41 has a significantly different light amount difference per area, so that accurate color information cannot be obtained. become.
In order to solve such a problem, when the focal length f of the lens 32 is individually changed, it is desirable to make the lens diameters φ different from each other as shown exaggeratedly in FIG.
In the present embodiment, in particular, the light amount difference is corrected by setting the lens diameter φ as shown in Table 1 as the effective diameter.

ところで、このような分光カメラ100において、被写体Qの色情報の分解能を向上させるためには、撮像素子40の表面の分割数を多くして、なるべく多くの画像を投影する必要がある。すなわち、受光面41の数は多ければ多いほど望ましい。
しかしながら、被写体Qの位置情報の分解能は共役像の大きさに反比例して減少するから、単に受光面41の数を増やすだけでは、被写体Qの画像そのものの再現性が悪化してしまう問題がある。
撮像素子40の表面にある画素数は有限であるから、かかる画素を最大限有効利用するように、レンズ32が配置されることが望ましい。
By the way, in such a spectroscopic camera 100, in order to improve the resolution of the color information of the subject Q, it is necessary to project as many images as possible by increasing the number of divisions of the surface of the image sensor 40. That is, the larger the number of light receiving surfaces 41, the better.
However, since the resolution of the position information of the subject Q decreases in inverse proportion to the size of the conjugate image, simply increasing the number of the light receiving surfaces 41 causes a problem that the reproducibility of the image of the subject Q itself deteriorates. .
Since the number of pixels on the surface of the image sensor 40 is finite, it is desirable to arrange the lens 32 so as to make maximum use of such pixels.

そこで分光カメラ100は、被写体Qからの光Lを集光して結像位置15に結像する結像光学系10と、結像位置15に配置された開口絞り20と、開口絞り20よりも+Z方向側に配置され、複数のレンズ32を備えるレンズアレイ31と、レンズアレイ31を挟んで開口絞り20と共役な位置に配置されて、レンズアレイ31を透過した光束L’を受光する受光面41を備える撮像素子40と、を有している。
また、レンズ32は、レンズ32のレンズ光軸Oに垂直なXY平面上に配列され、レンズ光軸Oに垂直で互いに直交する2方向であるX方向とY方向とにおいて、互いに異なるレンズ間隔L、Lを有している。
かかる構成により、撮像素子40の表面にある画素を最大限有効利用できて、光Lの利用効率が良い。
Therefore, the spectroscopic camera 100 collects the light L from the subject Q to form an image at the image forming position 15, the aperture stop 20 disposed at the image forming position 15, and the aperture stop 20. A lens array 31 that is disposed on the + Z direction side and includes a plurality of lenses 32, and a light receiving surface that is disposed at a position conjugate with the aperture stop 20 with the lens array 31 interposed therebetween, and that receives a light beam L ′ that has passed through the lens array 31. And an image sensor 40 having 41.
The lenses 32 are arranged on an XY plane perpendicular to the lens optical axis O of the lens 32, and have different lens intervals L in the X direction and the Y direction, which are two directions perpendicular to the lens optical axis O and orthogonal to each other. and a 1, L 2.
With this configuration, the pixels on the surface of the image sensor 40 can be effectively used to the maximum, and the utilization efficiency of the light L is good.

さらに、本実施形態では、受光面41は、縦横比が異なる矩形形状で撮像素子40の表面に複数形成されている。また、レンズ間隔L、Lは、受光面41のそれぞれと対向してレンズ32が配置されるように、設定される。具体的にはレンズ間隔の比L:Lは、撮像素子40の受光面41の縦横比と同様に、縦横比L:L=4:3である。
かかる構成により、撮像素子40の表面にある画素を最大限有効利用できて、光Lの利用効率が良い。
Further, in the present embodiment, a plurality of light receiving surfaces 41 are formed on the surface of the image sensor 40 in a rectangular shape with different aspect ratios. In addition, the lens intervals L 1 and L 2 are set so that the lens 32 is disposed to face each of the light receiving surfaces 41. Specifically, the lens interval ratio L 1 : L 2 is the aspect ratio L 1 : L 2 = 4: 3, similar to the aspect ratio of the light receiving surface 41 of the image sensor 40.
With this configuration, the pixels on the surface of the image sensor 40 can be effectively used to the maximum, and the utilization efficiency of the light L is good.

また、分光カメラ100においては、開口絞り20と受光面41とは共役であるから、受光面41において結像される画像は、開口絞り20の開口21の形状と同一形状の画像である。   In the spectroscopic camera 100, the aperture stop 20 and the light receiving surface 41 are conjugate, so that the image formed on the light receiving surface 41 is an image having the same shape as the shape of the opening 21 of the aperture stop 20.

そこで本実施形態では、開口絞り20は、撮像素子40の縦横比4:3と等しい矩形形状の開口21を有している。
かかる構成により、受光面41において結像される画像は、開口絞り20の開口21の形状と同一形状の画像となって、縦横比4:3の画像が得られるので、解像度の向上が図れる。
Therefore, in the present embodiment, the aperture stop 20 has a rectangular opening 21 that is equal to the aspect ratio 4: 3 of the image sensor 40.
With such a configuration, the image formed on the light receiving surface 41 becomes an image having the same shape as the shape of the aperture 21 of the aperture stop 20 and an image having an aspect ratio of 4: 3 can be obtained, so that the resolution can be improved.

本実施形態では、分光カメラ100は、開口絞り20とレンズアレイ31との間に配置されたフィールドレンズ22を有している。
かかる構成により、レンズアレイ31に入射する光Lの利用効率が高まる。
In the present embodiment, the spectroscopic camera 100 includes a field lens 22 disposed between the aperture stop 20 and the lens array 31.
With this configuration, the utilization efficiency of the light L incident on the lens array 31 is increased.

また本実施形態では、レンズアレイ31の像側、言い換えると+Z方向側の近傍に、互いに異なる波長透過特性を持つ2つ以上の分光フィルタ34を備えるフィルタアレイ33が配置されている。
かかる構成により、レンズアレイ31を透過した光Lは分光フィルタ34によって特定の波長λの波長帯域を取り出されるから、撮像素子40の受光面41には、被写体Qの異なる色情報を持った複数の画像が投影される。
In the present embodiment, a filter array 33 including two or more spectral filters 34 having different wavelength transmission characteristics is disposed in the vicinity of the image side of the lens array 31, in other words, the + Z direction side.
With this configuration, the light L transmitted through the lens array 31 is extracted from the wavelength band of the specific wavelength λ by the spectral filter 34, so that the light receiving surface 41 of the image sensor 40 has a plurality of pieces of color information of the subject Q. An image is projected.

また、本実施形態では、レンズ32のうち少なくとも一部のレンズ32が互いに異なる焦点距離を有している。
かかる構成により、撮像素子40の光軸O’の近傍と撮像素子40の周縁部との間の光路長を補正して、光Lが受光面41に正しく結像されるから、被写体Qの正確な撮影が可能となる。
さらに、互いに焦点距離が異なるレンズ32は、分光フィルタ34が透過する波長λの光Lが受光面41において結像されるように焦点距離fを決定される。
かかる構成により、レンズ32を透過する光Lは、波長λによる焦点距離への影響が、それぞれのレンズ32の焦点距離fの違いによって補正されるので、波長λの違いによらず受光面41上に結像される。
In the present embodiment, at least some of the lenses 32 have different focal lengths.
With this configuration, the optical path length between the vicinity of the optical axis O ′ of the image sensor 40 and the peripheral edge of the image sensor 40 is corrected, and the light L is correctly imaged on the light receiving surface 41. Shooting is possible.
Further, the focal length f of the lenses 32 having different focal lengths is determined so that the light L having the wavelength λ transmitted through the spectral filter 34 is imaged on the light receiving surface 41.
With this configuration, the light L transmitted through the lens 32 has an effect on the focal length due to the wavelength λ corrected by the difference in the focal length f of each lens 32, so that the light L on the light receiving surface 41 is not affected by the difference in the wavelength λ. Is imaged.

さらに、焦点距離fが異なるレンズ32は、互いに異なるレンズ径を有している。
かかる構成により、焦点距離fの差によって生じるF値の違いを補正して、受光面41上に結像される被写体Qのそれぞれの画像における光量差が抑制される。
Furthermore, the lenses 32 having different focal lengths f have different lens diameters.
With such a configuration, the difference in the F value caused by the difference in the focal length f is corrected, and the light amount difference in each image of the subject Q imaged on the light receiving surface 41 is suppressed.

本実施形態では、開口絞り20の開口21が矩形形状の場合についてのみ述べたが、開口21の長径と短径の比が撮像素子40の縦横比4:3と等しい楕円形状としても良い。
かかる構成により、受光面41において結像される画像は、開口絞り20の開口21の形状と同一形状の画像となって、縦横比4:3の画像が得られるので、解像度の向上が図れる。
In the present embodiment, only the case where the aperture 21 of the aperture stop 20 has a rectangular shape has been described, but an elliptical shape in which the ratio of the major axis to the minor axis of the aperture 21 is equal to the aspect ratio 4: 3 of the image sensor 40 may be used.
With such a configuration, the image formed on the light receiving surface 41 becomes an image having the same shape as the shape of the aperture 21 of the aperture stop 20 and an image having an aspect ratio of 4: 3 can be obtained, so that the resolution can be improved.

以上本発明の好ましい実施の形態について説明したが、本発明はかかる特定の実施形態に限定されるものではなく、上述の説明で特に限定していない限り、特許請求の範囲に記載された本発明の趣旨の範囲内において、種々の変形・変更が可能である。   The preferred embodiments of the present invention have been described above. However, the present invention is not limited to the specific embodiments, and the present invention described in the claims is not specifically limited by the above description. Various modifications and changes are possible within the scope of the above.

例えば、第3群の分光フィルタは、レンズの−Z方向側に配置されてもよい。
また、分光フィルタが屈折率を有していたとしても良い。
また、フィールドレンズはなくても良い。その場合には、光の広がり角が大きくなるので、撮像素子やレンズ等が大型化する一方、部品数を減らしてコスト削減に寄与する。
本実施形態では特に、撮像素子のアスペクト比を4:3としたが、16:9などのその他の比率であっても良い。
For example, the third group of spectral filters may be disposed on the −Z direction side of the lens.
Further, the spectral filter may have a refractive index.
Further, there may be no field lens. In that case, since the spread angle of light becomes large, the image pickup device, the lens, and the like are enlarged, and the number of components is reduced, which contributes to cost reduction.
Particularly in the present embodiment, the aspect ratio of the image sensor is 4: 3, but other ratios such as 16: 9 may be used.

また、上記実施形態においては、分光フィルタを備えた分光カメラについてのみ述べたが、その他の撮像光学系を用いた撮像装置に本実施形態を適用したとしても良い。   In the above embodiment, only the spectroscopic camera including the spectroscopic filter has been described. However, the present embodiment may be applied to an image pickup apparatus using another image pickup optical system.

本発明の実施の形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本発明の実施の形態に記載されたものに限定されるものではない。   The effects described in the embodiments of the present invention are only the most preferable effects resulting from the present invention, and the effects of the present invention are limited to those described in the embodiments of the present invention. is not.

1 第1群
2 第2群
3 第3群
10 結像光学系
15 結像位置
20 開口絞り
21 開口
22 凸レンズ(フィールドレンズ)
31 レンズアレイ
32 レンズ
33 分光部(フィルタアレイ)
34 分光フィルタ
40 撮像素子
41 受光面
100 撮像装置(分光カメラ)
101 撮像光学系
f 焦点距離
φ 有効径(レンズ径)
Q 被写体
DESCRIPTION OF SYMBOLS 1 1st group 2 2nd group 3 3rd group 10 Imaging optical system 15 Imaging position 20 Aperture stop 21 Aperture 22 Convex lens (field lens)
31 Lens array 32 Lens 33 Spectrometer (filter array)
34 Spectral filter 40 Image sensor 41 Light receiving surface 100 Imaging device (spectral camera)
101 Imaging optical system f Focal length φ Effective diameter (lens diameter)
Q Subject

特開2014−206494号公報JP 2014-206494 A 特開2015−502523号公報Japanese Patent Laying-Open No. 2015-502523 特許第5649702号公報Japanese Patent No. 5649702 特開2015−109667号公報JP2015-109667A WO2013−179620号公報WO2013-179620 特開2006−344880号公報JP 2006-344880 A

Claims (9)

被写体からの光束を集光して結像位置に結像する結像光学系と、
前記結像位置に配置された開口絞りと、
前記開口絞りよりも像側に配置され、複数のレンズを備えるレンズアレイと、
前記レンズアレイを挟んで前記開口絞りと共役な位置に配置されて、前記レンズアレイを透過した光束を受光する受光面を備える撮像素子と、
を有し、
前記レンズは、当該レンズの光軸に垂直な平面上に配列され、当該光軸に垂直で互いに直交する2方向において、互いに異なるレンズ間隔を有することを特徴とする撮像光学系。
An imaging optical system that focuses the light flux from the subject and forms an image at the imaging position;
An aperture stop disposed at the imaging position;
A lens array disposed on the image side of the aperture stop and including a plurality of lenses;
An imaging device that is disposed at a position conjugate with the aperture stop across the lens array and includes a light receiving surface that receives a light beam transmitted through the lens array;
Have
The imaging optical system, wherein the lenses are arranged on a plane perpendicular to the optical axis of the lens and have different lens intervals in two directions perpendicular to the optical axis and perpendicular to each other.
請求項1記載の撮像光学系において、
前記受光面は、縦横比が異なる矩形形状で前記撮像素子の表面に複数形成され、
前記レンズ間隔は、前記受光面のそれぞれと対向して前記レンズが配置されるように設定されることを特徴とする撮像光学系。
The imaging optical system according to claim 1,
A plurality of the light receiving surfaces are formed on the surface of the imaging element in a rectangular shape with different aspect ratios,
The imaging optical system according to claim 1, wherein the lens interval is set so that the lenses are arranged to face each of the light receiving surfaces.
請求項2に記載の撮像光学系において、
前記開口絞りは、前記撮像素子の前記縦横比と等しい矩形形状もしくは前記縦横比と長径と短径の比が等しい楕円形状の開口を有することを特徴とする撮像光学系。
The imaging optical system according to claim 2,
The image pickup optical system according to claim 1, wherein the aperture stop has an opening having a rectangular shape equal to the aspect ratio of the image pickup device or an elliptical shape having an equal ratio of the aspect ratio to the major axis and the minor axis.
請求項1乃至3の何れか1つに記載の撮像光学系において、
前記開口絞りと前記レンズアレイとの間に配置された凸レンズを有することを特徴とする撮像光学系。
The imaging optical system according to any one of claims 1 to 3,
An imaging optical system comprising a convex lens disposed between the aperture stop and the lens array.
請求項1乃至4の何れか1つに記載の撮像光学系において、
前記レンズアレイの像側もしくは物体側に、互いに異なる波長透過特性を持つ2つ以上の分光フィルタを備える分光部が配置されていることを特徴とする撮像光学系。
The imaging optical system according to any one of claims 1 to 4,
An imaging optical system, wherein a spectroscopic unit including two or more spectral filters having different wavelength transmission characteristics is disposed on an image side or an object side of the lens array.
請求項5に記載の撮像光学系において、
前記レンズのうち少なくとも一部のレンズが互いに異なる焦点距離を有することを特徴とする撮像光学系。
The imaging optical system according to claim 5,
An imaging optical system, wherein at least some of the lenses have different focal lengths.
請求項6に記載の撮像光学系において、
互いに焦点距離が異なる前記レンズは、前記分光フィルタが透過する波長の光が前記受光面において結像されるように前記焦点距離を決定されることを特徴とする撮像光学系。
The imaging optical system according to claim 6,
The imaging optical system according to claim 1, wherein the focal lengths of the lenses having different focal lengths are determined so that light having a wavelength transmitted through the spectral filter is imaged on the light receiving surface.
請求項6または7に記載の撮像光学系において、
前記焦点距離が異なる前記レンズは、互いに異なる光束有効径を有することを特徴とする撮像光学系。
The imaging optical system according to claim 6 or 7,
The imaging optical system, wherein the lenses having different focal lengths have different effective light beam diameters.
請求項1乃至8の何れか1つに記載の撮像光学系を備える撮像装置。   An imaging device comprising the imaging optical system according to any one of claims 1 to 8.
JP2016101824A 2016-05-20 2016-05-20 Imaging optical system and imaging device Active JP6825231B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016101824A JP6825231B2 (en) 2016-05-20 2016-05-20 Imaging optical system and imaging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016101824A JP6825231B2 (en) 2016-05-20 2016-05-20 Imaging optical system and imaging device

Publications (2)

Publication Number Publication Date
JP2017207450A true JP2017207450A (en) 2017-11-24
JP6825231B2 JP6825231B2 (en) 2021-02-03

Family

ID=60414947

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016101824A Active JP6825231B2 (en) 2016-05-20 2016-05-20 Imaging optical system and imaging device

Country Status (1)

Country Link
JP (1) JP6825231B2 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060023314A1 (en) * 2004-07-27 2006-02-02 Boettiger Ulrich C Controlling lens shape in a microlens array
JP2011254265A (en) * 2010-06-01 2011-12-15 Sharp Corp Multi-eye camera device and electronic information apparatus
WO2013179620A1 (en) * 2012-05-28 2013-12-05 株式会社ニコン Imaging device
WO2016009707A1 (en) * 2014-07-16 2016-01-21 ソニー株式会社 Compound-eye imaging device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060023314A1 (en) * 2004-07-27 2006-02-02 Boettiger Ulrich C Controlling lens shape in a microlens array
JP2011254265A (en) * 2010-06-01 2011-12-15 Sharp Corp Multi-eye camera device and electronic information apparatus
WO2013179620A1 (en) * 2012-05-28 2013-12-05 株式会社ニコン Imaging device
US20150234150A1 (en) * 2012-05-28 2015-08-20 Nikon Corporation Imaging device
WO2016009707A1 (en) * 2014-07-16 2016-01-21 ソニー株式会社 Compound-eye imaging device

Also Published As

Publication number Publication date
JP6825231B2 (en) 2021-02-03

Similar Documents

Publication Publication Date Title
US9204067B2 (en) Image sensor and image capturing apparatus
US9167148B2 (en) Image capture apparatus that performs focus detection with a phase difference detection method
US10574916B2 (en) Image processing apparatus, image capturing apparatus, image processing method, and computer-readable storage medium
JP5406383B2 (en) Imaging device
US9531963B2 (en) Image capturing device and image capturing system
JP5144841B1 (en) Imaging device
JP2014161014A (en) Imaging apparatus and range finder
US10021289B2 (en) Image pickup apparatus and image pickup system with point image intensity distribution calculation
US11184521B2 (en) Focus detection apparatus, focus detection method, and storage medium
WO2013042456A1 (en) Object optical assembly, image capture device, and endoscope
JP2022050396A (en) Spectroscopic camera, imaging method, program, and recording medium
JP2009244662A (en) Imaging apparatus
JP6329557B2 (en) Imaging apparatus and electronic apparatus
JP2011226876A (en) Spectrometer
JP6237161B2 (en) Imaging device
US20190273877A1 (en) Imaging apparatus and imaging method
JP2008070629A (en) Light detection device, camera, focus detection device, and optical characteristic measuring device
JP5220375B2 (en) Imaging apparatus and imaging apparatus having the same
US9229211B2 (en) Imaging apparatus, imaging control program, and imaging method
JP6825231B2 (en) Imaging optical system and imaging device
JP2017207720A (en) Imaging optical system and imaging apparatus
US10200622B2 (en) Image processing method, image processing apparatus, and imaging apparatus
JP2019066186A (en) Imaging apparatus and method for calculating distance of imaging apparatus
JP2007206668A (en) Image display
TWI569087B (en) Image pickup device and light field image pickup lens

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190308

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200128

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200131

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200327

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200915

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201116

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20201215

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20201228

R151 Written notification of patent or utility model registration

Ref document number: 6825231

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151