JP2017046296A - 撮像モジュール、撮像装置 - Google Patents

撮像モジュール、撮像装置 Download PDF

Info

Publication number
JP2017046296A
JP2017046296A JP2015169288A JP2015169288A JP2017046296A JP 2017046296 A JP2017046296 A JP 2017046296A JP 2015169288 A JP2015169288 A JP 2015169288A JP 2015169288 A JP2015169288 A JP 2015169288A JP 2017046296 A JP2017046296 A JP 2017046296A
Authority
JP
Japan
Prior art keywords
lens sheet
light
lens
unit
imaging module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015169288A
Other languages
English (en)
Other versions
JP6589464B2 (ja
Inventor
一樹 播戸
Kazuki Harito
一樹 播戸
荒川 文裕
Fumihiro Arakawa
文裕 荒川
修司 川口
Shuji Kawaguchi
修司 川口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dai Nippon Printing Co Ltd
Original Assignee
Dai Nippon Printing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dai Nippon Printing Co Ltd filed Critical Dai Nippon Printing Co Ltd
Priority to JP2015169288A priority Critical patent/JP6589464B2/ja
Publication of JP2017046296A publication Critical patent/JP2017046296A/ja
Application granted granted Critical
Publication of JP6589464B2 publication Critical patent/JP6589464B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Lenses (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Studio Devices (AREA)

Abstract

【課題】より薄型の撮像モジュール、撮像装置を提供する。
【解決手段】撮像モジュール10は、イメージセンサ14と、レンズシートユニット13とを備える。レンズシートユニット13は、一方の面11bに凸状の単位レンズ形状112を有する柱状の光透過部111が配列された第1レンズシート11と、これのイメージセンサ14側に配置され、一方の面12aに凸状の単位レンズ形状122を有する柱状の光透過部121が配列された第2レンズシート12を備える。光軸O方向から見て、光透過部111の配列方向と、光透過部121の配列方向とは、角度αをなして交差する。各光透過部111,121の配列方向において各光透過部111,121と交互に配置される各光吸収部113,123は、各レンズシート11,12の厚み方向に沿って、単位レンズ形状112,122側から反対側の面11b,12b側へ延びている。
【選択図】図2

Description

本発明は、撮像モジュール、撮像装置に関するものである。
近年、スマートフォンやタブレット等の携帯端末に備えられるカメラにおいては、画質の向上等、様々に開発が行われている(例えば、特許文献1参照)。特に、スマートフォン等の携帯端末においては、薄型化が進んでおり、携帯端末に備えられるカメラ(以下、携帯端末用カメラという)においても、薄型化が図られている(例えば、特許文献1参照)。
また、ライトフィールドカメラと呼ばれる、撮影後に焦点距離や被写界深度を変更できるカメラが開発され、近年広まっている(例えば、特許文献2参照)。このライトフィールドカメラは、イメージセンサ上に配置されたマイクロレンズアレイにより、入射光を分割して複数の方向の光を撮影することにより、撮影後に光の入射方向や強度に基づいて所定の画像処理を行って所定の焦点距離や被写界深度に変更することができる。
特開2015−99345号公報 特表2015−520992号公報
携帯端末用カメラでは、高画質な画像を撮影するためには、レンズ収差の補正等が必要となる。そのため、携帯端末用カメラでは、複数枚のレンズにより構成される撮像レンズが用いられている。しかし、この撮像レンズは、複数枚のレンズにより構成されているため、全体としてのカメラの厚さ(5〜7mm程度)の約80%(約4mm)を撮像レンズが占めることとなる。そのため、携帯端末用カメラにおいて、高画質な画像の撮影と薄型化との両立が、大きな課題となっている。
また、携帯端末用カメラに対する、画質や撮影機能の向上等は、常に要求されることである。
一方、ライトフィールドカメラでは、イメージセンサ上に配置される各マイクロレンズアレイの各レンズからの光(像)が、受光面上で重ならないようにするために、前述のような撮像レンズや、各レンズに対応した隔壁を有する隔壁シート等が必要となっている。
前述のように撮像レンズは、複数枚のレンズにより構成されるため、大型であり、ライトフィールドカメラの小型化、薄型化が困難であった。また、隔壁シートを配置する場合には、隔壁とマイクロレンズアレイとの位置合わせが困難であるという問題があった。
本発明の課題は、より薄型の撮像モジュール、撮像装置を提供することである。
本発明は、以下のような解決手段により、前記課題を解決する。なお、理解を容易にするために、本発明の実施形態に対応する符号を付して説明するが、これに限定されるものではない。
請求項1の発明は、入射する光を電気信号に変換する複数の画素(141)が2次元配列された撮像素子部(14)と、前記撮像素子部よりも光の入射側に設けられたレンズシートユニット(13)と、を備え、前記レンズシートユニットは、一方の面(11a)に凸状の第1単位レンズ形状(112)を有する柱状の第1光透過部(111)が配列された第1レンズシート(11)と、前記第1レンズシートよりも撮像素子部側に配置され、一方の面(12a)に凸状の第2単位レンズ形状(122)を有する柱状の第2光透過部(121)が配列された第2レンズシート(12)を備え、光軸(O)方向から見て、前記第1光透過部の配列方向(R11)と、前記第2光透過部の配列方向(R12)とは、角度αをなして交差し、前記第1レンズシートは、前記第1光透過部の配列方向(R11)において前記第1光透過部と交互に配置され、前記第1光透過部の長手方向に延在する第1光吸収部(113)を有し、前記第1光吸収部は、前記第1レンズシートの厚み方向(Z方向)に沿って、前記第1単位レンズ形状(112)側から反対側の面(11b)側へ延び、前記第2レンズシートは、前記第2光透過部の配列方向(R12)において前記第2光透過部と交互に配置され、前記第2光透過部の長手方向に延在する第2光吸収部(123)を有し、前記第2光吸収部は、前記第2レンズシートの厚み方向(Z方向)に沿って、前記第2単位レンズ形状(122)側から反対側の面(12b)側へ延びること、を特徴とする撮像モジュール(10)である。
請求項2の発明は、請求項1に記載の撮像モジュールにおいて、前記角度αは、80°≦α≦100°を満たすこと、を特徴とする撮像モジュール(10)である。
請求項3の発明は、請求項1又は請求項2に記載の撮像モジュールにおいて、前記各単位レンズ形状(112,122)は、各光透過部(111,121)の配列方向(R11,R12)に平行であって各レンズシート(11,12)の厚み方向に平行な断面が円の一部形状であること、を特徴とする撮像モジュール(10)である。
請求項4の発明は、請求項1から請求項3までのいずれか1項に記載の撮像モジュールにおいて、前記各光透過部(111,121)の屈折率N1と前記各光吸収部(113,123)の屈折率N2とは、N1≦N2という関係を満たすこと、を特徴とする撮像モジュール(10)である。
請求項5の発明は、請求項1から請求項4までのいずれか1項に記載の撮像モジュールにおいて、前記各光吸収部(113,123)と前記各光透過部(111,121)との界面が、前記各レンズシート(11,12)の厚み方向となす角度θは、0°≦θ≦10°を満たすこと、を特徴とする撮像モジュール(10)である。
請求項6の発明は、請求項1から請求項5までのいずれか1項に記載の撮像モジュールにおいて、前記第2レンズシート(12)は、前記撮像素子部(14)と一体に接合されていること、を特徴とする撮像モジュール(10)である。
請求項7の発明は、請求項1から請求項6までのいずれか1項に記載の撮像モジュールにおいて、前記第1単位レンズ形状(112)は、前記第1レンズシート(11)の撮像素子部(14)側の面に形成され、前記第2単位レンズ形状(121)は、前記第2レンズシート(12)の被写体側の面に形成されていること、を特徴とする撮像モジュール(10)である。
請求項8の発明は、請求項1から請求項7までのいずれか1項に記載の撮像モジュール(10)を備える撮像装置である。
本発明によれば、より薄型の撮像モジュール、撮像装置を提供することができる。
実施形態のカメラ1を説明する図である。 実施形態の撮像モジュール10を説明する図である。 実施形態のレンズシートユニット13を説明する図である。 実施形態の第1レンズシート11及び第2レンズシート12を説明する図である。 実施形態の撮像モジュール10のイメージセンサ14の受光面上での結像の様子を説明する図である。 レンズシートユニット13の他の実施形態を説明する図である。 レンズシートユニット13の変形形態を示す図である。 レンズシートユニット13の光透過部111,121の配列方向とイメージセンサ14の画素の配列方向との関係を示す図である。
以下、図面等を参照して、本発明の実施形態について説明する。なお、図1を含め、以下に示す各図は、模式的に示した図であり、各部の大きさ、形状は、理解を容易にするために、適宜誇張している。
本明細書中に記載する各部材の寸法等の数値及び材料名等は、実施形態としての一例であり、これに限定されるものではなく、適宜選択して使用してよい。
本明細書中において、形状や幾何学的条件を特定する用語、例えば、平行や直交等の用語については、厳密に意味するところに加え、同様の光学的機能を奏し、平行や直交と見なせる程度の誤差を有する状態も含むものとする。
本明細書中において、シート面とは、各シート状の部材において、そのシート全体として見たときにおける、シートの平面方向となる面を示すものであるとする。
(実施形態)
図1は、本実施形態のカメラ1を説明する図である。
図2は、本実施形態の撮像モジュール10を説明する図である。
図1を含め、以下に示す各図において、理解を容易にするために、XYZ直交座標系を適宜設けて示している。この座標系では、撮影者が、光軸Oを水平として画像を撮影するとき、水平方向(左右方向)をX方向、鉛直方向(上下方向)をY方向とし、撮影者側から見て左側(被写体側から見て右側)に向かう方向を+X方向、鉛直方向上側に向かう方向を+Y方向、光軸O方向をZ方向とし、被写体側に向かう方向を+Z方向とする。
図1に示すように、本実施形態のカメラ1は、開口部20を有する筐体30内に、撮像モジュール10を備える撮像装置である。
カメラ1は、スマートフォン等の携帯電話やタブレット端末等の携帯端末に用いられる撮像装置であり、この筐体30は、携帯端末本体の筐体に相当する。このカメラ1は、さらに、不図示の制御部、記憶部等を備えている。
また、カメラ1は、筐体30をカメラ本体の筐体として備える、一般的な撮像装置としてもよい。この場合、カメラ1は、制御部、記憶部等に加えて、不図示のシャッタ部、シャッタ駆動部等を備える。
開口部20は、被写体側からの光を、カメラ1の撮像モジュール10へ取り込む開口である。この開口部20には、撮像モジュール10への埃やゴミ等の異物の侵入を防止する等の観点から、開口部20を覆うようにカバーガラス21が配置されている。
本実施形態の撮像モジュール10は、光軸O(Z方向)に沿って、光の入射側(被写体側、+Z側)から順に、レンズシートユニット13、イメージセンサ14等を備えている。この撮像モジュール10は、前述の制御部からの出力信号により、像を撮像する。
レンズシートユニット13及びイメージセンサ14は、矩形状の平板状の部材であり、その幾何学的中心に光軸Oが直交している。
図3は、本実施形態のレンズシートユニット13を説明する図である。図3(a)は、レンズシートユニット13の斜視図であり、図3(b)では、レンズシートユニット13を構成する第1レンズシート11の光透過部111及び第2レンズシート12の光透過部121の配列方向について示している。
図4は、第1レンズシート11及び第2レンズシート12を説明する図である。図4(a)は第1レンズシート11の光透過部111の配列方向及び第1レンズシート11の厚み方向に平行な断面の一部を拡大して示し、図4(b)では、図4(a)に示す断面の一部をさらに拡大して示している。なお、図4では、第1レンズシート11における各部の符号を示し、括弧内に、第2レンズシート12における対応する各部の符号を示している。
レンズシートユニット13は、イメージセンサ14の被写体側(+Z側)に位置している。レンズシートユニット13は、光軸O方向(Z方向)に沿って被写体側(+Z側)から順に、第1レンズシート11、第2レンズシート12を備える。レンズシートユニット13は、第1レンズシート11及び第2レンズシート12が不図示の支持部材により支持されており、イメージセンサ14に対する位置が決められている。
第1レンズシート11は、柱状の光透過部111と、光透過部111の配列方向に沿って光透過部111と交互に配置される光吸収部113とを備える光学シートである。本実施形態の第1レンズシート11では、光透過部111は、上下方向(Y方向)に配置され、その長手方向(稜線方向)が左右方向(X方向)に平行となっている。
光透過部111は、光を透過する部分であり、イメージセンサ14側(−Z側)に、凸形状の単位レンズ形状112を有している。第1レンズシート11のイメージセンサ14側の面は、単位レンズ形状112が複数配列されたレンズ形状面11aとなっている。
第1レンズシート11の単位レンズ形状112は、イメージセンサ14側(−Z側)に凸となっており、光透過部111の配列方向(Y方向)及び第1レンズシート11の厚み方向(Z方向)に平行な断面形状が円の一部形状となっている。単位レンズ形状112は、この断面形状が光透過部111の長手方向に延在している。
光透過部111の裏面11b側(レンズ形状面11aとは反対側、+Z側)は、光透過部111がシート面に平行な方向に連続しているランド部114となっている。このランド部114には、光透過部111を形成する際の基材となる基材層を含んでいてもよい。ランド部114は、その厚みができる限り薄い方が好ましく、ランド部114の厚さが0であること(即ち、ランド部114が存在しない形態)が、迷光等を防止し、高画質の画像を提供する観点から理想的である。
また、本実施形態の第1レンズシート11の裏面11bの表面には、反射防止機能を有する不図示の層がコーティングされている。本実施形態では、第1レンズシート11の裏面11bは、レンズシートユニット13への光の入射面であるため、第1レンズシート11と空気との界面となる裏面11bでの反射を抑制し、入射光量の増加を図っている。
光透過部111は、光透過性を有する樹脂により形成され、その屈折率N1は、1.43〜1.60程度である。
本実施形態の光透過部111は、ウレタンアクリレート、ポリエステルアクリレート、エポキシアクリレート等の紫外線硬化型樹脂を用いて、紫外線成形法により形成されている。
なお、これに限らず、光透過部111は、電子線硬化型樹脂等の他の電離放射線硬化型樹脂により形成してもよい。また、光透過部111は、PET(ポリエチレンテレフタレート)樹脂等の熱可塑性樹脂等を用いて熱溶融押出成形法等により形成されてもよいし、ガラスにより形成されてもよい。
また、単位レンズ形状112の表面には、反射防止機能を有する不図示の層がコーティングされている。
光吸収部113は、光を吸収する作用を有し、第1レンズシート11の厚み方向に沿って、単位レンズ形状112が形成されたレンズ形状面11a側から反対側の面(裏面)11b側へ延びる壁状の部分である。また、光吸収部113は、光透過部111の長手方向に沿って延在している。
光吸収部113は、その配列方向及び第1レンズシート11の厚み方向に平行な断面における断面形状が楔形形状である。ここでいう楔形形状とは、一方の端部の幅が広く、他方に向けて次第に幅が狭くなる形状をいい、三角形形状や台形形状等を含む。
本実施形態の光吸収部113は、レンズ形状面11a側の寸法が裏面11b側の寸法に比べて大きい台形形状となっている。これに限らず、光吸収部113は、その断面形状が、前述のような台形形状としてもよいし、裏面11b側を頂点とする三角形形状としてもよい。
光吸収部113は、光透過部111内を進む光のうち、隣接する他の光透過部111側へ向かうような迷光を吸収する機能を有する。
この光吸収部113は、カーボンブラック等の光吸収性を有する材料(以下、光吸収材という)や、光吸収材を含有した樹脂等により形成される。
光吸収部113に用いられる光吸収材は、可視光領域の光を吸収する機能を有する粒子状等の部材が好適である。このような部材としては、カーボンブラック、グラファイト、黒色酸化鉄等の金属塩、顔料や染料、顔料や染料で着色された樹脂粒子等が挙げられる。
顔料や染料で着色された樹脂粒子を用いる場合には、その樹脂粒子は、アクリル系樹脂や、PC(ポリカーボネート)樹脂、PE(ポリエチレン)樹脂、PS(ポリスチレン)樹脂、MBS(メチルメタクリレート・ブタジエン・スチレン)樹脂、MS(メチルメタクリレート・スチレン)樹脂等により形成されたものが用いられる。
光吸収材としては、カーボンブラック等と上記のような着色された樹脂粒子と組み合わせて用いてもよい。
光吸収材を含有する樹脂としては、ウレタンアクリレート、エポキシアクリレート等の紫外線硬化型樹脂や電子線硬化型樹脂等の電離放射線硬化型樹脂が挙げられる。
本実施形態の光吸収部113は、カーボンブラックを含有するアクリル系樹脂により形成されている。
光吸収部113の屈折率N2は、1.45〜1.60程度である。また、光吸収部113の屈折率N2は、光透過部111の屈折率N1に対して、N2≧N1となっていることが好ましい。これは、光吸収部113と光透過部111との界面で、光が全反射する等し、不要な光がイメージセンサ14に到達することを防ぐためである。
第1レンズシート11の製造方法の一例は、以下の通りである。
まず、光透過部111を賦形する凹形状を有し、光吸収部113となる部分が溝状に賦形されるように凸形状に形成された成形型を用い、紫外線成形法により、光透過部111が形成される。次に、光透過部111間の溝部分に、光吸収部113を形成する材料をワイピング(スキージング)して充填し、硬化させる。その後、所定の大きさに整える等により、第1レンズシート11が作製される。
なお、第1レンズシート11の製造方法は、上記の例に限らず、使用する材料等に応じて適宜選択できる。例えば、光吸収部113,123は、真空充填等により、光吸収部113,123を形成する材料を光透過部111間の溝部分に充填した後、硬化させて形成してもよい。また、光吸収部113,123は、毛細管現象を利用して、光透過部111間の溝部分に光吸収部113,123を形成する材料を充填した後、硬化させて形成してもよい。
また、第1レンズシート11の各部の寸法は、以下の通りである。
光透過部111(単位レンズ形状112)の配列ピッチPは、約20〜230μmとすることが好ましい。
単位レンズ形状112の曲率半径Rは、約10〜180μmとすることが好ましい。
単位レンズ形状112のレンズ開口幅D1は、光透過部111の配列方向において、光透過部111のレンズ形状面11a側の寸法(光透過部111と光吸収部113の最もレンズ形状面11a側端部との境界となる点t1〜点t2間の寸法)であり、約20〜200μmとすることが好ましい。
単位レンズ形状112のレンズ高さH1は、第1レンズシート11の厚み方向(Z方向)において、光吸収部113のレンズ形状面11a側の面から単位レンズ形状112の最も凸となる点t3までの寸法であり、約2〜40μmとすることが好ましい。
第1レンズシート11の総厚Tは、第1レンズシート11の厚み方向(Z方向)において、裏面11bの表面から点t3までの寸法であり、約30〜480μmとすることが好ましい。
光吸収部113の幅D2は、光透過部111の配列方向における、光吸収部113の最もレンズ形状面11a側の寸法であり、約1〜30μmとすることが好ましい。
光吸収部113の高さH2は、第1レンズシート11の厚み方向(Z方向)における光吸収部113の寸法であり、約20〜470μmとすることが好ましい。
ランド厚D3は、ランド部114の厚さであり、第1レンズシート11の厚み方向において、光吸収部113の裏面11b側先端から第1レンズシート11の裏面11bまでの寸法であり、約1〜50μmとすることが、迷光や、所定の光透過部111(単位レンズ形状112)に入射した光が、隣接する他の光透過部111(単位レンズ形状112)側へ光が進んでしまうことを抑制する観点から好ましい。第1レンズシート11が基材層を備えている場合には、このランド厚D3は、約1〜180μmとすることが、上述の理由から好ましい。
光吸収部113と光透過部111との界面がシート面の法線方向となす角度θは、0〜10°程度とすることが好ましい。
第2レンズシート12は、第1レンズシート11のイメージセンサ14側(−Z側)に位置する光学シートである。この第2レンズシート12は、イメージセンサ14の被写体側(+Z側)に後述する接合層15により接合されている。
第2レンズシート12は、前述の第1レンズシート11と同様の形状であり、単位レンズ形状122を有する光透過部121、光吸収部123等を有しているが、レンズ形状面12aの位置、及び、光透過部121及び光吸収部123の配列方向が、第1レンズシート11とは異なる。
第2レンズシート12では、凸状の単位レンズ形状122が形成されるレンズ形状面12aは、光の入射側となる被写体側(+Z側)に位置し、裏面12bは、イメージセンサ14側(−Z側)に位置している。
また、図3(b)に示すように、第2レンズシート12では、光透過部121及び光吸収部123の配列方向R12は、光軸O方向(Z方向)から見て、第1レンズシート11の光透過部111及び光吸収部113の配列方向R11と交差し、角度αをなしている。本実施形態では、この角度α=90°であり、第2レンズシート12の光透過部121(単位レンズ形状122)は、配列方向が左右方向(X方向)であり、長手方向が上下方向(Y方向)に延在している。
この第2レンズシート12は、第1レンズシート11と同様の材料を用いて形成される。
レンズシートユニット13(第2レンズシート12)とイメージセンサ14とは、接合層15により、一体に接合されている。
接合層15は、粘着剤又は接着剤により形成され、光透過性を有している。この接合層15の屈折率N3は、第2レンズシート12の光透過部121の屈折率N2と等しいことが好ましい。
また、イメージセンサ14は、駆動時に発熱し、約40℃前後まで表面温度が上昇する。そのため、イメージセンサ14の発熱によるレンズシートユニット13の反り等の変形を抑制する観点から、耐熱性を有することが好ましい。
このような接合層15としては、エポキシ樹脂製、ウレタン樹脂製等の粘着剤、接着剤が好適である。
なお、接合層15は、その屈折率N3が光透過部121の屈折率N2よりも小さいものも適用可能である。このような接合層15としては、例えば、シリコン系粘着剤等が挙げられる。
レンズシートユニット13を透過した光は、単位レンズ形状112,122により、後述するイメージセンサ14の受光面上が焦点となるように集光される。即ち、単位レンズ形状112,122の曲率半径R、屈折率N1は、イメージセンサ14の受光面上が焦点となるように設定されている。
また、第1レンズシート11と第2レンズシート12とは、単位レンズ形状112,122がその頂点(点t3)で互いに接した状態、又は近接した状態で配置されており、各レンズシート11,12間は、空気が位置する形態となっている。
第1レンズシート11、第2レンズシート12は、光軸O方向(Z方向)から見た場合に、光透過部111及び光透過部121(単位レンズ形状112及び単位レンズ形状122)の配列方向が角度α=90°をなすように配置されている。また、第1レンズシート11、第2レンズシート12は、光透過部111,121間に光吸収部113,123を有している。従って、レンズシートユニット13は、光学的には、マイクロレンズが2次元方向(X方向及びY方向)に配置され、マイクロレンズ間に遮光壁が形成された状態に略等しい。
イメージセンサ14は、受光面で受光した光を電気信号に変換して出力する部分である。このイメージセンサ14は、複数の画素が2次元方向に配列されており、各画素により、その画素に入射した光の強度を検出可能である。
イメージセンサ14を構成する複数の画素は、イメージセンサ14の受光面である被写体側の表面に、2次元方向に配列されている。本実施形態では、イメージセンサ14の画素は、左右方向及び上下方向(X方向及びY方向)に複数配列されているものとする。
このようなイメージセンサ14としては、例えば、CCD(Charge Coupled Device)やCOMS(Complementary Metal Oxide Semiconductor)等が好適に用いられる。
本実施形態では、このイメージセンサ14として、CMOSが用いられている。
開口部20から撮像モジュール10内に進んだ光は、レンズシートユニット13に入射し、第1レンズシート11及び第2レンズシート12を透過する。このとき、レンズシートユニット13内を透過する光は、第1レンズシート11の単位レンズ形状112により、その配列方向であるY方向(上下方向)において集光され、また、第2レンズシート12の単位レンズ形状122により、その配列方向であるX方向(左右方向)において集光される。また、第1レンズシート11及び第2レンズシート12において、光透過部111,121内を光軸O方向に対して大きな角度をなす方向へ進む光の一部は、光吸収部113,123に入射して吸収される。そして、レンズシートユニット13を透過した光は、イメージセンサ14の受光面で焦点を結ぶ。
このとき、前述のように、第1レンズシート11及び第2レンズシート12は、単位レンズ形状112,122の長手方向が直交するように配置されているので、レンズシートユニット13は、光学的には、X方向及びY方向にマイクロレンズが複数配列されている形態に近しい。
そして、イメージセンサ14の受光面上には、この疑似的なマイクロレンズにより結像された像が、それぞれ重なることなく形成される。
本実施形態では、疑似的なマイクロレンズの1つ1つのレンズに対して、イメージセンサ14の複数の画素が対応するように配置されている。そして、撮影時には、各画素には、対応する疑似的なマイクロレンズにより分割された光が入射し、各画素により、光の強度が検出される。また、各画素と、XY平面上のどの位置の単位レンズ形状112,122を透過したか(XY平面上の疑似的なマイクロレンズの位置)との関係から、画素に入射した光の入射方向が検出可能となる。
撮影時、撮像モジュール10により得られた、各画素が検出した入射光の強度及び入射方向の情報は、記憶部に記憶され、また、制御部により各種演算等が行われることにより、その焦点距離や被写界深度等を変更した(リフォーカス処理を行った)画像データとして生成可能である。
図5は、本実施形態の撮像モジュール10のイメージセンサ14の受光面上での結像の様子とを説明する図である。
一般的に、ライトフィールドカメラでは、マイクロレンズアレイの1つのマイクロレンズに対して所定の領域内に位置する複数個の画素141が対応している。そして、それぞれのマイクロレンズによる像が、例えば、図5(a)に示すように、対応する領域内に投影されることが重要である。
このとき、例えば、図5(b)に示すように、各マイクロレンズの像が隣の領域に投影され、像が重なると、被写体面上で異なる位置と角度を有する光が同一の画素に入射するクロストークという現象が生じ、光の入射方向や強度を分解できなくなる。これを解消するために、従来のライトフィールドカメラでは、マイクロレンズアレイよりも被写体側に設けられた撮像レンズの絞りを利用したり、マイクロレンズアレイの単位レンズに対応した隔壁を有する隔壁シートをマイクロレンズアレイシートのイメージセンサ側等に別体で用意する必要があった。
しかし、本実施形態によれば、光吸収部113,123が、光透過部111,121間に形成され、各レンズシートの厚み方向に延びているので、撮像レンズや隔壁シート等を用いることなく、図5(a)に示すように、クロストークを生じさせることなく、単位レンズ形状112,122により集光された光を、イメージセンサ14の対応する領域の画素141に入射させることができる。これにより、画素141は、入射光の強度と入射方向の情報を高精度で出力することができる。
以上のことから、本実施形態によれば、複数枚の光学レンズからなる撮像レンズが不要であり、レンズシートユニット13の厚みを数10〜数100μm程度に抑えることができ、撮像モジュール10及びカメラ1として薄型化、軽量化を図ることができる。また、撮像レンズが不要となるので、撮像モジュール10及びカメラ1の生産コストを低減できる。さらに、携帯端末本体の薄型化を妨げることがなく、意匠性の向上にも寄与できる。
また、本実施形態によれば、レンズシート11,12内に光透過部111,121(単位レンズ形状112,122)に対応して光吸収部113,123が一体に形成されているので、隔壁シートとマイクロレンズアレイとの高精度の位置合わせが不要となる。従って、マイクロレンズアレイと隔壁シートとの位置合わせ精度ずれによる歩留りの低下を抑制できる。また、位置合わせが不要となるので、ハンドリングが容易となり、製造が容易に行え、生産コスト低減できる。
さらに、本実施形態によれば、光透過部111,121のレンズ開口幅D1を小さくしてX方向及びY方向に配列される単位レンズ形状112,122を増やすことも容易であり、かつ、光吸収部113,123が一体に形成されるので、レンズシートユニット13による疑似的なマイクロレンズをより細密化することができ、画像の空間解像度を向上させることができる。
本実施形態によれば、携帯端末用のカメラに対しても、撮影後に、焦点距離や被写界深度が変更可能なライトフィールドカメラとしての機能を付与することができ、高性能化を図ることができる。しかも、本実施形態の撮像モジュール10及びカメラ1は、パンフォーカスでの撮影画像も形成可能であり、様々な焦点距離及び被写界深度での撮影画像が形成可能となり、カメラ機能の向上を図ることができる。
さらに、従来のライトフィールドカメラは、撮像レンズや、マイクロレンズアレイとは別体の光線分割用の隔壁シート等が必要である。しかし、本実施形態によれば、いずれも不要であるので、ライトフィールドカメラとしても、薄型化及び軽量化、生産コストの低減等を図ることができる。
(レンズシートユニット13の他の実施形態)
図6は、レンズシートユニット13の他の実施形態を説明する図である。
図6(a)に示すように、レンズシートユニット13を構成する第1レンズシート11、第2レンズシート12は、そのレンズ形状面11a,12aがいずれも被写体側(+Z側)となるように配置されていてもよい。
また、図6(b)に示すように、レンズシートユニット13を構成する第1レンズシート11、第2レンズシート12は、そのレンズ形状面11a,12aがいずれもイメージセンサ側(−Z側)となるように配置されていてもよい。
さらに、図6(c)に示すように、第1レンズシート11は、そのレンズ形状面11aが被写体側(+Z側)となるように配置され、第2レンズシート12は、そのレンズ形状面12aがイメージセンサ側(−Z側)となるように配置されていてもよい。
図6(b),(c)に示すように第2レンズシート12のレンズ形状面12aがイメージセンサ14側(−Z側)に位置する場合には、接合層15は、その屈折率N3が第2レンズシート12の光透過部121の屈折率N1よりも小さいものとすることが好ましい。このような接合層15としては、シリコン系粘着剤等が好適である。
また、第1レンズシート11の光透過部111の配列方向R11を左右方向(X方向)とし、第2レンズシート12の光透過部121の配列方向R12を上下方向(Y方向)としてもよい。
なお、図6(c)ように、第1レンズシート11の第2レンズシート12側(−Z側)の面が、単位レンズ形状112が形成されていない裏面11bであり、第2レンズシート12の第1レンズシート11側の面も裏面12bである場合、光学密着による迷光の発生を抑制する観点から、第1レンズシート11及び第2レンズシート12との間に、不図示のスペーサを配置してもよい。また、このとき、光学密着による迷光の発生を抑制する効果を高める観点から、双方の裏面11b,12bを、微細凹凸形状が形成されたマット面としてもよい。
また、この図6(c)に示す形態の場合、第1レンズシート11と第2レンズシート12との間に、不図示の接合層を設けて、第1レンズシート11と第2レンズシート12とを一体に接合してもよい。この形態の場合、その接合層の屈折率は、接合層と各レンズシート11,12の裏面11b,12bとの界面での光の反射を防ぐ観点から、光透過部111,121の屈折率と等しいものが好ましい。
このような形態のレンズシートユニット13を使用した場合にも、良好な画質で撮像することができる。
また、第1レンズシート11の光透過部111(単位レンズ形状112)の配列方向R11と、第2レンズシート12の光透過部121(単位レンズ形状122)の配列方向R12とがなす角度αは、90°±10°の範囲、即ち、80°〜100°の範囲内であれば、レンズシートユニット13として所望される光学的機能は維持される。従って、角度αは、90°に限定されず、80°〜100°の範囲内としてもよい。
従って、第1レンズシート11及び第2レンズシート12をレンズシートユニット13として撮像モジュール10を組み立てる際に、第1レンズシート11の光透過部111の配列方向R11と第2レンズシート12の光透過部121の配列方向R12とのなす角度αを厳密に90°として配置しなくともよく、レンズシートユニット13及び撮像モジュール10の組み立て作業の容易化、作業効率の向上、歩留りの向上を図ることができる。
(撮像モジュール10の他の実施形態)
撮像モジュール10は、レンズシートユニット13とイメージセンサ14とを接合する接合層15を備えず、第2レンズシート12がイメージセンサ14の受光面上に接して配置され、レンズシートユニット13の第1レンズシート11及び第2レンズシート12、イメージセンサ14は、それぞれ不図示の支持部材で支持され、所定の位置で固定される形態としてもよい。
このとき、図2,図3及び図6(a)に示すように、第2レンズシート12のイメージセンサ14側(−Z側)の面が、単位レンズ形状122が形成されていない裏面12bである場合、イメージセンサ14の受光面の傷つきを防止したり、イメージセンサ14と第2レンズシート12との光学密着を防止したりする観点から、裏面12bを微細凹凸形状が形成されたマット面とすることが好ましい。
また、接合層15を設けない場合、第2レンズシート12とイメージセンサ14との間にスペーサを配置する等して、イメージセンサ14と第2レンズシート12との光学密着やイメージセンサ14の受光面の傷付き等を防止してもよい。
(変形形態)
以上説明した実施形態に限定されることなく、種々の変形や変更が可能であって、それらも本発明の範囲内である。
(1)単位レンズ形状112,122は、例えば、光透過部111,121の配列方向及びレンズシートの厚さ方向における断面形状が、シート面に長軸が直交する楕円の一部形状や、多角形形状等としてもよし、頂部が円弧等の曲線であり、単位レンズ形状の谷部側が直線からなる形状としてもよい。
(2)レンズシートユニット13は、1枚のシート状の基材層の両面に、単位レンズ形状112,122を有する光透過部111,121及び光吸収部113,123が形成されている形態としてもよい。
図7は、レンズシートユニット13の変形形態を示す図である。
レンズシートユニット13は、図7に示すように、1枚のシート状の基材層131の両面に、単位レンズ形状112,122を有する光透過部111,121及び光吸収部113,123が形成された形態としてもよい。
基材層131は、光透過性を有する樹脂製のシート状の部材である。この基材層131の厚さは、可能な範囲で薄いことが、迷光を抑制し、クロストークを低減して、各画素に入射する光の強度や入射方向の精度を向上させる観点から好ましい。
また、レンズシートユニット13は、3枚以上のレンズシートが光軸O方向(Z方向)に沿って配列された形態としてもよい。
このとき、例えば、3枚目のレンズシート(以下、第3レンズシートという)は、第1レンズシート11及び第2レンズシート12と同様の形状のレンズシートであり、その光透過部の配列方向が、第1レンズシート11及び第2レンズシート12の光透過部111,121の配列方向に対して、45°±10°をなしているものとすることが好ましい。
また、第3レンズシートのレンズ形状面は、被写体側(+Z側)であっても、イメージセンサ14側(−Z側)であってもよい。レンズシートユニット13内の第3レンズシートの光軸O方向(Z方向)おける位置についても適宜選択してよい。
さらに、第1レンズシート11及び第2レンズシート12と同様の形状のレンズシートである4枚目のレンズシート(第4レンズシート)を配置する場合には、その光透過部の配列方向が、第1レンズシート11及び第2レンズシート12の光透過部111,121の配列方向に対して、45°±10°をなし、第3レンズシートの光透過部の配列方向に対して90°±10°をなしているものとすることが好ましい。
また、第4レンズシートのレンズ形状面は、被写体側(+Z側)であっても、イメージセンサ14側(−Z側)であってもよい。また、レンズシートユニット13内の第4レンズシートの光軸O方向(Z方向)おける位置についても適宜選択してよい。
(3)第1レンズシート11及び第2レンズシート12は、それぞれ裏面11b,12b側に樹脂製の基材層が一体に積層されていてもよい。この基材層は、光透過性を有する樹脂製のシート状の部材であり、光透過部111,121を紫外線成形等で形成する際に、基材(ベース)となる部材である。
第1レンズシート11及び第2レンズシート12は、ランド厚D3が小さい方が好ましいので、基材層が離型性を有する部材であり、光透過部111,121及び光吸収部113,123の成形後に基材シートを剥離することが好ましい。しかし、基材層が十分に薄い場合等には、基材層を積層した形態のままレンズシートとして使用してもよい。
また、基材層が剥離性を有していない場合には、基材層に相当する部分を削る等により、ランド厚D3を薄くしてもよい。
(4)図8は、レンズシートユニット13の光透過部111,121の配列方向とイメージセンサ14の画素の配列方向との関係を示す図である。
前述の実施形態では、図8(a)に示すように、イメージセンサ14の画素が光軸O方向(Z方向)に対して直交する2方向G1,G2(Y方向及びX方向)に配列され、第1レンズシート11の光透過部111の配列方向R11は、画素の配列方向の1つの方向G1(Y方向)に平行であり、第2レンズシート12の光透過部121の配列方向R12は、画素の配列方向のもう1つの方向G2(X方向)に平行である例を示した。
このとき、光軸O方向(Z方向)から見て、第1レンズシート11の光透過部111の配列方向R11と画素の配列方向の1つの方向G1となす角度β、第2レンズシート12の光透過部121の配列方向R12が画素の配列方向のもう1つの方向G2となす角度γは、いずれも0°であった。
しかし、これに限らず、図8(b)に示すように、例えば、光軸O方向(Z方向)から見て、角度β及び角度γは、0°〜10°の範囲内であれば、光学的な機能は維持されるので、この範囲内で適宜選択して設定してよい。このような形態とすることにより、イメージセンサ14とレンズシートユニット13(第1レンズシート11及び第2レンズシート12)との位置合わせが容易となり、製造作業の簡略化や作業時間の短縮、歩留りの向上等を図ることができる。
なお、図8(b)では、画素の配列方向G1,G2は、Y方向及びX方向に平行であるい例を示しているが、これに限らず、光透過部111,121の配列方向R11,R12がY方向及びX方向に平行であり、画素の配列方向G1,G2とそれぞれ角度β,γをなす形態としてもよいし、画素の配列方向G1,G2及び光透過部111,121の配列方向R11,R12が、角度β,γをなし、かつ、いずれもY方向及びX方向に平行でない形態としてもよい。
(5)光透過部111,121と光吸収部113,123との界面は、複数の平面からなる折れ面状となっていてもよいし、複数の平面と曲面とが複数組み合わされている形態としてもよい。
(6)実施形態において、単位レンズ形状112,122の配列ピッチPやレンズ開口幅D1、曲率半径R、光透過部111,121の屈折率N1は、第1レンズシート11と第2レンズシート12とで同じである例を示したが、これに限らず、第1レンズシート11と第2レンズシート12とで異なっていてもよい。
(7)第1レンズシート11及び第2レンズシート12には、その表裏面(レンズ形状面11a,12aと裏面11b,12b)とを区別しやすくするために、表裏判別用の切欠きを設けてもよい。
また、レンズシートユニット13の配置や組み立てを容易にするために、アライメントマークを第1レンズシート11及び第2レンズシート12に設けてもよい。
(8)第1レンズシート11及び第2レンズシート12は、例えば、シートの有効部分(光が透過する領域)以外の領域、もしくは、光学的に影響の小さい領域(例えば、四隅の角部分)等に、粘着剤や接着剤等による接合層を形成して、一体に形成してもよい。また第1レンズシート11及び第2レンズシート12の周縁部等に、外側へ凸となる領域等を設けて、その領域に接合層を設けて接合してもよい。
(9)イメージセンサ14の受光面の大きさは、撮像モジュール10が用いられる携帯端末やカメラ等の大きさや、所望する画質やカメラ性能等に応じて、適宜採用してよい。イメージセンサ14の受光面の大きさは、例えば、スマートフォン等の携帯端末に用いられる場合には横×縦のサイズが、4.8×3.6mmや4.4×3.3mm等、カメラ(主にコンパクトデジタルカメラ)等に用いられる場合には、6.2×4.7mm、7.5×5.6mm等が挙げられる。
また、例えば、23.6×15.8mm、36×24mm、43.8×32.8mm等の大きな受光面を有するイメージセンサ14を使用することにより、ノイズの低減や取得する焦点距離や被写界深度等の情報の精度や情報量の向上を図り、画質のさらなる向上や、カメラの性能向上を図ってもよい。
なお、本実施形態及び変形形態は、適宜組み合わせて用いることもできるが、詳細な説明は省略する。また、本発明は以上説明した各実施形態によって限定されることはない。
1 カメラ
10 撮像モジュール
20 開口部
30 筐体
11 第1レンズシート
12 第2レンズシート
111,121 光透過部
112,122 単位レンズ形状
113,123 光吸収部
13 レンズシートユニット
14 イメージセンサ

Claims (8)

  1. 入射する光を電気信号に変換する複数の画素が2次元配列された撮像素子部と、
    前記撮像素子部よりも光の入射側に設けられたレンズシートユニットと、
    を備え、
    前記レンズシートユニットは、一方の面に凸状の第1単位レンズ形状を有する柱状の第1光透過部が配列された第1レンズシートと、前記第1レンズシートよりも撮像素子部側に配置され、一方の面に凸状の第2単位レンズ形状を有する柱状の第2光透過部が配列された第2レンズシートを備え、
    光軸方向から見て、前記第1光透過部の配列方向と、前記第2光透過部の配列方向とは、角度αをなして交差し、
    前記第1レンズシートは、前記第1光透過部の配列方向において前記第1光透過部と交互に配置され、前記第1光透過部の長手方向に延在する第1光吸収部を有し、
    前記第1光吸収部は、前記第1レンズシートの厚み方向に沿って、前記第1単位レンズ形状側から反対側の面側へ延び、
    前記第2レンズシートは、前記第2光透過部の配列方向において前記第2光透過部と交互に配置され、前記第2光透過部の長手方向に延在する第2光吸収部を有し、
    前記第2光吸収部は、前記第2レンズシートの厚み方向に沿って、前記第2単位レンズ形状側から反対側の面側へ延びること、
    を特徴とする撮像モジュール。
  2. 請求項1に記載の撮像モジュールにおいて、
    前記角度αは、80°≦α≦100°を満たすこと、
    を特徴とする撮像モジュール。
  3. 請求項1又は請求項2に記載の撮像モジュールにおいて、
    前記各単位レンズ形状は、各光透過部の配列方向に平行であって各レンズシートの厚み方向に平行な断面が円の一部形状であること、
    を特徴とする撮像モジュール。
  4. 請求項1から請求項3までのいずれか1項に記載の撮像モジュールにおいて、
    前記各光透過部の屈折率N1と前記各光吸収部の屈折率N2とは、N1≦N2という関係を満たすこと、
    を特徴とする撮像モジュール。
  5. 請求項1から請求項4までのいずれか1項に記載の撮像モジュールにおいて、
    前記各光吸収部と前記各光透過部との界面が、前記各レンズシートの厚み方向となす角度θは、0°≦θ≦10°を満たすこと、
    を特徴とする撮像モジュール。
  6. 請求項1から請求項5までのいずれか1項に記載の撮像モジュールにおいて、
    前記第2レンズシートは、前記撮像素子部と一体に接合されていること、
    を特徴とする撮像モジュール。
  7. 請求項1から請求項6までのいずれか1項に記載の撮像モジュールにおいて、
    前記第1単位レンズ形状は、前記第1レンズシートの撮像素子部側の面に形成され、前記第2単位レンズ形状は、前記第2レンズシートの被写体側の面に形成されていること、
    を特徴とする撮像モジュール。
  8. 請求項1から請求項7までのいずれか1項に記載の撮像モジュールを備える撮像装置。
JP2015169288A 2015-08-28 2015-08-28 撮像モジュール、撮像装置 Active JP6589464B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015169288A JP6589464B2 (ja) 2015-08-28 2015-08-28 撮像モジュール、撮像装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015169288A JP6589464B2 (ja) 2015-08-28 2015-08-28 撮像モジュール、撮像装置

Publications (2)

Publication Number Publication Date
JP2017046296A true JP2017046296A (ja) 2017-03-02
JP6589464B2 JP6589464B2 (ja) 2019-10-16

Family

ID=58211940

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015169288A Active JP6589464B2 (ja) 2015-08-28 2015-08-28 撮像モジュール、撮像装置

Country Status (1)

Country Link
JP (1) JP6589464B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102240896B1 (ko) * 2019-12-10 2021-04-15 국방과학연구소 단일 조리개를 이용한 카메라 장치

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04274201A (ja) * 1991-02-28 1992-09-30 Fujitsu Ltd レンズアレイ
JP2003139918A (ja) * 2001-11-01 2003-05-14 Nippon Sheet Glass Co Ltd 樹脂正立レンズアレイの製造方法
WO2005107243A1 (ja) * 2004-04-28 2005-11-10 Matsushita Electric Industrial Co., Ltd. 撮像装置及び微小レンズアレイの製造方法
JP2012100204A (ja) * 2010-11-05 2012-05-24 Sony Corp 撮像装置
JP2012189708A (ja) * 2011-03-09 2012-10-04 Sony Corp 撮像装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04274201A (ja) * 1991-02-28 1992-09-30 Fujitsu Ltd レンズアレイ
JP2003139918A (ja) * 2001-11-01 2003-05-14 Nippon Sheet Glass Co Ltd 樹脂正立レンズアレイの製造方法
WO2005107243A1 (ja) * 2004-04-28 2005-11-10 Matsushita Electric Industrial Co., Ltd. 撮像装置及び微小レンズアレイの製造方法
JP2012100204A (ja) * 2010-11-05 2012-05-24 Sony Corp 撮像装置
JP2012189708A (ja) * 2011-03-09 2012-10-04 Sony Corp 撮像装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102240896B1 (ko) * 2019-12-10 2021-04-15 국방과학연구소 단일 조리개를 이용한 카메라 장치

Also Published As

Publication number Publication date
JP6589464B2 (ja) 2019-10-16

Similar Documents

Publication Publication Date Title
KR102639538B1 (ko) 렌즈 시트, 렌즈 시트 유닛, 촬상 모듈, 촬상 장치
JP2023168388A (ja) レンズアレイ、撮像モジュール、撮像装置
JP6878817B2 (ja) 撮像モジュール、撮像装置
JP6686349B2 (ja) 撮像モジュール、撮像装置
JP6746941B2 (ja) 撮像モジュール、撮像装置
JP6589464B2 (ja) 撮像モジュール、撮像装置
JP6693086B2 (ja) 撮像モジュール、撮像装置
JP6701716B2 (ja) レンズシート、撮像モジュール、撮像装置
JP6627526B2 (ja) 撮像モジュール、撮像装置
JP6750216B2 (ja) 撮像モジュール、撮像装置
JP6696228B2 (ja) 撮像モジュール、撮像装置
JP2017097219A (ja) レンズシート、撮像モジュール、撮像装置
JP7047417B2 (ja) レンズシートユニット、撮像モジュール、撮像装置
JP6750223B2 (ja) レンズシートユニット、撮像モジュール、撮像装置
JP6724371B2 (ja) 撮像モジュール、撮像装置
JP2019128509A (ja) レンズシートユニット、レンズシートユニットの製造方法
JP6766357B2 (ja) レンズシートユニット、撮像モジュール、撮像装置
JP2018025713A (ja) レンズシートユニット、撮像モジュール、撮像装置
JP6746924B2 (ja) 撮像モジュール、撮像装置
JP6750230B2 (ja) 撮像モジュール、撮像装置
JP6910105B2 (ja) レンズシート、撮像モジュール、及び撮像装置
JP2019003974A (ja) 光学素子、撮像モジュール、撮像装置
JP6686348B2 (ja) 撮像モジュール、撮像装置
JP2017120303A (ja) レンズシート、撮像モジュール、撮像装置
JP2018025633A (ja) レンズシートユニット、撮像モジュール、撮像装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160926

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20160928

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20160926

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180625

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190411

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190416

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190614

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190820

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190902

R150 Certificate of patent or registration of utility model

Ref document number: 6589464

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150