JP7645658B2 - 制御装置、位置決め装置、リソグラフィー装置および物品製造方法 - Google Patents

制御装置、位置決め装置、リソグラフィー装置および物品製造方法 Download PDF

Info

Publication number
JP7645658B2
JP7645658B2 JP2021027746A JP2021027746A JP7645658B2 JP 7645658 B2 JP7645658 B2 JP 7645658B2 JP 2021027746 A JP2021027746 A JP 2021027746A JP 2021027746 A JP2021027746 A JP 2021027746A JP 7645658 B2 JP7645658 B2 JP 7645658B2
Authority
JP
Japan
Prior art keywords
manipulated variable
control device
control
output
index
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021027746A
Other languages
English (en)
Other versions
JP2022129161A5 (ja
JP2022129161A (ja
Inventor
孝史 栗原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2021027746A priority Critical patent/JP7645658B2/ja
Priority to US17/669,725 priority patent/US11693323B2/en
Priority to KR1020220021897A priority patent/KR102875867B1/ko
Priority to CN202210170269.9A priority patent/CN114967358B/xx
Publication of JP2022129161A publication Critical patent/JP2022129161A/ja
Publication of JP2022129161A5 publication Critical patent/JP2022129161A5/ja
Application granted granted Critical
Publication of JP7645658B2 publication Critical patent/JP7645658B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03FPHOTOMECHANICAL PRODUCTION OF TEXTURED OR PATTERNED SURFACES, e.g. FOR PRINTING, FOR PROCESSING OF SEMICONDUCTOR DEVICES; MATERIALS THEREFOR; ORIGINALS THEREFOR; APPARATUS SPECIALLY ADAPTED THEREFOR
    • G03F7/00Photomechanical, e.g. photolithographic, production of textured or patterned surfaces, e.g. printing surfaces; Materials therefor, e.g. comprising photoresists; Apparatus specially adapted therefor
    • G03F7/70Microphotolithographic exposure; Apparatus therefor
    • G03F7/70483Information management; Active and passive control; Testing; Wafer monitoring, e.g. pattern monitoring
    • G03F7/70491Information management, e.g. software; Active and passive control, e.g. details of controlling exposure processes or exposure tool monitoring processes
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03FPHOTOMECHANICAL PRODUCTION OF TEXTURED OR PATTERNED SURFACES, e.g. FOR PRINTING, FOR PROCESSING OF SEMICONDUCTOR DEVICES; MATERIALS THEREFOR; ORIGINALS THEREFOR; APPARATUS SPECIALLY ADAPTED THEREFOR
    • G03F7/00Photomechanical, e.g. photolithographic, production of textured or patterned surfaces, e.g. printing surfaces; Materials therefor, e.g. comprising photoresists; Apparatus specially adapted therefor
    • G03F7/70Microphotolithographic exposure; Apparatus therefor
    • G03F7/70691Handling of masks or workpieces
    • G03F7/70775Position control, e.g. interferometers or encoders for determining the stage position
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03FPHOTOMECHANICAL PRODUCTION OF TEXTURED OR PATTERNED SURFACES, e.g. FOR PRINTING, FOR PROCESSING OF SEMICONDUCTOR DEVICES; MATERIALS THEREFOR; ORIGINALS THEREFOR; APPARATUS SPECIALLY ADAPTED THEREFOR
    • G03F7/00Photomechanical, e.g. photolithographic, production of textured or patterned surfaces, e.g. printing surfaces; Materials therefor, e.g. comprising photoresists; Apparatus specially adapted therefor
    • G03F7/0002Lithographic processes using patterning methods other than those involving the exposure to radiation, e.g. by stamping
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03FPHOTOMECHANICAL PRODUCTION OF TEXTURED OR PATTERNED SURFACES, e.g. FOR PRINTING, FOR PROCESSING OF SEMICONDUCTOR DEVICES; MATERIALS THEREFOR; ORIGINALS THEREFOR; APPARATUS SPECIALLY ADAPTED THEREFOR
    • G03F7/00Photomechanical, e.g. photolithographic, production of textured or patterned surfaces, e.g. printing surfaces; Materials therefor, e.g. comprising photoresists; Apparatus specially adapted therefor
    • G03F7/70Microphotolithographic exposure; Apparatus therefor
    • G03F7/70691Handling of masks or workpieces
    • G03F7/70716Stages
    • G03F7/70725Stages control
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B13/00Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion
    • G05B13/02Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric
    • G05B13/0265Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric the criterion being a learning criterion

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Automation & Control Theory (AREA)
  • Feedback Control In General (AREA)
  • Exposure And Positioning Against Photoresist Photosensitive Materials (AREA)
  • Exposure Of Semiconductors, Excluding Electron Or Ion Beam Exposure (AREA)
  • Apparatuses And Processes For Manufacturing Resistors (AREA)
  • Shaping Of Tube Ends By Bending Or Straightening (AREA)

Description

本発明は、制御装置、位置決め装置、リソグラフィー装置および物品製造方法に関する。
特許文献1には、ニューラルネットワークを用いてステージを制御する制御系が記載されている。該制御系は、制御偏差に関する情報に基づいて第1操作量を出力する第1制御部と、該制御偏差に関する情報に基づいてニューラルネットワークによって第2操作量を出力する第2制御部と、該第1操作量と該第2操作量とを加算する加算器とを有する。該第2制御部は、該第2操作量の上限および下限を制限する制限部を有する。
特開2019-71405号公報
しかし、特許文献1に記載されているように単純に操作量の上限および下限を制限するだけでは、ニューラルネットワークが無駄な操作量を発生することになり、これが制御特性の向上を妨げうる。
本発明は、制御特性の向上に有利な技術を提供することを目的とする。
本発明の1つの側面は、制御対象を制御する制御装置に係り、前記制御装置は、前記制御対象の状態を計測する計測器と、前記計測器の出力と目標値とに応じた操作量を生成する制御器と、を備え、前記制御器は、前記出力と前記目標値とに応じたインデックスを出力する補償器と、前記操作量の使用頻度が所定の分布に従うように前記インデックスに前記操作量を対応させる変換器と、を含み、前記所定の分布は、前記操作量を横軸、前記横軸で与えられる操作量が出現しうる確率を縦軸としたときに、前記操作量の最小値と最大値との間の全域において上に凸の形状を有する
本発明によれば、制御特性の向上に有利な技術が提供される。
第1実施形態のシステムの構成を示す図。 第1実施形態のシステムにおける制御装置を位置決め装置に適用した例を示す図。 図2の制御装置(位置決め装置)をより具体化した構成を示す図。 第1実施形態における強化学習によるニューラルネットワークの学習シーケンスを例示する図。 制御器に制御偏差を入力してドライバへの操作量を決定する構成の一例を示す図。 比較例における変換規則を示す図。 比較例において学習によって最大報酬が得られたときの各操作量の使用頻度を示す図。 一実施形態における目標確率分布に基づいて複数の操作量を決定する例を示す図。 一実施形態における変換規則を例示する図。 比較例と一実施形態とにおける制御偏差を例示する図。 制御器に制御偏差を入力してドライバへの操作量を決定する構成の別の例を示す図。 第2実施形態のシステムにおける制御装置を位置決め装置に適用した例を示す図。 第2実施形態における強化学習によるニューラルネットワークの学習シーケンスを例示する図。 リソグラフィー装置としての露光装置の構成例を示す図。 リソグラフィー装置としてのインプリント装置の構成例を示す図。
以下、添付図面を参照して実施形態を詳しく説明する。なお、以下の実施形態は特許請求の範囲に係る発明を限定するものではない。実施形態には複数の特徴が記載されているが、これらの複数の特徴の全てが発明に必須のものとは限らず、また、複数の特徴は任意に組み合わせられてもよい。さらに、添付図面においては、同一若しくは同様の構成に同一の参照番号を付し、重複した説明は省略する。
図1には、一実施形態のシステムSYSの構成が示されている。システムSYSは、例えば、制御対象を含む制御装置1と、制御装置1を制御する制御サーバー2と、制御サーバー2を介して制御装置1の学習を実行する学習サーバー3とを備えうる。制御装置1は、ニューラルネットワークを含む補償器を備えていて、学習サーバー3は、例えば、制御サーバー2を介してニューラルネットワークのパラメータ値を制御装置1に送ったり、制御サーバー2を介して駆動指令を制御装置1に送ったりしうる。制御装置1は、駆動指令に従って制御対象を駆動する動作を実行し、その駆動結果(例えば、制御偏差)を制御サーバー2を介して学習サーバー3に送りうる。学習サーバー3は、駆動結果に基づいて報酬を計算し、その報酬に基づいてニューラルネットワークのパラメータ値を更新しうる。
制御サーバー2の機能の全部または一部は、制御装置1に組み込まれうる。あるいは、制御サーバー2の機能の全部または一部は、学習サーバー3に組み込まれうる。あるいは、制御サーバー2および学習サーバー3の機能の一部は、制御装置1に組み込まれうる。あるいは、制御装置1、制御サーバー2および学習サーバー3は、一体的に構成されうる。制御サーバー2は、制御装置1の上位装置でありうる。例えば、制御装置1は、リソグラフィー装置の一構成要素であり、制御サーバー2は、リソグラフィー装置の主制御装置、あるいは、そのリソグラフィー装置を含む複数のリソグラフィー装置を制御する統括制御装置でありうる。
図2には、図1に示されたシステムSYSにおける制御装置1を位置決め装置に適用した例が示されている。位置決め装置として構成された制御装置1は、制御対象としてのステージSTの位置を制御するように構成されうる。図2に例示された制御装置1は、ステージ機構5、計測器6、ドライバ7および制御基板(制御部)8を備えうる。ステージ機構5は、例えば、ステージSTと、ステージSTを駆動するアクチュエータ(不図示)とを含みうる。ステージSTは、基板等の位置決め対象物を保持しうる。該アクチュエータは、例えば、リニアモータ、電磁アクチュエータ、ボイスコイルモータ、および、ラックアンドピニオン機構の少なくとも1つを含みうる。制御対象は、ステージST、あるいはステージSTによって保持された部材(例えば、基板)でありうる。より巨視的には、制御対象は、ステージ機構5として理解されてもよい。計測器6は、制御対象の状態(例えば、位置)を計測しうる。制御基板8は、ドライバ7に対して指令(操作量)を送り、ドライバ7は、ステージ機構5のアクチュエータに対して電流を出力しうる。ステージ機構5あるいはステージSTの状態(駆動結果)は、計測器6によって計測あるいは検出され、制御基板8に提供されうる。
図3には、図2に例示された制御装置1の構成をより具体化した構成例が示されている。制御基板8は、計測器6によって計測された制御対象の状態(例えば、位置)と制御対象を制御するための駆動指令(目標値)との差分(制御偏差)を演算する演算器9と、演算器9の出力に応じた操作量を生成する制御器10とを含みうる。制御器10は、制御対象の状態と駆動指令とに基づいて操作量を生成する構成要素として理解されてもよい。制御器10は、学習サーバー3から提供されるニューラルネットワークのパラメータ値によって定義される補償器として動作しうる。ドライバ7は、制御基板8あるいは制御器10から提供される操作量を電流に変換しうる。換言すると、ドライバ7は、制御基板8あるいは制御器10から提供される操作量に従う大きさを有する電流をステージ機構5(のアクチュエータ)に出力する。
図4には、強化学習によるニューラルネットワークの学習シーケンスS100が例示されている。まず、ステップS101において、学習サーバー3は、制御サーバー2を介して制御装置1と通信し、制御器10のニューラルネットワークのパラメータ値を初期化する。次に、ステップS102において、学習サーバー3は、制御サーバー2を介して、ステージ機構5(ステージST)を駆動するように制御装置1に所定の動作指令を送る。一例において、制御サーバー2は、動作指令を受けて、その動作指令に対応する駆動軌道に沿ってステージ機構5のステージSTが駆動されるように駆動指令(目標値列)を制御装置1に供給しうる。制御装置1は、ステージ機構5の駆動結果、例えば、演算器9によって演算される差分(制御偏差)を蓄積し、制御サーバー2あるいは学習サーバー3からの要求に応じて駆動結果を制御サーバー2あるいは学習サーバー3に提供するように構成されうる。
ステップS103において、学習サーバー3は、ステップS102の動作において蓄積された駆動結果を制御サーバー2を介して制御装置1から取得する。ステップS104において、学習サーバー3は、ステップS103で取得した駆動結果に基づいて報酬を計算する。報酬を計算するための計算式は、例えば、制御偏差が小さい時に高い報酬が得られるように決定されうる。ステップS105において、学習サーバー3は、ステップS104において計算した報酬が学習終了条件を満たすかどうかを判断し、該報酬が該学習終了条件を満たす場合にはステップS106に処理を進め、そうでなければ処理をステップS107に進める。ステップS107において、学習サーバー3は、制御器10のニューラルネットワークのパラメータ値を変更し、その後、ステップS102~S105を再度実行する。ステップS106において、学習サーバー3は、ニューラルネットワークの最新のパラメータ値を学習結果として保存する。
図5には、制御器10に制御偏差を入力してドライバ7への操作量を決定する構成の一例が示されている。制御器10は、制御偏差(計測器6の出力と目標値との差分)に応じたインデックス503を出力する補償器510と、変換規則521に従ってインデックス503を操作量504に変換する変換器520とを含みうる。変換規則521は、例えば、複数のインデックス503にそれぞれ対応する複数の操作量504を定義する変換テーブルによって与えられうる。補償器510は、ニューラルネットワークで構成され、該ニューラルネットワークは、入力層500、隠れ層501および出力層502を含みうる。出力層502は、変換規則521に対する入力がとりうる複数のインデックス503にそれぞれ対応する複数のニューロンで構成されうる。補償器510を構成するニューラルネットワークの動作は、予め設定されたパラメータ値によって定義されていて、該ニューラルネットワークは、入力層500に入力される制御偏差に基づいて、隠れ層501および出力層502の各ニューロンの活性度を算出する。次に、補償器510を構成するニューラルネットワークは、出力層502の複数のニューロンの中で最も活性しているニューロンに対応するインデックス503を複数のインデックス503の中から選択してニューラルネットワークの演算結果として出力する。ここで、複数のニューロンの中で最も活性しているニューロンは、活性度の数値が最も大きいニューロンである。変換器520は、変換規則521に従って、入力されたインデックス503に対応した操作量504を出力する。換言すると、変換器520は、変換規則521に従って、入力されたインデックス503を操作量504に変換し出力する。
本実施形態の1つの特徴は、変換規則521である。ここで、本実施形態における変換規則521の理解を深めるために、まず、比較例とその比較例における問題点を説明する。
図6には、比較例における変換規則が示されている。図6では、横軸をインデックス、縦軸を操作量Fnとして変換規則が示されている。比較例では、操作量Fnの最小値をF0、操作量Fnの最大値をFN、インデックスをnとし、式(1)のようにインデックスnと操作量Fnとが線形の関係を有するように変換規則が定義されている。
Fn=n×(FN-F0)/N+F0 (n=0~N)・・・(1)
このような変換規則が設定された状態で学習を行った。ここで、制御基板8の構成として、出力層502のニューロンの数、インデックス503の数および操作量504の数をそれぞれ9とし、F4=0となるようにF0を決定した。この条件で、制御装置1に対する駆動指令(目標値)を所定値としたときの制御偏差が小さくなるように学習を実施した。
図7には、比較例において学習によって最大報酬が得られたときの各操作量の使用頻度が示されている。この結果から、操作量F0、F2、F5およびF7が全く使用されていないことが分かる。つまり、学習の結果、これらの操作量は不要という判断がされたことになる。ここで、図3に示された構成において、制御器10は一定周期で出力(即ち、操作量)を生成しなければならないという制約があるので、制御器10による演算量に無駄がないことが望ましい。しかし、比較例では、計算される操作量の中に上述したように不要な操作量があり、これらの操作量を削除するか、他の操作量と置き換えるなどの工夫がなされるべきである。
以下、上記の比較例との対比において、本実施形態における変換器520の変換規則521について説明する。本実施形態では、変換規則521は、変換器520あるいは制御器10から出力される操作量の確率分布が目標確率分布に従うように設定される。ここで、操作量の確率分布は、操作量の最小値と最大値との間の範囲において操作量の各値が出現しうる確率の分布である。このような変換規則521を定義あるいは設定して学習を開始することによって、無駄な操作量の発生を低減し、制御器10の演算の無駄を省くことができる。これは、制御装置1の制御特性を向上させるために有利である。
ステージSTの制御偏差が小さくなるように操作量を出力しなければならないことから、変換規則521は、操作量を横軸、確率を縦軸としたときに、操作量の最小値と最大値との間の全域において上に凸の形状(確率分布)を有することが好ましい。また、該形状は、オフセット値が0である場合には、操作量が0の位置にピークを有することが好ましく、オフセット値が0以外の値を有する場合には、操作量が該オフセット値である位置にピークを有することが好ましい。なお、オフセット値は、公差などに起因する個体差をキャンセルするために使用されうる。上に凸の形状は、例えば、正規分布でありうる。
一例において、図8に例示されるように、目標確率分布900に基づいて、複数の操作量F0~F8の使用頻度(確率)(図8中の面積)が一定になるように、複数の操作量F0~F8が決定されうる。図9には、図8の目標確率分布900および複数の操作量F0~F8に対応する、インデックスと操作量との関係(即ち、変換規則)が示されている。ここで、操作量の最大値F8と最小値F0は、制御対象であるステージSTの重量および最大駆動加速度、想定される最大制御偏差の大きさなどに基づいて決定されうる。また、上に凸の形状を有する目標確率分布900が正規分布である場合、その分散値は、操作量の分解能に関係しているため、想定される最大制御偏差に応じて決定されうる。
図10には、比較例(点線)と本実施形態(実線)とに関して、最大報酬が得られるパラメータ値がニューラルネットワークに設定された状態における制御偏差が示されている。本実施形態では、比較例と比べて、ゼロ(F4)に近い操作量を使用することが可能となったため、ドライバ7への出力分解能が向上し、その結果、制御偏差がより抑制されている。これは、比較例よりも本実施形態の制御特性が優れていることを意味する。また、学習に要する時間は、本実施形態の方が比較例よりも短かった。また、本実施形態と比較例とは、補償器510を構成するニューラルネットワーク内のニューロンの数は同じであるため、制御器10の演算量は同じである。それにも拘わらず、ステージSTの位置決め精度は、本実施形態の方が比較例より優れている。また、本実施形態の効果は、補償器510がニューラルネットワークで構成されない場合においても得られる。
図11には、制御器10に制御偏差を入力してドライバ7への操作量を決定する構成の別の例が示されている。制御器10は、制御偏差(計測器6の出力と目標値との差分)に応じたインデックス603を出力する補償器610と、変換規則621に従ってインデックス603を操作量に変換する変換器620とを含みうる。補償器610は、ニューラルネットワークで構成され、該ニューラルネットワークは、入力層600、隠れ層601および出力層602を含みうる。ここで、出力層602は、単一のニューロンで構成される。補償器610を構成するニューラルネットワークの動作は、予め設定されたパラメータ値によって定義されていて、該ニューラルネットワークは、入力層600に入力される制御偏差に基づいて、隠れ層601および出力層602の各ニューロンの活性度を算出する。次に、補償器610を構成するニューラルネットワークは、出力層602のニューロンの活性度の数値を0から1の数値となるように正規化したインデックス603をニューラルネットワークの演算結果として出力する。変換器620の変換規則621は、上に凸の形状を有する目標確率分布(例えば、正規分布)において、F0からの面積(積分値)がインデックス603と一致するときの操作量604を与えるものである。換言すると、変換規則621は、操作量604の確率分布が目標確率分布に従うように設定されている。変換器620は、このような変換規則621に従って操作量604を算出し、その操作量604を制御器10の出力として出力する。変換規則621を規定する目標確率分布が正規分布である場合、その正規分布の平均値および分散値は任意である。
ステージ機構5あるいはステージSTの駆動を制御するために複数の駆動プロファイルが準備される場合、駆動プロファイル毎に制御器10が設けられ、複数の制御器10の中から駆動プロファイルに応じた制御器10が選択されてもよい。この場合において、変換器520、620の変換規則は、制御器10毎に決定されてもよい。
ある目標確率分布に基づいて決定されたインデックスと操作量との関係(変換規則)を有する制御器10において、一連の学習シーケンスを実施した後により高い位置決め精度を達成するために、その目標確率分布を変更して再度学習シーケンスを実施してもよい。例えば、ある目標正規分布に基づいて決定されたインデックスと操作量との関係を有する制御器10において、一連の学習シーケンスを実施した後により高い位置決め精度を達成させるために、その目標正規分布を変更して、再度学習シーケンスを実施してもよい。目標正規分布の変更は、例えば、平均値および分散値の少なくとも一方の変更を含みうる。
ここで、それぞれ図3に例示されるような複数のステージ制御装置を調整する場合を考える。このような場合、第1ステージ制御装置において学習シーケンスS100を実施しニューラルネットワークのパラメータ値20を取得した後、第2ステージ制御装置に対して、その学習済みのパラメータ値20を適用すればよい。これにより、第2ステージ制御装置において学習を実施しなくても、第1ステージ制御装置と同程度の位置決め精度を達成することができる。さらに、第2ステージ制御装置に対して学習済みのパラメータ値20を初期値として適用し、学習シーケンスS100を実施してもよい。また、このとき、第2ステージ制御装置が有する制御器10の変換規則を提供する目標確率分布の広がり量や操作量方向へのシフト量を変更してから学習を実施してもよい。
以下、第2実施形態を説明するが、ここで言及しない事項は、第1実施形態に従いうる。図12には、第2実施形態に制御装置1の構成が示されている。第2実施形態の制御装置1は、この例では、位置決め装置として構成されているが、他の形態の制御装置として構成されてもよい。制御基板8は、計測器6で計測された制御対象の状態(例えば、位置)と制御対象を制御するための駆動指令(目標値)との差分(制御偏差)を演算する演算器9と、演算器9の出力に応じた第1、第2操作量を生成する第1制御器30、第2制御器40とを含みうる。第1制御器30および第2制御器40は、制御対象の状態と駆動指令とに基づいて操作量を生成する構成要素として理解されてもよい。第1制御器30は、例えば、PID制御器でありうる。第2制御器40は、学習サーバー3から提供されるニューラルネットワークのパラメータ値によって定義される補償器として動作する。第2制御器40は、第1実施形態の制御器10と同様に、補償器510(610)と、変換器520(620)とを含む。制御基板8はまた、第1操作量および第2操作量に基づいて制御対象を操作するための操作量を生成する演算器(加算器)60と、第2制御器40と演算器60とを接続する経路を開閉するスイッチ50とを備えうる。ドライバ7は、制御基板8あるいは制御器10から提供される操作量を電流に変換しうる。
図13には、第2実施形態の制御装置1の学習シーケンス200が例示されている。図13には、図12に示された構成に対応した強化学習によるニューラルネットワークの学習シーケンスが示されている。まず、ステップS201において、学習サーバー3は、スイッチ50をオフさせる。これにより、制御基板8あるいは制御装置1は、演算器60が第2操作量に基づくことなく第1操作量に基づいて操作量を生成するモードになる。次に、ステップS202において、学習サーバー3は、制御サーバー2を介して、ステージ機構5を駆動するように制御装置1に所定の動作指令を送る。一例において、制御サーバー2は、動作指令を受けて、その動作指令に対応する駆動軌道に沿ってステージSTが駆動されるように駆動指令(目標値列)を制御装置1に供給しうる。制御装置1は、制御基板8(第1制御器30)が発生する操作量を蓄積し、制御サーバー2あるいは学習サーバー3から要求に応じて駆動結果を制御サーバー2あるいは学習サーバー3に提供するように構成されうる。ステップS203において、学習サーバー3は、ステップS202の動作において蓄積された操作量を制御サーバー2を介して制御装置1から取得する。ステップS204において、学習サーバー3は、ステップS202、S203の実行回数が規定値以上になったかどうかを判断し、該実行回数が該規定値以上になったらステップS205に処理を進め、そうでなければステップS202、S203を再度実行する。
ステップS205において、学習サーバー3は、規定回数にわたって取得した操作量に基づいて操作量の頻度分布を生成し、その頻度分布に応じた目標確率分布を決定する。ここで、頻度分布に応じた目標確率分布は、例えば、頻度分布と同一または相似の形状を有する確率分布、または、頻度分布から抽出され特徴と同一の特徴を有する確率分布でありうるが、頻度分布に対して他の相関性を有してもよい。
ステップS206において、学習サーバー3は、ステップS205において決定した目標確率分布に応じた変換規則を生成して、これを第2制御器40の変換器に設定する。この処理は、第1実施形態と同様である。ステップS207にこいて、学習サーバー3は、スイッチ50をオンにする。これにより、制御基板8あるいは制御装置1は、演算器60が第1操作量と第2操作量とに基づいて、ドライバ7に供給すべき操作量を発生するモードになる。次いで、ステップS208において、学習サーバー3は、図4に示されたステップS101~S107を実施する。なお、ニューラルネットワークのパラメータ値は、第2制御器40のニューラルネットワークに設定される。
第2実施形態では、第2制御器40の変換器に設定される変化規則は、演算器60が第2操作量に基づくことなく第1操作量に基づいて操作量を生成するモードで制御対象が制御されたときの第1操作量の確率分布に応じた変換規則となる。学習サーバー3は、そのような変換規則を第2制御器40の変換器に設定する設定器として機能する。そのような設定器は、制御装置1に組み込まれてもよい。
上記の位置決め装置は、原版のパターンを基板に転写するリソグラフィー装置に組み込まれ、該位置決め装置のステージSTは、基板を保持し該基板を位置決めするように構成されうる。図14には、上記のステージ機構が組み込まれたリソグラフィー装置の一例としての露光装置EXPの構成が例示されている。露光装置EXPは、原版Rのパターンを基板Wに投影する投影光学系POを備えうる。また、露光装置EXPは、基板Wを位置決めする基板位置決め装置PA、原版Rを位置決めする原版位置決め装置RSM、および、原版Rを照明する照明光学系IOを備えうる。上記の位置決め装置は、基板位置決め装置PAに適用されうる。基板位置決め機構PAは、基板Wを保持する可動部としてのステージWSと、ステージWSを駆動するアクチュエータWSAとを含みうる。あるいは、上記の位置決め装置は、原版位置決め装置RSMに適用されうる。
図15には、上記のステージ機構が組み込まれたリソグラフィー装置の一例としてのインプリント装置IMPの構成が例示されている。インプリント装置IMPは、原版Mのパターンを基板Wの上のインプリント材IMに転写する。インプリント装置IMPは、基板Wを位置決めする基板位置決め装置PA、原版Mを駆動するインプリントヘッドIH、および、インプリント材を硬化させる硬化ユニットCUを備えうる。インプリントヘッドIHは、基板Wの上のインプリント材IMに原版Mのパターン領域を接触させたり、硬化したインプリント材IMから原版Mを分離させたりしうる。硬化ユニットCUは、基板Wの上のインプリント材IMに原版Mのパターン領域が接触した状態で、インプリント材IMに硬化エネルギー(例えば、光エネルギー)を照射し、これによってインプリント材IMを硬化させうる。上記の位置決め装置は、基板位置決め装置PAに適用されうる。
上記のリソグラフィー装置は、物品を製造する物品製造方法に適用されうる。該物品製造方法は、上記のリソグラフィー装置を使って基板の上にパターンを形成するパターン形成工程と、該パターンが形成された該基板を処理して物品を得る処理工程と、を含みうる。該処理工程は、例えば、該パターンをエッチングマスクとして用いて該基板をエッチングする工程を含みうる。該処理工程は、例えば、該基板の上に膜を形成する工程、該基板を封止する工程等を含みうる。該物品製造方法は、パターン形成方法を複数回にわたって実施してもよい。
発明は上記実施形態に制限されるものではなく、発明の精神及び範囲から離脱することなく、様々な変更及び変形が可能である。従って、発明の範囲を公にするために請求項を添付する。
1:制御装置、5:ステージ機構、6:計測器、ST:ステージ(制御対象)510:補償器、520:変換器

Claims (15)

  1. 制御対象を制御する制御装置であって、
    前記制御対象の状態を計測する計測器と、
    前記計測器の出力と目標値とに応じた操作量を生成する制御器と、を備え、
    前記制御器は、前記出力と前記目標値とに応じたインデックスを出力する補償器と、前記操作量の使用頻度が所定の分布に従うように前記インデックスに前記操作量を対応させる変換器と、を含み、
    前記所定の分布は、前記操作量を横軸、前記横軸で与えられる操作量が出現しうる確率を縦軸としたときに、前記操作量の最小値と最大値との間の全域において上に凸の形状を有する、
    ことを特徴とする制御装置。
  2. 前記所定の分布は、正規分布である、
    ことを特徴とする請求項1に記載の制御装置。
  3. 前記補償器は、前記出力と前記目標値との差分に応じて前記インデックスを決定する、
    ことを特徴とする請求項1又は2に記載の制御装置。
  4. 前記補償器は、ニューラルネットワークを含む、
    ことを特徴とする請求項1乃至のいずれか1項に記載の制御装置。
  5. 前記ニューラルネットワークは、入力層、隠れ層および出力層を有し、
    前記ニューラルネットワークのパラメータ値は、前記インデックスを前記操作量に変換するための変換規則が設定された状態で学習を行うことによって決定される、
    ことを特徴とする請求項に記載の制御装置。
  6. 前記変換器は、複数のインデックスにそれぞれ対応する複数の操作量を定義する変換テーブルを含み、
    前記ニューラルネットワークの前記出力層は、前記複数のインデックスにそれぞれ対応する複数のニューロンで構成され、
    前記補償器が出力する前記インデックスは、前記複数のニューロンのうち最も活性しているニューロンに対応する、
    ことを特徴とする請求項に記載の制御装置。
  7. 前記出力層は、単一のニューロンで構成され、前記ニューラルネットワークは、前記出力層の前記ニューロンの活性度に応じて前記インデックスを決定する、
    ことを特徴とする請求項に記載の制御装置。
  8. 前記補償器が出力する前記インデックスは、前記出力層の前記ニューロンの活性度を正規化して得られる、
    ことを特徴とする請求項に記載の制御装置。
  9. 制御対象を制御する制御装置であって、
    前記制御対象の状態を計測する計測器と、
    前記計測器の出力と目標値とに応じた第1操作量を生成する第1制御器と、
    前記出力と前記目標値とに応じた第2操作量を生成する第2制御器と、
    前記第1操作量および前記第2操作量に基づいて前記制御対象を操作するための操作量を生成する演算器と、を備え、
    前記第2制御器は、前記出力と前記目標値とに応じたインデックスを出力する補償器と、変換規則に従って前記インデックスを前記第2操作量に変換する変換器とを含み、
    前記変換規則は、前記演算器が前記第2操作量に基づくことなく前記第1操作量に基づいて前記操作量を生成するモードで前記制御対象が制御されたときの前記第1操作量の確率分布に応じた変換規則であり
    前記確率分布は、前記第1操作量を横軸、前記横軸で与えられる第1操作量が出現しうる確率を縦軸としたときに、前記第1操作量の最小値と最大値との間の全域において上に凸の形状を有する、
    ことを特徴とする制御装置。
  10. 制御対象を制御する制御装置であって、
    前記制御対象の状態を計測する計測器と、
    前記計測器の出力と目標値とに応じた第1操作量を生成する第1制御器と、
    前記出力と前記目標値とに応じた第2操作量を生成する第2制御器と、
    前記第1操作量および前記第2操作量に基づいて前記制御対象を操作するための操作量を生成する演算器と、
    設定器と、を備え、
    前記第2制御器は、前記出力と前記目標値とに応じたインデックスを出力する補償器と、変換規則に従って前記インデックスを前記第2操作量に変換する変換器とを含み、
    前記設定器は、前記演算器が前記第2操作量に基づくことなく前記第1操作量に基づいて前記操作量を生成するモードで前記制御対象が制御されたときの前記第1操作量の確率分布に応じて前記変換規則を設定し
    前記確率分布は、前記第1操作量を横軸、前記横軸で与えられる第1操作量が出現しうる確率を縦軸としたときに、前記第1操作量の最小値と最大値との間の全域において上に凸の形状を有する、
    ことを特徴とする制御装置。
  11. ステージを含むステージ機構と、
    前記ステージ機構を駆動するドライバと、
    前記ステージの状態を計測する計測器と、
    請求項1乃至10のいずれか1項に記載の制御装置と、を備え、
    前記制御装置は、前記ステージを前記制御対象として制御するように構成されている、
    ことを特徴とする位置決め装置。
  12. 原版のパターンを基板に転写するリソグラフィー装置であって、
    請求項11に記載の位置決め装置を備え、
    前記位置決め装置のステージは、前記基板を保持する、
    ことを特徴とするリソグラフィー装置。
  13. 前記原版のパターンを前記基板に投影する投影光学系を更に備え、露光装置として構成されていることを特徴とする請求項12に記載のリソグラフィー装置。
  14. 前記原版のパターンを前記基板の上のインプリント材に転写するインプリント装置として構成されていることを特徴とする請求項12に記載のリソグラフィー装置。
  15. 請求項12乃至14のいずれか1項に記載のリソグラフィー装置を使って基板の上にパターンを形成する工程と、
    前記パターンが形成された前記基板を処理して物品を得る工程と、
    を含むことを特徴とする物品製造方法。
JP2021027746A 2021-02-24 2021-02-24 制御装置、位置決め装置、リソグラフィー装置および物品製造方法 Active JP7645658B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2021027746A JP7645658B2 (ja) 2021-02-24 2021-02-24 制御装置、位置決め装置、リソグラフィー装置および物品製造方法
US17/669,725 US11693323B2 (en) 2021-02-24 2022-02-11 Control apparatus, positioning apparatus, lithography apparatus, and article manufacturing method
KR1020220021897A KR102875867B1 (ko) 2021-02-24 2022-02-21 제어장치, 위치결정 장치, 리소그래피 장치 및 물품제조 방법
CN202210170269.9A CN114967358B (zh) 2021-02-24 2022-02-24 控制装置、定位装置、光刻装置、以及物品制造方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021027746A JP7645658B2 (ja) 2021-02-24 2021-02-24 制御装置、位置決め装置、リソグラフィー装置および物品製造方法

Publications (3)

Publication Number Publication Date
JP2022129161A JP2022129161A (ja) 2022-09-05
JP2022129161A5 JP2022129161A5 (ja) 2024-03-06
JP7645658B2 true JP7645658B2 (ja) 2025-03-14

Family

ID=82899550

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021027746A Active JP7645658B2 (ja) 2021-02-24 2021-02-24 制御装置、位置決め装置、リソグラフィー装置および物品製造方法

Country Status (3)

Country Link
US (1) US11693323B2 (ja)
JP (1) JP7645658B2 (ja)
KR (1) KR102875867B1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7724656B2 (ja) * 2021-07-30 2025-08-18 キヤノン株式会社 制御装置、リソグラフィー装置および物品製造方法
DE102022004902A1 (de) * 2022-12-23 2024-07-04 Carl Zeiss Smt Gmbh Projektionsbelichtungsanlage mit manipulatoren

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010002303A1 (en) 1998-09-16 2001-05-31 Bausan Yuan Method and apparatus for controlling the leveling table of a wafer stage
JP2016012649A (ja) 2014-06-27 2016-01-21 キヤノン株式会社 指令データの作成方法、位置決め装置、リソグラフィ装置、物品の製造方法
JP2019071405A (ja) 2017-10-06 2019-05-09 キヤノン株式会社 制御装置、リソグラフィ装置、測定装置、加工装置、平坦化装置及び物品製造方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2624880B2 (ja) * 1990-08-03 1997-06-25 株式会社日立製作所 制御装置及び制御方法
JP3320276B2 (ja) * 1995-09-04 2002-09-03 キヤノン株式会社 精密制御装置
KR100226599B1 (ko) * 1995-09-04 1999-10-15 미따라이 하지메 구동제어장치 및 방법
JP3761246B2 (ja) * 1996-04-26 2006-03-29 株式会社タダノ 油圧アクチュエ−タ用サ−ボ制御装置
NL2016797A (en) * 2015-06-19 2016-12-22 Asml Netherlands Bv Control system, positioning system, lithographic apparatus and device manufacturing method.
CN111512237B (zh) * 2017-12-22 2023-01-24 Asml荷兰有限公司 基于缺陷概率的过程窗口
JP7148295B2 (ja) * 2018-07-04 2022-10-05 キヤノン株式会社 制御装置、露光装置及び物品の製造方法
DE102019200218B3 (de) * 2019-01-10 2020-06-25 Carl Zeiss Smt Gmbh Steuerungsvorrichtung, Justieranordnung und Verfahren zur Steuerung eines Manipulators bezüglich einer Projektionsbelichtungsanlage für die Mikrolithographie

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010002303A1 (en) 1998-09-16 2001-05-31 Bausan Yuan Method and apparatus for controlling the leveling table of a wafer stage
JP2016012649A (ja) 2014-06-27 2016-01-21 キヤノン株式会社 指令データの作成方法、位置決め装置、リソグラフィ装置、物品の製造方法
JP2019071405A (ja) 2017-10-06 2019-05-09 キヤノン株式会社 制御装置、リソグラフィ装置、測定装置、加工装置、平坦化装置及び物品製造方法

Also Published As

Publication number Publication date
US20220269185A1 (en) 2022-08-25
CN114967358A (zh) 2022-08-30
US11693323B2 (en) 2023-07-04
KR20220121190A (ko) 2022-08-31
JP2022129161A (ja) 2022-09-05
KR102875867B1 (ko) 2025-10-24

Similar Documents

Publication Publication Date Title
JP7229686B2 (ja) 制御装置、リソグラフィ装置、測定装置、加工装置、平坦化装置及び物品製造方法
JP7645658B2 (ja) 制御装置、位置決め装置、リソグラフィー装置および物品製造方法
JP7520656B2 (ja) 制御装置およびその調整方法、リソグラフィー装置、ならびに、物品製造方法
WO2019069649A1 (ja) 制御装置、リソグラフィ装置、測定装置、加工装置、平坦化装置及び物品製造方法
JP7741655B2 (ja) 処理装置、管理装置、リソグラフィ装置、および物品製造方法
JP2022129161A5 (ja)
CN114967358B (zh) 控制装置、定位装置、光刻装置、以及物品制造方法
KR101862053B1 (ko) 스테이지 장치, 리소그래피 장치, 물품의 제조방법, 및 결정방법
Wang et al. Micro-lens fabrication by a long-stroke precision stage with switching control based on model response prediction
KR20230011383A (ko) 관리장치, 리소그래피 장치, 관리방법 및 물품 제조방법
US20230119136A1 (en) Control apparatus, lithography apparatus, and article manufacturing method
JP2022059871A (ja) フィードバック制御装置、リソグラフィ装置、測定装置、加工装置、平坦化装置、物品の製造方法、コンピュータプログラム、およびフィードバック制御方法
JP2022028489A5 (ja) 制御装置、リソグラフィー装置、制御方法および物品製造方法
JP7724656B2 (ja) 制御装置、リソグラフィー装置および物品製造方法
Wang et al. Switching control of a long-stroke precision stage based on model prediction
JP2016099736A (ja) ステージ装置、リソグラフィ装置、物品の製造方法、および制御方法
JP7672837B2 (ja) ステージ装置、パターン形成装置、及び物品の製造方法
US20240310809A1 (en) Control device, control method, storage medium, and article manufacturing method
SU881653A1 (ru) Каскадна система регулировани технологических процессов

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240226

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20240226

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240930

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240930

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20241125

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20250203

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20250304

R150 Certificate of patent or registration of utility model

Ref document number: 7645658

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150