JP2023034971A - 成形条件パラメータ調整方法、コンピュータプログラム、成形条件パラメータ調整装置及び成形機 - Google Patents

Abstract

【課題】複数の成形工程パラメータの相互関係を考慮し、成形工程サイクルにおける成形機の複数の成形条件パラメータを適切な順序及びタイミングで調整することができる成形条件パラメータ調整方法を提供する。【解決手段】成形機の成形条件パラメータ調整方法であって、成形工程サイクルにおいて、成形機に設定された複数の成形条件パラメータの変更値を決定し、複数の成形条件パラメータの変更値が決定された場合、成形工程サイクルにおける複数のパラメータの変更タイミングの前後関係を示すタイミング情報を参照して、変更対象として決定した複数のパラメータの変更タイミングを決定し、決定した変更タイミングに従って、変更対象として決定した複数のパラメータを順次変更する。【選択図】図６

Description

本開示は、成形条件パラメータ調整方法、コンピュータプログラム、成形条件パラメータ調整装置及び成形機に関する。

強化学習により、射出成形機の成形条件パラメータを適切に調整することができる射出成形機システムがある（例えば、特許文献１）。

特開２０１９－１６６７０２号公報

しかしながら、成形工程サイクルにおいて調整される複数の成形条件パラメータの相互関係については考慮されていない。

通常、強化学習器が成形条件パラメータを調整する場合、通常、同時に複数の成形条件パラメータが変更されるが、同時に変更すると問題になる成形条件パラメータがある。例えば、射出成形機における計量完了位置（計量完了時点のスクリュ位置）と、射出速度の切替位置（射出工程の途中で射出速度を切り替えるスクリュ位置）とは相互関係を有しており、計量完了位置及び射出速度の成形条件パラメータを同時に変更すると問題になる。ある成形工程サイクルにおける成形材料の計量完後、計量完了位置及び射出速度の成形条件パラメータが同時に変更された場合、計量を完了している現時点の実際のスクリュ位置は変わらないにもかかわらず、次回の成形工程サイクルで計量を完了したときの計量完了位置に適した切替位置の設定が反映される。

このため、次の成形工程サイクルにおける射出時には、実際のスクリュ位置が変わっていない状態にもかかわらず、射出速度の切替位置の設定が変更された成形条件で射出してしまい、予期せぬ不良が発生するおそれがある。最悪の場合、金型を破損させてしまうおそれもある。

本開示の目的は、複数の成形工程パラメータの相互関係を考慮し、成形工程サイクルにおける成形機の複数の成形条件パラメータを適切な順序及びタイミングで調整することができる成形条件パラメータ調整方法、コンピュータプログラム、成形条件パラメータ調整装置及び成形機を提供することにある。

本態様に係る成形条件パラメータ調整方法は、成形工程サイクルにおいて、複数の成形条件パラメータの変更値を変更する際、タイミング情報を参照して、複数のパラメータの変更タイミングを決定し、順次変更する。

本態様に係るコンピュータプログラムは、コンピュータに、成形工程サイクルにおいて、複数の成形条件パラメータの変更値を変更する際、タイミング情報を参照して、複数のパラメータの変更タイミングを決定し、順次変更する処理を実行させる。

本態様に係る成形条件パラメータ調整装置は、成形工程サイクルにおいて、複数の成形条件パラメータの変更値を変更する際、タイミング情報を参照して、複数のパラメータの変更タイミングを決定し、順次変更する。

本態様に係る成形機は、成形条件パラメータ調整装置を備える。

本開示によれば、成形工程サイクルにおける成形機の複数の成形条件パラメータを適切な順序及びタイミングで調整することができる。

実施形態１に係る射出成形機の構成例を説明する模式図である。 実施形態１に係る成形条件パラメータ調整装置の構成例を示すブロック図である。 実施形態１に係るテーブルの構成を示す概念図である。 実施形態１に係る射出成形機の機能ブロック図である。 実施形態１に係るプロセッサの処理手順を示すフローチャートである。 実施形態１に係る成形条件パラメータ調整方法の作用効果を示す説明図である。

本発明の実施形態に係る成形条件パラメータ調整方法、コンピュータプログラム、成形条件パラメータ調整装置及び成形機の具体例を、以下に図面を参照しつつ説明する。以下に記載する実施形態の少なくとも一部を任意に組み合わせてもよい。なお、本発明はこれらの例示に限定されるものではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。

＜射出成形機の全体構成＞
図１は実施形態１に係る射出成形機２の構成例を説明する模式図である。本実施形態１に係る射出成形機（成形機）２は、射出ユニット２１と、当該射出ユニット２１の前方に配置される型締装置２２と、成形条件パラメータ調整装置１を有し、射出成形機２の動作を制御する制御装置２３と、測定部３とを備える。なお、測定部３は、射出成形機２と別体の構成であってもよいし、射出ユニット２１等に組み込まれる構成であってもよい。

射出ユニット２１は、先端部にノズルを有する加熱シリンダ２１ａと、当該加熱シリンダ内で回転方向と軸方向とに駆動可能に設けられているスクリュ２１ｂとを備える。射出ユニット２１は、当該スクリュ２１ｂを回転方向に駆動する回転モータと、スクリュ２１ｂを軸方向に駆動するモータ等とを備える。射出ユニット２１には、加熱シリンダ２１ａに樹脂成形材料を供給するためのホッパ２１ｃと、加熱シリンダ２１ａに供給された樹脂成形材料を加熱して可塑化するための加熱ヒータ２１ｄとが設けられている。

型締装置２２は、金型を開閉させ、射出ユニット２１から射出された溶融成形材料が金型に充填される際、金型が開かないように金型を締め付けるトグル機構と、当該トグル機構を駆動するモータとを備える。型締装置２２は、成形品を取り出すためのエジェクタプレート及びエジェクタピンを備える。

制御装置２３は、射出ユニット２１及び型締装置２２の動作を制御する装置又は回路である。本実施形態１に係る制御装置２３は、成形条件パラメータ調整装置１を備える。成形条件パラメータ調整装置１は、射出成形機２に設定される複数の成形条件パラメータを調整する装置であり、例えば本実施形態１に係る成形条件パラメータ調整装置１は、成形品の不良度が低減されるように成形条件パラメータを調整する機能を有する。

射出成形機２には、成形条件を定める成形条件パラメータが設定され、当該成形条件パラメータに従って動作する。成形条件パラメータは、例えば、金型内樹脂温度、ノズル温度、シリンダ加熱温度、ホッパ温度、型締力、射出速度、射出加速度、射出ピーク圧力、射出ストローク等を含む。また成形条件パラメータは、例えば、シリンダ先端樹脂圧、逆防リング着座状態、保圧切替圧力、保圧切替速度、保圧切替位置、保圧完了位置を含む。更に、成形条件パラメータは、例えば、クッション位置、計量背圧、計量トルク、計量完了位置、スクリュ後退速度、サイクル時間、型閉時間、射出時間、保圧時間、計量時間、型開時間等を含む。最適な成形条件パラメータは射出成形機２の環境、成形品によって異なる。

測定部３は、射出成形機２による成形が実行された際、実成形に係る物理量を測定する装置である。測定部３は、測定処理によって得られた物理量データを成形条件パラメータ調整装置１へ出力する。物理量には、温度、位置、速度、加速度、電流、電圧、圧力、時間、画像データ、トルク、力、歪、消費電力等がある。

測定部３によって測定される情報は、例えば成形品情報、成形機情報、周辺機器情報、雰囲気情報等を含む。当該周辺機器は、射出成形機２と連動するシステムを構成する機器であり、型締装置２２又は金型を含む。周辺機器は、例えば、成形品取出装置（ロボット）、インサート品挿入装置、入子挿入装置、インモールド成形の箔送り装置、フープ成形用フープ送り装置、ガスアシスト成形用ガス注入装置等である。周辺機器は、例えば、超臨界流体を用いた発泡成形用のガス注入装置や長繊維注入装置、ＬＩＭ成形用材混合装置、成形品のバリ取り装置、ランナ切断装置等である。周辺機器は、例えば、成形品重量計、成形品強度試験機、成形品の光学検査装置、成形品撮影装置及び画像処理装置、成形品運搬用ロボット等である。

成形品情報は、例えば成形品を撮像して得たカメラ画像、レーザ変位センサにて得た成形品の変形量、光学的計測器にて得られた成形品の色度、輝度等の光学的計測値、重量計にて計測された成形品の重量、強度計測器にて測定された成形品の強度等の情報を含む。成形品情報は、成形品が正常であるか否か、不良タイプ、不良の程度を表現しており、報酬の計算にも利用される。

成形機情報は、温度計、圧力計、速度測定器、加速度測定器、位置センサ、タイマ、重量計等を用いて測定して得た、金型内樹脂温度、ノズル温度、シリンダ温度、ホッパ温度等の情報を含む。成形機情報は、型締力、射出速度、射出加速度、射出ピーク圧力、射出ストローク、シリンダ先端樹脂圧、逆防リング着座状態、保圧切替圧力等の情報を含む。成形機情報は、保圧切替速度、保圧切替位置、保圧完了位置、クッション位置、計量背圧、計量トルク、計量完了位置、スクリュ後退速度、サイクル時間、型閉時間、射出時間、保圧時間、計量時間、型開時間等の情報を含む。

周辺機器情報は、温度計、計量器等を用いて測定して得た、固定値設定された金型温度、変動値設定された金型温度、ペレット供給量等の情報を含む。

雰囲気情報は、温度計、湿度計、流量計等を用いて得た雰囲気温度、雰囲気湿度、対流に関する情報（レイノルズ数等）等の情報を含む。

測定部３は、その他、金型開き量、バックフロー量、タイバー変形量、ヒータ加熱率を測定しても良い。

＜成形条件パラメータ調整装置＞
図２は実施形態１に係る成形条件パラメータ調整装置１の構成例を示すブロック図である。成形条件パラメータ調整装置１は、コンピュータであり、ハードウェア構成としてプロセッサ１１、記憶部１２及び操作部１３等を備える。

なお、成形条件パラメータ調整装置１は、図示しないネットワークに接続されたサーバ装置であっても良い。また、成形条件パラメータ調整装置１は、複数台のコンピュータで構成し分散処理する構成でもよいし、１台のサーバ内に設けられた複数の仮想マシンによって実現されていてもよいし、クラウドサーバを用いて実現されていてもよい。

プロセッサ１１は、ＣＰＵ（Central Processing Unit）、マルチコアＣＰＵ、ＧＰＵ（Graphics Processing Unit）、ＧＰＧＰＵ（General-purpose computing on graphics processing units）、ＴＰＵ（Tensor Processing Unit）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-Programmable Gate Array）、ＮＰＵ（Neural Processing Unit）等の演算回路、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）等の内部記憶装置、Ｉ／Ｏ端子等を有する。プロセッサ１１は、後述の記憶部１２が記憶するコンピュータプログラム（プログラム製品）１２ａを実行することにより、取得部１４、制御部１５及び強化学習器１６として機能する。なお、成形条件パラメータ調整装置１の各機能部は、ソフトウェア的に実現しても良いし、一部又は全部をハードウェア的に実現しても良い。

記憶部１２は、ハードディスク、ＥＥＰＲＯＭ（Electrically Erasable Programmable
ROM）、フラッシュメモリ等の不揮発性メモリである。記憶部１２は、強化学習器１６の強化学習処理、成形条件パラメータの調整処理をコンピュータに実行させるためのコンピュータプログラム１２ａを記憶している。また、記憶部１２は、複数の成形条件パラメータの変更値が決定された場合、成形工程サイクルにおける複数のパラメータの最適な変更タイミングの前後関係を示す情報を格納したテーブル１２ｂを記憶している。

＜テーブル（タイミング情報）＞
図３は実施形態１に係るテーブル１２ｂの構成を示す概念図である。図３Ａは、成形工程サイクルにおいて、複数の成形条件パラメータの変更タイミングの前後関係を示すテーブル１２ｂを概念的に示したものである。

図３Ａに示すように、テーブル１２ｂは、第１の成形条件パラメータと、第２の成形条件パラメータと、第１及び第２の成形条件パラメータを変更するタイミングの前後関係を示すデータとを対応付けて格納している。成形条件パラメータを変更するタイミングの前後関係は、成形工程サイクル単位で定められている。つまり、テーブル１２ｂは、成形工程サイクルのｎサイクル目で第１の成形条件パラメータを変更した場合、第２の成形条件パラメータを（ｎ＋Δｎ）サイクル目で変更することを示すデータを記憶している。ｎ及びΔｎは整数である。

図３Ｂは、図３Ａに示すテーブル１２ｂの具体例であり、成形工程サイクルにおいて、成形材料の計量完了位置、射出速度の切替位置等の変更タイミングの前後関係を示すテーブル１２ｂを概念的に示したものである。
例えば、テーブル１２ｂは、成形材料の計量完了位置と、射出速度の切替位置と、変更タイミングデータとを対応付けて格納している。当該変更タイミングデータは、計量完了位置を先に変更し、前記計量完了位置を変更した成形工程サイクルよりも１つ後の成形工程サイクルで射出速度を変更することを示している。

また、テーブル１２ｂは、加熱シリンダ２１ａの加熱温度と、射出速度の切替位置と、変更タイミングデータとを対応付けて格納している。当該変更タイミングデータは加熱シリンダ２１ａの加熱温度を先に変更し、加熱温度を変更した成形工程サイクルよりも所定回数後の成形工程サイクルで射出速度を変更することを示している。

本実施形態１に係るコンピュータプログラム１２ａは、記録媒体４にコンピュータ読み取り可能に記録されている態様でも良い。記憶部１２は、図示しない読出装置によって記録媒体４から読み出されたコンピュータプログラム１２ａを記憶する。記録媒体４はフラッシュメモリ等の半導体メモリである。また、記録媒体４はＣＤ（Compact Disc）－ＲＯＭ、ＤＶＤ（Digital Versatile Disc）－ＲＯＭ、ＢＤ（Blu-ray(登録商標)Disc）等の光ディスクでも良い。更に、記録媒体４は、フレキシブルディスク、ハードディスク等の磁気ディスク、磁気光ディスク等であっても良い。更にまた、図示しない通信網に接続されている図示しない外部サーバから本実施形態１に係るコンピュータプログラム１２ａをダウンロードし、記憶部１２に記憶させても良い。

操作部１３は、タッチパネル、ソフトキー、ハードキー、キーボード、マウス等の入力装置である。

取得部１４は、成形工程サイクルにおいて射出成形機２による成形が実行されたときに測定部３にて測定され、出力された物理量データを取得する。取得部１４は、取得した物理量データを制御部１５へ出力する。

制御部１５及び強化学習器１６は、成形工程サイクルにおいて測定部３から出力された物理量データに基づいて、成形条件パラメータを調整し、調整された成形条件パラメータにて射出ユニット２１及び型締装置２２の動作を制御する。

成形工程サイクルの概要は以下の通りであり、成形条件パラメータ調整装置１は、繰り返される成形工程サイクルにおいて、成形条件パラメータの調整を行う。射出成形に際しては、周知のエジェクト後退工程、型閉工程、型締工程、射出工程、保圧工程、計量工程、型開工程、エジェクト前進工程が順次に行われる。

＜射出成形機の機能ブロック＞
図４は、実施形態１に係る射出成形機２の機能ブロック図である。制御部１５は、図４に示すように、観測部１５ａ及び報酬算出部１５ｂを有する。観測部１５ａには、測定部３から取得部１４を介して取得された物理量データが入力される。

観測部１５ａは、物理量データを分析することによって射出成形機２及び成形品の状態を観測し、観測して得た観測データを強化学習器１６のエージェント１６ａへ出力する。物理量データは情報量が大きいため、観測部１５ａは、必要に応じて物理量データの情報を圧縮した観測データを生成すると良い。観測データは、射出成形機２の状態、成形品の状態等を示す情報である。また、観測データは、制御装置２３に設定されている成形条件パラメータを含むとよい。

例えば、観測部１５ａは、カメラ画像及びレーザ変位センサの計測値に基づいて、成形品の外観的特徴を示す特徴量、成形品の寸法、面積、体積、光学部品（成形品）の光軸ずれ量等を示す観測データを算出する。また、観測部１５ａは、射出速度、射出圧力、保圧等の時系列波形データに対して前処理を実行し、当該時系列波形データの特徴量を観測データとして抽出すると良い。なお、時系列波形の時系列データ、時系列波形を表した画像データを観測データとしても良い。

また、観測部１５ａは、物理量データを分析することによって成形品の不良度を算出し、算出して得た不良度を報酬算出部１５ｂへ出力する。不良度は、例えば、バリの面積、ショートの面積、ヒケ・反り・ねじれ等の変形量、ウェルドラインの長さ、シルバーストリークの大きさ、ジェッティングの程度、フローマークの大きさ、色ムラによる色の変化量等である。また、不良度は、成形機から得られる観測データの、良品時の基準となる観測データからの変化量としてもよい。

報酬算出部１５ｂは、観測部１５ａから出力された不良度に基づいて成形条件パラメータの良し悪しの基準になる報酬データを算出し、算出して得た報酬データを強化学習器１６のエージェント１６ａへ出力する。

強化学習器１６は、図４に示すように、エージェント１６ａと、変更タイミング決定部１６ｂと、パラメータ変更部１６ｃとを備える。

エージェント１６ａは、例えば、ＤＱＮ、Ａ３Ｃ、Ｄ４ＰＧ等の深層ニューラルネットワークを有する強化学習モデル、ＰｌａＮｅｔ、ＳＬＡＣ等のモデルベースの強化学習モデル等である。

深層ニューラルネットワークを有する強化学習モデルの場合、エージェント１６ａは、ＤＱＮ（Deep Q-Network）を備え、観測データが示す射出成形機２の状態ｓに基づいて、当該状態ｓに応じた行動ａを決定する。ＤＱＮは、観測データ示す状態ｓが入力された場合、複数の行動ａそれぞれの価値を出力するニューラルネットワークモデルである。複数の行動ａは、成形条件パラメータの変更値に対応する。変更値は、変更後の成形条件パラメータの値であっても良いし、成形条件パラメータの変更量であってもよい。ここでは行動ａは成形条件パラメータ値であるものとする。本実施形態１では、変更値は成形条件パラメータの値であるものとして説明する。価値の高い行動ａは、射出成形機２に設定すべき適切な成形条件パラメータを表している。行動ａにより射出成形機２は他の状態へ遷移する。状態遷移後、エージェント１６ａは、報酬算出部１５ｂで算出された報酬を受け取り、収益、つまり報酬の累積が最大になるようにエージェント１６ａを学習させる。

より具体的には、ＤＱＮは、入力層、中間層及び出力層を有する。入力層は、状態ｓ、つまり観測データが入力される複数のノードを備える。出力層は、複数の行動ａにそれぞれ対応し、入力された状態ｓにおける当該行動ａの価値Ｑ（ｓ，ａ）を出力する複数のノードを備える。

状態ｓ、行動ａと、当該行動により得られた報酬ｒに基づいて、下記式（１）で表される価値Ｑを教師データとして、ＤＱＮを特徴付ける各種重み係数を調整することにより、エージェント１６ａのＤＱＮを強化学習させることができる。
Ｑ（ｓ，ａ）←Ｑ（ｓ，ａ）＋α（ｒ＋γｍａｘＱ（ｓｎｅｘｔ，ａｎｅｘｔ）－Ｑ（ｓ，ａ））・・・（１）
但し、
ｓ：状態
ａ：行動
α：学習係数
ｒ：報酬
γ：割引率
ｍａｘＱ（ｓｎｅｘｔ，ａｎｅｘｔ）：次に取り得る行動に対するＱ値のうち最大値

モデルベースの強化学習モデルの場合、エージェント１６ａは、状態表現マップを備え、状態表現マップを行動決定の指針として用いて成形条件パラメータ（行動ａ）を決定する。エージェント１６ａは、状態表現マップを用いて、観測データが示す射出成形機２の状態ｓに基づいて、当該状態に応じた成形条件パラメータ（行動ａ）を決定する。

状態表現マップは、例えば、観測データ（状態ｓ）と、成形条件パラメータ（行動ａ）とが入力された場合、当該状態ｓで成形条件パラメータ（行動ａ）をとることに対する報酬ｒと、次状態ｓ´への状態遷移確率（確信度）Ｐｔとを出力するモデルである。報酬ｒは、状態ｓにおいて、ある成形条件パラメータ（行動ａ）を設定したときに得られる成形品が正常である否かを示す情報といえる。行動ａは、当該状態にある場合、射出成形機２に設定すべき成形条件パラメータである。行動ａにより射出成形機２は他の状態へ遷移する。状態遷移後、エージェント１６ａは、報酬算出部１５ｂで算出された報酬を受け取り、状態表現マップを更新する。

変更タイミング決定部１６ｂは、エージェント１６ａが決定した行動ａにより、複数の成形条件パラメータが変更される場合、テーブル１２ｂを参照し、変更対象として決定された複数のパラメータの変更タイミングを決定する。

パラメータ変更部１６ｃは、変更タイミング決定部１６ｂによって決定した変更タイミングに従って、変更対象として決定された複数の成形条件パラメータを順次変更する。実際に成形条件パラメータの設定を変更するタイミングは、成形材料の計量完了時点以降、次サイクル開始前が好ましい。そして、パラメータ変更部１６ｃは、変更後の成形条件パラメータに基づく制御信号を射出ユニット２１及び型締装置２２へ出力する。射出ユニット２１及び型締装置２２は、変更された成形条件パラメータに基づく制御信号に従って、動作する。

＜処理手順（成形条件パラメータ調整方法）＞
図５は、実施形態１に係るプロセッサ１１の処理手順を示すフローチャートである。射出成形機２には成形条件パラメータの初期値が設定され、成形工程サイクルが繰り返されているものとする。成形条件パラメータの初期値は、射出成形機２及び成形品の状態に応じて調整される。

測定部３は、射出成形機２が成形を実行したときに、当該射出成形機２及び成形品に係る物理量を測定し、プロセッサ１１又は機能部としての取得部１４は、測定部３にて測定して得た物理量データを取得する（ステップＳ１１１）。

次いで、プロセッサ１１又はエージェント１６ａは、取得した物理量データに基づいて成形条件パラメータの変更値を決定する（ステップＳ１１２）。

具体的には、制御部１５の観測部１５ａは、取得した物理量データに基づく観測データを生成し、生成した観測データを強化学習器１６のエージェント１６ａへ出力する。
強化学習器１６のエージェント１６ａは、観測部１５ａから出力された観測データを取得し、観測データに基づいて、射出成形機２の成形条件パラメータの変更値（行動ａ）を算出する。エージェント１６ａは、算出された成形条件パラメータ（行動ａ）を変更タイミング決定部１６ｂへ出力する。エージェント１６ａは、運用フェーズ（推論フェーズ）において、最適な行動ａを選択し、学習フェーズにおいては、エージェント１６ａを強化学習するため、探索的な行動ａを決定するとよい。また、エージェント１６ａは、行動価値が高い程、又は未探索の行動ａである程、値が小さく、現在の成形条件からの変更量が所定範囲より大きい程、値が大きくなるような目的関数を用いて、当該目的関数の値が小さい行動ａを選択するようにしてもよい。

ステップＳ１１２の処理を終えたプロセッサ１１又は変更タイミング決定部１６ｂは、変更対象が複数である場合、テーブル１２ｂを参照し、当該複数の成形条件パラメータの変更タイミング、つまり変更順序を決定する（ステップＳ１１３）。

そして、プロセッサ１１又はパラメータ変更部１６ｃは、決定された変更タイミングに従って、変更対象である複数の成形条件パラメータを順次変更する（ステップＳ１１４）。プロセッサ１１又はパラメータ変更部１６ｃは、成形条件パラメータを変更した場合、成形条件パラメータに基づく制御信号を射出ユニット２１及び型締装置２２へ出力し、射出成形機２の動作を制御する（ステップＳ１１５）。射出成形機２の射出ユニット２１及び型締装置２２はパラメータ変更部１６ｃから出力された成形条件パラメータに基づく制御信号に従って射出成形処理を行う。

プロセッサ１１は、学習フェーズにおいてはエージェント１６ａの強化学習処理を実行する（ステップＳ１１６）。なお、複数の成形条件パラメータを変更して、エージェント１６ａを強化学習する場合、ステップＳ１１３及びステップＳ１１４の処理で、複数の成形条件パラメータを全ての変更した後に、報酬を算出してエージェント１６ａを強化学習させるとよい。また、ステップＳ１１３及びステップＳ１１４の処理で、複数の成形条件パラメータを全ての変更した後、更に所定回数後に報酬を算出して強化学習を行うように構成してもよい。当該所定回数は、変更する複数の成形条件パラメータによって異なる値であってもよい。

ステップＳ１１６において、具体的には、測定部３は、成形条件パラメータの変更後、射出成形機２及び成形品に係る物理量を測定し、測定して得た物理量データを出力する。取得部１４は、物理量データを取得し、取得した物理量データは観測部１５ａに入力される。

制御部１５の観測部１５ａは、測定部３から出力された物理量データを取得部１４を介して取得し、取得した物理量データに基づく観測データを生成し、生成した観測データを強化学習器１６のエージェント１６ａへ出力する。また、報酬算出部１５ｂは、測定部３にて測定された物理量データに基づいて、成形品の不良度に応じて定まる報酬データを算出し、算出した報酬データを強化学習器１６へ出力する。

エージェント１６ａは、観測部１５ａから出力された観測データと、報酬算出部１５ｂから出力された報酬データとに基づいて、モデルを更新する。エージェント１６ａがＤＱＮの場合、上記式（１）で表される価値を教師データとして、ＤＱＮを学習させる。

＜作用効果＞
図６は、実施形態１に係る成形条件パラメータ調整方法の作用効果を示す説明図である。複数の成形条件パラメータとして、成形材料の計量完了位置と、射出速度の切替位置とを変更する場合を例にして、本実施形態１に係る成形条件パラメータ調整方法の作用効果を説明する。
図６Ａは、変更タイミングを考慮せずに成形条件パラメータを変更した状態を示し、図６Ｂは、変更タイミングを考慮して成形条件パラメータを変更した状態を示している。成形工程サイクルは、主なプロセスとしてエジェクト後退工程（図６中、「ＥＪ後退」）、型閉工程、型締工程、射出工程、保圧工程、計量工程、型開工程、エジェクト前進工程（図６中「ＥＪＥＣＴ前進」）から構成され、各工程が順次進行する。

「計量完了位置」と「射出速度切替位置」を変更する場合、まず「計量完了位置」が実際に変更されてから、「射出速度切替位置」を実際に変更するようにしなければならない。図６Ａに示すように、ｎサイクルの計量工程が完了したタイミングで「計量完了位置」の変更指示と、「射出速度切替位置」の変更指示とが同時に出されたとする。この場合、ｎサイクルのエジェクタ前進完了時に、「計量完了位置」及び「射出速度切替位置」の設定が同時に変更される。

しかしながら、「射出速度切替位置」は実際に変更されることになるが、「計量完了位置」に応じた実際のスクリュ２１ｂの位置は変更されていない。ｎサイクルでは、変更前の「計量完了位置」の成形条件パラメータを用いて計量がすでに完了しており、（ｎ＋１）サイクル開始時におけるスクリュ２１ｂの位置は、パラメータ変更前の「計量完了位置」によって制御されたときの位置となっている。「計量完了位置」の設定変更後、当該設定がスクリュ２１ｂの位置として反映されるのは、（ｎ＋１）サイクルにおける計量工程であり、これは（ｎ＋１）サイクルにおける射出工程の後の工程である。

このため、（ｎ＋１）サイクルの射出工程において、「計量完了位置」がスクリュ２１ｂの位置として実際に反映されていない状態で「射出速度切替位置」だけが実際に変更されてしまうと、予期せぬ不良が発生してしまう。例えば、ショートの程度がひどくて金型から成形品を取り出せないといった不具合が発生し得る。最悪の場合、金型を破損させてしまうおそれもある。

このような不具合を防止するため、本実施形態１では、複数の成形条件パラメータの変更タイミングの相互関係を示す情報を有するテーブル１２ｂを用意する。成形条件パラメータ調整装置１は、複数の成形条件パラメータを変更する際、テーブル１２ｂを参照して、各成形条件パラメータの変更タイミングを決定する。成形条件パラメータ調整装置１は、決定した変更タイミングに従って順次変更するようにする。

具体的には、「計量完了位置」と「射出速度切替位置」を変更する場合、図６Ｂに示すように、まず、現在のｎサイクルにおける計量工程終了時に「計量完了位置」の変更指示を出す。このようにすると、「計量完了位置」の設定がｎサイクルのエジェクタ前進完了時に変更され、「計量完了位置」が実際に変更されて成形材料の計量が行われるのは、ｎ＋１サイクルの計量工程となる。一方、「射出速度切替位置」の変更指示は、「計量完了位置」変更時よりも一つ後のｎ＋１サイクルにおける計量工程終了時に出される。このようにすると、「射出速度切替位置」の設定はｎ＋１サイクルのエジェクタ前進完了時に変更され、「射出速度切替位置」が実際に変更されて射出が行われるのはｎ＋２サイクルの射出及び保圧工程となる。

よって、射出工程において、「計量完了位置」の変更がスクリュ２１ｂ位置に反映されないまま「射出速度切替位置」だけが変更されてしまう事態を避けることができる。

実施形態１に係る射出成形機２によれば、複数の成形工程パラメータの相互関係を考慮し、成形工程サイクルにおける射出成形機２の複数の成形条件パラメータを適切な順序及びタイミングで調整することができる。

具体的には、成形条件パラメータ調整装置１は、計量完了位置及び射出速度切替位置を適切なタイミング及び順序で変更することができる。

また、成形条件パラメータ調整装置１は、加熱シリンダ２１ａの加熱温度及び射出速度切替位置を適切なタイミング及び順序で変更することができる。

なお、本実施形態１では強化学習の運用フェーズ又は学習フェーズにおける成形条件パラメータ変更を例に説明したが、後述する他の機械学習において成形条件パラメータを変更する際にも本発明を適用することができる。また機械学習用の学習データセットを作成する場合において成形条件パラメータを変更する際にも本発明を適用することができる。機械学習を用いない任意の目的で複数の成形条件パラメータを変更する必要がある場合にも本発明を適用することができる。

また、複数の成形条件パラメータを強化学習により調整する例を説明したが、成形条件パラメータ調整装置１は、教師あり学習により学習された学習器を備えてもよい。学習器は、観測データが入力された場合、成形品の状態を向上させる成形条件パラメータの変更値を出力するモデルである。学習器は、観測データを認識するＲｅｓＮｅｔ、ＤｅｎｓｅＮｅｔ等のＣＮＮ（Convolution Neural Network）を有するモデルであってもよいし、観測データが時系列的データである場合、時系列情報である観測データを認識する再帰型ニューラルネットワーク（RNN: Recurrent Neural Network）、ＬＳＴＭ、Vision Transformer等を有するモデルであってもよい。また、学習器は、上記したＣＮＮ、ＲＮＮ等以外のニューラルネットワーク、Vision Transformer、ＳＶＭ（Support Vector Machine）、ベイジアンネットワーク、又は、ＸＧＢｏｏｓｔ等の決定木、等の構成の学習モデルを用いて構成してもよい。

また、成形機の一例として樹脂成形を行う射出成形機２を説明したが、中空成形機、フィルム成形機、押出機、二軸スクリュ押出機、紡糸押出機、造粒機等に本発明を適用してもよい。また、成形材料も樹脂に限定されるものでは無く、マグネシウム射出成形機等に本発明を提供してもよい。

（実施形態２）
実施形態２に係る射出成形機は、調整する成形条件のパラメータが実施形態１と異なる。射出成形機のその他の構成は、実施形態１に係る射出成形機と同様であるため、同様の箇所には同じ符号を付し、詳細な説明を省略する。

＝変更タイミングを前後させるべき、成形条件パラメータの他の例（追加予定）＝

１ 成形条件パラメータ調整装置
２ 射出成形機
３ 測定部
４ 記録媒体
１１ プロセッサ
１２ 記憶部
１２ａ コンピュータプログラム
１２ｂ テーブル
１３ 操作部
１４ 取得部
１５ 制御部
１５ａ 観測部
１５ｂ 報酬算出部
１６ 強化学習器
１６ａ エージェント
１６ｂ 調整部
２１ 射出ユニット
２１ａ 加熱シリンダ
２１ｂ スクリュ
２１ｃ ホッパ
２１ｄ 加熱ヒータ
２２ 型締装置
２３ 制御装置

Claims (6)

1. 成形機の成形条件パラメータ調整方法であって、
   成形工程サイクルにおいて、前記成形機に設定された複数の成形条件パラメータの変更値を決定し、
   前記複数の成形条件パラメータの変更値が決定された場合、成形工程サイクルにおける前記複数のパラメータの変更タイミングの前後関係を示すタイミング情報を参照して、変更対象として決定した前記複数のパラメータの変更タイミングを決定し、
   決定した変更タイミングに従って、変更対象として決定した前記複数のパラメータを順次変更する
   成形条件パラメータ調整方法。
2. 前記成形機は、成形材料を計量し、可塑化して射出する加熱シリンダ及びスクリュを有する射出成形機であり、
   前記複数に成形条件パラメータは、成形材料の計量完了位置と、射出速度の切替位置とを含み、
   前記タイミング情報は、前記計量完了位置を先に変更し、前記計量完了位置を変更した成形工程サイクルよりも１つ後の成形工程サイクルで前記射出速度を変更することを示す情報を含む
   請求項１に記載の成形条件パラメータ調整方法。
3. 前記成形機は、成形材料を計量し、可塑化して射出する加熱シリンダ及びスクリュを有する射出成形機であり、
   前記複数に成形条件パラメータは、前記加熱シリンダの加熱温度と、射出速度の切替位置とを含み、
   前記タイミング情報は、前記加熱シリンダの前記加熱温度を先に変更し、前記加熱温度を変更した成形工程サイクルよりも所定回数後の成形工程サイクルで前記射出速度を変更することを示す情報を含む
   請求項１又は請求項２に記載の成形条件パラメータ調整方法。
4. 成形機の成形条件パラメータの調整をコンピュータに実行させるためのコンピュータプログラムであって、
   前記コンピュータに、
   成形工程サイクルにおいて、前記成形機に設定された複数の成形条件パラメータの変更値を決定し、
   前記複数の成形条件パラメータの変更値が決定された場合、成形工程サイクルにおける前記複数のパラメータの変更タイミングの前後関係を示すタイミング情報を参照して、変更対象として決定した前記複数のパラメータの変更タイミングを決定し、
   決定した変更タイミングに従って、変更対象として決定した前記複数のパラメータを順次変更する
   処理を実行させるためのコンピュータプログラム。
5. 成形機に設定された複数の成形条件パラメータの調整を行う成形条件パラメータ調整装置であって、
   成形工程サイクルにおける複数のパラメータの変更タイミングの前後関係を示すタイミング情報を記憶する記憶部と、
   プロセッサと
   を備え、
   前記プロセッサは、
   成形工程サイクルにおいて、前記複数の成形条件パラメータの変更値を決定し、
   前記複数の成形条件パラメータの変更値が決定された場合、前記記憶部が記憶する前記タイミング情報を参照して、変更対象として決定した前記複数のパラメータの変更タイミングを決定し、
   決定した変更タイミングに従って、変更対象として決定した前記複数のパラメータを順次変更する
   成形条件パラメータ調整装置。
6. 設定された複数の成形条件パラメータに従って動作する成形機であって、
   請求項５に記載の成形条件パラメータ調整装置を備え、
   前記成形条件パラメータ調整装置にて前記複数の成形条件パラメータを変更するように構成された
   成形機。

Images