JP6010975B2 - ジョブ管理装置、ジョブ管理方法、及びプログラム - Google Patents
ジョブ管理装置、ジョブ管理方法、及びプログラム Download PDFInfo
- Publication number
- JP6010975B2 JP6010975B2 JP2012080516A JP2012080516A JP6010975B2 JP 6010975 B2 JP6010975 B2 JP 6010975B2 JP 2012080516 A JP2012080516 A JP 2012080516A JP 2012080516 A JP2012080516 A JP 2012080516A JP 6010975 B2 JP6010975 B2 JP 6010975B2
- Authority
- JP
- Japan
- Prior art keywords
- node
- virtual
- job
- nodes
- group
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000007726 management method Methods 0.000 title claims description 75
- 238000000034 method Methods 0.000 claims description 10
- 238000010586 diagram Methods 0.000 description 32
- 238000012544 monitoring process Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 9
- 230000000694 effects Effects 0.000 description 9
- 238000012545 processing Methods 0.000 description 9
- 101000786631 Homo sapiens Protein SYS1 homolog Proteins 0.000 description 5
- 102100025575 Protein SYS1 homolog Human genes 0.000 description 5
- 238000007796 conventional method Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 3
- 230000007423 decrease Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
Images
Landscapes
- Hardware Redundancy (AREA)
Description
前記クラスタシステムのキュー毎に、キューが提供できるリソースと、前記リソースを満たす仮想ノードのグループとを特定するキュー情報に基づいて、前記ジョブに対応可能な仮想ノードのグループを特定し、特定した仮想ノードのグループの中から、前記ジョブに割り当てる前記仮想ノードを選択する、仮想ノード選択部と、
前記仮想ノードのグループ毎に、当該グループに使用可能な物理ノードについてのノード間の構成要件を特定する、仮想ノードグループ情報に基づいて、前記ジョブが割り当てられた前記仮想ノードに割り当てる前記物理ノードを選択する、物理ノード選択部と、
を備えていることを特徴とする。
(a)前記クラスタシステムのキュー毎に、キューが提供できるリソースと、前記リソースを満たす仮想ノードのグループとを特定するキュー情報に基づいて、前記ジョブに対応可能な仮想ノードのグループを特定し、特定した仮想ノードのグループの中から、前記ジョブに割り当てる前記仮想ノードを選択する、ステップと、
(b)前記仮想ノードのグループ毎に、当該グループに使用可能な物理ノードについてのノード間の構成要件を特定する、仮想ノードグループ情報に基づいて、前記ジョブが割り当てられた前記仮想ノードに割り当てる前記物理ノードを選択する、ステップと、
を有することを特徴とする。
前記コンピュータに、
(a)前記クラスタシステムのキュー毎に、キューが提供できるリソースと、前記リソースを満たす仮想ノードのグループとを特定するキュー情報に基づいて、前記ジョブに対応可能な仮想ノードのグループを特定し、特定した仮想ノードのグループの中から、前記ジョブに割り当てる前記仮想ノードを選択する、ステップと、
(b)前記仮想ノードのグループ毎に、当該グループに使用可能な物理ノードについてのノード間の構成要件を特定する、仮想ノードグループ情報に基づいて、前記ジョブが割り当てられた前記仮想ノードに割り当てる前記物理ノードを選択する、ステップと、
を実行させることを特徴とする。
本発明における実施の形態は、クラスタシステムと共に利用されるバックフィルスケジューラに関連し、ジョブに割り当てられる仮想ノードの選択及び管理に特徴がある。また、本実施の形態は、この特徴により、再スケジューリング時のノード構成の柔軟性とクラスタシステムの性能とを向上させる。
以下、本発明の実施の形態における、ジョブ管理装置、ジョブ管理方法、及びプログラムについて、図2〜図11を参照しながら説明する。
最初に、図2を用いて、本発明の実施の形態におけるジョブ管理装置の構成について説明する。図2は、本発明の実施の形態におけるジョブ管理装置の構成を示すブロック図である。
次に、本発明の実施の形態1におけるジョブ管理装置40の動作について図6〜図8を用いて説明する。また、以下の説明においては、適宜図2〜図5を参酌する。更に、本実施の形態では、ジョブ管理装置40を動作させることによって、ジョブ管理方法が実施される。よって、本実施の形態におけるジョブ管理方法の説明は、以下のジョブ管理装置40の動作説明に代える。
本実施の形態における第1の効果は、障害発生後もサービスレベルを落とすことなく、HPC用クラスタシステムの運用を継続できることである。その理由は、ジョブに割り当てる仮想ノードへの物理ノードの割り当てに、HPC用ジョブの性能にかかわる物理ノード間の構成要件(ネットワークトポロジ、分散ファイルシステム等)を使用するためである。また、本実施の形態では、バックフィルスケジューラが用いられるため、ジョブが走行していない時に、障害ノードを正常ノードに交換(再割り当て)することができる。よって、交換処理の安全性を高めつつ、交換処理を容易なものとできる。
本実施の形態における第2の効果は、障害が起きた物理ノードを継続的に運用でき、クラスタシステムの使用率を向上させることである。その理由は、ある条件下では利用不可である障害ノードでも、別の条件下では利用可能である場合に、仮想ノードが要求する条件に合致する限り、仮想ノードに動的に割り当てることができるからである。このため、従来では遊休としていた物理ノードを減らす運用が可能となるので、上述したようにクラスタシステムの使用率が向上する。
本実施の形態における第3の効果を図9及び図10を用いて説明する。図9は、本発明の実施の形態で用いられる物理ノードの一例を示す図である。図10は、本発明の実施の形態で用いられるスケジューラマップの一例を示す図である。
本実施の形態における第4の効果を以下に説明する。まず、従来のジョブ管理では、ジョブの実行順序が予め設定されている場合、先行ジョブの終了状態は、ワークフロー管理システム、又はユーザの作成するスクリプトによって監視され、終了後に後続ジョブが投入されるという手順がとられている。
本実施の形態におけるプログラムは、コンピュータに、図6に示すステップS1〜S7、図7に示すステップS11〜S17を実行させるプログラムであれば良い。このプログラムをコンピュータにインストールし、実行することによって、本実施の形態におけるジョブ管理装置400とジョブ管理方法とを実現することができる。この場合、コンピュータのCPU(Central Processing Unit)は、ジョブアサイン部401及び情報管理部402として機能し、処理を行なう。また、コンピュータに備えられたハードディスク等の記憶装置は、情報格納部403として機能する。
クラスタシステムにおいて実行されるジョブを管理するための装置であって、
前記クラスタシステムのキュー毎に、キューが提供できるリソースと、前記リソースを満たす仮想ノードのグループとを特定するキュー情報に基づいて、前記ジョブに対応可能な仮想ノードのグループを特定し、特定した仮想ノードのグループの中から、前記ジョブに割り当てる前記仮想ノードを選択する、仮想ノード選択部と、
前記仮想ノードのグループ毎に、当該グループに使用可能な物理ノードについてのノード間の構成要件を特定する、仮想ノードグループ情報に基づいて、前記ジョブが割り当てられた前記仮想ノードに割り当てる前記物理ノードを選択する、物理ノード選択部と、
を備えていることを特徴とするジョブ管理装置。
前記物理ノード選択部が、選択された前記物理ノードに障害が発生した場合に、
前記仮想ノードグループ情報に基づいて、障害が発生した物理ノードが割当てられていた前記仮想ノードに対して、新たに割り当てる新たな物理ノードを選択する、付記1に記載のジョブ管理装置。
前記物理ノード選択部が、前記仮想ノードグループ情報に基づいて、前記障害が発生した物理ノードを割り当てることが可能な仮想ノードが存在しているかどうかを判定し、存在している場合に、当該仮想ノードに割り当てる物理ノードとして、前記障害が発生した物理ノードを選択する、
付記1または2に記載のジョブ管理装置。
前記仮想ノードグループ情報が、前記仮想ノードのグループ毎に、当該グループに使用可能な物理ノードについてのノード間の構成要件として、少なくとも、前記物理ノードが所属しているネットワークトポロジについての要件と、前記物理ノードが利用可能なファイルシステムについての要件とを特定している、
付記1〜3のいずれかに記載のジョブ管理装置。
前記キューに投入された前記ジョブを実行可能な時間帯を検索する、空き情報検索部と、
検索された時間帯の中から、前記キューに投入された前記ジョブの実行を開始する時刻を決定する、開始時刻決定部と、を備えている、付記1〜4のいずれかに記載のジョブ管理装置。
クラスタシステムにおいて実行されるジョブを管理するための方法であって、
(a)前記クラスタシステムのキュー毎に、キューが提供できるリソースと、前記リソースを満たす仮想ノードのグループとを特定するキュー情報に基づいて、前記ジョブに対応可能な仮想ノードのグループを特定し、特定した仮想ノードのグループの中から、前記ジョブに割り当てる前記仮想ノードを選択する、ステップと、
(b)前記仮想ノードのグループ毎に、当該グループに使用可能な物理ノードについてのノード間の構成要件を特定する、仮想ノードグループ情報に基づいて、前記ジョブが割り当てられた前記仮想ノードに割り当てる前記物理ノードを選択する、ステップと、
を有することを特徴とするジョブ管理方法。
(c)選択された前記物理ノードに障害が発生した場合に、前記仮想ノードグループ情報に基づいて、障害が発生した物理ノードが割当てられていた前記仮想ノードに対して、新たに割り当てる新たな物理ノードを選択する、ステップを更に有する、付記6に記載のジョブ管理方法。
(d)前記仮想ノードグループ情報に基づいて、前記障害が発生した物理ノードを割り当てることが可能な仮想ノードが存在しているかどうかを判定し、存在している場合に、当該仮想ノードに割り当てる物理ノードとして、前記障害が発生した物理ノードを選択する、ステップを更に有する、付記6または7に記載のジョブ管理方法。
前記仮想ノードグループ情報が、前記仮想ノードのグループ毎に、当該グループに使用可能な物理ノードについてのノード間の構成要件として、前記物理ノードが所属しているネットワークトポロジについての要件と、前記物理ノードが利用可能なファイルシステムについての要件とを特定している、
付記6〜8のいずれかに記載のジョブ管理方法。
(e)前記キューに投入された前記ジョブを実行可能な時間帯を検索する、ステップと、
(f)検索された時間帯の中から、前記キューに投入された前記ジョブの実行を開始する時刻を決定する、ステップと、
を更に有する、付記6〜9のいずれかに記載のジョブ管理方法。
コンピュータによって、クラスタシステムにおいて実行されるジョブを管理するためのプログラムであって、
前記コンピュータに、
(a)前記クラスタシステムのキュー毎に、キューが提供できるリソースと、前記リソースを満たす仮想ノードのグループとを特定するキュー情報に基づいて、前記ジョブに対応可能な仮想ノードのグループを特定し、特定した仮想ノードのグループの中から、前記ジョブに割り当てる前記仮想ノードを選択する、ステップと、
(b)前記仮想ノードのグループ毎に、当該グループに使用可能な物理ノードについてのノード間の構成要件を特定する、仮想ノードグループ情報に基づいて、前記ジョブが割り当てられた前記仮想ノードに割り当てる前記物理ノードを選択する、ステップと、
を実行させるプログラム。
(c)選択された前記物理ノードに障害が発生した場合に、前記仮想ノードグループ情報に基づいて、障害が発生した物理ノードが割当てられていた前記仮想ノードに対して、新たに割り当てる新たな物理ノードを選択する、ステップを更に前記コンピュータに実行させる、付記11に記載のプログラム。
(d)前記仮想ノードグループ情報に基づいて、前記障害が発生した物理ノードを割り当てることが可能な仮想ノードが存在しているかどうかを判定し、存在している場合に、当該仮想ノードに割り当てる物理ノードとして、前記障害が発生した物理ノードを選択する、ステップを更に前記コンピュータに実行させる、付記11または12に記載のプログラム。
前記仮想ノードグループ情報が、前記仮想ノードのグループ毎に、当該グループに使用可能な物理ノードについてのノード間の構成要件として、前記物理ノードが所属しているネットワークトポロジについての要件と、前記物理ノードが利用可能なファイルシステムについての要件とを特定している、
付記11〜13のいずれかに記載のプログラム。
(e)前記キューに投入された前記ジョブを実行可能な時間帯を検索する、ステップと、
(f)検索された時間帯の中から、前記キューに投入された前記ジョブの実行を開始する時刻を決定する、ステップと、
を更に前記コンピュータに実行させる、付記11〜14のいずれかに記載のプログラム。
111 CPU
112 メインメモリ
113 記憶装置
114 入力インターフェイス
115 表示コントローラ
116 データリーダ/ライタ
117 通信インターフェイス
118 入力機器
119 ディスプレイ装置
120 記録媒体
121 バス
400 ジョブ管理装置
401 アサイン部
402 情報管理部
403 情報格納部
410 空き情報検索部
411 スケジューラマップ
420 開始時刻決定部
430 仮想ノード選択部
431 ポリシー
432 キュー情報
440 物理ノード選択部
441 仮想ノードグループ情報
450 情報更新部
460 ジョブ情報
470 リソース情報管理部
471 状態管理部
472 状態監視部
Claims (6)
- クラスタシステムにおいて実行されるジョブを管理するための装置であって、
前記クラスタシステムのキュー毎に、キューが提供できるリソースと、前記リソースの要件を満たす仮想ノードのグループとを特定するキュー情報に基づいて、前記キューに投入されたジョブに対応可能な仮想ノードのグループを特定し、特定した仮想ノードのグループの中から、前記ジョブに割り当てる前記仮想ノードを選択する、仮想ノード選択部と、
前記仮想ノードのグループ毎に、当該グループに使用可能な物理ノードについてのノード間の構成要件を特定する、仮想ノードグループ情報に基づいて、前記ジョブが割り当てられた前記仮想ノードに割り当てる前記物理ノードを選択する、物理ノード選択部と、
を備え、
前記仮想ノードグループ情報が、前記仮想ノードのグループ毎に、当該グループに使用可能な物理ノードについてのノード間の構成要件として、少なくとも、前記物理ノードが所属しているネットワークトポロジについての要件と、前記物理ノードが利用可能なファイルシステムについての要件とを特定している、
ていることを特徴とするジョブ管理装置。 - 前記物理ノード選択部が、選択された前記物理ノードに障害が発生した場合に、
前記仮想ノードグループ情報に基づいて、障害が発生した物理ノードが割当てられていた前記仮想ノードに対して、新たに割り当てる新たな物理ノードを選択する、請求項1に記載のジョブ管理装置。 - 前記障害が物理ノードのノード間接続機能の故障である場合に、前記物理ノード選択部が、前記仮想ノードグループ情報に基づいて、前記障害が発生した物理ノードを割り当てることが可能な仮想ノードが存在しているかどうかを判定し、存在している場合に、当該仮想ノードに割り当てる物理ノードとして、前記障害が発生した物理ノードを選択する、
請求項2に記載のジョブ管理装置。 - 前記キューに投入された前記ジョブを実行可能な時間帯を検索する、空き情報検索部と、
検索された時間帯の中から、前記キューに投入された前記ジョブの実行を開始する時刻を決定する、開始時刻決定部と、を備えている、請求項1〜3のいずれかに記載のジョブ管理装置。 - クラスタシステムにおいて実行されるジョブを管理するための方法であって、
(a)前記クラスタシステムのキュー毎に、キューが提供できるリソースと、前記リソースの要件を満たす仮想ノードのグループとを特定するキュー情報に基づいて、前記ジョブに対応可能な仮想ノードのグループを特定し、特定した仮想ノードのグループの中から、前記ジョブに割り当てる前記仮想ノードを選択する、ステップと、
(b)前記仮想ノードのグループ毎に、当該グループに使用可能な物理ノードについてのノード間の構成要件を特定する、仮想ノードグループ情報に基づいて、前記ジョブが割り当てられた前記仮想ノードに割り当てる前記物理ノードを選択する、ステップと、
を有し、
前記仮想ノードグループ情報が、前記仮想ノードのグループ毎に、当該グループに使用可能な物理ノードについてのノード間の構成要件として、少なくとも、前記物理ノードが所属しているネットワークトポロジについての要件と、前記物理ノードが利用可能なファイルシステムについての要件とを特定している、
することを特徴とするジョブ管理方法。 - コンピュータによって、クラスタシステムにおいて実行されるジョブを管理するためのプログラムであって、
前記コンピュータに、
(a)前記クラスタシステムのキュー毎に、キューが提供できるリソースと、前記リソースの要件を満たす仮想ノードのグループとを特定するキュー情報に基づいて、前記ジョブに対応可能な仮想ノードのグループを特定し、特定した仮想ノードのグループの中から、前記ジョブに割り当てる前記仮想ノードを選択する、ステップと、
(b)前記仮想ノードのグループ毎に、当該グループに使用可能な物理ノードについてのノード間の構成要件を特定する、仮想ノードグループ情報に基づいて、前記ジョブが割り当てられた前記仮想ノードに割り当てる前記物理ノードを選択する、ステップと、
を実行させ、
前記仮想ノードグループ情報が、前記仮想ノードのグループ毎に、当該グループに使用可能な物理ノードについてのノード間の構成要件として、少なくとも、前記物理ノードが所属しているネットワークトポロジについての要件と、前記物理ノードが利用可能なファイルシステムについての要件とを特定している、
るプログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012080516A JP6010975B2 (ja) | 2012-03-30 | 2012-03-30 | ジョブ管理装置、ジョブ管理方法、及びプログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012080516A JP6010975B2 (ja) | 2012-03-30 | 2012-03-30 | ジョブ管理装置、ジョブ管理方法、及びプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2013210833A JP2013210833A (ja) | 2013-10-10 |
| JP6010975B2 true JP6010975B2 (ja) | 2016-10-19 |
Family
ID=49528608
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012080516A Active JP6010975B2 (ja) | 2012-03-30 | 2012-03-30 | ジョブ管理装置、ジョブ管理方法、及びプログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6010975B2 (ja) |
Families Citing this family (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6364880B2 (ja) * | 2014-03-31 | 2018-08-01 | 富士通株式会社 | 並列計算機システム,ジョブ管理装置の制御プログラム,及び並列計算機システムの制御方法 |
| JP6540107B2 (ja) * | 2015-03-09 | 2019-07-10 | 富士通株式会社 | 並列演算装置、並列演算システム、およびジョブ制御プログラム |
| JP2017111662A (ja) * | 2015-12-17 | 2017-06-22 | 日立オートモティブシステムズ株式会社 | 電子制御装置 |
| JP7421165B2 (ja) * | 2020-03-25 | 2024-01-24 | 京セラドキュメントソリューションズ株式会社 | データ連携システムおよびapiプラットフォーム |
| US11044198B1 (en) * | 2020-08-05 | 2021-06-22 | Coupang Corp. | Systems and methods for pooling multiple user requests to mitigate network congestion |
| JP7605623B2 (ja) | 2020-12-21 | 2024-12-24 | 日立Astemo株式会社 | 車両制御装置 |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4294879B2 (ja) * | 2001-02-05 | 2009-07-15 | 株式会社日立製作所 | サービスレベル制御機構を有するトランザクション処理システム及びそのためのプログラム |
| JP3898476B2 (ja) * | 2001-09-11 | 2007-03-28 | 株式会社リコー | 画像情報処理装置およびソフトウェア再構築方法 |
| JP4119162B2 (ja) * | 2002-05-15 | 2008-07-16 | 株式会社日立製作所 | 多重化計算機システム、論理計算機の割当方法および論理計算機の割当プログラム |
| US20050044301A1 (en) * | 2003-08-20 | 2005-02-24 | Vasilevsky Alexander David | Method and apparatus for providing virtual computing services |
| US7711977B2 (en) * | 2004-04-15 | 2010-05-04 | Raytheon Company | System and method for detecting and managing HPC node failure |
| US9329905B2 (en) * | 2004-10-15 | 2016-05-03 | Emc Corporation | Method and apparatus for configuring, monitoring and/or managing resource groups including a virtual machine |
| JP4961411B2 (ja) * | 2008-10-16 | 2012-06-27 | 株式会社日立製作所 | 計算機システム及びその構成管理方法 |
| JP5402226B2 (ja) * | 2009-05-13 | 2014-01-29 | 富士通株式会社 | 管理装置、情報処理システム、情報処理システムの制御プログラムおよび情報処理システムの制御方法 |
| JP5035299B2 (ja) * | 2009-06-15 | 2012-09-26 | 株式会社日立製作所 | マルチコアプロセッサ制御方法、その計算機システム、及び管理計算機のプログラム |
-
2012
- 2012-03-30 JP JP2012080516A patent/JP6010975B2/ja active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2013210833A (ja) | 2013-10-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5577412B2 (ja) | 計算機システム、マイグレーション方法及び管理サーバ | |
| US10733026B2 (en) | Automated workflow selection | |
| US11128555B2 (en) | Methods and apparatus for SDI support for automatic and transparent migration | |
| US8291430B2 (en) | Optimizing system performance using spare cores in a virtualized environment | |
| JP4519098B2 (ja) | 計算機の管理方法、計算機システム、及び管理プログラム | |
| US20190324819A1 (en) | Distributed-system task assignment method and apparatus | |
| US12118386B2 (en) | Techniques for container scheduling in a virtual environment | |
| US8645745B2 (en) | Distributed job scheduling in a multi-nodal environment | |
| CN109564528B (zh) | 分布式计算中计算资源分配的系统和方法 | |
| JP5684629B2 (ja) | ジョブ管理システム及びジョブ管理方法 | |
| JP6010975B2 (ja) | ジョブ管理装置、ジョブ管理方法、及びプログラム | |
| US9329937B1 (en) | High availability architecture | |
| CN110221920B (zh) | 部署方法、装置、存储介质及系统 | |
| JP2012094030A (ja) | 計算機システム及び処理制御方法 | |
| JP2014532946A (ja) | クラスタに依頼されたタスクを実行するために前記クラスタのコンピュータ資源を割り当てるための方法、コンピュータプログラム、およびデバイス | |
| CN105009084A (zh) | 分布式计算平台中的服务分配 | |
| WO2019056771A1 (zh) | 分布式存储系统升级管理的方法、装置及分布式存储系统 | |
| KR20130019698A (ko) | 사용자 스케줄러와 마이그레이션(Migration)을 통한 자원 최적화 방법 및 시스템 | |
| Ungureanu et al. | Kubernetes cluster optimization using hybrid shared-state scheduling framework | |
| JP2016115065A (ja) | 情報処理装置、情報処理システム、タスク処理方法、及び、プログラム | |
| JPWO2007072544A1 (ja) | 情報処理装置、計算機、リソース割り当て方法及びリソース割り当てプログラム | |
| US20170024245A1 (en) | Workload-aware shared processing of map-reduce jobs | |
| WO2019159875A1 (ja) | 配置構成装置、および、配置構成方法 | |
| US20140089473A1 (en) | Information processing system and management method thereof | |
| US20240061698A1 (en) | Managing the assignment of virtual machines to non-uniform memory access nodes |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20150123 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150209 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151224 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160126 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160328 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160823 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160905 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6010975 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |