JP6211272B2 - カーネル実行順序スケジューリング方法および装置 - Google Patents
カーネル実行順序スケジューリング方法および装置 Download PDFInfo
- Publication number
- JP6211272B2 JP6211272B2 JP2013020760A JP2013020760A JP6211272B2 JP 6211272 B2 JP6211272 B2 JP 6211272B2 JP 2013020760 A JP2013020760 A JP 2013020760A JP 2013020760 A JP2013020760 A JP 2013020760A JP 6211272 B2 JP6211272 B2 JP 6211272B2
- Authority
- JP
- Japan
- Prior art keywords
- kernel
- execution
- epi
- memory
- progress index
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/48—Program initiating; Program switching, e.g. by interrupt
- G06F9/4806—Task transfer initiation or dispatching
- G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
- G06F9/4881—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
- G06F9/4887—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues involving deadlines, e.g. rate based, periodic
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Description
τ有効スレッドプログレス=τ物理的−(τSWNE+τHWNE) (1)
MPI’=fm(s、p)*MPIt0
EPI’=fe(s、p)*EPIt0
カーネルの実行において、入力データの大きさと並列化レベルによって実際に予想される実行時間をT’pとすれば、EPI’、MPI’、KPI’を利用して次のように計算される。
△KE1=KE1−‘KE1
同じ方法によってK2に対するME、KEの変化量が計算される。計算された変化量をカーネルの共同実行可能な場合に対して平均すれば、デバイスで実行されるカーネルに対し、メモリおよびオペレーティングシステムの効率の変化量が計算される。メモリ効率の変化量およびオペレーティングシステム効率の変化量は、次のように表現される。
△ME=ΣMEn/n
△KE、△ME、および相関関数を考慮し、システム状況を反映した最終性能予測指数である最終カーネルプログレスインデックスKPI’sおよび最終メモリプログレスインデックスMPI’sが下記のように計算される。
MPI’s={1−(ME+△ME)}*(RPI’−EPI’)
410 推定部
420 プログレスインデックス推定部
430 制御部
440 有効プログレスカウンタ
450 メモリプログレスカウンタ
460 カーネルプログレスカウンタ
Claims (17)
- カーネル実行順序スケジューリング装置であって、
有効プログレスインデックス(EPI:Effective Progress Index)、メモリプログレスインデックス(MPI)、および、カーネルプログレスインデックス(KPI)に基づいて、カーネルそれぞれの実行時間を推定する推定部と、
前記カーネルそれぞれの推定された実行時間および前記カーネルそれぞれの優先順位に基づいて、前記カーネルの実行順序を決定する制御部、
を含み、
前記推定部は、
応用プログラムを実行する過程で繰り返し実行されるカーネルのヒストリーに基づいて、前記EPI、前記MPI、および、前記KPIを推定するプログレスインデックス推定部と、
物理プログレスインデックス(RPI)、前記EPI、前記カーネルそれぞれのメモリ効率(ME)、および、実行するカーネルに対するメモリ効率の変化量に基づいて、最終メモリプログレスインデックスを推定するメモリプログレスインデックス推定部と、
前記RPI、前記EPI、カーネルに対するオペレーティングシステムの効率(KE)、および、実行するカーネルに対するオペレーティングシステムの効率の変化量(△KE)に基づいて、最終カーネルプログレスインデックスを推定するカーネルプログレスインデックス推定部、
を含む、
カーネル実行順序スケジューリング装置。 - 前記制御部は、
前記カーネルのスケジューリング方式がプリエンプティブ(preemptive)方式である場合、前記カーネルのデッドライン(deadline)時間に基づいて、前記カーネルの実行順序をスケジューリングするプリエンプティブスケジューリング部、
を含む、請求項1に記載のカーネル実行順序スケジューリング装置。 - 前記制御部は、
前記カーネルのスケジューリング方式がノンプリエンプティブ(non−preemptive)方式である場合、前記カーネルの推定された実行時間に基づいて、所定サイズのウィンドウ単位で前記カーネルの実行順序をスケジューリングするノンプリエンプティブスケジューリング部、
を含む、請求項1に記載のカーネル実行順序スケジューリング装置。 - 前記ノンプリエンプティブスケジューリング部は、
コマンドキュー(command queue)でのカーネルの入力順序、前記カーネルそれぞれの優先順位、および前記カーネルそれぞれの推定された実行時間に基づいて、前記カーネルの実行が一定の時間間隔のタイムスロットで構成されたウィンドウ内で完了するように前記カーネルの実行順序をスケジューリングする、
請求項3に記載のカーネル実行順序スケジューリング装置。 - 前記ノンプリエンプティブスケジューリング部は、
前記カーネルの推定された実行時間に基づいて、前記ウィンドウ内で実行が完了されるカーネルが優先的に実行されるように前記カーネルの実行順序をスケジューリングする、
請求項3または4に記載のカーネル実行順序スケジューリング装置。 - 前記制御部は、
前記カーネルのうちで応用プログラムの特性に応じて周期的に実行されるカーネルに対しては、実行周期に該当するウィンドウのタイムスロットを予約し、残りのタイムスロットに他のカーネルの実行順序をスケジューリングする予約スケジューリング部、
をさらに含む、請求項2または3に記載のカーネル実行順序スケジューリング装置。 - 前記制御部は、
ウィンドウ内で残ったタイムスロットがカーネルの推定された実行時間よりも小さい場合に、前記ウィンドウの大きさを前記カーネルの推定された実行時間だけ変更するウィンドウ変更部、
をさらに含む、請求項6に記載のカーネル実行順序スケジューリング装置。 - 前記ウィンドウ変更部は、
前記ウィンドウの大きさの変更を要請したカーネルがコマンドキューに格納されたカーネルのうちで優先順位が最も大きく、要請された変更の大きさが予め設定されたウィンドウ変更範囲に含まれ、前記ウィンドウの大きさ変更要請が予め設定された回数の範囲からなる場合に、前記ウィンドウの大きさを変更する、
請求項7に記載のカーネル実行順序スケジューリング装置。 - 前記推定部は、
前記カーネルの最終有効プログレスインデックス、前記カーネルが実行される環境の影響を示す最終メモリプログレスインデックス、および最終カーネルプログレスインデックスに基づいて、前記カーネルの実行時間を推定する、
請求項1に記載のカーネル実行順序スケジューリング装置。 - 前記推定部は、
単独で実行されるカーネルのメモリ効率および共同で実行されるカーネルのメモリ効率に基づいて、前記メモリ効率の変化量を推定する第1変化量推定部、および
単独で実行されるカーネルに対するオペレーティングシステムの効率および共同で実行されるカーネルに対するオペレーティングシステムの効率に基づいて、前記オペレーティングシステムの効率の変化量を推定する第2変化量推定部、
をさらに含む、請求項1に記載のカーネル実行順序スケジューリング装置。 - 前記推定部は、
前記カーネルの非有効サイクルおよび前記メモリプログレスインデックスに基づいて、前記メモリ効率を推定するメモリ効率推定部、および
前記カーネルの非有効サイクルおよび前記カーネルプログレスインデックスに基づいて、前記オペレーティングシステムの効率を推定するオペレーティングシステム効率推定部、
をさらに含む、請求項1に記載のカーネル実行順序スケジューリング装置。 - 前記プログレスインデックス推定部は、
前記カーネルを構成するデータの大きさおよび前記データの並列化レベルに基づいて、初期有効プログレスインデックスと前記有効プログレスインデックス間の相関関数を計算する有効相関関数計算部、
前記カーネルを構成するデータの大きさおよび前記データの並列化レベルに基づいて、初期メモリプログレスインデックスと前記メモリプログレスインデックス間の相関関数を計算するメモリ相関関数計算部、および
前記カーネルを構成するデータの大きさおよび前記データの並列化レベルに基づいて、初期カーネルプログレスインデックスと前記カーネルプログレスインデックス間の相関関数を計算するカーネル相関関数計算部、
を含む、請求項1に記載のカーネル実行順序スケジューリング装置。 - 有効実行方式によって実行される命令語の実行時間を累積して前記有効プログレスインデックスを生成する有効プログレスカウンタ(EPC:Effective Progress Counter)、
前記カーネルが共有メモリにアクセスするのに消耗したサイクルを累積してメモリプログレスインデックス(MPI:Memory Progress Index)を生成するメモリプログレスカウンタ(MPC:Memory Progress Counter)、および
システムカーネル実行に消耗したサイクルを累積してカーネルプログレスインデックス(KPI:Kernel Progress Index)を生成するカーネルプログレスカウンタ(KPC:Kernel Progress Counter)、
をさらに含む、請求項1に記載のカーネル実行順序スケジューリング装置。 - カーネル実行順序スケジューリング方法であって、
プロセッサによって有効プログレスインデックス(EPI:Effective Progress Index)、メモリプログレスインデックス(MPI)、および、カーネルプログレスインデックス(KPI)に基づいて、カーネルそれぞれの実行時間を推定するステップと、
前記カーネルそれぞれの推定された実行時間および前記カーネルそれぞれの優先順位に基づいて、前記カーネルの実行順序を決定するステップ、
を含み、
前記推定するステップは、
応用プログラムを実行する過程で繰り返し実行されるカーネルのヒストリーに基づいて、前記EPI、メモリプログレスインデックス(MPI)、および、カーネルプログレスインデックス(KPI)を推定するステップと、
物理プログレスインデックス(RPI)、前記EPI、前記カーネルそれぞれのメモリ効率(ME)、および、実行するカーネルに対するメモリ効率(ME)の変化量に基づいて、最終メモリプログレスインデックスを推定するステップと、
前記RPI、前記EPI、カーネルに対するオペレーティングシステムの効率(KE)、および、実行するカーネルに対するオペレーティングシステムの効率の変化量(△KE)に基づいて、最終カーネルプログレスインデックスを推定するステップ、
を含む、
カーネル実行順序スケジューリング方法。 - 前記決定するステップは、
コマンドキュー(command queue)へのカーネルの入力順序、前記カーネルそれぞれの優先順位、および前記カーネルそれぞれの推定された実行時間に基づいて、前記カーネルの実行が一定の時間間隔のタイムスロットで構成されたウィンドウ内で完了するように前記カーネルの実行順序を決定する、
請求項14に記載のカーネル実行順序スケジューリング方法。 - 前記推定するステップは、
前記カーネルの最終有効プログレスインデックス、前記カーネルが実行される環境の影響を示す最終メモリプログレスインデックス、および最終カーネルプログレスインデックスに基づいて、前記カーネルの実行時間を推定する、
請求項14に記載のカーネル実行順序スケジューリング方法。 - 異機種コンピュータ環境システムであって、
複数の中央処理部を含むホストプロセッサ、
複数のマイクロ実行部を含むコンピュータデバイス、
カーネルそれぞれの有効プログレスインデックス(EPI:Effective Progress Index)、メモリプログレスインデックス(MPI)、および、カーネルプログレスインデックス(KPI)に基づいて、カーネルそれぞれの実行時間を推定する推定部、および
前記カーネルそれぞれの推定された実行時間および前記カーネルそれぞれの優先順位に基づいて、前記カーネルの実行順序を決定する制御部、
を含み、
前記ホストプロセッサは、前記制御部で決定された前記実行順序に基づいて、前記コンピュータデバイスでカーネルを実行することを命令するカーネル実行命令を送信し、かつ、
前記推定部は、
応用プログラムを実行する過程で繰り返し実行されるカーネルのヒストリーに基づいて、前記EPI、メモリプログレスインデックス(MPI)、および、カーネルプログレスインデックス(KPI)を推定するプログレスインデックス推定部と、
物理プログレスインデックス(RPI)、前記EPI、前記カーネルそれぞれのメモリ効率(ME)、および、実行するカーネルに対するメモリ効率(ME)の変化量に基づいて、最終メモリプログレスインデックスを推定するメモリプログレスインデックス推定部と、
前記RPI、前記EPI、カーネルに対するオペレーティングシステムの効率(KE)、および、実行するカーネルに対するオペレーティングシステムの効率の変化量(△KE)に基づいて、最終カーネルプログレスインデックスを推定するカーネルプログレスインデックス推定部、
を含む、異機種コンピュータ環境システム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2012-0011723 | 2012-02-06 | ||
KR1020120011723A KR101880452B1 (ko) | 2012-02-06 | 2012-02-06 | 커널 수행 순서 스케줄링 방법 및 장치 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013161483A JP2013161483A (ja) | 2013-08-19 |
JP6211272B2 true JP6211272B2 (ja) | 2017-10-11 |
Family
ID=48904058
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013020760A Active JP6211272B2 (ja) | 2012-02-06 | 2013-02-05 | カーネル実行順序スケジューリング方法および装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9244733B2 (ja) |
JP (1) | JP6211272B2 (ja) |
KR (1) | KR101880452B1 (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9256384B2 (en) * | 2013-02-04 | 2016-02-09 | Avago Technologies General Ip (Singapore) Pte. Ltd. | Method and system for reducing write latency in a data storage system by using a command-push model |
GB2519080B (en) * | 2013-10-08 | 2021-04-14 | Arm Ip Ltd | Scheduling function calls |
US9965279B2 (en) * | 2013-11-29 | 2018-05-08 | The Regents Of The University Of Michigan | Recording performance metrics to predict future execution of large instruction sequences on either high or low performance execution circuitry |
GB2545508B (en) | 2015-12-18 | 2019-04-10 | Imagination Tech Ltd | Controlling operation of a GPU |
GB2546343A (en) | 2016-01-15 | 2017-07-19 | Stmicroelectronics (Grenoble2) Sas | Apparatus and methods implementing dispatch mechanisms for offloading executable functions |
US10255106B2 (en) | 2016-01-27 | 2019-04-09 | Qualcomm Incorporated | Prediction-based power management strategy for GPU compute workloads |
US10333987B2 (en) * | 2017-05-18 | 2019-06-25 | Bank Of America Corporation | Security enhancement tool for a target computer system operating within a complex web of interconnected systems |
CN108196949B (zh) * | 2017-12-28 | 2021-05-04 | 华润电力技术研究院有限公司 | 一种测风数据处理方法及相关设备 |
KR102285755B1 (ko) * | 2019-11-22 | 2021-08-05 | 주식회사 마크애니 | 인공지능을 활용한 지리 정보 콘텐츠에 대한 무결성 검증 시스템, 무결성 검증 방법, 및 장치 |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05265775A (ja) * | 1992-03-19 | 1993-10-15 | Hitachi Ltd | ジョブ実行予測制御方法およびジョブ実行状況表示方法 |
JPH1185541A (ja) * | 1997-09-12 | 1999-03-30 | Nec Corp | バッチジョブ処理時間見積装置 |
JP2003091424A (ja) * | 2001-09-18 | 2003-03-28 | Matsushita Electric Ind Co Ltd | 分散処理システムおよびジョブ分散処理方法 |
WO2004059481A2 (en) * | 2002-12-16 | 2004-07-15 | Globespanvirata Incorporated | System and method for scheduling thread execution |
JP3889726B2 (ja) * | 2003-06-27 | 2007-03-07 | 株式会社東芝 | スケジューリング方法および情報処理システム |
GB0407384D0 (en) | 2004-03-31 | 2004-05-05 | Ignios Ltd | Resource management in a multicore processor |
DE102004054571B4 (de) * | 2004-11-11 | 2007-01-25 | Sysgo Ag | Verfahren zur Verteilung von Rechenzeit in einem Rechnersystem |
US8387052B2 (en) * | 2005-03-14 | 2013-02-26 | Qnx Software Systems Limited | Adaptive partitioning for operating system |
US20080263324A1 (en) | 2006-08-10 | 2008-10-23 | Sehat Sutardja | Dynamic core switching |
US8024739B2 (en) * | 2007-01-09 | 2011-09-20 | International Business Machines Corporation | System for indicating and scheduling additional execution time based on determining whether the execution unit has yielded previously within a predetermined period of time |
US9244732B2 (en) * | 2009-08-28 | 2016-01-26 | Vmware, Inc. | Compensating threads for microarchitectural resource contentions by prioritizing scheduling and execution |
FR2937439B1 (fr) | 2008-10-17 | 2012-04-20 | Commissariat Energie Atomique | Procede d'execution deterministe et de synchronisation d'un systeme de traitement de l'information comportant plusieurs coeurs de traitement executant des taches systemes. |
JP5676845B2 (ja) | 2008-11-06 | 2015-02-25 | イグジット−キューブ,インク. | コンピュータシステム、カーネルスケジューリングシステム、リソース割当方法及びプロセス実行共有方法 |
JP2010160600A (ja) * | 2009-01-07 | 2010-07-22 | Yamatake Corp | 情報処理装置、スケジューラ、及びスケジューリング方法 |
KR101032873B1 (ko) | 2009-07-14 | 2011-05-06 | 한양대학교 산학협력단 | 시스템 콜을 이용한 프로세서 제어 장치 및 프로세서 성능 측정 방법 |
JP5441626B2 (ja) * | 2009-11-06 | 2014-03-12 | 日立オートモティブシステムズ株式会社 | 車載用マルチアプリ実行装置 |
KR101088563B1 (ko) | 2009-12-24 | 2011-12-05 | 포항공과대학교 산학협력단 | 멀티코어프로세서 제어방법, 멀티코어프로세서 제어장치, 멀티코어프로세서 및 멀티코어프로세서 제어방법이 기록된 기록매체 |
KR20110116553A (ko) * | 2010-04-19 | 2011-10-26 | 삼성전자주식회사 | 미디어 프로세싱 애플리케이션 실행 장치 및 방법 |
KR101635816B1 (ko) * | 2010-07-02 | 2016-07-04 | 삼성전자주식회사 | 결정적 프로그레스 인덱스를 이용한 스레드 프로그레스 트래킹 방법 및 장치 |
-
2012
- 2012-02-06 KR KR1020120011723A patent/KR101880452B1/ko active IP Right Grant
- 2012-11-08 US US13/672,085 patent/US9244733B2/en active Active
-
2013
- 2013-02-05 JP JP2013020760A patent/JP6211272B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
KR20130091368A (ko) | 2013-08-19 |
US20130205299A1 (en) | 2013-08-08 |
JP2013161483A (ja) | 2013-08-19 |
KR101880452B1 (ko) | 2018-08-17 |
US9244733B2 (en) | 2016-01-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6211272B2 (ja) | カーネル実行順序スケジューリング方法および装置 | |
US9571561B2 (en) | System and method for dynamically expanding virtual cluster and recording medium on which program for executing the method is recorded | |
US20130290972A1 (en) | Workload manager for mapreduce environments | |
US7752622B1 (en) | Method and apparatus for flexible job pre-emption | |
US9304814B2 (en) | Determine variable wait time in an asynchronous call-back system based on calculated average sub-queue wait time | |
US20140019987A1 (en) | Scheduling map and reduce tasks for jobs execution according to performance goals | |
CN111258745B (zh) | 一种任务处理方法及设备 | |
EP3296867A1 (en) | Method and apparatus for executing real-time tasks | |
Zhang et al. | Analysis of hierarchical EDF pre-emptive scheduling | |
US20120137295A1 (en) | Method for displaying cpu utilization in a multi-processing system | |
Georgiou et al. | A scheduler-level incentive mechanism for energy efficiency in HPC | |
US8214836B1 (en) | Method and apparatus for job assignment and scheduling using advance reservation, backfilling, and preemption | |
Moulik | RESET: A real-time scheduler for energy and temperature aware heterogeneous multi-core systems | |
CN111176817A (zh) | 一种多核处理器上基于划分调度的dag实时任务间的干扰分析方法 | |
US8898675B2 (en) | Method of calculating processor utilization rate in SMT processor | |
Zhu et al. | Response time analysis of hierarchical scheduling: The synchronized deferrable servers approach | |
Kalogeraki et al. | Dynamic scheduling for soft real-time distributed object systems | |
Li et al. | Federated scheduling for stochastic parallel real-time tasks | |
Wasly et al. | Bundled scheduling of parallel real-time tasks | |
Ye et al. | Astraea: A fair deep learning scheduler for multi-tenant gpu clusters | |
Babu et al. | Energy efficient scheduling algorithm for cloud computing systems based on prediction model | |
Tang et al. | Toward balanced and sustainable job scheduling for production supercomputers | |
CN103810037B (zh) | 一种作业调度方法和计算装置 | |
Gu et al. | Improving OCBP-based scheduling for mixed-criticality sporadic task systems | |
CN115309507B (zh) | 一种cpu资源占用率的计算方法、装置、设备及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160202 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170228 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170314 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170614 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170905 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170913 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6211272 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |