JP6183101B2 - 情報処理システム、制御プログラム及び制御方法 - Google Patents
情報処理システム、制御プログラム及び制御方法 Download PDFInfo
- Publication number
- JP6183101B2 JP6183101B2 JP2013198139A JP2013198139A JP6183101B2 JP 6183101 B2 JP6183101 B2 JP 6183101B2 JP 2013198139 A JP2013198139 A JP 2013198139A JP 2013198139 A JP2013198139 A JP 2013198139A JP 6183101 B2 JP6183101 B2 JP 6183101B2
- Authority
- JP
- Japan
- Prior art keywords
- information processing
- data
- server
- file
- control device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5083—Techniques for rebalancing the load in a distributed system
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L2209/00—Additional information or applications relating to cryptographic mechanisms or cryptographic arrangements for secret or secure communication H04L9/00
- H04L2209/30—Compression, e.g. Merkle-Damgard construction
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer And Data Communications (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Selective Calling Equipment (AREA)
Description
本実施の形態に係る情報処理システムの構成例を図1に示す。本実施の形態に係る情報処理システムは、制御サーバ100と、計算サーバ200(図1では210乃至240)と、管理者端末300とを有する。
サーバ間コスト=n(t/z)+(N−n)t
サーバ内コスト=d[n/Nc]
なお、[]はガウス記号であり、[x]はx以下の最大の整数を表す。また、n>>Ncという前提がある。ファイル数がNcよりも多い場合には、何回も解凍処理を実施するので、並列で実行される各解凍処理の実行開始時刻のズレは無視できるためである。
n(t/z)+(N−n)t≦d[n/Nc]
このような関係を満たすようにnを決定すればよい。
n(t/z)+(N−n)t≦d(n/Nc−δ)
n≦{zNcNt+dzNcδ}/{Nct(z−1)+zd}(1)
n≦zNcNt/{Nct(z−1)+zd}(2)
全体コスト=サーバ間コスト
そして、計算サーバの数Nが多い場合には、サーバ間コストが支配的であり、図5に示したように、サーバ内コストは、サーバ間コスト内に収まる。
全体コスト=n(t/z)+(N−n)t
z>1であるので、できるだけnが大きい方が全体コストが低下する。すなわち、(1)式又は(2)式において最大のnの時、全体コスト最小となることが分かる。但し、nを(1)式又は(2)式で算出した後、他の何らかの要因でnの値を調整する場合もある。
第1の実施の形態では、制御サーバ100側で、いずれの計算サーバ200が圧縮処理を行うのかについて決定していたが、計算サーバ200側で自ら圧縮処理を行うか否かを判断するようにしても良い。
上で述べた実施の形態では、制御サーバ100が直接計算サーバ200を管理する形態であったが、図9に示すように、制御サーバ100と、計算サーバ200との間に、中継サーバ400(図9では410及び420)を導入するようにしても良い。中継サーバ400の数は制限がない。
複数の情報処理装置と、
前記複数の情報処理装置の各々が有するデータを収集する制御装置と、
を有し、
前記複数の情報処理装置の各々又は前記制御装置が、
前記複数の情報処理装置のうち前記データの圧縮を行う第1の情報処理装置の第1の数又は前記データの圧縮を行わない第2の情報処理装置の第2の数を、前記制御装置における解凍処理に関係するパラメータに基づき決定し、
前記第1の数の第1の情報処理装置から、圧縮された前記データが前記制御装置に送信され、
前記第2の数の第2の情報処理装置から、圧縮されていない前記データが前記制御装置に送信される
情報処理システム。
前記制御装置が、前記第1の数又は前記第2の数を算出した場合には、
前記制御装置が、
前記複数の情報処理装置のうち前記第1の情報処理装置を選択して前記第1の情報処理装置に圧縮の指示を送信する処理と、
前記複数の情報処理装置のうち前記第2の情報処理装置を選択して前記第2の情報処理装置に非圧縮の指示を送信する処理と、
のうち少なくともいずれかを実行する
付記1記載の情報処理システム。
前記複数の情報処理装置の各々又は前記制御装置が、
前記第1の数又は前記第2の数と、前記複数の情報処理装置のリストとから、前記第1の情報処理装置と前記第2の情報処理装置との少なくともいずれかを特定する
付記1記載の情報処理システム。
前記第1の数又は前記第2の数を、
圧縮された前記データについての前記解凍処理のコストと、圧縮された前記データの通信コストと、圧縮されていない前記データの通信コストとの関係式から算出された値に応じて決定される
付記1乃至3のいずれか1つ記載の情報処理システム。
前記パラメータが、
少なくとも前記解凍処理のコストと、前記制御装置における前記解凍処理の並列実行数とを含む
付記1乃至3のいずれか1つ記載の情報処理システム。
前記関係式が、
圧縮された前記データについての前記解凍処理のコストが、圧縮された前記データの通信コストと圧縮されていない前記データの通信コストとの和以下であるという式である
付記5記載の情報処理システム。
複数の情報処理装置の各々が有するデータを収集する制御装置が、
前記複数の情報処理装置のうち前記データの圧縮を行う第1の情報処理装置の第1の数又は前記データの圧縮を行わない第2の情報処理装置の第2の数を、前記制御装置における解凍処理に関係するパラメータに基づき決定し、
前記第1の数の第1の情報処理装置から圧縮された前記データが送信され且つ前記第2の数の第2の情報処理装置から圧縮されていない前記データが送信されるように、指示を送信する
処理を実行させるための制御プログラム。
複数の情報処理装置の各々と、前記複数の情報処理装置の各々が有するデータを収集する制御装置とを含む情報処理システムが、
前記複数の情報処理装置のうち前記データの圧縮を行う第1の情報処理装置の第1の数又は前記データの圧縮を行わない第2の情報処理装置の第2の数を、前記制御装置における解凍処理に関係するパラメータに基づき決定し、
前記第1の数の第1の情報処理装置から、圧縮された前記データが前記制御装置に送信し、
前記第2の数の第2の情報処理装置から、圧縮されていない前記データが前記制御装置に送信する
処理を実行する制御方法。
101 通信処理部
102 パラメータ収集部
103 パラメータ格納部
104 転送制御部
105 指示データ格納部
106 第1データ格納部
107 解凍処理部
108 第2データ格納部
200 計算サーバ
201 転送制御部
202 圧縮処理部
203 データ格納部
Claims (7)
- 複数の情報処理装置と、
前記複数の情報処理装置の各々が有するデータを収集する制御装置と、
を有し、
前記複数の情報処理装置の各々又は前記制御装置が、
前記複数の情報処理装置のうち前記データの圧縮を行う第1の情報処理装置の第1の数又は前記データの圧縮を行わない第2の情報処理装置の第2の数を、前記制御装置が圧縮された前記データに対して行う解凍処理のコストと、圧縮された前記データの通信コストと、圧縮されていない前記データの通信コストとの関係式に基づき算出された値に応じて決定し、
前記第1の数の第1の情報処理装置から、圧縮された前記データが前記制御装置に送信され、
前記第2の数の第2の情報処理装置から、圧縮されていない前記データが前記制御装置に送信される
情報処理システム。 - 前記制御装置が、前記第1の数又は前記第2の数を算出した場合には、
前記制御装置が、
前記複数の情報処理装置のうち前記第1の情報処理装置を選択して前記第1の情報処理装置に圧縮の指示を送信する処理と、
前記複数の情報処理装置のうち前記第2の情報処理装置を選択して前記第2の情報処理装置に非圧縮の指示を送信する処理と、
のうち少なくともいずれかを実行する
請求項1記載の情報処理システム。 - 前記複数の情報処理装置の各々又は前記制御装置が、
前記第1の数又は前記第2の数と、前記複数の情報処理装置のリストとから、前記第1の情報処理装置と前記第2の情報処理装置との少なくともいずれかを特定する
請求項1記載の情報処理システム。 - 前記複数の情報処理装置の各々又は前記制御装置が、
前記解凍処理の並列実行数にさらに基づき前記値を算出する
請求項1乃至3のいずれか1つ記載の情報処理システム。 - 前記関係式が、
前記解凍処理のコストが、圧縮された前記データの通信コストと圧縮されていない前記データの通信コストとの和以上であるという式である
請求項1乃至4のいずれか1つ記載の情報処理システム。 - 複数の情報処理装置の各々が有するデータを収集する制御装置が、
前記複数の情報処理装置のうち前記データの圧縮を行う第1の情報処理装置の第1の数又は前記データの圧縮を行わない第2の情報処理装置の第2の数を、前記制御装置が圧縮された前記データに対して行う解凍処理のコストと、圧縮された前記データの通信コストと、圧縮されていない前記データの通信コストとの関係式に基づき算出された値に応じて決定し、
前記第1の数の第1の情報処理装置から圧縮された前記データが送信され且つ前記第2の数の第2の情報処理装置から圧縮されていない前記データが送信されるように、指示を送信する
処理を実行させるための制御プログラム。 - 複数の情報処理装置の各々と、前記複数の情報処理装置の各々が有するデータを収集する制御装置とを含む情報処理システムが、
前記複数の情報処理装置のうち前記データの圧縮を行う第1の情報処理装置の第1の数又は前記データの圧縮を行わない第2の情報処理装置の第2の数を、前記制御装置が圧縮された前記データに対して行う解凍処理のコストと、圧縮された前記データの通信コストと、圧縮されていない前記データの通信コストとの関係式に基づき算出された値に応じて決定し、
前記第1の数の第1の情報処理装置から、圧縮された前記データを前記制御装置に送信し、
前記第2の数の第2の情報処理装置から、圧縮されていない前記データを前記制御装置に送信する
処理を実行する制御方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013198139A JP6183101B2 (ja) | 2013-09-25 | 2013-09-25 | 情報処理システム、制御プログラム及び制御方法 |
US14/339,821 US9882971B2 (en) | 2013-09-25 | 2014-07-24 | Information processing system, control method, and recording medium |
EP14179298.6A EP2860631A3 (en) | 2013-09-25 | 2014-07-31 | Information processing system, control method, and control program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013198139A JP6183101B2 (ja) | 2013-09-25 | 2013-09-25 | 情報処理システム、制御プログラム及び制御方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015064745A JP2015064745A (ja) | 2015-04-09 |
JP6183101B2 true JP6183101B2 (ja) | 2017-08-23 |
Family
ID=51266119
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013198139A Active JP6183101B2 (ja) | 2013-09-25 | 2013-09-25 | 情報処理システム、制御プログラム及び制御方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9882971B2 (ja) |
EP (1) | EP2860631A3 (ja) |
JP (1) | JP6183101B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106375466A (zh) * | 2016-09-14 | 2017-02-01 | 金蝶软件(中国)有限公司 | 一种数据文件传输方法及装置 |
JPWO2019193805A1 (ja) | 2018-04-02 | 2021-03-11 | ローム株式会社 | スイッチ駆動装置 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0815263B2 (ja) * | 1986-12-12 | 1996-02-14 | 株式会社日立製作所 | データ圧縮復元方法 |
EP1037134A2 (en) * | 1999-03-16 | 2000-09-20 | Matsushita Electric Industrial Co., Ltd. | Virtual space control data receiving apparatus and method |
US7171444B2 (en) * | 2001-11-14 | 2007-01-30 | Sharp Laboratories Of America, Inc. | Remote desktop protocol compression system |
JP4039086B2 (ja) * | 2002-03-05 | 2008-01-30 | ソニー株式会社 | 情報処理装置および情報処理方法、情報処理システム、記録媒体、並びにプログラム |
JP2005150985A (ja) * | 2003-11-12 | 2005-06-09 | Sharp Corp | 画像情報処理システムおよび画像情報処理方法 |
JP4757038B2 (ja) * | 2006-01-25 | 2011-08-24 | 株式会社日立製作所 | ストレージシステム及び記憶制御装置 |
JP2008176420A (ja) | 2007-01-16 | 2008-07-31 | Matsushita Electric Ind Co Ltd | データ転送方法、データ転送装置およびデバッグ装置 |
JP2008269050A (ja) * | 2007-04-17 | 2008-11-06 | Hitachi Ltd | 圧縮制御装置及び方法 |
EP2028890B1 (en) * | 2007-08-12 | 2019-01-02 | LG Electronics Inc. | Handover method with link failure recovery, wireless device and base station for implementing such method |
WO2011111446A1 (ja) * | 2010-03-08 | 2011-09-15 | コニカミノルタホールディングス株式会社 | 画像形成システム、コントローラ及びラスタライズアクセラレータ |
EP2737391A1 (en) * | 2011-12-08 | 2014-06-04 | Hitachi, Ltd. | Remote copy system and remote copy control method |
-
2013
- 2013-09-25 JP JP2013198139A patent/JP6183101B2/ja active Active
-
2014
- 2014-07-24 US US14/339,821 patent/US9882971B2/en active Active
- 2014-07-31 EP EP14179298.6A patent/EP2860631A3/en not_active Withdrawn
Also Published As
Publication number | Publication date |
---|---|
US9882971B2 (en) | 2018-01-30 |
US20150088991A1 (en) | 2015-03-26 |
EP2860631A3 (en) | 2017-02-22 |
JP2015064745A (ja) | 2015-04-09 |
EP2860631A2 (en) | 2015-04-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113569117B (zh) | 一种基于工业互联网大数据服务的云平台系统及方法 | |
TWI603203B (zh) | 分散式計算之運算參數與叢集系統組態的推薦方法與系統 | |
CN107908465A (zh) | 大数据平台的任务调度方法 | |
CN105208135A (zh) | 一种文件传输方法和设备 | |
CN109376981B (zh) | 数据处理方式的确定方法、装置、服务器和数据处理方法 | |
CN105607606B (zh) | 一种基于双主板架构的数据采集装置及方法 | |
TWI672924B (zh) | 平台即服務雲端伺服器及其機器學習資料處理方法 | |
JP6183101B2 (ja) | 情報処理システム、制御プログラム及び制御方法 | |
CN111400041A (zh) | 服务器配置文件的管理方法、装置及计算机可读存储介质 | |
CN112115016A (zh) | 应用性能监控系统 | |
CN112948081B (zh) | 延时处理任务的方法、装置、设备以及存储介质 | |
CN115396523A (zh) | 物联网数据处理方法、装置、设备、介质及物联网软网关 | |
JP6940771B2 (ja) | データ送信プログラム、データ送信装置、及びデータ送信方法 | |
JP2014041404A (ja) | ターミナルサービス監視装置 | |
CN114172998B (zh) | 一种文件传输方法、装置、电子设备及存储介质 | |
JP5565412B2 (ja) | 処理ノード選択システム、情報処理ノード、処理ノード決定方法およびプログラム | |
JP5475736B2 (ja) | 運用管理システム及びその監視設定方法 | |
CN104699787A (zh) | 一种用户活动状态记录的更新方法及装置 | |
CN112953844B (zh) | 一种网络流量优化方法及装置 | |
US11941432B2 (en) | Processing system, processing method, higher-level system, lower-level system, higher-level program, and lower-level program | |
JP2006120036A (ja) | トランザクション転送システム | |
CN111767085B (zh) | Storm平台参数配置方法和装置 | |
CN115858279A (zh) | 一种日志处理方法、装置、设备以及存储介质 | |
CN118694769A (zh) | 基于多重非确定性预取算法的数据下载方法、装置、设备以及存储介质 | |
JP2024041463A (ja) | エンジニアリング装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160606 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170330 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170418 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170616 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170627 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170710 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6183101 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |