JP6793498B2 - データストア装置およびデータ管理方法 - Google Patents
データストア装置およびデータ管理方法 Download PDFInfo
- Publication number
- JP6793498B2 JP6793498B2 JP2016162367A JP2016162367A JP6793498B2 JP 6793498 B2 JP6793498 B2 JP 6793498B2 JP 2016162367 A JP2016162367 A JP 2016162367A JP 2016162367 A JP2016162367 A JP 2016162367A JP 6793498 B2 JP6793498 B2 JP 6793498B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- priority
- message
- message data
- storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
- H04L67/1004—Server selection for load balancing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
- G06F9/5038—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the execution order of a plurality of tasks, e.g. taking priority or time dependency constraints into consideration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/546—Message passing systems or structures, e.g. queues
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer And Data Communications (AREA)
- Information Transfer Between Computers (AREA)
Description
図1は、分散処理型メッセージキューシステムの構成例を示す図である。メッセージキューシステムは、クライアント100a、100b、ロードバランサー200、メッセージキューサーバ300a、300b、ロードバランサー400、およびサービス提供サーバ500a、500bを有している。
図5は、メッセージキュー制御部310aが実行するメッセージデータ情報サマリの更新処理を示すシーケンス図である。
前記ステップA5で前記メッセージデータ情報サマリを作成したメッセージデータ情報操作部316は、作成したメッセージデータ情報サマリを含んだメッセージデータ情報サマリ更新要求を分散データストア320aへ送信する(ステップA6)。
取得メッセージデータ数が予測できると、当該取得メッセージデータ数と、メッセージデータ情報サマリのメッセージ数とに基づいて、現在時刻において各ストレージデバイス330a、330bに格納されているメッセージデータの個数(現在時刻メッセージデータ数)を予測することができる。そして、当該現在時刻メッセージ数から、高優先のメッセージデータを取得できる可能性が最も高いストレージデバイス330a、330bを予測することができる。予測方法としては様々なポリシによる様々な方法が採用可能である。
Claims (6)
- 複数の記憶装置と、
データを受信して前記記憶装置に格納し、データ取得要求を受けて前記記憶装置からデータを取得して送信するデータ制御部と、を有し、
前記データ制御部は、前記複数の記憶装置のそれぞれに格納されている前記データに関する格納状況情報に基づいて、前記データ取得要求にかかるデータを検索する対象の記憶装置を選択する、
データストア装置であって、
前記データにはそれぞれ優先度が付与され、
前記格納状況情報は、前記複数の記憶装置のそれぞれに格納されている優先度毎のデータのデータ数に関する優先度毎格納状況情報と、前記優先度毎格納状況情報が取得された時刻に関する時刻情報とを含み、
前記データ制御部は、前記優先度毎格納状況情報と該優先度毎格納状況情報が取得された時刻に関する時刻情報とに基づいて、現在時刻の優先度とデータ数の関係を予測し、予測結果に基づいて、前記データを検索する記憶装置として、優先度の高いデータを取得できる可能性の高い記憶装置を選択する、
データストア装置。 - 前記データ制御部が複数あり、
前記複数のデータ制御部は、前記複数の記憶装置にデータを格納し、前記複数の記憶装置からデータを取得することが可能であり、
前記複数のデータ制御部がそれぞれに前記格納状況情報を保持し、
前記複数のデータ制御部は、前記データ取得要求を受けると、それぞれの保持する前記格納状況情報を用いて、前記データを検索する記憶装置を選択する、
請求項1に記載のデータストア装置。 - 前記格納状況情報は、所定の時刻に取得された情報を含み、
前記複数のデータ制御部は、同じ記憶装置に格納されているデータに関し、互いに依存しない時刻の格納状況情報を用いる、
請求項2に記載のデータストア装置。 - 前記データ制御部は、現在時刻と前記時刻情報が示す時刻との差分と、単位時間に取得されるデータ数の平均値との積を、前記時刻情報が示す時刻における優先度毎のデータ数から減算して、現在時刻の優先度とデータ数の関係を予測する、請求項1に記載のデータストア装置。
- 単位時間に取得されるデータ数の平均値は、1つの前記データ制御部の単位時間に前記記憶装置から取得するデータ数の平均値と、前記データ制御部の個数との積である、請求項4に記載のデータストア装置。
- 複数の記憶装置と、データを受信して前記記憶装置に格納し、データ取得要求を受けて前記記憶装置からデータを取得して送信するデータ制御部と、を有するデータストア装置におけるデータ管理方法であって、
前記データ制御部が、前記複数の記憶装置のそれぞれに格納されている前記データに関する格納状況情報を取得し、
前記データ制御部が、前記格納状況情報に基づいて、前記データ取得要求にかかるデータを検索する対象の記憶装置を選択するものにおいて、
前記データにはそれぞれ優先度が付与され、
前記格納状況情報は、前記複数の記憶装置のそれぞれに格納されている優先度毎のデータのデータ数に関する優先度毎格納状況情報と、前記優先度毎格納状況情報が取得された時刻に関する時刻情報とを含み、
前記データ制御部は、前記優先度毎格納状況情報と該優先度毎格納状況情報が取得された時刻に関する時刻情報とに基づいて、現在時刻の優先度とデータ数の関係を予測し、予測結果に基づいて、前記データを検索する記憶装置として、優先度の高いデータを取得できる可能性の高い記憶装置を選択する、
データ管理方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016162367A JP6793498B2 (ja) | 2016-08-23 | 2016-08-23 | データストア装置およびデータ管理方法 |
US16/327,921 US10684901B2 (en) | 2016-08-23 | 2017-08-10 | Data store device and data management method |
PCT/JP2017/029032 WO2018037930A1 (ja) | 2016-08-23 | 2017-08-10 | データストア装置およびデータ管理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016162367A JP6793498B2 (ja) | 2016-08-23 | 2016-08-23 | データストア装置およびデータ管理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018032115A JP2018032115A (ja) | 2018-03-01 |
JP6793498B2 true JP6793498B2 (ja) | 2020-12-02 |
Family
ID=61245825
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016162367A Active JP6793498B2 (ja) | 2016-08-23 | 2016-08-23 | データストア装置およびデータ管理方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10684901B2 (ja) |
JP (1) | JP6793498B2 (ja) |
WO (1) | WO2018037930A1 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109347842A (zh) * | 2018-10-26 | 2019-02-15 | 深圳点猫科技有限公司 | 一种用于教育系统的数据采集方法及装置 |
JP7351679B2 (ja) * | 2019-09-04 | 2023-09-27 | 株式会社日立製作所 | 計算機、データ制御方法及びデータストアシステム |
US11836548B2 (en) * | 2020-02-19 | 2023-12-05 | T-Mobile Usa, Inc. | Smart event monitoring of IoT devices using message queue |
CN111444146B (zh) * | 2020-03-27 | 2023-05-16 | 中核武汉核电运行技术股份有限公司 | 一种核电机组dcs数据采集与存储方法 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3120963B2 (ja) * | 1995-12-14 | 2000-12-25 | 株式会社日立製作所 | メッセージを転送する方法およびメッセージを転送するシステム |
JP4176902B2 (ja) * | 1999-03-05 | 2008-11-05 | 三菱電機株式会社 | シミュレーション装置 |
US8996707B2 (en) * | 2007-09-28 | 2015-03-31 | Alcatel Lucent | Method and apparatus for performing load balancing for a control plane of a mobile communication network |
WO2012172588A1 (ja) * | 2011-06-13 | 2012-12-20 | 株式会社日立製作所 | リクエスト振分け計算機、リクエスト振分け方法及びプログラム |
US20150236974A1 (en) * | 2013-04-26 | 2015-08-20 | Hitachi, Ltd. | Computer system and load balancing method |
JP6518411B2 (ja) | 2014-07-04 | 2019-05-22 | 株式会社日立製作所 | キューサーバ |
US10225332B2 (en) * | 2016-03-25 | 2019-03-05 | International Business Machines Corporation | Sharing a data management policy with a load balancer |
-
2016
- 2016-08-23 JP JP2016162367A patent/JP6793498B2/ja active Active
-
2017
- 2017-08-10 US US16/327,921 patent/US10684901B2/en active Active
- 2017-08-10 WO PCT/JP2017/029032 patent/WO2018037930A1/ja active Application Filing
Also Published As
Publication number | Publication date |
---|---|
WO2018037930A1 (ja) | 2018-03-01 |
JP2018032115A (ja) | 2018-03-01 |
US20190227859A1 (en) | 2019-07-25 |
US10684901B2 (en) | 2020-06-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10491702B2 (en) | Proxy-based cache content distribution and affinity | |
US8271987B1 (en) | Providing access to tasks that are available to be performed | |
US11057461B2 (en) | Scalable peer matching | |
US10044797B2 (en) | Load balancing of distributed services | |
JP6793498B2 (ja) | データストア装置およびデータ管理方法 | |
CN108881348B (zh) | 服务质量控制方法、装置和存储服务器 | |
WO2016074323A1 (zh) | 内容分发网络的http调度系统和方法 | |
US10270849B2 (en) | Scalable peer matching | |
CN108023953B (zh) | Ftp服务的高可用实现方法和装置 | |
WO2017101366A1 (zh) | Cdn服务节点的调度方法及服务器 | |
US8868756B1 (en) | Sticky routing | |
CN107451853B (zh) | 一种红包实时派发的方法、装置、系统及存储介质 | |
JP2012510111A5 (ja) | ||
US11347550B1 (en) | Autoscaling and throttling in an elastic cloud service | |
JP5957965B2 (ja) | 仮想化システム、負荷分散装置、負荷分散方法、及び負荷分散プログラム | |
CN114338695A (zh) | 基于多副本的领导者选举方法、装置、设备及存储介质 | |
US11381657B2 (en) | Enhanced file sharing systems and methods | |
KR101131787B1 (ko) | 캐시서버에 저장된 데이터 갱신방법, 그 캐시서버 및 컨텐츠 제공시스템 | |
US10812390B2 (en) | Intelligent load shedding of traffic based on current load state of target capacity | |
US11995469B2 (en) | Method and system for preemptive caching across content delivery networks | |
JP5690287B2 (ja) | 負荷分散プログラムおよび負荷分散装置 | |
US20140278924A1 (en) | Selectively altering requests based on comparison of potential value of requests |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190723 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200923 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201014 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201027 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201110 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6793498 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |