JP2021114232A - 計算機システム及びデータ転送の制御方法 - Google Patents
計算機システム及びデータ転送の制御方法 Download PDFInfo
- Publication number
- JP2021114232A JP2021114232A JP2020007467A JP2020007467A JP2021114232A JP 2021114232 A JP2021114232 A JP 2021114232A JP 2020007467 A JP2020007467 A JP 2020007467A JP 2020007467 A JP2020007467 A JP 2020007467A JP 2021114232 A JP2021114232 A JP 2021114232A
- Authority
- JP
- Japan
- Prior art keywords
- data
- data transfer
- request
- resource
- cost
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012546 transfer Methods 0.000 title claims abstract description 264
- 238000000034 method Methods 0.000 title claims abstract description 145
- 238000004364 calculation method Methods 0.000 description 21
- 238000012545 processing Methods 0.000 description 19
- 238000010586 diagram Methods 0.000 description 14
- 230000004044 response Effects 0.000 description 11
- 230000006870 function Effects 0.000 description 8
- 238000004891 communication Methods 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 238000013500 data storage Methods 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
- H04L67/62—Establishing a time schedule for servicing the requests
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
- H04L67/63—Routing a service request depending on the request content or context
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Information Transfer Between Computers (AREA)
Abstract
Description
{チャンクサイズ} * {チャンク番号};
102 第2システム
104 ネットワーク
111 業務モジュール
112 API提供モジュール
121 データベース
122 追記リソース情報
123 コスト係数情報
131 リクエスト転送制御部
132 リクエスト受付部
133 コスト算出部
141 追記リソース
142 非追記リソース
151 データ取得モジュール
152 ビッグデータ処理基盤
153 ステート情報
154 差分転送方式情報
155 データレイク
200、300 計算機
201、301 CPU
202、302 主記憶装置
203、303 二次記憶装置
204、304 通信インターフェース
211 API提供プログラム
311 データ取得制御プログラム
1700 設定情報
Claims (12)
- 演算装置、前記演算装置に接続される記憶装置、前記演算装置に接続されるネットワーク装置を有する計算機から構成される複数のシステムの間のデータ転送を制御する計算機システムであって、
前記複数のシステムは、業務を実行する第1システムと、前記業務に関するデータを取得する第2システムとを含み、
前記第1システムは、前記データを格納するリソースを管理する記憶部と、複数のデータ転送方式のいずれかのデータ転送方式に基づいて、前記第2システムへの前記データの転送を制御する制御部と、を有し、
前記第2システムは、前記リソースから前記データを取得するデータ取得部を有し、
前記制御部は、
前記データ取得部からターゲットリソースにおける前記データ転送方式の問い合わせを受け付けた場合、前記複数のデータ転送方式の各々について前記第1システムの負荷を示すコストを算出し、
前記コストに基づいて、適用するデータ転送方式を決定し、
前記決定されたデータ転送方式に関する情報を前記第2システムに送信し、
前記データ取得部は、
データの転送状態を管理するための情報であって、前記決定されたデータ転送方式に基づくデータ転送で使用するステートを管理し、
前記決定されたデータ転送方式及び前記ステートに基づいて、前記リソースから前記データを取得するためのリクエストを送信することを特徴とする計算機システム。 - 請求項1に記載の計算機システムであって、
前記データ取得部は、前記決定されたデータ転送方式に基づいて、前記ステートとして管理する値を決定することを特徴とする計算機システム。 - 請求項1に記載の計算機システムであって、
前記第1システムは、前記データ転送方式の各々の前記コストを算出する場合に使用するコスト係数を管理するコスト係数情報を管理し、
前記制御部は、
前記コストを算出するために用いる、前記ターゲットリソースのメトリクスを取得し、
前記コスト係数情報から前記複数のデータ転送方式の各々の前記コスト係数を取得し、
前記メトリクスと前記複数のデータ転送方式の各々の前記コスト係数とに基づいて、前記複数のデータ転送方式の各々の前記コストを算出することを特徴とする計算機システム。 - 請求項3に記載の計算機システムであって、
前記ターゲットリソースのメトリクスは、前記リソースに格納される前記データの数及び前記リソースのデータ量の少なくともいずれかであることを特徴とする計算機システム。 - 請求項3に記載の計算機システムであって、
前記記憶部は、前記データの保存形式が異なる複数の種別のリソースを格納し、
前記コスト係数情報は、前記リソースの種別、前記データ転送方式、及び前記コスト係数を含むレコードを格納することを特徴とする計算機システム。 - 請求項1に記載の計算機システムであって、
前記制御部は、前記データ取得部から前記ターゲットリソースに対する一括転送リクエストを受信した場合、前記第1システムの負荷に応じて転送量を調整して、前記ターゲットリソースの前記データを前記第2システムに送信することを特徴とする計算機システム。 - 計算機システムが実行する複数のシステムの間のデータ転送の制御方法であって、
前記複数のシステムは、
前記計算機システムは、演算装置、前記演算装置に接続される記憶装置、前記演算装置に接続されるネットワーク装置を有する計算機から構成され、
業務を実行する第1システムと、前記業務に関するデータを取得する第2システムとを含み、
前記第1システムは、前記データを格納するリソースを管理する記憶部と、複数のデータ転送方式のいずれかのデータ転送方式に基づいて、前記第2システムへの前記データの転送を制御する制御部と、を有し、
前記第2システムは、前記リソースから前記データを取得するデータ取得部を有し、
前記データ転送の制御方法は、
前記制御部が、前記データ取得部からターゲットリソースにおける前記データ転送方式の問い合わせを受け付けた場合、前記複数のデータ転送方式の各々について前記第1システムの負荷を示すコストを算出する第1のステップと、
前記制御部が、前記コストに基づいて、適用するデータ転送方式を決定する第2のステップと、
前記制御部が、前記決定されたデータ転送方式に関する情報を前記第2システムに送信する第3のステップと、
前記データ取得部が、データの転送状態を管理するための情報であって、前記決定されたデータ転送方式に基づくデータ転送で使用するステートを管理する第4のステップと、
前記データ取得部が、前記決定されたデータ転送方式及び前記ステートに基づいて、前記リソースから前記データを取得するためのリクエストを送信する第5のステップと、を含むことを特徴とするデータ転送の制御方法。 - 請求項7に記載のデータ転送の制御方法であって、
前記第4のステップは、前記データ取得部が、前記決定されたデータ転送方式に基づいて、前記ステートとして管理する値を決定するステップを含むことを特徴とするデータ転送の制御方法。 - 請求項7に記載のデータ転送の制御方法であって、
前記第1システムは、前記データ転送方式の各々の前記コストを算出する場合に使用するコスト係数を管理するコスト係数情報を管理し、
前記第1のステップは、
前記制御部が、前記コストを算出するために用いる、前記ターゲットリソースのメトリクスを取得するステップと、
前記制御部が、前記コスト係数情報から前記複数のデータ転送方式の各々の前記コスト係数を取得するステップと、
前記制御部が、前記メトリクスと前記複数のデータ転送方式の各々の前記コスト係数とに基づいて、前記複数のデータ転送方式の各々の前記コストを算出するステップと、を含むことを特徴とするデータ転送の制御方法。 - 請求項9に記載のデータ転送の制御方法であって、
前記ターゲットリソースのメトリクスは、前記リソースに格納される前記データの数及び前記リソースのデータ量の少なくともいずれかであることを特徴とするデータ転送の制御方法。 - 請求項9に記載のデータ転送の制御方法であって、
前記記憶部は、前記データの保存形式が異なる複数の種別のリソースを格納し、
前記コスト係数情報は、前記リソースの種別、前記データ転送方式、及び前記コスト係数を含むレコードを格納することを特徴とするデータ転送の制御方法。 - 請求項7に記載のデータ転送の制御方法であって、
前記制御部が、前記データ取得部から前記ターゲットリソースに対する一括転送リクエストを受信した場合、前記第1システムの負荷に応じて転送量を調整して、前記ターゲットリソースの前記データを前記第2システムに送信するステップを含むことを特徴とするデータ転送の制御方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020007467A JP7248600B2 (ja) | 2020-01-21 | 2020-01-21 | 計算機システム及びデータ転送の制御方法 |
US17/021,083 US11095712B2 (en) | 2020-01-21 | 2020-09-15 | Computer system and control method for data transfer |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020007467A JP7248600B2 (ja) | 2020-01-21 | 2020-01-21 | 計算機システム及びデータ転送の制御方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021114232A true JP2021114232A (ja) | 2021-08-05 |
JP7248600B2 JP7248600B2 (ja) | 2023-03-29 |
Family
ID=76858296
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020007467A Active JP7248600B2 (ja) | 2020-01-21 | 2020-01-21 | 計算機システム及びデータ転送の制御方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US11095712B2 (ja) |
JP (1) | JP7248600B2 (ja) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1091549A (ja) * | 1996-07-11 | 1998-04-10 | Matsushita Electric Ind Co Ltd | 情報転送装置、情報転送方法及び情報転送プログラムを記録したコンピュータ読み取り可能な記録媒体 |
JP2004056780A (ja) * | 2003-05-30 | 2004-02-19 | Matsushita Electric Ind Co Ltd | データ受信ノード |
JP2005284694A (ja) * | 2004-03-30 | 2005-10-13 | Fujitsu Ltd | 3次元モデルデータ提供プログラム、3次元モデルデータ提供サーバ、及び3次元モデルデータ転送方法 |
JP2007538463A (ja) * | 2004-05-18 | 2007-12-27 | クゥアルコム・インコーポレイテッド | データネットワークにおけるマルチキャストとユニキャストとのハイブリッド送信のための方法及び装置 |
JP2014132410A (ja) * | 2013-01-07 | 2014-07-17 | Fujitsu Ltd | 通信装置および通信制御方法 |
US20170060633A1 (en) * | 2015-08-27 | 2017-03-02 | Qualcomm Incorporated | Data Management for Multiple Processing Units Using Data Transfer Costs |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5694546A (en) * | 1994-05-31 | 1997-12-02 | Reisman; Richard R. | System for automatic unattended electronic information transport between a server and a client by a vendor provided transport software with a manifest list |
EP0978977A1 (en) * | 1998-08-07 | 2000-02-09 | International Business Machines Corporation | A method and system for improving high speed internetwork data transfers |
US6519029B1 (en) * | 1999-03-22 | 2003-02-11 | Arc Second, Inc. | Low cost transmitter with calibration means for use in position measurement systems |
US20140164262A1 (en) * | 2012-12-11 | 2014-06-12 | John D. Graham | System and method for management of intangible assets |
US7240099B2 (en) * | 2000-03-06 | 2007-07-03 | Sony Corporation | System and method for efficiently performing data transfer operations |
US20040024900A1 (en) * | 2002-07-30 | 2004-02-05 | International Business Machines Corporation | Method and system for enhancing streaming operation in a distributed communication system |
US9609003B1 (en) * | 2007-06-12 | 2017-03-28 | Icontrol Networks, Inc. | Generating risk profile using data of home monitoring and security system |
US7590589B2 (en) * | 2004-09-10 | 2009-09-15 | Hoffberg Steven M | Game theoretic prioritization scheme for mobile ad hoc networks permitting hierarchal deference |
US7698001B2 (en) * | 2005-10-27 | 2010-04-13 | Hewlett-Packard Development Company, L.P. | Method and apparatus for improving performance of networking applications |
US8601155B2 (en) * | 2006-08-16 | 2013-12-03 | Oracle America, Inc. | Telemetry stream performance analysis and optimization |
TWI342522B (en) * | 2007-06-06 | 2011-05-21 | Wistron Corp | Light path management system and method for displaying user's working conditions on a screen |
KR100908868B1 (ko) * | 2007-09-28 | 2009-07-21 | 주식회사 넥스지 | 가상 인터페이스를 통해 연결된 서버와 클라이언트사이에서 각 회선별로 트래픽을 분배하여 데이터를전송하는 방법 및 시스템 |
US8009554B2 (en) * | 2008-03-13 | 2011-08-30 | Aspen Networks, Inc. | Method for multiple link quality of service for voice and video over internet protocol |
US8265086B2 (en) * | 2009-06-26 | 2012-09-11 | Nokia Corporation | Multi-path transport |
US8213331B2 (en) * | 2009-12-13 | 2012-07-03 | International Business Machines Corporation | Managing data transfer in a network environment |
JP5803924B2 (ja) * | 2010-09-02 | 2015-11-04 | 日本電気株式会社 | データ転送システム |
JP5675548B2 (ja) | 2011-10-19 | 2015-02-25 | 株式会社日立製作所 | データ通信制御方法及びデータ通信制御システム |
JP6062551B2 (ja) | 2013-07-26 | 2017-01-18 | 株式会社日立製作所 | 差分データ転送システム及び方法 |
CN107231662B (zh) * | 2016-03-25 | 2020-11-10 | 华为技术有限公司 | 一种sdn网络中多流传输的方法和设备 |
-
2020
- 2020-01-21 JP JP2020007467A patent/JP7248600B2/ja active Active
- 2020-09-15 US US17/021,083 patent/US11095712B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1091549A (ja) * | 1996-07-11 | 1998-04-10 | Matsushita Electric Ind Co Ltd | 情報転送装置、情報転送方法及び情報転送プログラムを記録したコンピュータ読み取り可能な記録媒体 |
JP2004056780A (ja) * | 2003-05-30 | 2004-02-19 | Matsushita Electric Ind Co Ltd | データ受信ノード |
JP2005284694A (ja) * | 2004-03-30 | 2005-10-13 | Fujitsu Ltd | 3次元モデルデータ提供プログラム、3次元モデルデータ提供サーバ、及び3次元モデルデータ転送方法 |
JP2007538463A (ja) * | 2004-05-18 | 2007-12-27 | クゥアルコム・インコーポレイテッド | データネットワークにおけるマルチキャストとユニキャストとのハイブリッド送信のための方法及び装置 |
JP2014132410A (ja) * | 2013-01-07 | 2014-07-17 | Fujitsu Ltd | 通信装置および通信制御方法 |
US20170060633A1 (en) * | 2015-08-27 | 2017-03-02 | Qualcomm Incorporated | Data Management for Multiple Processing Units Using Data Transfer Costs |
Also Published As
Publication number | Publication date |
---|---|
US11095712B2 (en) | 2021-08-17 |
US20210227021A1 (en) | 2021-07-22 |
JP7248600B2 (ja) | 2023-03-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110311973B (zh) | 一种面向多租户的影像云服务系统及方法 | |
EP0279232A2 (en) | A system and method for version level negotiation | |
EP1429517A1 (en) | Access relaying apparatus | |
JP2014522011A (ja) | 異種計算環境内のメインフレームのデータオブジェクトに対するアクセスを提供する工程 | |
US9223896B2 (en) | Screen generation method, and screen generation apparatus | |
US20090043864A1 (en) | Method and System for Generating Globally Unique Identifiers | |
CN112579695A (zh) | 一种数据同步方法和装置 | |
CN107249045B (zh) | 便携式内窥镜多模态信息同步存储方法和系统 | |
US20070094278A1 (en) | Data transfer services | |
JP2021114232A (ja) | 計算機システム及びデータ転送の制御方法 | |
CN113760852A (zh) | 网络文件系统和基于网络文件系统的请求处理方法 | |
JPWO2013186891A1 (ja) | 進捗状況管理システム、及び進捗状況管理方法 | |
EP3518120B1 (en) | Indexing media asset aggregates in a multi-database environment | |
JP2016085522A (ja) | 情報管理装置 | |
KR20150028630A (ko) | 캐시 데이터 관리 방법 및 장치 | |
US20150074265A1 (en) | Transmission apparatus, transmission method, computer-readable storage medium storing transmission program, and relay system | |
JP5395550B2 (ja) | 撮像装置、情報処理装置、データ通信方法、プログラム | |
JP6193491B2 (ja) | 計算機システム | |
CN116991815B (zh) | 一种分布式存储系统的日志收集方法、装置、设备及介质 | |
CN112783925B (zh) | 分页检索方法和装置 | |
JP5428918B2 (ja) | 文書配信装置 | |
US11514016B2 (en) | Paging row-based data stored as objects | |
JP2003030243A (ja) | 画像配信システム及び情報処理装置及びそれらの方法 | |
JPH11120059A (ja) | ネットワークシステム | |
CN116881343A (zh) | 一种多账套的切换方法、装置、终端设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220512 |
|
TRDD | Decision of grant or rejection written | ||
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230222 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230228 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230316 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7248600 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |