KR20200004453A - Method and system for managing data transfer - Google Patents
Method and system for managing data transfer Download PDFInfo
- Publication number
- KR20200004453A KR20200004453A KR1020200000324A KR20200000324A KR20200004453A KR 20200004453 A KR20200004453 A KR 20200004453A KR 1020200000324 A KR1020200000324 A KR 1020200000324A KR 20200000324 A KR20200000324 A KR 20200000324A KR 20200004453 A KR20200004453 A KR 20200004453A
- Authority
- KR
- South Korea
- Prior art keywords
- file
- transmission
- data center
- files
- transmitting
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/36—Flow control; Congestion control by determining packet size, e.g. maximum transfer unit [MTU]
- H04L47/365—Dynamic adaptation of the packet size
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/04—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
- H04L63/0428—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Computer Hardware Design (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Information Transfer Between Computers (AREA)
Abstract
Description
본 발명은 파일 전송을 관리하는 방법에 관한 것으로, 보다 상세하게는 파일의 고속 전송을 위하여 멀티 네트워크로 분산 전송하는 구조에 관한 것이다.The present invention relates to a method for managing file transfer, and more particularly, to a structure for distributed transmission to multiple networks for high speed transfer of files.
오늘날 기업과 정부기관 등 여러 조직들은 대용량의 파일을 서로 다른 도시간 또는 장거리의 국가간 전송해야 하지만 대용량 파일 전송에는 특별한 방법이 없다. 출발지와 도착지간 대역폭이 10MB 라고 하더라도 실제 장거리 전송에서는 초당 10MB의 5%미만만 사용할 수 있으므로, 만약 10TB 의 파일을 전송한다면 100Mbps의 5%인 5Mbps만 사용하여 약 200일 이상이 소요된다. 만약 대역폭의 100Mbps의 속도를 100% 사용할 수 있다고 하더라도 약 10일이 소요 된다.Today, organizations such as corporations and government agencies have to transfer large files between different intercity or long distance countries, but there is no special way to transfer large files. Even if the source and destination bandwidth is 10MB, less than 5% of 10MB per second can be used in actual long-distance transmission, so if you transfer 10TB of files, it takes about 200 days using only 5Mbps, which is 5% of 100Mbps. If 100% of the bandwidth is available, it takes about 10 days.
HTML5를 이용하여 파일을 분할하여 병렬로 전송하여 고속으로 전송하는 방식도 알려져 있지만 전송되는 파일이 쉽게 노출될 수 있고, HTTPS 또한 위조된 인증서를 이용한 해킹에 매우 취약하여 안전하지 않음이 이미 잘 알려져 있다. It is also known to use HTML5 to split a file and send it in parallel to transfer it at high speed, but it is already well known that the transmitted file can be easily exposed, and HTTPS is also very vulnerable to hacking using forged certificates. .
추가적으로 파일의 용량이 크고, 전송되는 시간이 길수록 전송 과정에서 네트워크의 장애로 전송은 수 없이 중단될 수 있으며, 수많은 자연적인 또는 인위적인 파일 변조로 전송을 완료할 수 없으며 처음부터 다시 전송하더라도 동일한 상황이 반복만 되어 전송을 영원히 완료할 수 없습니다. 파일을 반드시 전송해야만 하는 상황에 처한 수많은 조직들이 선택할 수 있는 유일한 방법은 현재 물리적인 저장 장치에 파일을 복사하여 해당 장치를 실제로 이동하고 복사하는 것만이 유일 하다.Additionally, the larger the file size and the longer the time it takes to transfer, the more disruption the network may have to make during the transfer process, and many natural or artificial file tamperings can't complete the transfer. Iteration only and cannot be completed forever. The only way for many organizations in situations where files must be transferred is to copy files to physical storage, and actually move and copy them.
파일의 전송량이 급증함에 따라서 이러한 물리적인 저장 장치의 구매와 장비의 물리적인 운송, 전송 관리에 필요한 인건비용 등 또한 급격하게 상승하고 있으며 사람을 통한 복사, 검증과정에서 발생되는 휴먼에러와 파일의 유실로 인한, 재전송 비용 및 전체 전송 시간의 증가 외에도 운송 중 파일 유실, 유출에 따른 잠재적인 위험 또한 심각한 문제로 대두되고 있다.As file transfers increase rapidly, the labor costs required for the purchase of such physical storage devices, the physical transportation of equipment, and the management of transmissions are also rapidly increasing, and the loss of human errors and files caused by copying and verifying by humans In addition to the increased retransmission costs and overall transfer time, the potential risk of file loss and leakage during transportation is also a serious problem.
장거리간 대용량 파일의 전송을 위하여 FTP, UDP 등을 이용하여 파일을 분할하고 병렬 전송함으로써 장거리간 전송에서 사용할 수 있는 대역폭을 100%에 가깝게 사용할 수는 있지만 FTP, UDP를 사용하기 위해서는 포트를 개방해야 하고, 보안의 위협이 발생되어 널리 사용될 수는 없다.In order to transfer large files over long distances, the files can be split and parallelized using FTP and UDP to use up to 100% of the bandwidth available for long-distance transfers. However, ports must be opened to use FTP and UDP. In addition, security threats occur and cannot be widely used.
본 발명은 종래의 파일 전송에 이용되는 프로토콜 들의 보안 위협과 대역폭의 한계, 전송 과정에서 발생되는 장애의 자동화된 대응, 사용의 불편함 등을 획기적으로 개선하고 파일을 전송 속도를 향상시키는데 그 목적이 있다.The present invention aims to drastically improve the security threats and bandwidth limitations of the protocols used in the conventional file transfer, the automated response to failures occurring during the transfer process, and the inconvenience of use, and to improve the file transfer speed. have.
상기 기술적 과제를 해결하기 위한 본 발명에 따른 파일 전송 방법은 파일 전송 시스템이, 송신측으로부터 파일을 수신측으로 전송하기 위한 요청을 수신하는 단계; 상기 송신측 및 상기 수신측 사이에 존재하는 데이터 센터를 경유하여 상기 파일을 전송하기 위한 전송 경로를 설정하는 단계; 상기 전송 경로 별로 상기 파일을 복수의 조각으로 분할하는 분할 기준을 결정하는 단계; 및 상기 분할 기준에 따라 분할된 조각 파일을 상기 전송 경로에 따라 개별적으로 전송하는 단계를 포함한다.According to another aspect of the present invention, there is provided a file transfer method comprising: receiving, by a file transfer system, a request for transmitting a file from a transmitter to a receiver; Establishing a transmission path for transmitting the file via a data center existing between the transmitting side and the receiving side; Determining a division criterion for dividing the file into a plurality of pieces for each transmission path; And separately transmitting fragment files divided according to the division criteria along the transmission path.
상기 데이터 센터는 위치하는 지역을 기준으로 구분되며, 상기 전송 경로를 설정하는 단계는 상기 파일을 전송하기 위해 경유하는 지역의 데이터 센터를 결정하는 것이 바람직하다.The data center may be divided based on a location where the data center is located, and the setting of the transmission path may determine a data center of a region through which the file is transmitted.
상기 전송 경로를 설정하는 단계는 상기 송신측 및 상기 수신측이 위치하는 지역 간의 지리적 위치 및 거리에 따라 상기 경유하는 지역의 데이터 센터를 결정하는 것이 바람직하다.In the setting of the transmission path, it is preferable to determine a data center of the transit region according to the geographical position and distance between the region where the transmitting side and the receiving side are located.
상기 전송 경로를 설정하는 단계는 상기 경유하는 지역 별 복수의 전송 경로를 설정하고, 상기 파일 전송 방법은, 상기 결정된 복수의 경로를 전송 시간 및 전송 비용에 따라 리스트로 제공하는 단계를 더 포함한다.The setting of the transmission path may include setting a plurality of transmission paths for each transit region, and the file transmission method may further include providing the determined plurality of paths in a list according to a transmission time and a transmission cost.
상기 전송하는 단계는 HTTP(Hyper Text Transfer Protocol)을 이용하여 상기 조각 파일을 전송하는 것이 바람직하다.In the transmitting, the fragment file may be transmitted using a Hyper Text Transfer Protocol (HTTP).
상기 전송하는 단계는 상기 송신측 및 상기 전송 경로 상 최초의 데이터 센터 간 또는 상기 전송 경로 상 최후의 데이터 센터 및 상기 수신측 간의 전송 시 상기 조각 파일을 복수의 통신 회선으로 구분하여 전송하는 것이 바람직하다.The transmitting may be performed by dividing the fragment file into a plurality of communication lines during transmission between the transmitting side and the first data center on the transmission path or between the last data center on the transmission path and the receiving side. .
상기 최초의 데이터 센터는 상기 송신측이 위치하는 지역의 데이터 센터 이며, 상기 최후의 데이터 센터는 상기 수신측이 위치하는 지역의 데이터 센터인 것이 바람직하다.Preferably, the first data center is a data center of a region where the transmitting side is located, and the last data center is a data center of a region where the receiving side is located.
상기 수신하는 단계는 기준 이상의 다수 파일을 전송하기 위한 요청을 수신한 경우 다수 파일을 단일 파일로 병합하고, 상기 분할 기준을 결정하는 단계는 상기 병합된 단일 파일을 상기 전송 구간 별로 분할하는 분할 기준을 결정하는 것이 바람직하다.The receiving may include merging a plurality of files into a single file when receiving a request for transmitting a plurality of files above a reference, and determining the splitting criterion by dividing the merged single file by the transmission interval. It is desirable to decide.
상기 파일 전송 방법은, 상기 분할된 조각 파일을 암호화하는 단계를 더 포함하고, 상기 전송하는 단계는 상기 암호화된 조각 파일을 상기 최초의 데이터 센터로 전송하는 것이 바람직하다.The file transfer method further comprises encrypting the divided fragment file, wherein the transmitting preferably transmits the encrypted fragment file to the first data center.
상기 파일 전송 방법은, 상기 분할된 조각 파일을 복호화하는 단계를 더 포함하고, 상기 전송하는 단계는 상기 전송 경로 상 최후의 데이터 센터에서 수신된 상기 암호화된 조각 파일을 복호화하여 수신측에 전송하는 것이 바람직하다.The file transmission method may further include decrypting the divided fragment file, and the transmitting may include decrypting the encrypted fragment file received at the last data center on the transmission path and transmitting the decrypted fragment file to a receiver. desirable.
상기 파일 전송 방법은, 상기 조각 파일의 송신측 전송 상태와 수신측 수신 상태를 상호 비교하고, 상기 비교 결과에 따른 상기 파일의 전송 상태 정보를 제공 하는 단계를 더 포함한다.The method may further include comparing the transmission side transmission state and the reception side reception state of the fragment file and providing transmission state information of the file according to the comparison result.
상기 기술적 과제를 해결하기 위한 본 발명에 따른 파일 전송 시스템은 송신측으로부터 파일을 수신측으로 전송하기 위한 요청을 수신하는 전송 요청 수신부; 상기 송신측 및 상기 수신측 사이에 존재하는 데이터 센터를 경유하여 상기 파일을 전송하기 위한 전송 경로를 설정하는 전송 경로 설정부; 상기 전송 경로 별로 상기 파일을 복수의 조각으로 분할하는 분할 기준을 결정하는 파일 분할 기준 결정부; 및 상기 분할 기준에 따라 분할된 조각 파일을 상기 전송 경로에 따라 개별적으로 전송하는 파일 전송부를 포함한다.The file transfer system according to the present invention for solving the technical problem is a transmission request receiving unit for receiving a request for transmitting a file from the transmitting side to the receiving side; A transmission path setting unit for setting a transmission path for transmitting the file via a data center existing between the transmitting side and the receiving side; A file division criterion determination unit which determines a division criterion for dividing the file into a plurality of pieces for each transmission path; And a file transmitter for individually transmitting fragment files divided according to the division criteria along the transmission path.
본 발명에 따르면, 파일들은 여러 개의 조각으로 분산되고 동시에 조각들을 여러 네트워크에 분산 전송 시킴으로써 보안성을 강화함과 동시에 대역폭을 일시적으로 확장 시켜 전송 속도를 획기적으로 향상 시킬 수 있다. 또한 사용자는 고가의 대역폭을 구매할 필요 없이 전송되는 시점에서 근거리에 다수의 회선 사업자와 전 세계에 분산되어 있는 데이터 센터를 활용함으로써 저렴한 비용으로, 안전하고, 완벽하게, 대용량 파일을 전송할 수 있다.According to the present invention, the files are distributed into several pieces and at the same time, the pieces are distributed to several networks at the same time to enhance security and to temporarily increase the bandwidth to dramatically increase the transmission speed. In addition, users can transfer large files at low cost, securely, and seamlessly by utilizing multiple line operators and globally distributed data centers at the point of transmission without having to purchase expensive bandwidth.
도 1 및 2는 본 발명의 일 실시예에 따른 파일 전송 방법이 수행되는 시스템 환경을 예시하는 도이다.
도 3는 본 발명의 일 실시예에 따른 파일 전송 방법이 수행되는 시스템 구성을 예시하는 도이다.
도 4은 본 발명의 일 실시예에 따른 파일 전송 방법을 위한 전송 경로를 예시하는 도이다.
도 5은 본 발명의 일 실시예에 따른 파일 전송 방법을 선택하기 위한 사용자 인터페이스를 예시하는 도이다.
도 6은 본 발명의 일 실시예에 따른 파일 전송 방법에서 전송 경로 별 파일의 분할을 예시하는 도이다.
도 7 및 도 8은 본 발명의 일 실시예에 따른 파일 전송 방법이 수행되는 송신측 구성을 예시하는 도이다.
도 9는 본 발명의 일 실시예에 따른 파일 전송 방법에서 전송 속도를 결정하는 것을 예시하는 도이다.
도 10은 본 발명의 일 실시예에 따른 파일 전송 방법에서 송신측이 파일을 병합하는 것을 예시하는 도이다.
도 11은 본 발명의 일 실시예에 따른 파일 전송 방법에서 수신측이 파일을 병합하는 것을 예시하는 도이다.
도 12는 본 발명의 일 실시예에 따른 파일 전송 방법에서 파일의 탈취를 예시하는 도이다.
도 13는 본 발명의 일 실시예에 따른 파일 전송 방법에서 파일을 암호화하는 것을 예시하는 도이다.
도 14는 본 발명의 일 실시예에 따른 파일 전송 방법에서 전송 상태를 모니터링하는 것을 예시하는 도이다.
도 15는 본 발명의 일 실시예에 따른 파일 전송 방법이 수행되는 시스템 구성을 나타내는 도이다.
도 16 내지 21은 본 발명의 일 실시예에 따른 파일 전송 방법이 수행되는 흐름을 나타내는 도이다.1 and 2 are diagrams illustrating a system environment in which a file transfer method according to an embodiment of the present invention is performed.
3 is a diagram illustrating a system configuration in which a file transfer method according to an embodiment of the present invention is performed.
4 is a diagram illustrating a transmission path for a file transfer method according to an embodiment of the present invention.
5 is a diagram illustrating a user interface for selecting a file transfer method according to an embodiment of the present invention.
6 is a diagram illustrating file division by transmission path in a file transmission method according to an embodiment of the present invention.
7 and 8 are diagrams illustrating a transmission side configuration in which a file transfer method according to an embodiment of the present invention is performed.
9 is a diagram illustrating determining a transmission speed in a file transfer method according to an embodiment of the present invention.
10 is a diagram illustrating a merge of a file by a sender in a file transfer method according to an embodiment of the present invention.
11 is a diagram illustrating a merge of a file by a receiver in a file transfer method according to an embodiment of the present invention.
12 is a diagram illustrating a file takeover in the file transfer method according to an embodiment of the present invention.
13 is a diagram illustrating encrypting a file in a file transfer method according to an embodiment of the present invention.
14 is a diagram illustrating monitoring a transmission state in a file transfer method according to an embodiment of the present invention.
15 is a diagram illustrating a system configuration in which a file transfer method according to an embodiment of the present invention is performed.
16 to 21 are diagrams illustrating a flow of performing a file transfer method according to an embodiment of the present invention.
이하의 내용은 단지 발명의 원리를 예시한다. 그러므로 당업자는 비록 본 명세서에 명확히 설명되거나 도시 되지 않았지만 발명의 원리를 구현하고 발명의 개념과 범위에 포함된 다양한 장치를 발명할 수 있는 것이다. 또한, 본 명세서에 열거된 모든 조건부 용어 및 실시 예들은 원칙적으로, 발명의 개념이 이해되도록 하기 위한 목적으로만 명백히 의도되고, 이외같이 특별히 열거된 실시 예들 및 상태들에 제한적이지 않는 것으로 이해되어야 한다. The following merely illustrates the principles of the invention. Therefore, those skilled in the art can implement the principles of the invention and invent various devices included in the concept and scope of the invention, although not explicitly described or illustrated herein. In addition, all conditional terms and embodiments listed herein are in principle clearly intended to be understood solely for the purpose of understanding the concept of the invention and are not to be limited to the specifically listed embodiments and states as such. .
상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. The above objects, features, and advantages will become more apparent from the following detailed description taken in conjunction with the accompanying drawings, and thus, it will be possible to easily implement the technical idea of self-invention having ordinary skill in the art. .
또한, 발명을 설명함에 있어서 발명과 관련된 공지 기술에 대한 구체적인 설명이 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하에는 첨부한 도면을 참조하여 본 발명의 바람직한 실시 예에 대해 상세하게 설명한다.In addition, in describing the invention, when it is determined that the detailed description of the known technology related to the invention may unnecessarily obscure the gist of the invention, the detailed description thereof will be omitted. Hereinafter, with reference to the accompanying drawings will be described in detail a preferred embodiment of the present invention.
도 1은 본 발명의 일 실시예에 따른 파일 전송 방법이 수행되는 시스템 환경을 예시하는 도이다.1 is a diagram illustrating a system environment in which a file transfer method according to an embodiment of the present invention is performed.
도 1을 참조하면, 본 실시예에 따른 파일 전송 시스템(100)은 전세계 각국에 존재하는 송신측(10)과 수신측(20) 사이에서 파일을 전송하며, 각국에 위치하는 데이터 센터, 허브 시스템 등과 함께 송신측(10)에서 전송한 파일을 수신측(20)으로 보다 빠르고 안전하게 전송해 준다.Referring to FIG. 1, the
본 실시예에 따른 파일 전송 시스템(100)은 각국에 위치하며, 기업 또는 단체의 목적에 따라 설립되어 빅데이터를 저장하고 유통하기 위한 데이터 센터와 보다 다양한 출처로 수집된 정보를 처리하는 데이터 허브를 하나의 데이터 물류 네트워크(30)로 구성하고 이를 각 지역에 따라 구분하여 송신측(10)과 수신측(20) 사이에서 파일을 전송한다. The
즉, 파일 전송 시스템(100)은 데이터 센터와 데이터 허브의 운영 주체를 구분 없이 하나의 물류 네트워크(30)로 구성하고, 송수신측(20)의 지역적 기준에 따라 전송 경로를 설정한다. That is, the
도 2를 참조하면, 데이터 물류 네트워크(30)는 도시를 기준으로 이종의 데이터 센터, 허브 시스템, 클라우드 서버를 하나의 데이터 스테이션으로 그룹화 하며 관리되며, 파일 전송 시스템(100)에서 데이터 스테이션 내 데이터 센터, 허브 시스템, 클라우드 서버 등을 선택하여 경로를 구성할 수 있다.Referring to FIG. 2, the
구체적으로 파일 전송 시스템(100)은 송신측(10)과 수신측(20)의 위치, 전송하고자 하는 파일의 크기 또는 종류, 암호화 필요 여부 등에 따라 경유 그룹 내의 데이터 센터(허브 시스템, 클라우드 서버 등)를 경유하기로 결정하고, 전송 방식에 따라 데이터를 직렬로 전송하거나, 복수의 데이터 센터를 통해 병렬로 전송할 수 있다. 또한, 데이터 센터의 경유 데이터 센터를 운영하는 주체가 다르더라도 동일한 경로 내에 포함될 수 있다. In more detail, the
예를 들어, 도 2는 데이터 물류 네트워크(30) 중 도시를 기준으로 결정된 데이터 스테이션을 예시한다.For example, FIG. 2 illustrates a data station determined based on a city of the
즉, 서울의 데이터 스테이션은 아마존 클라우드, MS(Microsoft) Azure, 구글 클라우드, 로컬 데이터 센터 A로 구성될 수 있다. That is, the data station in Seoul may be composed of Amazon Cloud, Microsoft Azure, Google Cloud, and Local Data Center A.
런던의 데이터 스테이션은 MS Azure, 구글 클라우드 로컬 데이터 센터 B, 허브 시스템 A로 구성될 수 있으며, 뉴욕의 데이터 스테이션은 아마존 클라우드, IBM 클라우드, 로컬 데이터 센터 D, 허브 시스템 B로 구성될 수 있다.London's data stations can consist of MS Azure, Google Cloud Local Data Center B, and Hub System A. New York's data stations can consist of Amazon Cloud, IBM Cloud, Local Data Center D, and Hub System B.
따라서, 파일 전송 시스템(100)은 서울에 위치하는 송신측(10)과 뉴욕에 위치하는 수신측(20) 간의 파일 전송을 위해 런던의 데이터 스테이션을 경유하는 경우, 최초 서울의 아마존 클라우드, 런던의 MS Azure, 뉴욕의 IBM 클라우드를 이용하여 송수신측(20) 간에 데이터를 전송하도록 경로를 구성할 수 있다. Therefore, when the
또한, 데이터 센터와 허브 시스템을 경로 내에 포함시키는 것도 가능하다.It is also possible to include data center and hub systems in the path.
예를 들어, 서울의 로컬 데이터 센터 A, 런던의 MS Azure, 뉴욕의 허브 시스템 B를 통해 경로를 구성하는 것도 가능하다. For example, a route could be configured through local data center A in Seoul, MS Azure in London, and hub system B in New York.
즉, 경로의 구성시에는 데이터 센터, 로컬 데이터 센터, 클라우드 서버, 및 허브 시스템을 구분 없이 선택할 수 있어 어느 하나로 한정될 수 없다. 다만, 이하에서는 설명의 편의를 위하여 데이터 전송 간에 경유하는 장치로 데이터 센터를 중심으로 예를 들어 설명한다. That is, the data center, the local data center, the cloud server, and the hub system can be selected without any distinction when configuring the path. However, hereinafter, for convenience of description, an example of a device that passes through data transmission will be described with reference to a data center.
이상 본 실시예에 따른 파일 전송 시스템(100)은 데이터 물류 네트워크(30)를 구성하는 각 데이터 센터 간의 장거리간 대용량 파일 전송 시 발생되는 대역폭 한계를 극복하기 위하여 한번의 전송에서 파일을 분할하여 여러 개의 조각으로 나누고, 조각들을 다수의 데이터 센터를 동시에 경유하여 전송할 수 있다.The
따라서, 사용자가 고가의 대역폭을 구매하지 않아도, 전송하는 시점에 전 세계 분산된 데이터 센터의 회선을 이용하여 대역폭을 일시적으로 대량 확장하여 사용하는 것이 특징이다.Therefore, even if the user does not need to purchase expensive bandwidth, at the time of transmission, the bandwidth is temporarily extended by using circuits of distributed data centers around the world.
이하, 도 3을 참조하여 보다 상세히 설명한다.Hereinafter, a detailed description will be given with reference to FIG. 3.
도 3은 서울에 위치하는 송신측(10)과 뉴욕에 위치하는 수신측(20) 간의 데이터를 전송하는 상황을 보다 상세히 나타낸다.3 illustrates in more detail a situation of transmitting data between a transmitting
도 3을 참조하면, 본 발명에 따른 파일 전송 시스템(100)은 파일을 전송함에 있어 파일을 복수의 조각으로 분할하여 병렬적으로 전송할 수 있다.Referring to FIG. 3, the
송신측(10)의 파일(500)은 4개의 조각으로 분할되어 각각의 경로에 따라 전송되며, 수신측(20)은 4개의 파일 조각을 조합하여 재구성한 다음 파일(500)을 메모리에 저장할 수 있다.The
4개의 조각 파일은 분산된 데이터선터 들을 경유하여 전송되며 이 때 조각 파일은 개별적으로 일부가 각 데이터 센터에 도착되는 즉시 다음 목적지로 전송되는 실시간 방식으로 수행될 수 있다. 따라서, 파일을 통 채로 보관하고 요청에 따라서 전송하는 기존의 그리드(Grid) 시스템, 콘텐츠 전송 네트워크(Contents Delivery Network)와 다르며, 파일이 중계 서버에 업로드 된 후 상대방이 전송 받는 이메일, 클라우드, 메신저 등의 전송 방식과 차이가 있다. The four fragment files are transmitted via distributed data centers, where the fragment files can be performed in real-time fashion, with each part individually sent to the next destination as soon as some arrive at each data center. Therefore, it is different from the existing grid system and contents delivery network that keeps files and transmits them on request.Email, cloud, messenger, etc. that are received by the other party after the file is uploaded to the relay server This is different from the transmission method of.
구체적으로, 서울에 위치하는 송신측(10)의 조각 A(500a)는 서울의 데이터 센터 A(32a)를 최초로 3개의 데이터 센터를 경유하여 뉴욕의 최종 데이터 센터 E(32e)로 송신될 수 있다. 조각 B(500b)는 서울의 데이터 센터 B(32b)를 최초로 2개의 데이터 센터를 경유하여 뉴욕의 데이터 센터 F(32f)로 송신될 수 있다. 조각 C(500c)는 데이터 센터 C(32c)를 최초로 한 개의 데이터 센터를 경유한 뒤 데이터 센터 G(32g)로 송신될 수 있다.Specifically, the
마지막으로 조각 D(500d)는 데이터 센터 D(32d)에서 2개의 데이터 센터를 경유한 뒤 데이터 센터 H(32h)에 도착될 수 있다. Finally,
이상의 파일 조각들이 수신측(20)의 데이터 센터에 도착하면 조합 및 재구성되어 수신측(20)의 메모리 장치에 저장될 수 있다.When the file fragments arrive at the data center of the
이때, 파일을 전송하는 파일 전송 시스템(100)은 송신측(10)의 출발지와 수신측(20)의 도착지 간의 지리적인 위치와 거리를 파악하고 스마트 경로 탐색 엔진을 이용하여 출발지와 도착지 근처에 있는 다수의 데이터 센터 또는 허브 시스템을 탐색한다. At this time, the
이하 스마트 경로 탐색 엔진의 경로 결정 방법에 대하여 보다 상세히 설명한다.Hereinafter, a path determination method of the smart path search engine will be described in more detail.
도 4는 도 3에 따른 데이터 센터 간의 경유 경로를 보다 상세히 나타내는 도이다.4 is a view showing in detail the route via the data center according to FIG.
도 4를 참조하면 파일 전송 시스템(100)은 스마트 경로 탐색 엔진을 이용하여 각 도시별로 데이터 센터의 상태 정보를 파악하며, 각 도시 별 센터들의 데이터 물류 네트워크(30) 내의 데이터 센터 간의 가용량, 보안성, 전송에 이용되는 프로토콜, 암호화 알고리즘 등의 다양한 속성 정보를 통해 실시간으로 데이터 전송 경로를 구성한다.Referring to FIG. 4, the
예를 들어, 서울의 데이터 센터 A는 뉴욕의 데이터 센터 E로 파일은 전송하기 위해 도쿄의 데이터 센터 1과 데이터 센터 2를 거쳐 LA의 데이터 센터 5를 경유하여 파일을 전송한다.For example, data center A in Seoul transfers files via
이때, 동일 지역 내의 도쿄의 데이터 센터 간의 경유가 포함될 수 있으며 송신측(10)의 요구사항에 따라 프로토콜의 변경, 암호화 알고리즘의 적용, 보안 등의 이유로 동일 데이터 센터를 경유하여 경로를 결정하는 것도 가능하다. In this case, it may include a route between data centers in Tokyo within the same region, and the route may be determined through the same data center due to a change of a protocol, application of an encryption algorithm, security, or the like according to the requirements of the
이외, 서울의 데이터 센터 C는 도쿄의 데이터 센터의 경유 없이 LA의 데이터 센터 7을 경유하여 뉴욕의 데이터 센터 G로 파일을 전송할 수 있다.In addition, Seoul's data center C can transfer files to data center G in New York via data center 7 in Los Angeles without passing through Tokyo's data center.
즉, 본 실시예에 따른 조각 파일 들은 각각 개별적으로 서로 다른 데이터 센터를 경유하여 전송될 수 있으며 따라서, 전체 파일이 탈취될 가능성이 없으며 파일 조각의 일부가 탈취되더라도 전체 파일의 조합이 불가능함에 따라 일부 정보가 유출될 가능성이 없어 전송 방식 자체만으로도 보안성을 높일 수 있다.In other words, the fragment files according to the present embodiment may be individually transmitted through different data centers, so that there is no possibility that the entire file may be stolen, and even if a portion of the file fragment is stolen, the combination of the whole files may not be possible. Since there is no possibility of information leakage, the transmission method itself can increase security.
또한, 각각의 데이터 센터는 서로 다른 경로로 전송되는 파일 조각들의 최종 데이터 센터의 도착 타이밍에 따라 결정될 수 있다. 예를 들어 조각 A의 도착 타이밍을 기준으로 다른 조각들의 경로상 경유 되는 데이터 센터가 결정될 수 있으며, 조각 A가 보안성에 따라 도쿄의 데이터 센터를 중복 경유하게 되어 일부 지연이 생기는 경우 이에 따라 조각 C는 보다 낮은 수준의 전송 속도를 갖는 데이터 센터를 경유하도록 할 수 있다. 또한 조각 D는 조각 C보다 1회의 경유 데이터 센터를 더 포함하므로, 데이터 센터 7 보다는 전송속도가 높은 데이터 센터 4와 데이터 센터 6을 선택할 수 있다. In addition, each data center may be determined according to the arrival timing of the final data center of the file fragments transmitted on different paths. For example, based on the arrival timing of fragment A, a data center that can be routed along the path of other fragments can be determined, and if fragment A has some delay due to overlapping data centers in Tokyo due to security, fragment C will be It can be routed through a data center with a lower transfer rate. Fragment D also includes one more pass-through data center than fragment C, so you can choose
또한, 탐색된 다수의 데이터 센터와 허브 시스템을 이용하였을 때 경로 별 파일 전송 예상 시간을 측정하고 이를 사용자에게 제공하는 것을 통해 사용자가 직접 원하는 경로를 선택할 수 있도록 한다. 또한 미리 결정된 경로 별 과금 방식에 따른 코스트를 사용자에게 함께 제공해 주는 것도 가능하다. In addition, by using the searched data center and hub systems, the estimated time of file transfer for each path is measured and provided to the user so that the user can directly select a desired path. In addition, it is possible to provide a user with a cost according to a predetermined path charging method.
예를 들어, 출발, 도착지 사이에 1개 이상의 데이터 센터 또는 허브시스템을 이용하여 1) 병렬로 연결하여 분산 고속 전송했을 때, 2) 직렬로 연결하여 고속 전송했을 때, 3) 출발, 도착지간 1:1 연결하여 고속 전송을 했을 때, 또는 4) 추가적으로 FTP(File Transfer Protocol), 클라우드, 이메일 등을 이용하여 표준 속도로 전송했을 때를 케이스로 나누어 판단하고 이에 대한 결과를 사용자 인터페이스를 통해 제공하는 것도 가능하다.For example, using one or more data center or hub systems between departure and destination 1) when distributed high speed transmission in parallel, 2) when high speed transmission in series, 3) between departure and destination 1 : 1 When connecting at high speed, or 4) In addition, when using standard transfer using FTP (File Transfer Protocol), cloud, email, etc., it is divided into cases and the result is provided through the user interface. It is also possible.
구체적으로 도 5를 참조하면, 서울에 위치하는 사용자가 모스크바로 10GB 이하의 단일 파일을 전송하려는 경우 본 실시예에 따른 파일 전송 시스템(100)을 이용한 전송 경로(52, 53), 이메일 또는 메신저를 이용하여 전송하는 경우(54) 및 클라우드를 이용하여 파일을 전송하는 경우(56)를 구분하여 메뉴를 생성하여 사용자에게 제공하고, 사용자는 제공된 메뉴 중 적합한 전송 방법을 선택하는 것을 통해 모스크바까지의 파일 전송 방법을 결정할 수 있다.In detail, referring to FIG. 5, when a user located in Seoul attempts to transmit a single file of 10 GB or less to Moscow, the user may transfer the
또한, 가장 빠른 전송 방법에 대해서는 메뉴(52) 상에 'The fastest”라는 라벨을 함께 표시해 줄 수 있으며, 전송 불가능한 방법의 경우 메뉴(54) 상에 “Cannot transfer”라는 라벨을 함께 표시하여 사용자가 쉽게 인식할 수 있도록 할 수 있다. 전송은 가능하나 불안정한 방법에 대해서는 메뉴(56) 상에 “Unstable”라는 라벨을 표시해 줄 수 있다.In addition, for the fastest transfer method, the label 'The fastest' may be displayed together on the
또한, 도 5를 참조하면 사용자 인터페이스는 전송하고자 하는 파일의 특징으로 파일이 단일 파일인지 또는 복수의 파일인지를 선택할 수 있는 메뉴(58)와 전송 비용을 산정하는 통화 단위를 제공해 줄 수 있다.In addition, referring to FIG. 5, the user interface may provide a
경로를 선택하는 메뉴에는 전송 시간과, 전송 속도, 전송 비용(할인) 정보를 함께 제공해 주어 사용자가 보다 쉽게 전송 방법을 결정할 수 있도록 한다.The path selection menu provides the transmission time, transmission speed, and transmission cost (discount) with information so that the user can more easily determine the transmission method.
본 실시예에 따른 파일 전송 시스템(100)은 전송 방법의 선택에 따라 전송 경로가 결정되면 상기 전송 경로 별로 상기 파일을 복수의 조각으로 분할하는 기준을 결정할 수 있다.When the transmission path is determined according to the selection of the transmission method, the
특정 전송 방법이 선택된 경우 전송 경로 내 전송 구간별로 병렬 전송 세션 개수, 파일의 분할 조각 크기를 결정하여 구간별 대역폭을 최대한 사용하여 파일을 고속 전송하고, 도착지에서 분할된 조각들을 원본 파일로 변환한다.When a specific transmission method is selected, the number of parallel transmission sessions and the fragment size of the file is determined for each transmission section in the transmission path, and the file is rapidly transmitted using the bandwidth of each section, and the fragments divided at the destination are converted into the original file.
이때 세션의 개수 또는 파일의 분할 조각의 크기는 아래와 같은 환경 변수들을 고려하여 결정될 수 있다.At this time, the number of sessions or the size of the split fragment of the file may be determined in consideration of the following environment variables.
1) 장거리, 단거리 등 전송 구간의 지리적인 특성1) Geographical characteristics of the transmission section such as long distance and short distance
2) 대역폭, 지연시간, 손실률 등 네트워크 특성2) Network characteristics such as bandwidth, latency and loss rate
3) 파일 개수, 용량, 파일 포맷 등 전송 대상 파일의 특성3) Characteristics of the file to be transferred such as the number of files, capacity and file format
4) 파일 전송 구간 특성4) File Transfer Section Characteristics
즉, 본 실시예에 따른 파일 전송 시스템(100)이 하나의 단일 경로를 통해 직렬로 파일을 전송하는 경우에는 단일 경로의 환경 변수를 고려하여 복수의 조각으로 분할하여 전송할 수 있으며, 도 3과 같이 파일을 병렬 전송하기 위하여 복수의 파일 조각으로 송신측(10)의 로컬 시스템에서 분할한 경우, 파일 조각에 대한 전송 구간 별 분할 기준을 결정할 수 있다.That is, when the
또한, 분할된 조각을 전송하는 각 데이터 센터의 경우 요구하는 정책이 상이할 수 있으므로, 전송 시 다양한 네트워크와의 호환성을 고려할 수 있다. 따라서 서로 다른 보안 정책의 조직과 별도의 네트워크이나 보안 정책 변경 없이 파일을 전송하기 위하여 HTTP 프로토콜을 기본 전송 프로토콜로 FTP, UDP, HTTPS 등으로 설정하여 전송하는 것도 가능하다.In addition, since the required policies may be different for each data center that transmits the divided pieces, compatibility with various networks may be considered in the transmission. Therefore, it is possible to set the HTTP protocol as FTP, UDP, HTTPS, etc. as the default transfer protocol in order to transfer files without changing the security policy and the organization of different security policies.
구체적으로 도 6을 참조하면, 병렬 전송되는 경우 각각의 파일 조각에 대하여 전송 구간 별로 세션의 개수와 분할 조각의 크기를 결정하여 수신측(20)으로 전송될 수 있도록 한다. 예를 들어 파일 조각 A(500a)의 경우 전송 구간의 특징에 따라 조각 B(500b)에 비해 보다 작은 크기로 많은 세션을 통해 전송될 수 있으며, 파일 조각 C(500c)와 파일 조각 D(500d)는 파일 조각의 크기의 차이에 따라 세션의 개수만을 달리하여 유사한 파일 크기로 분할되어 전송될 수 있다. 또한, 세션의 개수와 조각은 환경 변수를 고려하여 결정되되, 파일의 수신측(20) 도착 타이밍을 맞추기 위해 경유 센터 별로 실시간으로 변경될 수도 있다.In detail, referring to FIG. 6, in case of parallel transmission, the number of sessions and the size of fragments are determined for each file segment and transmitted to the receiving
이하, 데이터 센터 간의 전송 외 전송 경로 상 최초의 데이터 센터로 전송 시 또는 최후의 데이터 센터에서 수신측(20)으로 전송하는 경우 네트워크 대역폭을 확장하기 위한 방법에 대하여 설명한다.Hereinafter, a method for extending the network bandwidth when transmitting to the first data center on the non-transmission path between data centers or when transmitting from the last data center to the receiving
본 실시예에 따른 파일 전송시스템은 송신측(10) 및 상기 전송 경로 상 최초의 데이터 센터 간의 전송 시 상기 조각 파일을 복수의 통신 회선으로 구분하여 전송할 수 있다.The file transfer system according to the present exemplary embodiment may divide and transmit the fragment file into a plurality of communication lines during transmission between the transmitting
구체적으로 인터넷 연결 대역폭 확장을 위하여 서로 다른 통신회사의 인터넷 회선을 장비에 병렬 연결하거나 이러한 회선의 병렬 연결을 지원하는 별도의 장치를 통하여 전송할 수 있다.Specifically, in order to expand the bandwidth of the Internet connection, Internet lines of different communication companies may be connected in parallel to the equipment or transmitted through a separate device supporting the parallel connection of these lines.
예를 들어 도 7을 참조하면, 도 3에서 파일(500)이 4개의 전송 경로로 전송되기 위하여 분할된 각 파일 조각을 서로 다른 통신 회선(72)을 통해 최초의 데이터 센터(31)로 전송할 수 있다. For example, referring to FIG. 7, in FIG. 3, each file fragment divided so that the
파일 조각 A(500a)의 경우는 경로 상 최초의 데이터 센터 A와 통신회선 A로 연결되며, 파일 조각 B(500b)의 경우는 최초의 데이터 센터 B와 통신회선 B로 연결될 수 있다.The
일반적으로 송신자 측의 로컬 컴퓨터나 서버의 경우 보안과 편의를 위해 하나의 통신사의 네트워크를 통해 시스템을 구축하고 이를 사내 망으로 구성하고 있으므로, 다양한 데이터 센터를 통해 파일 조각을 전송하기 위해서는 통신 회선의 대역폭에 제한을 받는 문제가 생길 수 있다.In general, the local computer or server on the sender's side establishes a system through a network of one carrier for security and convenience, and configures it as an internal network. Therefore, the bandwidth of a communication line is required to transmit file fragments through various data centers. The problem may be limited.
따라서, 본 실시예에 따른 파일 전송 시스템(100)은 대용량 파일의 장거리 전송시에는 사내 망을 제공하는 통신사의 통신 회선 외에도 별도의 통신 회선을 이용할 수 있는 별도의 장치를 구성하여 파일 조각들을 병렬로 데이터 센터로 전송할 수 있도록 구성할 수 있다.Therefore, the
예를 들어 도 8과 같이 송신측(10)의 파일을 저장하는 메모리(12)와 직접 연결되며 각각의 통신회선으로 접속 가능한 데이터링크 장치(14)를 구성하여 병렬 전송을 위해 분할된 파일 조각들은 랜덤 하게, 분산된 인터넷 통신 회선(72)을 통하여 송신측(10)에서 최초의 데이터 센터로 전송할 수 있도록 할 수 있다.For example, as shown in FIG. 8, the file fragments divided for parallel transmission by configuring a
본 실시예에서 데이터링크 장치(14)는 별도의 하드웨어 장치로써 어떠한 스토리지나 클라우드 든 연결만 하면 다수의 인터넷 회선을 이용하여 대용량 파일을 고속으로 전송할 수 있도록 한다. 예를 들어, 송신측(10)의 대용량 스토리지(12)는 데이터링크 장치(14)를 통해 광 또는 다수의 케이블, 다수의 USB 포트, 인터넷 망으로 연결되고, 스토리지(12)의 모든 파일을 머징, 조각 내어 여러 회선을 통하여 전송할 수 있다. In the present embodiment, the
또한 수신측(20) 역시 송신측(10)과 대응되도록 복수의 통신회선으로 경로상 최후의 데이터 센터와 수신측(20)의 메모리 사이에 데이터링크 장치를 구성할 수 있으며, 수신측(20)에서도 데이터링크 장치를 통하여 복수의 통신회선으로 수신된 원본 파일을 재조합 할 수 있다.In addition, the receiving
즉, 본 실시예에서 파일 전송 시스템(100)은 이종의 데이터 센터, 허브 시스템, 클라우드 등을 조합하여 경로를 결정하되, 결정된 경로에 최초 진입하기 위한 로컬 기반의 통신 역시 사내 망과는 독립적으로 복수의 통신 회선을 통해 접속할 수 있도록 시스템을 구성하여 보다 빠른 파일 전송 방법을 제공해 준다. That is, in the present embodiment, the
나아가, 수신측(20) 역시 송신측(10)과 대응되도록 복수의 통신회선으로 경로상 최후의 데이터 센터와 수신측(20)의 메모리 사이에 데이터링크 장치를 구성할 수 있다.Furthermore, the receiving
이상의 과정을 통해 본 실시예에 따른 파일 전송 시스템(100)은 전송 경로가 결정되면, 각각의 데이터 센터의 전송 속도를 고려하여 조각 파일들을 송신할 수 있다. Through the above process, when the transmission path is determined, the
도 9를 참조하면, 예를 들어 분산된 데이터 센터와 허브시스템을 이용하여 파일이 전송될 때 송신측(10)과 수신측(20)간 파일 전송 속도에 따라 송신되는 파일의 전송 속도를 결정할 수 있다. 이때 결정되는 파일 전송 속도를 이용하여 상술한 도 5와 같은 메뉴를 통해 제공되는 전송 비용, 전송 시간을 결정할 수 있으며, 도 4와 같이 스마트 경로 탐색 엔진은 전송 경로를 설정할 수 있다.Referring to FIG. 9, for example, when a file is transmitted using a distributed data center and a hub system, a transmission speed of a file to be transmitted may be determined according to a file transfer rate between the transmitting
예를 들어, 송신측(10) 데이터 센터(33a)와 수신측(20) 데이터 센터-3(33b)의 파일 전송 속도가 같은 경우는 동일한 속도로 실시간 전송할 수 있다. 또는 송신측(10) 데이터 센터-1(33c)과 수신측(20) 데이터 센터-4(33f)의 전송 속도를 비교하여 수신측(20) 데이터 센터-4(33f)의 전송 속도가 빠른 경우, 데이터 센터-1(33c)의 전송 속도에 맞춰 실시간 전송하도록 할 수 있다.For example, when the file transfer rates of the transmitting
반대로, 송신측(10) 데이터 센터-2(33g)의 전송 속도가 데이터 센터-5(33i)의 전송 속도보다 빠른 경우, 송신측(10)에서는 전송을 우선 종료하고 수신측(20) 데이터 센터의 전송 속도에 맞추어 각 시스템들이 캐시하고 있던 조각들을 도착지로 전송하여 전송을 완료하도록 할 수 있다.Conversely, if the transmission rate of the transmitting
이때의 전송 속도는 송수신측의 데이터 센터 외에 경로 중간에 위치하는 데이터 센터(33d, 33e, 33h) 들의 전송 속도를 더욱 고려하여 결정될 수 있으며, 이를 통해 더욱 정확히 산출된 전송 속도와 예상 시간은 도 5의 메뉴를 통해 제공될 수 있다.In this case, the transmission speed may be determined in consideration of the transmission speeds of the
이상의 방법에 따라 결정된 전송 경로와 데이터 센터의 파일 전송 속도를 고려하여 파일 전송 시스템(100)은 전송 속도를 결정하고 각 파일 조각의 실시간 전송이 가능하도록 하며 도착 타이밍을 조절하여 파일 재조합의 시간 지연을 최소화 하는 것도 가능하다. In consideration of the transmission path determined according to the above method and the file transfer speed of the data center, the
또한, 본 실시예에서 파일 전송 시스템(100)은 기준 이상의 다수 파일을 전송하기 위한 요청을 수신한 경우 다수 파일을 단일 파일로 병합하고, 병합된 파일을 통해 결정된 전송 경로로 재분할하여 전송하는 것도 가능하다.In addition, in the present exemplary embodiment, the
예를 들어, 문서 파일의 경우 각각의 파일 크기는 작으나 개수가 기준 이상으로 많을 수 있는데, 이때 문서 파일의 전송을 위해 각 파일을 조각으로 분할하는 거나, 각 파일을 그대로 병렬로 전송하기 위해서 모든 파일에 대하여 읽고 쓰기 작업을 수행하는 것은 네트워크 자원의 낭비와 전송 지연의 원인이 될 수 있다. For example, in the case of document files, the size of each file is small, but the number may be larger than the standard. In this case, each file is divided into pieces for transmission of the document file, or all files are transferred in parallel as they are. Performing read and write operations on the network may waste network resources and cause transmission delays.
이에 따라, 본 실시예에서 파일 전송 시스템(100)은 로컬 차원에서 복수의 파일이 복수의 스토리지에 분산되어 저장된 경우 이를 하나의 단일 파일로 병합하고 이를 다시 파일 조각으로 분할하거나, 경로에 따라 분할 기준을 결정하는 것이 더욱 효율적일 수 있다.Accordingly, in the present exemplary embodiment, the
도 10을 참조하면, 이를 위하여 본 실시예에 따른 파일 전송 시스템(100)은 로컬 측면에서 파일 병합 장치(16)를 더욱 구성하여 송신 과정에서 파일을 전송 경로에 따라 분할하기 에 앞서 저용량의 대량 파일인 경우 파일들을 병합할 수 있다.Referring to FIG. 10, for this purpose, the
하나의 단일 파일로 복수의 스토리지(12a, 12b)에 분산된 파일들이 병합되면, 단일 파일(510)을 기준으로 결정된 전송 경로에 따라 병렬 전송인 경우 파일들을 파일 조각(500a, 500b, 500c, 500d)으로 분할할 수 있다. 나아가, 앞서 말한 바와 같이 파일 조각들은 최초의 데이터 센터로 전송하기 위해 데이터링크 장치(14)는 이종의 통신회선(72)들을 이용할 수 있다. 이를 통해 대량의 저용량 파일 전송 시 I/O와 Network의 비효율적 사용으로 인한 속도 저하를 개선하여 장비의 한계 속도까지 파일 전송을 최적화 할 수 있다.When files distributed in a plurality of
또한, 도 11을 참조하면 수신측(20) 역시 복수의 통신 회선(74)으로 수신된 파일 조각을 데이터링크 장치(24)를 통해 수신하고, 파일 병합 장치(26)는 송신측(10)의 병합 규칙을 통해 파일 조각(500a, 500b, 500c, 500d)을 다시 하나의 단일 파일(510)로 병합한 뒤 재구성하여 복수의 저용량 파일로 스토리지(22)에 저장할 수 있다.In addition, referring to FIG. 11, the receiving
이때, 피일의 병합과, 전송 경로에 따른 분할은 경로별로 전송이 필요한 부분만큼만 메모리에 읽어 수행될 수 있으므로 저장 장치의 일부만을 이용하고 전체 장비의 이용 효율을 높일 수 있다.In this case, the merging of the files and the division according to the transmission paths can be performed by reading only the portions necessary for transmission for each path into the memory so that only a part of the storage device can be used and the utilization efficiency of the entire equipment can be improved.
이상의 본 실시예에 따른 파일 전송 시스템(100)은 파일을 병렬로 전송하기 위한 파일 조각으로의 제1 분할한다는 점, 전송 경로가 결정되면 전송 구간에 따른 파일의 세션으로 제2 분할한다는 점 및 전송 구간은 이종의 데이터 센터로 구성된다는 점을 통해 파일 전송의 보안성을 더욱 높일 수 있다.The
도 12를 참조하면 도 3에 따른 파일 전송 과정에서 기본적으로 1개 파일이 다수의 조각으로 분할되어 다수의 회선으로 랜덤하게 분산되어 전송되므로 1개의 회선이 탈취 되더라도 파일의 완전한 정보는 보호할 수 있는 보안성이 보장될 수 있다. Referring to FIG. 12, in the file transfer process according to FIG. 3, basically, one file is divided into a plurality of pieces and randomly distributed to a plurality of lines, so that complete information of the file can be protected even if one line is seized. Security can be guaranteed.
나아가 복수의 파일 조각을 분할할 때 추가적으로 파일의 조합 규칙을 별도의 암호화된 파일로 생성하고 이를 임의의 파일 조각에 포함시켜 송신하게 되면 특정 전송 경로 중 일부에서 전송되는 파일이 복수로 탈취되더라도, 조합 규칙을 탈취하지 않는 이상 파일을 조합할 수 없게 되어 전송되는 파일의 보안성을 더욱 높일 수 있다.Furthermore, when dividing a plurality of file fragments, additionally, if a file combining rule is generated as a separate encrypted file, and the file is included in an arbitrary file fragment and transmitted, even if a plurality of files transmitted from a part of a specific transmission path are taken over, You can't combine files unless you steal the rules, increasing the security of the files you send.
또한, 추가적으로 파일을 데이터 센터를 통한 전송전에 암호화하는 것도 가능하다. In addition, it is also possible to encrypt the file before transmission through the data center.
도 13을 참조하면, 본 실시예에 따른 파일 전송 시스템(100)은 로컬 측면에서 파일의 송신측(10) 및 수신측(20)에 각각 파일 암호화 모듈(18)과 복호화 모듈(28)을 포함하는 암복호화 장치를 구성하여 파일의 보안성을 더욱 높일 수 있다.Referring to FIG. 13, the
즉, 모든 조각들은 전송 전에 출발지에서 별도의 암호화 알고리즘으로 암호화되고 도착지에서 복호화될 수 있다. 이 때 파일의 암/복호화 시간을 단축하기 위하여 출발지에서는 분할된 파일 조각 별로 암호화하여 전송하고, 전송 경로 상 도 12와 같이 특정 회선의 데이터를 탈취 하더라도 암호화된 조각만 취득하므로 복호화가 불가능하도록 할 수 있다. That is, all fragments can be encrypted with a separate encryption algorithm at the source and decrypted at the destination before transmission. At this time, in order to reduce the encryption / decryption time of the file, the source is encrypted and transmitted for each divided file fragment, and even if the data on a specific line is taken as shown in FIG. have.
다음, 도착지에서는 조각 별로 복호화 하여 조각들을 원본 파일로 재구성함으로써 암/복호화에 소요되는 별도의 대기 시간을 줄이도록 할 수 있다.Next, the destination can be decoded by pieces to reconstruct the pieces into the original file to reduce the separate waiting time for encryption / decryption.
또한, 도 14를 참조하면, 본 실시예에 따른 파일 전송 시스템(100)은 파일 전송을 모니터링 하는 별도의 장치(140)를 구성하여 사용자에게 파일의 전송 상태 정보를 제공해 주는 것도 가능하다. 이때, 기존의 송신측(10) 또는 수신측(20) 중 어느 일측의 파일 처리 정보를 통해 전송 상태를 모니터링 하는 것에서 벗어나 양측의 전송 상태를 비교하여 실제 전송 상태를 검증하는 것도 가능하다. In addition, referring to FIG. 14, the
나아가, 양측 뿐만 아니라, 파일의 전송 상태를 본 실시예에 따른 파일 전송 시스템(100) 내의 모든 제3 사용자들 간에 데이터 센터의 이용 상태 정보와 함께 공유하도록 하여 파일 전송 상태에 대한 신뢰성을 담보하는 것도 가능하다. 즉, 사용자는 전송 장비가 아닌 별도 장비에서도 전송 상태 정보를 실시간 모니터링 할 수 있으며 전송이 완료되면 출발지와 도착지 장비와 사용자 모두에게 전송 완료를 알림으로써 수신자의 전송 부인을 방지하고, 전송이 완료된 후에도 기록된 전송을 검색할 수 있도록 한다.Furthermore, not only the two sides but also the sharing state of the file can be shared with the utilization state information of the data center among all third users in the
이하 도 15 내지 도 21을 참조하여, 본 실시예에 따른 파일 전송 시스템(100)의 구체적인 구성과 이를 통한 파일 전송 방법을 흐름도를 통해 설명한다.Hereinafter, a detailed configuration of the
도 15를 참조하면, 본 실시예에 따른 파일 전송 시스템(100)은 데이터 센터를 관리하는 스마트 경로 탐색 엔진을 포함하여 각 데이터 센터를 관리하는 데이터 센터 관리부(170)와 로컬 측면에서 파일을 관리하는 로컬 전송 관리부(160) 및 파일을 전송하기 위한 사용자의 명령을 입력 받고 전송을 수행하는 모듈(110, 120, 130, 140, 150)들로 구성될 수 있다.Referring to FIG. 15, the
도 16을 참조하면 전송 요청 수신부(110)는 송신측(10)으로부터 파일을 수신측(20)으로 전송하기 위한 요청을 수신한다(S10).Referring to FIG. 16, the transmission
다음, 전송 경로 설정부(130)는 송신측(10) 및 상기 수신측(20) 사이에 존재하는 데이터 센터를 경유하여 상기 파일을 전송하기 위한 전송 경로를 설정한다(S20).Next, the transmission
전송 경로가 설정되면, 파일 분할 기준 결정부(120)는 상기 전송 경로 별로 상기 파일을 복수의 조각으로 분할하는 분할 기준을 결정한다(S30).When the transmission path is set, the file division
파일 전송부(140)는 분할 기준에 따라 분할된 조각 파일을 상기 전송 경로에 따라 개별적으로 전송한다(S40). The
이때, 전송 경로는 복수의, 이종의 데이터 센터, 허브 시스템, 클라우드 서버 등을 경유지로 포함하여 결정될 수 있으며, 상기 데이터 센터는 위치하는 지역을 기준으로 구분될 수 있다.In this case, the transmission path may be determined by including a plurality of heterogeneous data centers, hub systems, cloud servers, and the like, and the data centers may be divided based on the region where the data center is located.
따라서, 전송 경로 설정부(130)는 파일을 전송하기 위해 경유하는 지역의 데이터 센터를 결정한다. 또한, 전송 경로 설정부(130)는 상기 송신측(10) 및 상기 수신측(20)이 위치하는 지역 간의 지리적 위치 및 거리에 따라 상기 경유하는 지역의 데이터 센터를 결정할 수 있다.Therefore, the transmission
또한, 본 실시예에서 전송 경로 설정부(130)는 상기 경유하는 지역 별 복수의 전송 경로를 설정하고, 상기 파일 전송 시스템(100)은 상기 결정된 복수의 경로를 전송 시간 및 전송 비용에 따라 리스트로 제공하는 리스트 제공부(미도시)를 더 포함할 수 있다.In addition, in the present embodiment, the transmission
즉, 리스트 제공부는 도 5와 같이 결정된 경로들을 전송 비용, 전송 시간 등에 따라 전송 경로 리스트로 제공할 수 있으며 이를 통해 사용자로부터 전송 방법을 입력 받을 수 있다. That is, the list provider may provide the paths determined as shown in FIG. 5 as a transmission path list according to a transmission cost, a transmission time, and the like, and receive a transmission method from the user.
본 실시예에서 파일 전송부(140)는 HTTP(Hyper Text Transfer Protocol)을 이용하여 상기 조각 파일을 전송할 수 있다. 각 데이터 센터의 경우 요구하는 정책이 상이할 수 있으므로, 전송 시 다양한 네트워크와의 호환성, 서로 다른 보안 정책의 조직과 별도의 네트워크이나 보안 정책 변경 없이 파일을 전송하기 위하여 기본적으로 HTTP 프로토콜을 사용하여 데이터 센터 간의 호환성을 높일 수 있다.In the present embodiment, the
추가적으로 이상의 전송 과정에서 전송 모니터링부(150)는 상기 조각 파일의 송신측(10) 전송 상태와 수신측(20) 수신 상태를 상호 비교하고, 상기 비교 결과에 따른 상기 파일의 전송 상태 정보를 제공할 수 있다.In addition, in the above transmission process, the
또한, 데이터 센터 관리부(170)는 현재 데이터 센터 들의 전송 상태, 요구하는 프로토콜, 보안정도 등의 정보를 제공하며 이를 통해 전송 경로 설정부가 경로를 설정할 수 있도록 한다. In addition, the
나아가, 파일 전송부(140)는 로컬 측면의 장치들과 연동하여 보다 효율적인 전송을 수행할 수 있다.In addition, the
이하 로컬 전송 관리부(160)에 대하여 설명한다.Hereinafter, the
로컬 전송 관리부(160)는 암호화부(162), 복호화부(164), 통신 회선 관리부(166)를 포함할 수 있다.The
도 17 및 도 18을 참조하면 통신 회선 관리부(166)는 상술한 데이터링크 장치를 통해 송신측(10) 및 전송 경로 상 최초의 데이터 센터 간 복수의 통신 회선으로 전송할 수 있도록 한다(S42).Referring to FIGS. 17 and 18, the
또한 통신 회선 관리부(166)는 상기 전송 경로 상 최후의 데이터 센터 및 상기 수신측(20) 간의 전송 시 상기 조각 파일을 복수의 통신 회선으로 구분하여 전송할 수 있도록 한다(S48). In addition, the
이때, 최초의 데이터 센터는 상술한 바와 같이 상기 송신측(10)이 위치하는 지역의 데이터 센터일 수 있으며, 최후의 데이터 센터는 상기 수신측(20)이 위치하는 지역의 데이터 센터일 수 있다.In this case, as described above, the first data center may be a data center of the region where the transmitting
즉, 로컬 전송 관리부(160)는 최초 및 최후의 데이터 센터와 로컬 스토리지 간의 파일 송수신을 관리할 수 있다. That is, the
또한, 도 19를 참조하면 본 실시예에서 전송 요청 수신부(110)는 기준 이상의 다수 파일을 전송하기 위한 요청을 수신한 경우(S12) 파일 병합부(미도시)를 통해 다수 파일을 단일 파일로 병합할 수 있다(S14).In addition, referring to FIG. 19, in the present embodiment, when the transmission
또한, 도 20을 참조하면 전송전에 암호화부(162)는 분할된 조각 파일을 암호화할 수 있으며(S41a), 파일 전송부(140)는 상기 암호화된 조각 파일을 상기 최초의 데이터 센터로 전송하도록 한다. 이때, 암호화된 조각 파일을 암호화 순으로 실시간으로 전송하여 지연 없는 파일 전송을 수행할 수 있다. In addition, referring to FIG. 20, the
이와 반대로 도 21을 참조하면 복호화부(164)는 분할된 조각 파일을 복호화하고(S49a), 파일 전송부(140)는 상기 전송 경로 상 최후의 데이터 센터에서 수신된 상기 암호화된 조각 파일을 복호화하여 수신측(20)에 전송하도록 한다(S49b). On the contrary, referring to FIG. 21, the
수신측(20)으로의 전송 역시 실시간으로 복호화 순으로 전송하여 복호화에 따른 전송 지연을 방지할 수 있다. Transmission to the receiving
이상의 본 발명의 구성에 따르면, 파일들은 여러 개의 조각으로 분산되고 동시에 조각들은 여러 개여 네트워크에 분산 전송 됨으로써 보안성을 강화함과 동시에 대역폭을 일시적으로 확장 시켜 전송 속도를 향상 시킬 수 있다.According to the configuration of the present invention, the files are distributed into several pieces and at the same time, the pieces are distributed to several networks at the same time to enhance the security and to temporarily increase the bandwidth to improve the transmission speed.
또한, 사용자는 고가의 대역폭을 구매할 필요 없이 전송되는 시점에서 근거리에 다수의 회선 사업자와 전 세계에 분산되어 있는 데이터 센터를 활용함으로써 저렴한 비용으로, 안전하고, 완벽하게, 대용량 파일을 전송할 수 있다.In addition, users can transfer large files at low cost, securely, and seamlessly by utilizing multiple line operators and globally distributed data centers at close range at the point of transmission without having to purchase expensive bandwidth.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위 내에서 다양한 수정, 변경 및 치환이 가능할 것이다. The above description is merely illustrative of the technical idea of the present invention, and various modifications, changes, and substitutions may be made by those skilled in the art without departing from the essential characteristics of the present invention. will be.
따라서, 본 발명에 개시된 실시 예 및 첨부된 도면들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시 예 및 첨부된 도면에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구 범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리 범위에 포함되는 것으로 해석되어야 할 것이다.Accordingly, the embodiments disclosed in the present invention and the accompanying drawings are not intended to limit the technical spirit of the present invention but to describe the present invention, and the scope of the technical idea of the present invention is not limited by the embodiments and the accompanying drawings. . The scope of protection of the present invention should be interpreted by the following claims, and all technical ideas within the scope equivalent thereto should be construed as being included in the scope of the present invention.
Claims (1)
파일 전송 시스템이,
송신측으로부터 복수의 파일을 수신측으로 전송하기 위한 요청을 수신하는 단계;
상기 송신측 및 상기 수신측 사이에 존재하는 데이터 센터를 경유하여 상기 파일을 전송하기 위한 전송 경로를 설정하는 단계;
상기 전송 경로 별로 상기 복수의 파일을 병합하고, 병합된 파일을 복수의 조각 파일으로 재분할하는 분할 기준을 결정하는 단계; 및
상기 분할 기준에 따라 분할된 조각 파일을 상기 전송 경로에 따라 개별적으로 전송하는 단계를 포함하고,
상기 전송 경로는 복수의 데이터 센터를 경유하되, 최초 경유 데이터 센터에 상기 재분할된 조각 파일을 이종의 통신회선을 이용하여 송신하도록 결정되고,
상기 경유 데이터 센터는 상기 조각 파일들의 최종 경유 데이터 센터의 도착 타이밍에 따라 결정되는 것을 특징으로 하는 파일 전송 방법.In the file transfer method,
File transfer system,
Receiving a request for transmitting a plurality of files from a transmitting side to a receiving side;
Establishing a transmission path for transmitting the file via a data center existing between the transmitting side and the receiving side;
Determining a splitting criterion for merging the plurality of files for each transmission path, and repartitioning the merged file into a plurality of fragment files; And
Separately transmitting fragment files divided according to the division criteria according to the transmission path,
The transmission path is determined via a plurality of data centers, wherein the redistributed fragment file is transmitted to a first via data center using heterogeneous communication lines,
And the transit data center is determined according to the arrival timing of the final via data center of the fragment files.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200000324A KR102218812B1 (en) | 2020-01-02 | 2020-01-02 | Method and system for monitoring data transfer state based on file transfer rate |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200000324A KR102218812B1 (en) | 2020-01-02 | 2020-01-02 | Method and system for monitoring data transfer state based on file transfer rate |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020170150525A Division KR102065958B1 (en) | 2017-11-13 | 2017-11-13 | Method and system for managing data transfer |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20200004453A true KR20200004453A (en) | 2020-01-13 |
KR102218812B1 KR102218812B1 (en) | 2021-02-23 |
Family
ID=69153501
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020200000324A KR102218812B1 (en) | 2020-01-02 | 2020-01-02 | Method and system for monitoring data transfer state based on file transfer rate |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102218812B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN118573673A (en) * | 2024-07-31 | 2024-08-30 | 北京科杰科技有限公司 | Flink technology-based api synchronous acceleration method |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20040001007A (en) * | 2002-06-26 | 2004-01-07 | 한국전자통신연구원 | Inverse multiplexing apparatus for switching system with QoS and CoS |
-
2020
- 2020-01-02 KR KR1020200000324A patent/KR102218812B1/en active IP Right Grant
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20040001007A (en) * | 2002-06-26 | 2004-01-07 | 한국전자통신연구원 | Inverse multiplexing apparatus for switching system with QoS and CoS |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN118573673A (en) * | 2024-07-31 | 2024-08-30 | 北京科杰科技有限公司 | Flink technology-based api synchronous acceleration method |
Also Published As
Publication number | Publication date |
---|---|
KR102218812B1 (en) | 2021-02-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102065958B1 (en) | Method and system for managing data transfer | |
CN113364735B (en) | Data cross-link access control method, system, equipment and terminal under multi-link scene | |
AU2009296744B2 (en) | Selective data forwarding storage | |
EP2300931B1 (en) | Media delivery in data forwarding storage network | |
US8909738B2 (en) | Redundant data forwarding storage | |
US7844695B2 (en) | Data forwarding storage | |
US8599678B2 (en) | Media delivery in data forwarding storage network | |
Yoo | The dynamic Internet: How technology, users, and businesses are transforming the network | |
US20180309738A1 (en) | Data access levels | |
US20180196948A1 (en) | Distributed and decentralized clound storage system and method thereof | |
US11658822B1 (en) | Dynamic cross origin resource control | |
KR20200004453A (en) | Method and system for managing data transfer | |
KR20230109660A (en) | Key rotation in publish-subscribe systems | |
US8478823B2 (en) | Selective data forwarding storage | |
US20180013644A1 (en) | System and method for dynamic online backup optimization | |
US11606829B2 (en) | Facilitation of data transmission in low connectivity areas | |
US11695552B2 (en) | Quantum key distribution in a multi-cloud environment | |
CN113419878B (en) | Data operation method and device | |
Kryvenchuk et al. | Organization of the network connection in the Industry 4.0 | |
Perritt | Digital communications law | |
US8762706B2 (en) | Computer systems, methods and program product for multi-level communications | |
Shariatmadari | Data Dissemination using Information-Centric Networking |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A107 | Divisional application of patent | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |