JP6593886B2 - High-speed upload system, retransmission control method thereof, and program - Google Patents
High-speed upload system, retransmission control method thereof, and program Download PDFInfo
- Publication number
- JP6593886B2 JP6593886B2 JP2017007313A JP2017007313A JP6593886B2 JP 6593886 B2 JP6593886 B2 JP 6593886B2 JP 2017007313 A JP2017007313 A JP 2017007313A JP 2017007313 A JP2017007313 A JP 2017007313A JP 6593886 B2 JP6593886 B2 JP 6593886B2
- Authority
- JP
- Japan
- Prior art keywords
- upload
- speed
- terminal
- server
- speed upload
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
本発明は、大容量データファイルを端末から原本サーバに高速にアップロードする技術に関する。 The present invention relates to a technique for uploading a large-capacity data file from a terminal to an original server at high speed.
4K等の高画質な動画を撮影可能な端末が普及したことにより、端末が生成するデータ容量が肥大化しており、動画共有を行うWebアプリケーションサービスやクラウドストレージサービスへのアップロード速度の高速化が求められている。 Due to the widespread use of terminals that can shoot high-quality videos such as 4K, the data capacity generated by the terminals has grown, and it is necessary to increase the upload speed to web application services and cloud storage services that share videos. It has been.
端末からサーバへのデータのアップロード速度を決める一つの要素として通信アクセス速度がある。現在、普及している通信アクセス規格としては、上り最大50Mbps以上を提供するLTE(Long Term Evolution)(3GPP:3rd Generation Partnership Project)、最大伝送速度1Gbpsを提供するGE−PON(Gigabit Ethernet-Passive Optical Network)(IEEE(Institute of Electrical and Electronics Engineers) 802.3ah)、G−PON(Gigabit Passive-Optical Network)(ITU−T G.984)などがある。さらに今後普及が見込まれる通信アクセス規格として、最大伝送速度6.93Gbpsを提供する無線LAN規格IEEE802.11ac、最大伝送速度10Gbpsを提供する10G−EPON(10Gigabit-Ethernet PON)(IEEE802.3av)、10G−PON(10Gigabit-PON)(ITU−T G.987)などがあり、アクセス速度の高速化が見込まれる。しかし、通信アクセス速度はアップロード速度を決める一つの要素に過ぎず、データをアップロードする端末、アップロード先のサーバ、端末とサーバ間のノード(複数)、有線の通信速度にボトルネックが存在すると高速なアップロードは実現できない。 One factor that determines the upload speed of data from the terminal to the server is the communication access speed. Currently popular communication access standards include LTE (Long Term Evolution) (3GPP: 3rd Generation Partnership Project) that provides a maximum of 50 Mbps or higher, and GE-PON (Gigabit Ethernet-Passive Optical) that provides a maximum transmission rate of 1 Gbps. Network (IEEE (Institute of Electrical and Electronics Engineers) 802.3ah) and G-PON (Gigabit Passive-Optical Network) (ITU-T G.984). Further, as communication access standards expected to be widely used in the future, the wireless LAN standard IEEE802.11ac providing a maximum transmission speed of 6.93 Gbps, 10G-EPON (10 Gigabit-Ethernet PON) (IEEE802.3av), 10G providing a maximum transmission speed of 10 Gbps. -PON (10Gigabit-PON) (ITU-T G.987) and the like are expected to increase the access speed. However, the communication access speed is only one factor that determines the upload speed. If there is a bottleneck in the terminal that uploads data, the upload destination server, the nodes between the terminal and the server, and the wired communication speed, it is fast. Upload is not possible.
非特許文献1には、端末からサーバに直接データをアップロードせずに、原本サーバより手前のエッジネットワークに配備するゲートウェイサーバ(以降「高速アップロードシステム」と言う)に一旦データをアップロードする構成が示されている。非特許文献1に記載の構成で、端末からのアップロードデータを一旦高速アップロードシステムが受信することにより、通信速度のボトルネックとなるノードを少なくあるいは無くすことができるため、端末から高速アップロードシステム間のデータアップロード高速化を行うことができる。端末は高速な無線アクセス技術を限られた時間内しか利用できない環境においても、端末からゲートウェイサーバまで高速にデータアップロードすることで、無線アクセスを有効に利用可能な利点がある。このような従来の構成を図1に示す。
Non-Patent
非特許文献2には、複数の高速アップロードサーバを用いて、高速アップロードサーバのハードウェアスループットの影響を受けることなく、高速アップロードを実現する構成が示されている。非特許文献2に記載の構成では、大きなアップロードファイルを小さなアップロードファイルに分割し、端末からのアップロードデータを仮想サーバ等を含む複数の高速アップロードサーバで分散して受信することにより、各高速アップロードサーバの余剰リソースを集めて全体として高速なアップロードを柔軟に低コストで実現することができる。非特許文献2の概要である従来の構成を図2に示し、シーケンス例を図3及び図4に示す。
Non-Patent
図2に示す従来の高速アップロードシステム100は、統合管理機能部110と、端末200からファイルを受信して一時的に保存した後に原本サーバ300に送信する複数の高速アップロードサーバ400とを備えている。高速アップロードサーバ400は、1つ又は複数のデータセンタ500内に、それぞれ1つ又は複数配置されている。端末200は高速アップロードシステム100に対して任意のアクセス回線600を介して各高速アップロードサーバ400や、さらにインターネット700等の外部ネットワークを介して原本サーバ300と通信可能である。ここで、高速アップロードシステム100は、原本サーバ300よりもネットワーク的に端末200に近い位置に配置されている。典型的な例では、統合管理機能部110は端末200を収容するキャリア網に配置され、データセンタ500は前記キャリア網内において複数の拠点に配置され、キャリア網が外部ネットワークとしてインターネット700に直接又は他のネットワークを介して接続しているという環境が挙げられる。統合管理機能部110及びデータセンタ500が全てインターネット700に直接接続している環境でもよい。アクセス回線600は、無線接続であっても有線接続であってもよい。
The conventional high-
図3及び図4は、端末200からの高速アップロードサーバ(1,2,3…,n)へのアップロードを実施するシーケンス例であり、アップロードファイルを21個に分割し、3台のサーバにそれぞれ3つずつアップロードタスクを同時に割り当てる場合を示すものである。
FIGS. 3 and 4 are sequence examples for performing upload from the
このシーケンス例では、端末200は、高速アップロードを開始する際(ステップS1)、統合管理機能部110に高速アップロードシステムの利用要求を行う(ステップS2)。統合管理機能部110は端末情報と端末アクセス情報に基づき、端末200に対して高速アップロードサーバ400の利用を行うか、原本サーバ300に直接接続させるかの判断を行い(ステップS3)、高速アップロードサーバ400を利用する場合には、統合管理機能部110は、端末200に高速アップロードサーバ400を利用する際の高速アップロードサーバ400の割り当て、ファイル分割サイズの決定を行い、端末に高速アップロードサーバのドメイン、IPアドレス、ID、ファイル分割サイズ等の割当情報回答を行う(ステップS4〜S6)。端末200は統合管理機能部110から原本サーバ300に対してアップロードを許容するために、Outh認可の手順を行う(ステップS7〜S14)。Outh認可の手順は2回目以降省略してもよい。
In this sequence example, when starting high-speed upload (step S1), the
次に、端末200は、ある一定以上の大容量のファイルをアップロードする際に複数の高速アップロードサーバ400を用いてアップロードを高速化するためにファイル分割を行う(ステップS15)。ファイル分割サイズは、統合管理機能部110により回答されたファイル分割サイズを利用するか、端末200が保持する端末情報と端末アクセス情報に基づき決定する。端末200は、一定サイズに分割したファイルを統合管理機能部110に回答された1つ以上の高速アップロードサーバ400に対してアップロードを行う(ステップS16)。端末200から高速アップロードサーバ400への分割アップロードは、各サーバ400に対し1つ以上の通信でアップロードしてもよい。なお、アップロードをする際の通信プロトコルは、RFC(Request for Comments)標準規定であるHTTP(Hypertext Transfer Protocol)、HTTPS(Hypertext Transfer Protocol Secure)、FTP(File Transfer Protocol)、FTPS(File Transfer Protocol Secure)などのアプリケーションプロトコルであってもよいし、標準規定のない独自プロトコルであってもよい。端末200は、高速アップロードの実施中または完了後に各高速アップロードサーバ400への分割アップロード実績から各高速アップロードのスループットを算出し、統合管理機能部110に対してアップロードの完了通知及び性能通知を行う(ステップS17)。
Next, the
続いて、高速アップロードシステム100から原本サーバ300へのアップロードが実施される。高速アップロードシステム100における統合管理機能部110は、端末200から各高速アップロードサーバ400への高速アップロードが完了すると、各高速アップロードサーバ400にある端末の分割ファイルを収集するとともに(ステップS18)、分割ファイルの統合処理を実施し(ステップS19)、統合したファイルを原本サーバ300にアップロードする(ステップS20)。原本サーバ300は複数あってもよく、別事業者が提供するサービスの原本サーバに高速アップロードシステム100からそれぞれアップロードしてもよい。原本サーバ300への統合アップロード完了後に、原本サーバ300から統合管理機能部110に原本サーバ300へのアップロード完了通知が行われ(ステップS21)、統合管理機能部110は端末200に対して、原本サーバ300へのアップロード完了通知を行う(ステップS22)。
Subsequently, uploading from the high-
非特許文献2の技術・構成では、端末から複数の高速アップロードサーバに分割したアップロードファイルを分散させてアップロードする単純な手順が示されているが、各高速アップロードサーバへのアップロードタスクの割り当てが非効率である場合には、分散アップロードの処理速度が全体として低速になってしまう問題がある。例えば、アップロードファイルを21個に分割し、3台の高速アップロードサーバにそれぞれ3つずつアップロードタスクが同時に割り当てられる場合の例を図5及び図6に示す。ここでは、各高速アップロードサーバに割り当てられた9つの分割ファイルのすべてを受信完了した後に次の9つの分割ファイルが割り当てられるため、3台の高速アップロードサーバのうち一部の高速アップロードサーバの受信処理が完了していても、他の高速アップロードサーバ受信処理が完了していなければ、次の分割ファイルが割り当てられないため、分散アップロードの処理速度が全体として低速になる。
In the technology and configuration of Non-Patent
また、複数のサーバの中の1つ以上のいくつかのサーバの処理性能が想定よりも低速であった場合に、図5及び図6に示すように低速なサーバのアップロード受信処理がクリティカルパスとなり、分散アップロードの処理速度が全体として著しく低速になってしまう問題がある。図5は、端末200が9つの分割ファイルを並列してアップロードする例を示すものであるが、分割ファイル10〜15の送信処理は分割ファイル01〜06の受信を契機に開始される。また、高速アップロードサーバが受信処理中のときは、分割ファイル16〜21は高速アップロードサーバ1,2に割り当てられ、高速アップロードサーバ1,2で分担して送信処理される。高速アップロードサーバは、端末から受信する分割ファイルをメインメモリ(以下、メモリという)に保存する処理速度と、ハードディスクやSSD等のストレージに保存する処理速度が大きく異なり、メモリが空いているときはメモリに分割ファイルを保存して端末に受信完了応答を高速に返すが、メモリの使用量が大きくなると端末に一定期間受信応答を全く返さなくなるか、最良でもストレージに保存する処理速度となり受信応答が遅くなる。
In addition, when the processing performance of one or more of a plurality of servers is slower than expected, the upload reception processing of the slow server becomes a critical path as shown in FIGS. As a result, there is a problem that the processing speed of distributed upload becomes extremely slow as a whole. FIG. 5 shows an example in which the
図7及び図8には、高速アップロードサーバ3がメモリからストレージへの書込み状態に入り、処理能力が著しく低下した場合の概要を示す。ここでは、サーバ3に送信された分散アップロードの完了応答が返ってこないために、高速アップロード全体のタスクを完了できない。サーバ3の処理能力の低下は実測で1/10以下程度になる。
7 and 8 show an outline in the case where the high-
図9には、高速アップロードサーバ3がアップロードデータをメモリからストレージに書き込む状態に入り、処理能力が著しく低下したときのシーケンス例を示す。ここでは、通常よりもサーバが著しく低速になることにより、高速アップロードの完了時間が延びてしまう。また、端末が著しく低速になったサーバに割り当てた分散アップロードの完了応答が行われず、その分散アップロードタスクがクリティカルパスとなり、高速アップロード全体が完了しない。サーバ3の処理能力の低下は実測で1/10以下になることがある。
FIG. 9 shows a sequence example when the high-speed upload
図10には、高速アップロードサーバ3がメモリからストレージへの書込み状態に入り、処理能力が著しく低下した場合の概要を示す。ここでは、サーバ3に送信された分散アップロードの完了応答が返ってこないために、高速アップロード全体のタスクを完了できない。高速アップロードのスループットは実測で1/10以下程度になる。
FIG. 10 shows an outline when the high-speed upload
さらに、非特許文献2の技術・構成では、端末から高速アップロードサーバへの分散アップロードの実施中に、端末の移動などにより無線などのアクセス回線が切断した場合に、途中まで実施した高速アップロードが無駄になってしまう問題がある。例えば、図11に示すように端末から高速アップロードサーバへの分散アップロードが大容量原本ファイル全体の95%まで完了している状態で、端末が移動して無線アクセス回線が切断してしまった場合には、残り5%のアップロードで完了するにもかかわらず95%アップロードの無駄になってしまう問題がある。即ち、分割ファイル1つでもアップロードが失敗すると、その部分の再開をすることはできず、元の大容量ファイルアップロード全体として失敗となり、分割ファイルが全て揃わないことにより、ユーザがクラウドサービス等のサーバにアップロードしようとした場合に原本ファイルが復元できず、途中まで実施した高速アップロードが無駄になる。また、大容量ファイルを送り直すことにより、回線帯域を少なくとも1回分以上無駄に使ってしまうという問題もある。
Furthermore, with the technology and configuration of
本発明は上記事情に鑑みてなされたものであり、その目的とするところは、アップロード時の環境に最適なアップロード形態により高速なアップロードを行うことができるシステム及び方法を提供することにある。 The present invention has been made in view of the above circumstances, and an object of the present invention is to provide a system and method capable of performing high-speed uploading in an uploading form most suitable for the environment at the time of uploading.
上記目的を達成するために、本願発明は、端末により分割されたアップロード対象ファイルを当該端末から受信して一時的に保存する複数の高速アップロードサーバと、各高速アップロードサーバから分割ファイルを受信するとともに受信した分割ファイルを統合することにより復元したアップロード対象ファイルをアップロード先の原本サーバに送信する統合管理機能部とを備えた高速アップロードシステムにおいて、前記端末は、全ての分割ファイルの送信が完了する前に端末と高速アップロードシステムを結ぶ全部または一部の通信アクセス回線の切断を検出すると前記統合管理機能部に回線断を通知するアップロード制御部を備え、前記統合管理機能部は、高速アップロードシステムが端末から受信した分割ファイルの受信状況を管理するとともに前記回線断通知を端末から受領すると未受信の分割ファイル情報を検索して端末に通知する検索通知部を備え、前記端末のアップロード制御部は、前記未受信分割ファイル情報通知を統合管理機能部から受領すると当該未受信分割ファイル情報に係る未受信分割ファイルを高速アップロードシステムに対して送信することを特徴とする。 In order to achieve the above object, the present invention receives a plurality of high-speed upload servers that receive and temporarily store a file to be uploaded divided by a terminal, and receives the divided files from each high-speed upload server. In the high-speed upload system including an integrated management function unit that transmits the upload target file restored by integrating the received divided files to the original server of the upload destination, the terminal before the transmission of all the divided files is completed And an upload control unit for notifying the integrated management function unit of line disconnection when disconnection of all or part of the communication access line connecting the terminal and the high-speed upload system is detected. Manages the reception status of split files received from And a search notification unit that searches for unreceived divided file information and notifies the terminal when the line disconnection notification is received from the terminal, and the upload control unit of the terminal integrates the unreceived divided file information notification into an integrated management function. When received from the copy unit, the unreceived divided file related to the unreceived divided file information is transmitted to the high-speed upload system.
本発明によれば、高速アップロードサーバの処理状態に応じた分散アップロードが可能となるので、分割ファイルのアップロードタスク完了までの処理時間を大幅に短縮することができ、アップロード時の環境に最適なアップロード形態により高速なアップロードを行うことができる。また、端末と高速アップロードシステムの間の一部または全部の通信が切断されても、端末は高速アップロードシステムへのアップロードを継続することができる。 According to the present invention, distributed uploading according to the processing state of the high-speed upload server is possible, so that the processing time until completion of the upload task of the divided file can be greatly shortened, and the optimum uploading environment for the uploading environment. High-speed upload can be performed depending on the form. Further, even if part or all of the communication between the terminal and the high-speed upload system is disconnected, the terminal can continue uploading to the high-speed upload system.
[第1の実施形態]
本発明の第1の実施形態に係る高速アップロードシステムについて、図12〜図20を参照して説明する。
[First Embodiment]
A high-speed upload system according to the first embodiment of the present invention will be described with reference to FIGS.
本実施形態に係る高速アップロードシステム100は、図2に示す従来例と同様、統合管理機能部110と、端末200からファイルを受信して一時的に保存した後に原本サーバ300に送信する複数の高速アップロードサーバ400とを備えている(図2参照)。高速アップロードサーバ400は、1つ又は複数のデータセンタ500内に、それぞれ1つ又は複数配置されている。端末200は高速アップロードシステム100に対して任意のアクセス回線600を介して各高速アップロードサーバ400や、さらにインターネット700等の外部ネットワークを介して原本サーバ300と通信可能である。ここで、高速アップロードシステム100は、原本サーバ300よりもネットワーク的に端末200に近い位置に配置されている。
Similar to the conventional example shown in FIG. 2, the high-speed upload
端末200は、図12に示すように、端末アクセス情報記憶部201と、分割ファイルアップロード実績記憶部202と、サーバ速度実績記憶部203と、アップロード制御部204と、ネットワーク通信部205とを備える。
As illustrated in FIG. 12, the terminal 200 includes a terminal access
端末アクセス情報記憶部201は、端末200の位置情報、無線アクセスのセルID等の位置情報、アクセススループット、端末スループット等の端末アクセス情報を管理する。
The terminal access
分割ファイルアップロード実績記憶部202は、高速アップロードの実施中または完了後に各高速アップロードサーバ400への分割アップロードの実績情報を記憶する。
The divided file upload
サーバ速度実績記憶部203は、各高速アップロードサーバ400の過去のスループットの実績情報を保持する。
The server speed
アップロード制御部204は、高速アップロードシステム100の利用時に端末アクセス情報を統合管理機能部110に送信する。また、端末アップロード制御部204は、高速アップロードサーバ400にアップロードタスクを割り当てるとともに、高速アップロードサーバ400のファイル受信完了応答の状況に基づき、各高速アップロードサーバ400に対して分割したファイルをアップロードするタスク量を変更し、受信を示す完了応答があった場合に追加のアップロードを行うことにより、受信処理能力の高い高速アップロードサーバ400により多くのアップロードタスクを割り当てる。端末200から統合管理機能部110への送信、高速アップロードサーバ400へのアップロード通信はネットワーク通信部205を介して行う。
The upload
端末200は、高速アップロードサーバ400に対し、サーバ処理能力に応じた効率的なアップロードタスクの割り当てを行うことにより、より効率的なアップロードを実現する。端末200は、複数の高速アップロードサーバ400に対してアップロードを同時に行い、各高速アップロードサーバ400のそれぞれに対しても複数同時に分散アップロードを行う。その際、各高速アップロードサーバ400から受信を示す完了応答があった場合に、端末200は完了応答をした高速アップロードサーバ400に対してさらに追加のアップロードを行う。例えば、HTTPプロトコルでアップロードを行う場合はHTTP POSTリクエストを端末200から高速アップロードサーバ400に送信する形態が考えられるが、POSTリクエストを各高速アップロードサーバ400に複数行い、完了応答が返ってきた場合に追加のPOSTリクエストを行う。
The terminal 200 realizes more efficient upload by assigning an efficient upload task according to the server processing capability to the high-speed upload
以下、本実施形態に係る高速アップロードシステム100の動作例について図面を参照して説明する。
Hereinafter, an operation example of the high-speed upload
図13及び図14は、端末200からの高速アップロードサーバ(1,2,3,…,n)へのアップロードを実施するシーケンス例である。このシーケンス例は、高速アップロードサーバ1のスループットに対して、高速アップロードサーバ2が2倍、高速アップロードサーバ3が3倍のスループットが得られる場合の例である。この場合のサーバスループットに応じた分散アップロードの概要図を図15に示す。尚、分割ファイルのサイズはすべて同じサイズとしているが、サーバ(仮想サーバ含む)のメモリ、ストレージI/O、NIC等の性能の違いにより、同一サイズの分割ファイルであっても高速アップロードサーバによって処理時間が異なる場合がある。
FIGS. 13 and 14 are sequence examples for performing upload from the terminal 200 to the high-speed upload server (1, 2, 3,..., N). This sequence example is an example in which the throughput of the high-speed upload
図13及び図14のシーケンス例では、端末200は、従来例(図3のステップS1〜14)と同様、認証、高速アップロード情報取得、ファイル分割処理を行った後(ステップS30)、分割アップロード処理を行うことにより(ステップS31)、高速アップロードサーバ1〜3に対して分割ファイルのアップロードを行う。初期状態では、端末200は各高速アップロードサーバ1〜3のスループット能力が分からないため、各高速アップロードサーバ1〜3にそれぞれ同数(ここでは、3コネクション)のアップロードを行う。例えば、高速アップロードサーバ1に分割ファイル01〜03、高速アップロードサーバ2に分割ファイル04〜06、高速アップロードサーバ3に分割ファイル07〜09を高速アップロードサーバの受信処理性能に拘わらず初期に割り当てる。
In the sequence examples of FIGS. 13 and 14, the terminal 200 performs authentication, high-speed upload information acquisition, and file division processing (step S30), and then performs the divided upload processing as in the conventional example (steps S1 to S14 in FIG. 3). (Step S31), the divided files are uploaded to the high-speed upload
次に、端末200は、高速アップロードサーバ1〜3から受信を示す完了応答があると、完了応答受信処理を行う(ステップS32)。この場合、高速アップロードサーバ3は高速アップロードサーバ3に対して3倍のスループット能力があるので、高速アップロードサーバ1よりも3倍多い完了応答を返すことになる。端末200には、高速アップロードサーバ3から高速アップロードサーバ1の3倍の完了応答が返ってくるので、端末200は応答が返ってきた分のアップロードタスクを更に割り当てる。この場合、処理時間では、分割ファイル01〜03と分割ファイル07〜09の処理時間とは異なり、図15の例では、高速アップロードサーバ3は3Gbpsで高速アップロードサーバ1より3倍速いため、3分の1の処理時間で完了することから、最も早く初期タスクを完了した高速アップロードサーバ3に次の分割ファイル10〜12が割り当てられる(ステップS33)。同様にして、他の分割ファイルの分割アップロード処理及び完了応答受信処理を行う(ステップS33〜S35)。
Next, when there is a completion response indicating reception from the high-speed upload
ここで、端末200のアップロード制御部204の動作について、図16のフローチャートに基づいて説明する。まず、認証、高速アップロード情報取得、ファイル分割処理を行った後(ステップS40)、アップロードタスクを追加する処理では、フリータスクがある場合(ステップS41,42)、分割ファイルの読込処理を行い(ステップS43)、アップロードタスクキューを追加する(ステップS44)。ここで、全分割ファイルが送信済みでなければ(ステップS45)、前記ステップS42〜44の動作を繰り返し、全分割ファイルが送信済みとなった場合は(ステップS45)、分割アップロード完了処理を行う(ステップS46)。
Here, the operation of the upload
また、アップロードタスクがある場合に分割アップロードタスクを割当てる処理では、アップロードタスクキューがある場合(ステップS47,48)、分割アップロード処理を行う(ステップS49)。ここで、全分割ファイルが送信済みでなければ(ステップS50)、前記ステップS48〜S49の動作を繰り返し、全分割ファイルが送信済みとなった場合は(ステップS50)、分割アップロード完了処理を行う(ステップS51)。 Further, in the process of assigning a divided upload task when there is an upload task, if there is an upload task queue (steps S47 and 48), a divided upload process is performed (step S49). If all the divided files have not been transmitted (step S50), the operations in steps S48 to S49 are repeated. If all the divided files have been transmitted (step S50), a divided upload completion process is performed (step S50). Step S51).
前記分割アップロード処理は、図17のフローチャートに示すように行われる。まず、アップロードタスクキューを取得し(ステップS52)、統合管理機能部110からアサインされた高速アップロードサーバをサーバ[1]…サーバ[n]とし、サーバ[i]がアップロードタスク上限値未満か否かの判定をサーバ[i=1,2,3,…,n]について繰り返し行う(ステップS53〜55)。次に、アップロードタスク上限値未満のサーバ[i]に対してアップロードを実施し(ステップS56)、サーバ[i]のアップロードタスク数に[1]を加えるとともに(ステップS57)、サーバ[i]に対して完了応答受信処理を行う(ステップS58)。
The divided upload process is performed as shown in the flowchart of FIG. First, the upload task queue is acquired (step S52), and the high-speed upload server assigned by the integrated
また、前記完了応答受信処理は、図18のフローチャートに示すように行われる。即ち、サーバ[i]からアップロードの完了応答の受信待ちをして(ステップS59)、サーバ[i]から分割アップロードの完了応答を受信すると(ステップS60)、サーバ[i]のアップロードタスク数から[1]を減ずるとともに(ステップS61)、フリータスク数に[1]を加える(ステップS62)。 Further, the completion response reception process is performed as shown in the flowchart of FIG. That is, the server waits for an upload completion response from the server [i] (step S59), and receives a split upload completion response from the server [i] (step S60). 1] is reduced (step S61), and [1] is added to the number of free tasks (step S62).
前記図16〜図18の動作におけるアップロードタスクとフリータスクの概念図を図19に示す。 FIG. 19 shows a conceptual diagram of the upload task and the free task in the operations of FIGS.
本実施形態によれば、端末200のアップロード制御部が、各高速アップロードサーバ400の分割ファイル受信完了状況に基づき、各高速アップロードサーバ400に対して分割ファイルをアップロードする量を変更するようにしたので、高速アップロードサーバ400のスループットに応じた分散アップロードが可能となり、図20に示すように、本発明による効率的なアップロードタスク完了までの処理時間は、従来の非効率的なアップロードタスク完了までの処理時間に比べて大幅に短縮される。
According to the present embodiment, the upload control unit of the terminal 200 changes the amount of division file upload to each high-speed upload
[第2の実施形態]
本発明の第2の実施形態に係る高速アップロードシステムについて、図21〜図29を参照して説明する。図21は高速アップロードシステムの全体構成図である。
[Second Embodiment]
A high-speed upload system according to the second embodiment of the present invention will be described with reference to FIGS. FIG. 21 is an overall configuration diagram of the high-speed upload system.
図21に示す高速アップロードシステム100は、図2に示す従来例と同様、統合管理機能部110と、端末200からファイルを受信して一時的に保存した後に原本サーバ300に送信する複数の高速アップロードサーバ400と、高速アップロードサーバ400がそれぞれ1つ又は複数配置されたデータセンタ500とを備え、端末200は高速アップロードシステム100に対して任意のアクセス回線600を介して各高速アップロードサーバ400や、さらにインターネット700等の外部ネットワークを介して原本サーバ300と通信可能である。ここで、高速アップロードシステム100は、原本サーバ300よりもネットワーク的に端末200に近い位置に配置されている。
The high-speed upload
本実施形態では、統合管理機能部110が、複数の高速アップロードサーバ400に割り当てられているアップロードタスクの量を管理し、高速アップロードサーバ400のアップロード量がストレージ書込み閾値を超えないように各高速アップロードサーバ400にアップロードタスクを割り当てる。
In this embodiment, the integrated
統合管理機能部110は、図22に示すように、高速アップロード実施閾値記憶部111と、高速アップロードサーバ状態記憶部112と、高速アップロード実施判定部113と、アップロードID記憶部114と、高速アップロード管理制御部115と、分割ファイル統合処理部116と、ネットワーク通信部117とを備えている。なお、統合管理機能部110は、原本サーバ300と同じサーバに実装されてもよい。また、統合管理機能部110は、高速アップロードサーバ400と同じサーバに実装されてもよい。
As shown in FIG. 22, the integrated
高速アップロード実施閾値記憶部111は、どの程度の端末スループット、アクセススループットの場合に、高速アップロードシステム100を端末200に利用させるかどうかの判断を行うために用いる閾値を管理する。
The high-speed upload execution threshold
高速アップロードサーバ状態記憶部112は、各高速アップロードサーバ400の状態情報を保持する。図23に高速アップロードサーバ状態記憶部112の情報例を示す。例えば、「閾値メモリ容量−使用メモリ容量」が正の値の場合にはその高速アップロードサーバ400はメモリスループットで処理可能であり、「閾値メモリ容量−使用メモリ容量」が負の値の場合にはストレージスループットによる処理可能であり、「閾値ストレージ容量−使用ストレージ容量−使用メモリ容量」の値が0以下の場合にはその高速アップロードサーバ400でのキャッシュは不可な状態にあることを示す。
The high speed upload server
高速アップロード実施判定部113は、高速アップロード実施閾値情報とサーバ混雑度情報に基づき、高速アップロードシステムを端末200に利用させるかどうかの判断を実施し、端末200にネットワーク通信部117を介して通知する。
The high-speed upload
アップロードID記憶部114は、アップロードファイルの情報を管理する。アップロードIDは端末がアップロードする原本ファイル毎に割り当てたIDであり、分割アップロード前に統合管理機能部110または端末200で決定し、ファイル分割数、ファイルサイズ、分割ファイルサイズを保持する。図24にアップロードID記憶部114の情報例を示す。
The upload
高速アップロード管理制御部115は、高速アップロードサーバ状態記憶部112で保持する高速アップロードサーバ状態情報を参照し、端末200からの分散アップロードをどの高速アップロードサーバ400を用いて実施するかを決定し、端末200に通知する。
The high-speed upload
高速アップロード管理制御部115は、端末200にどの高速アップロードサーバ400をいくつ割当てるかを決定し、割り当てた高速アップロードサーバ400の数と各識別子を、ネットワーク通信部117を介して端末200に通知する。このとき、更に割当形態として、高速アップロードサーバ400の場所、性能、端末200で大容量ファイルを分割する際の分割ファイルのサイズ、各サーバ400へのアップロード通信数(コネクション数)を決定して端末200に通知してもよい。端末200への利用させる判断結果と高速アップロードサーバ400の割当情報は一つの通信で送信してもよい。
The high-speed upload
分割ファイル統合処理部116は、各高速アップロードサーバ400にある端末200からの分割ファイルを収集し、原本サーバ300にアップロードする。原本サーバ300へのアップロードは、分割ファイルを収集しながら原本サーバ300にアップロードしてもよいし、分割ファイルの収集を完了してから原本サーバ300にアップロードしてもよい。原本サーバ300への統合アップロード完了後に統合管理機能部110は端末200に対して、統合管理機能部110からの通知または端末200からの問合せ手順により、原本サーバ300へのアップロード完了通知を行う。
The divided file
本実施形態の端末200は、図25に示すように、端末アクセス情報記憶部211と、分割ファイルアップロード実績記憶部212と、サーバ速度実績記憶部213と、アップロード制御部204と、ネットワーク通信部215と、高速アップロードサーバ状態記憶部216とを備える。アップロード制御部214は、統合管理機能部110から送信された高速アップロードサーバ400の情報を高速アップロードサーバ状態記憶部216に保持する。
As shown in FIG. 25, the
高速アップロードサーバ400は、図26に示すように、分割ファイル受付処理部401と、分割ファイル記憶部402と、アップロードID分割ファイルID記憶部403と、高速アップロードサーバスペック監視部404と、統合管理機能部との連携処理部405と、ネットワーク通信部406とを備える。
As shown in FIG. 26, the high-speed upload
分割ファイル受付処理部401は、端末200からの分散アップロードにより分割ファイルを受信し、分割ファイル記憶部402に保持するとともに、アップロードID分割ファイルID記憶部403に受信した分割ファイルのアップロードIDと分割ファイルIDを保持し、高速アップロードサーバ自身が保持している分割ファイルを把握する。図27にアップロードID分割ファイルID記憶部403の情報例を示す。また、図28に示すように、分割ファイルとアップロード分割ファイルID情報をディレクトリとファイル名により表現して管理してもよい。
The split file
高速アップロードサーバスペック監視部404は、図29に示すメモリ容量、メモリ処理時のスループット、ストレージ容量、ストレージ容量、ストレージ処理時のスループット等の高速アップロードサーバ状態情報の自サーバの状態を収集し、統合管理機能部110に送信する。
The high-speed upload server
統合管理機能部との連携処理部405は、自サーバが保持しているアップロードファイルのアップロードファイルIDと分割ファイルIDを統合管理機能部110に対して送信する処理を行う。
The
本実施形態によれば、端末200のアップロード制御部が、各高速アップロードサーバの400分割ファイル受信状況と各高速アップロードサーバの受信処理状態を示す状態情報に基づき、各高速アップロードサーバ400に対して分割ファイルをアップロードする量を変更するようにしている。この場合、統合管理機能部110が複数の高速アップロードサーバ400から割り当てられているアップロードタスクの量の情報を取得するとともに、各高速アップロードサーバ400に割り当てられているアップロードタスクの量を管理し、高速アップロードサーバ400のアップロード量がストレージ書込み閾値を超えないように各高速アップロードサーバ400にアップロードタスクを割り当てるようにしているので、ストレージ書込み状態等による予期せぬ処理能力の低速化を防ぐことができる。
According to this embodiment, the upload control unit of the terminal 200 divides each high-speed upload
また、各高速アップロードサーバ400のメモリ容量はストレージ容量に比べると数倍以上少ないことが想定されるため、端末200からのアップロード量が多くなると何れすべての高速アップロードサーバ400がストレージ書込み状態となる。このような状態を想定し、統合管理機能部110はストレージ書込み時の低速スループットを考慮して、多くの高速アップロードサーバ400を割り当てるとともに、統合管理機能部110で各高速アップロードサーバ400の状態を集中管理するため、各高速アップロードサーバ400のスループットが想定より遅くなることがない。
In addition, since the memory capacity of each high-speed upload
[第3の実施形態]
本発明の第3の実施形態に係る高速アップロードシステムについて、図30及び図31を参照して説明する。図30は高速アップロードシステムの全体構成図である。
[Third Embodiment]
A high-speed upload system according to the third embodiment of the present invention will be described with reference to FIGS. 30 and 31. FIG. FIG. 30 is an overall configuration diagram of the high-speed upload system.
図30に示すように、本実施形態では、各高速アップロードサーバ400がアップロードタスクの量を管理し、アップロードタスク量がストレージ書込み閾値を超えた場合に、分割アップロードを停止または減少させるための信号を端末200に送信し、端末200のアップロード制御部が当該高速アップロードサーバ400へのアップロードタスク割り当てを停止または減少させる。
As shown in FIG. 30, in this embodiment, each high-speed upload
また、各高速アップロードサーバ400は、閾値を下回った場合に、閾値を下回ったことを示す信号を端末200に送信し、端末200は当該高速アップロードサーバ400へのアップロードタスク割り当てを再開または増加する。
Further, when each high-speed upload
更に、統合管理機能部110は、高速アップロードサーバ400へのアップロードタスク割り当ての停止を想定し、あらかじめ端末200のスループットよりも、高速アップロードサーバ400サーバのスループットを多めに割り当てるようにしてもよい。
Further, the integrated
図31に本実施形態のシーケンス例を示す。このシーケンス例において、端末200は、分割アップロード処理を行うことにより、高速アップロードサーバ1〜3に対して分割ファイルのアップロードを行う(ステップS70)。初期状態では、端末200は各高速アップロードサーバ1〜3のスループット能力が分からないため、各高速アップロードサーバ1〜3にそれぞれ同数(ここでは、3コネクション)のアップロードを行う。ここで、例えば高速アップロードサーバ3のアップロードタスク量がストレージ書込み閾値を超えた場合は、端末200に対し、アップロードタスクが閾値を超えたことによるアップロードの停止または減少を指示するとともに、別の高速アップロードサーバで再アップロードすることを指示し(ステップS71)。統合管理機能部110に対して高速アップロードサーバ3のアップロードタスク量がストレージ書込み閾値を超えていることを通知する(ステップS72)。また、アップロードタスク量がストレージ書込み閾値を超えていない高速アップロードサーバ2,3は、分割ファイルのアップロードを完了すると、端末200に完了応答を送信する(ステップS73)、端末200は、再アップロード指示のあった分割アップロードのアップロードタスクを再割当てするとともに、高速アップロードサーバ3を除いて高速アップロードサーバ2,3に対する分割アップロードを実施する(ステップS74)。
FIG. 31 shows a sequence example of this embodiment. In this sequence example, the terminal 200 uploads a divided file to the high-speed upload
本実施形態によれば、端末200のアップロード制御部が、各高速アップロードサーバ400からの分割アップロードの停止または減少を示す信号の受信に基づき、当該高速アップロードサーバ400への分割ファイルの送信を停止または減少し、停止または減少した分割アップロードを別の高速アップロードサーバ400に送信するようにしている。これにより、図9の従来の課題のシーケンスに対して、閾値を超えた高速アップロードサーバ400に割り当てた分割アップロードタスクの別の高速アップロードサーバ400への再割当が実施されるので、クリティカルパスとなるアップロードタスクによるアップロード完了延伸を防止することができる。
According to the present embodiment, the upload control unit of the terminal 200 stops the transmission of the divided file to the high-speed upload
[第4の実施形態]
本発明の第4の実施形態に係る高速アップロードシステムについて、図32及び図33を参照して説明する。図32は高速アップロードシステムの全体構成図である。
[Fourth Embodiment]
A high-speed upload system according to the fourth embodiment of the present invention will be described with reference to FIGS. 32 and 33. FIG. FIG. 32 is an overall configuration diagram of the high-speed upload system.
図32に示すように、本実施形態では、各高速アップロードサーバ400がアップロードタスクの量を管理し、アップロードタスク量がストレージ書込み閾値を超えた場合に、分割アップロードを停止または減少するための信号を統合管理機能部110に送信し、統合管理機能部110が高速アップロードサーバの再割当を実施する。各高速アップロードサーバ400は閾値を下回った場合に閾値を下回ったことを示す信号を端末200に送信し、端末200は当該高速アップロードサーバ400へのアップロードタスク割り当てを再開または増加する。
As shown in FIG. 32, in this embodiment, each high-speed upload
図33に本実施形態のシーケンス例を示す。このシーケンス例において、端末200は、分割アップロード処理を行うことにより、高速アップロードサーバ1〜3に対して分割ファイルのアップロードを行う(ステップS80)。初期状態では、端末200は各高速アップロードサーバ1〜3のスループット能力が分からないため、各高速アップロードサーバ1〜3にそれぞれ同数(ここでは、3コネクション)のアップロードを行う。ここで、例えば高速アップロードサーバ3のアップロードタスク量がストレージ書込み閾値を超えた場合は、端末200に対し、アップロードタスクが閾値を超えたことによるアップロードの停止または減少を指示するとともに、高速アップロードサーバ3のアップロードタスクをキャンセルすることを指示し(ステップS81)、統合管理機能部110に対して高速アップロードサーバ3のアップロードタスク量がストレージ書込み閾値を超えていることを通知する(ステップS82)。次に、統合管理機能部110は、高速アップロードサーバ400の状態記憶部の情報を更新するとともに、高速アップロードサーバ400の再割当処理を行い(ステップS83)、高速アップロードサーバの再割当情報を端末200に送信する(ステップS84)。端末200は、再アップロード指示のあった分割アップロードのアップロードタスクを含めて別の高速アップロードサーバnに再割当てするとともに(ステップS85)、高速アップロードサーバnに対する分散アップロードを実施する(ステップS86)。
FIG. 33 shows a sequence example of this embodiment. In this sequence example, the terminal 200 uploads a divided file to the high-speed upload
本実施形態によれば、端末200のアップロード制御部が、高速アップロードサーバ400へのアップロードタスクの再割当情報に基づき、分割ファイル送信先の高速アップロードサーバ400と送信量を変更するようにしている。これにより、図9の従来の課題のシーケンスに対して、閾値を超えた高速アップロードサーバに割り当てた分割アップロードタスクの別のサーバへの再割当が実施されるので、クリティカルパスとなるアップロードタスクによるアップロード完了延伸を防止することができる。
According to the present embodiment, the upload control unit of the terminal 200 changes the transmission amount with the high-speed upload
また、前記第3の実施形態では、端末200がファイル送信する高速アップロードサーバ400は変わらないため、初期に割り当てられた高速アップロードサーバ400の範囲でしか分割ファイルアップロードの再割当が行われず、高速アップロード送信の低速化の可能性があるが、本実施形態ではアップロードタスクが再割当されて別の高速アップロードサーバnに変更されるため、低速化の防止に効果的である。
In the third embodiment, since the high-speed upload
[第5の実施形態]
本発明の第5の実施形態に係る高速アップロードシステムについて、図34及び図35を参照して説明する。図34は高速アップロードシステムの全体構成図である。
[Fifth Embodiment]
A high-speed upload system according to the fifth embodiment of the present invention will be described with reference to FIGS. 34 and 35. FIG. FIG. 34 is an overall configuration diagram of the high-speed upload system.
図34に示すように、本実施形態では、端末200が複数の高速アップロードサーバ400の中で、受信完了応答が閾値以上に遅い場合に、当該高速アップロードサーバ400が低速状態にあると判断し、当該高速アップロードサーバ400に割り当てた分割アップロードタスクを別の高速アップロードサーバ400に割り当てる。再送信を行った分割ファイルは複数の高速アップロードサーバ400で重複して保持されることが想定されるが、統合管理機能部110で分割ファイルを収集する際に重複をチェックすることにより、分割ファイル統合時に重複なく原本ファイルに復元することができる。
As shown in FIG. 34, in the present embodiment, when the terminal 200 is a plurality of high-speed upload
図35に本実施形態のシーケンス例を示す。このシーケンス例において、端末200は、分割アップロード処理を行うことにより、高速アップロードサーバ1〜3に対して分割ファイルのアップロードを行う(ステップS90)。初期状態では、端末200は各高速アップロードサーバ1〜3のスループット能力が分からないため、各高速アップロードサーバ1〜3にそれぞれ同数(ここでは、3コネクション)のアップロードを行う。ここで、例えば高速アップロードサーバ1〜2から端末200に閾値未満で受信完了応答があった場合(ステップS91)、端末200は高速アップロードサーバ2,3に対する次の分割アップロードを実施する(ステップS92)。一方、高速アップロードサーバ3からの受信完了応答が閾値以上に遅い場合には、高速アップロードサーバ3が低速状態にあると判断し、このようなクリティカルパスとなる高速アップロードサーバ3には一定期間ファイルの送信を行なわず、高速アップロードサーバ3に割り当て済みのアップロードタスクを別の高速アップロードサーバ1〜2に再割当し(ステップS93)、高速アップロードサーバ2,3に対する分割アップロードを実施する(ステップS94)。
FIG. 35 shows a sequence example of this embodiment. In this sequence example, the terminal 200 uploads a divided file to the high-speed upload
また、再送信を行った分割ファイルは複数の高速アップロードサーバ400で重複して保持されることが想定されるが、統合管理機能部110で分割ファイルを収集する際に重複をチェックし、重複する分割ファイルを削除して原本ファイルに復元することにより、分割ファイル統合時に重複なく原本ファイルに復元することができる。
In addition, it is assumed that the divided files that have been retransmitted are duplicated and held by a plurality of high-speed upload
本実施形態によれば、端末200のアップロード制御部が、各高速アップロードサーバ400からの受信完了応答時間が所定の閾値よりも長い場合に、当該高速アップロードサーバ400に割り当て済みの分割ファイル送信を別の高速アップロードサーバ400に対して再度実施するようにしている。これにより、図9の従来の課題のシーケンスに対して、クリティカルパスとなる分割アップロードタスクの別のサーバへの再割当が実施されるので、クリティカルパスとなるアップロードタスクによるアップロード完了延伸を防止できる。
According to the present embodiment, when the upload control unit of the terminal 200 has a response time for completion of reception from each high-speed upload
[第6の実施形態]
本発明の第6の実施形態に係る高速アップロードシステムについて、図36〜図38並びに図41〜図42を参照して説明する。図36は高速アップロードシステムの全体構成図である。また、図41は統合管理機能部の構成図、図42は統合管理機能部の未受信ファイル検索及び通知部の動作を説明するフローチャートである。
[Sixth Embodiment]
A high-speed upload system according to the sixth embodiment of the present invention will be described with reference to FIGS. 36 to 38 and FIGS. FIG. 36 is an overall configuration diagram of the high-speed upload system. FIG. 41 is a configuration diagram of the integrated management function unit, and FIG. 42 is a flowchart for explaining the operations of the unreceived file search and notification unit of the integrated management function unit.
図36に示すように、本実施形態では、高速アップロードサーバ400に対してアップロードするための通信ネットワークが切断した場合に、端末200が統合管理機能部110にアップロードID情報を含むアップロード再開を要求する通信を行い、統合管理機能部200が未送信の分割ファイル情報を受信し、未送信の分割ファイルのアップロードを再開する。
As shown in FIG. 36, in this embodiment, when the communication network for uploading to the high-speed upload
統合管理機能部110は端末200が再開を試みるアップロードファイルのアップロードIDと分割ファイルIDを、高速アップロードサーバ400から収集把握し、未受信の分割ファイルのアップロードのみ端末200に行わせる。図36では端末200は統合管理機能部110に対して直接残りの分割ファイルをアップロードする。
The integrated
図37及び図38に本実施形態のシーケンス例を示す。このシーケンス例では、端末200は、高速アップロードを開始する際(ステップS100)、Outh認可の手順を行う(ステップS101)、このOuth認可の手順は、図3のシーケンス例と同様である。次に、端末200は、ある一定以上の大容量のファイルをアップロードする際に複数の高速アップロードサーバ400を用いてアップロードを高速化するためにファイル分割を行う(ステップS102)。ファイル分割サイズは、統合管理機能部110により回答されたファイル分割サイズを利用するか、端末200が保持する端末情報と端末アクセス情報に基づき決定する。端末200は、一定サイズに分割したファイルを統合管理機能部110に回答された1つ以上の高速アップロードサーバ400に対してアップロードを行う(ステップS103)。端末200から高速アップロードサーバ400への分割アップロードは、各サーバ400に対し1つ以上の通信でアップロードしてもよい。なお、アップロードをする際の通信プロトコルは、RFC(Request for Comments)標準規定であるHTTP(Hypertext Transfer Protocol)、HTTPS(Hypertext Transfer Protocol Secure)、FTP(File Transfer Protocol)、FTPS(File Transfer Protocol Secure)などのアプリケーションプロトコルであってもよいし、標準規定のない独自プロトコルであってもよい。
37 and 38 show a sequence example of this embodiment. In this sequence example, when starting high-speed upload (step S100), the terminal 200 performs an Auth authorization procedure (step S101). This Auth authorization procedure is the same as the sequence example of FIG. Next, the terminal 200 performs file division in order to speed up the upload using a plurality of high-speed upload
ここで、端末200の移動等により一部または全部のアクセス回線が切断した場合(ステップS104)、端末200は、当該アクセス回線断を検出し、統合管理機能部110に対してアップロード再開を要求する信号を送信する(ステップS105)。統合管理機能部110は未送信の分割ファイル情報を収集し(ステップS106)、未送信の分割ファイル情報を端末200に回答する(ステップS107)。端末200は、未送信の分割ファイルのアップロードを実施する(ステップS108)。ここで、未送信分割ファイルのアップロードは、最終的に統合管理機能部110が受信できればよく、その通信経路は不問である。通信経路の1つとしては、端末200から高速アップロードサーバ400に直接アップロードするものが挙げられる。他の通信経路としては、回線断以前に用いられていた高速アップロードサーバ400を経由するもの、すなわち高速アップロードサーバ400を用いたアップロードを再開するもの挙げられる。この場合、端末200が経由先として選択する高速アップロードサーバ400は、回線断以前に統合管理機能部110から割り当てられた一つ以上の高速アップロードサーバ400の何れであってもよく、上述の各実施形態で説明したロジックにより任意の高速アップロードサーバ400が選択可能である。
Here, when a part or all of the access line is disconnected due to movement of the terminal 200 (step S104), the terminal 200 detects the access line disconnection and requests the integrated
統合管理機能部110は、端末200から分割アップロードの完了及び性能通知を受信すると(ステップS109)、統合管理機能部110にある分割ファイルを収集するとともに、分割ファイルの統合処理を実施し(ステップS110)、統合したファイルを原本サーバ300にアップロードする(ステップS111)。原本サーバ300は複数あってもよく、別事業者が提供するサービスの原本サーバに高速アップロードシステム100からそれぞれアップロードしてもよい。原本サーバ300への統合アップロード完了後に、原本サーバ300から統合管理機能部110に原本サーバ300へのアップロード完了通知が行われ(ステップS112)、統合管理機能部110は端末200に対して、原本サーバ300へのアップロード完了通知を行う(ステップS113)。
When the integrated
統合管理機能部110は、図41に示すように、ネットワーク通信部117と、高速アップロード実施閾値記憶部111と、高速アップロードサーバ状態記憶部112と、高速アップロード実施判定部113と、分割ファイル統合処理部116と、アップロードID分割ファイル記憶部118と、未受信ファイル検索及び通知部119とを備えている。なお、統合管理機能部110は、原本サーバ300と同じサーバに実装されてもよい。また、統合管理機能部110は、高速アップロードサーバ400と同じサーバに実装されてもよい。
As shown in FIG. 41, the integrated
ネットワーク通信部117と、高速アップロード実施閾値記憶部111と、高速アップロードサーバ状態記憶部112と、高速アップロード実施判定部113は、図22を参照して上述した各部と同様の処理を行う。
The
アップロードID分割ファイル記憶部118は、図27、図28に示すような各高速アップロードサーバ400が受信済みの分割ファイル情報を保持する。
The upload ID divided
未受信ファイル検索及び通知部119は、図42のフローチャートに示すように、端末200からアップロード再開を要求する信号の受信を契機に(ステップS140)、各高速アップロードサーバ400と通信を行い受信済みの分割ファイル情報を収集し(ステップS141)、アップロードID分割ファイル記憶部118に情報を保管すると共に(ステップS142)、未受信ファイルの検索を行い、端末200に未受信ファイルの通知を実施する(ステップS143)。
As shown in the flowchart of FIG. 42, the unreceived file search and
分割ファイル統合処理部116は、端末200から新たに受信する未受信の分割ファイルと、複数の高速アップロードサーバ400から受信済みの分割ファイルを統合してアップロード対象ファイルを復元して、原本サーバ300に原本ファイルのアップロードを行う。
The divided file
本実施形態によれば、高速アップロードサーバ400に対してアップロードするための通信ネットワークが切断した場合に、端末200が統合管理機能部110にアップロード再開を要求する通信を行い、統合管理機能部110に未送信の分割ファイル情報を受信し、未送信の分割ファイルのアップロードを再開するようにしたので、端末200が高速アップロードサーバ400に対して通信可能でなくても、統合管理機能部110に対して通信可能であればアップロードの再開を行うことができる。
According to the present embodiment, when the communication network for uploading to the high-speed upload
[第7の実施形態]
本発明の第7の実施形態に係る高速アップロードシステムについて、図39及び図40並びに図42を参照して説明する。図39は高速アップロードシステムの全体構成図である。また図40はアップロード処理のシーケンス例を示す図、図43は統合管理機能部の未受信ファイル検索及び通知部の動作を説明するフローチャートである。
[Seventh Embodiment]
A high-speed upload system according to the seventh embodiment of the present invention will be described with reference to FIG. 39, FIG. 40, and FIG. FIG. 39 is an overall configuration diagram of the high-speed upload system. FIG. 40 is a diagram showing a sequence example of the upload process, and FIG. 43 is a flowchart for explaining the operation of the unreceived file search and notification unit of the integrated management function unit.
前記第6の実施形態では、高速アップロードサーバ400にアップロードするための通信ネットワークが切断した場合に、端末200が統合管理機能部110に対して直接残りの分割ファイルをアップロードする、または、回線断以前の高速アップロードサーバ400を用いて残りの分割ファイルをアップロードするようにしているが、本実施形態では、図39に示すように統合管理機能部110が高速アップロードサーバ400に再割り当てを行い、端末200が再割り当てされた高速アップロードサーバ400に対して分散アップロードする。
In the sixth embodiment, when the communication network for uploading to the high-speed upload
図40に本実施形態のシーケンス例を示す。尚、本実施形態では、図37に示す第6の実施形態の処理(ステップS100〜S103)と同じ処理を行うため、図40のシーケンス例ではそれ以降の処理について説明する。 FIG. 40 shows a sequence example of this embodiment. In the present embodiment, the same processing as that of the sixth embodiment shown in FIG. 37 (steps S100 to S103) is performed, and therefore the subsequent processing will be described in the sequence example of FIG.
このシーケンス例において、端末200の移動等により一部または全部のアクセス回線が切断した場合(ステップS120)、端末200は、当該アクセス回線断を検出し、統合管理機能部110に対してアップロード再開を要求する信号(アクセス情報を含む)を送信する(ステップS121)。統合管理機能部110は未送信の分割ファイル情報を収集し(ステップS122)、高速アップロードサーバに再割り当てを行う(ステップS123)。統合管理機能部110は端末200に対して、未送信分割ファイル情報の回答、高速アップロードサーバの再割当情報の回答を行い(ステップS124)、端末200は未送信の分割ファイルのアップロードを再開する(ステップS125)。統合管理機能部110は、端末200から分割アップロードの完了及び性能通知を受信すると(ステップS126)、分割ファイルを収集するとともに(ステップS127)、分割ファイルの統合処理を実施し(ステップS128)、統合したファイルを原本サーバ300にアップロードする(ステップS129)。原本サーバ300は複数あってもよく、別事業者が提供するサービスの原本サーバに高速アップロードシステム100からそれぞれアップロードしてもよい。原本サーバ300への統合アップロード完了後に、原本サーバ300から統合管理機能部110に原本サーバ300へのアップロード完了通知が行われ(ステップS130)、統合管理機能部110は端末200に対して、原本サーバ300へのアップロード完了通知を行う(ステップS130)。
In this sequence example, when a part or all of the access line is disconnected due to movement of the terminal 200 (step S120), the terminal 200 detects the access line disconnection and resumes uploading to the integrated
統合管理機能部は、図41を参照して上述した第6の実施形態と同様に、ネットワーク通信部117と、高速アップロード実施閾値記憶部111と、高速アップロードサーバ状態記憶部112と、高速アップロード実施判定部113と、分割ファイル統合処理部115と、アップロードID分割ファイル記憶部118と、未受信ファイル検索及び通知部119とを備えている。なお、統合管理機能部110は、原本サーバ300と同じサーバに実装されてもよい。また、統合管理機能部110は、高速アップロードサーバ400と同じサーバに実装されてもよい。
As in the sixth embodiment described above with reference to FIG. 41, the integrated management function unit includes the
ネットワーク通信部117と、高速アップロード実施閾値記憶部111と、高速アップロードサーバ状態記憶部112と、高速アップロード実施判定部113は、第6の実施形態と同様に、図22を参照して上述した各部と同様の処理を行う。
Similarly to the sixth embodiment, the
アップロードID分割ファイル記憶部118は、第6の実施形態と同様に、図27、図28に示すような各高速アップロードサーバ400が受信済みの分割ファイル情報を保持する。
Similarly to the sixth embodiment, the upload ID divided
未受信ファイル検索及び通知部119は、図43のフローチャートに示すように、端末200からアップロード再開を要求する信号の受信を契機に(ステップS150)、各高速アップロードサーバ400と通信を行い受信済みの分割ファイル情報を収集し(ステップS151)、アップロードID分割ファイル記憶部118に情報を保管すると共に(ステップS152)、未受信ファイルの検索を行い、端末200に未受信ファイルと未受信ファイルを送信させるための新たな複数の高速アップロードサーバを通知する(ステップS153)。
As shown in the flowchart of FIG. 43, the unreceived file search and
分割ファイル統合処理部115は、新たな複数の高速アップロードサーバ400から受信する未受信の分割ファイルと、複数の高速アップロードサーバ400から受信済みの分割ファイルを統合してアップロード対象ファイルを復元して、原本サーバ300に原本ファイルのアップロードを行う。
The divided file
本実施形態によれば、高速アップロードサーバ400に対してアップロードするための通信ネットワークが切断した場合に、端末200が統合管理機能部110にアップロード再開を要求する通信を行い、統合管理機能部110に未送信の分割ファイル情報を受信するとともに、高速アップロードサーバ400への再割当情報に基づき、再割当てされた高速アップロードサーバ400に対して未送信の分割ファイルのアップロードを再開するようにしたので、端末200が高速アップロードサーバ400に通信可能な状況であることが前提であるが、高速アップロードサーバ400を再度使って高速な分散アップロードを再開することができる。
According to the present embodiment, when the communication network for uploading to the high-speed upload
以上、本発明の一実施の形態について詳述したが、本発明はこれに限定されるものではない。例えば、前記統合管理機能部110等の種々の機能部の実装位置は不問であり、ネットワーク構成・形態に応じて種々の実装形態が考えられる。
Although one embodiment of the present invention has been described in detail above, the present invention is not limited to this. For example, the mounting positions of various functional units such as the integrated
また、統合管理機能部110が割り当てる高速アップロードサーバ400の数を決定するアルゴリズム等は、少なくともスループット情報を用いるのであれば種々のアルゴリズムを採用することができ、スループット情報以外の他の情報も加味するようにしてもよい。利用する高速アップロードサーバの場所、性能、分割ファイルサイズ、各高速アップロードサーバにおけるアップロード通信の通信数などの決定アルゴリムについても同様である。
As the algorithm for determining the number of high-speed upload
また、前記各実施形態では、統合管理機能部110は、端末200から取得した端末スループット情報やアクセススループット情報に基づいてアップロードサーバ400の割当処理を行っていたが、割当処理には必ずしも端末スループット情報やアクセススループット情報の双方が必要であるとは限らない。例えば、前記端末スループット情報やアクセススループット情報の一方のみを用いてもよく、どちらの情報も用いないことも可能である。この場合、統合管理機能部110は、適当なアルゴリズムにより割当処理を実施すればよい。
In each of the above embodiments, the integrated
また、前記各実施形態では、原本サーバ300が1つの場合について説明したが、原本サーバ300は複数であってもよい。例えば、統合管理機能部110が、それぞれ異なる事業者が運用する複数の原本サーバ300に対して同じファイルをアップロードしてもよい。この場合、各原本サーバ300に対して並行してアップロードしてもよいし、ある原本サーバ300に対してアップロードした後に他の原本サーバ300にアップロードしてもよく、その形態は不問である。
In each of the above-described embodiments, the case where there is one
100…高速アップロードシステム
110…統合管理機能部
111…高速アップロード実施閾値記憶部
112…高速アップロードサーバ状態記憶部
113…高速アップロード実施判定部
114…アップロードID記憶部
115…高速アップロード管理制御部
116…分割ファイル統合処理部
117…ネットワーク通信部
200…端末
201…端末アクセス情報記憶部
202…分割ファイルアップロード実績記憶部
203…サーバ速度実績記憶部
204…アップロード制御部
205…ネットワーク通信部
211…端末アクセス情報記憶部
212…分割ファイルアップロード実績記憶部
213…サーバ速度実績記憶部
214…アップロード制御部
215…ネットワーク通信部
216…高速アップロードサーバ状態記憶部
300…原本サーバ
400…高速アップロードサーバ
401…分割ファイル受付処理部
402…分割ファイル記憶部
403…アップロードID分割ファイルID記憶部
404…高速アップロードサーバスペック監視部
405…統合管理機能部との連携処理部
406…ネットワーク通信部
DESCRIPTION OF
Claims (7)
前記端末は、全ての分割ファイルの送信が完了する前に端末と高速アップロードシステムを結ぶ全部または一部の通信アクセス回線の切断を検出すると前記統合管理機能部に回線断を通知するアップロード制御部を備え、
前記統合管理機能部は、高速アップロードシステムが端末から受信した分割ファイルの受信状況を管理するとともに前記回線断通知を端末から受領すると未受信の分割ファイル情報を検索して端末に通知する検索通知部を備え、
前記端末のアップロード制御部は、前記未受信分割ファイル情報通知を統合管理機能部から受領すると当該未受信分割ファイル情報に係る未受信分割ファイルを高速アップロードシステムに対して送信する
ことを特徴とする高速アップロードシステム。 Multiple high-speed upload servers that receive and temporarily store files to be uploaded that have been split by the terminal, and uploads that are restored by integrating the split files received from each high-speed upload server In a high-speed upload system with an integrated management function unit that sends the target file to the original server of the upload destination,
When the terminal detects disconnection of all or a part of communication access lines connecting the terminal and the high-speed upload system before transmission of all the divided files is completed, an upload control unit that notifies the integrated management function unit of disconnection Prepared,
The integrated management function unit manages a reception status of the divided file received from the terminal by the high-speed upload system, and searches for unreceived divided file information and notifies the terminal when the line disconnection notification is received from the terminal. With
The upload control unit of the terminal receives the unreceived divided file information notification from the integrated management function unit, and transmits an unreceived divided file related to the unreceived divided file information to the high-speed upload system. Upload system.
ことを特徴とする請求項1記載の高速アップロードシステム。 When the search notification unit of the integrated management function unit receives the line disconnection notification from the terminal, it collects the split file reception status and the received split file from each high-speed upload server, searches the split file information that has not been received, and searches the terminal The high-speed upload system according to claim 1, wherein:
ことを特徴とする請求項2記載の高速アップロードシステム。 3. The high-speed upload system according to claim 2, wherein the upload control unit of the terminal receives the unreceived divided file information notification from the integrated management function unit and directly transmits the unreceived divided file to the integrated management function unit. .
ことを特徴とする請求項2記載の高速アップロードシステム。 Upon receiving the unreceived divided file information notification from the integrated management function unit, the upload control unit of the terminal resumes the upload process to the high-speed upload server that was performed before the communication access line was disconnected. The high-speed upload system according to claim 2, wherein: is transmitted to a high-speed upload server.
前記端末のアップロード制御部は、前記未受信分割ファイル情報及び前記再割当情報に基づき、未受信分割ファイルを高速アップロードサーバに送信する
ことを特徴とする請求項1記載の高速アップロードシステム。 The search notification unit of the integrated management function unit, upon receiving the line disconnection notification from the terminal, collects the reception status of the divided files from each high-speed upload server, searches for the unreceived divided file information, Reassign the upload destination high-speed upload server and notify the terminal of the reallocation information along with the unreceived divided file information.
The high-speed upload system according to claim 1, wherein the upload control unit of the terminal transmits an unreceived divided file to a high-speed upload server based on the unreceived divided file information and the reallocation information.
前記端末のアップロード制御部が、全ての分割ファイルの送信が完了する前に端末と高速アップロードシステムを結ぶ全部または一部の通信アクセス回線の切断を検出すると前記統合管理機能部に回線断を通知し、
前記統合管理機能部の検索通知部が、高速アップロードシステムが端末から受信した分割ファイルの受信状況を管理するとともに前記回線断通知を端末から受領すると未受信の分割ファイル情報を検索して端末に通知し、
前記端末のアップロード制御部が、前記未受信分割ファイル情報通知を統合管理機能部から受領すると当該未受信分割ファイル情報に係る未受信分割ファイルを高速アップロードシステムに対して送信する
ことを特徴とする高速アップロードシステムにおける再送制御方法。 Multiple high-speed upload servers that receive and temporarily store files to be uploaded that have been split by the terminal, and uploads that are restored by integrating the split files received from each high-speed upload server In a high-speed upload system including an integrated management function unit that transmits a target file to an original server of an upload destination, a method for performing retransmission control of divided files,
When the upload control unit of the terminal detects disconnection of all or part of the communication access line connecting the terminal and the high-speed upload system before transmission of all the divided files is completed, it notifies the integrated management function unit of the disconnection. ,
The search notification unit of the integrated management function unit manages the reception status of the divided file received from the terminal by the high-speed upload system, and when the line disconnection notification is received from the terminal, searches for the unreceived divided file information and notifies the terminal And
When the upload control unit of the terminal receives the unreceived divided file information notification from the integrated management function unit, the upload control unit transmits an unreceived divided file related to the unreceived divided file information to the high-speed upload system. A retransmission control method in an upload system.
6. A program that causes a computer to function as each unit according to claim 1.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017007313A JP6593886B2 (en) | 2017-01-19 | 2017-01-19 | High-speed upload system, retransmission control method thereof, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017007313A JP6593886B2 (en) | 2017-01-19 | 2017-01-19 | High-speed upload system, retransmission control method thereof, and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018116528A JP2018116528A (en) | 2018-07-26 |
JP6593886B2 true JP6593886B2 (en) | 2019-10-23 |
Family
ID=62985175
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017007313A Active JP6593886B2 (en) | 2017-01-19 | 2017-01-19 | High-speed upload system, retransmission control method thereof, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6593886B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022030830A (en) | 2020-08-07 | 2022-02-18 | エヌ・ティ・ティ・コミュニケーションズ株式会社 | Communication control device, communication control method and communication control program |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11242640A (en) * | 1998-02-25 | 1999-09-07 | Kdd Corp | File transfer method |
JPH11272573A (en) * | 1998-03-19 | 1999-10-08 | Toshiba Corp | File transfer method, file transfer system and recording medium |
US20100235432A1 (en) * | 2006-08-21 | 2010-09-16 | Telefonaktiebolaget L M Ericsson | Distributed Server Network for Providing Triple and Play Services to End Users |
JP2008271097A (en) * | 2007-04-19 | 2008-11-06 | Hitachi Ltd | Communication apparatus and client apparatus |
JP2015090511A (en) * | 2013-11-05 | 2015-05-11 | 株式会社日立システムズ | Distributed web upload system |
-
2017
- 2017-01-19 JP JP2017007313A patent/JP6593886B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2018116528A (en) | 2018-07-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10542076B2 (en) | Cloud service control and management architecture expanded to interface the network stratum | |
US20180316607A1 (en) | Providing non-interrupt failover using a link aggregation mechanism | |
JP5944537B2 (en) | Communication path management method | |
US9288162B2 (en) | Adaptive infrastructure for distributed virtual switch | |
US9143452B2 (en) | Data processing | |
EP3353952B1 (en) | Managing groups of servers | |
US10305822B2 (en) | Service chain routing method and system, and equipment in system | |
WO2019134648A1 (en) | Implementation method and device for control plane resource migration, and network function entity | |
KR102392120B1 (en) | Processing method, device and system for nf component abnormality | |
CN113472646B (en) | Data transmission method, node, network manager and system | |
JP6593886B2 (en) | High-speed upload system, retransmission control method thereof, and program | |
US20140317272A1 (en) | Method of collecting information, content network management system, and node apparatus using management interface in content network based on information-centric networking | |
JP6666810B2 (en) | High speed upload system, method and program | |
KR20100100936A (en) | Method, system and device for switching source | |
CN108449281B (en) | Network flow cooperative unloading method and cooperative unloading controller | |
JP6512664B2 (en) | Fast upload system and method | |
Turkovic et al. | Elastic Slicing in Programmable Networks | |
CN117014357A (en) | Method, device and storage medium for transmitting route | |
KR101467022B1 (en) | System and method to configure and manage multi-domain overlay network in the smart network optimized for content delivery | |
JP2014039097A (en) | Network configuration system, network configuration apparatus, network configuration method, and network configuration program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181204 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190830 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190918 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190919 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6593886 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |