CN108259590A - 一种互联网与局域网文件智能同步方法、装置及系统 - Google Patents

一种互联网与局域网文件智能同步方法、装置及系统 Download PDF

Info

Publication number
CN108259590A
CN108259590A CN201810022948.5A CN201810022948A CN108259590A CN 108259590 A CN108259590 A CN 108259590A CN 201810022948 A CN201810022948 A CN 201810022948A CN 108259590 A CN108259590 A CN 108259590A
Authority
CN
China
Prior art keywords
file
lan
internet
operation end
intelligent synchronization
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810022948.5A
Other languages
English (en)
Other versions
CN108259590B (zh
Inventor
徐震东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Panicle Saint Mdt Infotech Ltd
Original Assignee
Guangzhou Panicle Saint Mdt Infotech Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Panicle Saint Mdt Infotech Ltd filed Critical Guangzhou Panicle Saint Mdt Infotech Ltd
Priority to CN201810022948.5A priority Critical patent/CN108259590B/zh
Publication of CN108259590A publication Critical patent/CN108259590A/zh
Application granted granted Critical
Publication of CN108259590B publication Critical patent/CN108259590B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种互联网与局域网文件智能同步方法、装置及系统，属于通讯领域，所述方法包括：在客户终端上传文件到互联网云端的同时,获取基于HTTP协议的文件列表、解析并记录文件路径到数据库；调用API数据接口根据文件路径读取最近N分钟内上传的文件；基于HTTP协议的多线程并发下载文件，进行分段预缓存同步；接受局域网内作业端的文件处理请求并进行响应；所述装置包括调用读取模块、下载预缓存模块、服务响应模块、缓存监控模块、容错模块；所述系统包括位于局域网中的作业端和上述装置(工作环境网络服务器)，作业端通过工作环境网络服务器与互联网云端连接；本发明实现了互联网与局域网文件的智能同步，提高了作业效率。

Description

一种互联网与局域网文件智能同步方法、装置及系统
技术领域
本发明涉及通讯领域，特别是涉及一种互联网与局域网文件智能同步方法、装置及系统。
背景技术
针对客户终端上传到互联网上的文件，如图片、视频等，某些用户由于特殊需求，需要大量重复的查看；以二手车评估为例,客户需要对二手车做评估时,拍摄20张左右的图片和视频,上传到云端服务器,评估师需要针对照片,评估出车辆状况以及价格。因为业务对评估时效有严格的要求,评估订单上传上来,每一秒钟都很重要,但是众所周知,查看网络文件的速度受带宽,文件大小等等因素的影响,导致客户拍摄并传到公共网络(互联网)的高清文件,通过现有的HTTP(HTTP，Hyper Text Transfer Protocol)协议网络文件服务器下载并查看，受工作网络(局域网)带宽影响，业务作业时读取延时(按照8M高清图片计算，超过3秒以上)。而且不能单次批量加载每笔业务单下的所有关联文件，整单业务关联文件访问用时超过起码1分钟以上(按照每单20文件、每个访问延时3秒计算，还有高清视频)，评估师每天看上万张照片,完全无法忍受，而且评估流程分为三个步骤部分,每张照片需要三个评估师分别看完,才能出结果，导致整体业务缓慢。
由此可见，上述现有的查看互联网上的图片、视频等文件的方法及系统，具有如下缺陷：(1)客户终端上传至互联网的文件无法快速同步到局域网；(2)局域网访问文件延时超过3000ms才能读取到内容；(3)严重影响业务作业效率。因此，如何能创设一种互联网与局域网文件智能同步方法、装置及系统,实属当前急需改进的目标。
发明内容
本发明要解决的技术问题是提供一种互联网与局域网文件智能同步方法、装置及系统，以提高作业效率。
为解决上述技术问题，本发明采用如下技术方案：
一方面，提供一种互联网与局域网文件智能同步方法，包括：
在客户终端上传文件到互联网云端的同时,获取基于HTTP协议的文件列表、解析并记录文件路径到数据库；
调用API数据接口根据文件路径读取最近N分钟内上传的文件；
基于HTTP协议的多线程并发下载文件，进行分段预缓存同步；
接受局域网内作业端的文件处理请求并进行响应。
进一步地，在多线程并发下载文件的同时，使用websockect通讯,实时展示多线程缓冲下载详情。
进一步地，如下载文件失败，自动关闭线程,并重新二次同步下载。
进一步地，对于下载中的文件，所述作业端检测到有文件查看需求自动切换到原有云端网络路径。
进一步地，所述作业端通过局域网网络环境判断是否将文件预缓存，并自动分流至外部公共网络和内部缓存网络。
另一方面，提供一种互联网与局域网文件智能同步装置，包括：
调用读取模块，用于调用API数据接口根据文件路径读取最近N分钟内上传的文件；所述文件路径的获取途径为：在客户终端上传文件到互联网云端的同时,获取基于HTTP协议的文件列表、解析并记录文件路径到数据库；
下载预缓存模块，用于基于HTTP协议的多线程并发下载文件，进行分段预缓存同步；
服务响应模块，用于接受局域网内作业端的文件处理请求并进行响应。
进一步地，包括：缓存监控模块，用于在多线程并发下载文件的同时，使用websockect通讯,实时展示多线程缓冲下载详情。
进一步地，包括容错模块，用于在检测到下载文件失败时，自动关闭线程,并重新二次同步下载。
再一方面，提供一种互联网与局域网文件智能同步系统，包括位于局域网中的作业端和工作环境网络服务器，所述作业端通过工作环境网络服务器与互联网云端连接；所述工作环境网络服务器为上述的互联网与局域网文件智能同步装置；
所述作业端，用于通过接口给工作环境网络服务器发送文件处理请求并获得响应；且通过局域网网络环境判断是否将文件预缓存，并自动分流至外部公共网络和内部缓存网络。
进一步地，所述对下载中的文件，所述作业端检测到有文件查看需求自动切换到原有云端网络路径。
通过采用上述技术方案，本发明至少具有以下优点：
(1)客户终端上传到互联网的文件能实时够快同步至工作环境网络服务器临时存放，为内部网络(局域网)提供缓存访问，实现0ms延时工作，提高文件查看效率。
(2)提供即时多线程缓冲情况可视化监视平台，能够清晰查看当前所有正在同步文件的同步进度、与同步状态，并提供接口与作业端的业务作业平台对接。
(3)设置容错机制，在检测到下载文件失败时，自动关闭线程,并重新二次同步下载，提高缓存成功率。
(4)设置路由转换机制，用于对下载中的文件，作业端检测到有文件查看需求自动切换到原有云端网络路径，选择多样。
(5)作业端可自定义HTTP文件请求服务程序，如可通过局域网网络环境判断是否将文件预缓存，并自动分流至外部公共网络和内部缓存网络，提高作业效率。
附图说明
上述仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，以下结合附图与具体实施方式对本发明作进一步的详细说明。
图1是本发明一实施例提供的方法流程图；
图2是本发明一实施例提供的装置结构示意图；
图3是本发明一实施例提供的系统示意图。
具体实施方式
为了能够更清楚了解本发明的技术手段，以下结合附图对本发明的实施方式作进一步的详细说明。
如图1、图3所示，本发明一实施例提供了一种互联网与局域网文件智能同步方法，包括：
101：在客户终端上传文件到互联网云端的同时,获取基于HTTP协议的文件列表、解析并记录文件路径到数据库；
上述文件可为图片、视频；对于二手车评估系统而言，客户终端需要对二手车做评估时,拍摄20张左右的图片和视频,上传到互联网云端服务器，在客户终端上传的同时，获取基于HTTP协议的文件列表、解析并记录文件路径到数据库。
102：调用API数据接口根据文件路径读取最近N分钟内上传的文件；
在局域网内，搭建一个缓冲服务器(工作环境网络服务器)，该服务器通过API数据接口根据101步骤记录的文件路径读取最近N分钟内上传的文件，时间可自行根据需求设定。
103：基于HTTP协议的多线程并发下载文件，进行分段预缓存同步；
对于读取的文件，进行基于HTTP协议的多线程并发同时下载文件，为了提高大文件(视频屏文件)的同步速度，将文件切割成几块下载，实现分段预缓存同步。
104：接受局域网内作业端的文件处理请求并进行响应。
以二手车评估为例，当局域网内的作业端评估师有文件查看需求时，缓存服务器给出响应，可以及时查看缓存文件，提高了作业效率。
利用本实施例提供的上述方法，客户终端上传到互联网的文件能实时够快同步至工作环境网络服务器临时存放，为内部网络(局域网)提供缓存访问，实现0ms延时工作，提高文件查看效率。
本实施例中，优选地，在多线程并发下载文件的同时，可使用websockect通讯,实时展示多线程缓冲下载详情。通过即时多线程缓冲情况可视化监视，能够清晰查看当前所有正在同步文件的同步进度、与同步状态。
本实施例中，优选地，设置容错机制，如下载文件失败，自动关闭线程,并重新二次同步下载，提高缓存成功率。
本实施例中，优选地，设置路由转换机制，对于下载中的文件，作业端检测到有文件查看需求自动切换到原有云端网络路径，具有选择多样性。
本实施例中，优选地，作业端可直接自定义HTTP文件请求服务程序，如可通过局域网网络环境判断是否将文件预缓存，如果局域网网络环境不好，直接请求将文件进行预缓存操作，如局域网网络环境较好，也可部分采用缓存，部分自动分流至外部公共网络，提高作业效率。
如图2所示，本发明另一实施例提供了一种互联网与局域网文件智能同步装置，包括：
调用读取模块201，用于调用API数据接口根据文件路径读取最近N分钟内上传的文件；所述文件路径的获取途径为：在客户终端上传文件到互联网云端的同时,获取基于HTTP协议的文件列表、解析并记录文件路径到数据库；
下载预缓存模块202，用于基于HTTP协议的多线程并发下载文件，进行分段预缓存同步；
服务响应模块203，用于接受局域网内作业端的文件处理请求并进行响应。
本实施例中，优选地，还包括缓存监控模块205，用于在多线程并发下载文件的同时，使用websockect通讯,实时展示多线程缓冲下载详情。
本实施例中，优选地，还包括容错模块204，用于在检测到下载文件失败时，自动关闭线程,并重新二次同步下载。
本实施例中的一种互联网与局域网文件智能同步装置，该装置可为工作环境网络服务器(缓存服务器)。该装置中通过设置调用读取模块201、下载预缓存模块202、服务响应模块203、容错模块204、缓存监控模块205，使客户终端上传到互联网的文件能实时够快同步至工作环境网络服务器临时存放，为内部网络(局域网)提供缓存访问，实现0ms延时工作，提高文件查看效率、可视化强、缓存成功率高。
如图3所示，本发明又一实施例提供一种互联网与局域网文件智能同步系统，包括位于局域网中的作业端(文件浏览工作站)和工作环境网络服务器，所述作业端通过工作环境网络服务器与互联网云端连接；所述工作环境网络服务器采用上一实施例(与图2对应的实施例)的互联网与局域网文件智能同步装置；
作业端，用于通过接口给工作环境网络服务器发送文件处理请求并获得响应；且通过局域网网络环境判断是否将文件预缓存，并自动分流至外部公共网络和内部缓存网络；对下载中的文件，所述作业端检测到有文件查看需求自动切换到原有云端网络路径。。
本实施例中的一种互联网与局域网文件智能同步系统，通过设置具有调用读取模块201、下载预缓存模块202、服务响应模块203、容错模块204、缓存监控模块205的缓存服务器(工作网络服务器)，使客户终端上传到互联网的文件能实时够快同步至工作环境网络服务器临时存放，为内部网络(局域网)内的作业端提供缓存访问，实现0ms延时工作，提高文件查看效率、可视化强、缓存成功率高。且作业端可通过网络环境判断是否存在缓存服务器并自动分流至外部公共网络和内部缓存网络，大大提高了作业效率，另外作业端还设置有路由转换机制，对下载中的文件，作业端检测到有文件查看需求自动切换到原有云端网络路径，具有选择多样性。
以上所述，仅是本发明的较佳实施例而已，并非对本发明作任何形式上的限制，本领域技术人员利用上述揭示的技术内容做出些许简单修改、等同变化或修饰，均落在本发明的保护范围内。

Claims (10)

1.一种互联网与局域网文件智能同步方法，其特征在于，包括：
在客户终端上传文件到互联网云端的同时,获取基于HTTP协议的文件列表、解析并记录文件路径到数据库；
调用API数据接口根据文件路径读取最近N分钟内上传的文件；
基于HTTP协议的多线程并发下载文件，进行分段预缓存同步；
接受局域网内作业端的文件处理请求并进行响应。
2.根据权利要求1所述的互联网与局域网文件智能同步方法，其特征在于，在多线程并发下载文件的同时，使用websockect通讯,实时展示多线程缓冲下载详情。
3.根据权利要求1所述的互联网与局域网文件智能同步方法，其特征在于，如下载文件失败，自动关闭线程,并重新二次同步下载。
4.根据权利要求1所述的互联网与局域网文件智能同步方法，其特征在于，对于下载中的文件，所述作业端检测到有文件查看需求自动切换到原有云端网络路径。
5.根据权利要求1所述的互联网与局域网文件智能同步方法，其特征在于，所述作业端通过局域网网络环境判断是否将文件预缓存，并自动分流至外部公共网络和内部缓存网络。
6.一种互联网与局域网文件智能同步装置，其特征在于，包括：
调用读取模块，用于调用API数据接口根据文件路径读取最近N分钟内上传的文件；所述文件路径的获取途径为：在客户终端上传文件到互联网云端的同时,获取基于HTTP协议的文件列表、解析并记录文件路径到数据库；
下载预缓存模块，用于基于HTTP协议的多线程并发下载文件，进行分段预缓存同步；
服务响应模块，用于接受局域网内作业端的文件处理请求并进行响应。
7.根据权利要求6所述的互联网与局域网文件智能同步装置，其特征在于，包括：缓存监控模块，用于在多线程并发下载文件的同时，使用websockect通讯,实时展示多线程缓冲下载详情。
8.根据权利要求6所述的互联网与局域网文件智能同步装置，其特征在于，包括容错模块，用于在检测到下载文件失败时，自动关闭线程,并重新二次同步下载。
9.一种互联网与局域网文件智能同步系统，其特征在于，包括位于局域网中的作业端和工作环境网络服务器，所述作业端通过工作环境网络服务器与互联网云端连接；所述工作环境网络服务器为权利要求6-8任一项所述的互联网与局域网文件智能同步装置；
所述作业端，用于通过接口给工作环境网络服务器发送文件处理请求并获得响应；且通过局域网网络环境判断是否将文件预缓存，并自动分流至外部公共网络和内部缓存网络。
10.根据权利要求9所述的互联网与局域网文件智能同步系统，其特征在于，对下载中的文件，所述作业端检测到有文件查看需求自动切换到原有云端网络路径。
CN201810022948.5A 2018-01-10 2018-01-10 一种互联网与局域网文件智能同步方法、装置及系统 Active CN108259590B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810022948.5A CN108259590B (zh) 2018-01-10 2018-01-10 一种互联网与局域网文件智能同步方法、装置及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810022948.5A CN108259590B (zh) 2018-01-10 2018-01-10 一种互联网与局域网文件智能同步方法、装置及系统

Publications (2)

Publication Number Publication Date
CN108259590A true CN108259590A (zh) 2018-07-06
CN108259590B CN108259590B (zh) 2021-07-30

Family

ID=62724777

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810022948.5A Active CN108259590B (zh) 2018-01-10 2018-01-10 一种互联网与局域网文件智能同步方法、装置及系统

Country Status (1)

Country Link
CN (1) CN108259590B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102325148A (zh) * 2011-05-25 2012-01-18 重庆新媒农信科技有限公司 一种WebService服务调用方法
WO2012119539A1 (zh) * 2011-03-07 2012-09-13 联想(北京)有限公司 文件同步方法、文件同步装置及电子设备
CN203313219U (zh) * 2013-06-25 2013-11-27 余兵 一种局域网缓存加速系统
CN103916479A (zh) * 2014-04-15 2014-07-09 大连理工大学 一种基于工作组文件的云同步局域网加速系统
CN104065676A (zh) * 2013-03-19 2014-09-24 联想(北京)有限公司 文件同步方法及文件同步设备
CN104461563A (zh) * 2014-12-24 2015-03-25 浪潮电子信息产业股份有限公司 一种在linux下远程定时检测FTP服务器新增文件的方法
US20170262347A1 (en) * 2016-03-09 2017-09-14 Commvault Systems, Inc. Virtual server cloud file system for virtual machine restore to cloud operations

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012119539A1 (zh) * 2011-03-07 2012-09-13 联想(北京)有限公司 文件同步方法、文件同步装置及电子设备
CN102325148A (zh) * 2011-05-25 2012-01-18 重庆新媒农信科技有限公司 一种WebService服务调用方法
CN104065676A (zh) * 2013-03-19 2014-09-24 联想(北京)有限公司 文件同步方法及文件同步设备
CN203313219U (zh) * 2013-06-25 2013-11-27 余兵 一种局域网缓存加速系统
CN103916479A (zh) * 2014-04-15 2014-07-09 大连理工大学 一种基于工作组文件的云同步局域网加速系统
CN104461563A (zh) * 2014-12-24 2015-03-25 浪潮电子信息产业股份有限公司 一种在linux下远程定时检测FTP服务器新增文件的方法
US20170262347A1 (en) * 2016-03-09 2017-09-14 Commvault Systems, Inc. Virtual server cloud file system for virtual machine restore to cloud operations

Also Published As

Publication number Publication date
CN108259590B (zh) 2021-07-30

Similar Documents

Publication Publication Date Title
US8745267B2 (en) Enhancement of upload and/or download performance based on client and/or server feedback information
US20160094962A1 (en) System and method for transmitting and receiving media messages
CN106302445B (zh) 用于处理请求的方法和装置
CN108234207B (zh) 一种基于内容分发网络cdn的故障定位方法和装置
CN105024872B (zh) 网络性能测试的方法及装置
US9489773B2 (en) Caching support for visual search and augmented reality in mobile networks
CN105794175B (zh) 输送web内容的系统的性能度量
EP2610767A1 (en) Web page download time analysis
CN106034330A (zh) 基于内容分发网络的移动终端流量处理方法、装置及系统
CN101459571B (zh) 一种网站镜像的方法、系统及装置
CN105337753B (zh) 一种互联网真实质量监测方法及装置
CN103634406A (zh) 文件同步方法及其终端
CN107463657A (zh) 文件操作方法及终端
CN106230978A (zh) 分布式缓存同步方法、装置及系统
CN107438051A (zh) 流媒体快速启动方法、装置和系统
CN109982293A (zh) 流量产品推送方法、系统、电子设备及存储介质
CN108881728A (zh) 一种线下跨设备影像拍摄的方法、系统和拍摄设备
CN106598966B (zh) 一种网页处理方法和装置
Doan et al. Measuring decentralized video streaming: A case study of dtube
CN106130791A (zh) 基于服务质量的缓存设备服务能力遍历测试系统及方法
CN104348893B (zh) 一种数据同步的方法及装置
CN103036746B (zh) 基于网络中间点的网页响应时间被动测量方法及系统
CN108259590A (zh) 一种互联网与局域网文件智能同步方法、装置及系统
CN103731396B (zh) 资源访问方法、系统及缓存资源信息推送装置
CN107528909A (zh) 一种网络通讯录数据云同步的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant