CN106027562A - 一种文件网络映射方法及装置 - Google Patents

一种文件网络映射方法及装置 Download PDF

Info

Publication number
CN106027562A
CN106027562A CN201610533357.5A CN201610533357A CN106027562A CN 106027562 A CN106027562 A CN 106027562A CN 201610533357 A CN201610533357 A CN 201610533357A CN 106027562 A CN106027562 A CN 106027562A
Authority
CN
China
Prior art keywords
file
fifo
source
ssh
host
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610533357.5A
Other languages
English (en)
Other versions
CN106027562B (zh
Inventor
郝建明
张炼
路敬原
金凡
张园园
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Unionpay Co Ltd
Original Assignee
China Unionpay Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Unionpay Co Ltd filed Critical China Unionpay Co Ltd
Priority to CN201610533357.5A priority Critical patent/CN106027562B/zh
Publication of CN106027562A publication Critical patent/CN106027562A/zh
Application granted granted Critical
Publication of CN106027562B publication Critical patent/CN106027562B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/02—Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
    • H04L63/029—Firewall traversal, e.g. tunnelling or, creating pinholes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0608—Saving storage space on storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F5/00—Methods or arrangements for data conversion without changing the order or content of the data handled
    • G06F5/06—Methods or arrangements for data conversion without changing the order or content of the data handled for changing the speed of data flow, i.e. speed regularising or timing, e.g. delay lines, FIFO buffers; over- or underrun control therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供一种文件网络映射方法及装置，该文件网络映射方法包括：在源主机中创建FIFO_IN文件，将目标主机通过SSH登录至源主机；在目标主机中创建FIFO_OUT文件；通过SSH隧道和命名管道将FIFO_IN重定向至FIFO_OUT文件，以建立FIFO_IN文件及FIFO_OUT文件的映射关系；在源主机中将源文件或源进程输出写入FIFO_IN文件；通过映射关系将源文件或源进程输出从FIFO_IN文件映射至FIFO_OUT文件；使目标主机中的目标进程从FIFO_OUT文件中读取源文件或源进程输出。通过实施本发明，可提高文件跨机映射、传输的安全性。同时，由于实际传输过程不占用磁盘空间，且多进程可同时进行，可以减少磁盘读写造成的时间消耗。

Description

一种文件网络映射方法及装置
技术领域
本发明是关于数据共享技术，具体地，是关于一种文件网络映射方法及装置。
背景技术
在数据中心进行文件处理时，经常需要对大量压缩文件进行解压、传输和处理等操作(如数据库的备份、还原、共享等)，传统的操作过程需要分步进行，后一步需要等待前一步实施完毕，否则无法进行操作，过程中会占用大量的磁盘空间，并且非常耗时。
在现有的文件传输技术中，可以使用NFS，Samba等实现跨机的文件共享，但是此方法需要部署Server和Client程序、需要root权限进行新建和挂载文件系统，并且大多是明文传输，难以保证文件传输的安全性。
或者，可以使用sftp、ftp等对文件进行跨机传输，然后再进行后续处理，但是这些操作必须串行实施，会延长整体时间，且过程中会占用磁盘空间和网络带宽资源。
再者，使用“匿名管道”技术可以并发处理文件流，但是有许多用户应用程序不支持“匿名管道”技术，“匿名管道”技术也不支持跨机调用。
发明内容
本发明实施例的主要目的在于提供一种文件网络映射方法及装置，以减少磁盘读写造成的时间消耗，并提高文件跨机映射、传输的安全性。
为了实现上述目的，本发明实施例提供一种文件网络映射方法，所述的文件网络映射方法包括：在源主机中创建FIFO_IN文件，将目标主机通过SSH登录至所述源主机；在所述目标主机中创建FIFO_OUT文件；通过SSH隧道和命名管道将所述FIFO_IN文件重定向至所述的FIFO_OUT文件，以建立所述FIFO_IN文件及FIFO_OUT文件的映射关系；在所述源主机中将源文件或源进程输出写入所述的FIFO_IN文件；通过所述映射关系将所述源文件或源进程输出从所述FIFO_IN文件映射至所述的FIFO_OUT文件；使所述目标主机中的目标进程从所述FIFO_OUT文件中读取所述的源文件或源进程输出。
在一实施例中，上述的通过所述映射关系将所述源文件或源进程输出从所述FIFO_IN文件映射至所述的FIFO_OUT文件，具体包括：将写入所述FIFO_IN文件的源文件或源进程输出通过标准输出由所述SSH隧道的SSHD进程映射至所述SSH隧道的SSH进程；所述目标主机从所述SSH进程中读取所述源文件或源进程输出，并通过标准输出将所述源文件或源进程输出重定向至所述的FIFO_OUT文件。
在一实施例中，上述的通过所述映射关系将所述源文件或源进程输出从所述FIFO_IN文件映射至所述的FIFO_OUT文件，具体包括：将写入所述FIFO_IN文件的源文件或源进程输出进行压缩，通过标准输出由所述SSH隧道的SSHD进程将压缩后的数据映射至所述SSH隧道的SSH进程；所述目标主机从所述SSH进程中读取所述压缩后的数据，进行解压缩，并通过标准输出将解压缩后得到的所述源文件或源进程输出重定向至所述的FIFO_OUT文件。
在一实施例中，上述的通过SSH隧道和命名管道将所述FIFO_IN文件重定向至所述的FIFO_OUT文件，具体包括：通过cat进程将所述FIFO_IN文件重定向至所述源主机的标准输出；通过SSH隧道和命名管道将所述源主机的标准输出重定向至在所述目标主机中创建的INTERNAL_FIFO文件；通过SSH隧道和命名管道将所述INTERNAL_FIFO文件重定向至所述的FIFO_OUT文件。
在一实施例中，上述的通过SSH隧道和命名管道将所述FIFO_IN文件重定向至所述的FIFO_OUT文件，具体包括：通过cat进程将所述FIFO_IN文件重定向至所述源主机的标准输出；通过SSH隧道和命名管道将所述源主机的标准输出重定向至所述的FIFO_OUT文件。
本发明实施例还提供一种文件网络映射装置，所述的文件网络映射装置包括：FIFO_IN文件创建单元，用于在源主机中创建FIFO_IN文件，并使将目标主机通过SSH登录至所述源主机；FIFO_OUT文件创建单元，用于在所述目标主机中创建FIFO_OUT文件；映射关系建立单元，用于通过SSH隧道和命名管道将所述FIFO_IN文件重定向至所述的FIFO_OUT文件，以建立所述FIFO_IN文件及FIFO_OUT文件的映射关系；源文件写入单元，用于在所述源主机中将源文件或源进程输出写入所述的FIFO_IN文件；文件映射单元，用于通过所述映射关系将所述源文件或源进程输出从所述FIFO_IN文件映射至所述的FIFO_OUT文件；文件读取单元，用于使所述目标主机中的目标进程从所述FIFO_OUT文件中读取所述的源文件或源进程输出。
在一实施例中，上述的文件映射单元具体用于：将写入所述FIFO_IN文件的源文件或源进程输出通过标准输出由所述SSH隧道的SSHD进程映射至所述SSH隧道的SSH进程；使所述目标主机从所述SSH进程中读取所述源文件或源进程输出，并通过标准输出将所述源文件或源进程输出重定向至所述的FIFO_OUT文件。
在一实施例中，上述的文件映射单元具体用于：将写入所述FIFO_IN文件的源文件或源进程输出进行压缩，通过标准输出由所述SSH隧道的SSHD进程将压缩后的数据映射至所述SSH隧道的SSH进程；使所述目标主机从所述SSH进程中读取所述压缩后的数据，进行解压缩，并通过标准输出将解压缩后得到的所述源文件或源进程输出重定向至所述的FIFO_OUT文件。
在一实施例中，上述的映射关系建立单元具体用于：通过cat进程将所述FIFO_IN文件重定向至所述源主机的标准输出；通过SSH隧道和命名管道将所述源主机的标准输出重定向至在所述目标主机中创建的INTERNAL_FIFO文件；通过SSH隧道和命名管道将所述INTERNAL_FIFO文件重定向至所述的FIFO_OUT文件。
在一实施例中，上述的映射关系建立单元具体用于：通过cat进程将所述FIFO_IN文件重定向至所述源主机的标准输出；通过SSH隧道和命名管道将所述源主机的标准输出重定向至所述的FIFO_OUT文件。
本发明实施例的有益效果在于，使用ssh作为安全隧道，提高文件跨机映射、传输的安全性。同时，由于实际传输过程不占用磁盘空间，可以减少磁盘读写造成的时间消耗。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1A及图1B为根据本发明实施例的文件网络映射方法的流程图；
图2A为根据本发明实施例的文件网络映射方法的一具体应用实例的流程图；
图2B为根据本发明实施例的阻塞型映射过程的数据流向示意图；
图3A为根据本发明实施例的文件网络映射方法的另一具体应用实例的流程图；
图3B为根据本发明实施例的非阻塞型映射过程的数据流向示意图；
图4A及图4B为根据本发明实施例的文件网络映射方法与传统方法的对比图；
图5为根据本发明实施例的文件网络映射装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例提供一种文件网络映射方法及装置。以下结合附图对本发明进行详细说明。
本发明实施例提供一种文件网络映射方法，如图1A及图1B所示，该文件网络映射方法主要包括以下各步骤：
步骤S101：在源主机中创建FIFO_IN文件，将目标主机通过SSH(Secure Shell，安全外壳协议)登录至源主机；
步骤S102：在目标主机中创建FIFO_OUT文件；
步骤S103：通过SSH隧道和命名管道将FIFO_IN文件重定向至FIFO_OUT文件，以建立FIFO_IN文件及FIFO_OUT文件的映射关系；
步骤S104：在源主机中将源文件或源进程输出写入FIFO_IN文件；
步骤S105：通过映射关系将源文件或源进程输出从FIFO_IN文件映射至FIFO_OUT文件；
步骤S106：使目标主机中的目标进程从FIFO_OUT文件中读取源文件或源进程输出。
通过上述的步骤S101至步骤S106，本发明实施例的文件网络映射方法，使用ssh作为安全隧道，提高文件跨机映射、传输的安全性。同时，由于实际传输过程不占用磁盘空间，可以减少磁盘读写造成的时间消耗。
以下结合具体示例，对本发明实施例的文件网络映射方法的各个步骤做进一步说明。
上述步骤S101，在源主机中创建FIFO_IN文件，将目标主机通过SSH登录至源主机。
在本发明实施例中，是通过命名通道FIFO进行文件或进程的传输及映射。因此，首先再源主机中创建FIFO_IN文件，并使目标主机(本地)通过SSH登录到源主机(远程)。
然后执行上述步骤S102，在目标主机中创建FIFO_OUT文件，用以在后续的处理过程中与FIFO_IN文件形成映射关系。
上述的步骤S103：通过SSH隧道和命名管道将FIFO_IN文件重定向至FIFO_OUT文件，以建立FIFO_IN文件及FIFO_OUT文件的映射关系。
具体地，是在源主机中创建cat进程进行重定向，将FIFO_IN文件重定向至源主机的标准输出，再将源主机的标准输出通过SSH隧道及命名管道重定向到FIFO_OUT文件中。
在创建了FIFO_IN文件和FIFO_OUT文件之间的映射关系后，通过上述步骤S104，在源主机中将要进行传输的源文件或源进程输出写入FIFO_IN文件中。
由于上述所建立的映射关系，源文件或源进程输出可映射至FIFO_OUT文件中(上述步骤S105)。具体地，是将写入FIFO_IN文件的源文件或源进程输出通过标准输出由SSH隧道的SSHD进程映射至SSH隧道的SSH进程；所述目标主机从SSH进程中读取源文件或源进程输出，并通过标准输出将源文件或源进程输出重定向至FIFO_OUT文件。
在另一实施例中，还可加入对源文件或源进程输出进行压缩和解压缩的过程。具体地，是将写入FIFO_IN文件的源文件或源进程输出进行压缩，通过标准输出由SSH隧道的SSHD进程将压缩后的数据映射至SSH隧道的SSH进程；所述目标主机从SSH进程中读取压缩后的数据，进行解压缩，并通过标准输出将解压缩后得到的源文件或源进程输出重定向至FIFO_OUT文件。需要说明的是，对源文件或源进程输出进行压缩和解压缩的过程可在实际应用中根据需要进行添加。或者，也可根据需要添加其他的进程，本发明并不以此为限。
目标主机中的目标进程则可从FIFO_OUT文件中读取该源文件或源进程输出，然后在目标主机中进行后续的过程。
在实际应用中，是将文件在源主机和目标主机之间进行映射，对于源进程输出的映射，则需先将源进程输出写入文件中，再将文件在源主机和目标主机之间进行映射。
上述的过程是本发明实施例的文件网络映射方法在跨机情况下建立文件网络映射的主要过程。在具体实施时，本发明实施例的文件网络映射方法可具体通过阻塞型和非阻塞型两种方式实施。
方式一：阻塞型映射过程。
阻塞型中各进程均为同步调用，执行完毕后会占用一个会话(session)，不会返回到命令提示符中，但是结构简单。
如图2A所示，阻塞型映射过程的主要步骤如下：
步骤a.目的主机(目标主机，本地)创建FIFO_OUT文件；
步骤b.目的主机(本地)通过ssh登录到来源主机(源主机，远程)；
步骤c.来源主机(远程)创建FIFO_IN文件；
步骤d.来源主机(远程)创建cat和gzip-f进程进行重定向；
步骤e.来源主机(远程)的标准输出通过ssh隧道和管道(虚线)重定向到gzip-d-f进程，并最终重定向到FIFO_OUT文件；
步骤f.目的主机(本地)的进程2等待FIFO_OUT文件被读取；被外部读进程读取后，返回ssh密码输入提示符，用户输入密码(可选)；且外部写进程写入数据后，程序实际开始执行。
步骤g.数据传输完毕，各进程结束。
需要说明的是，在上述步骤d中创建的gzip-f进程是用以对源文件或源进程输出进行压缩处理的进程，并通过后续的gzip-d-f进程对经过压缩处理的文件进行解压缩处理。此进程可在实际应用中根据需要进行添加。或者，也可根据需要添加其他的进程，本发明并不以此为限。
且在上述步骤f中，在目的主机的进程2等待FIFO_OUT文件被读取之后，可在被外部读进程读取后，返回ssh密码输入提示符，用户输入密码，以进行密码验证，从而提高文件传输及映射过程的安全性，密码验证的过程可根据用户需要进行添加。
阻塞型映射过程中数据流向如图2B所示：
1、外部写进程打开FIFO_IN文件进行写入；
2、进程4将数据进行压缩后(可选)，将数据写入标准输出；
3、标准输出通过SSH隧道，传输到进程2的标准输入中；
4、外部读进程打开FIFO_OUT文件进行读取，此时没有数据，进程等待；
5、用户通过控制台输入密码(可选)；
6、进程2将数据解压后(可选)，写入FIFO_OUT中，传输开始；
7、传输结束，相应进程退出，已经打开的文件关闭。
其中，进程2、进程4为阻塞型调用。
方式二：非阻塞型映射过程。
非阻塞型中，部分调用为非阻塞调用，程序立即返回到控制台，不额外占用会话(session)。易用性较好，但结构较为复杂。
如图3A所示，非阻塞型映射过程的主要步骤如下：
步骤a'.目的主机(目标主机，本地)创建FIFO_OUT、INTERNAL_FIFO文件；
步骤b'.目的主机(本地)创建cat|gzip-d-f进程并进入后台执行；
步骤c'.目的主机(本地)创建ssh进程登录到来源主机(源主机，远程)，待输入密码后(可选)，发送远程命令，并立即返回控制台，进入后台执行；
步骤d'.来源主机(远程)创建FIFO_IN文件；
步骤e'.来源主机(远程)创建cat|gzip-f进程将数据重定向到标准输出，并返回给目的主机(本地)(见虚线部分)；
步骤f'.外部读、写进程工作；
步骤g'.数据传输完毕，所有进程结束。
在非阻塞型映射过程中，与阻塞型映射过程的主要区别在于，在步骤a'中，还需创建用以中转的INTERNAL_FIFO文件，在步骤e'中，通过cat|gzip-f进程将数据重定向到标准输出，并返回给目的主机(本地)，输入为INTERNAL_FIFO文件，然后将INTERNAL_FIFO文件作为输出，重定向至FIFO_OUT文件，从而通过中转文件INTERNAL_FIFO实现重定向过程。
需要说明的是，在上述步骤b'中创建的gzip-d-f进程是用以对源文件或源进程输出进行压缩及解压缩处理的进程，通过gzip-f进程对源文件或源进程输出进行压缩，并通过gzip-d进程对经过压缩处理的文件进行解压缩处理。此进程可在实际应用中根据需要进行添加。或者，也可根据需要添加其他的进程，本发明并不以此为限。
且在上述步骤c'中，在目的主机(本地)创建ssh进程登录到来源主机(远程)之后，可加入一密码输入认证过程，返回ssh密码输入提示符，提示用户输入密码，以进行密码验证，从而提高文件传输及映射过程的安全性，密码验证的过程可根据用户需要进行添加。
非阻塞型映射过程中数据流向如图3B所示：
1、外部写进程打开FIFO_IN文件进行写入；
2、进程5将数据进行压缩后(可选)，将数据写入标准输出；
3、标准输出通过SSH隧道，传输到进程3的标准输入中；
4、用户通过控制台输入密码(可选)；
5、进程3将数据写入INTERNAL_FIFO中，并进入后台，传输开始；
6、进程2(后台)将数据从INTERNAL_FIFO中读取，并进行解压(可选)，写入FIFO_OUT中；
7、外部读进程打开FIFO_OUT文件进行读取；
8、传输结束，所有进程退出，文件关闭。
其中，进程5为阻塞型调用；进程2、进程3为非阻塞型调用。
本发明实施例的文件网络映射方法主要具有以下优点：
1、传输、解压、处理等各阶段并发进行，可以减少整体时间消耗；
2、实际传输过程中不占用磁盘空间，并可以进一步减少磁盘读写造成的时间消耗；
3、对于跨机模式，使用ssh作为安全隧道，加密传输；
4、对于跨机模式，可以选择使用gzip压缩，减少网络带宽；
5、无需root权限，无需新建和挂载文件系统；
6、所用命令在常用Unix、Linux主机上都存在，易于推广使用。
以从数据库导出并跨机导入157MB的数据为例，如图4A所示，本发明实施例的文件网络映射方法与传统模式的时间消耗相比，节省时间约为33％。
如图4B所示，本发明实施例的文件网络映射方法与传统模式的磁盘消耗对比，其中，传统模式共计占用磁盘350MB左右，而本发明实施例的文件网络映射方法不占用磁盘消耗。
本发明实施例还提供一种文件网络映射装置，如图5所示，该文件网络映射装置主要包括：FIFO_IN文件创建单元1、FIFO_OUT文件创建单元2、映射关系建立单元3、源文件写入单元4、文件映射单元5及文件读取单元6等。
其中，FIFO_IN文件创建单元1用于在源主机中创建FIFO_IN文件，将目标主机通过SSH登录至源主机；FIFO_OUT文件创建单元2用于在目标主机中创建FIFO_OUT文件；映射关系建立单元3用于通过SSH隧道和命名管道将FIFO_IN文件重定向至FIFO_OUT文件，以建立FIFO_IN文件及FIFO_OUT文件的映射关系；源文件写入单元4用于在源主机中将源文件或源进程输出写入FIFO_IN文件；文件映射单元5用于通过映射关系将源文件或源进程输出从FIFO_IN文件映射至FIFO_OUT文件；文件读取单元6用于使目标主机中的目标进程从FIFO_OUT文件中读取源文件或源进程输出。
通过上述的各个组成部分之间的协同工作，本发明实施例的文件网络映射装置，使用SSH作为安全隧道，提高文件跨机映射、传输的安全性。同时，由于实际传输过程不占用磁盘空间，可以减少磁盘读写造成的时间消耗。
以下结合具体示例，对本发明实施例的文件网络映射装置中的各个组成部分的主要功能做进一步说明。
上述的FIFO_IN文件创建单元1，用于在源主机中创建FIFO_IN文件，将目标主机通过SSH登录至源主机。
在本发明实施例中，是通过命名通道FIFO进行文件或进程的传输及映射。因此，首先再源主机中创建FIFO_IN文件，并使目标主机(本地)通过SSH登录到源主机(远程)。
然后通过上述的FIFO_OUT文件创建单元2，在目标主机中创建FIFO_OUT文件，用以在后续的处理过程中与FIFO_IN文件形成映射关系。
上述的映射关系建立单元3，用于通过SSH隧道和命名管道将FIFO_IN文件重定向至FIFO_OUT文件，以建立FIFO_IN文件及FIFO_OUT文件的映射关系。
具体地，是在源主机中创建cat进程进行重定向，将FIFO_IN文件重定向至源主机的标准输出，再将源主机的标准输出通过SSH隧道及命名管道重定向到FIFO_OUT文件中。
在创建了FIFO_IN文件和FIFO_OUT文件之间的映射关系后，可通过上述的源文件写入单元4，在源主机中将要进行传输的源文件或源进程输出写入FIFO_IN文件中。
基于上述所建立的映射关系，可通过文件映射单元5将源文件或源进程输出映射至FIFO_OUT文件中，。具体地，通过文件映射单元5是将写入FIFO_IN文件的源文件或源进程输出通过标准输出由SSH隧道的SSHD进程映射至SSH隧道的SSH进程；使所述目标主机从SSH进程中读取源文件或源进程输出，并通过标准输出将源文件或源进程输出重定向至FIFO_OUT文件。
在另一实施例中，还可加入对源文件或源进程输出进行压缩和解压缩的过程。具体地，通过文件映射单元5将写入FIFO_IN文件的源文件或源进程输出进行压缩，通过标准输出由SSH隧道的SSHD进程将压缩后的数据映射至SSH隧道的SSH进程；使所述目标主机从SSH进程中读取压缩后的数据，进行解压缩，并通过标准输出将解压缩后得到的源文件或源进程输出重定向至FIFO_OUT文件。需要说明的是，对源文件或源进程输出进行压缩和解压缩的过程可在实际应用中根据需要进行添加。或者，也可根据需要添加其他的进程，本发明并不以此为限。
文件读取单元6则可使目标主机中的目标进程从FIFO_OUT文件中读取该源文件或源进程输出，然后在目标主机中进行后续的过程。
在实际应用中，是将文件在源主机和目标主机之间进行映射，对于源进程输出的映射，则需先将源进程输出写入文件中，再将文件在源主机和目标主机之间进行映射。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读取存储介质中，比如ROM/RAM、磁碟、光盘等。
以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种文件网络映射方法，其特征在于，所述的文件网络映射方法包括：
在源主机中创建FIFO_IN文件，将目标主机通过SSH登录至所述源主机；
在所述目标主机中创建FIFO_OUT文件；
通过SSH隧道和命名管道将所述FIFO_IN文件重定向至所述的FIFO_OUT文件，以建立所述FIFO_IN文件及FIFO_OUT文件的映射关系；
在所述源主机中将源文件或源进程输出写入所述的FIFO_IN文件；
通过所述映射关系将所述源文件或源进程输出从所述FIFO_IN文件映射至所述的FIFO_OUT文件；
使所述目标主机中的目标进程从所述FIFO_OUT文件中读取所述的源文件或源进程输出。
2.根据权利要求1所述的文件网络映射方法，其特征在于，通过所述映射关系将所述源文件或源进程输出从所述FIFO_IN文件映射至所述的FIFO_OUT文件，具体包括：
将写入所述FIFO_IN文件的源文件或源进程输出通过标准输出由所述SSH隧道的SSHD进程映射至所述SSH隧道的SSH进程；
所述目标主机从所述SSH进程中读取所述源文件或源进程输出，并通过标准输出将所述源文件或源进程输出重定向至所述的FIFO_OUT文件。
3.根据权利要求1所述的文件网络映射方法，其特征在于，通过所述映射关系将所述源文件或源进程输出从所述FIFO_IN文件映射至所述的FIFO_OUT文件，具体包括：
将写入所述FIFO_IN文件的源文件或源进程输出进行压缩，通过标准输出由所述SSH隧道的SSHD进程将压缩后的数据映射至所述SSH隧道的SSH进程；
所述目标主机从所述SSH进程中读取所述压缩后的数据，进行解压缩，并通过标准输出将解压缩后得到的所述源文件或源进程输出重定向至所述的FIFO_OUT文件。
4.根据权利要求1所述的文件网络映射方法，其特征在于，通过SSH隧道和命名管道将所述FIFO_IN文件重定向至所述的FIFO_OUT文件，具体包括：
通过cat进程将所述FIFO_IN文件重定向至所述源主机的标准输出；
通过SSH隧道和命名管道将所述源主机的标准输出重定向至在所述目标主机中创建的INTERNAL_FIFO文件；
通过SSH隧道和命名管道将所述INTERNAL_FIFO文件重定向至所述的FIFO_OUT文件。
5.根据权利要求1所述的文件网络映射方法，其特征在于，通过SSH隧道和命名管道将所述FIFO_IN文件重定向至所述的FIFO_OUT文件，具体包括：
通过cat进程将所述FIFO_IN文件重定向至所述源主机的标准输出；
通过SSH隧道和命名管道将所述源主机的标准输出重定向至所述的FIFO_OUT文件。
6.一种文件网络映射装置，其特征在于，所述的文件网络映射装置包括：
FIFO_IN文件创建单元，用于在源主机中创建FIFO_IN文件，并使将目标主机通过SSH登录至所述源主机；
FIFO_OUT文件创建单元，用于在所述目标主机中创建FIFO_OUT文件；
映射关系建立单元，用于通过SSH隧道和命名管道将所述FIFO_IN文件重定向至所述的FIFO_OUT文件，以建立所述FIFO_IN文件及FIFO_OUT文件的映射关系；
源文件写入单元，用于在所述源主机中将源文件或源进程输出写入所述的FIFO_IN文件；
文件映射单元，用于通过所述映射关系将所述源文件或源进程输出从所述FIFO_IN文件映射至所述的FIFO_OUT文件；
文件读取单元，用于使所述目标主机中的目标进程从所述FIFO_OUT文件中读取所述的源文件或源进程输出。
7.根据权利要求6所述的文件网络映射装置，其特征在于，所述文件映射单元具体用于：
将写入所述FIFO_IN文件的源文件或源进程输出通过标准输出由所述SSH隧道的SSHD进程映射至所述SSH隧道的SSH进程；
使所述目标主机从所述SSH进程中读取所述源文件或源进程输出，并通过标准输出将所述源文件或源进程输出重定向至所述的FIFO_OUT文件。
8.根据权利要求6所述的文件网络映射装置，其特征在于，所述文件映射单元具体用于：
将写入所述FIFO_IN文件的源文件或源进程输出进行压缩，通过标准输出由所述SSH隧道的SSHD进程将压缩后的数据映射至所述SSH隧道的SSH进程；
使所述目标主机从所述SSH进程中读取所述压缩后的数据，进行解压缩，并通过标准输出将解压缩后得到的所述源文件或源进程输出重定向至所述的FIFO_OUT文件。
9.根据权利要求6所述的文件网络映射装置，其特征在于，所述映射关系建立单元具体用于：
通过cat进程将所述FIFO_IN文件重定向至所述源主机的标准输出；
通过SSH隧道和命名管道将所述源主机的标准输出重定向至在所述目标主机中创建的INTERNAL_FIFO文件；
通过SSH隧道和命名管道将所述INTERNAL_FIFO文件重定向至所述的FIFO_OUT文件。
10.根据权利要求6所述的文件网络映射装置，其特征在于，所述映射关系建立单元具体用于：
通过cat进程将所述FIFO_IN文件重定向至所述源主机的标准输出；
通过SSH隧道和命名管道将所述源主机的标准输出重定向至所述的FIFO_OUT文件。
CN201610533357.5A 2016-07-08 2016-07-08 一种文件网络映射方法及装置 Active CN106027562B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610533357.5A CN106027562B (zh) 2016-07-08 2016-07-08 一种文件网络映射方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610533357.5A CN106027562B (zh) 2016-07-08 2016-07-08 一种文件网络映射方法及装置

Publications (2)

Publication Number Publication Date
CN106027562A true CN106027562A (zh) 2016-10-12
CN106027562B CN106027562B (zh) 2019-08-13

Family

ID=57108863

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610533357.5A Active CN106027562B (zh) 2016-07-08 2016-07-08 一种文件网络映射方法及装置

Country Status (1)

Country Link
CN (1) CN106027562B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110677455A (zh) * 2019-08-20 2020-01-10 北京航空航天大学 基于分布式哈希的动态均衡账户映射方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1949765A (zh) * 2005-10-10 2007-04-18 华为技术有限公司 获得被管设备的ssh主机公开密钥的方法和系统
CN104239511A (zh) * 2014-09-15 2014-12-24 西安交通大学 一种面向MongoDB的用户空间文件系统实现方法
CN104462224A (zh) * 2014-11-12 2015-03-25 成都卫士通信息产业股份有限公司 一种云盘文件在线编辑方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1949765A (zh) * 2005-10-10 2007-04-18 华为技术有限公司 获得被管设备的ssh主机公开密钥的方法和系统
CN104239511A (zh) * 2014-09-15 2014-12-24 西安交通大学 一种面向MongoDB的用户空间文件系统实现方法
CN104462224A (zh) * 2014-11-12 2015-03-25 成都卫士通信息产业股份有限公司 一种云盘文件在线编辑方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110677455A (zh) * 2019-08-20 2020-01-10 北京航空航天大学 基于分布式哈希的动态均衡账户映射方法
CN110677455B (zh) * 2019-08-20 2020-11-03 北京航空航天大学 基于分布式哈希的动态均衡账户映射方法

Also Published As

Publication number Publication date
CN106027562B (zh) 2019-08-13

Similar Documents

Publication Publication Date Title
US10404520B2 (en) Efficient programmatic memory access over network file access protocols
WO2020020202A1 (zh) 应用程序的账号管理方法、装置、设备和介质
US7702906B1 (en) Securing kernel metadata communication in environments employing distributed software services
CN104603762B (zh) 利用并行文件访问协议的自动校准以及元数据管理支持对文件系统的共享存储的协调访问的方法及系统
WO2002050713A3 (en) Real-time streamed data download system and method
JP2016186782A (ja) データ処理方法及びデータ処理装置
JP2008522279A (ja) アクセスが制御される仮想ディスク間のオンラインによるデータのセキュリティ伝送システムおよび、これを通じたセキュリティ伝送方法
WO2021013242A1 (zh) 一种启动小程序的方法、设备和计算机存储介质
CN104391695A (zh) 一种通过外部设备进行同步控制的方法及其装置
CN104144081A (zh) 一种通用应用日志管理方法、装置和系统
TWI702500B (zh) 使用多串流的系統、方法以及製品
WO2023019800A1 (zh) 基于远程直接内存访问的文件币集群数据传输方法、系统
CN103414704A (zh) 一种通用虚拟数据加密存储系统
CN106201747B (zh) 一种windows系统受限用户下访问智能密码设备的方法
CN113918999B (zh) 安全摆渡通道的建立方法、装置、网盘及存储介质
CN109451079A (zh) 一种云u盘及其存储方法和存储系统
Ravindrarajah Strength evaluation of high-strength concrete by ultrasonic pulse velocity method
KR100763526B1 (ko) 애플리케이션 컨텍스트 관리 장치 및 방법
CN106027562A (zh) 一种文件网络映射方法及装置
TWI840288B (zh) 設備接入方法及其裝置、資料交換方法及其裝置、聯網設備、服務端及存儲介質
CN115564438B (zh) 基于区块链的数字资源处理方法、装置、设备及存储介质
CN114417390B (zh) 一种网盘组织账户数据同步方法、装置、网盘及存储介质
CN107292196A (zh) Io数据的读写方法和装置
CN103425936A (zh) 一种实现数据保密的方法及电子设备
CN102279735A (zh) 一种文件管理软件与应用软件集成的实现方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant