CN106610789A - 一种数据处理方法、装置及系统 - Google Patents

一种数据处理方法、装置及系统 Download PDF

Info

Publication number
CN106610789A
CN106610789A CN201510702902.4A CN201510702902A CN106610789A CN 106610789 A CN106610789 A CN 106610789A CN 201510702902 A CN201510702902 A CN 201510702902A CN 106610789 A CN106610789 A CN 106610789A
Authority
CN
China
Prior art keywords
storage
data
block
packet
storage device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510702902.4A
Other languages
English (en)
Other versions
CN106610789B (zh
Inventor
李思聪
吕会艳
郭海涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201510702902.4A priority Critical patent/CN106610789B/zh
Publication of CN106610789A publication Critical patent/CN106610789A/zh
Application granted granted Critical
Publication of CN106610789B publication Critical patent/CN106610789B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0662Virtualisation aspects
    • G06F3/0664Virtualisation aspects at device level, e.g. emulation of a storage device or system
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0661Format or protocol conversion arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Abstract

本发明实施例提供一种数据处理方法、装置及系统,涉及通信领域,解决了现有技术中具备TB接口的终端设备与网络存储设备互联时,终端设备内部CPU运转负荷过大的问题。该方法包括:数据处理装置接收终端设备通过TB接口发送的TB协议格式的数据包,该数据包包括终端设备对存储设备的操作指令,该数据包是终端设备基于块设备接口协议格式对操作指令进行封装得到的;利用仿真出的块设备接口的接口协议格式解析该数据包,将从数据包中解析出操作指令封装为存储设备对应存储协议格式的第一请求消息发送至存储设备。

Description

一种数据处理方法、装置及系统
技术领域
本发明涉及通信领域,尤其涉及一种数据处理方法、装置及系统。
背景技术
目前,英特尔(Inter)和苹果公司联合开发的全新雷电(英文:Thunderbolt,简称:TB)接口的传输速率高(理论可达到10GB/S,甚至50GB/s)而被应用于各种终端设备中,例如,苹果公司出产的安装有Mac系统的终端设备。但是,现如今大部分具备TB接口的终端设备中仅设置了低性能的千兆以太网(英文:Gigabit Ethernet,简称:GE)网络接口,而未设置更高速高性能的网络接口,例如,高速外围组件互联(英文:Peripheral Component Interconnect express,简称:PCIe)扩展接口,从而导致这类终端设备无法通过10GE等外置高性能网络接口接入大型存储设备(如网络附属存储(英文:Network Attached Storage,简称:NAS))。
为了解决上一问题,现有技术提供了一种终端设备接口扩展系统,如图1所示,该系统包括:终端设备11、存储设备12以及PCIe扩展卡13。具体的,终端设备11根据用户的业务需求生成终端设备对存储设备的操作指令,并通过该终端设备中CPU的TCP/IP直接将该操作指令封装为该存储设备对应协议格式的数据包,然后,将该数据包封装为TB协议格式的请求消息,通过TB接口发送至PCIe扩展卡13,该PCIe扩展卡13在接收到TB协议格式的请求消息后,会通过该PCIe扩展卡13内部的TB转PCIe转换模块,将TB协议格式的请求消息转换为PCIe协议格式的请求消息,并通过该PCIe扩展卡13内部的10GE网卡对应的网口发送至存储设备,从而实现终端设备11对存储设备12的访问。
但是,由于终端设备内部配置的CPU通常是处理功能较弱的家用x86处理器,而现有技术中的PCIe扩展卡应用的10GE网卡则通常需要处理功能强的处理器来驱动,因此,当终端设备通过配置有10GE网络的PCIe扩展卡来代替其设备的GE网络对接存储设备时,由于数据量过大,从而会导致终端设备内部的CPU的TCP/IP消耗大量CPU资源来对处理数据,使得该终端设备内部的CPU超负荷运转,影响了该终端设备的性能。
发明内容
本发明的实施例提供一种数据处理方法、装置及系统,解决了现有技术中具备TB接口的终端设备与网络存储设备互联时,终端设备内部CPU运转负荷过大的问题。
为达到上述目的,本发明的实施例采用如下技术方案:
第一方面,提供一种数据处理方法,该方法应用于数据处理装置,而该数据处理装置与具备雷电TB接口的终端设备以及存储设备组成数据处理系统,具体的,该方法包括:接收终端设备通过TB接口发送的TB协议格式的数据包,该TB协议格式的数据包中包含终端设备对存储设备的操作指令,该数据包是终端设备基于块设备接口的接口协议格式对操作指令进行封装得到的,利用仿真出的块设备接口的接口协议格式解析该数据包,然后,将从该数据包中解析出所述操作指令封装为存储设备对应存储协议格式的第一请求消息发送至存储设备。
在第一方面的第一种可能的实现方式中,该方法还包括如下仿真步骤:向存储设备发送第二请求消息,该第二请求消息用于指示存储设备从存储设备的存储区域中申请预定大小的数据存储区;接收存储设备反馈的响应消息,该响应消息中包含数据存储区对应的标识信息;根据标准块设备的属性参数以及数据存储区的标识信息,为数据存储区仿真出对应的块设备接口,该标准块设备的属性参数包括标准块设备的接口协议格式。
在第一方面的第二种可能的实现方式中,该方法还包括如下仿真步骤:向终端设备发送指示消息,该指示消息用于获取终端设备的块设备的设备参数,该块设备的设备参数包括块设备的接口协议格式;根据终端设备反馈的块设备的设备参数,仿真块设备。
第二方面,提供一种数据处理装置,该装置应用于数据处理系统,该数据处理系统包括具备雷电TB接口的终端设备、数据处理装置以及存储设备,具体的该装置包括:第一接收单元,用于接收终端设备通过TB接口发送的TB协议格式的数据包,该TB协议格式的数据包包括终端设备对存储设备的操作指令,该数据包是终端设备基于块设备接口的接口协议格式对该操作指令进行封装得到的;解析单元,用于利用仿真出的块设备接口的接口协议格式解析第一接收单元接收的数据包;封装单元,用于将解析单元从数据包中解析出操作指令封装为存储设备对应存储协议格式的第一请求消息发送至存储设备。
在第二方面的第一种可能的实现方式中,所述装置还包括:
第一发送单元,用于向存储设备发送第二请求消息,该第二请求消息用于指示存储设备从存储设备的存储区域中申请预定大小的数据存储区;第二接收单元,用于接收存储设备反馈的响应消息,该响应消息中包含数据存储区对应的标识信息;仿真单元,用于根据标准块设备的属性参数以及数据存储区的标识信息,为数据存储区仿真出对应的块设备接口,该标准块设备的属性参数包括标准块设备的接口协议格式。
在第二方面的第二种可能的实现方式中,所述装置还包括:
第二发送单元,用于向终端设备发送指示消息,该指示消息用于指示终端设备获取终端设备的块设备的设备参数;该块设备的设备参数包括块设备的接口协议格式;仿真单元,用于根据终端设备反馈的块设备的设备参数,仿真块设备。
第三方面,提供另一种数据处理装置,该装置包括:第一通信单元,用于接收终端设备通过TB接口发送的TB协议格式的数据包,该TB协议格式的数据包包括终端设备对存储设备的操作指令,该数据包是终端设备基于块设备接口的接口协议格式对操作指令进行封装得到的;处理器,用于利用仿真出的块设备接口的接口协议格式解析该数据包,将从数据包中解析出操作指令封装为存储设备对应存储协议格式的第一请求消息,并通过第二通信单元发送至存储设备。
在第二方面的第一种可能的实现方式中:
第二通信单元,还用于向存储设备发送第二请求消息,该第二请求消息用于指示该存储设备从存储设备的存储区域中申请预定大小的数据存储区;以及用于接收存储设备反馈的响应消息,该响应消息中包含数据存储区对应的标识信息;处理器,还用于根据标准块设备的属性参数以及数据存储区的标识信息,为数据存储区仿真出对应的块设备接口,该标准块设备的属性参数包括所述标准块设备的接口协议格式。
在第二方面的第三种可能的实现方式中:
第一通信单元,还用于向终端设备发送指示消息,该指示消息用于指示终端设备获取终端设备的块设备的设备参数;该块设备的设备参数包括块设备的接口协议格式;处理器,还用于根据终端设备反馈的块设备的设备参数,仿真该块设备。
本发明的实施例提供的数据处理方法、装置及系统,该数据处理装置通过TB接口接收终端设备发送的TB协议格式的数据包,利用仿真出的块设备接口的接口协议格式解析该数据包,然后,将从该数据包中解析出所述操作指令封装为存储设备对应存储协议格式的第一请求消息发送至存储设备。相比于现有技术在终端设备中直接将操作指令封装为存储设备对应存储协议格式的请求消息,从而占用该终端设备的大部分CPU的处理资源,本发明将封装过程迁移至数据处理装置中,通过该数据处理装置仿真出的块设备对包含操作指令的数据包进行解析,并将解析出的操作指令封装为该存储设备对应存储协议格式的请求消息,从而降低了终端设备内部CPU的处理负荷,提高了终端设备内部CPU的数据处理效率。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为现有的一种终端设备接口扩展系统的系统架构图;
图2为本发明实施例提供的一种数据处理系统的系统架构图;
图3为本发明实施例提供的一种数据处理方法的流程示意图;
图4为本发明实施例提供的一种数据处理系统中终端设备与数据处理装置的硬件架构结构;
图5为本发明实施例提供的一种数据处理装置的结构示意图;
图6为本发明实施例提供的另一种数据处理装置的结构示意图;
图7为本发明实施例提供的又一种数据处理装置的结构示意图;
图8为本发明实施例提供的另一种数据处理装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明的实施例所应用的数据处理系统架构如图2所示,该数据处理系统2中包括具备雷电(英文:Thunderbolt,简称:TB)接口的终端设备21、数据处理装置22以及存储设备23。本发明实施例中的终端设备21中设置有至少一个TB接口以及至少一个低性能的千兆以太网(英文:Gigabit Ethernet,简称:GE)网络接口,该终端设备21中设置有块设备(Block Stack)以及用于驱动该块设备的标准块设备驱动(BlockDrv),该块设备驱动与该块设备的输入/输出(英文:Input/Output,简称:IO)协议栈和文件系统对接,能够驱动块设备为终端设备提供存储服务,其中,本发明中的块设备可以是小型计算机系统接口(英文:SmallComputer System Interface;简写:SCSI)或者快速非易失性存储(英文:Non-Volatile Memory Express,简称:NVMe)等标准存储硬件设备。本实施例中的数据处理装置22的一端设置有TB接口,该数据处理装置22通过该TB接口与该终端设备21相连,另一端设置的接口可以适配任意类型的存储设备23,同时,该数据处理装置22用软件方式在该数据处理装置内部仿真出一个仿真块设备,使得该装置能够向终端设备呈现出兼容块设备的编程接口的功能,从而可以实现对基于块设备接口的接口协议格式的数据包的解析。
此外,本发明提供的数据处理系统中的终端设备中并未安装有TCP/IP协议栈,而是将传输控制协议/网间协议(英文:TransmissionControl Protocol/Internet Protocol,简称:TCP/IP)协议栈安装至数据处理装置中,这样,当终端设备需要将该终端设备对存储设备的操作指令对应数据发送至存储设备时,由于终端设备中包含块设备,数据处理装置中仿真有仿真块设备,两者均能实现对块设备协议格式的数据收发,这样终端设备便无需耗费自身中央处理器(英文:Central ProcessingUnit,简称CPU)的功耗来进行数据转换,而是可以基于块设备接口协议格式将该操作指令对应数据进行封装发送至该数据处理装置,以便该数据处理装置中运行的仿真块设备能够对其进行解析,然后通过该数据处理装置中的TCP/IP协议栈将解析出的该操作指令对应数据封装为存储设备对应存储协议格式的请求消息,实现终端设备对存储设备的操作。
基于图2所示的数据处理系统的架构图以及上述内容,本发明的实施例提供了一种数据处理方法,通过TB接口来实现终端设备对存储设备的内部数据的管理。在本实施例中,数据处理装置通过软件实现一个仿真块设备,以模拟真正的硬件块设备。该仿真块设备可以是预先配置在数据处理装置中,也可以是数据处理装置在接收到终端设备发送的TB协议格式的数据块时,即时进行仿真。创建完毕后,该仿真块设备使用与硬件块设备相同的驱动,且该仿真块设备在加载完驱动后,便可与硬件块设备一样为该数据处理装置提供正常的运行环境。
本发明实施例中提及的仿真块设备可以看成是数据处理装置中的一个软件模块,该软件模块能够实现对块设备的IO数据包的解析,为了说明方便,本发明实施例并不对数据处理装置中出仿真块设备外的其他模块进行严格说明,如无特殊说明,当涉及到其他模块与仿真块设备间的交互时,统一使用数据处理装置来代替其他模块。例如,“数据处理装置对仿真块设备进行操作”可以理解为“数据处理装置中的某一个或多个其他模块通过配合来对仿真块设备进行A操作”,本领域技术人员可以理解相应地会有一个软件模块来对仿真块设备进行A操作。
具体的,数据处理装置在需要仿真出仿真块设备时,可以通过以下两种方式来创建。
第一种实现方式:
a1、数据处理装置向存储设备发送第二请求消息,第二请求消息用于指示存储设备从存储设备的存储区域中申请预定大小的数据存储区。
a2、数据处理装置接收存储设备反馈的响应消息,响应消息中包含数据存储区的标识信息。
a3、数据处理装置根据标准块设备的属性参数以及数据存储区的标识信息,为数据存储区仿真出对应的块设备接口,该标准块设备的属性参数包括=标准块设备的接口协议格式。
第二种实现方式:
b1、数据处理装置向终端设备发送指示消息,指示消息用于指令终端设备获取终端设备的块设备的设备参数,该块设备的设备参数包括块设备的接口协议格式。
b2、数据处理装置根据所述终端设备反馈的块设备的设备参数,仿真块设备。
示例性的,数据处理装置可以直接向存储设备申请指定大小的数据存储区(这个数据存储区可以一个未存储数据的裸盘或某一空白文件)或者,直接向终端设备内部设置的硬件块设备申请指定大小的数据存储区或该块设备的参数信息,申请到后,数据处理装置会根据申请到参数信息仿真出块设备。
需要说明的是,上述的仿真块设备的具体创建过程为本领域技术人员公知的技术,这里并不进行详细描述。
基于上述应用场景,本发明实施例提供一种数据处理方法,如图3所示,该方法包括如下步骤:
301、数据处理装置接收终端设备通过TB接口发送的TB协议格式的数据包。
其中,上述的数据包包括终端设备对存储设备的操作指令,该数据包是终端设备基于块设备接口协议格式对操作指令进行封装得到的。
示例性的,移动终端通过该终端设备内部标准的块设备驱动,来驱动块设备基于块设备协议格式将终端设备对存储设备的操作指令进行封装,得到数据包,然后,通过TB接口将TB协议格式的数据包发送至数据处理装置,以便数据处理装置将该操作指令发送至存储设备。
示例性的,上述的终端设备对存储设备的操作指令信息包括终端设备请求读取的数据在存储设备中的存储地址,或,终端设备请求写入存储设备的数据,或,终端设备请求删除的数据在存储设备中的存储地址。
302、数据处理装置利用仿真出的块设备接口的接口协议格式解析该数据包,将从该数据包中解析出操作指令封装为存储设备对应存储协议格式的第一请求消息发送至存储设备。
示例性的,数据处理装置在通过TB接口接收到TB协议格式的数据包后,通过该数据处理装置仿真出的仿真块设备对该数据包进行解析,然后,通过存储设备对应存储系统的驱动将从数据包中解析出该数据包中包含的操作指令进行封装,并将封装后的数据包发送至存储设备。而该存储设备在解析该第一请求消息得到第一请求消息中包含的操作指令后,会根据该操作指令执行对应的操作,例如,若该操作指令为该终端设备向存储设备请求读取数据的指令,则该存储设备会根据该操作指令中携带的终端设备请求读取的数据在存储设备中的存储地址,获取该终端设备请求读取的数据。
示例性的,参照图4所示的数据处理系统的系统架构示意图,本发明实施例中的数据处理系统中的终端设备以及数据处理装置内部的硬件结构可以参照图4所示,具体的:终端设备包括Block Stack块设备、Block Drv块设备驱动以及TB接口;该数据处理系统中数据处理装置中包含TB接口、TB_driver TB接口驱动、virt_dev仿真块设备、backend_drv适配存储设备的驱动、TCP/IP协议栈以及以太网口。
基于上述的硬件体系,若该块设备为SCSI标准块设备时,终端设备实现对后盾存储设备的控制过程如下所示:
1)、终端设备通过Block Stack将终端设备对存储设备的操作指令对应的数据封装为SCSI协议格式的请求后,该终端设备中的Block Drv通过TB接口将该SCSI协议格式的请求发送至数据处理装置。
2)、数据处理装置会通过TB_driver解析来自TB接口的数据包,该数据包中包含终端设备发送的SCSI协议格式的请求,并将解析出的数据包映射到virt_dev的编程接口,该virt_dev通过仿真的块设备的编程接口解析该数据包中的SCSI协议格式的请求,并将从该SCSI协议格式的请求中解析出的操作指令发送至backend_drv,该backend_drv会根据实际的存储设备的存储类型提供适配模块,并将来自virt_dev的操作指令转换为对实际存储设备能够接收的操作指令,并通过以太网口传输至存储设备。
本发明的实施例提供的数据处理方法,该数据处理装置通过TB接口接收终端设备发送的TB协议格式的数据包,利用仿真出的块设备接口的接口协议格式解析该数据包,然后,将从该数据包中解析出所述操作指令封装为存储设备对应存储协议格式的第一请求消息发送至存储设备。相比于现有技术在终端设备中直接将操作指令封装为存储设备对应存储协议格式的请求消息,从而占用该终端设备的大部分CPU的处理资源,本发明将封装过程迁移至数据处理装置中,通过该数据处理装置仿真出的块设备对包含操作指令的数据包进行解析,并将解析出的操作指令封装为该存储设备对应存储协议格式的请求消息,从而降低了终端设备内部CPU的处理负荷,提高了终端设备内部CPU的数据处理效率。
本发明的实施例提供一种数据处理装置,该数据处理装置用于实现上述的数据处理方法,该数据处理装置应用于图1所示的数据处理系统,如图5所示,该数据处理装置4包括:第一接收单元41、解析单元42以及封装单元43,其中:
第一接收单元41,用于接收终端设备通过TB接口发送的TB协议格式的数据包,该TB协议格式的数据包包括终端设备对存储设备的操作指令,该数据包是终端设备基于块设备接口的接口协议格式对该操作指令进行封装得到的。
示例性的,上述的终端设备对存储设备的操作指令信息包括终端设备请求读取的数据在存储设备中的存储地址,或,终端设备请求写入存储设备的数据,或,终端设备请求删除的数据在存储设备中的存储地址。
解析单元42,用于利用仿真出的块设备接口的接口协议格式解析第一接收单元41接收的数据包。
封装单元43,用于将解析单元42从数据包中解析出操作指令封装为存储设备对应存储协议格式的第一请求消息发送至存储设备。
可选的,如图6所示,该装置4还包括:第一发送单元44、第二接收单元45以及仿真单元46a,其中:
第一发送单元44,用于向存储设备发送第二请求消息,该第二请求消息用于指示存储设备从存储设备的存储区域中申请预定大小的数据存储区。
第二接收单元45,用于接收存储设备反馈的响应消息,该响应消息中包含数据存储区对应的标识信息。
仿真单元46a,用于根据标准块设备的属性参数以及数据存储区的标识信息,为数据存储区仿真出对应的块设备接口,该标准块设备的属性参数包括标准块设备的接口协议格式。
可选的,如图7所示,该装置4还包括:仿真单元46b和第二发送单元47、其中:
第二发送单元47,用于向终端设备发送指示消息,指示消息用于指示终端设备获取终端设备的块设备的设备参数,该块设备的设备参数包括块设备的接口协议格式。
仿真单元46b,用于根据终端设备反馈的块设备的设备参数,仿真块设备。
本发明的实施例提供的数据处理装置,该数据处理装置通过TB接口接收终端设备发送的TB协议格式的数据包,利用仿真出的块设备接口的接口协议格式解析该数据包,然后,将从该数据包中解析出所述操作指令封装为存储设备对应存储协议格式的第一请求消息发送至存储设备。相比于现有技术在终端设备中直接将操作指令封装为存储设备对应存储协议格式的请求消息,从而占用该终端设备的大部分CPU的处理资源,本发明将封装过程迁移至数据处理装置中,通过该数据处理装置仿真出的块设备对包含操作指令的数据包进行解析,并将解析出的操作指令封装为该存储设备对应存储协议格式的请求消息,从而降低了终端设备内部CPU的处理负荷,提高了终端设备内部CPU的数据处理效率。
如图8所示的本发明的提供另一种数据处理装置的结构示意图。该数据处理装置5可以为具备TB接口的卸载卡或其他具备TB接口的服务器。该数据处理装置包括用于与终端设备进行通信的第一通信单元51、与存储设备进行通信的第二通信单元52、存储器53和处理器54。上述的各个组件是通过总线系统耦合在一起。该总线可以是工业标准体系结构(英文:Industry Standard Architecture,简称:ISA)总线、外部设备互连(英文:Peripheral Component,简称:PCI)总线或扩展工业标准体系结构(英文:Extended Industry Standard Architecture,简称:EISA)总线等。该总线可以分为地址总线、数据总线、控制总线等。为便于表示,图8中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。其中:
这里的处理器54可以是一个处理器,也可以是多个处理元件的统称。例如,该处理器54可以是中央处理器,也可以是特定集成电路(英文:Application Specific Integrated Circuit,简称:ASIC),或者是被配置成实施本发明实施例的一个或多个集成电路,例如:一个或多个微处理器(英文:digital singnal processor,简称:DSP),或,一个或者多个现场可编程门阵列(英文:Field Programmable Gate Array,简称:FPGA)。
上述的存储器53可以是一个存储装置,也可以是多个存储元件的统称,可以是计算机能够存取的任何可用介质,包括但不限于:只读存储器(英文:read only memory,简称:ROM)、随机存储器(英文:randomaccess memory,简称:RAM)、或磁盘存储(disk storage)、闪存、可编程只读存储器或电可擦写可编程存储器、寄存器等本领域熟悉的存储介质。存储设备用于向处理器提供指令和数据信息,和处理器通过总线连接。
上述的存储器53中存储:操作系统,应用程序,及用于实现本发明实施例的程序代码。而处理器54通过读取存储器53中存储的信息来进行各设备之间的消息的处理和传递,同时,该处理器中运行有用软件实现的仿真块设备。
第一通信单元51,用于接收终端设备通过TB接口发送的TB协议格式的数据包,该TB协议格式的数据包包括终端设备对存储设备的操作指令,该数据包是终端设备基于块设备接口的接口协议格式对操作指令进行封装得到的。
处理器54,用于利用仿真出的块设备接口的接口协议格式解析该数据包,将从数据包中解析出操作指令封装为存储设备对应存储协议格式的第一请求消息,并通过第二通信单元52发送至存储设备。
可选的,当该数据处理装置仿真块设备时:
第二通信单元52,还用于向存储设备发送第二请求消息,该第二请求消息用于指示该存储设备从存储设备的存储区域中申请预定大小的数据存储区;以及用于接收存储设备反馈的响应消息,该响应消息中包含数据存储区对应的标识信息.
处理器54,还用于根据标准块设备的属性参数以及数据存储区的标识信息,为数据存储区仿真出对应的块设备接口,该标准块设备的属性参数包括所述标准块设备的接口协议格式。
可选的,当该数据处理装置仿真块设备时:
第一通信单元51,还用于向终端设备发送指示消息,该指示消息用于指示终端设备获取终端设备的块设备的设备参数;该块设备的设备参数包括块设备的接口协议格式。
处理器54,还用于根据终端设备反馈的块设备的设备参数,仿真该块设备。
需要说明的是,本实施例中的终端设备对存储设备的操作指令信息包括终端设备请求读取的数据在存储设备中的存储地址,或,终端设备请求写入存储设备的数据,或,终端设备请求删除的数据在存储设备中的存储地址。
本发明的实施例提供的数据处理装置,该数据处理装置通过TB接口接收终端设备发送的TB协议格式的数据包,利用仿真出的块设备接口的接口协议格式解析该数据包,然后,将从该数据包中解析出所述操作指令封装为存储设备对应存储协议格式的第一请求消息发送至存储设备。相比于现有技术在终端设备中直接将操作指令封装为存储设备对应存储协议格式的请求消息,从而占用该终端设备的大部分CPU的处理资源,本发明将封装过程迁移至数据处理装置中,通过该数据处理装置仿真出的块设备对包含操作指令的数据包进行解析,并将解析出的操作指令封装为该存储设备对应存储协议格式的请求消息,从而降低了终端设备内部CPU的处理负荷,提高了终端设备内部CPU的数据处理效率。
本发明的实施例提供一种数据处理系统,如图2所示,该数据处理系统包括具备雷电TB接口的终端设备21、数据处理装置22以及存储设备23。其中,上述的数据处理装置22为图4、5、6、7、8对应实施例所示的数据处理装置。
该数据处理装置22内仿真有仿真块设备,该终端设备21中包含块设备,其中:
移动终端21,用于根据块设备的块设备协议格式将终端设备对存储设备23的操作指令进行封装,得到数据包,通过TB接口将该数据包发送至数据处理装置。
数据处理装置22,用于接收终端设备21通过TB接口发送的TB协议格式的数据包,利用仿真出的块设备接口的接口协议格式解析该数据包,将从数据包中解析出操作指令封装为存储设备23对应存储协议格式的第一请求消息发送至存储设备23。
可选的,该数据处理装置22还用于:向存储设备23发送第二请求消息,该第二请求消息用于指示存储设备23从存储设备23的存储区域中申请预定大小的数据存储区;接收存储设备23反馈第一响应消息,该响应消息中包含数据存储区对应的标识信息;根据标准块设备的属性参数以及数据存储区的标识信息,为数据存储区仿真出对应的块设备接口,该标准块设备的属性参数包括标准块设备的接口协议格式。
可选的,该数据处理装置22还用于:向终端设备21发送指示消息,该指示消息用于指示终端设备获取终端设备21的块设备的设备参数,该块设备的设备参数包括块设备的接口协议格式;根据终端设备21反馈的块设备的设备参数,仿真该块设备。
本发明的实施例提供的数据处理系统,数据处理装置通过TB接口接收终端设备发送的TB协议格式的数据包,利用仿真出的块设备接口的接口协议格式解析该数据包,然后,将从该数据包中解析出所述操作指令封装为存储设备对应存储协议格式的第一请求消息发送至存储设备。相比于现有技术在终端设备中直接将操作指令封装为存储设备对应存储协议格式的请求消息,从而占用该终端设备的大部分CPU的处理资源,本发明将封装过程迁移至数据处理装置中,通过该数据处理装置仿真出的块设备对包含操作指令的数据包进行解析,并将解析出的操作指令封装为该存储设备对应存储协议格式的请求消息,从而降低了终端设备内部CPU的处理负荷,提高了终端设备内部CPU的数据处理效率。
在本申请所提供的几个实施例中,应该理解到,所揭露的终端和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理包括,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元,可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种数据处理方法,其特征在于,应用于数据处理装置,所述数据处理装置与具备雷电TB接口的终端设备以及存储设备组成数据处理系统,所述方法包括:
接收所述终端设备通过TB接口发送的TB协议格式的数据包,所述TB协议格式的数据包中包含所述终端设备对所述存储设备的操作指令,所述数据包是所述终端设备基于块设备接口的接口协议格式对所述操作指令进行封装得到的;
利用仿真出的块设备接口的接口协议格式解析所述数据包,将从所述数据包中解析出所述操作指令封装为所述存储设备对应存储协议格式的第一请求消息发送至所述存储设备。
2.根据权利要求1所述的方法,其特征在于,所述利用仿真出的块设备接口的接口协议格式解析所述数据包,将从所述数据包中解析出所述操作指令封装为所述存储设备对应存储协议格式的第一请求消息发送至所述存储设备之前,所述方法还包括:
向所述存储设备发送第二请求消息,所述第二请求消息用于指示所述存储设备从所述存储设备的存储区域中申请预定大小的数据存储区;
接收所述后存储设备反馈的响应消息,所述响应消息中包含所述数据存储区对应的标识信息;
根据标准块设备的属性参数以及所述数据存储区的标识信息,为所述数据存储区仿真出对应的块设备接口,所述标准块设备的属性参数包括所述标准块设备的接口协议格式。
3.根据权利要求1所述的方法,其特征在于,所述利用仿真出的块设备接口的接口协议格式解析所述数据包,将从所述数据包中解析出所述操作指令封装为所述存储设备对应存储协议格式的第一请求消息发送至所述存储设备之前,所述方法还包括:
向所述终端设备发送指示消息,所述指示消息用于获取所述终端设备的块设备的设备参数,所述块设备的设备参数包括所述块设备的接口协议格式;
根据所述终端设备反馈的所述块设备的设备参数,仿真所述块设备。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
所述存储设备解析所述第一请求消息,得到所述第一请求消息中包含的操作指令,并根据所述操作指令执行对应的操作。
5.根据权利要求1至4任一项所述的方法,其特征在于,所述终端设备对所述存储设备的操作指令信息包括所述终端设备请求读取的数据在所述存储设备中的存储地址,或,所述终端设备请求写入所述存储设备的数据,或,所述终端设备请求删除的数据在所述存储设备中的存储地址。
6.一种数据处理装置,其特征在于,应用于数据处理系统,所述数据处理系统包括具备雷电TB接口的终端设备、所述数据处理装置以及存储设备,所述数据处理装置包括:
第一接收单元,用于接收所述终端设备通过TB接口发送的TB协议格式的数据包,所述TB协议格式的数据包包括所述终端设备对所述存储设备的操作指令,所述数据包是所述终端设备基于块设备接口的接口协议格式对所述操作指令进行封装得到的;
解析单元,用于利用仿真出的块设备接口的接口协议格式解析所述第一接收单元接收的所述数据包;
封装单元,用于将所述解析单元从所述数据包中解析出所述操作指令封装为所述存储设备对应存储协议格式的第一请求消息发送至所述存储设备。
7.根据权利要求6所述的装置,其特征在于,所述装置还包括:
第一发送单元,用于向所述存储设备发送第二请求消息,所述第二请求消息用于指示所述存储设备从所述存储设备的存储区域中申请预定大小的数据存储区;
第二接收单元,用于接收所述存储设备反馈的响应消息,所述响应消息中包含所述数据存储区对应的标识信息;
仿真单元,用于根据标准块设备的属性参数以及所述数据存储区的标识信息,为所述数据存储区仿真出对应的块设备接口,所述标准块设备的属性参数包括所述标准块设备的接口协议格式。
8.根据权利要求6所述的装置,其特征在于,所述装置还包括:
第二发送单元,用于向所述终端设备发送指示消息,所述指示消息用于指示所述终端设备获取所述终端设备的块设备的设备参数;所述块设备的设备参数包括所述块设备的接口协议格式;
仿真单元,用于根据所述终端设备反馈的所述块设备的设备参数,仿真所述块设备。
9.根据权利要求6至8任一项所述的装置,其特征在于,所述终端设备对所述存储设备的操作指令信息包括所述终端设备请求读取的数据在所述存储设备中的存储地址,或,所述终端设备请求写入所述存储设备的数据,或,所述终端设备请求删除的数据在所述存储设备中的存储地址。
10.一种数据处理系统,其特征在于,所述数据处理系统包括具备雷电TB接口的终端设备、数据处理装置以及存储设备,所述终端设备中包含块设备,其中:
所述移动终端,用于根据所述块设备的块设备协议格式将所述终端设备对所述存储设备的操作指令进行封装,得到数据包,通过TB接口将所述数据包发送至数据处理装置;
所述数据处理装置,用于接收所述终端设备通过TB接口发送的TB协议格式的数据包,利用仿真出的块设备接口的接口协议格式解析所述数据包,将从所述数据包中解析出所述操作指令封装为所述存储设备对应存储协议格式的第一请求消息发送至所述存储设备;
所述存储设备,用于解析所述第一请求消息,得到所述第一请求消息中包含的操作指令,并根据所述操作指令执行对应的操作。
CN201510702902.4A 2015-10-26 2015-10-26 一种数据处理方法、装置及系统 Active CN106610789B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510702902.4A CN106610789B (zh) 2015-10-26 2015-10-26 一种数据处理方法、装置及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510702902.4A CN106610789B (zh) 2015-10-26 2015-10-26 一种数据处理方法、装置及系统

Publications (2)

Publication Number Publication Date
CN106610789A true CN106610789A (zh) 2017-05-03
CN106610789B CN106610789B (zh) 2019-08-16

Family

ID=58613622

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510702902.4A Active CN106610789B (zh) 2015-10-26 2015-10-26 一种数据处理方法、装置及系统

Country Status (1)

Country Link
CN (1) CN106610789B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107196945A (zh) * 2017-05-27 2017-09-22 成都康拓邦科技有限公司 医疗软件通信方法及装置
CN108920328A (zh) * 2018-06-28 2018-11-30 中国联合网络通信集团有限公司 发现终端应用变更的方法及装置
CN109656675A (zh) * 2017-10-11 2019-04-19 阿里巴巴集团控股有限公司 总线设备、计算机设备及实现物理主机云存储的方法
CN111198663A (zh) * 2020-01-03 2020-05-26 苏州浪潮智能科技有限公司 控制数据存取操作的方法、系统、装置以及存储介质
CN112882989A (zh) * 2021-02-04 2021-06-01 无锡沐创集成电路设计有限公司 协议处理系统和协议数据处理方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103176925A (zh) * 2011-12-20 2013-06-26 宏碁股份有限公司 接口装置的数据流量分析管理装置、系统与方法
CN103514125A (zh) * 2012-06-25 2014-01-15 宏碁股份有限公司 主控端电子装置以及主控端操作方法
US20140132835A1 (en) * 2012-11-14 2014-05-15 Acer Incorporated Electronic device with thunderbolt interface, connecting method thereof, and docking apparatus
CN103988190A (zh) * 2011-12-16 2014-08-13 英特尔公司 用于通过外部显示-数据i/o端口来扩展图形处理的方法、设备及系统
CN104111907A (zh) * 2014-06-27 2014-10-22 华为技术有限公司 一种访问NVMe存储设备的方法和NVMe存储设备
CN104636076A (zh) * 2013-11-15 2015-05-20 中国电信股份有限公司 一种用于云存储的分布式块设备驱动方法和系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103988190A (zh) * 2011-12-16 2014-08-13 英特尔公司 用于通过外部显示-数据i/o端口来扩展图形处理的方法、设备及系统
CN103176925A (zh) * 2011-12-20 2013-06-26 宏碁股份有限公司 接口装置的数据流量分析管理装置、系统与方法
CN103514125A (zh) * 2012-06-25 2014-01-15 宏碁股份有限公司 主控端电子装置以及主控端操作方法
US20140132835A1 (en) * 2012-11-14 2014-05-15 Acer Incorporated Electronic device with thunderbolt interface, connecting method thereof, and docking apparatus
CN104636076A (zh) * 2013-11-15 2015-05-20 中国电信股份有限公司 一种用于云存储的分布式块设备驱动方法和系统
CN104111907A (zh) * 2014-06-27 2014-10-22 华为技术有限公司 一种访问NVMe存储设备的方法和NVMe存储设备

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107196945A (zh) * 2017-05-27 2017-09-22 成都康拓邦科技有限公司 医疗软件通信方法及装置
CN109656675A (zh) * 2017-10-11 2019-04-19 阿里巴巴集团控股有限公司 总线设备、计算机设备及实现物理主机云存储的方法
CN108920328A (zh) * 2018-06-28 2018-11-30 中国联合网络通信集团有限公司 发现终端应用变更的方法及装置
CN108920328B (zh) * 2018-06-28 2022-04-19 中国联合网络通信集团有限公司 发现终端应用变更的方法及装置
CN111198663A (zh) * 2020-01-03 2020-05-26 苏州浪潮智能科技有限公司 控制数据存取操作的方法、系统、装置以及存储介质
CN111198663B (zh) * 2020-01-03 2022-09-20 苏州浪潮智能科技有限公司 控制数据存取操作的方法、系统、装置以及存储介质
CN112882989A (zh) * 2021-02-04 2021-06-01 无锡沐创集成电路设计有限公司 协议处理系统和协议数据处理方法
CN112882989B (zh) * 2021-02-04 2024-04-02 无锡沐创集成电路设计有限公司 协议处理系统和协议数据处理方法

Also Published As

Publication number Publication date
CN106610789B (zh) 2019-08-16

Similar Documents

Publication Publication Date Title
CN106610789A (zh) 一种数据处理方法、装置及系统
US10152441B2 (en) Host bus access by add-on devices via a network interface controller
CN106375142B (zh) 应用程序的测试方法和装置
CN103888293B (zh) 多通道fc网络数据仿真系统的数据通道调度方法
CN108337910A (zh) 用于软件定义的互连交换机的架构
CN103218266B (zh) 虚拟机与外部机器通信时使用的方法、设备及虚拟机系统
CN106020926B (zh) 一种用于虚拟交换机技术中数据传输的方法及装置
CN113312143B (zh) 云计算系统、命令处理方法及虚拟化仿真装置
CN103927216B (zh) 用于管理虚拟装置的方法和系统
CN104798010B (zh) 至少部分的串行存储协议兼容帧转换
CN105049464B (zh) 用于加速网络虚拟化的技术
CN109597582A (zh) 一种数据处理方法及相关设备
CN114880977A (zh) 软硬件联合仿真系统、方法、装置、设备和存储介质
CN106662895B (zh) 计算机设备和计算机设备数据读写的方法
CN105518610B (zh) 处理操作请求的存储系统、方法及装置
CN107203408A (zh) 重定向的方法、装置和系统
CN104199716B (zh) 一种虚拟机热迁移的方法、物理主机及系统
CN107506324A (zh) 转接设备、远程通信系统、数据传输方法及装置
CN103092676A (zh) 虚拟机集群的模拟输入输出方法、装置及系统
CN105487403A (zh) 一种基于can的运动控制系统建立及其仿真建模方法
CN109672575A (zh) 数据处理方法及电子设备
CN114397999A (zh) 基于非易失内存接口-远程处理消息传递的通信方法、装置及设备
CN101567890A (zh) 元数据传输方法、客户端设备及服务器设备
CN105592492A (zh) 高层协议栈一致性测试平台及测试方法
CN117278890A (zh) 光模块访问方法、装置、系统、电子设备及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant