CN110781226A - 数据分析方法、装置、存储介质、设备及系统 - Google Patents

数据分析方法、装置、存储介质、设备及系统 Download PDF

Info

Publication number
CN110781226A
CN110781226A CN201911030339.5A CN201911030339A CN110781226A CN 110781226 A CN110781226 A CN 110781226A CN 201911030339 A CN201911030339 A CN 201911030339A CN 110781226 A CN110781226 A CN 110781226A
Authority
CN
China
Prior art keywords
analysis
analysis tool
target
architecture
tool
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911030339.5A
Other languages
English (en)
Other versions
CN110781226B (zh
Inventor
沈丽忠
李晓敦
赵世辉
谢立东
李婉华
唐景峰
郑健
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Construction Bank Corp
Original Assignee
China Construction Bank Corp
CCB Finetech Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Construction Bank Corp, CCB Finetech Co Ltd filed Critical China Construction Bank Corp
Priority to CN201911030339.5A priority Critical patent/CN110781226B/zh
Publication of CN110781226A publication Critical patent/CN110781226A/zh
Application granted granted Critical
Publication of CN110781226B publication Critical patent/CN110781226B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2458Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2465Query processing support for facilitating data mining operations in structured databases

Abstract

本发明实施例公开了数据分析方法、装置、存储介质、设备及系统。该方法包括:接收基于第一网页输入的分析工具的选择操作,其中,第一网页中包含多个分析工具对应的选项,多个分析工具包括基于B/S架构的分析工具和基于C/S架构的分析工具,根据选择操作确定目标分析工具,并进入目标分析工具对应的目标分析环境,接收基于目标分析环境输入的第一分析任务的操作指令,并根据操作指令执行相应的数据分析处理。本发明实施例通过采用上述技术方案,可以将基于B/S架构的分析工具和基于C/S架构的分析工具整合到同一个网页中,提供一站式的数据分析挖掘环境,提升数据分析的便捷性和效率。

Description

数据分析方法、装置、存储介质、设备及系统
技术领域
本发明实施例涉及计算机技术领域,尤其涉及数据分析方法、装置、存储介质、设备及系统。
背景技术
目前,在数据分析挖掘领域,人们可以利用数据分析工具或产品来完成各种数据分析相关任务。主流的数据分析工具一般可划分为两类:第一类是基于浏览器/服务端(Browser/Server,B/S)架构的数据分析工具,如以Jupyter和Apache Zepplin为代表的notebook类产品,由于其免安装、开箱即用以及丰富的开源框架支持等特点,广受数据科学家的喜爱;第二类是基于客户端/服务端(Client/Server,C/S)架构的数据分析工具,如RStudio,Office Excel,SAS EG/EM,IBM SPSS以及Teradata Aster Database等,由于其具有良好的人机交互体验和丰富的可视化展现方式,在传统企业客户中得到广泛应用。
然而,由于数据挖掘分析任务通常复杂性高,一种数据分析工具很难适用所有场景,为了匹配不同的数据挖掘分析场景,数据分析师或数据科学家们往往需要尝试不同的工具或产品,找到一个最佳的解决方案,降低了数据分析效率,另一方面,用户行为习惯一旦养成,往往就很难改变,而且原有的企业级分析挖掘产品已经培养并沉淀了大量的用户和成果,这对企业来说也是一种资产,需要得到保护和继承,若需要用户不停地学习自己不熟悉的数据分析工具,则会进一步降低数据分析效率。因此,目前的数据分析方案需要改进。
发明内容
本发明实施例提供了数据分析方法、装置、存储介质、设备及系统,可以优化现有的数据分析方案。
第一方面,本发明实施例提供了一种数据分析方法,包括:
接收基于第一网页输入的分析工具的选择操作,其中,所述第一网页中包含多个分析工具对应的选项,所述多个分析工具包括基于B/S架构的分析工具和基于C/S架构的分析工具;
根据所述选择操作确定目标分析工具,并进入所述目标分析工具对应的目标分析环境;
接收基于所述目标分析环境输入的第一分析任务的操作指令,并根据所述操作指令执行相应的数据分析处理。
第二方面,本发明实施例提供了一种数据分析装置,包括:
选择操作接收模块,用于接收基于第一网页输入的分析工具的选择操作,其中,所述第一网页中包含多个分析工具对应的选项,所述多个分析工具包括基于B/S架构的分析工具和基于C/S架构的分析工具;
分析环境进入模块,用于根据所述选择操作确定目标分析工具,并进入所述目标分析工具对应的目标分析环境;
数据分析处理模块,用于接收基于所述目标分析环境输入的第一分析任务的操作指令,并根据所述操作指令执行相应的数据分析处理。
第三方面,本发明实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明实施例提供的数据分析方法。
第四方面,本发明实施例提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如本发明实施例提供的数据分析方法。
第五方面,本发明实施例提供了一种数据分析系统,包括本发明实施例提供的计算机设备,与基于B/S架构的分析工具对应的第一服务器,与基于C/S架构的分析工具对应的协议转换服务器、宿主机以及第二服务器,其中,所述宿主机中安装有与所述基于C/S架构的分析工具对应的客户端。
本发明实施例中提供的数据分析方案,接收基于第一网页输入的分析工具的选择操作,其中,第一网页中包含基于B/S架构的分析工具和基于C/S架构的分析工具对应的选项,根据选择操作确定目标分析工具,并进入目标分析工具对应的目标分析环境,接收基于目标分析环境输入的第一分析任务的操作指令,并根据操作指令执行相应的数据分析处理。通过采用上述技术方案,可以将基于B/S架构的分析工具和基于C/S架构的分析工具整合到同一个网页中,提供一站式的数据分析挖掘环境,提升数据分析的便捷性和效率。
附图说明
图1为本发明实施例一提供的一种数据分析方法的流程示意图;
图2为本发明实施例二提供的一种数据分析方法的流程示意图;
图3为本发明实施例二提供的一种数据分析系统架构示意图;
图4为本发明实施例三提供的一种数据分析方法的流程示意图;
图5为本发明实施例四提供的一种数据分析方法的流程示意图;
图6为本发明实施例五提供的一种数据分析装置的结构框图;
图7为本发明实施例七提供的一种计算机设备的结构框图;
图8为本发明实施例八提供的一种数据分析系统的结构框图。
具体实施方式
下面结合附图并通过具体实施方式来进一步说明本发明的技术方案。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理,但是其中的许多步骤可以被并行地、并发地或者同时实施。此外,各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
实施例一
图1为本发明实施例提供的一种数据分析方法的流程示意图,该方法可以由数据分析装置执行,其中该装置可由软件和/或硬件实现,一般可集成在计算机设备中。如图1所示,该方法包括:
步骤101、接收基于第一网页输入的分析工具的选择操作,其中,第一网页中包含多个分析工具对应的选项,多个分析工具包括基于B/S架构的分析工具和基于C/S架构的分析工具。
示例性的,基于客户端/服务端(Client/Server,C/S)架构(又称CS架构)的数据分析工具或产品需要在计算机的操作系统中安装工具或产品对应的客户端软件,操作系统如窗口操作系统(Windows)、Linux或苹果操作系统(MacOS)等;基于浏览器/服务端(Browser/Server,B/S)架构(又称BS架构)的数据分析工具或产品是对C/S架构的一种变换或者改进的架构,在该架构下,用户界面可以完全通过浏览器,如万维网(World Wide Web,WWW)浏览器,来实现具体的操作。
相关技术中,基于B/S架构的分析工具,如Jupyter Notebook,是一个开源的Web应用程序,允许用户创建和共享包含代码、方程式、可视化和文本的文档,它的用途包括数据清理和转换、数值模拟、统计建模、数据可视化以及机器学习等;又如Apache Zepplin是一个基于web的笔记本,支持交互式数据分析,可以用结构化查询语言(Structured QueryLanguage,SQL)以及Scala等做出数据驱动的、交互、协作的文档。以Jupyter和ApacheZepplin为代表的notebook产品所提供的灵活的可编程环境能够很好地满足技术背景(特别是编程能力)较强的数据科学家的数据分析挖掘需求,但是对于业务分析师来说,他们精通业务,但却往往没有编程能力,他们习惯了类似Office Excel或者SAS EG等基于C/S架构的可视化的分析工具,这类notebook产品对他们来说门槛太高。可见,相关技术中的数据分析工具虽各具特色,但仍无法适用所有用户以及具体数据分析任务的需求。
本发明实施例中,在网页中可以同时提供基于B/S架构的分析工具和基于C/S架构的分析工具给用户选择,用户可以通过浏览器访问第一网页,并根据自己的需求选择其中的分析工具。可选的,第一网页可以基于超级文本标记语言(Hyper Text MarkupLanguage,HTML)第5.0版本(简称HTML5)来实现。
可选的,可以对分析工具进行分类显示,如划分基于B/S架构的分析工具的显示区域和基于C/S架构的分析工具的显示区域,在各显示区域内分别展示所包含的分析工具对应的选项,选项可以以工具名称等进行显示,方便用户根据自己的需求进行选择。其中,选择操作例如可以是作用于选项的点击操作等。
步骤102、根据选择操作确定目标分析工具,并进入目标分析工具对应的目标分析环境。
目标分析工具可理解为用户选择的想要使用的分析工具,目标分析工具可以包含一个或多个,本发明实施例不做限定,当包含多个时,可以支持批量选择或依次选择等选择方式。
示例性的,若用户选择了基于B/S架构的第一分析工具,则可以进入该第一分析工具对应的分析环境。可选的,基于B/S架构的分析工具对应的分析环境包括可编程分析挖掘环境和工作流分析挖掘环境。可编程分析挖掘环境例如包括基于笔记本(notebook)类的产品界面,工作流分析挖掘环境例如包括基于拖拉拽操作方式的产品界面等。
示例性的,若用户选择了基于C/S架构的第二分析工具,则可以进入该第二分析工具对应的分析环境。可选的,基于C/S架构的分析工具对应的分析环境包括在操作系统界面中客户端的界面。操作系统可包括如Windows、Linux或MacOS等。以第二分析工具为OfficeExcel为例,对应的分析环境可以是Windows操作系统下安装的Office Excel软件的操作界面。
步骤103、接收基于目标分析环境输入的第一分析任务的操作指令,并根据操作指令执行相应的数据分析处理。
示例性的,在进入目标分析环境后,用户可以在目标分析环境中针对当前需要进行的第一分析任务进行相应的操作,如导入原始数据、选择公式、生成分析挖掘图表以及数学建模等等。
示例性的,若当前的目标分析工具为基于B/S架构的分析工具,则可根据操作指令访问对应的Web服务器,由Web服务器提供数据分析挖掘服务,并得到相应的数据分析处理结果;若当前的目标分析工具为基于C/S架构的分析工具,则可根据操作指令访问对应的客户端,由客户端通过访问对应服务端,来完成操作指令对应的数据分析处理,并返回处理结果。其中,客户端可以安装在本地,也可以安装在其他宿主机中,本发明实施例不做限定。
本发明实施例中提供的数据分析方法,接收基于第一网页输入的分析工具的选择操作,其中,第一网页中包含基于B/S架构的分析工具和基于C/S架构的分析工具对应的选项,根据选择操作确定目标分析工具,并进入目标分析工具对应的目标分析环境,接收基于目标分析环境输入的第一分析任务的操作指令,并根据操作指令执行相应的数据分析处理。通过采用上述技术方案,可以将基于B/S架构的分析工具和基于C/S架构的分析工具整合到同一个网页中,提供一站式的数据分析挖掘环境,提升数据分析的便捷性和效率。
实施例二
图2为本发明实施例二提供的一种数据分析方法的流程示意图,本发明实施例在上述实施例基础上,对根据操作指令执行相应的数据分析处理的步骤进行优化。
示例性的,当所述目标分析工具包括基于B/S架构的分析工具时,所述根据所述操作指令执行相应的数据分析处理,包括:根据所述操作指令生成第一操作请求;向所述目标分析工具对应的第一服务器发送所述第一操作请求,并接收所述第一服务器根据所述第一操作请求返回的数据分析结果。
示例性的,当所述目标分析工具包括基于C/S架构的分析工具时,所述根据所述操作指令执行相应的数据分析处理,包括:根据所述操作指令生成第二操作请求;向所述目标分析工具对应的协议转换服务器发送所述第二操作请求,以指示所述协议转换服务器将所述第二操作请求转换成符合预设远程桌面类协议的第三操作请求,并将所述第三操作请求发送至所述目标分析工具对应的宿主机,通过所述宿主机访问所述目标分析工具对应的第二服务器,并接收所述第二服务器返回的与所述第二操作请求对应的数据分析结果,其中,所述目标分析工具对应的宿主机中安装有所述目标分析工具对应的客户端。
具体的,该方法可包括如下步骤:
步骤201、接收基于第一网页输入的分析工具的选择操作,其中,第一网页中包含多个分析工具对应的选项,多个分析工具包括基于B/S架构的分析工具和基于C/S架构的分析工具。
示例性的,第一网页可以是HTML5浏览器中的网页,可以视为前端界面。
步骤202、根据选择操作确定目标分析工具,当目标分析工具为基于B/S架构的分析工具时,执行步骤203;当目标分析工具为基于C/S架构的分析工具时,执行步骤206。
步骤203、进入基于B/S架构的目标分析工具对应的目标分析环境。
示例性的,基于B/S架构的目标分析工具对应的目标分析环境可包括可编程分析挖掘环境和工作流分析挖掘环境。在计算机设备中,无需安装第三方乳尖,就能够访问原生的B/S架构的分析挖掘环境。
步骤204、接收基于目标分析环境输入的第一分析任务的操作指令,根据操作指令生成第一操作请求。
对于基于B/S架构的目标分析工具,可以不需要进行额外的协议转化,通过前端界面中显示的目标分析环境接收操作指令,并生成第一操作请求,第一操作请求可以是超文本传输协议(Hyper Text Transfer Protocol,HTTP)请求。
步骤205、向目标分析工具对应的第一服务器发送第一操作请求,并接收第一服务器根据第一操作请求返回的数据分析结果。
示例性的,将上述符合HTTP协议的第一操作请求发送至对应的web服务器,然后通过调用或组装后端的服务把数据分析结果返回给前端。后端的服务可以由对应种类的分析环境服务端集群提供,如可编程分析环境服务端集群和工作流分析挖掘环境服务端集群等。
步骤206、进入基于C/S架构的目标分析工具对应的目标分析环境。
示例性的,可以为基于C/S架构的分析工具配置宿主机,在宿主机中安装分析工具对应的客户端软件,不同的基于C/S架构的分析工具可以对应同一个宿主机,也可以对应不同的宿主机,本发明实施例不做限定。可以通过前端浏览器来访问安装在宿主机上的基于C/S架构的分析工具的客户端,进入对应的客户端的界面,也即进入对应的分析环境。宿主机中装载的操作系统可以是Windows、Linux或MacOS等。
可选的,可以为基于C/S架构的分析工具配置协议转换服务器,例如是可以将HTTP协议转换成预设远程桌面类协议的协议转换服务器,将该协议转换服务器作为前端浏览器和宿主机的通信桥梁,在需要进入基于C/S架构的目标分析工具对应的目标分析环境时,通知宿主机启动对应的客户端,并利用远程桌面技术将宿主机中的客户端的界面传递至前端浏览器,进而实现进入目标分析环境。其中,预设远程桌面类协议例如可以是远程桌面协议(Remote Desktop Protocol,RDP),或者虚拟网络控制台(Virtual Network Console,VNC)协议等。
可选的,当所述目标分析工具包括基于C/S架构的分析工具时,进入所述目标分析工具对应的目标分析环境,包括:向所述目标分析工具对应的协议转换服务器发送客户端启动请求,以指示所述协议转换服务器将所述客户端启动请求转换成符合预设远程桌面类协议的启动请求,并将所述启动请求发送至所述目标分析工具对应的宿主机,通过所述宿主机启动所述目标分析工具对应的客户端,并返回客户端的操作界面,以实现进入所述目标分析工具对应的目标分析环境。
步骤207、接收基于目标分析环境输入的第一分析任务的操作指令,根据操作指令生成第二操作请求。
示例性的,在目标分析环境中,可以通过浏览器来显示和操控宿主机界面,借此,可以通过浏览器操控宿主机上的客户端,前端可以根据用户输入的操作指令生成第二操作请求。
步骤208、向目标分析工具对应的协议转换服务器发送第二操作请求,以指示协议转换服务器将第二操作请求转换成符合预设远程桌面类协议的第三操作请求,并将第三操作请求发送至目标分析工具对应的宿主机,通过宿主机访问目标分析工具对应的第二服务器,并接收第二服务器返回的与第二操作请求对应的数据分析结果。
示例性的,通过协议转换服务器可以将第二操作请求转换成符合预设远程桌面类协议的第三操作请求,再与运行在宿主机上的对应的预设远程桌面类协议的服务器进行通信,进而通过宿主机访问对应的第二服务器。第二服务器可理解为基于C/S架构的分析工具的客户端对应的后端服务,如SAS EG/EM,RStudio等后端服务,可以由服务端集群实现。
以SAS Viya为例,其是一个开放式云就绪的内存平台,具备随时获得快速、准确、一致的分析结果所需的功能,以其灵活扩展的容错处理能力,支持当前复杂的分析挑战,为数据科学家和统计师提供丰富的分析功能。无论是采用SAS、Python、Java或Lua,分析人员都利用SAS进行数据处理、交互式数据调查和高级分析。然而,SAS Viya是SAS公司新一代的产品,无法兼容客户原有购买的SAS EG/EM产品,不利于保护和继承公司原有的资产;另一方面,SAS Viya只能支持其体系内的产品,如
Figure BDA0002249946540000111
可视化分析(
Figure BDA0002249946540000112
VisualAnalytics)等,它无法兼容和支持RStudio,Office Excel,IBM SPSS以及Teradata AsterDatabase等其他分析挖掘产品。
本发明实施例中,将基于C/S架构的分析工具的客户端软件安装在宿主机上,用户使用的计算机设备中无需安装第三方软件,即可通过访问浏览器的方式来使用这些基于C/S架构的分析工具,不仅节省了计算机设备的存储空间,还能够实时使用最新的产品,不受产品更新换代的影响。
为了便于理解本发明实施例的技术方案,对系统架构进行介绍。图3为本发明实施例二提供的一种数据分析系统架构示意图,如图3所示,可分为三层:前端界面层、协议转换层和分析挖掘服务层。前端界面层可完全基于HTML5浏览器,无需用户安装任何第三方软件,就能够访问原生的B/S架构的分析挖掘环境,包含基于notebook的可编程分析挖掘环境和基于托拉拽的工作流分析挖掘环境;此外,用户通过浏览器还能够操控和显示Windows和Linux宿主机界面,借此,可以实现通过浏览器操控安装在Windows和Linux宿主机上的各种C/S架构分析挖掘软件(客户端)。协议转换层主要包含两部分:对于B/S架构的分析挖掘软件,无需做额外的协议转化,通过web服务器接收前端的http请求,然后通过调用/组装后端的服务把结果返回给前端;对于C/S架构的分析挖掘软件,需要由HTTP协议转换服务器接收来自前端的HTTP请求,把其转化为RPD或VNC等远程桌面类协议,再与运行在Windows/Linux上对应的RDP/VNC服务器进行通信。分析挖掘服务层也主要包含两块:对于B/S架构分析挖掘软件,典型的后端服务包含两种:可编程分析挖掘环境后端服务(如:Jupyter或Zepplin后端服务)和工作流分析挖掘环境后端服务;对于C/S架构分析挖掘软件,后端服务就是各种分析挖掘软件的后端服务,如SAS EG/EM,RStudio等后端服务。
本发明实施例提供的数据分析方法,针对基于C/S架构的分析工具可以利用协议转换服务器来实现前端与宿主机之间的通信,进而在同一个平台上,能够无缝地集成B/S和C/S两大类异构的挖掘分析产品,为用户提供一站式的、丰富的、开箱即用的数据分析挖掘环境,在新的平台上,企业既可以给用户提供前沿的、快速发展的分析挖掘工具或环境(以B/S架构为主),实现新技术的探索,另一方面,企业在原有的分析挖掘产品(以C/S架构为主)已经培养并沉淀了大量的用户和成果,在新的平台上,这部分资产能够得到保护和继承,继续发挥其价值。
实施例三
图4为本发明实施例三提供的一种数据分析方法的流程示意图,本发明实施例在上述实施例基础上进行优化,当所述目标分析工具同时包括基于B/S架构的分析工具和基于C/S架构的分析工具时,在根据所述操作指令执行相应的数据分析处理之后,还包括:获取基于B/S架构的分析工具得到的所述第一分析任务的第一分析结果,以及获取基于C/S架构的分析工具得到的所述第一分析任务的第二分析结果;对所述第一分析结果和所述第二分析结果进行比较,并提供比较结果。
如图4所示,该方法可包括:
步骤401、接收基于第一网页输入的分析工具的选择操作,其中,第一网页中包含多个分析工具对应的选项,多个分析工具包括基于B/S架构的分析工具和基于C/S架构的分析工具。
步骤402、根据选择操作确定两个目标分析工具,并分别进入两个目标分析工具对应的目标分析环境。
示例性的,记两个目标分析工具分别为第一目标分析工具和第二目标分析工具。其中,第一目标分析工具为基于B/S架构的分析工具,第二目标分析工具为基于C/S架构的分析工具;或者,第一目标分析工具为基于C/S架构的分析工具,第二目标分析工具为基于B/S架构的分析工具。
示例性的,可以依次进入第一目标分析工具对应的目标分析环境和第二目标分析工具对应的目标分析环境;也可同时进入第一目标分析工具对应的目标分析环境和第二目标分析工具对应的目标分析环境,也即两个目标分析环境可以同时在第一网页中进行显示。
步骤403、分别接收基于两个目标分析环境输入的第一分析任务的操作指令,并根据操作指令执行相应的数据分析处理。
本步骤中,根据操作指令执行相应的数据分析处理的具体细节可参考上述实施例中的相关内容,此处不再赘述。
步骤404、获取基于B/S架构的分析工具得到的第一分析任务的第一分析结果,以及获取基于C/S架构的分析工具得到的第一分析任务的第二分析结果。
步骤405、对第一分析结果和第二分析结果进行比较,并提供比较结果。
示例性的,可以在第一网页中展示比较结果,比较结果的具体展示形式可以根据实际情况进行设置,本发明实施例不做具体限定。
本发明实施例提供的数据分析方法,针对同一个分析任务,可以同时采用基于B/S架构的分析工具和基于C/S架构的分析工具进行数据分析处理,并对得到的分析结果进行比较,向用户提供比较结果,方便用户综合参考两种分析工具的分析挖掘结果,还可根据自身需求选择其中的优选结果,以便后续作业遇到类似分析任务时可以直接选择更佳的分析工具。
实施例四
图5为本发明实施例四提供的一种数据分析方法的流程示意图,本发明实施例在上述实施例基础上进行优化,当所述目标分析工具同时包括基于B/S架构的分析工具和基于C/S架构的分析工具时,所述根据所述选择操作确定目标分析工具,并进入所述目标分析工具对应的目标分析环境,接收基于所述目标分析环境输入的第一分析任务的操作指令,并根据所述操作指令执行相应的数据分析处理,包括:根据所述选择操作确定第一目标分析工具和第二目标分析工具;对第一分析任务进行分割,得到第一子任务和第二子任务;进入所述第一目标分析工具对应的第一目标分析环境,接收基于所述第一目标分析环境输入的第一子任务的第一操作指令,并根据所述第一操作指令执行相应的数据分析处理,得到中间分析结果;进入所述第二目标分析工具对应的第二目标分析环境,将所述中间分析结果传入所述第二目标分析环境中,接收基于所述第二目标分析环境输入的第二子任务的第二操作指令,并根据所述第二操作指令执行相应的数据分析处理,得到最终分析结果。
如图5所示,该方法可包括:
步骤501、接收基于第一网页输入的分析工具的选择操作,其中,第一网页中包含多个分析工具对应的选项,多个分析工具包括基于B/S架构的分析工具和基于C/S架构的分析工具。
步骤502、根据选择操作确定第一目标分析工具和第二目标分析工具。
其中,第一目标分析工具为基于B/S架构的分析工具,第二目标分析工具为基于C/S架构的分析工具;或者,第一目标分析工具为基于C/S架构的分析工具,第二目标分析工具为基于B/S架构的分析工具。
步骤503、对第一分析任务进行分割,得到第一子任务和第二子任务。
步骤504、进入第一目标分析工具对应的第一目标分析环境,接收基于第一目标分析环境输入的第一子任务的第一操作指令,并根据第一操作指令执行相应的数据分析处理,得到中间分析结果。
步骤505、进入第二目标分析工具对应的第二目标分析环境,将中间分析结果传入第二目标分析环境中,接收基于第二目标分析环境输入的第二子任务的第二操作指令,并根据第二操作指令执行相应的数据分析处理,得到最终分析结果。
本发明实施例提供的数据分析方法,针对同一个分析任务,可以对该分析任务进行分解,并先后采用基于B/S架构的分析工具和基于C/S架构的分析工具针对自身负责的子任务进行数据分析处理,可以发挥两种分析工具各自的优势,得到更好的数据分析挖掘结果。
实施例五
图6为本发明实施例五提供的一种数据分析装置的结构框图,该装置可由软件和/或硬件实现,一般可集成在计算机设备中,可通过执行数据分析方法来进行数据分析。如图6所示,该装置包括:
选择操作接收模块601,用于接收基于第一网页输入的分析工具的选择操作,其中,所述第一网页中包含多个分析工具对应的选项,所述多个分析工具包括基于B/S架构的分析工具和基于C/S架构的分析工具;
分析环境进入模块602,用于根据所述选择操作确定目标分析工具,并进入所述目标分析工具对应的目标分析环境;
数据分析处理模块603,用于接收基于所述目标分析环境输入的第一分析任务的操作指令,并根据所述操作指令执行相应的数据分析处理。
本发明实施例中提供的数据分析装置,接收基于第一网页输入的分析工具的选择操作,其中,第一网页中包含基于B/S架构的分析工具和基于C/S架构的分析工具对应的选项,根据选择操作确定目标分析工具,并进入目标分析工具对应的目标分析环境,接收基于目标分析环境输入的第一分析任务的操作指令,并根据操作指令执行相应的数据分析处理。通过采用上述技术方案,可以将基于B/S架构的分析工具和基于C/S架构的分析工具整合到同一个网页中,提供一站式的数据分析挖掘环境,提升数据分析的便捷性和效率。
可选的,当所述目标分析工具包括基于B/S架构的分析工具时,所述根据所述操作指令执行相应的数据分析处理,包括:
根据所述操作指令生成第一操作请求;
向所述目标分析工具对应的第一服务器发送所述第一操作请求,并接收所述第一服务器根据所述第一操作请求返回的数据分析结果。
可选的,当所述目标分析工具包括基于C/S架构的分析工具时,所述根据所述操作指令执行相应的数据分析处理,包括:
根据所述操作指令生成第二操作请求;
向所述目标分析工具对应的协议转换服务器发送所述第二操作请求,以指示所述协议转换服务器将所述第二操作请求转换成符合预设远程桌面类协议的第三操作请求,并将所述第三操作请求发送至所述目标分析工具对应的宿主机,通过所述宿主机访问所述目标分析工具对应的第二服务器,并接收所述第二服务器返回的与所述第二操作请求对应的数据分析结果,其中,所述目标分析工具对应的宿主机中安装有所述目标分析工具对应的客户端。
可选的,基于B/S架构的分析工具对应的分析环境包括可编程分析挖掘环境和工作流分析挖掘环境。
可选的,当所述目标分析工具同时包括基于B/S架构的分析工具和基于C/S架构的分析工具时,在根据所述操作指令执行相应的数据分析处理之后,还包括:
获取基于B/S架构的分析工具得到的所述第一分析任务的第一分析结果,以及获取基于C/S架构的分析工具得到的所述第一分析任务的第二分析结果;
对所述第一分析结果和所述第二分析结果进行比较,并提供比较结果。
可选的,当所述目标分析工具同时包括基于B/S架构的分析工具和基于C/S架构的分析工具时:
所述分析环境进入模块,具体用于根据所述选择操作确定第一目标分析工具和第二目标分析工具,对第一分析任务进行分割,得到第一子任务和第二子任务,进入所述第一目标分析工具对应的第一目标分析环境,以及进入所述第二目标分析工具对应的第二目标分析环境;
所述数据分析处理模块,用于接收基于所述第一目标分析环境输入的第一子任务的第一操作指令,并根据所述第一操作指令执行相应的数据分析处理,得到中间分析结果;接收基于所述第二目标分析环境输入的第二子任务的第二操作指令,并根据所述第二操作指令执行相应的数据分析处理,得到最终分析结果。
实施例六
本发明实施例还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行数据分析方法,该方法包括:
接收基于第一网页输入的分析工具的选择操作,其中,所述第一网页中包含多个分析工具对应的选项,所述多个分析工具包括基于B/S架构的分析工具和基于C/S架构的分析工具;
根据所述选择操作确定目标分析工具,并进入所述目标分析工具对应的目标分析环境;
接收基于所述目标分析环境输入的第一分析任务的操作指令,并根据所述操作指令执行相应的数据分析处理。
存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括:安装介质,例如CD-ROM、软盘或磁带装置;计算机系统存储器或随机存取存储器,诸如DRAM、DDRRAM、SRAM、EDORAM,兰巴斯(Rambus)RAM等;非易失性存储器,诸如闪存、磁介质(例如硬盘或光存储);寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外,存储介质可以位于程序在其中被执行的第一计算机系统中,或者可以位于不同的第二计算机系统中,第二计算机系统通过网络(诸如因特网)连接到第一计算机系统。第二计算机系统可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括可以驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。
当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的数据分析操作,还可以执行本发明任意实施例所提供的数据分析方法中的相关操作。
实施例七
本发明实施例提供了一种计算机设备,该计算机设备中可集成本发明实施例提供的数据分析装置。图7为本发明实施例七提供的一种计算机设备的结构框图。计算机设备700可以包括:存储器701,处理器702及存储在存储器701上并可在处理器运行的计算机程序,所述处理器702执行所述计算机程序时实现如本发明实施例所述的数据分析方法。
本发明实施例提供的计算机设备,可以将基于B/S架构的分析工具和基于C/S架构的分析工具整合到同一个网页中,提供一站式的数据分析挖掘环境,提升数据分析的便捷性和效率。
实施例八
图8为本发明实施例八提供的一种数据分析系统的结构框图,该系统包括本发明实施例提供的计算机设备801,与基于B/S架构的分析工具对应的第一服务器802,与基于C/S架构的分析工具对应的协议转换服务器803、宿主机804以及第二服务器805,其中,所述宿主机中安装有与所述基于C/S架构的分析工具对应的客户端。
其中,图8中各组成设备仅示出一个,在具体实施时,可以为多个,本发明实施例不做限定,各组成设备直接的通信方式也不做限定。
计算机设备801,用于接收基于第一网页输入的分析工具的选择操作,其中,所述第一网页中包含多个分析工具对应的选项,所述多个分析工具包括基于B/S架构的分析工具和基于C/S架构的分析工具,根据所述选择操作确定目标分析工具,并进入所述目标分析工具对应的目标分析环境,接收基于所述目标分析环境输入的第一分析任务的操作指令,并根据所述操作指令执行相应的数据分析处理。
第一服务器802,用于为基于B/S架构的分析工具提供服务,如接收计算机设备801发送的根据操作指令生成第一操作请求,并根据所述第一操作请求返回数据分析结果。
协议转换服务器803,用于在计算机设备801和宿主机804之间做协议转换,如接收计算机设备801发送的根据操作指令生成第二操作请求,将所述第二操作请求转换成符合预设远程桌面类协议的第三操作请求,并将所述第三操作请求发送至所述目标分析工具对应的宿主机。
宿主机804,用于与第二服务器805进行通信,如访问所述目标分析工具对应的第二服务器,并接收所述第二服务器返回的与所述第二操作请求对应的数据分析结果。
第二服务器805,用于为基于C/S架构的分析工具提供服务,如向宿主机804返回与所述第二操作请求对应的数据分析结果。
上述实施例中提供的数据分析装置、存储介质、计算机设备以及数据分析系统可执行本发明任意实施例所提供的数据分析方法,具备执行该方法相应的功能模块和有益效果。未在上述实施例中详尽描述的技术细节,可参见本发明任意实施例所提供的数据分析方法。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种数据分析方法,其特征在于,包括:
接收基于第一网页输入的分析工具的选择操作,其中,所述第一网页中包含多个分析工具对应的选项,所述多个分析工具包括基于B/S架构的分析工具和基于C/S架构的分析工具;
根据所述选择操作确定目标分析工具,并进入所述目标分析工具对应的目标分析环境;
接收基于所述目标分析环境输入的第一分析任务的操作指令,并根据所述操作指令执行相应的数据分析处理。
2.根据权利要求1所述的方法,其特征在于,当所述目标分析工具包括基于B/S架构的分析工具时,所述根据所述操作指令执行相应的数据分析处理,包括:
根据所述操作指令生成第一操作请求;
向所述目标分析工具对应的第一服务器发送所述第一操作请求,并接收所述第一服务器根据所述第一操作请求返回的数据分析结果。
3.根据权利要求1所述的方法,其特征在于,当所述目标分析工具包括基于C/S架构的分析工具时,所述根据所述操作指令执行相应的数据分析处理,包括:
根据所述操作指令生成第二操作请求;
向所述目标分析工具对应的协议转换服务器发送所述第二操作请求,以指示所述协议转换服务器将所述第二操作请求转换成符合预设远程桌面类协议的第三操作请求,并将所述第三操作请求发送至所述目标分析工具对应的宿主机,通过所述宿主机访问所述目标分析工具对应的第二服务器,并接收所述第二服务器返回的与所述第二操作请求对应的数据分析结果,其中,所述目标分析工具对应的宿主机中安装有所述目标分析工具对应的客户端。
4.根据权利要求1所述的方法,其特征在于,基于B/S架构的分析工具对应的分析环境包括可编程分析挖掘环境和工作流分析挖掘环境。
5.根据权利要求1-4任一所述的方法,其特征在于,当所述目标分析工具同时包括基于B/S架构的分析工具和基于C/S架构的分析工具时,在根据所述操作指令执行相应的数据分析处理之后,还包括:
获取基于B/S架构的分析工具得到的所述第一分析任务的第一分析结果,以及获取基于C/S架构的分析工具得到的所述第一分析任务的第二分析结果;
对所述第一分析结果和所述第二分析结果进行比较,并提供比较结果。
6.根据权利要求1所述的方法,其特征在于,当所述目标分析工具同时包括基于B/S架构的分析工具和基于C/S架构的分析工具时,所述根据所述选择操作确定目标分析工具,并进入所述目标分析工具对应的目标分析环境,接收基于所述目标分析环境输入的第一分析任务的操作指令,并根据所述操作指令执行相应的数据分析处理,包括:
根据所述选择操作确定第一目标分析工具和第二目标分析工具;
对第一分析任务进行分割,得到第一子任务和第二子任务;
进入所述第一目标分析工具对应的第一目标分析环境,接收基于所述第一目标分析环境输入的第一子任务的第一操作指令,并根据所述第一操作指令执行相应的数据分析处理,得到中间分析结果;
进入所述第二目标分析工具对应的第二目标分析环境,将所述中间分析结果传入所述第二目标分析环境中,接收基于所述第二目标分析环境输入的第二子任务的第二操作指令,并根据所述第二操作指令执行相应的数据分析处理,得到最终分析结果。
7.一种数据分析装置,其特征在于,包括:
选择操作接收模块,用于接收基于第一网页输入的分析工具的选择操作,其中,所述第一网页中包含多个分析工具对应的选项,所述多个分析工具包括基于B/S架构的分析工具和基于C/S架构的分析工具;
分析环境进入模块,用于根据所述选择操作确定目标分析工具,并进入所述目标分析工具对应的目标分析环境;
数据分析处理模块,用于接收基于所述目标分析环境输入的第一分析任务的操作指令,并根据所述操作指令执行相应的数据分析处理。
8.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-6任一项所述的方法。
9.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1-6任一项所述的方法。
10.一种数据分析系统,其特征在于,包括如权利要求9所述的计算机设备,与基于B/S架构的分析工具对应的第一服务器,与基于C/S架构的分析工具对应的协议转换服务器、宿主机以及第二服务器,其中,所述宿主机中安装有与所述基于C/S架构的分析工具对应的客户端。
CN201911030339.5A 2019-10-28 2019-10-28 数据分析方法、装置、存储介质、设备及系统 Active CN110781226B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911030339.5A CN110781226B (zh) 2019-10-28 2019-10-28 数据分析方法、装置、存储介质、设备及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911030339.5A CN110781226B (zh) 2019-10-28 2019-10-28 数据分析方法、装置、存储介质、设备及系统

Publications (2)

Publication Number Publication Date
CN110781226A true CN110781226A (zh) 2020-02-11
CN110781226B CN110781226B (zh) 2022-08-19

Family

ID=69386866

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911030339.5A Active CN110781226B (zh) 2019-10-28 2019-10-28 数据分析方法、装置、存储介质、设备及系统

Country Status (1)

Country Link
CN (1) CN110781226B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111400374A (zh) * 2020-03-18 2020-07-10 中国雄安集团数字城市科技有限公司 一种面向数据挖掘的容器化数据探索隔离区及其使用方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040249779A1 (en) * 2001-09-27 2004-12-09 Nauck Detlef D Method and apparatus for data analysis
US20110258432A1 (en) * 2010-04-15 2011-10-20 Microsoft Corporation Method and system for reliable protocol tunneling over http
CN102882878A (zh) * 2012-09-28 2013-01-16 浙江图讯科技有限公司 基于Web的数据分析客户端个性化展现的方法及系统
CN205121624U (zh) * 2015-10-09 2016-03-30 广州供电局有限公司番禺供电局 一种配电网经济运行及优化分析系统
US9582600B1 (en) * 2014-09-23 2017-02-28 Amazon Technologies, Inc. Cloud browser DOM-based client
CN109739541A (zh) * 2018-12-10 2019-05-10 中电科大数据研究院有限公司 一种双系统代码/文件管理平台架构

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040249779A1 (en) * 2001-09-27 2004-12-09 Nauck Detlef D Method and apparatus for data analysis
US20110258432A1 (en) * 2010-04-15 2011-10-20 Microsoft Corporation Method and system for reliable protocol tunneling over http
CN102882878A (zh) * 2012-09-28 2013-01-16 浙江图讯科技有限公司 基于Web的数据分析客户端个性化展现的方法及系统
US9582600B1 (en) * 2014-09-23 2017-02-28 Amazon Technologies, Inc. Cloud browser DOM-based client
CN205121624U (zh) * 2015-10-09 2016-03-30 广州供电局有限公司番禺供电局 一种配电网经济运行及优化分析系统
CN109739541A (zh) * 2018-12-10 2019-05-10 中电科大数据研究院有限公司 一种双系统代码/文件管理平台架构

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
陈骞等: "基于C /S和B /S混合结构的数据采集与整合系统", 《计算机应用研究》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111400374A (zh) * 2020-03-18 2020-07-10 中国雄安集团数字城市科技有限公司 一种面向数据挖掘的容器化数据探索隔离区及其使用方法
CN111400374B (zh) * 2020-03-18 2023-05-23 中国雄安集团数字城市科技有限公司 一种面向数据挖掘的容器化数据探索隔离区及其使用方法

Also Published As

Publication number Publication date
CN110781226B (zh) 2022-08-19

Similar Documents

Publication Publication Date Title
US8924842B2 (en) Method and system to build interactive documents
CN102520841B (zh) 收集用户接口
US11748557B2 (en) Personalization of content suggestions for document creation
US9043750B2 (en) Automated generation of two-tier mobile applications
US20090288000A1 (en) Interactive application for accessing information about a condition
US20070156649A1 (en) Source-context aware object-based navigation
US20200097586A1 (en) Relevance ranking of productivity features for determined context
CN103827778A (zh) 企业工具增强
JP2023107749A (ja) ブラウザベースのロボティックプロセスオートメーション(rpa)ロボット設計インターフェース
US20140157227A1 (en) Method and system for preserving restful web service structure in a client consuming the restful web service
CN110781226B (zh) 数据分析方法、装置、存储介质、设备及系统
US10089412B2 (en) Method of and system for processing a search query
EP3149729A1 (en) Method and system for processing a voice-based user-input
US8650247B2 (en) Four tier architecture for implementing thin clients
US20220350858A1 (en) Web task automation with vectorization
US20130138690A1 (en) Automatically identifying reused model artifacts in business process models
US8413062B1 (en) Method and system for accessing interface design elements via a wireframe mock-up
EP2921952B1 (en) Server and method for providing design data for application and system for generating application
US11599398B2 (en) Method for combining unified matters in personal workspace and system using the same
US11797623B2 (en) Microapp recommendations for networked application functionality
US20220350860A1 (en) Web task automation
Bodkin Why don’t we see a greater uptake of computational chemistry approaches by the medicinal chemistry community?
US20070156629A1 (en) Target context aware object-based navigation
Yunhasnawa et al. Analysis of System Requirements and Architecture for Facilitating Table-Based Data Clustering for Non-Technical Users
WO2023215890A1 (en) Distributed actor-based information system and method

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220921

Address after: 25 Financial Street, Xicheng District, Beijing 100033

Patentee after: CHINA CONSTRUCTION BANK Corp.

Address before: 25 Financial Street, Xicheng District, Beijing 100033

Patentee before: CHINA CONSTRUCTION BANK Corp.

Patentee before: Jianxin Financial Science and Technology Co.,Ltd.