CN112099788A - 一种可视化数据开发方法、系统、服务器和存储介质 - Google Patents

一种可视化数据开发方法、系统、服务器和存储介质 Download PDF

Info

Publication number
CN112099788A
CN112099788A CN202010928380.0A CN202010928380A CN112099788A CN 112099788 A CN112099788 A CN 112099788A CN 202010928380 A CN202010928380 A CN 202010928380A CN 112099788 A CN112099788 A CN 112099788A
Authority
CN
China
Prior art keywords
data
algorithm
flow graph
nodes
view interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010928380.0A
Other languages
English (en)
Inventor
刘亮
向阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Hongshan Information Technology Research Institute Co Ltd
Original Assignee
Beijing Hongshan Information Technology Research Institute Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Hongshan Information Technology Research Institute Co Ltd filed Critical Beijing Hongshan Information Technology Research Institute Co Ltd
Priority to CN202010928380.0A priority Critical patent/CN112099788A/zh
Publication of CN112099788A publication Critical patent/CN112099788A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/30Creation or generation of source code
    • G06F8/38Creation or generation of source code for implementing user interfaces

Abstract

本发明提供一种可视化数据开发方法,包括:创建数据视图界面;基于数据开发需求,从预设的数据管理目录中获取数据节点拖拽至所述数据视图界面,所述数据管理目录包括一个或多个数据节点;在所述数据视图界面创建数据连线以连接所述数据节点;基于所述数据节点和所述数据连线,生成数据流向图;基于所述数据流向图生成算法流向图;基于所述算法流向图执行算法,生成输出数据。本发明使用数据节点连线的方式将数据开发可视化展现,使大数据开发任务能够直观展现数据关系和数据流的流通过程,同时生成算法视图,展现了数据与算法的关系。

Description

一种可视化数据开发方法、系统、服务器和存储介质
技术领域
本发明实施例涉及大数据开发技术领域,尤其涉及一种可视化数据开发方法、系统、服务器和存储介质。
背景技术
随着大数据技术日趋完善,为了提高大数据开发效率,各大互联网公司相继发布可视化大数据开发工具,但这些开发工具的共同点是从任务的角度去开发业务,将开发完成的大数据展示为可视化图表,但对于大数据开发人员而言,他们更需要关注数据的流向和业务之间的关系。
现有技术中大数据的开发过程简单通过底层编译语言实现,很难直观展示大数据开发过程的流向,数据量大的时候无法从全局把握数据关系,也不方便开发人员直观掌握数据关系和数据流、算法流的流向。
发明内容
本发明提供了一种可视化数据开发方法、系统、服务器和存储介质,使用数据节点连线的方式将数据开发可视化展现,使大数据开发任务能够直观展现数据关系和数据流、算法流的流通过程。
第一方面,本发明提供一种可视化数据开发方法,包括:
创建数据视图界面;
基于数据开发需求,从预设的数据管理目录中获取数据节点拖拽至所述数据视图界面,所述数据管理目录包括一个或多个数据节点;
在所述数据视图界面创建数据连线以连接所述数据节点;
基于所述数据节点和所述数据连线,生成数据流向图;
基于所述数据流向图生成算法流向图;
基于所述算法流向图执行算法,生成输出数据。
进一步地,所述基于所述数据节点和所述数据连线,生成数据流向图之前,还包括:
在所述数据视图界面增加新的所述数据节点;和/或
在所述数据视图界面删除所述数据节点;和/或
在所述数据视图界面增加新的所述数据连线;和/或
在所述数据视图界面删除所述数据连线;和/或
框选所述数据视图界面的两个或两个以上数据节点。
进一步地,所述基于所述数据流向图生成算法流向图,包括:
创建算法视图界面;
基于所述数据流向图的数据节点和数据连线,基于预设规则在所述算法视图界面生成算法流向图,所述算法流向图包括算法节点和算法连线。
进一步地,所述基于所述数据流向图生成算法流向图之后,还包括:
判断所述数据流向图中最后输出的所述数据节点是否发生变更;
若是,则重新获取所述数据流向图;
基于更新后的所述数据流向图更新所述算法流向图;
若否,则不更新所述算法流向图。
进一步地,所述基于所述数据流向图的数据节点和数据连线,基于预设规则在所述算法视图界面生成算法流向图,所述算法流向图包括算法节点和算法连线之后,还包括:
选择所述算法流向图中的一个或多个算法节点;
对所述一个或多个算法节点进行资源、有效期和/或优先级的配置。
进一步地,在所述创建数据视图界面之前,还包括:
向其他用户发起数据使用申请,以获得数据使用权限;
获取所述数据,创建与所述数据对应的数据节点;
将所述数据节点列入所述数据管理目录。
进一步地,所述将所述数据节点列入所述数据管理目录,包括:
在所述数据管理目录中创建多个分类标签;
基于分类标签,在所述数据管理目录中保存所述数据节点。
第二方面,本发明提供一种可视化数据开发系统,包括:
数据视图模块,用于创建数据视图界面;
数据节点模块,用于从预设的数据管理目录中获取数据节点拖拽至所述数据视图界面,所述数据管理目录包括一个或多个数据节点;
数据连线模块,用于在所述数据视图界面创建数据连线以连接所述数据节点;
数据流向图生成模块,用于基于所述数据节点和所述数据连线,生成数据流向图;
算法流向图生成模块,用于基于所述数据流向图生成算法流向图,该模块还用于:创建算法视图界面;基于所述数据流向图的数据节点和数据连线,基于预设规则在所述算法视图界面生成算法流向图,所述算法流向图包括算法节点和算法连线。
第三方面,本发明提供一种服务器,包括存储器、处理器及存储在存储器上并可在处理器上运行的程序,所述处理器执行所述程序时实现如上述任一所述的一种可视化数据开发方法。
第四方面,本发明提供一种终端可读存储介质,其上存储有程序,其特征在于,所述程序被处理器执行时能够实现如上述任一所述的一种可视化数据开发方法。
本发明使用数据节点连线的方式将数据开发可视化展现,使大数据开发任务能够直观展现数据关系和数据流、算法流的流通过程。
附图说明
如图1所示为本实施例一的可视化数据开发方法流程图。
如图2所示为本实施例一的一种数据视图。
如图3所示为本实施例一的一种替代实施例流程图。
如图4所示为本实施例一的一种数据视图。
如图5所示为本实施例一的一种数据视图。
如图6所示为本实施例二的可视化数据开发方法流程图。
如图7所示为本实施例二的一种算法视图。
如图8所示为本实施例二的一种算法视图。
如图9所示为本实施例二的替代实施例流程图。
如图10所示为本实施例二的替代实施例流程图。
如图11所示为本实施例三的可视化数据开发方法流程图。
如图12所示为本实施例四的系统模块图。
如图13所示为本实施例四的替代实施例模块图。
如图14所示为本实施例五的服务器模块图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理,但是其中的许多步骤可以被并行地、并发地或者同时实施。此外,各步骤的顺序可以被重新安排。当其操作完成时处理可以被终止,但是还可以具有未包括在附图中的附加步骤。处理可以对应于方法、函数、规程、子例程、子程序等等。
此外,术语“第一”、“第二”等可在本文中用于描述各种方向、动作、步骤或元件等,但这些方向、动作、步骤或元件不受这些术语限制。这些术语仅用于将第一个方向、动作、步骤或元件与另一个方向、动作、步骤或元件区分。举例来说,在不脱离本申请的范围的情况下,第一特征可以为第二特征或第三特征,类似地,第二特征、第三特征可以为第一特征。第一特征和第二特征、第三特征都是分布式文件系统的特征,但其不是同一特征。术语“第一”、“第二”等而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中,“多个”、“批量”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
实施例一
本实施例提供了一种可视化数据开发方法,由可视化数据开发系统执行,如图1所示,包括如下步骤:
S101、创建数据视图界面。
该步骤中,在开发界面的数据管理目录下创建数据视图界面,所述数据视图界面为可视化的空白画布,可操作拖拽的数据节点在拖拽至所述空白画布之前以列表形式存储于数据管理目录。
S102、基于数据开发需求,从预设的数据管理目录中获取数据节点拖拽至所述数据视图界面,所述数据管理目录包括一个或多个数据节点。
该步骤中,数据管理目录中具有预设的一个或多个数据节点。
S103、在所述数据视图界面创建数据连线以连接所述数据节点。
该步骤中所述的数据连线为具有方向的连线,用于指示数据节点对应的数据流向。在一个或多个所述数据节点中,起始的数据节点(如图2的数据节点A1)引用的是数据管理目录存储的原始数据,其他数据节点(如图2的数据节点B1和C1)对应伴生算法生成的输出数据,所述输出数据包括开发过程的中间数据和/或开发流程结束后的中间数据;其中所述原始数据和输出数据均可以对应一组数据或多组不同的数据;可选地,所述数据的格式可以是数据表格式、文本数据和/或音视频数据等任意一种或多种,在本实施例及下述实施例中以数据表为例进行描述。
示例性地,数据开发需求为:从购物网站获取大量用户的购物信息做为源数据,对源数据进行数据清洗操作,和数据转换操作得到输出数据。在数据视图界面,拖拽3个数据节点至数据视图界面,如图2所示,数据视图中,从上至下依次为数据节点A1、数据连线、数据节点B1、数据连线和数据节点C1,其中数据节点A1对应伴生的算法节点A2,算法节点A2对应输出数据为a1,数据节点B1对应算法节点B2,算法节点B2对应输出数据为b1,数据节点C1对应算法节点C2,算法节点C2对应输出数据为c1,算法视图中数据节点A1指向B1,表明伴生算法节点A2的输出数据是a1,伴生算法节点B2的输入数据是a1,输出数据是b1。
如图3所示,在替代实施例中,在步骤S104之前,还包括:
S107、在所述数据视图界面增加新的所述数据节点;和/或在所述数据视图界面删除所述数据节点;和/或在所述数据视图界面增加新的所述数据连线;和/或在所述数据视图界面删除所述数据连线;和/或框选所述数据视图界面的两个或两个以上数据节点。
连线完成后,数据视图界面仍然可编辑,对数据节点和数据连线进行增加或删除。其中,所述对数据节点进行框选,示例性地,如图4所示为未框选时的数据视图,图7为对应的算法视图,数据节点D1的伴生算法节点为D2,伴生算法节点D2对应输出数据为d1,伴生算法数据节点E1的伴生算法为E2,伴生算法节点E2对应输出数据为e1,伴生算法数据节点F1的伴生算法为F2,伴生算法节点F2对应输出数据为f1,如图所述,未框选时,所述数据视图表示算法视图中数据节点D1指向E1,表明伴生算法节点D2的输出数据是d1,伴生算法节点E2的输入数据是d1,输出数据是e1,数据节点D1指向F1,表明伴生算法节点D2的输出数据是d1,伴生算法节点F2的输入数据是d1,输出数据是f1。该过程输出两个数据d1和f1。
如图5所示为框选后的数据视图,图8为对应的算法视图,在数据视图中,数据节点G1和数据节点H1进行框选,数据节点D1的伴生算法节点为D2,伴生算法节点D2对应输出数据为d1,数据节点G1的伴生算法节点为G2,伴生算法节点G2对应输出数据为g1,伴生算法数据节点H1的伴生算法为H2,伴生算法节点H2对应输出数据为h1。数据节点D1指向框选的数据节点G1和数据节点H1,表明伴生算法节点D2的输入数据为d1,该过程仅输出一个数据,例如,输出数据为g1和h1的和。通过框选操作能够实现数据视图下对单输出或多输出等更复杂场景的适配度。
可选地,S107还包括:对数据节点进行修改。所述修改指对数据节点引用的数据表进行重新配置,如对数据表进行分区信息的编辑校正,修改数据表字段信息、属性值等。
S104、基于所述数据节点和所述数据连线,生成数据流向图。
S105、基于所述数据流向图生成算法流向图;
S106、基于所述算法流向图执行算法,生成输出数据。
该步骤基于算法视图中算法节点的流向,对输入数据依次进行算法的计算,获得输出数据,完成所述数据开发任务。
可选地,在生成输出数据之后,还包括:将所述输出数据存入所述数据节点对应的数据表中,在数据管理目录保存所述数据流向图,同时在算法管理目录保存所述算法流向图。在数据开发项目中,一个项目包括多种任务,每个任务生成数据流向图和对应的算法流向图。
在一种实施例中,还包括:创建全局数据视图界面,从数据管理目录拖拽一个或多个数据流向图至全局数据视图界面,生成全局数据流向图。以从全局视角直观掌握数据开发过程的数据关系;
基于所述全局数据流向图生成全局算法流向图。以从以从全局视角直观掌握数据开发过程的算法关系。
本实施例通过使用数据节点连线的方式将数据开发可视化展现,使大数据开发任务能够直观展现数据关系和数据流的流通过程。同时通过在数据视图建立时对应建立数据视图的伴生算法视图,实现数据流程在算法维度的可视化展示,方便用户以更直观的形式查看算法的输入输出关系,以达到两种视图的映射联动,实现多角度展示数据开发的流程。
实施例二
本实施例在上述实施例的基础上详细描述了与数据视图具有对应关系的算法视图的建立过程,还增加了对算法的配置过程,如图6所示,步骤如下:
S201、创建数据视图界面。
S202、基于数据开发需求,从预设的数据管理目录中获取数据节点拖拽至所述数据视图界面,所述数据管理目录包括一个或多个数据节点。
S203、在所述数据视图界面创建数据连线以连接所述数据节点。
S204、基于所述数据节点和所述数据连线,生成数据流向图。
S205、创建算法视图界面。
S206、基于所述数据流向图的数据节点和数据连线,基于预设规则在所述算法视图界面生成算法流向图,所述算法流向图包括算法节点和算法连线。
该步骤中,算法管理目录基于数据流向图的数据节点和数据连线生成对应的算法视图界面,所述算法视图界面为可视化的空白画布,可操作拖拽的算法节点拖拽至空白画布。该步骤所述的预设规则包括:每个算法节点对应算法和基于算法的输出数据,在不包括虚线框的数据流程图(如图2)中,每个数据节点对应生成一个算法节点,在具有虚线框的数据流程图中,根据被框选后的输出数据个数对应生成一个算法节点,如图5所示,两个数据节点被框选,则对应生成一个算法节点。
每个算法连线用于指示所述算法节点的连接关系,为具有方向的连线。
在一种替代实施例中,算法连线可以是实线也可以是虚线,算法之间无输入或输出关系,则两个算法节点之间用虚线连接,如果算法1的输出数据作为算法2的输入数据,则两个算法节点之间通过实线相连接。
在一种替代实施例中,点击算法流向图中的任一算法节点,能够显示数据浮层弹窗,数据浮层弹窗的内容为与所述算法节点具有输入和/或输出关系的数据节点或数据表,以实现直观展示算法节点的输入输出关系。对应地,点击数据流向图中的任一数据节点,能够显示算法浮层弹窗,算法弹窗内容的为输出该数据节点和/或引用该数据节点的算法或算法节点,以实现直观展示数据节点的输入输出关系。
S207、基于所述算法流向图执行算法,生成输出数据。
在一种替代实施例中,由于所述算法流向图是根据所述数据流向图生成的,当数据流向图的数据节点发生变更,则对应的算法流向图也会发生变更。即在步骤S207之前,如图9所示,还包括:
S2091、判断所述数据流向图中最后输出的所述数据节点是否发生变更;
S2092、若否,则不更新所述算法流向图。
S2093、若是,则重新获取所述数据流向图;
S2094、基于更新后的所述数据流向图更新所述算法流向图;
在另一替代实施例中,如图10所示,步骤S206之后包括:
S2095、选择所述算法流向图中的一个或多个算法节点。
S2096、对所述一个或多个算法节点进行资源、有效期和/或优先级的配置。
该步骤所述的对所述算法节点进行配置,可以是单独配置,也可以是批量配置。所述资源配置指的在数据开发过程中,基于不同任务对计算机算力的占用情况,对应分配计算机的算力资源,以实现对算力的均衡分配,提高计算流畅度。所述有效期配置指的是对算法设置计算时段,在耗时较长的数据开发任务中减轻管理者负担,以实现自动执行。所述优先级配置指在某一数据表需要两种或两种以上算法计算得到输出数据时,对两种或两种以上算法进行优先级排序,以实现对计算次序的控制。
本实施例在数据视图建立时对应建立数据视图的伴生算法视图,实现数据流程在算法维度的可视化展示,方便用户以更直观的形式查看算法的输入输出关系。
实施例三
本实施例在上述实施例的基础上,增加了对数据和数据节点的分类存储、读取数据的权限设置等功能。示例性地,在开发界面的数据管理目录下创建数据视图界面,所述数据视图界面为可视化的空白画布,可操作拖拽的数据节点在拖拽至所述空白画布之前以列表形式存储于数据管理目录。如图11所示,具体如下:
S301、向其他用户发起数据使用申请,以获得数据使用权限。
S302、获取所述数据,创建与所述数据对应的数据节点。
S303、将所述数据节点列入所述数据管理目录。
上述步骤S301-S303用于实现从其他数据库引用数据,并基于引用的外部数据创建对应的数据节点并存储。
该步骤S303还包括:在所述数据管理目录中创建多个分类标签;基于分类标签,在所述数据管理目录中保存所述数据节点。
具体地,在步骤S303中,数据管理目录基于分类标签、功能或自定义分类维度创建有一个或多个子菜单栏,每个子菜单栏下存储有用户创建的数据表和对应创建的数据节点,和/或用户从外部引用的数据表和对应创建的数据节点。可选地,也可以是:在数据管理目录下创建“我的数据”和“我的订阅”两个菜单栏,其中,“我的数据”菜单栏用于存储用户在不同的数据开发项目下创建的数据节点和输出数据,“我的订阅”菜单栏用于通过订阅申请的方式获得其他客户端或数据库中数据的授权,存储用户从外部引用的数据,并创建与所述数据对应的数据节点。在“我的数据”菜单栏下基于分类标签、功能或自定义分类维度创建有一个或多个子菜单栏,每个子菜单栏指向同一分类标签、功能或自定义分类维度下的数据表,同时在“我的订阅”菜单栏下基于分类标签、功能或自定义分类维度创建有一个或多个子菜单栏,每个子菜单栏指向同一分类标签、功能或自定义分类维度下的数据表。
S304、创建数据视图界面。
S305、基于数据开发需求,从预设的数据管理目录中获取数据节点拖拽至所述数据视图界面,所述数据管理目录包括一个或多个数据节点。
S306、在所述数据视图界面创建数据连线以连接所述数据节点。
S307、基于所述数据节点和所述数据连线,生成数据流向图。
S308、基于所述数据流向图生成算法流向图。
S309、基于所述算法流向图执行算法,生成输出数据。
本实施例通过在数据管理目录中获取其他用户的数据授权,实现了获取外部数据,扩大可视化数据使用范围的效果。同时,通过在数据管理目录中创建多个分类标签,实现数据的分类存储,方便查看数据在项目中的分布,方便用户以更直观的方式引用数据。
实施例四
本实施例提供了一种可视化数据开发系统4,如图12所示,包括:
数据视图模块401,用于创建数据视图界面;
数据节点模块402,用于从预设的数据管理目录中获取数据节点拖拽至所述数据视图界面,所述数据管理目录包括一个或多个数据节点;
数据连线模块403,用于在所述数据视图界面创建数据连线以连接所述数据节点;
数据流向图生成模块404,用于基于所述数据节点和所述数据连线,生成数据流向图;
算法流向图生成模块405,用于基于所述数据流向图生成算法流向图,该模块还用于:创建算法视图界面;基于所述数据流向图的数据节点和数据连线,基于预设规则在所述算法视图界面生成算法流向图,所述算法流向图包括算法节点和算法连线。
输出模块406,用于基于所述算法流向图执行算法,生成输出数据。
在替代实施例中,如图13所示,还包括数据修改模块407,用于在所述数据视图界面增加新的所述数据节点;和/或
在所述数据视图界面删除所述数据节点;和/或
在所述数据视图界面增加新的所述数据连线;和/或
在所述数据视图界面删除所述数据连线;和/或
框选所述数据视图界面的两个或两个以上数据节点。该模块407还包括:对数据节点进行修改。所述修改指对数据节点引用的数据表进行重新配置,如对数据表进行分区信息的编辑校正,修改数据表字段信息、属性值等。
还包括:判断模块408,用于判断所述数据流向图中最后输出的所述数据节点是否发生变更;
任务更新模块409,用于若是,则重新获取所述数据流向图;
算法流向图更新模块410,基于更新后的所述数据流向图更新所述算法流向图;;
若否,则不更新所述算法流向图。
还包括:算法配置模块411,用于选择所述算法流向图中的一个或多个算法节点;对所述一个或多个算法节点进行资源、有效期和/或优先级的配置。
还包括:数据申请模块412,用于向其他用户发起数据使用申请,以获得数据使用权限;
数据节点创建模块413,用于获取所述数据,创建与所述数据对应的数据节点;
数据存储模块414,用于将所述数据节点列入所述数据管理目录。在替代实施例中,所述数据存储模块414还用于:在所述数据管理目录中创建多个分类标签;基于分类标签,在所述数据管理目录中保存所述数据节点。
本发明实施例所提供的一种可视化数据开发系统可执行本发明任意实施例所提供的可视化数据开发方法,具备功能模块相应的执行方法和有益效果。
实施例五
本实施例提供了一种服务器的结构示意图,如图14所示,该服务器包括处理器501、存储器502、输入装置503和输出装置504;服务器中处理器501的数量可以是一个或多个,图中以一个处理器501为例;设备/终端/服务器中的处理器501、存储器502、输入装置503和输出装置504可以通过总线或其他方式链接,图14中以通过总线链接为例。
存储器502作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本发明实施例中的可视化数据开发方法对应的程序指令/模块(例如获取模块301等)。处理器501通过运行存储在存储器502中的软件程序、指令以及模块,从而执行设备/终端/服务器的各种功能应用以及数据处理,即实现上述的一种可视化数据开发方法。
存储器502可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据终端的使用所创建的数据等。此外,存储器502可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储器502可进一步包括相对于处理器501远程设置的存储器,这些远程存储器可以通过网络链接至设备/终端/服务器。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置503可用于接收输入的数字或字符,以及产生与设备/终端/服务器的用户设置以及功能控制有关的键信号输入。输出装置504可包括显示屏等显示设备。
本发明实施例五通过提供一种服务器,可执行本发明任意实施例所提供的一种可视化数据开发方法,具备执行方法相应的功能模块和有益效果。
实施例六
本发明实施例六还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明任意实施例所提供的一种可视化数据开发方法:
创建数据视图界面;
基于数据开发需求,从预设的数据管理目录中获取数据节点拖拽至所述数据视图界面,所述数据管理目录包括一个或多个数据节点;
在所述数据视图界面创建数据连线以连接所述数据节点;
基于所述数据节点和所述数据连线,生成数据流向图;
基于所述数据流向图生成算法流向图;
基于所述算法流向图执行算法,生成输出数据。
本发明实施例的计算机可读存储介质,可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电链接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
存储介质上包含的程序代码可以用任何适当的介质传输,包括但不限于无线、电线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码,程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或终端上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—链接到用户计算机,或者,可以链接到外部计算机(例如利用因特网服务提供商来通过因特网链接)。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种可视化数据开发方法,其特征在于,包括:
创建数据视图界面;
基于数据开发需求,从预设的数据管理目录中获取数据节点拖拽至所述数据视图界面,所述数据管理目录包括一个或多个数据节点;
在所述数据视图界面创建数据连线以连接所述数据节点;
基于所述数据节点和所述数据连线,生成数据流向图;
基于所述数据流向图生成算法流向图;
基于所述算法流向图执行算法,生成输出数据。
2.根据权利要求1所述的一种可视化数据开发方法,其特征在于,所述基于所述数据节点和所述数据连线,生成数据流向图之前,还包括:
在所述数据视图界面增加新的所述数据节点;和/或
在所述数据视图界面删除所述数据节点;和/或
在所述数据视图界面增加新的所述数据连线;和/或
在所述数据视图界面删除所述数据连线;和/或
框选所述数据视图界面的两个或两个以上数据节点。
3.根据权利要求1所述的一种可视化数据开发方法,其特征在于,所述基于所述数据流向图生成算法流向图,包括:
创建算法视图界面;
基于所述数据流向图的数据节点和数据连线,基于预设规则在所述算法视图界面生成算法流向图,所述算法流向图包括算法节点和算法连线。
4.根据权利要求1所述的一种可视化数据开发方法,其特征在于,所述基于所述数据流向图生成算法流向图之后,还包括:
判断所述数据流向图中最后输出的所述数据节点是否发生变更;
若是,则重新获取所述数据流向图;
基于更新后的所述数据流向图更新所述算法流向图;
若否,则不更新所述算法流向图。
5.根据权利要求3所述的一种可视化数据开发方法,其特征在于,所述基于所述数据流向图的数据节点和数据连线,基于预设规则在所述算法视图界面生成算法流向图,所述算法流向图包括算法节点和算法连线之后,还包括:
选择所述算法流向图中的一个或多个算法节点;
对所述一个或多个算法节点进行资源、有效期和/或优先级的配置。
6.根据权利要求1所述的一种可视化数据开发方法,其特征在于,在所述创建数据视图界面之前,还包括:
向其他用户发起数据使用申请,以获得数据使用权限;
获取所述数据,创建与所述数据对应的数据节点;
将所述数据节点列入所述数据管理目录。
7.根据权利要求6所述的一种可视化数据开发方法,其特征在于,所述将所述数据节点列入所述数据管理目录,包括:
在所述数据管理目录中创建多个分类标签;
基于分类标签,在所述数据管理目录中保存所述数据节点。
8.一种可视化数据开发系统,其特征在于,包括:
数据视图模块,用于创建数据视图界面;
数据节点模块,用于从预设的数据管理目录中获取数据节点拖拽至所述数据视图界面,所述数据管理目录包括一个或多个数据节点;
数据连线模块,用于在所述数据视图界面创建数据连线以连接所述数据节点;
数据流向图生成模块,用于基于所述数据节点和所述数据连线,生成数据流向图;
算法流向图生成模块,用于基于所述数据流向图生成算法流向图,该模块还用于:创建算法视图界面;基于所述数据流向图的数据节点和数据连线,基于预设规则在所述算法视图界面生成算法流向图,所述算法流向图包括算法节点和算法连线。
输出模块,用于基于所述算法流向图执行算法,生成输出数据。
9.一种服务器,包括存储器、处理器及存储在存储器上并可在处理器上运行的程序,其特征在于,所述处理器执行所述程序时实现如权利要求1-7任一所述的一种可视化数据开发方法。
10.一种终端可读存储介质,其上存储有程序,其特征在于,所述程序被处理器执行时能够实现如权利要求1-7任一所述的一种可视化数据开发方法。
CN202010928380.0A 2020-09-07 2020-09-07 一种可视化数据开发方法、系统、服务器和存储介质 Pending CN112099788A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010928380.0A CN112099788A (zh) 2020-09-07 2020-09-07 一种可视化数据开发方法、系统、服务器和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010928380.0A CN112099788A (zh) 2020-09-07 2020-09-07 一种可视化数据开发方法、系统、服务器和存储介质

Publications (1)

Publication Number Publication Date
CN112099788A true CN112099788A (zh) 2020-12-18

Family

ID=73757477

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010928380.0A Pending CN112099788A (zh) 2020-09-07 2020-09-07 一种可视化数据开发方法、系统、服务器和存储介质

Country Status (1)

Country Link
CN (1) CN112099788A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113448951A (zh) * 2021-09-02 2021-09-28 深圳市信润富联数字科技有限公司 数据处理方法、装置、设备及计算机可读存储介质
CN114721913A (zh) * 2022-05-12 2022-07-08 华控清交信息科技(北京)有限公司 一种生成数据流图的方法、装置和用于生成数据流图的装置
CN116991935A (zh) * 2023-09-13 2023-11-03 之江实验室 一种多模态数据交互方法、设备、存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050251789A1 (en) * 1998-02-17 2005-11-10 Peck Joseph E Programmatic generation of application domain specific graphical programs
CN103180826A (zh) * 2010-10-25 2013-06-26 起元技术有限责任公司 在代表计算机程序的数据流图中管理数据集对象
CN104572929A (zh) * 2014-12-26 2015-04-29 深圳市科漫达智能管理科技有限公司 数据挖掘方法及装置
WO2018019232A1 (zh) * 2016-07-29 2018-02-01 华为技术有限公司 流计算方法、装置及系统
CN109783550A (zh) * 2018-12-29 2019-05-21 北京奇安信科技有限公司 数据处理方法、装置、系统、计算机可读存储介质
CN110941467A (zh) * 2019-11-06 2020-03-31 第四范式(北京)技术有限公司 数据处理方法、装置及系统
CN111145038A (zh) * 2019-12-02 2020-05-12 积成电子股份有限公司 基于可视化数据流图的电网调控大数据交互式分析方法
CN111209309A (zh) * 2020-01-13 2020-05-29 腾讯科技(深圳)有限公司 数据流图处理结果确定方法、装置、设备及存储介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050251789A1 (en) * 1998-02-17 2005-11-10 Peck Joseph E Programmatic generation of application domain specific graphical programs
CN103180826A (zh) * 2010-10-25 2013-06-26 起元技术有限责任公司 在代表计算机程序的数据流图中管理数据集对象
CN104572929A (zh) * 2014-12-26 2015-04-29 深圳市科漫达智能管理科技有限公司 数据挖掘方法及装置
WO2018019232A1 (zh) * 2016-07-29 2018-02-01 华为技术有限公司 流计算方法、装置及系统
CN109783550A (zh) * 2018-12-29 2019-05-21 北京奇安信科技有限公司 数据处理方法、装置、系统、计算机可读存储介质
CN110941467A (zh) * 2019-11-06 2020-03-31 第四范式(北京)技术有限公司 数据处理方法、装置及系统
CN111145038A (zh) * 2019-12-02 2020-05-12 积成电子股份有限公司 基于可视化数据流图的电网调控大数据交互式分析方法
CN111209309A (zh) * 2020-01-13 2020-05-29 腾讯科技(深圳)有限公司 数据流图处理结果确定方法、装置、设备及存储介质

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
R.C. LUPTON 等: "Hybrid Sankey diagrams: Visual analysis of multidimensional data for understanding resource use", 《 RESOURCES, CONSERVATION AND RECYCLING》, vol. 124, 23 May 2017 (2017-05-23), pages 141 - 151, XP085050114, DOI: 10.1016/j.resconrec.2017.05.002 *
冯晓宁 等: "一种基于BPMN的业务流程图到BPEL的映射方法", 《计算机研究与发展》, vol. 50, no. 1, 15 August 2013 (2013-08-15), pages 44 - 52 *
徐刘根: "大数据平台加速处理技术的研究与实现", 《中国优秀硕士学位论文全文数据库信息科技辑》, no. 1, 15 January 2020 (2020-01-15), pages 138 - 1019 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113448951A (zh) * 2021-09-02 2021-09-28 深圳市信润富联数字科技有限公司 数据处理方法、装置、设备及计算机可读存储介质
CN113448951B (zh) * 2021-09-02 2021-12-21 深圳市信润富联数字科技有限公司 数据处理方法、装置、设备及计算机可读存储介质
CN114721913A (zh) * 2022-05-12 2022-07-08 华控清交信息科技(北京)有限公司 一种生成数据流图的方法、装置和用于生成数据流图的装置
CN116991935A (zh) * 2023-09-13 2023-11-03 之江实验室 一种多模态数据交互方法、设备、存储介质
CN116991935B (zh) * 2023-09-13 2023-12-22 之江实验室 一种多模态数据交互方法、设备、存储介质

Similar Documents

Publication Publication Date Title
CN109634598B (zh) 一种页面显示方法、装置、设备及存储介质
CN112099788A (zh) 一种可视化数据开发方法、系统、服务器和存储介质
US20210034336A1 (en) Executing a process-based software application in a first computing environment and a second computing environment
US9471213B2 (en) Chaining applications
JP6449173B2 (ja) プロセスを構成するためのアプリケーションの構築
CN106062711B (zh) 用于复合控件的方法、系统和计算机存储介质
CN111080170B (zh) 一种工作流建模方法、装置、电子设备及存储介质
CN112540763A (zh) 前端页面生成方法、装置、平台设备及存储介质
CN103984818A (zh) 基于Flex技术的AUV设计流程可视化建模方法
US20070033582A1 (en) Transforming a Flow Graph Model to a Structured Flow Language Model
US10776966B2 (en) Graph processing system that allows flexible manipulation of edges and their properties during graph mutation
CN111736818A (zh) 基于容器云的应用创建方法、装置及电子设备和存储介质
CN105335132A (zh) 一种自定义应用程序功能的方法、装置以及系统
CN111798128A (zh) 一种工艺流程的界面操作方法、计算机设备及存储介质
JP7457168B2 (ja) 半導体デバイスのモデリング方法及び装置
US20080155431A1 (en) User interface supporting processes with alternative paths
US8713152B2 (en) Managing distributed applications using structural diagrams
US20090284549A1 (en) Configurable view on data models
CN110555732B (zh) 一种营销策略推送方法、装置及营销策略运营平台
CN111798126A (zh) 工艺流程的创建方法、计算机设备及存储介质
US20080005675A1 (en) Method, system and program product for displaying nodes of a network
US20110264707A1 (en) Extensible meta model for capturing solution patterns
TWI738216B (zh) 事件處理文件的開發方法與裝置
CN111552705B (zh) 基于图表的数据处理方法、装置、电子设备及介质
CN115525796A (zh) 视图生成方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination