CN113672418A - 数据处理任务详情页面展示方法、装置、电子设备和介质 - Google Patents

数据处理任务详情页面展示方法、装置、电子设备和介质 Download PDF

Info

Publication number
CN113672418A
CN113672418A CN202110881551.3A CN202110881551A CN113672418A CN 113672418 A CN113672418 A CN 113672418A CN 202110881551 A CN202110881551 A CN 202110881551A CN 113672418 A CN113672418 A CN 113672418A
Authority
CN
China
Prior art keywords
task
data processing
processing task
clearing
control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110881551.3A
Other languages
English (en)
Inventor
张占昌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Missfresh Ecommerce Co Ltd
Original Assignee
Beijing Missfresh Ecommerce Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Missfresh Ecommerce Co Ltd filed Critical Beijing Missfresh Ecommerce Co Ltd
Priority to CN202110881551.3A priority Critical patent/CN113672418A/zh
Publication of CN113672418A publication Critical patent/CN113672418A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0766Error or fault reporting or storing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/48Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806Task transfer initiation or dispatching
    • G06F9/4843Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/485Task life-cycle, e.g. stopping, restarting, resuming execution

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Quality & Reliability (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开的实施例公开了数据处理任务详情页面展示方法、装置、电子设备和介质。该方法的一具体实施方式包括:响应于检测到作用于数据处理任务详情页面中展示的数据处理任务信息栏中的任务日志查看控件的选择操作,以及满足第一预设条件,展示日志信息;响应于检测到作用于数据处理任务详情页面中展示的数据处理任务信息栏中的任务清除控件的选择操作,以及满足第二预设条件,对上述数据处理任务进行清除处理;响应于任务清除控件对应的数据处理任务的清除状态为清除成功,将该数据处理任务的任务状态更新为任务失败。该实施方式增加了任务日志查看功能与任务清除功能,提高了追查问题的效率。

Description

数据处理任务详情页面展示方法、装置、电子设备和介质
技术领域
本公开的实施例涉及计算机技术领域,具体涉及数据处理任务详情页面展示方法、装置、电子设备和介质。
背景技术
大数据分析处理平台是整合当前主流的各种具有不同侧重点的大数据处理分析框架和工具,实现对数据的挖掘和分析。目前,可以搭建基于不同业务数据的数据平台,考虑到线上集群的稳定性,线上的TimeLineServer(时间线服务器)服务没有开启,计算平台自主研发了基于ES(Elasticsearch)底层存储的Tez-UI平台。在对Tez-UI平台上的任务进行操作时,通常采用的方式为:业务人员写HiveSQL(Hive Structured Query Language)任务来进行ETL(Extract Transform Load,抽取转换加载)数据处理并把任务提交到Hadoop(一种分布式系统基础架构)集群以进行任务运行;任务运行过程中,指标数据会被上报到Kafka(一种分布式日志系统)消息队列,利用Flink(一种开源流处理框架)对Kafka中的指标数据进行解析处理,并存储到ES中。当用户在访问Tez-UI时,通过TimelineServer服务把请求查询转发到ES引擎,从ES引擎中查询任务的运行详情。最后把结果数据返回给Tez-UI进行展示分析。
然而,当采用上述方式对任务进行操作时,经常会存在如下技术问题:
第一,当任务失败时,无法通过查看任务日志排查任务失败的原因;
第二,无法对运行时长过长的任务进行预设次数的重试处理,任务长时间运行会长期占用内存资源,造成内存资源的消耗。
发明内容
本公开的内容部分用于以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。
本公开的一些实施例提出了数据处理任务详情页面展示方法、装置、电子设备和计算机可读介质,来解决以上背景技术部分提到的技术问题中的一项或多项。
第一方面,本公开的一些实施例提供了一种数据处理任务详情页面展示方法,该方法包括:响应于检测到作用于数据处理任务详情页面中展示的数据处理任务信息栏中的任务日志查看控件的选择操作,以及任务日志查看控件对应的数据处理任务的任务状态满足第一预设条件,展示该任务日志查看控件对应的数据处理任务的日志信息,其中,数据处理任务详情页面中展示了数据处理任务信息栏集合,数据处理任务信息栏集合中的每个数据处理任务信息栏中显示了数据处理任务信息栏对应的数据处理任务的任务状态、任务日志查看控件和任务清除控件;响应于检测到作用于数据处理任务详情页面中展示的数据处理任务信息栏中的任务清除控件的选择操作,以及该任务清除控件对应的数据处理任务的任务状态满足第二预设条件,对上述任务清除控件对应的数据处理任务进行清除处理;响应于任务清除控件对应的数据处理任务的清除状态为清除成功,将该任务清除控件对应的数据处理任务的任务状态更新为任务失败。
第二方面,本公开的一些实施例提供了一种数据处理任务详情页面展示装置,装置包括:展示单元,被配置成响应于检测到作用于数据处理任务详情页面中展示的数据处理任务信息栏中的任务日志查看控件的选择操作,以及任务日志查看控件对应的数据处理任务的任务状态满足第一预设条件,展示该任务日志查看控件对应的数据处理任务的日志信息,其中,数据处理任务详情页面中展示了数据处理任务信息栏集合,数据处理任务信息栏集合中的每个数据处理任务信息栏中显示了数据处理任务信息栏对应的数据处理任务的任务状态、任务日志查看控件和任务清除控件;清除单元,被配置成响应于检测到作用于数据处理任务详情页面中展示的数据处理任务信息栏中的任务清除控件的选择操作,以及该任务清除控件对应的数据处理任务的任务状态满足第二预设条件,对上述任务清除控件对应的数据处理任务进行清除处理;更新单元,被配置成响应于任务清除控件对应的数据处理任务的清除状态为清除成功,将该任务清除控件对应的数据处理任务的任务状态更新为任务失败。
第三方面,本公开的一些实施例提供了一种电子设备,包括:一个或多个处理器;存储装置,其上存储有一个或多个程序,当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现上述第一方面任一实现方式所描述的方法。
第四方面,本公开的一些实施例提供了一种计算机可读介质,其上存储有计算机程序,其中,程序被处理器执行时实现上述第一方面任一实现方式所描述的方法。
本公开的上述各个实施例中具有如下有益效果:通过本公开的一些实施例的数据处理任务详情页面展示方法,增加了任务日志查看功能,提高了追查问题的效率。具体来说,造成业务人员与研发人员追查问题工作繁琐、效率低的原因在于:当任务失败时,无法通过查看任务日志排查任务失败的原因。基于此,本公开的一些实施例增加了任务日志查看功能,可以通过任务日志查看任务运行的记录,获取任务运行失败以及任务运行时长过长的原因。从而提高了业务人员与研发人员追查问题的工作效率。
附图说明
结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,元件和元素不一定按照比例绘制。
图1-2是本公开的一些实施例的数据处理任务详情页面展示方法的一个应用场景的示意图;
图3是根据本公开的数据处理任务详情页面展示方法的一些实施例的流程图;
图4是根据本公开的数据处理任务详情页面展示方法的另一些实施例的流程图;
图5是根据本公开的数据处理任务详情页面展示装置的一些实施例的结构示意图;
图6是适于用来实现本公开的一些实施例的电子设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例。相反,提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
另外还需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合。
需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。
下面将参考附图并结合实施例来详细说明本公开。
图1-2是本公开的一些实施例的数据处理任务详情页面展示方法的一个应用场景的示意图。
在图1的应用场景中,首先,计算设备101可以响应于检测到用户作用于数据处理任务详情页面102中展示的数据处理任务信息栏集合103中的数据处理任务信息栏104中的任务日志查看控件1041的选择操作,以及该任务日志查看控件1041对应的数据处理任务的任务状态1042(例如,任务状态可以为“任务失败”)满足第一预设条件,展示上述任务日志查看控件1041对应的数据处理任务的日志信息106。其中,上述数据处理任务信息栏集合103包括数据处理任务信息栏104和数据处理任务信息栏105。上述数据处理任务信息栏104中显示了数据处理任务对应的任务日志查看控件1041、任务状态1042和任务清除控件1043。上述任务状态可以包括任务成功、任务失败、任务运行中和任务等待中。上述第一预设条件可以为“任务状态为任务成功、任务失败、任务运行中的任意一项”。可选地,上述数据处理任务详情页面102还可以展示但不限于:网页平台标识“Tez-UI”107。可选地,上述数据处理任务信息栏104还可以展示但不限于:任务标识(例如,任务标识可以为“Task1”1044)。其中,上述任务标识可以用于唯一确定上述数据处理任务。
然后,如图2所示,计算机设备101可以响应于检测到用户作用于数据处理任务详情页面102中展示的数据处理任务信息栏集合103中的任务标识为“Task2”1051的数据处理任务信息栏105中的任务清除控件1052的选择操作,以及该任务清除控件1052对应的数据处理任务的任务状态1053(例如,任务状态可以为“任务运行中”)满足第二预设条件,对上述任务清除控件1052对应的数据处理任务进行清除处理。其中,上述第二预设条件可以为“任务状态为任务运行中”。
最后,计算机设备101响应于任务清除控件1052对应的数据处理任务的清除状态为清除成功,将该任务清除控件1052对应的数据处理任务的任务状态1053更新为任务失败。
需要说明的是,上述计算设备101可以是硬件,也可以是软件。当计算设备为硬件时,可以实现成多个服务器或终端设备组成的分布式集群,也可以实现成单个服务器或单个终端设备。当计算设备体现为软件时,可以安装在上述所列举的硬件设备中。其可以实现成例如用来提供分布式服务的多个软件或软件模块,也可以实现成单个软件或软件模块。在此不做具体限定。
应该理解,图1-2中的计算设备的数目仅仅是示意性的。根据实现需要,可以具有任意数目的计算设备。
继续参考图3,示出了根据本公开的数据处理任务详情页面展示方法的一些实施例的流程300。该数据处理任务详情页面展示方法,包括以下步骤:
步骤301,响应于检测到作用于数据处理任务详情页面中展示的数据处理任务信息栏中的任务日志查看控件的选择操作,以及任务日志查看控件对应的数据处理任务的任务状态满足第一预设条件,展示任务日志查看控件对应的数据处理任务的日志信息。
在一些实施例中,数据处理任务详情页面展示方法的执行主体(例如图1所示的计算设备101)可以响应于检测到作用于数据处理任务详情页面中展示的数据处理任务信息栏中的任务日志查看控件的选择操作,以及任务日志查看控件对应的数据处理任务的任务状态满足第一预设条件,展示该任务日志查看控件对应的数据处理任务的日志信息。其中,上述数据处理任务详情页面中展示的数据处理任务属于同一个数据处理总任务。上述数据处理任务可以为Map/Reduce任务。其中,Map任务可以把输入的数据集切分为若干独立的数据块,并以完全并行的方式处理。Reduce任务则对Map任务的结果进行汇总。其中,上述数据集可以是订单、库存、物品、物品价值等数据,数据类型包括但不限于:字符型、数值型。上述数据处理总任务下包括多个数据处理任务,其中,多个数据处理任务组合成一个较大的数据处理总任务,减少了上述数据处理任务之间的文件存储。该数据处理总任务可以展示在数据处理总任务详情页面。上述数据处理总任务详情页面可以为用于展示一个数据处理总任务的详细信息,以及使得用户进行操作的页面。其中,该数据处理总任务详情页面包括数据处理总任务信息栏,该数据处理总任务信息栏可以展示数据处理总任务的详细信息包括但不限于:总任务名称、总任务标识号、总任务提交者、任务总运行状态、总任务开始时间、总任务结束时间、总任务延时时长。上述总任务标识号可以用于唯一确定上述数据处理总任务。上述任务总运行状态显示了数据处理总任务的运行状态或数据处理总任务的结果状态。上述任务总运行状态包括任务成功、任务失败、任务运行中、任务等待中和任务异常结束。上述任务异常结束为由于进行重试处理次数等于预设次数,以及用户点击任务清除控件导致数据处理总任务结束的任务状态。上述总任务延时时长可以为完成数据处理总任务的延时时长,例如,上述总任务延时时长可以为28秒。上述数据处理任务详情页面可以为用于展示一个数据处理总任务下的全部数据处理任务的相关信息,以及使得用户进行操作的页面。上述数据处理任务详情页面包括上述数据处理任务信息栏。上述数据处理任务的详细信息展示在数据处理任务信息栏。上述数据处理任务信息栏包括但不限于:任务标识、任务状态、任务节点名称、任务开始时间、任务结束时间、任务延时时长、任务日志控件组、任务清除控件。其中,上述任务标识可以用于唯一确定上述数据处理任务。上述任务延时时长可以显示完成数据处理任务的延时时长,例如,上述任务延时时长可以为4秒。上述任务日志控件组可以包括但不限于:标准输出控件、任务日志查看控件。上述标准输出控件可以为用于接收用户的选择操作以输出任务日志的控件。上述任务日志查看控件可以为用于接收用户的选择操作以展示任务日志查看页面的控件。上述任务状态显示了数据处理任务的运行状态或数据处理任务的结果状态。上述任务状态可以包括任务成功、任务失败、任务运行中和任务等待中。上述第一预设条件可以为“任务状态为任务成功、任务失败、任务运行中的任意一项”。上述日志信息可以为记录用户操作和任务运行的信息。上述日志信息包括但不限于:操作时间和任务进程。上述操作时间为用户执行操作的时刻。上述任务进程为上述数据处理任务运行的进度。
实践中,上述执行主体可以以单页的形式,展示任务日志查看控件对应的数据处理任务的日志信息。其中,用户点击下一页按钮,可以浏览当前页的下一页日志信息。由此,用户可以通过任务日志查看控件浏览日志信息以确定任务异常的原因。
在一些实施例的一些可选的实现方式中,上述执行主体可以以滚动分页的形式展示上述任务日志查看控件对应的数据处理任务的日志信息。上述滚动分页的形式可以为供用户滚动鼠标滚轮,以查看下一页日志信息的形式。
在一些实施例的一些可选的实现方式中,上述执行主体可以展示上述任务日志查看控件对应的数据处理任务对应的日志异常信息和上述任务日志查看控件对应的数据处理任务对应的运行异常信息。上述日志异常信息可以为上述数据处理任务在运行过程中出现的错误而生成的信息。上述运行异常信息可以为上述数据处理任务在运行过程中运行速度缓慢而生成的信息。
步骤302,响应于检测到作用于数据处理任务详情页面中展示的数据处理任务信息栏中的任务清除控件的选择操作,以及任务清除控件对应的数据处理任务的任务状态满足第二预设条件,对任务清除控件对应的数据处理任务进行清除处理。
在一些实施例中,上述执行主体可以响应于检测到作用于数据处理任务详情页面中展示的数据处理任务信息栏中的任务清除控件的选择操作,以及该任务清除控件对应的数据处理任务的任务状态满足第二预设条件,对上述任务清除控件对应的数据处理任务进行清除处理。其中,上述任务清除控件可以为用于接收用户的选择操作以进行任务清除的控件。上述第二预设条件可以为“任务状态为任务运行中”。上述任务清除的目的是立即终止上述数据处理任务。实践中,上述执行主体可以立即终止上述数据处理任务。由此,用户可以通过点击任务清除控件,对运行时长过长的任务进行任务清除。这里,对于运行时长的具体设定,不作限定。
可选地,上述执行主体可以响应于存在对应于上述数据处理任务详情页面的用户账号的登录成功信息,以及上述用户账号的权限信息满足第三预设条件,对上述任务清除控件对应的数据处理任务进行清除处理。其中,上述用户账号具有用户账号的类型。用户账号的类型可以包括但不限于:主账号类、子账号类。主账户类的用户账号的权限大于子账户类的用户账号的权限。上述登陆成功信息可以为表征上述用户账号登录成功的信息。例如,上述登陆成功信息可以为“1”,表征上述用户账号登录成功。上述第三预设条件为“用户账号的类型为主账号类”。由此,可以对用户的身份进行预先审核,使得主账号类的用户账号才具有对数据处理任务进行清除处理的权限,保障了数据处理任务运行的安全性。
步骤303,响应于任务清除控件对应的数据处理任务的清除状态为清除成功,将任务清除控件对应的数据处理任务的任务状态更新为任务失败。
在一些实施例中,上述执行主体可以响应于任务清除控件对应的数据处理任务的清除状态为清除成功,将该任务清除控件对应的数据处理任务的任务状态更新为任务失败。
实践中,上述执行主体可以在终止了上述数据处理任务后,将上述数据处理任务的任务状态由任务运行中更新为任务失败。由此,用户可以通过点击任务清除控件,对运行时长过长的数据处理任务进行清除处理,使该数据处理任务的任务状态由任务运行中更新为任务失败。这里,对于运行时长的具体设定,不作限定。
可选地,响应于检测到作用于上述数据处理任务详情页面中展示的数据处理任务信息栏中的任务清除控件的选择操作,展示是否确定进行清除处理的弹窗。上述弹窗包括清除确定控件和清除取消控件。上述清除确定控件可以为确定对上述数据处理任务进行清除处理的控件。上述清除取消控件可以为取消对上述数据处理任务进行清除处理的控件。实践中,响应于检测到作用于上述清除确定控件的选择操作,可以关闭上述弹窗,以及对上述任务清除控件对应的数据处理任务进行清除处理。其中,用户点击上述任务清除控件后,在上述弹窗中点击上述清除取消控件,可以关闭上述弹窗。响应于检测到作用于上述清除取消控件的选择操作,关闭上述弹窗,不对上述任务清除控件对应的数据处理任务进行清除处理。
本公开的上述各个实施例中具有如下有益效果:通过本公开的一些实施例的数据处理任务详情页面展示方法,增加了任务日志查看功能,提高了追查问题的效率。具体来说,造成业务人员与研发人员追查问题工作繁琐、效率低的原因在于:当任务失败时,无法通过查看任务日志排查任务失败的原因。基于此,本公开的一些实施例增加了任务日志查看功能,可以通过任务日志查看任务运行的记录,获取任务运行失败以及任务运行时长过长的原因。从而提高了业务人员与研发人员追查问题的工作效率。
进一步参考图4,其示出了数据处理任务详情页面展示方法的另一些实施例的流程400。该数据处理任务详情页面展示方法的流程400,包括以下步骤:
步骤401,响应于检测到作用于数据处理任务详情页面中展示的数据处理任务信息栏中的任务日志查看控件的选择操作,以及任务日志查看控件对应的数据处理任务的任务状态满足第一预设条件,展示任务日志查看控件对应的数据处理任务的日志信息。
步骤402,响应于检测到作用于数据处理任务详情页面中展示的数据处理任务信息栏中的任务清除控件的选择操作,以及任务清除控件对应的数据处理任务的任务状态满足第二预设条件,对任务清除控件对应的数据处理任务进行清除处理。
步骤403,响应于任务清除控件对应的数据处理任务的清除状态为清除成功,将任务清除控件对应的数据处理任务的任务状态更新为任务失败。
在一些实施例中,步骤401-403的具体实现及其带来的技术效果可以参考图3对应的那些实施例中的步骤301-303,在此不再赘述。
步骤404,响应于任务清除控件对应的数据处理任务的任务状态更新为任务失败,对任务清除控件对应的数据处理任务进行重试处理。
在一些实施例中,数据处理任务详情页面展示方法的执行主体(例如图1所示的计算设备101)可以响应于任务清除控件对应的数据处理任务的任务状态更新为任务失败,对上述任务清除控件对应的数据处理任务进行重试处理。实践中,上述执行主体可以对运行时长过长的数据处理任务发起任务重试,使得上述数据处理任务重新运行。这里,对于运行时长的具体设定,不作限定。由此,通过终止运行时长过长的数据处理任务,并对上述数据处理任务进行重试处理,可以避免上述数据处理任务因运行时长过长而造成的内存资源的消耗、缩短上述数据处理任务的运行时长、加速数据处理总任务的进程。
步骤405,将任务清除控件对应的数据处理任务的任务状态更新为任务运行中。
在一些实施例中,将该任务清除控件对应的数据处理任务的任务状态更新为任务运行中。实践中,上述执行主体将任务清除控件对应的数据处理任务的任务状态更新为任务运行中。由此,通过步骤404-405,可以完成对上述数据处理任务的重试处理。上述重试处理后的数据处理任务的任务状态为任务运行中,满足了第二预设条件,使上述数据处理任务能够再次进行清除处理。
步骤406,响应于对任务清除控件对应的数据处理任务进行重试处理的次数等于预设次数,以及检测到对任务清除控件的选择操作,将数据处理任务信息栏集合对应的数据处理总任务的任务总运行状态更新为任务异常结束。
在一些实施例中,上述执行主体可以响应于对任务清除控件对应的数据处理任务进行重试处理的次数等于预设次数,以及检测到对任务清除控件的选择操作,将数据处理任务信息栏集合对应的数据处理总任务的任务总运行状态更新为任务异常结束。这里,对于预设次数的具体设定,不作限定。例如,预设次数可以为三次。实践中,上述执行主体可以响应于对上述数据处理任务进行重试处理的次数为三次,以及检测到对任务清除控件的选择操作,即第四次对上述数据处理任务进行清除处理,将该数据处理任务信息栏集合对应的数据处理总任务的任务总运行状态确定为任务异常结束。由此,对一个数据处理总任务下的数据处理任务进行重试处理的次数等于预设次数,以及再次进行清除处理,整个数据处理总任务的任务总运行状态会变更为任务异常结束。
步骤404-406及其相关内容作为本公开的实施例的一个发明点,解决了背景技术提及的技术问题二“无法对运行时长过长的任务进行预设次数的重试处理,任务长时间运行会长期占用内存资源,造成内存资源的消耗”。导致无法对任务进行重试处理的因素如下:缺少任务清除控件以终止上述数据处理任务的运行,上述执行主体无法对上述数据处理任务进行重试处理,缺少限制重试处理的预设次数机制。如果解决了上述因素,就能达到对任务进行重试处理的效果。为了达到这一效果,本公开引入了任务清除控件和预设次数机制。增加上述任务清除控件后,上述执行主体可以终止满足第二预设条件的数据处理任务,响应于检测到上述数据处理任务的任务状态为任务失败,对该数据处理任务发起重试。考虑到任务运行时长过长的因素可能为数据处理任务设置的不合理,持续对同一数据处理任务进行清除处理并发起重试,可能会长期占用内存资源,增加数据处理任务的耗时,因此,引入预设次数机制,限制进行重试处理的次数,减少任务耗时与内存资源的消耗。
步骤407,响应于确定数据处理总任务的任务总运行状态为任务异常结束,将数据处理任务信息栏集合所包括的各个任务状态更新为任务失败。
在一些实施例中,上述执行主体可以响应于确定数据处理总任务的任务总运行状态为任务异常结束,将数据处理任务信息栏集合所包括的各个任务状态更新为任务失败。其中,上述数据处理总任务的任务总运行状态为任务异常结束表征该数据处理总任务已不再处于运行中,且该数据处理总任务运行异常终止,故该数据处理总任务下的所有数据处理任务也无法继续运行,故将上述数据处理任务的任务状态更新为任务失败。其中,上述异常终止可以为由于任务进行重试处理的次数等于预设次数,以及用户再次点击任务清除控件导致的任务总运行状态为任务异常结束的数据处理总任务的运行结果。实践中,上述执行主体可以响应于确定数据处理总任务的任务总运行状态为任务异常结束,即确定该数据处理总任务下的所有数据处理任务的任务状态为任务失败,将上述所有数据处理任务的全部任务状态更新为任务失败。由此,进行重试处理的次数等于预设次数,以及用户再次点击任务清除控件引发的任务状态更新为任务失败的数据处理任务,上述任务失败的因素不是上述数据处理任务运行过程中运行出错,而是进行重试处理的次数等于预设次数,以及用户再次点击任务清除控件,即由于用户原因导致。从而,用户对任务状态为任务失败的数据处理任务进行问题排查时,可以暂不排查任务总运行状态为任务异常结束的数据处理总任务下的数据处理任务。
从图4中可以看出,与图3对应的一些实施例的描述相比,图4对应的一些实施例中的页面展示方法的流程400体现了对数据处理任务的重试处理和预设次数机制进行扩展的步骤。由此,这些实施例描述的方案可以使得用户通过不超过预设次数的重试处理,减少数据处理任务的耗时,减少内存资源的消耗,从而加速数据处理总任务处理进程。
进一步参考图5,作为对上述各图所示方法的实现,本公开提供了一种数据处理任务详情页面展示装置的一些实施例,这些装置实施例与图3所示的那些方法实施例相对应,该装置具体可以应用于各种电子设备中。
如图5所示,一些实施例的数据处理任务详情页面展示装置500包括:展示单元501、清除单元502、更新单元503。其中,展示单元501被配置成响应于检测到作用于数据处理任务详情页面中展示的数据处理任务信息栏中的任务日志查看控件的选择操作,以及上述任务日志查看控件对应的数据处理任务的任务状态满足第一预设条件,展示上述任务日志查看控件对应的数据处理任务的日志信息,其中,上述数据处理任务详情页面中展示了数据处理任务信息栏集合,上述数据处理任务信息栏集合中的每个数据处理任务信息栏中显示了上述数据处理任务信息栏对应的数据处理任务的任务状态、任务日志查看控件和任务清除控件;清除单元502被配置成响应于检测到作用于上述数据处理任务详情页面中展示的数据处理任务信息栏中的任务清除控件的选择操作,以及上述任务清除控件对应的数据处理任务的任务状态满足第二预设条件,对上述任务清除控件对应的数据处理任务进行清除处理;更新单元503被配置成响应于上述任务清除控件对应的数据处理任务的清除状态为清除成功,将上述任务清除控件对应的数据处理任务的任务状态更新为任务失败。
在一些实施例的可选实现方式中,页面展示装置500的清除单元502可以进一步被配置成:响应于存在对应于上述数据处理任务详情页面的用户账号的登录成功信息,以及上述用户账号的权限信息满足第三预设条件,对上述任务清除控件对应的数据处理任务进行清除处理。
可以理解的是,该装置500中记载的诸单元与参考图3描述的方法中的各个步骤相对应。由此,上文针对方法描述的操作、特征以及产生的有益效果同样适用于装置500及其中包含的单元,在此不再赘述。
下面参考图6,其示出了适于用来实现本公开的一些实施例的电子设备(如图1所示的计算设备101)600的结构示意图。图6示出的电子设备仅仅是一个示例,不应对本公开的实施例的功能和使用范围带来任何限制。
如图6所示,电子设备600可以包括处理装置(例如中央处理器、图形处理器等)601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储装置608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中,还存储有电子设备600操作所需的各种程序和数据。处理装置601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
通常,以下装置可以连接至I/O接口605:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置606;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置607;包括例如磁带、硬盘等的存储装置608;以及通信装置609。通信装置609可以允许电子设备600与其他设备进行无线或有线通信以交换数据。虽然图6示出了具有各种装置的电子设备600,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。图6中示出的每个方框可以代表一个装置,也可以根据需要代表多个装置。
特别地,根据本公开的一些实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的一些实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的一些实施例中,该计算机程序可以通过通信装置609从网络上被下载和安装,或者从存储装置608被安装,或者从ROM 602被安装。在该计算机程序被处理装置601执行时,执行本公开的一些实施例的方法中限定的上述功能。
需要说明的是,本公开的一些实施例中记载的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开的一些实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开的一些实施例中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
在一些实施方式中,客户端、服务器可以利用诸如HTTP(HyperText TransferProtocol,超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信,并且可以与任意形式或介质的数字数据通信(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”),广域网(“WAN”),网际网(例如,互联网)以及端对端网络(例如,ad hoc端对端网络),以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:响应于检测到作用于数据处理任务详情页面中展示的数据处理任务信息栏中的任务日志查看控件的选择操作,以及任务日志查看控件对应的数据处理任务的任务状态满足第一预设条件,展示该任务日志查看控件对应的数据处理任务的日志信息;响应于检测到作用于数据处理任务详情页面中展示的数据处理任务信息栏中的任务清除控件的选择操作,以及该任务清除控件对应的数据处理任务的任务状态满足第二预设条件,对上述任务清除控件对应的数据处理任务进行清除处理;响应于任务清除控件对应的数据处理任务的清除状态为清除成功,将该任务清除控件对应的数据处理任务的任务状态更新为任务失败。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的一些实施例的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)——连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开的一些实施例中的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中,例如,可以描述为:一种处理器包括展示单元、清除单元和更新单元。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定,例如,更新单元还可以被描述为“响应于上述任务清除控件对应的数据处理任务的清除状态为清除成功,将上述任务清除控件对应的数据处理任务的任务状态更新为任务失败的单元”。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
以上描述仅为本公开的一些较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开的实施例中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开的实施例中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (10)

1.一种数据处理任务详情页面展示方法,包括:
响应于检测到作用于数据处理任务详情页面中展示的数据处理任务信息栏中的任务日志查看控件的选择操作,以及所述任务日志查看控件对应的数据处理任务的任务状态满足第一预设条件,展示所述任务日志查看控件对应的数据处理任务的日志信息,其中,所述数据处理任务详情页面中展示了数据处理任务信息栏集合,所述数据处理任务信息栏集合中的每个数据处理任务信息栏中显示了所述数据处理任务信息栏对应的数据处理任务的任务状态、任务日志查看控件和任务清除控件;
响应于检测到作用于所述数据处理任务详情页面中展示的数据处理任务信息栏中的任务清除控件的选择操作,以及所述任务清除控件对应的数据处理任务的任务状态满足第二预设条件,对所述任务清除控件对应的数据处理任务进行清除处理;
响应于所述任务清除控件对应的数据处理任务的清除状态为清除成功,将所述任务清除控件对应的数据处理任务的任务状态更新为任务失败。
2.根据权利要求1所述的方法,其中,所述展示所述任务日志查看控件对应的数据处理任务的日志信息,包括:
以滚动分页的形式展示所述任务日志查看控件对应的数据处理任务的日志信息。
3.根据权利要求1所述的方法,其中,所述展示所述任务日志查看控件对应的数据处理任务的日志信息,包括:
展示所述任务日志查看控件对应的数据处理任务对应的日志异常信息;
展示所述任务日志查看控件对应的数据处理任务对应的运行异常信息。
4.根据权利要求1所述的方法,其中,所述对所述任务清除控件对应的数据处理任务进行清除处理,包括:
响应于存在对应于所述数据处理任务详情页面的用户账号的登录成功信息,以及所述用户账号的权限信息满足第三预设条件,对所述任务清除控件对应的数据处理任务进行清除处理。
5.根据权利要求1所述的方法,其中,所述方法还包括:
响应于所述任务清除控件对应的数据处理任务的任务状态更新为任务失败,对所述任务清除控件对应的数据处理任务进行重试处理;
将所述任务清除控件对应的数据处理任务的任务状态更新为任务运行中。
6.根据权利要求5所述的方法,其中,所述对所述任务清除控件对应的数据处理任务进行重试处理,包括:
响应于对所述任务清除控件对应的数据处理任务进行重试处理的次数等于预设次数,以及检测到对所述任务清除控件的选择操作,将所述数据处理任务信息栏集合对应的数据处理总任务的任务总运行状态更新为任务异常结束。
7.根据权利要求6所述的方法,其中,所述对所述任务清除控件对应的数据处理任务进行重试处理,还包括:
响应于确定所述数据处理总任务的任务总运行状态为任务异常结束,将所述数据处理任务信息栏集合所包括的各个任务状态更新为任务失败。
8.一种数据处理任务详情页面展示装置,包括:
展示单元,被配置成响应于检测到作用于数据处理任务详情页面中展示的数据处理任务信息栏中的任务日志查看控件的选择操作,以及所述任务日志查看控件对应的数据处理任务的任务状态满足第一预设条件,展示所述任务日志查看控件对应的数据处理任务的日志信息,其中,所述数据处理任务详情页面中展示了数据处理任务信息栏集合,所述数据处理任务信息栏集合中的每个数据处理任务信息栏中显示了所述数据处理任务信息栏对应的数据处理任务的任务状态、任务日志查看控件和任务清除控件;
清除单元,被配置成响应于检测到作用于所述数据处理任务详情页面中展示的数据处理任务信息栏中的任务清除控件的选择操作,以及所述任务清除控件对应的数据处理任务的任务状态满足第二预设条件,对所述任务清除控件对应的数据处理任务进行清除处理;
更新单元,被配置成响应于所述任务清除控件对应的数据处理任务的清除状态为清除成功,将所述任务清除控件对应的数据处理任务的任务状态更新为任务失败。
9.一种电子设备,包括:
一个或多个处理器;
存储装置,其上存储有一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一所述的方法。
10.一种计算机可读介质,其上存储有计算机程序,其中,所述程序被处理器执行时实现如权利要求1-7中任一所述的方法。
CN202110881551.3A 2021-08-02 2021-08-02 数据处理任务详情页面展示方法、装置、电子设备和介质 Pending CN113672418A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110881551.3A CN113672418A (zh) 2021-08-02 2021-08-02 数据处理任务详情页面展示方法、装置、电子设备和介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110881551.3A CN113672418A (zh) 2021-08-02 2021-08-02 数据处理任务详情页面展示方法、装置、电子设备和介质

Publications (1)

Publication Number Publication Date
CN113672418A true CN113672418A (zh) 2021-11-19

Family

ID=78541079

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110881551.3A Pending CN113672418A (zh) 2021-08-02 2021-08-02 数据处理任务详情页面展示方法、装置、电子设备和介质

Country Status (1)

Country Link
CN (1) CN113672418A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115437535A (zh) * 2022-11-08 2022-12-06 北京德风新征程科技有限公司 针对烟草制丝车间的数据处理方法、装置、设备与介质
CN115981522A (zh) * 2023-03-16 2023-04-18 北京北汽鹏龙汽车服务贸易股份有限公司 预警车辆流转信息处理方法、设备与计算机介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106888135A (zh) * 2015-12-15 2017-06-23 阿里巴巴集团控股有限公司 一种任务状态的查询方法和装置
JP2019004386A (ja) * 2017-06-16 2019-01-10 富士ゼロックス株式会社 情報処理装置、プログラム及び情報処理システム
CN110377509A (zh) * 2019-06-29 2019-10-25 苏州浪潮智能科技有限公司 一种web页面实时查看插件脚本调试日志的方法
CN110941467A (zh) * 2019-11-06 2020-03-31 第四范式(北京)技术有限公司 数据处理方法、装置及系统
CN111611127A (zh) * 2020-04-26 2020-09-01 第四范式(北京)技术有限公司 任务运行日志的处理方法、装置、设备及存储介质
CN111768097A (zh) * 2020-06-28 2020-10-13 京东数字科技控股有限公司 任务执行状态监控方法、装置、系统及存储介质
CN113115094A (zh) * 2021-03-02 2021-07-13 北京达佳互联信息技术有限公司 一种数据处理方法、装置、电子设备和存储介质
CN113191726A (zh) * 2021-04-22 2021-07-30 五八有限公司 任务详情界面展示方法、装置、设备和计算机可读介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106888135A (zh) * 2015-12-15 2017-06-23 阿里巴巴集团控股有限公司 一种任务状态的查询方法和装置
JP2019004386A (ja) * 2017-06-16 2019-01-10 富士ゼロックス株式会社 情報処理装置、プログラム及び情報処理システム
CN110377509A (zh) * 2019-06-29 2019-10-25 苏州浪潮智能科技有限公司 一种web页面实时查看插件脚本调试日志的方法
CN110941467A (zh) * 2019-11-06 2020-03-31 第四范式(北京)技术有限公司 数据处理方法、装置及系统
CN111611127A (zh) * 2020-04-26 2020-09-01 第四范式(北京)技术有限公司 任务运行日志的处理方法、装置、设备及存储介质
CN111768097A (zh) * 2020-06-28 2020-10-13 京东数字科技控股有限公司 任务执行状态监控方法、装置、系统及存储介质
CN113115094A (zh) * 2021-03-02 2021-07-13 北京达佳互联信息技术有限公司 一种数据处理方法、装置、电子设备和存储介质
CN113191726A (zh) * 2021-04-22 2021-07-30 五八有限公司 任务详情界面展示方法、装置、设备和计算机可读介质

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115437535A (zh) * 2022-11-08 2022-12-06 北京德风新征程科技有限公司 针对烟草制丝车间的数据处理方法、装置、设备与介质
CN115437535B (zh) * 2022-11-08 2023-09-12 北京德风新征程科技股份有限公司 针对烟草制丝车间的数据处理方法、装置、设备与介质
CN115981522A (zh) * 2023-03-16 2023-04-18 北京北汽鹏龙汽车服务贸易股份有限公司 预警车辆流转信息处理方法、设备与计算机介质
CN115981522B (zh) * 2023-03-16 2023-05-12 北京北汽鹏龙汽车服务贸易股份有限公司 预警车辆流转信息处理方法、设备与计算机介质

Similar Documents

Publication Publication Date Title
CN111831420B (zh) 用于任务调度的方法、相关装置及计算机程序产品
CN105357038B (zh) 监控虚拟机集群的方法和系统
EP1405187A1 (en) Method and system for correlating and determining root causes of system and enterprise events
CN113672418A (zh) 数据处理任务详情页面展示方法、装置、电子设备和介质
US10025650B2 (en) Determining a trace of a system dump
US20210149678A1 (en) Fault-Tolerant Execution of Command Pipeline Steps
US10372701B2 (en) Transaction processor
CN115328741A (zh) 一种异常处理方法、装置、设备和存储介质
US10644971B2 (en) Graph search in structured query language style query
US10990413B2 (en) Mainframe system structuring
US20110302192A1 (en) Systems and methods for first data capture through generic message monitoring
US11803438B2 (en) Message call request data having error frequency metrics
CN111694686B (zh) 一种异常服务的处理方法、装置、电子设备及存储介质
CN115529186A (zh) 基于软负载均衡的ssl证书卸载方法、装置及系统
CN113760589A (zh) 一种基于实时流处理框架的服务熔断方法和装置
CN113656239A (zh) 针对中间件的监控方法、装置及计算机程序产品
CN112817701A (zh) 定时器处理方法、装置、电子设备和计算机可读介质
US10740030B2 (en) Stopping a plurality of central processing units for data collection based on attributes of tasks
US11693739B2 (en) Hang detection and remediation in a multi-threaded application process
CN111008202A (zh) 分布式事务处理方法和框架
CN114661397B (zh) 一种下载管理方法、装置、电子设备以及存储介质
US20230229547A1 (en) System and methods to detect faulty components during session launch
CN112181701A (zh) 一种定位异常业务请求的方法和装置
CN115373894A (zh) 数据恢复方法、装置、电子设备和计算机可读介质
CN113760590A (zh) 故障处理方法、装置、电子设备和计算机可读介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination