CN113505015A - 应用异常信息采集方法、装置、计算机设备和存储介质 - Google Patents

应用异常信息采集方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN113505015A
CN113505015A CN202110684853.1A CN202110684853A CN113505015A CN 113505015 A CN113505015 A CN 113505015A CN 202110684853 A CN202110684853 A CN 202110684853A CN 113505015 A CN113505015 A CN 113505015A
Authority
CN
China
Prior art keywords
display data
touch
user
screen
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110684853.1A
Other languages
English (en)
Inventor
徐治钦
曹超
赵睿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Hard Link Network Technology Co ltd
Original Assignee
Shanghai Hard Link Network Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Hard Link Network Technology Co ltd filed Critical Shanghai Hard Link Network Technology Co ltd
Priority to CN202110684853.1A priority Critical patent/CN113505015A/zh
Publication of CN113505015A publication Critical patent/CN113505015A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0766—Error or fault reporting or storing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0766—Error or fault reporting or storing
    • G06F11/0778—Dumping, i.e. gathering error/state information after a fault for later diagnosis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/302—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a software system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
    • G06F11/3072—Monitoring arrangements determined by the means or processing involved in reporting the monitored data where the reporting involves data filtering, e.g. pattern matching, time or event triggered, adaptive or policy-based reporting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3438—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment monitoring of user actions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/865—Monitoring of software

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Computer Hardware Design (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请涉及计算机技术领域，具体涉及一种应用异常信息采集方法、装置、计算机设备和存储介质。所述方法包括：当检测到用户触发的用于开启应用中指定流程的操作，响应于该操作，采集用户在指定流程开启期间的操作数据，以及采集应用所在终端的屏幕在指定流程开启期间的显示数据，并在指定流程开启期间出现异常时，根据操作数据对显示数据进行标注，并将得到的已添加触控效果的显示数据上传至后台服务器供问题排查人员进行问题排查。本发明实施例能够采集到异常出现时的现场信息，问题排查人员凭借采集到信息能够快速地排查出导致该异常出现的问题。

Description

应用异常信息采集方法、装置、计算机设备和存储介质
技术领域
本申请涉及计算机技术领域，特别是涉及一种应用异常信息采集方法、装置、计算机设备和存储介质。
背景技术
目前应用程序可能受到程序代码或者移动终端(如手机、平板等)硬件上的异常导致程序崩溃的或者异常的，由于导致发生异常的情况有很多种类，而某些偶发性异常又是难以复现的，对于这类异常，依靠客户端上传的日志(比如应用程序或系统生成的日志)无法复现异常出现时的现场，这使得问题排查人员难以排查出导致该异常出现的问题，进而无法解决该问题，这会给应用程序的用户带来不好的使用体验。
发明内容
本发明针对上述不足或缺点，提供了一种应用异常信息采集方法、装置、计算机设备和存储介质，本发明实施例能够采集到异常出现时的现场信息，问题排查人员凭借采集到信息能够快速地排查出导致该异常出现的问题。
本发明根据第一方面提供了一种应用异常信息采集方法，在一个实施例中，该方法包括：
检测到用户触发的用于开启应用中指定流程的操作；
响应于该操作，采集用户在该指定流程开启期间的操作数据，以及采集该应用所在终端的屏幕在该指定流程开启期间的显示数据；该操作数据包括用户在该屏幕上每次有效触控的位置的位置信息和触控时间；该显示数据为录屏视频或截屏图像；
在该指定流程开启期间出现异常时，根据该操作数据对该显示数据进行标注，得到已添加触控效果的显示数据；
将该已添加触控效果的显示数据上传至后台服务器。
在一个实施例中，在该指定流程开启期间出现异常时，根据该操作数据在该显示数据中添加用户触控效果的步骤，包括：
在检测到该指定流程结束之后，根据存于该终端本地的指定日志文件判断该指定流程开启期间是否有出现异常，在确定该指定流程开启期间出现异常时，根据该操作数据在该显示数据中添加用户触控效果；或，
在该指定流程开启期间，监测对用户每次有效触控的响应是否出现异常，在监测到对用户的任一次有效触控的响应出现异常时，根据该操作数据在该显示数据中添加用户触控效果。
在一个实施例中，在该显示数据为录屏视频时，根据该操作数据对该显示数据进行用户触控效果添加处理的步骤，包括：
根据用户有效触控的各位置的触控时间确定出该录屏视频中与各位置的触控时间对应的目标图像帧；
根据各位置的位置信息在各目标图像帧的对应位置上添加触控效果；
将该录屏视频中与各位置的触控时间对应的目标图像帧，替换为各位置的触控时间对应的添加有触控效果的目标图像帧。
在一个实施例中，在该显示数据为截屏图像时，该截屏图像的数量为多张；
根据该操作数据对该显示数据进行触控效果添加处理的步骤，包括：
根据用户有效触控的各位置的操作时间确定出该多张截屏图像中与各位置的操作时间对应的目标截屏图像；
根据各位置的位置信息在各目标截屏图像的对应位置上添加触控效果；
将该多张截屏图像中与各位置的触控时间对应的目标截屏图像，替换为各位置的触控时间对应的添加有触控效果的目标截屏图像。
在一个实施例中，该方法还包括：响应于该操作，采集用户在该指定流程开启期间，在该屏幕上每次有效触控的位置所对应的控件信息；
该方法还包括：在检测到该指定流程结束时，从存于该终端本地的指定日志文件中提取在该指定流程开启期间生成的日志信息，将采集到的控件信息和提取到的日志信息上传至后台服务器，使得该后台服务器获取与该控件信息对应的商品属性信息,并将该商品属性信息、该日志信息和该控件信息发送目标问题排查人员。
在一个实施例中，将该已添加触控效果的显示数据上传至后台服务器的步骤，包括：
从存于该终端本地的指定日志文件中提取在该指定流程开启期间生成的日志信息，从提取到的日志信息中筛选得到异常日志信息；
根据该异常日志信息的生成时间，将该异常日志信息标注在该已添加触控效果的显示数据中，得到已标注的显示数据；
在检测到该指定流程结束时，将该已标注的显示数据上传至后台服务器。
在一个实施例中，该方法还包括：在该指定流程开启期间没有出现异常时，删除该操作数据和该显示数据。
本发明根据第二方面提供了一种应用异常信息采集装置，在一个实施例中，该装置包括：
操作检测模块，用于检测到用户触发的用于开启应用中指定流程的操作；
数据采集模块，用于响应于该操作，采集用户在该指定流程开启期间的操作数据，以及采集该应用所在终端的屏幕在该指定流程开启期间的显示数据；该操作数据包括用户在该屏幕上每次有效触控的位置的位置信息和触控时间；该显示数据为录屏视频或截屏图像；
效果添加模块，用于在该指定流程开启期间出现异常时，根据该操作数据对该显示数据进行标注，得到已添加触控效果的显示数据；
数据上传模块，用于将该已添加触控效果的显示数据上传至后台服务器。
本发明根据第三方面提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现上述任一方法的实施例的步骤。
本发明根据第四方面提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述任一方法的实施例的步骤。
在本发明实施例中，当检测到用户触发的用于开启应用中指定流程的操作，响应于该操作，采集用户在指定流程开启期间的操作数据，以及采集应用所在终端的屏幕在指定流程开启期间的显示数据，并在指定流程开启期间出现异常时，根据操作数据对显示数据进行标注，并将得到的已添加触控效果的显示数据上传至后台服务器供问题排查人员进行问题排查。通过本实施例提供的方法能够采集到应用程序出现异常时的现场信息，从而问题排查人员凭借采集到的信息能够快速地排查出导致该异常出现的问题。
附图说明
图1为一个实施例中一种应用异常信息采集方法的应用环境图；
图2为一个实施例中一种应用异常信息采集方法的流程示意图；
图3为一个实施例中添加触控效果的流程示意图；
图4为另一个实施例中添加触控效果的流程示意图；
图5为一个实施例中上传应用异常信息的流程示意图；
图6为一个实施例中一种应用异常信息采集装置的结构框图；
图7为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅用以解释本申请，并不用于限定本申请。
本发明提供了一种应用异常信息采集方法。在本实施例中，该应用异常信息采集方法可以应用于如图1所示的应用环境中。其中，用户终端10中安装有应用程序(或称为客户端)，该应用程序中可以集成用于采集该应用程序在运行过程中的异常信息的SDK(Software Development Kit，软件开发工具包)。通过该SDK可以控制用户终端10来实现采集该应用程序的异常信息并上报给后台服务器20的功能，后台服务器20会将其收到的应用异常信息提供给问题排查人员下载，从而问题排查人员可以基于该应用异常信息来复现异常出现时的现场并进行问题排查。
其中，用户终端10可以包括但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和台式计算机等，后台服务器20可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
本实施例提供的一种应用异常信息采集方法包括如图2所示的步骤，下面以该方法应用于图1中的用户终端为例进行说明。
S110：检测到用户触发的用于开启应用中指定流程的操作。
其中，应用程序有多个流程，示例性地，应用程序的流程可以有储值流程、登录流程、入服流程、注册流程、支付补单流程、APP评分流程等等。问题排查人员可以预先在应用程序的一些关键流程开始之前进行埋点，当检测到用户触发了埋点时，即执行步骤S120。比如，用户点击应用程序的“支付”按钮，此时即开启支付流程，在支付流程中，用户可以通过应用程序提供的支付界面来选择支付渠道(如微信支付、支付宝支付、银行卡支付等等)、支付密码的输入形式(如密码支付、指纹支付、人脸支付等等)，在用户开启支付流程后，可以选择主动结束支付流程(比如用户可以通过关闭支付界面来结束支付流程)，也可以选择完成支付流程而被动结束支付流程。
上述关键流程即是前述指定流程，指定流程的选择可以基于不同的场景需要来选择，比如，可以将登录流程、支付流程作为指定流程，比如，将根据文本日志难以复现异常出现时现场的流程选为指定流程，将统计出的较常出现偶发性异常的流程选择为指定流程等。
应用程序包括的流程很多，但是本实施例只针对应用程序中的指定流程执行步骤S120，这样需要采集的操作数据和显示数据的数据量会更少，这样可以减少对用户终端的宝贵计算资源的占用，从而不会影响到用户的正常使用。
S120：响应于该操作，采集用户在指定流程开启期间的操作数据，以及采集应用所在终端的屏幕在指定流程开启期间的显示数据。
在本实施例中，采集的用户在指定流程开启期间的操作数据包括用户在屏幕上每次有效触控的位置的位置信息和操作时间；采集的终端屏幕在指定流程开启期间的显示数据可以是录制的一段指定流程开启期间的录屏视频，或是，在指定流程开启期间截取的多张截屏图像。其中，指定流程开启期间是指指定流程的开启到结束这段时间，具体可以通过接收到用户触发的用于开启指定流程的操作的时间和接收到的用于结束指定流程的操作的时间(比如，接收到用户下发的用于结束流程的命令的时间，或者用户完成流程时的时间)来确定。另外，在显示数据为截屏图像时，可以在指定流程开启期间按照预设的时间间隔来截取屏幕得到截屏图像，进一步地，还可以是在检测到异常出现后再开始截取屏幕。
用户在终端屏幕上触控的形式可以包括但不限于单击、双击、长按、滑动等形式。
有效触控是指用户的触控操作能够触发下发给应用程序的命令，无效触控是指用户的触控操作不会触发任何下发给应用程序的命令。具体地，用户可以在屏幕上或者应用程序界面上的任意区域进行触控,然而，不是任意区域都能够触发下发给应用程序的命令，比如，用户对登录界面上的用户名或密码输入框进行单击可以触发信息输入的命令，应用程序会响应该命令，显示键盘的输入界面，从而用户可以通过该键盘来输入信息；又比如，用户单击登录按钮可以触发登录账号的命令，此时应用程序会响应该命令，基于用户输入的用户名信息和密码信息来生成相应的账号登录请求并发送给相应的服务器；而如果用户点击了登录界面中没有设置任何控件的地方如单纯的背景图片的某个位置，此时并不会触发任何命令。
本实施例只记录用户在屏幕上每次有效触控的位置的位置信息和操作时间，一方面可以减少采集的操作数据所占用的存储空间，另一方面，有利于在执行后续的步骤130时，减少触控效果添加处理的工作量，减少对用户终端计算资源的占用。
S130：在指定流程开启期间出现异常时，根据操作数据对显示数据进行标注，得到已添加触控效果的显示数据。
在本实施例中，触控效果用于表示用户在终端屏幕上触控的位置。进一步地，触控效果还可以用于表示用户在终端屏幕上触控的位置和触控顺序。可以为用户的每次触控进行编号，比如，1、2、3。这样既可以让问题排查人员直观地看到用户触控了哪个位置，也可以知道用户触控的次数。示例性地，某个用户在应用程序支付成功了，但是服务器这一侧没有收到这样的成功支付，对于这样的异常，以往问题排查人员就会去官方查询，或者捞取该用户的相关日志，然而日志不能直观地呈现出现异常的原因，比如出现异常是因为某个商品有问题，但是问题排查人员从日志所看到的是文字，此时无法把文字和用户看到的商品联系起来，这就不利于问题的排查而本实施例采用截屏或录屏的方式可以更好地向问题排查人员呈现出现错误的原因。
S140：将已添加触控效果的显示数据上传至后台服务器。
其中，在指定流程开启期间没有出现异常时，可以删除采集到的操作数据和显示数据，从而减少对用户终端存储空间的占用。
在本实施例中，当应用程序检测到用户触发的用于开启应用中指定流程的操作，响应于该操作，采集用户在指定流程开启期间的操作数据，以及采集应用所在终端的屏幕在指定流程开启期间的显示数据，并在指定流程开启期间出现异常时，根据操作数据对显示数据进行触控效果添加处理，并将得到的已添加触控效果的显示数据上传至后台服务器供问题排查人员进行问题排查。通过本实施例提供的方法能够采集到应用程序出现异常时的现场信息，从而问题排查人员凭借采集到的信息能够快速地排查出导致该异常出现的问题。
在一个实施例中，在指定流程开启期间出现异常时，根据操作数据在显示数据中添加用户触控效果的步骤，包括：
在检测到指定流程结束之后(包括流程结束之时)，根据存于终端本地的指定日志文件判断指定流程开启期间是否有出现异常，在确定指定流程开启期间出现异常时，根据操作数据在显示数据中添加用户触控效果；或，
在指定流程开启期间，监测对用户每次有效触控的响应是否出现异常，在监测到对用户的任一次有效触控的响应出现异常时，根据操作数据在显示数据中添加用户触控效果。
其中，存于终端本地的指定日志文件包括应用程序运行生成的日志和/或终端操作系统生成的日志。
从上述实施例可知，用户进行有效触控后会触发相关命令，本实施例中的有效触控的响应是指执行有效触控所触发的命令之后，得到的反馈结果。比如，用户点击支付按钮，会触发向支付服务器发送支付请求的命令，那么应用程序在执行该命令向支付服务器发送了支付请求后，监听支付服务器对该支付请求的反馈信息，假如支付服务器反馈的errorCode或errorMsg符合指定的错误，那么判定对用户本次有效触控的响应出现异常。
在本实施例中，根据操作数据在显示数据中添加用户触控效果的步骤，可以是在指定流程开启期间检测到异常出现时即开始执行，也可以是在指定流程结束之后再开始执行(这样可以采集到更完整的指定流程的执行过程)。比如，可以是在检测到指定流程结束时，通过查看指定日志文件中的在指定流程开启期间生成的日志信息来判断指定流程开启期间是否出现异常，具体是查看到在指定流程开启期间有生成的异常日志信息时，即判定指定流程开启期间出现异常，反之则判定指定流程开启期间没有出现异常。又比如，在指定流程开启期间，即对用户每次有效触控的响应进行检测，在监测到对用户的有效触控的响应出现异常时，即根据此时采集到的操作数据在此时采集到的显示数据中添加用户触控效果。
在一个实施例中，在显示数据为录屏视频时，根据操作数据对显示数据进行用户触控效果添加处理的步骤，如图3所示，包括：
S211：根据用户有效触控的各位置的操作时间确定出录屏视频中与各位置的操作时间对应的目标图像帧。
S212：根据各位置的位置信息在各目标图像帧的对应位置上添加触控效果。
S213：将录屏视频中与各位置的触控时间对应的目标图像帧，替换为各位置的触控时间对应的添加有触控效果的目标图像帧。
其中，用户有效触控的各位置的操作时间可以对应录屏视频中的多张图像帧，即目标图像帧由多张图像帧组成。示例性地，用户在终端屏幕的A位置的操作时间为10点10分35秒-10点10分36秒，那么可以对录屏视频进行分帧处理从而得到一系列图像帧，然后将该一系列图像帧中对应的采集时间处于10点10分35秒-10点10分36秒这一时间区间内的图像帧作为A位置的操作时间对应的目标图像帧。
之后为各位置的操作时间对应的目标图像帧添加触控效果。触控效果的素材可以预先从后台服务器下载并保存在用户终端本地，以加快触控效果的添加速度。进一步地，问题排查人员可以更新触控效果的素材，并通过后台服务器将更新后的素材推送给用户终端。
在另一个实施例中，根据操作数据对显示数据进行用户触控效果添加处理的步骤，如图4所示，包括：
S221：根据用户有效触控的各位置的操作时间确定出该多张截屏图像中与各位置的操作时间对应的目标截屏图像；
S222：根据各位置的位置信息在各目标截屏图像的对应位置上添加触控效果；
S223：将该多张截屏图像中与各位置的触控时间对应的目标截屏图像，替换为各位置的触控时间对应的添加有触控效果的目标截屏图像。
其中，各位置的操作时间对应的目标截屏图像由一张或多张图像帧组成。关于触控效果的说明可参见上一实施例的相关描述，在此不再赘述。
在一个实施例中，该应用异常信息采集方法还包括：响应于操作，采集用户在指定流程开启期间，在屏幕上每次有效触控的位置所对应的控件信息。
相应地，该应用异常信息采集方法还包括：在检测到指定流程结束时，从存于终端本地的指定日志文件中提取在指定流程开启期间生成的日志信息，将采集到的控件信息和提取到的日志信息上传至后台服务器，使得该后台服务器获取与该控件信息对应的商品属性信息,并将该商品属性信息、该日志信息和该控件信息发送目标问题排查人员。
其中，控件信息是控件的唯一编码，后台服务器可以通过控件信息来识别出用户点击了应用程序中的哪个控件。后台服务器可以维护指定流程中的各个控件与其关联的商品之间的映射关系，从而通过用户终端上传的控件信息可以找到其对应的商品的唯一编码，进而可以通过该商品的唯一编码获得该商品的属性信息(如商品的价格、库存数量等)。
用户终端将采集到的控件信息和提取到的日志信息上传至后台服务器之后，后台服务器可以根据控件信息来获取与其关联的商品的属性信息，从而能够进一步为问题排查人员提供更多类型的异常相关信息，有利于提高问题排查的速度。
在一个实施例中，将已添加触控效果的显示数据上传至后台服务器的步骤，如图5所示，包括：
S141：从存于终端本地的指定日志文件中提取在指定流程开启期间生成的日志信息，从提取到的日志信息中筛选得到异常日志信息；
S142：根据异常日志信息的生成时间，将异常日志信息标注在已添加触控效果的显示数据中，得到已标注的显示数据；
S143：在检测到指定流程结束时，将已标注的显示数据上传至后台服务器。
其中，异常日志信息可以包括但不限于异常对应的编码信息、异常发生的时间。
本实施例中，进一步地筛选出指定流程开启期间生成的异常日志信息，并根据异常日志信息的生成时间将异常日志信息以文字框的形式标注在已添加触控效果的录屏视频或截屏图像中，从而问题排查人员除了能够从录屏视频或截屏图像中看到用户的触控问题，还能够看到出现了哪些异常。
图2-图5为一个实施例中应用异常信息采集方法的流程示意图。应该理解的是，虽然图2-图5的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图2-图5中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
基于相同的发明构思，本发明还提供了一种应用异常信息采集装置。
在本实施例中，如图6所示，该应用异常信息采集装置包括以下模块：
操作检测模块110，用于检测到用户触发的用于开启应用中指定流程的操作；
数据采集模块120，用于响应于该操作，采集用户在该指定流程开启期间的操作数据，以及采集该应用所在终端的屏幕在该指定流程开启期间的显示数据；该操作数据包括用户在该屏幕上每次有效触控的位置的位置信息和触控时间；该显示数据为录屏视频或截屏图像；
效果添加模块130，用于在该指定流程开启期间出现异常时，根据该操作数据对该显示数据进行标注，得到已添加触控效果的显示数据；
数据上传模块140，用于将该已添加触控效果的显示数据上传至后台服务器。
在一个实施例中，效果添加模块，用于在检测到该指定流程结束之后，根据存于该终端本地的指定日志文件判断该指定流程开启期间是否有出现异常，在确定该指定流程开启期间出现异常时，根据该操作数据在该显示数据中添加用户触控效果；或，用于在该指定流程开启期间，监测对用户每次有效触控的响应是否出现异常，在监测到对用户的任一次有效触控的响应出现异常时，根据该操作数据在该显示数据中添加用户触控效果。
在一个实施例中，在该显示数据为录屏视频时，效果添加模块，包括：
图像帧确定子模块，用于根据用户有效触控的各位置的触控时间确定出该录屏视频中与各位置的触控时间对应的目标图像帧；
触控效果添加子模块，用于根据各位置的位置信息在各目标图像帧的对应位置上添加触控效果；
替换子模块，用于将该录屏视频中与各位置的触控时间对应的目标图像帧，替换为各位置的触控时间对应的添加有触控效果的目标图像帧。
在一个实施例中，在该显示数据为截屏图像时，该截屏图像的数量为多张；相应地，效果添加模块，包括：
截屏图像确定子模块，用于根据用户有效触控的各位置的操作时间确定出该多张截屏图像中与各位置的操作时间对应的目标截屏图像；
触控效果添加子模块，用于根据各位置的位置信息在各目标截屏图像的对应位置上添加触控效果；
替换子模块，用于将该多张截屏图像中与各位置的触控时间对应的目标截屏图像，替换为各位置的触控时间对应的添加有触控效果的目标截屏图像。
在一个实施例中，数据采集模块，还用于响应于该操作，采集用户在该指定流程开启期间，在该屏幕上每次有效触控的位置所对应的控件信息。
数据上传模块，还用于在检测到该指定流程结束时，从存于该终端本地的指定日志文件中提取在该指定流程开启期间生成的日志信息，将采集到的控件信息和提取到的日志信息上传至后台服务器，使得该后台服务器获取与该控件信息对应的商品属性信息,并将该商品属性信息、该日志信息和该控件信息发送目标问题排查人员。
在一个实施例中，数据上传模块，包括：
异常日志筛选子模块，用于从存于该终端本地的指定日志文件中提取在该指定流程开启期间生成的日志信息，从提取到的日志信息中筛选得到异常日志信息；
标注子模块，用于根据该异常日志信息的生成时间，将该异常日志信息标注在该已添加触控效果的显示数据中，得到已标注的显示数据；
上传子模块，用于在检测到该指定流程结束时，将该已标注的显示数据上传至后台服务器。
在一个实施例中，该装置还包括数据删除模块。数据删除模块，用于在该指定流程开启期间没有出现异常时，删除该操作数据和该显示数据。
关于应用异常信息采集装置的具体限定可以参见上文中对于应用异常信息采集方法的限定，在此不再赘述。上述应用异常信息采集装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中，提供了一种计算机设备，其内部结构图可以如图7所示。
该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储操作数据、显示数据等数据，具体存储的数据还可以参见上述方法实施例中的限定。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种应用异常信息采集方法。
本领域技术人员可以理解，图7中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
本实施例还提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现以下步骤：
检测到用户触发的用于开启应用中指定流程的操作；响应于该操作，采集用户在该指定流程开启期间的操作数据，以及采集该应用所在终端的屏幕在该指定流程开启期间的显示数据；该操作数据包括用户在该屏幕上每次有效触控的位置的位置信息和触控时间；该显示数据为录屏视频或截屏图像；在该指定流程开启期间出现异常时，根据该操作数据对该显示数据进行标注，得到已添加触控效果的显示数据；将该已添加触控效果的显示数据上传至后台服务器。
在一个实施方式中，处理器执行计算机程序，实现在该指定流程开启期间出现异常时，根据该操作数据在该显示数据中添加用户触控效果时，还实现以下步骤：
在检测到该指定流程结束之后，根据存于该终端本地的指定日志文件判断该指定流程开启期间是否有出现异常，在确定该指定流程开启期间出现异常时，根据该操作数据在该显示数据中添加用户触控效果；或，在该指定流程开启期间，监测对用户每次有效触控的响应是否出现异常，在监测到对用户的任一次有效触控的响应出现异常时，根据该操作数据在该显示数据中添加用户触控效果。
在一个实施方式中，在该显示数据为录屏视频时，处理器执行计算机程序，实现根据该操作数据对该显示数据进行用户触控效果添加处理时，还实现以下步骤：
根据用户有效触控的各位置的触控时间确定出该录屏视频中与各位置的触控时间对应的目标图像帧；根据各位置的位置信息在各目标图像帧的对应位置上添加触控效果；将该录屏视频中与各位置的触控时间对应的目标图像帧，替换为各位置的触控时间对应的添加有触控效果的目标图像帧。
在一个实施方式中，在该显示数据为截屏图像时，该截屏图像的数量为多张；处理器执行计算机程序，实现根据该操作数据对该显示数据进行触控效果添加处理时，还实现以下步骤：
根据用户有效触控的各位置的操作时间确定出该多张截屏图像中与各位置的操作时间对应的目标截屏图像；根据各位置的位置信息在各目标截屏图像的对应位置上添加触控效果；将该多张截屏图像中与各位置的触控时间对应的目标截屏图像，替换为各位置的触控时间对应的添加有触控效果的目标截屏图像。
在一个实施方式中，处理器执行计算机程序时，还实现以下步骤：响应于该操作，采集用户在该指定流程开启期间，在该屏幕上每次有效触控的位置所对应的控件信息；
处理器执行计算机程序时，还实现以下步骤：在检测到该指定流程结束时，从存于该终端本地的指定日志文件中提取在该指定流程开启期间生成的日志信息，将采集到的控件信息和提取到的日志信息上传至后台服务器，使得该后台服务器获取与该控件信息对应的商品属性信息,并将该商品属性信息、该日志信息和该控件信息发送目标问题排查人员。
在一个实施方式中，处理器执行计算机程序，实现将该已添加触控效果的显示数据上传至后台服务器时，还实现以下步骤：
从存于该终端本地的指定日志文件中提取在该指定流程开启期间生成的日志信息，从提取到的日志信息中筛选得到异常日志信息；根据该异常日志信息的生成时间，将该异常日志信息标注在该已添加触控效果的显示数据中，得到已标注的显示数据；在检测到该指定流程结束时，将该已标注的显示数据上传至后台服务器。
在一个实施方式中，处理器执行计算机程序时，还实现以下步骤：在该指定流程开启期间没有出现异常时，删除该操作数据和该显示数据。
在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：
检测到用户触发的用于开启应用中指定流程的操作；响应于该操作，采集用户在该指定流程开启期间的操作数据，以及采集该应用所在终端的屏幕在该指定流程开启期间的显示数据；该操作数据包括用户在该屏幕上每次有效触控的位置的位置信息和触控时间；该显示数据为录屏视频或截屏图像；在该指定流程开启期间出现异常时，根据该操作数据对该显示数据进行标注，得到已添加触控效果的显示数据；将该已添加触控效果的显示数据上传至后台服务器。
在一个实施方式中，计算机程序被处理器执行，在该指定流程开启期间出现异常时，根据该操作数据在该显示数据中添加用户触控效果时，还实现以下步骤：
在检测到该指定流程结束之后，根据存于该终端本地的指定日志文件判断该指定流程开启期间是否有出现异常，在确定该指定流程开启期间出现异常时，根据该操作数据在该显示数据中添加用户触控效果；或，在该指定流程开启期间，监测对用户每次有效触控的响应是否出现异常，在监测到对用户的任一次有效触控的响应出现异常时，根据该操作数据在该显示数据中添加用户触控效果。
在一个实施方式中，在该显示数据为录屏视频时，计算机程序被处理器执行，根据该操作数据对该显示数据进行用户触控效果添加处理时，还实现以下步骤：
根据用户有效触控的各位置的触控时间确定出该录屏视频中与各位置的触控时间对应的目标图像帧；根据各位置的位置信息在各目标图像帧的对应位置上添加触控效果；将该录屏视频中与各位置的触控时间对应的目标图像帧，替换为各位置的触控时间对应的添加有触控效果的目标图像帧。
在一个实施方式中，在该显示数据为截屏图像时，该截屏图像的数量为多张；计算机程序被处理器执行，根据该操作数据对该显示数据进行触控效果添加处理时，还实现以下步骤：
根据用户有效触控的各位置的操作时间确定出该多张截屏图像中与各位置的操作时间对应的目标截屏图像；根据各位置的位置信息在各目标截屏图像的对应位置上添加触控效果；将该多张截屏图像中与各位置的触控时间对应的目标截屏图像，替换为各位置的触控时间对应的添加有触控效果的目标截屏图像。
在一个实施方式中，计算机程序被处理器执行时，还实现以下步骤：响应于该操作，采集用户在该指定流程开启期间，在该屏幕上每次有效触控的位置所对应的控件信息；
计算机程序被处理器执行时，还实现以下步骤：在检测到该指定流程结束时，从存于该终端本地的指定日志文件中提取在该指定流程开启期间生成的日志信息，将采集到的控件信息和提取到的日志信息上传至后台服务器，使得该后台服务器获取与该控件信息对应的商品属性信息,并将该商品属性信息、该日志信息和该控件信息发送目标问题排查人员。
在一个实施方式中，计算机程序被处理器执行，将该已添加触控效果的显示数据上传至后台服务器时，还实现以下步骤：
从存于该终端本地的指定日志文件中提取在该指定流程开启期间生成的日志信息，从提取到的日志信息中筛选得到异常日志信息；根据该异常日志信息的生成时间，将该异常日志信息标注在该已添加触控效果的显示数据中，得到已标注的显示数据；在检测到该指定流程结束时，将该已标注的显示数据上传至后台服务器。
在一个实施方式中，计算机程序被处理器执行时，还实现以下步骤：
在该指定流程开启期间没有出现异常时，删除该操作数据和该显示数据。
本领域普通技术人员可以理解实现上述方法实施例中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种应用异常信息采集方法，其特征在于，所述方法包括：
检测到用户触发的用于开启应用中指定流程的操作；
响应于所述操作，采集用户在所述指定流程开启期间的操作数据，以及采集所述应用所在终端的屏幕在所述指定流程开启期间的显示数据；所述操作数据包括用户在所述屏幕上每次有效触控的位置的位置信息和触控时间；所述显示数据为录屏视频或截屏图像；
在所述指定流程开启期间出现异常时，根据所述操作数据对所述显示数据进行标注，得到已添加触控效果的显示数据；
将所述已添加触控效果的显示数据上传至后台服务器。
2.如权利要求1所述的方法，其特征在于，所述在所述指定流程开启期间出现异常时，根据所述操作数据在所述显示数据中添加用户触控效果的步骤，包括：
在检测到所述指定流程结束之后，根据存于所述终端本地的指定日志文件判断所述指定流程开启期间是否有出现异常，在确定所述指定流程开启期间出现异常时，根据所述操作数据在所述显示数据中添加用户触控效果；或，
在所述指定流程开启期间，监测对用户每次有效触控的响应是否出现异常，在监测到对用户的任一次有效触控的响应出现异常时，根据所述操作数据在所述显示数据中添加用户触控效果。
3.如权利要求1或2所述的方法，其特征在于，在所述显示数据为录屏视频时，根据所述操作数据对所述显示数据进行用户触控效果添加处理的步骤，包括：
根据用户有效触控的各位置的触控时间确定出所述录屏视频中与各位置的触控时间对应的目标图像帧；
根据各位置的位置信息在各目标图像帧的对应位置上添加触控效果；
将所述录屏视频中与各位置的触控时间对应的目标图像帧，替换为各位置的触控时间对应的添加有触控效果的目标图像帧。
4.如权利要求1或2所述的方法，其特征在于，在所述显示数据为截屏图像时，所述截屏图像的数量为多张；
根据所述操作数据对所述显示数据进行触控效果添加处理的步骤，包括：
根据用户有效触控的各位置的操作时间确定出所述多张截屏图像中与各位置的操作时间对应的目标截屏图像；
根据各位置的位置信息在各目标截屏图像的对应位置上添加触控效果；
将所述多张截屏图像中与各位置的触控时间对应的目标截屏图像，替换为各位置的触控时间对应的添加有触控效果的目标截屏图像。
5.如权利要求1所述的方法，其特征在于，所述方法还包括：
响应于所述操作，采集用户在所述指定流程开启期间，在所述屏幕上每次有效触控的位置所对应的控件信息；
所述方法还包括：
在检测到所述指定流程结束时，从存于所述终端本地的指定日志文件中提取在所述指定流程开启期间生成的日志信息，将采集到的控件信息和提取到的日志信息上传至后台服务器，使得所述后台服务器获取与所述控件信息对应的商品属性信息,并将所述商品属性信息、所述日志信息和所述控件信息发送目标问题排查人员。
6.如权利要求1或5所述的方法，其特征在于，所述将所述已添加触控效果的显示数据上传至后台服务器的步骤，包括：
从存于所述终端本地的指定日志文件中提取在所述指定流程开启期间生成的日志信息，从提取到的日志信息中筛选得到异常日志信息；
根据所述异常日志信息的生成时间，将所述异常日志信息标注在所述已添加触控效果的显示数据中，得到已标注的显示数据；
在检测到所述指定流程结束时，将所述已标注的显示数据上传至后台服务器。
7.如权利要求1所述的方法，其特征在于，所述方法还包括：
在所述指定流程开启期间没有出现异常时，删除所述操作数据和所述显示数据。
8.一种应用异常信息采集装置，其特征在于，所述装置包括：
操作检测模块，用于检测到用户触发的用于开启应用中指定流程的操作；
数据采集模块，用于响应于所述操作，采集用户在所述指定流程开启期间的操作数据，以及采集所述应用所在终端的屏幕在所述指定流程开启期间的显示数据；所述操作数据包括用户在所述屏幕上每次有效触控的位置的位置信息和触控时间；所述显示数据为录屏视频或截屏图像；
效果添加模块，用于在所述指定流程开启期间出现异常时，根据所述操作数据对所述显示数据进行标注，得到已添加触控效果的显示数据；
数据上传模块，用于将所述已添加触控效果的显示数据上传至后台服务器。
9.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
CN202110684853.1A 2021-06-21 2021-06-21 应用异常信息采集方法、装置、计算机设备和存储介质 Pending CN113505015A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110684853.1A CN113505015A (zh) 2021-06-21 2021-06-21 应用异常信息采集方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110684853.1A CN113505015A (zh) 2021-06-21 2021-06-21 应用异常信息采集方法、装置、计算机设备和存储介质

Publications (1)

Publication Number Publication Date
CN113505015A true CN113505015A (zh) 2021-10-15

Family

ID=78010461

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110684853.1A Pending CN113505015A (zh) 2021-06-21 2021-06-21 应用异常信息采集方法、装置、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN113505015A (zh)

Similar Documents

Publication Publication Date Title
CN110647438B (zh) 事件监控方法、装置、计算机设备和存储介质
US8332765B2 (en) Problem reporting system based on user interface interactions
CN108804299B (zh) 应用程序异常处理方法及装置
CN110688598B (zh) 业务参数采集方法、装置、计算机设备和存储介质
CN108399124B (zh) 应用测试方法、装置、计算机设备和存储介质
CN107451040A (zh) 故障原因的定位方法、装置及计算机可读存储介质
CN110162453B (zh) 测试方法、装置、计算机可读存储介质和计算机设备
CN111198797B (zh) 操作监控方法及装置、操作分析方法及装置
CN114077525A (zh) 异常日志处理方法、装置、终端设备、云服务器及系统
CN113254320A (zh) 记录用户网页操作行为的方法及装置
CN111221671A (zh) 应用程序异常退出的处理方法及装置
CN110659435A (zh) 页面数据采集处理方法、装置、计算机设备和存储介质
CN114996103A (zh) 页面异常检测方法、装置、电子设备和存储介质
CN112148606A (zh) 埋点测试方法、装置、设备及计算机可读介质
CN113127320B (zh) 应用程序异常检测方法、装置、设备及系统
CN112817817B (zh) 埋点信息查询方法、装置、计算机设备和存储介质
CN112905935A (zh) 页面录制方法、页面录制动画生成方法、设备和存储介质
CN113505015A (zh) 应用异常信息采集方法、装置、计算机设备和存储介质
CN112052135A (zh) 基于c/s架构的客户端程序用户操作记录与异常上报方法
CN112817816B (zh) 埋点处理方法、装置、计算机设备和存储介质
CN113987506A (zh) 认证系统的测试方法、装置、测试设备和存储介质
CN111371643B (zh) 验证方法、设备及存储介质
CN113382268B (zh) 直播异常分析方法、装置、计算机设备和存储介质
CN112765404A (zh) 到访信息处理方法、装置、系统、设备及存储介质
CN113495764A (zh) 自动化数据提取方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination