CN113542796B - 视频评测方法、装置、计算机设备和存储介质 - Google Patents

视频评测方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN113542796B
CN113542796B CN202010323889.2A CN202010323889A CN113542796B CN 113542796 B CN113542796 B CN 113542796B CN 202010323889 A CN202010323889 A CN 202010323889A CN 113542796 B CN113542796 B CN 113542796B
Authority
CN
China
Prior art keywords
target
plug
evaluation
task
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010323889.2A
Other languages
English (en)
Other versions
CN113542796A (zh
Inventor
罗家润
谢宗兴
刘楚蓉
刘可心
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202010323889.2A priority Critical patent/CN113542796B/zh
Publication of CN113542796A publication Critical patent/CN113542796A/zh
Application granted granted Critical
Publication of CN113542796B publication Critical patent/CN113542796B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/475End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4756End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for rating content, e.g. scoring a recommended movie

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Stored Programmes (AREA)

Abstract

本申请涉及一种视频评测方法、装置、计算机设备和存储介质。所述方法包括:接收任务触发指令;获取任务触发指令对应的目标视频评测任务的节点配置信息,节点配置信息包括:目标视频评测任务的各任务节点之间的顺序,以及各任务节点对应的目标插件的参数信息;按照各任务节点之间的顺序,依次调用各任务节点对应的目标插件,使各目标插件按照对应的参数信息执行相应的任务,并在各目标插件执行完毕后,获得对应的评测结果。采用本方法能够提高视频评测的应用灵活性。

Description

视频评测方法、装置、计算机设备和存储介质
技术领域
本申请涉及信息处理技术领域,特别是涉及一种视频评测方法、装置、计算机设备和存储介质。
背景技术
很多互联网业务在上线使用之前需要进行评测,例如短视频应用平台,用户在短视频应用平台发布视频时,平台会通过视频处理系统对用户上传的原始视频进行处理,经处理后的视频可能存在一定程度的失真情况,导致视频质量下降,影响用户观看体验,因此有必要对视频处理系统处理后的视频质量进行评测,再基于评测结果优化视频处理系统。
然而,传统的视频评测方法比较聚焦于服务单一业务的实用性,存在灵活性不高、使用场景及面向人群不够广泛的问题,导致新的业务接入需要重新适配新的场景,同时由于实现架构耦合性较高,存在可拓展性较差、协同共建难度大的问题。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高应用灵活性的视频评测方法、装置、计算机设备和存储介质。
一种视频评测方法,所述方法包括:
接收任务触发指令;
获取所述任务触发指令对应的目标视频评测任务的节点配置信息,所述节点配置信息包括:所述目标视频评测任务的各任务节点之间的顺序,以及各所述任务节点对应的目标插件的参数信息;
按照各所述任务节点之间的顺序,依次调用各所述任务节点对应的目标插件,使各所述目标插件按照对应的参数信息执行相应的任务,并在各所述目标插件执行完毕后,获得对应的评测结果。
一种视频评测装置,所述装置包括:
接收模块,用于接收任务触发指令;
获取模块,用于获取所述任务触发指令对应的目标视频评测任务的节点配置信息,所述节点配置信息包括:所述目标视频评测任务的各任务节点之间的顺序,以及各所述任务节点对应的目标插件的参数信息;
调用模块,用于按照各所述任务节点之间的顺序,依次调用各所述任务节点对应的目标插件,使各所述目标插件按照对应的参数信息执行相应的任务,并在各所述目标插件执行完毕后,获得对应的评测结果。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
接收任务触发指令;
获取所述任务触发指令对应的目标视频评测任务的节点配置信息,所述节点配置信息包括:所述目标视频评测任务的各任务节点之间的顺序,以及各所述任务节点对应的目标插件的参数信息;
按照各所述任务节点之间的顺序,依次调用各所述任务节点对应的目标插件,使各所述目标插件按照对应的参数信息执行相应的任务,并在各所述目标插件执行完毕后,获得对应的评测结果。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
接收任务触发指令;
获取所述任务触发指令对应的目标视频评测任务的节点配置信息,所述节点配置信息包括:所述目标视频评测任务的各任务节点之间的顺序,以及各所述任务节点对应的目标插件的参数信息;
按照各所述任务节点之间的顺序,依次调用各所述任务节点对应的目标插件,使各所述目标插件按照对应的参数信息执行相应的任务,并在各所述目标插件执行完毕后,获得对应的评测结果。
上述视频评测方法、装置、计算机设备和存储介质,通过接收任务触发指令,获取任务触发指令对应的目标视频评测任务的节点配置信息,节点配置信息包括目标视频评测任务的各任务节点之间的顺序,以及各任务节点对应的目标插件的参数信息,按照各任务节点之间的顺序,依次调用各任务节点对应的目标插件,使各目标插件按照对应的参数信息执行相应的任务,并在各目标插件执行完毕后,获得对应的评测结果。通过灵活的插件化方式,使用者只需要关注目标视频评测任务的各任务节点的配置,评测涉及的各项具体功能交由插件实现,根据不同的评测需求灵活地组装插件以集成评测功能,可广泛应用于多种业务场景。此外,通过灵活的插件化方式可以提高架构的可拓展性,有助于解决多方业务协同共建的效率问题,当业务场景需要定制化时,可自行实现插件接入,进一步拓展评测能力。
附图说明
图1为一个实施例中视频评测方法的应用环境图;
图2为一个实施例中视频评测方法的流程示意图;
图3为一个实施例中步骤S206的流程示意图;
图4为另一个实施例中步骤S206的流程示意图;
图5为一个实施例中用于视频评测的整体平台架构示意图;
图6为一个实施例中视频评测方法的应用场景示意图;
图7为另一个实施例中视频评测方法的应用场景示意图;
图8为一个实施例中视频评测装置的结构框图;
图9为一个实施例中计算机设备的内部结构图;
图10为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的视频评测方法,可以应用于如图1所示的应用环境中。其中,终端102通过网络与服务器104进行通信。用户可以通过终端102访问提供评测服务的平台,服务器104可以是该平台所在的服务器。终端102或服务器104接收任务触发指令;获取任务触发指令对应的目标视频评测任务的节点配置信息,节点配置信息包括:目标视频评测任务的各任务节点之间的顺序,以及各任务节点对应的目标插件的参数信息;按照各任务节点之间的顺序,依次调用各任务节点对应的目标插件,使各目标插件按照对应的参数信息执行相应的任务,并在各目标插件执行完毕后,获得对应的评测结果。其中,终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备,服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。本申请实施例中视频评测方法可以由终端102来执行,也可以由服务器104来执行,还可以是由终端102和服务器104共同执行。具体地,终端102执行本申请实施例中视频评测方法可以通过处理器来执行。
在一个实施例中,如图2所示,提供了一种视频评测方法,以该方法应用于图1中的服务器为例进行说明,包括以下步骤S202至步骤S206。
S202,接收任务触发指令。
任务触发指令用于触发对应的目标视频评测任务,当服务器接收到任务触发指令后,启动执行目标视频评测任务。
在一个实施例中,可以是当接收到针对目标视频评测任务的手动触发指令时,判定接收到任务触发指令,例如当接收到评测人员发起的手动触发指令时,认为接收到任务触发指令。在其它实施例中,也可以是当监测到针对目标视频评测任务的自动触发事件时,判定接收到任务触发指令,举例来说,可以是当监测到视频推送或视频处理完成时,认为接收到任务触发指令。
S204,获取任务触发指令对应的目标视频评测任务的节点配置信息,节点配置信息包括:目标视频评测任务的各任务节点之间的顺序,以及各任务节点对应的目标插件的参数信息。
其中,各任务节点之间的顺序表示各任务节点的任务被执行的先后顺序,每个任务节点对应的目标插件用于执行该任务节点的任务,参数信息表示目标插件在执行过程中所需的信息。每个任务节点对应的目标插件可以只包含一个插件,也可以包含多个不同的插件。
对于目标视频评测任务,可以根据其运行逻辑拆分为至少一个任务节点,评测人员可以根据业务需求设置目标视频评测任务的节点配置信息。在一个实施例中,目标视频评测任务的节点配置信息可以携带于任务触发指令中,服务器接收到任务触发指令后,可以从任务触发指令中获取目标视频评测任务的节点配置信息。
S206,按照各任务节点之间的顺序,依次调用各任务节点对应的目标插件,使各目标插件按照对应的参数信息执行相应的任务,并在各目标插件执行完毕后,获得对应的评测结果。
举例来说,若目标视频评测任务按照从先往后的执行顺序,依次包括任务节点1、任务节点2和任务节点3,任务节点1、任务节点2和任务节点3分别对应的目标插件为目标插件1、目标插件2和目标插件3,则服务器先调用目标插件1执行任务节点1的任务,待目标插件1执行结束后,调用目标插件2执行任务节点2的任务,待目标插件2执行结束后,调用目标插件3执行任务节点3的任务,待目标插件3执行结束后,整个目标视频评测任务执行结束,获得对应的评测结果。
上述视频评测方法中,通过接收任务触发指令,获取任务触发指令对应的目标视频评测任务的节点配置信息,节点配置信息包括目标视频评测任务的各任务节点之间的顺序,以及各任务节点对应的目标插件的参数信息,按照各任务节点之间的顺序,依次调用各任务节点对应的目标插件,使各目标插件按照对应的参数信息执行相应的任务,并在各目标插件执行完毕后,获得对应的评测结果。通过灵活的插件化方式,使用者只需要关注目标视频评测任务的各任务节点的配置,评测涉及的各项具体功能交由插件实现,根据不同的评测需求灵活地组装插件以集成评测功能,可广泛应用于多种业务场景。此外,通过灵活的插件化方式可以提高架构的可拓展性,有助于解决多方业务协同共建的效率问题,当业务场景需要定制化时,可自行实现插件接入,进一步拓展评测能力。
在一个实施例中,目标视频评测任务的任务节点包括:视频收集任务节点和视频评测任务节点,其中,视频收集任务节点对应的任务包括对目标视频进行收集,视频评测任务节点对应的任务包括对目标视频进行评测。任务节点对应的目标插件包括:第一目标插件和第二目标插件,其中,第一目标插件用于执行视频收集任务节点对应的任务,第二目标插件用于执行视频评测任务节点对应的任务。如图3所示,步骤S206具体可以包括以下步骤S2061至步骤S2062。
S2061,调用第一目标插件,使第一目标插件按照对应的参数信息执行视频收集任务,在第一目标插件执行完毕后,获得目标视频评测任务对应的目标视频。
S2062,调用第二目标插件,使第二目标插件按照对应的参数信息执行视频评测任务,在第二目标插件执行完毕后,获得目标视频对应的评测结果。
上述实施例中,通过调用第一目标插件和第二目标插件依次执行视频收集任务节点和视频评测任务节点对应的任务,由各插件分别实现对待评测视频进行收集和评测的具体功能,其中第一目标插件和第二目标插件均可以由不同插件组成,以实现不同业务的评测需求,不管是业务评测人员或是算法人员,可根据评测需求组装相应的插件,从而可以提高视频评测的灵活性,方便拓展业务场景和使用人群。
在一个实施例中,第一目标插件包括视频获取插件;视频获取插件的参数信息包括待评测视频的来源信息和目标数量。步骤S2061具体可以包括以下步骤:调用视频获取插件,使视频获取插件根据来源信息获取目标数量的待评测视频,根据目标数量的待评测视频,获得目标视频评测任务对应的目标视频。
其中,视频获取插件用于获取待评测视频,来源信息可以是包含待评测视频的视频库信息,也可以是待评测视频的地址信息(如统一资源定位符URL),目标数量表示需要获取的待评测视频的数量。视频获取插件根据配置的来源信息获取到目标数量的待评测视频之后,视频获取插件执行结束,服务器将目标数量的待评测视频确定为目标视频。
上述实施例中,通过调用视频获取插件执行获取待评测视频的任务,当根据不同的业务需求,需要获取不同的待评测视频时,只需调整视频获取插件的参数配置即可,而无需修改原有服务器逻辑代码,从而可以提升多业务场景下的视频评测效率。
在一个实施例中,第一目标插件还包括视频处理插件;视频处理插件的参数信息包括筛选参数。在获取到目标数量的待评测视频之后,还可以包括以下步骤:调用视频处理插件,使视频处理插件根据筛选参数对待评测视频进行筛选,根据筛选后的待评测视频,获得目标视频评测任务对应的目标视频。
其中,视频处理插件用于对通过视频获取插件获得的待评测视频进行筛选处理,筛选参数可以是时长、分辨率等参数。举例来说,可以通过视频处理插件去除待评测视频中时长大于预设时长,和/或分辨率小于预设分辨率的视频,待视频处理插件执行结束,服务器将筛选后的待评测视频确定为目标视频。
上述实施例中,通过调用视频处理插件执行筛选待评测视频的任务,可以将待评测视频中不适合进行评测的视频(如时长过长、分辨率过低、发生异常损坏等)进行过滤,有助于提高视频评测的效率和准确性。
在一个实施例中,第二目标插件包括主观评测插件;主观评测插件的参数信息包括评测端信息和评测需求信息;步骤S2062具体可以包括以下步骤:调用主观评测插件,使主观评测插件根据评测端信息发送携带评测需求信息的评测请求,根据响应于评测请求返回的针对目标视频的主观评测结果,获得目标视频对应的评测结果。
其中,主观评测插件用于获取针对目标视频的主观评测结果,主观评测需要人为介入评测,参与主观评测的人员可以通过平均主观意见分(MOS,Mean Opinion Score)对目标视频的质量进行评价。主观评测插件可以根据具体的业务需求进行配置,比如可以细分为端到端主观评测插件、美颜主观评测插件等,用以对具体的视频处理效果进行评测。评测端信息可以包括PC端、web端和移动端,评测需求信息可以包括评测人数、评测模式(如打分模式,对比模式等)、评测项(如清晰度、对比度等)。
举例来说,主观评测插件可以根据配置的评测端信息生成相应的评测端的评测链接,评测链接中包含至少一个待评测视频,参与主观评测的人员通过进入评测链接,根据配置的评测模式和评测项进行视频评测,当参与主观评测的人员数量达到配置的评测人数时,主观评测插件执行结束,服务器将参与主观评测的人员返回的主观评测结果确定为目标视频对应的评测结果。
上述实施例中,通过调用主观评测插件执行视频评测任务,当根据不同的业务需求,需要从不同角度对视频进行评测时,只需调整主观评测插件的参数配置即可,而无需修改原有服务器逻辑代码,从而可以提升多业务场景下的视频评测效率。
在一个实施例中,第二目标插件包括客观评测插件;客观评测插件的参数信息包括评测算法;步骤S2062具体可以包括以下步骤:调用客观评测插件,使客观评测插件基于评测算法对目标视频进行评测,根据客观评测结果,获得目标视频对应的评测结果。
其中,客观评测插件用于获取针对目标视频的客观评测结果,客观评测无需人为接入,而是通过模型算法进行评测。评测算法可以是有参考评测算法,也可以是无参考评测算法,还可以同时包括有参考评测算法和无参考评测算法。其中,有参考评测算法可以包括PSNR(峰值信噪比)、SSIM(结构相似性)和VMAF(视频质量多方法评价融合)算法中的一种或几种。客观评测插件基于配置的评测算法对目标视频进行评测,服务器将通过评测算法返回的客观评测结果确定为目标视频对应的评测结果。
上述实施例中,通过调用客观评测插件执行视频评测任务,当根据不同的业务需求,需要采用不同指标对视频进行评测时,只需调整客观评测插件的参数配置即可,而无需修改原有服务器逻辑代码,从而可以提升多业务场景下的视频评测效率。
需要理解的是,视频评测任务还可以由主观评测插件和客观评测插件共同执行,服务器在获得主观评测结果和客观评测结果后,可以对主观评测结果和客观评测结果进行对比分析,若两者差异较大,可根据差异情况对主观评测插件的参数进行调整,或对客观评测插件的算法进行优化,以提高评测结果的准确性。
在一个实施例中,第二目标插件还包括调试评测插件;调试评测插件的参数信息包括调试评测方式;步骤S2062具体还可以包括以下步骤:调用调试评测插件,使调试评测插件根据调试评测方式对目标视频进行评测,根据调试评测结果,获得目标视频对应的评测结果。
其中,调试评测插件用于获取针对目标视频的调试评测结果,这里的目标视频可以是经过优化算法处理后的视频,调试评测方式可以是目标视频的查看方式,例如通过PC端、web端或者移动端查看目标视频的详细视频信息以及视频优化效果。调试评测插件根据配置的调试评测方式对目标视频进行评测,服务器将返回的调试评测结果确定为目标视频对应的评测结果。
上述实施例中,通过调用调试评测插件执行评测经过优化算法处理后的视频的任务,当算法人员优化视频后要进行不同设备端的视频查看调试时,只需调整调试评测插件的参数配置即可,而无需修改原有服务器逻辑代码,从而可以提升多业务场景下的视频评测效率。
在一个实施例中,目标视频评测任务的任务节点还包括:评测结果归档任务节点和评测结果处理任务节点,其中,评测结果归档任务节点对应的任务包括对目标视频的评测结果进行归档,评测结果处理任务节点对应的任务包括对目标视频的评测结果进行处理。任务节点对应的目标插件还包括第三目标插件和第四目标插件,其中,第三目标插件用于执行评测结果归档任务节点对应的任务,第四目标插件用于执行评测结果处理任务节点对应的任务。如图4所示,步骤S206还可以包括以下步骤S2063至步骤S2064。
S2063,调用第三目标插件,使第三目标插件按照对应的参数信息执行评测结果归档任务,在第三目标插件执行完毕后,将目标视频对应的评测结果归档到指定存储位置。
其中,第三目标插件可以包括归档插件,用于将目标视频对应的评测结果归档到指定存储位置。在一个实施例中,归档插件的参数信息包括存储位置信息,归档插件基于配置的存储位置信息将目标视频对应的评测结果保存到相应的存储位置。
S2064,调用第四目标插件,使第四目标插件按照对应的参数信息执行评测结果处理任务,在第四目标插件执行完毕后,获得目标视频对应的评测结果的处理结果。
其中,第四目标插件可以包括数据分析插件和结果展示插件,其中,数据分析插件用于对目标视频对应的评测结果进行分析,结果展示插件用于对分析结果进行展示。在一个实施例中,数据分析插件的参数信息可以包括待分析指标和分析算法,结果展示插件的参数信息可以包括展示图表样式,数据分析插件基于配置的分析算法对评测结果中的待分析指标进行分析,获得分析结果,结果展示插件基于配置的展示图表样式将分析结果进行展示。
上述实施例中,在获得目标视频的评测结果后,通过调用第三目标插件和第四目标插件依次执行评测结果归档任务节点和评测结果处理任务节点对应的任务,由各插件分别实现对评测结果进行归档和处理的具体功能,其中第三目标插件和第四目标插件均可以由不同插件组成,以实现不同业务的评测需求,不管是业务评测人员或是算法人员,可根据评测需求组装相应的插件,从而可以提高视频评测的灵活性,方便拓展业务场景和使用人群。
在一个实施例中,如图5所示,提供一种用于视频评测的整体平台架构示意图。该整体平台采用分层结构,每一层提供特定的服务。其中,评测端层用于提供主观评测服务,具体包括PC端、web端和移动端,用户可以通过评测端对目标视频进行评测。网关(Gateway)层用于提供身份认证、权限管控、API管理、配置中心服务。后台采用微服务方式实现流水线引擎,通过事件驱动方式流转和执行流水线插件,主要包括处理服务、调度服务、通知服务等,实现流程引擎无状态化,通过微服务方式也可进一步拓展服务能力以满足不同的业务需求。存储层用于提供存储服务。
插件的实现方式可以如下,实现插件功能并封装,定义插件基本信息及执行入口、输入、输出相关参数,基本信息包括插件名称、分类、功能描述等,执行入口、输入输出参数可通过json形式文件按平台约定配置规范来提供,插件输出可通过写文件通知平台。平台可以通过远程过程调用(RPC)方式实现插件功能,也可以通过不同代码语言,如Java、Python、Golang、NodeJS,按平台约定的协议规范自行实现插件功能,只需要提供可执行文件及输入输出参数说明,为插件的实现提供多种灵活方法。插件的执行过程是无状态和线程安全的,不会影响到其它线程的执行,所有所需的信息可以从任务环境变量中读取,插件执行结束后,通知平台执行结果(如是否成功、状态码、日志或其它帮助信息)。
插件的接入及通信方式可以如下,平台实现插件配置接口,插件通过接口向平台提供插件的基本信息,并向平台注册插件(如插件名、执行入口、其它特征信息),平台通过插件执行入口调用插件,执行入口可以是远程过程调用(RPC)服务名或者超文本传输协议(HTTP)地址,插件从任务配置信息对应的环境变量中读取所需信息,执行相应的功能。插件与其它服务进行数据交互时,通过RPC或者HTTP通信方式进行数据交互。
平台执行插件的流程可以如下,平台从任务的节点配置信息中读取插件名,并根据插件名对应的插件执行入口调用插件,使得插件根据参数配置信息从环境变量中获取所需信息并执行相应的功能,待插件执行完成,调用平台回调接口将执行结果与需要写入环境变量的信息返回给平台,平台根据回调结果继续执行下一插件或者停止执行。其中,任务的节点配置、任务执行时的流程控制、环境变量池以及存储插件执行结果的仓库维护,都可以由web端负责。对平台而言,插件的更新、测试、异常都不会影响现有代码,只需要引入插件包即可,可在不修改平台服务逻辑的前提下增加新的功能,提高应用灵活性和可扩展性。
本申请还提供一种应用场景,该应用场景应用上述的视频评测方法。具体地,如图6所示,该视频评测方法在该应用场景的应用如下:
评测人员要进行业务A和业务B的视频清晰度对比评测任务,首先创建和配置任务流水线,该任务流水线依次包括视频收集、视频评测、评测结果归档和评测结果处理四个任务节点,视频收集任务节点配置有视频获取插件和视频处理插件,视频评测任务节点配置有主观评测插件和客观评测插件,评测结果归档任务节点配置有评测结果归档插件,评测结果处理任务节点配置有数据分析插件和结果展示插件;任务流水线配置好后,手动触发启动该任务流水线,通过视频收集插件获取业务A和业务B的待评测视频,通过视频处理插件对待评测视频进行筛选获得目标视频,通过主观评测插件获得目标视频的清晰度主观分值、用户反馈信息以及用户上报信息,通过客观评测插件获得目标视频的清晰度客观分值,通过评测结果归档插件将各目标视频的清晰度主观分值、清晰度客观分值、用户反馈信息以及用户上报信息归档到指定存储位置,通过数据分析插件对各目标视频的清晰度进行对比分析,通过结果展示插件将各目标视频的清晰度对比分析结果进行展示。
本申请还另外提供一种应用场景,该应用场景应用上述的视频评测方法。
具体地,如图7所示,该视频评测方法在该应用场景的应用如下:
算法人员优化视频后要进行视频调试效果评测任务,首先创建和配置任务流水线,该任务流水线依次包括视频收集、视频评测、评测结果归档和评测结果处理四个任务节点,视频收集任务节点配置有视频获取插件,视频评测任务节点配置有客观评测插件和调试评测插件,评测结果归档任务节点配置有评测结果归档插件,评测结果处理任务节点配置有数据分析插件;任务流水线配置好后,当监测到视频推送或者视频处理完成指令时自动触发启动该任务流水线,通过视频收集插件获取经过优化后的目标视频,通过客观评测插件获得目标视频的客观评测结果,通过调试评测插件查看目标视频的详细视频信息以及视频优化效果以获得调测评测结果,通过评测结果归档插件将各目标视频的客观评测结果和调试评测结果归档到指定存储位置,通过数据分析插件对各目标视频的评测结果进行分析。
上述应用场景,不管是业务评测人员或是算法人员,可自行根据评测需求组装流水线插件,多样化的插件功能及灵活配置能力为业务的评测应用场景带来更多可能性,有助于解决多方业务协同共建的效率问题,当业务场景需要定制化时,可自行实现插件接入,进一步拓展评测能力。
应该理解的是,虽然图2-4的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-4中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图8所示,提供了一种视频评测装置800,该装置可以采用软件模块或硬件模块,或者是二者的结合成为计算机设备的一部分,该装置具体包括:接收模块810、获取模块820和调用模块830,其中:
接收模块810,用于接收任务触发指令。
获取模块820,用于获取任务触发指令对应的目标视频评测任务的节点配置信息,节点配置信息包括:目标视频评测任务的各任务节点之间的顺序,以及各任务节点对应的目标插件的参数信息。
调用模块830,用于按照各任务节点之间的顺序,依次调用各任务节点对应的目标插件,使各目标插件按照对应的参数信息执行相应的任务,并在各目标插件执行完毕后,获得对应的评测结果。
在一个实施例中,任务节点包括:视频收集任务节点和视频评测任务节点;目标插件包括与视频收集任务节点对应的第一目标插件和与视频评测任务节点对应的第二目标插件;调用模块830包括第一调用单元和第二调用单元,其中:
第一调用单元,用于调用第一目标插件,使第一目标插件按照对应的参数信息执行视频收集任务,在第一目标插件执行完毕后,获得目标视频评测任务对应的目标视频。
第二调用单元,用于调用第二目标插件,使第二目标插件按照对应的参数信息执行视频评测任务,在第二目标插件执行完毕后,获得目标视频对应的评测结果。
在一个实施例中,第一目标插件包括视频获取插件;视频获取插件的参数信息包括待评测视频的来源信息和目标数量;第一调用单元,具体用于调用视频获取插件,使视频获取插件根据来源信息获取目标数量的待评测视频,根据目标数量的待评测视频,获得目标视频评测任务对应的目标视频。
在一个实施例中,第一目标插件还包括视频处理插件;视频处理插件的参数信息包括筛选参数;第一调用单元,具体还用于在获取到目标数量的待评测视频之后,调用视频处理插件,使视频处理插件根据筛选参数对待评测视频进行筛选,根据筛选后的待评测视频,获得目标视频评测任务对应的目标视频。
在一个实施例中,第二目标插件包括主观评测插件;主观评测插件的参数信息包括评测端信息和评测需求信息;第二调用单元,具体用于调用主观评测插件,使主观评测插件根据评测端信息发送携带评测需求信息的评测请求,根据响应于评测请求返回的针对目标视频的主观评测结果,获得目标视频对应的评测结果。
在一个实施例中,第二目标插件包括客观评测插件;客观评测插件的参数信息包括评测算法;第二调用单元,具体用于调用客观评测插件,使客观评测插件基于评测算法对目标视频进行评测,根据客观评测结果,获得目标视频对应的评测结果。
在一个实施例中,第二目标插件包括调试评测插件;调试评测插件的参数信息包括调试评测方式;第二调用单元,具体用于调用调试评测插件,使调试评测插件根据调试评测方式对目标视频进行评测,根据调试评测结果,获得目标视频对应的评测结果。
在一个实施例中,任务节点还包括:评测结果归档任务节点和评测结果处理任务节点;目标插件还包括与评测结果归档任务节点对应的第三目标插件和与评测结果处理任务节点对应的第四目标插件;调用模块830还包括第三调用单元和第四调用单元,其中:
第三调用单元,用于在获得对应的评测结果之后,调用第三目标插件,使第三目标插件按照对应的参数信息执行评测结果归档任务,在第三目标插件执行完毕后,将评测结果归档到指定存储位置。
第四调用单元,用于调用第四目标插件,使第四目标插件按照对应的参数信息执行评测结果处理任务,在第四目标插件执行完毕后,获得评测结果相应的处理结果。
在一个实施例中,接收模块810还用于当接收到针对目标视频评测任务的手动触发指令时,判定接收到任务触发指令。
在一个实施例中,接收模块810还用于当监测到针对目标视频评测任务的自动触发事件时,判定接收到任务触发指令。
关于视频评测装置的具体限定可以参见上文中对于视频评测方法的限定,在此不再赘述。上述视频评测装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图9所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种视频评测方法。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是终端,其内部结构图可以如图10所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信,无线方式可通过WIFI、运营商网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种视频评测方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图9或图10中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,还提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述各方法实施例中的步骤。
在一个实施例中,提供了一种计算机可读存储介质,存储有计算机程序,该计算机程序被处理器执行时实现上述各方法实施例中的步骤。
需要理解的是,上述实施例中的术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (18)

1.一种视频评测方法,其特征在于,所述方法包括:
接收任务触发指令;
获取所述任务触发指令对应的目标视频评测任务的节点配置信息,所述节点配置信息包括:所述目标视频评测任务的各任务节点之间的顺序,以及各所述任务节点对应的目标插件的参数信息;各所述任务节点之间的顺序表示各任务节点的任务被执行的先后顺序;各所述任务节点对应的目标插件用于执行任务节点的任务;所述参数信息表示目标插件在执行过程中所需的信息;各所述任务节点对应的目标插件的数量为至少一个;
按照各所述任务节点之间的顺序,依次调用各所述任务节点对应的目标插件,使各所述目标插件按照对应的参数信息执行相应的任务,并在各所述目标插件执行完毕后,获得对应的评测结果。
2.根据权利要求1所述的方法,其特征在于,所述任务节点包括:视频收集任务节点和视频评测任务节点;所述目标插件包括与所述视频收集任务节点对应的第一目标插件和与所述视频评测任务节点对应的第二目标插件;
按照各所述任务节点之间的顺序,依次调用各所述任务节点对应的目标插件,使各所述目标插件按照对应的参数信息执行相应的任务,并在各所述目标插件执行完毕后,获得对应的评测结果,包括:
调用所述第一目标插件,使所述第一目标插件按照对应的参数信息执行视频收集任务,在所述第一目标插件执行完毕后,获得所述目标视频评测任务对应的目标视频;
调用所述第二目标插件,使所述第二目标插件按照对应的参数信息执行视频评测任务,在所述第二目标插件执行完毕后,获得所述目标视频对应的评测结果。
3.根据权利要求2所述的方法,其特征在于,所述第一目标插件包括视频获取插件;所述视频获取插件的参数信息包括待评测视频的来源信息和目标数量;
调用所述第一目标插件,使所述第一目标插件按照对应的参数信息执行所述视频收集任务,在所述第一目标插件执行完毕后,获得所述目标视频评测任务对应的目标视频,包括:
调用所述视频获取插件,使所述视频获取插件根据所述来源信息获取所述目标数量的待评测视频,根据所述目标数量的待评测视频,获得所述目标视频评测任务对应的目标视频。
4.根据权利要求3所述的方法,其特征在于,所述第一目标插件还包括视频处理插件;所述视频处理插件的参数信息包括筛选参数;
在获取到所述目标数量的待评测视频之后,还包括:
调用所述视频处理插件,使所述视频处理插件根据所述筛选参数对所述待评测视频进行筛选,根据筛选后的待评测视频,获得所述目标视频评测任务对应的目标视频。
5.根据权利要求2所述的方法,其特征在于,包括下述三项中的至少一项:
第一项:所述第二目标插件包括主观评测插件;所述主观评测插件的参数信息包括评测端信息和评测需求信息;
调用所述第二目标插件,使所述第二目标插件按照对应的参数信息执行所述视频评测任务,在所述第二目标插件执行完毕后,获得所述目标视频对应的评测结果,包括:
调用所述主观评测插件,使所述主观评测插件根据所述评测端信息发送携带所述评测需求信息的评测请求,根据响应于所述评测请求返回的针对所述目标视频的主观评测结果,获得所述目标视频对应的评测结果;
第二项:所述第二目标插件包括客观评测插件;所述客观评测插件的参数信息包括评测算法;
调用所述第二目标插件,使所述第二目标插件按照对应的参数信息执行所述视频评测任务,在所述第二目标插件执行完毕后,获得所述目标视频对应的评测结果,包括:
调用所述客观评测插件,使所述客观评测插件基于所述评测算法对所述目标视频进行评测,根据客观评测结果,获得所述目标视频对应的评测结果;
第三项:所述第二目标插件包括调试评测插件;所述调试评测插件的参数信息包括调试评测方式;
调用所述第二目标插件,使所述第二目标插件按照对应的参数信息执行所述视频评测任务,在所述第二目标插件执行完毕后,获得所述目标视频对应的评测结果,包括:
调用所述调试评测插件,使所述调试评测插件根据所述调试评测方式对所述目标视频进行评测,根据调试评测结果,获得所述目标视频对应的评测结果。
6.根据权利要求1至5任意一项所述的方法,其特征在于,所述任务节点还包括:评测结果归档任务节点和评测结果处理任务节点;所述目标插件还包括与所述评测结果归档任务节点对应的第三目标插件和与所述评测结果处理任务节点对应的第四目标插件;
在获得对应的评测结果之后,还包括:
调用所述第三目标插件,使所述第三目标插件按照对应的参数信息执行评测结果归档任务,在所述第三目标插件执行完毕后,将所述评测结果归档到指定存储位置;
调用所述第四目标插件,使所述第四目标插件按照对应的参数信息执行评测结果处理任务,在所述第四目标插件执行完毕后,获得所述评测结果相应的处理结果。
7.根据权利要求6所述的方法,其特征在于,包括下述两项中的任意一项:
当接收到针对目标视频评测任务的手动触发指令时,判定接收到任务触发指令;
当监测到针对目标视频评测任务的自动触发事件时,判定接收到任务触发指令。
8.一种视频评测装置,其特征在于,所述装置包括:
接收模块,用于接收任务触发指令;
获取模块,用于获取所述任务触发指令对应的目标视频评测任务的节点配置信息,所述节点配置信息包括:所述目标视频评测任务的各任务节点之间的顺序,以及各所述任务节点对应的目标插件的参数信息;各所述任务节点之间的顺序表示各任务节点的任务被执行的先后顺序;各所述任务节点对应的目标插件用于执行任务节点的任务;所述参数信息表示目标插件在执行过程中所需的信息;各所述任务节点对应的目标插件的数量为至少一个;
调用模块,用于按照各所述任务节点之间的顺序,依次调用各所述任务节点对应的目标插件,使各所述目标插件按照对应的参数信息执行相应的任务,并在各所述目标插件执行完毕后,获得对应的评测结果。
9.根据权利要求8所述的装置,其特征在于,所述任务节点包括:视频收集任务节点和视频评测任务节点;所述目标插件包括与所述视频收集任务节点对应的第一目标插件和与所述视频评测任务节点对应的第二目标插件;
所述调用模块包括第一调用单元和第二调用单元,其中:
所述第一调用单元,用于调用所述第一目标插件,使所述第一目标插件按照对应的参数信息执行视频收集任务,在所述第一目标插件执行完毕后,获得所述目标视频评测任务对应的目标视频;
所述第二调用单元,用于调用所述第二目标插件,使所述第二目标插件按照对应的参数信息执行视频评测任务,在所述第二目标插件执行完毕后,获得所述目标视频对应的评测结果。
10.根据权利要求9所述的装置,其特征在于,所述第一目标插件包括视频获取插件;所述视频获取插件的参数信息包括待评测视频的来源信息和目标数量;所述第一调用单元,还用于调用所述视频获取插件,使所述视频获取插件根据所述来源信息获取所述目标数量的待评测视频,根据所述目标数量的待评测视频,获得所述目标视频评测任务对应的目标视频。
11.根据权利要求10所述的装置,其特征在于,所述第一目标插件还包括视频处理插件;所述视频处理插件的参数信息包括筛选参数;所述第一调用单元,还用于在获取到目标数量的待评测视频之后,调用所述视频处理插件,使所述视频处理插件根据所述筛选参数对所述待评测视频进行筛选,根据筛选后的待评测视频,获得所述目标视频评测任务对应的目标视频。
12.根据权利要求9所述的装置,其特征在于,所述第二目标插件包括主观评测插件;所述主观评测插件的参数信息包括评测端信息和评测需求信息;所述第二调用单元,还用于调用所述主观评测插件,使所述主观评测插件根据所述评测端信息发送携带所述评测需求信息的评测请求,根据响应于所述评测请求返回的针对所述目标视频的主观评测结果,获得所述目标视频对应的评测结果。
13.根据权利要求9所述的装置,其特征在于,所述第二目标插件包括客观评测插件;所述客观评测插件的参数信息包括评测算法;所述第二调用单元,还用于调用所述客观评测插件,使所述客观评测插件基于所述评测算法对所述目标视频进行评测,根据客观评测结果,获得所述目标视频对应的评测结果。
14.根据权利要求9所述的装置,其特征在于,所述第二目标插件包括调试评测插件;所述调试评测插件的参数信息包括调试评测方式;第二调用单元,还用于调用所述调试评测插件,使所述调试评测插件根据所述调试评测方式对所述目标视频进行评测,根据调试评测结果,获得所述目标视频对应的评测结果。
15.根据权利要求8至14任意一项所述的装置,其特征在于,所述任务节点还包括:评测结果归档任务节点和评测结果处理任务节点;目标插件还包括与评测结果归档任务节点对应的第三目标插件和与评测结果处理任务节点对应的第四目标插件;
所述调用模块还包括第三调用单元和第四调用单元,其中:
所述第三调用单元,用于在获得对应的评测结果之后,调用所述第三目标插件,使所述第三目标插件按照对应的参数信息执行评测结果归档任务,在所述第三目标插件执行完毕后,将所述评测结果归档到指定存储位置;
所述第四调用单元,用于调用所述第四目标插件,使所述第四目标插件按照对应的参数信息执行评测结果处理任务,在所述第四目标插件执行完毕后,获得所述评测结果相应的处理结果。
16.根据权利要求15所述的装置,其特征在于,所述接收模块还用于当接收到针对目标视频评测任务的手动触发指令时,判定接收到任务触发指令,当监测到针对目标视频评测任务的自动触发事件时,判定接收到任务触发指令。
17.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述的方法的步骤。
18.一种计算机可读存储介质,存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
CN202010323889.2A 2020-04-22 2020-04-22 视频评测方法、装置、计算机设备和存储介质 Active CN113542796B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010323889.2A CN113542796B (zh) 2020-04-22 2020-04-22 视频评测方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010323889.2A CN113542796B (zh) 2020-04-22 2020-04-22 视频评测方法、装置、计算机设备和存储介质

Publications (2)

Publication Number Publication Date
CN113542796A CN113542796A (zh) 2021-10-22
CN113542796B true CN113542796B (zh) 2023-08-08

Family

ID=78094157

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010323889.2A Active CN113542796B (zh) 2020-04-22 2020-04-22 视频评测方法、装置、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN113542796B (zh)

Citations (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103679800A (zh) * 2013-11-21 2014-03-26 北京航空航天大学 一种视频图像虚拟场景生成系统及其框架构造方法
CN104349220A (zh) * 2014-11-25 2015-02-11 复旦大学 一种用于智能电视终端的服务质量监测系统
CN105487977A (zh) * 2015-11-30 2016-04-13 北京锐安科技有限公司 一种面向敏捷的自动化测试管理系统和方法
CN107045477A (zh) * 2016-12-30 2017-08-15 上海富聪金融信息服务有限公司 一种可进行多维度检测的质量评估平台
CN107249127A (zh) * 2017-05-18 2017-10-13 深圳众厉电力科技有限公司 一种评估准确的网络视频质量评估系统
CN107959849A (zh) * 2017-12-12 2018-04-24 广州华多网络科技有限公司 直播视频质量评测方法、存储介质以及终端
CN108255467A (zh) * 2016-12-27 2018-07-06 北京京东尚科信息技术有限公司 按照工作流顺序执行服务的方法、装置及系统
CN108536601A (zh) * 2018-04-13 2018-09-14 腾讯科技(深圳)有限公司 一种评测方法、装置、服务器及存储介质
CN108776604A (zh) * 2018-05-23 2018-11-09 网易(杭州)网络有限公司 目标任务的执行方法及系统
CN109600629A (zh) * 2018-12-28 2019-04-09 北京区块云科技有限公司 一种视频渲染方法、系统及相关装置
CN109635022A (zh) * 2018-10-31 2019-04-16 成都四方伟业软件股份有限公司 一种可视化的ElasticSearch数据采集方法及装置
CN109698954A (zh) * 2018-12-06 2019-04-30 北京东方广视科技股份有限公司 一种实现机顶盒自动检测的处理方法及装置
CN109982068A (zh) * 2017-12-28 2019-07-05 中国移动通信集团福建有限公司 合成视频质量评估方法、装置、设备及介质
CN110213573A (zh) * 2019-06-14 2019-09-06 北京字节跳动网络技术有限公司 一种视频质量评估方法、装置和电子设备
CN110297762A (zh) * 2019-05-24 2019-10-01 平安银行股份有限公司 插件式自动测试方法、装置、计算机设备及存储介质
CN110458789A (zh) * 2018-05-02 2019-11-15 杭州海康威视数字技术股份有限公司 一种图像清晰度评测方法、装置及电子设备
CN110472516A (zh) * 2019-07-23 2019-11-19 腾讯科技(深圳)有限公司 一种人物图像识别系统的构建方法、装置、设备及系统
CN110618842A (zh) * 2019-09-20 2019-12-27 政采云有限公司 一种业务处理方法、装置及电子设备和存储介质
CN110689232A (zh) * 2019-09-03 2020-01-14 深圳壹账通智能科技有限公司 工作流配置的优化处理方法、装置和计算机设备
CN110708202A (zh) * 2019-10-15 2020-01-17 深圳前海微众银行股份有限公司 插件节点的配置方法、装置、设备及存储介质
CN110704122A (zh) * 2018-07-10 2020-01-17 中国移动通信集团浙江有限公司 插件加载方法及装置
CN110704296A (zh) * 2018-07-10 2020-01-17 阿里巴巴集团控股有限公司 一种调用方法及装置
CN110879701A (zh) * 2019-11-06 2020-03-13 深圳市网心科技有限公司 工作流可视化配置方法、服务器、系统及介质

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8139249B2 (en) * 2007-06-29 2012-03-20 Xerox Corporation Event driven plugin architecture for importing scanned image data into a production workflow
US10672289B2 (en) * 2015-09-24 2020-06-02 Circadence Corporation System for dynamically provisioning cyber training environments
US20170364844A1 (en) * 2016-06-16 2017-12-21 Vmware, Inc. Automated-application-release-management subsystem that supports insertion of advice-based crosscutting functionality into pipelines

Patent Citations (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103679800A (zh) * 2013-11-21 2014-03-26 北京航空航天大学 一种视频图像虚拟场景生成系统及其框架构造方法
CN104349220A (zh) * 2014-11-25 2015-02-11 复旦大学 一种用于智能电视终端的服务质量监测系统
CN105487977A (zh) * 2015-11-30 2016-04-13 北京锐安科技有限公司 一种面向敏捷的自动化测试管理系统和方法
CN108255467A (zh) * 2016-12-27 2018-07-06 北京京东尚科信息技术有限公司 按照工作流顺序执行服务的方法、装置及系统
CN107045477A (zh) * 2016-12-30 2017-08-15 上海富聪金融信息服务有限公司 一种可进行多维度检测的质量评估平台
CN107249127A (zh) * 2017-05-18 2017-10-13 深圳众厉电力科技有限公司 一种评估准确的网络视频质量评估系统
CN107959849A (zh) * 2017-12-12 2018-04-24 广州华多网络科技有限公司 直播视频质量评测方法、存储介质以及终端
CN109982068A (zh) * 2017-12-28 2019-07-05 中国移动通信集团福建有限公司 合成视频质量评估方法、装置、设备及介质
CN108536601A (zh) * 2018-04-13 2018-09-14 腾讯科技(深圳)有限公司 一种评测方法、装置、服务器及存储介质
CN110458789A (zh) * 2018-05-02 2019-11-15 杭州海康威视数字技术股份有限公司 一种图像清晰度评测方法、装置及电子设备
CN108776604A (zh) * 2018-05-23 2018-11-09 网易(杭州)网络有限公司 目标任务的执行方法及系统
CN110704122A (zh) * 2018-07-10 2020-01-17 中国移动通信集团浙江有限公司 插件加载方法及装置
CN110704296A (zh) * 2018-07-10 2020-01-17 阿里巴巴集团控股有限公司 一种调用方法及装置
CN109635022A (zh) * 2018-10-31 2019-04-16 成都四方伟业软件股份有限公司 一种可视化的ElasticSearch数据采集方法及装置
CN109698954A (zh) * 2018-12-06 2019-04-30 北京东方广视科技股份有限公司 一种实现机顶盒自动检测的处理方法及装置
CN109600629A (zh) * 2018-12-28 2019-04-09 北京区块云科技有限公司 一种视频渲染方法、系统及相关装置
CN110297762A (zh) * 2019-05-24 2019-10-01 平安银行股份有限公司 插件式自动测试方法、装置、计算机设备及存储介质
CN110213573A (zh) * 2019-06-14 2019-09-06 北京字节跳动网络技术有限公司 一种视频质量评估方法、装置和电子设备
CN110472516A (zh) * 2019-07-23 2019-11-19 腾讯科技(深圳)有限公司 一种人物图像识别系统的构建方法、装置、设备及系统
CN110689232A (zh) * 2019-09-03 2020-01-14 深圳壹账通智能科技有限公司 工作流配置的优化处理方法、装置和计算机设备
CN110618842A (zh) * 2019-09-20 2019-12-27 政采云有限公司 一种业务处理方法、装置及电子设备和存储介质
CN110708202A (zh) * 2019-10-15 2020-01-17 深圳前海微众银行股份有限公司 插件节点的配置方法、装置、设备及存储介质
CN110879701A (zh) * 2019-11-06 2020-03-13 深圳市网心科技有限公司 工作流可视化配置方法、服务器、系统及介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
刘青松 ; 谢晓方 ; 曹建 ; 张龙杰 ; .基于OpenCV的导引头图像处理算法性能评估软件.计算机与现代化.2017,(第03期),全文. *

Also Published As

Publication number Publication date
CN113542796A (zh) 2021-10-22

Similar Documents

Publication Publication Date Title
CN112910945B (zh) 请求链路跟踪方法和业务请求处理方法
CN109062780B (zh) 自动化测试用例的开发方法及终端设备
CN110428127B (zh) 自动化分析方法、用户设备、存储介质及装置
CN111752799A (zh) 一种业务链路跟踪方法、装置、设备及储存介质
US9654580B2 (en) Proxy-based web application monitoring through script instrumentation
CN110956269A (zh) 数据模型的生成方法、装置、设备以及计算机存储介质
CN109325010A (zh) 日志查看方法、装置、计算机设备和存储介质
CN112650688A (zh) 自动化回归测试方法、关联设备以及计算机程序产品
CN107423090B (zh) 一种Flash播放器异常日志管理方法及系统
CN103577273A (zh) 共同操作的多映像系统中的第二故障数据捕获
CN107402878B (zh) 测试方法和装置
CN108334429A (zh) 用于排查前端页面问题的方法、装置及系统
CN108629274B (zh) 用于利用对视频储存库的法医视频分析来创建故事板的系统和方法
CN111897843B (zh) 物联网数据流转策略的配置方法、装置和计算机设备
CN113821254A (zh) 接口数据处理方法、装置、存储介质及设备
Krieter Can I record your screen? Mobile screen recordings as a long-term data source for user studies
CN113542796B (zh) 视频评测方法、装置、计算机设备和存储介质
US10616306B2 (en) System and method for large-scale capture and tracking of web-based application parameters
CN110347597B (zh) 图片服务器的接口测试方法、装置、存储介质与移动终端
CN114040223A (zh) 一种图像处理方法及系统
CN114564286A (zh) 一种规则引擎告警方法及规则引擎告警系统
CN114968696A (zh) 指标监控方法、电子设备及芯片系统
US11494292B2 (en) Log-based automation testing
CN110968817A (zh) 一种页面内容检测方法、装置及系统
CN115314404B (zh) 服务优化方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant