CN102298734A - 基于视频的分析工作流建议方法和系统 - Google Patents
基于视频的分析工作流建议方法和系统 Download PDFInfo
- Publication number
- CN102298734A CN102298734A CN201110175889A CN201110175889A CN102298734A CN 102298734 A CN102298734 A CN 102298734A CN 201110175889 A CN201110175889 A CN 201110175889A CN 201110175889 A CN201110175889 A CN 201110175889A CN 102298734 A CN102298734 A CN 102298734A
- Authority
- CN
- China
- Prior art keywords
- workflow
- video
- business process
- pattern
- work
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0633—Workflow analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
Abstract
可以分析正在营业场所中执行的工作的视频。当分析该视频时,可以鉴别工作内的模式并对其评分。可以将经鉴别的模式与商业的商业过程管理系统的商业过程相关联。在一个实施例中,所执行的任务可以是监视商业过程流、更新商业过程流、以及/或者创建新商业过程流。可以以标准化的商业过程执行语言或其它基于标准的语言来编写商业过程流。
Description
技术领域
本发明涉及商业过程管理的领域,更具体涉及一种基于视频的分析工作流建议工具(workflow proposal tool)。
背景技术
商业过程管理(BPM)的重要方面是表示商业过程的各种工作流的存档(documentation)和改进。存在各种各样的软件应用程序和套件(suits)(例如,BPM系统)来协助组织这些任务。这些BPM系统通过从用户输入的操作参数创建软件模型而起作用。
虽然软件模型的使用提供了益处,但用于创建它们的参数不总是反映工作台面(work floor)上所遇到的实际操作情形。例如,典型地测量执行特定工作流步骤所需要的时间,并将该时间输入至工作流模型中。然而,所测量的时间通常缺乏该时间如何花费在该工作流步骤的各种子步骤上的分解(breakdown)。也就是,通常忽略了由工作者和机器分别花费的时间量。
人们可以尝试手动量化花费在工作流步骤的每个子步骤上的时间。然而,在快节奏的装配线中,这些测量的值将充满误差和不一致性,这随后将误差/不一致性引入软件模型中。
发明内容
本公开的一方面可以包括用于在商业工作过程中使用视频的方法、计算机程序产品、系统和/或装置。在该方面中,可以分析在营业场所(place ofbusiness)中执行的工作的视频。当分析视频时,可以在该工作内鉴别(identify)模式(pattern)。模式可包括随后可被利用(leverage)来用于分析的详细工作流步骤。可以将这些经分析的模式与存储在模式库(或商业过程管理监管(governance)系统)中的现有模式比较。所公开的解决方案可以利用对这些模式进行的模式识别和分析来自动创建工作步骤。一旦完成了视频分析,并且已经别了工作流的模式,就能够利用分析来提供用于分段并创建工作流过程步骤的上下文(context)。这些步骤可以用于基于经分析的视频而创建推荐(recommendation)。
例如,在一个实施例中,经识别的模式可以与现有工作流过程比较以确定偏差和相似性。这些偏差和相似性可以用于对所存档的过程的符合性(compliance)监视、用于更新现有的工作流过程、用以评估工作者绩效,为了培训的目的,等等。可以以标准的商业过程执行语言、或者根据其它标准(例如,XML)来编写商业过程流。
本公开的一个方面可以包括商业过程管理系统,其包括视频处理工具和工作流建议引擎。视频处理工具可以接收工作流视频数据。工作流视频数据可以在一组以时间为顺序的图像内显示在营业场所中执行的工作。该工具可以处理工作流视频数据以确定该工作流视频数据内的商业工作流模式。在一个实施例中,可以分析视频中的模式,并将该模式与一组预先存在的模式进行比较,该预先存在的模式可以映射到过程步骤。因此,可以使用经分析的比较来确定在视频内执行的一组步骤。
在一个实施例中,工作流建议引擎可以通过将商业处理工具确定的商业工作流模式与商业过程管理系统管理的商业工作流相关联而生成工作流建议文档。工作流建议文档可以包括新工作流定义、工作流推荐、危险识别数据、标准符合(compliance)信息、以及其它这样的数据。视频处理工具和工作流建议引擎可以包括存储在有形介质上、可操作来运行在硬件上的计算机程序产品。
附图说明
图1是描绘根据这里公开的创造性布置的实施例的、基于视频的工作流建议工具的数据输入/输出流的图示。
图2是说明根据这里公开的创造性布置的实施例的、使用工作流建议工具的系统的示意图。
图3是描述根据这里公开的创造性布置的实施例的、工作流建议工具的操作概览的方法的流程图。
图4是详细描述根据这里公开的创造性布置的实施例的、由工作流建议工具生成已知工作流过程的工作流建议文档的方法的流程图。
具体实施方式
本公开提供了一种提供基于视频的工作流建议工具的解决方案。工作流建议工具可以分析一项或多项视频数据,以确定表示工作流的性能(performance)的数据。这可以通过确定视频中的模式并将这些模式与已知模式进行比较而完成。可以对已知模式进行索引、映射、相关,或者已知模式还对应于行为、步骤或过程,其也可以在工作流中定义。以此方式,经分析的视频可以用于得到工作流步骤并且/或者确定视频中的活动是否对应于现有工作流步骤。
以不同的方式且根据一个设想的实施例而陈述,可以将工作流视频数据提供给工作流建议工具作为实时或接近实时的视频馈送或者作为存储的记录。随后可以将性能数据与包含在工作流模式库中的同一工作流的在前分析进行比较。可以对性能数据和在它们与工作流模式库的比较时执行各种数据分析操作。可以将确定的输出数据格式化并编译到用户选择的工作流建议文档中。工作流建议文档可以包括新工作流定义、工作流推荐、危险识别数据、标准符合信息和其它这样的数据。
因此,本公开分析视频内容以生成被认作模式的一系列步骤。随后能够进一步分析模式以进行用于改进的推荐,确定与存档的过程的符合性,以及其它这样的活动。本公开将视频内容与商业过程分析工具集成,使得可以执行对视频中捕获的过程的流线型化。
商业过程可以是对产生满足客户需要的服务或产品的相关的、结构化的活动的集合(collection)。商业过程工作流被设计来增加跨可属于不同公司和/或部门的计算系统而执行的商业过程的可见性。为了实现此抽象化,类似于商业过程执行语言(BPEL)的专用商业过程流语言用于构造过程流。在一个设想的实施例中,符合(conform to)商业过程模型的商业过程工作流可以在面向服务的架构环境中实施。
如本领域技术人员将理解的,本发明的方面可实施为系统、方法或计算机程序产品。因此,本发明的方面可以采取全部为硬件的实施例、全部为软件的实施例(包括固件、常驻软件、微代码等)、或将软件和硬件方面(在这里,它们可全部概括地称为“电路”、“模块”或“系统”)组合的实施例的形式。此外,本发明的方面可采取其上包含计算机可读程序代码的一个或多个计算机可读介质中所包含的计算机程序产品的形式。
可使用一个或多个计算机可读介质的任何组合。计算机可读介质可以是计算机可读信号介质或计算机可读存储介质。例如,计算机可读存储介质可以是但不限于电、磁、光、电磁、红外或半导体系统、装置或设备、或者前述项的任何合适的组合。计算机可读存储介质的更具体示例(非穷举的列表)将包括下列项:具有一条或多条线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或闪存)、光纤、便携式光盘只读存储器(CD-ROM)、光存储设备、磁性存储设备、或者前述项的任何合适的组合。在此文档的上下文中,计算机可读存储介质可以是任何有形介质,其可包含或存储用以由或结合指令执行系统、装置或设备使用的程序。
计算机可读信号介质可以包括例如基带中或作为载波的一部分的传播数据信号,其将计算机可读程序代码包含在其中。这样的传播信号可以采取各种形式中的任何一种,所述各种信号包括但不限于电磁的、光的、或它们的任何合适的组合。计算机可读信号介质可以是不是计算机可读存储介质且可以传递、传播或传输用以由或结合指令执行系统、装置或设备使用的程序的任何计算机可读介质。
可以使用任何适当的介质(包括但不限于无线、有线线路、光纤线缆、RF等、或者前述项的任何合适的组合)来传送计算机可读介质上包含的程序代码。可以以一个或多个编程语言(包括诸如Java、Smalltalk、C++等的面向对象的编程语言以及诸如“C”编程语言或类似的编程语言的传统过程式编程语言)的任何组合来编写用于执行本发明的方面的操作的计算机程序代码。程序代码可以完全在用户的计算机上执行,部分地在用户的计算机上执行,作为单机软件包,部分地在用户的计算机上并部分地在远端计算机上、或完全在远端计算机或服务器上执行。在后者情形中,远端计算机可以通过任何类型的网络(包括局域网(LAN)或广域网(WAN))连接至用户的计算机,或者可以连接至外部计算机(例如,使用因特网服务提供商通过因特网)
下面参考根据本发明实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图来描述本发明的方面。将理解,可通过计算机程序指令实施流程图和/或框图的每个块、以及流程图和/或框图中的块的组合。这些计算机程序指令可以被提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器以产生机器,使得经由计算机或其它可编程数据处理装置的处理器而执行的指令创建用于实施流程图和/或框图的一个或多个块中指定的功能/动作的部件。
这些计算机程序指令还可以存储在可以指示计算机、其它可编程数据处理装置或其它设备以特定方式作用的计算机可读介质中,从而存储在计算机可读介质中的指令产生包括实施流程图和/或框图的一个或多个块中指定的功能/动作的指令的制品。
计算机程序指令还可以加载到计算机、其它可编程数据处理装置或其它设备上以使一系列操作步骤在计算机、其它可编程装置或其它设备上执行,以产生计算机实施的过程,从而在计算机或其它可编程装置上执行的指令提供用于实施流程图和/或框图的一个或多个块中指定的功能/动作的过程。
图1是描绘根据这里公开的创造性布置的基于视频的工作流建议工具115的数据输入/输出流的图示100。在图示100中,工作流建议工具115可以将工作流视频数据110综合(synthesize)成各种工作流建议文档140。
工作流视频数据110可以从一个或多个视频捕获设备105获得。视频捕获设备105可以表示各种能够记录视频的电子设备,诸如摄影机。视频捕获设备105的放置和定向可以使得为被检查的工作流过程提供预定视场。工作流视频数据110可以表示针对工作流过程的、来自视频捕获设备105的连续馈送或由视频捕获设备105进行记录的片段。例如,工作流视频数据110可以包括图像的任何有序的时间序列,所述图像可以可选地包括与图像同步的以时间为顺序的音频。
工作流建议工具115可以表示软件应用程序,其被配置为将用于工作流过程的工作流视频数据110处理为一个或多个工作流建议文档140。工作流建议工具115可以基于对视频内容进行分析而定义一系列步骤。这些步骤可以对应于模式,其可被进一步分析来进行推荐、改进或者监视实际过程相对存档的过程的符合性。在充分地使用先进的模式识别的实施例中,可以由工具115自动创建工作流步骤并对其评分。
在一个实施例中,由工具115检测并评分的模式可以与工作流模式库135的模式比较。这些模式(库135的)可以对应于感兴趣的工作流步骤、过程、事变(incident)或事件。例如,模式库135可以包括与下列项对应的模式:正确的过程;紧急情形;低效行为;表示执行任务的专业水平的标记的模式;等等。可以使用视频数据110中所检测的模式与模式库135中的模式之间的匹配水平(例如,由对应的评分确定),以在工作流的上下文中确定视频中所示的行为。因此,可以使用工具115来与视频一起确定正执行什么过程和过程步骤,以及确定正执行步骤的技巧水平(例如,质量度量)。
为了生成工作流建议文档140,工作流建议工具115可以使用工作流建议引擎120、工作流资产(asset)数据130以及工作流模式库135。工作流建议文档140可以包括新工作流定义、工作流推荐、危险识别数据、标准符合信息和其它这样的数据。
返回系统100,可以数字地编码或以模拟的形式编码工作流视频数据110。可以通过工具115(或者通过中间工具)将模拟数据转换为数字编码的格式。工具115(或中间处理单元)可以对工作流视频数据110执行数字信号处理(DSP)操作,以生成中间结果,其中,将中间结果转换为一个或多个工作流建议文档140。
工作流建议引擎120可以对应于被配置为对接收到的工作流视频数据110执行各种数据处理操作的工作流建议工具115的软件组件。依据正在生成的工作流建议文档140,这些数据处理操作可以要求存取工作流资产数据130和/或数据流模式库135。
工作流资产数据130和工作流模式库115两者均可包含在工作流建议工具135可存取的数据存储器125中。此外,数据存储器125可被配置为包括工作流视频数据110的档案存储。
工作流资产数据130可以包含与工作流过程中牵涉的资产、机械和人员有关的信息。工作流资产数据130的示例可以包括但不限于机器序列号、零件编号、零件制造商、服务日志等。
工作流模式库135可以表示工作流数据110的集合,每个视频数据110定义特定工作流过程。因此,工作流建议引擎120可以将作为工作流视频数据110而接收的工作流过程的整体和/或个别步骤与工作流模式库135中包含的步骤进行比较。
应当注意,工作流模式库135中包含的工作流模式不需要表示工作流过程的最优性能或质量标准。虽然工作流建议工具115可以用于过程最优化,但其不限于该方面。
另外,可以将工作流模式库135扩展为包括说明不期望的或不适当的情形的工作流模式。例如,说明危险操作情形(例如,火灾、机械故障等)的模式数据。
工作流建议文档140可以表示由工作流建议工具115生成的各种格式化的数据报告。工作流建议文档140可以包括但不限于新工作流定义、工作流存档、工作流改进推荐、危险识别、个人绩效分析、标准符合等。依据使用,可以以各种计算机可解译的语言编写工作流建议文档140。
例如,可以以商业过程执行语言(BPEL)来编写意在由商业过程管理系统输入和执行的工作流建议文档140,而可以以可扩展标记语言(XML)来表示意在用于查看的报告140。
如这里所使用的,所展示的数据存储器125可以是被配置为存储数字信息的物理或虚拟存储空间。可以在任何类型的硬件中实施数据存储器125,所述硬件包括但不限于磁盘、光盘、半导体存储器、数字编码的塑料存储器、全息照相存储器或任何其它记录介质。数据存储器125可以是独立的存储单元以及由多个物理器件形成的存储单元。另外,可以以各种方式将信息存储在数据存储器125内。例如,信息可以存储在数据库结构内,或者可以存储在文件存储系统的一个或多个文件内,其中,每个文件可以或者可以不为了信息搜索的目的而被索引。此外,数据存储器125可以使用一个或多个加密机制来保护所存储的信息免于未经授权的存取。
图2是说明根据这里公开的创造性布置的实施例的、使用工作流建议工具235的系统200的示意图。在系统200中,用户205可以经由工作流建议仪表板界面215通过网络与工作流建议工具235交互,以创建工作流建议文档280。
工作流建议工具235可以运行在可以存取数据存储器265的工作流建议服务器230上,所述数据存储器265存有(house)工作流资产数据270、工作流模式库275和工作流建议文档280。在可选实施例中,数据存储器265的内容可以包含在可由工作流建议服务器230通过网络285存取的多个数据存储器265内。
工作流建议服务器230可以表示支持工作流建议工具235的操作所需的硬件和/或软件。另外,工作流建议服务器230可以被配置为经由网络285与企业计算系统的其它单元(例如,商业过程管理系统、配置管理系统)交互。
如在图1中讨论的,工作流建议工具235可以表示被设计为使用工作流视频数据225、工作流资产数据270和工作流模式库275生成各种工作流建议文档280的软件应用程序。可以由视频捕获设备220记录工作流视频数据225,并实时地或接近实时地将工作流视频数据225直接馈送至工作流建议工具235进行存储用于以后使用,或者工作流视频数据225可以存储在数据服务器(未示出)上并由工作流建议工具235存取。
工作流建议工具235可以包括工作流建议仪表板界面215和工作流建议引擎240。工作流建议仪表板界面215可以表示允许用户205使用工作流建议工具235的功能的图形用户界面(GUI)。用户205可以使用工作流建议仪表板界面215来输入/修改描述工作流资产数据270和/或工作流模式库275的元数据字段、以及配置影响工作流建议工具235的操作的各种参数。
工作流建议引擎240可以包括分析组件245、报告组件260和警报组件262。分析组件245可以表示工作流建议引擎240的被配置为支持工作流视频数据225的分析功能的单元。分析组件245可以包括视频分析引擎250和数据分析引擎255。
视频分析引擎250可以是软件应用程序,其被配置为检查工作流视频数据225以确定关于正被执行的工作流过程和/或工作流步骤的各种数据。由视频分析引擎250确定的数据的示例可以包括但不限于资产鉴别、执行的步骤和/或子步骤的鉴别、每个步骤/子步骤的持续时间、运动分析等。
根据由视频分析引擎250生成的数据,数据分析引擎255可以计算有关与工作流视频数据225对应的工作流过程的各种度量,如由用户205选择的工作流建议文档280所需要的。由数据分析引擎255执行的分析可以需要检查工作流资产数据270、工作流模式库275和/或历史工作流建议文档280。
例如,对于过程改进文档280,数据分析引擎255可以确定执行每个步骤/子步骤所需的时间差、使用的资产、对组织的投资回报(ROI)的影响、以及用以改进低于标准的地方的推荐。
重要的是注意,与传统商业过程管理(BPM)软件工具不同,工作流建议工具235使用工作流视频数据225和工作流模式库275的形式的数据,其表示正进行的工作流的实际性能。此外,工作流建议工具235可以准确地分析包含在工作流步骤中的子步骤的性能,导致对工作流以及改进的更详细的查看。
报告组件260可以表示工作流建议引擎240的被配置为生成由用户205请求的工作流建议文档280的软件单元。报告组件260可以指引(direct)由分析组件245执行的活动的类型,以获得所选择的工作流建议文档280所需的数据。随后,用户205可以在工作流建议仪表板界面215中查看由报告组件260生成的工作流建议文档280,以及/或者将工作流建议文档280存储在数据存储器265中。
当某些模式或事件发生时,警报组件262可以向用户提供警报或通知。模式可以是由分析组件245从视频得到的模式。警报和/或通知可以是可定制的。在一个实施例中,由警报组件262提供的每个警报/通知可以包括问题的文本描述,可以详述模式细节,并且还可以包括用户可查看的视频片段。这些视频片段可以是触发警报的发送的视频片段。可以将警报组件262定制为经由各种不同设备和通信形式中的任何一种将警报发送至不同用户。例如,电子邮件警报、文本消息警报、声音电话警报、弹出式通知等可以用于响应于模式或事件发生而将警报和/或通知消息传递给指定的用户。
网络285可以包括传递在载波内编码的数据所必须的任何硬件/软件/和固件。数据可以包含在模拟或数字信号内,并且通过数据或声音信道而传递。网络285可以包括在计算设备组件之间以及在集成的设备组件与外设之间交换的通信所必须的本地组件和数据通道。
网络285还可以包括网络设备,诸如路由器、数据线、集线器(hub)以及中间服务器,它们一起形成数据网络(诸如因特网)。网络285还可以包括基于电路的通信组件和移动通信组件,诸如电话交换机、调制解调器、蜂窝式通信塔等。网络285可以包括基于线路的和/或无线的通信通道。
如这里使用的,所展示的数据存储器265可以是被配置为存储数字信息的物理或虚拟存储空间。可以在任何类型的硬件(包括但不限于磁盘、光盘、半导体存储器、数字编码的塑料存储器、全息照相存储器或任何其它记录介质)中物理地实施数据存储器265。数据存储器265可以是独立的存储单元以及由多个物理器件形成的存储单元。另外,可以以各种方式将信息存储在数据存储器265内。例如,信息可以存储在数据库结构内,或者可以存储在文件存储系统的一个或多个文件内,其中,每个文件可以或可以不为了信息搜索的目的而被索引。此外,数据存储器265可以使用一个或多个加密机制来保护所存储的信息免于未经授权的存取。
图3是描述根据这里公开的创造性布置的实施例的、工作流建议工具的操作概览的方法300的流程图。方法300可以在图示100和/或系统200的上下文内执行。
方法300可以在步骤305中开始,其中工作流建议工具可以接收生成用户选择的工作流建议文档的请求。可以在步骤310中由工作流建议工具获得所关联的工作流视频数据。在步骤315中,可以由分析组件分析工作流视频数据。
在步骤320中,可以判定工作流是否是新的(即,先前未经处理的)。当判定该工作流是新的时,可以执行步骤325,其中可以将经分析的工作流视频数据存储在工作流模式库中。
当判定工作流不是新的时,流程可进行至步骤330,其中可以将经分析的工作流视频数据与工作流模式库进行比较。在步骤335中,可以判定在工作流模式库内是否存在与经分析的工作流视频数据的匹配。当未找到匹配时,可以告知用户,如步骤350所示。
当在工作流模式库中找到匹配时,或者当完成了步骤325时,可以执行步骤340,其中工作流建议工具可以执行支持生成用户选择的工作流建议文档的功能。然后在步骤345中,可以在工作流建议仪表板界面中将工作流建议文档展示给用户。
图4是详细描述根据这里公开的创造性布置的实施例的、由工作流建议工具生成已知工作流过程的工作流建议文档的方法的流程图。方法400可以表示方法300的扩展。
方法400可以在步骤405中开始,其中工作流建议工具可以接收工作流视频数据。在步骤410中,可以从所接收的工作流视频数据内鉴别工作流步骤和性能数据。性能数据可以表示有关工作流的性能的具体细节,诸如,正使用的工作流资产和工作流步骤的持续时间。
在步骤415中,可以对工作流模式库查询匹配所接收的工作流视频数据的工作流模式。在步骤420中,可以确定与工作流模式库内的工作流视频数据的匹配。当未找到匹配时,可以执行步骤425,其中可以告知用户缺乏模式匹配。
当找到至少一个匹配时,在步骤430中,可以比较工作流视频数据的性能数据与匹配模式的性能数据。随后在步骤435中,可以生成工作流建议文档所需的工作流度量(如果存在的话)。如果工作流建议文档需要,可以执行步骤440以确定工作流改进推荐。
在步骤445中,需要额外类型的统计。各种类型的统计可以包括但不限于商业步骤的数目、低效(例如,偏差)、所牵涉的人员数目、步骤的持续时间等。可以在一个实施例中配置所使用的统计的类型和对每个所赋予的权重。当不需要另外的计算时,流程可以进行至步骤450,其中可以为工作流建议文档格式化性能数据、工作流度量和/或改进推荐。
当需要额外的计算时,在步骤455中,可以执行这些计算。在步骤460中,可以为工作流建议文档格式化与性能数据、工作流度量和/或改进推荐一起的计算或计算结果。
这里使用的术语仅为了描述特定实施例的目的,而非意在限制本发明。如这里使用的,单数形式“a”、“an”和“the”也意在包括复数形式,除非上下文清楚地另外指明。还将理解,术语“包括”和/或“包含”当在本说明书中使用时表示所陈述的特征、整数、步骤、操作、单元和/或组件的存在,但并非排除一个或多个其它特征、整数、步骤、操作、单元、组件和/或它们的组合的存在或添加。
权利要求书中的所有部件或步骤加功能单元的对应的结构、材料、动作和相当物意在包括结合其它要求权利的单元(如所具体要求权利的)而执行功能的任何结构、材料或动作。已经为了说明和描述的目的而展示了对本发明的描述,但对本发明的描述并非意在穷举的或者限于以所公开的形式的本发明。在不违背本发明的精神和范畴的情况下,许多修改和变型将对本领域的普通技术人来来说是显然的。为了最佳地解释本发明的原理以及实际应用,并且为了使本领域内的其它普通技术人员理解针对具有各种修改的各种实施例(如适合于设想的特定使用)的本发明,而选择并描述实施例。
图中的流程图和框图说明根据本发明的各种实施例的系统、方法和计算机程序产品的可能实施的架构、功能和操作。就这点而言,流程图或框图中的每个块可以表示模块、片段、或代码的一部分,其包括用于实施所指定的逻辑功能的一个或多个可执行指令。还应当注意,在某些可选实施例中,块中所标注的功能可以不以图中所标注的顺序发生。例如,连续示出的两个块事实上可以基本并发地执行,或者,依据所牵涉的功能性,所述块有时可以以相反的顺序执行。还将注意,框图和/或流程图图示的每个块、以及框图和/或流程图中的块的组合可以通过执行指定的功能或动作的基于专用硬件的系统来实施,或者通过专用硬件和计算机指令的组合来实施。
Claims (22)
1.一种用于对商业工作过程使用视频的方法,包括:
分析正在营业场所中执行的工作的视频;
当分析所述视频时,检测所述视频的图像内的模式;
将这些检测到的模式与模式库中存储的现有模式进行比较,其中,所述现有模式对应于工作流项;
生成所检测到的模式的相似性评分,其表示它们对所述现有模式的近似性;
使用所述相似性评分来确定哪个工作流项出现在所述视频内;以及
基于出现在所述视频内的工作流项执行至少一个任务,每个所执行的任务改变或参考商业过程管理系统的工作流。
2.如权利要求1所述的方法,其中,所执行的任务参考所述商业过程管理系统的至少一个工作流,所述至少一个工作流表示所述工作的特定规范,其中,所执行的任务用于确定在所述视频内捕获的动作是否符合所述特定规范。
3.如权利要求1所述的方法,其中,所执行的任务将新工作流添加至所述商业过程管理系统,所述新工作流包括被确定为出现在所述视频中的工作流项。
4.如权利要求1所述的方法,其中,所执行的任务提供要由用户分析的推荐,其中,所述推荐用于创建新工作流或用于编辑现有工作流。
5.如权利要求1所述的方法,其中,实时地或接近实时地捕获并分析所述视频,其中,所确定的工作流项指示所述营业场所中出现危险,所述方法还包括:
自动地且在不需要手动用户动作的情况下,发送告知接受者所指示的危险的通知消息。
6.如权利要求1所述的方法,其中,所执行的任务基于与所参考的工作流相比较的工作流项而建议至少一个推荐,所述方法还包括:
在用于用户选择的图形用户界面内展示所述至少一个推荐;
接收至少一个所展示的推荐的用户选择;以及
在计算系统内响应于接收到执行所述推荐的用户选择,执行程序动作。
7.如权利要求1所述的方法,还包括:
确定正在所述工作期间执行的多个不同的系统模式;以及
生成所述商业过程管理系统的新商业工作流,其包括针对每个不同系统模式的流。
8.如权利要求1所述的方法,还包括:
捕获所述营业场所的生产环境内的工作过程的视频,其中,经分析的视频包括所捕获的所述生产环境的视频。
9.如权利要求1所述的方法,还包括:
依据对不同的视频的分析,鉴别单个重复工作实例内的模式;以及
基于所述模式,产生针对所述商业过程管理系统的与所述单个重复工作实例有关的工作流的推荐。
10.如权利要求1所述的方法,还包括:
分析显示多个不同人员的不同视频,每个人员执行正在所述营业场所执行的单个重复工作实例的多个重复周期;
对于每个不同人员,依据对所述不同视频的分析,鉴别单个重复工作实例内的人员特定模式;以及
生成为每个不同人员定制的反馈,其中,所述反馈指示每个不同人员如何相对于用于执行所述重复工作实例的人员独立的基线而执行所述重复工作实例。
11.如权利要求1所述的方法,还包括:
鉴别多个不同视频,每个视频显示在时间范围上的不同记录时间点、在所述营业场所中执行的工作;
分析每个不同视频;
当分析所述不同视频时,鉴别所述工作内的随时间变化的模式;以及
依据所述随时间变化的模式,确定在所述时间范围上所述工作中的至少一个趋势。
12.如权利要求1所述的方法,还包括:
鉴别来自不同的有关商业的多个不同视频,每个视频显示正在执行的工作;
分析每个不同视频;
当分析所述不同视频时,鉴别所述工作内的商业特定模式;以及
生成为每个不同的有关商业定制的反馈,其包括所述商业特定模式。
13.如权利要求1所述的方法,其中,以标准化的商业过程执行语言(BPEL)编写所述商业过程管理系统的商业过程,所述语言独立于多个不同计算平台并跨越多个不同计算平台而作用。
14.如权利要求2所述的方法,其中,所述工作的特定规范是需要满足基于ISO 9000的认证的规范。
15.一种用于对商业工作过程使用视频的系统,包括:
被配置为分析正在营业场所中执行的工作的视频的部件;
被配置为当分析所述视频时检测所述视频的图像内的模式的部件;
被配置为将这些检测到的模式与模式库中存储的现有模式进行比较的部件,其中,所述现有模式对应于工作流项;
被配置为生成所检测到的模式的相似性评分的部件,所述相似性评分表示所检测到的模式对所述现有模式的近似性;
被配置为使用所述相似性评分来确定哪个工作流项出现在所述视频内的部件;以及
被配置为基于出现在所述视频内的工作流项执行至少一个任务的部件,每个所执行的任务改变或参考商业过程管理系统的工作流。
16.如权利要求15所述的系统,其中,所执行的任务参考所述商业过程管理系统的的至少一个工作流,所述至少一个工作流表示所述工作的特定规范,其中,所执行的任务用于确定在所述视频内捕获的动作是否符合所述特定规范。
17.如权利要求15所述的系统,其中,所执行的任务提供要由用户分析的推荐,其中,所述推荐用于创建新工作流或用于编辑现有工作流。
18.一种商业过程管理系统,包括:
视频处理工具,用于接收工作流视频数据,用于处理所述工作流视频数据以确定所述工作流视频数据内的商业工作流模式,所述工作流视频数据在一组以时间为顺序的图像内显示正在营业场所中执行的工作;以及
工作流建议引擎,用于通过将由商业处理工具确定的商业工作流模式与由所述商业过程管理系统管理的商业工作流相关联而生成工作流建议文档,所述视频处理工具和所述工作流建议引擎包括存储在有形介质上的可操作来在硬件上运行的计算机程序产品。
19.如权利要求18所述的商业过程管理系统,其中,所述商业过程管理系统可操作来使用所述工作流视频促进自动化的动作符合至少一个商业标准认证,所述至少一个商业标准认证包括基于ISO 9000的认证。
20.如权利要求18所述的商业过程管理系统,还包括:
与时间有关的工作流视频数据的数据存储器,其中,所述商业过程管理系统能够分析所述与时间有关的工作流视频数据,以确定在所述营业场所中执行的工作随时间的改变。
21.如权利要求18所述的商业过程管理系统,还包括:
与人员有关的工作流视频数据的数据存储器,其中,所述商业过程管理系统能够从工作流视频数据中检测不同人员的身份,并在处理所述工作流视频数据时确定人员特定的模式,其中,在由所述工作流建议引擎产生的工作流建议文档的至少一部分中注释所述人员特定的模式。
22.如权利要求18所述的商业过程管理系统,还包括:
工作流服务器,用于响应于使用所述商业过程管理系统的商业工作流的请求,所述工作流服务器包括存储在有形介质上的可操作来运行在硬件上的计算机程序产品,其中,所述工作流服务器可操作来接收请求,每个请求针对符合商业过程模型的商业工作流,其中,所述商业工作流包括所述任务之中具有独立性的多个任务,由于所述独立性,一些任务能够并行地执行,而其它任务必须在完成了其它某些任务时串行执行,其中,所述商业工作流是硬件和平台独立的,其中,所述工作流服务器可操作来通过将任务分配给提供软件服务的多个不同服务提供商来满足所接收的请求,其中,将每个任务分配给所述软件服务中对应的软件服务。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US12/824,712 | 2010-06-28 | ||
US12/824,712 US20110320240A1 (en) | 2010-06-28 | 2010-06-28 | Video-based analysis workflow proposal tool |
Publications (1)
Publication Number | Publication Date |
---|---|
CN102298734A true CN102298734A (zh) | 2011-12-28 |
Family
ID=45353381
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201110175889A Pending CN102298734A (zh) | 2010-06-28 | 2011-06-28 | 基于视频的分析工作流建议方法和系统 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20110320240A1 (zh) |
CN (1) | CN102298734A (zh) |
Families Citing this family (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130013370A1 (en) * | 2008-12-30 | 2013-01-10 | Infosys Limited | System and method for automatically generating an optimized business process design |
US20120278125A1 (en) * | 2011-04-29 | 2012-11-01 | Verizon Patent And Licensing Inc. | Method and system for assessing process management tools |
US8954366B2 (en) * | 2012-07-11 | 2015-02-10 | Sap Se | Service to recommend opening an information object based on task similarity |
US20140310054A1 (en) * | 2013-04-16 | 2014-10-16 | Xerox Corporation | Method and system for assessing workflow compatibility |
US9710767B1 (en) * | 2013-12-20 | 2017-07-18 | EMC IP Holding Company LLC | Data science project automated outcome prediction |
US10476971B2 (en) * | 2014-06-18 | 2019-11-12 | Alfresco Software, Inc. | Configurable and self-optimizing business process applications |
US10037504B2 (en) | 2015-02-12 | 2018-07-31 | Wipro Limited | Methods for determining manufacturing waste to optimize productivity and devices thereof |
JP2017102777A (ja) * | 2015-12-03 | 2017-06-08 | 富士通株式会社 | 負荷分散処理サーバ、負荷分散処理方法、及び、システム |
US11157845B2 (en) | 2018-03-30 | 2021-10-26 | At&T Intellectual Property I, L.P. | Deviations from workflows associated with physical items |
US11586463B2 (en) | 2018-04-17 | 2023-02-21 | Oracle International Corporation | Automated process flow learning |
US11182727B2 (en) | 2018-11-05 | 2021-11-23 | International Business Machines Corporation | Automatically detecting inconsistencies between a business process model and a corresponding tutorial video |
US11556881B2 (en) | 2019-04-23 | 2023-01-17 | International Business Machines Corporation | Generation of business process model |
US11017690B1 (en) | 2020-01-29 | 2021-05-25 | Retrocausal, Inc. | System and method for building computational models of a goal-driven task from demonstration |
US20210271886A1 (en) * | 2020-03-02 | 2021-09-02 | DeepHow Corp. | System and method for capturing, indexing and extracting digital workflow from videos using artificial intelligence |
US11809883B2 (en) | 2021-07-08 | 2023-11-07 | UiPath, Inc. | Image pattern matching to robotic process automations |
US20230047463A1 (en) * | 2021-08-16 | 2023-02-16 | Motorola Solutions, Inc. | Security ecosystem |
US20230326310A1 (en) * | 2022-04-07 | 2023-10-12 | Motorola Solutions, Inc. | Security ecosystem |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050144150A1 (en) * | 2003-12-30 | 2005-06-30 | Shankar Ramamurthy | Remote process capture, identification, cataloging and modeling |
US20090006125A1 (en) * | 2007-06-29 | 2009-01-01 | Robert Lee Angell | Method and apparatus for implementing digital video modeling to generate an optimal healthcare delivery model |
US20090316983A1 (en) * | 2008-06-20 | 2009-12-24 | Feng Han | Real-Time Action Detection and Classification |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE69811790T2 (de) * | 1997-08-01 | 2003-11-20 | Ibm | Ableitung von Prozessmodellen aus Rechnungsprüfvorgängen für Systeme zur Verwaltung von Arbeitsflüssen |
US6023572A (en) * | 1998-05-12 | 2000-02-08 | Unisys Corporation | Computer based system and method for modeling activities of people in an organization |
US20040260593A1 (en) * | 2003-05-20 | 2004-12-23 | Klaus Abraham-Fuchs | System and user interface supporting workflow operation improvement |
WO2005055138A2 (en) * | 2003-11-26 | 2005-06-16 | Yesvideo, Inc. | Statical modeling of a visual image for use in determining similarity between visual images |
US20060184410A1 (en) * | 2003-12-30 | 2006-08-17 | Shankar Ramamurthy | System and method for capture of user actions and use of capture data in business processes |
US7487018B2 (en) * | 2004-08-04 | 2009-02-03 | Verifacts Automotive, Llc | Data management systems for collision repair coaching |
WO2006116529A2 (en) * | 2005-04-28 | 2006-11-02 | Katalytik, Inc. | System and method for managing healthcare work flow |
US20070179822A1 (en) * | 2006-01-30 | 2007-08-02 | Benayon Jay W | Method and apparatus for business process transformation wizard |
JP4927448B2 (ja) * | 2006-06-09 | 2012-05-09 | 株式会社日立製作所 | 時系列パターン生成システム及び時系列パターン生成方法 |
US20080074496A1 (en) * | 2006-09-22 | 2008-03-27 | Object Video, Inc. | Video analytics for banking business process monitoring |
US7840515B2 (en) * | 2007-02-16 | 2010-11-23 | Panasonic Corporation | System architecture and process for automating intelligent surveillance center operations |
US20090204465A1 (en) * | 2008-02-08 | 2009-08-13 | Santosh Pradhan | Process and system for facilitating communication and intergrating communication with the project management activities in a collaborative environment |
US20090271243A1 (en) * | 2008-04-25 | 2009-10-29 | Btsafety Llc. | System and method of providing product quality and safety |
US8082275B2 (en) * | 2008-05-20 | 2011-12-20 | Bmc Software, Inc. | Service model flight recorder |
US8694355B2 (en) * | 2008-05-30 | 2014-04-08 | Sri International | Method and apparatus for automated assistance with task management |
US8520979B2 (en) * | 2008-08-19 | 2013-08-27 | Digimarc Corporation | Methods and systems for content processing |
US8448859B2 (en) * | 2008-09-05 | 2013-05-28 | Datalogic ADC, Inc. | System and method for preventing cashier and customer fraud at retail checkout |
US8010218B2 (en) * | 2008-09-30 | 2011-08-30 | Rockwell Automation Technologies, Inc. | Industrial automation interfaces integrated with enterprise manufacturing intelligence (EMI) systems |
US8368754B2 (en) * | 2009-03-12 | 2013-02-05 | International Business Machines Corporation | Video pattern recognition for automating emergency service incident awareness and response |
US20110072037A1 (en) * | 2009-09-18 | 2011-03-24 | Carey Leigh Lotzer | Intelligent media capture, organization, search and workflow |
-
2010
- 2010-06-28 US US12/824,712 patent/US20110320240A1/en not_active Abandoned
-
2011
- 2011-06-28 CN CN201110175889A patent/CN102298734A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050144150A1 (en) * | 2003-12-30 | 2005-06-30 | Shankar Ramamurthy | Remote process capture, identification, cataloging and modeling |
US20090006125A1 (en) * | 2007-06-29 | 2009-01-01 | Robert Lee Angell | Method and apparatus for implementing digital video modeling to generate an optimal healthcare delivery model |
US20090316983A1 (en) * | 2008-06-20 | 2009-12-24 | Feng Han | Real-Time Action Detection and Classification |
Also Published As
Publication number | Publication date |
---|---|
US20110320240A1 (en) | 2011-12-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102298734A (zh) | 基于视频的分析工作流建议方法和系统 | |
US20170109657A1 (en) | Machine Learning-Based Model for Identifying Executions of a Business Process | |
US20170109676A1 (en) | Generation of Candidate Sequences Using Links Between Nonconsecutively Performed Steps of a Business Process | |
US20070083421A1 (en) | Business process model design measurement | |
US20170109668A1 (en) | Model for Linking Between Nonconsecutively Performed Steps in a Business Process | |
US20170109667A1 (en) | Automaton-Based Identification of Executions of a Business Process | |
US9304991B2 (en) | Method and apparatus for using monitoring intent to match business processes or monitoring templates | |
US20110191128A1 (en) | Method and Apparatus for Creating a Monitoring Template for a Business Process | |
US20170109639A1 (en) | General Model for Linking Between Nonconsecutively Performed Steps in Business Processes | |
US20190066377A1 (en) | Systems and/or methods for virtual reality based process optimization | |
US20170109638A1 (en) | Ensemble-Based Identification of Executions of a Business Process | |
CN104321792A (zh) | 业务过程分析法 | |
Hamdani et al. | A systematic literature review on interaction flow modeling language (IFML) | |
US11521145B2 (en) | System and a method for life of mine planning and cost control | |
Herbert et al. | Precise quantitative analysis of probabilistic business process model and notation workflows | |
Delgado et al. | Towards a Data Science Framework Integrating Process and Data Mining for Organizational Improvement. | |
JP2017507402A (ja) | 企業にとって関連する情報を識別する、システム及び方法 | |
Ali et al. | A hybrid DevOps process supporting software reuse: A pilot project | |
US20170109640A1 (en) | Generation of Candidate Sequences Using Crowd-Based Seeds of Commonly-Performed Steps of a Business Process | |
Yu et al. | Practical applications of i∗ in industry: The state of the art | |
Machado et al. | Analysis of the influence of standard time variability on the reliability of the simulation of assembly operations in manufacturing systems | |
CN105283888A (zh) | 源于工作者的分布式过程工程 | |
US20170109637A1 (en) | Crowd-Based Model for Identifying Nonconsecutive Executions of a Business Process | |
US20170109670A1 (en) | Crowd-Based Patterns for Identifying Executions of Business Processes | |
US20140297334A1 (en) | System and method for macro level strategic planning |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20111228 |