CN114120761A - 实训操作的培训方法、装置、介质和电子设备 - Google Patents

实训操作的培训方法、装置、介质和电子设备 Download PDF

Info

Publication number
CN114120761A
CN114120761A CN202111438747.1A CN202111438747A CN114120761A CN 114120761 A CN114120761 A CN 114120761A CN 202111438747 A CN202111438747 A CN 202111438747A CN 114120761 A CN114120761 A CN 114120761A
Authority
CN
China
Prior art keywords
current
information
training
operation target
node
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111438747.1A
Other languages
English (en)
Inventor
王珂晟
黄劲
黄钢
许巧龄
孙国瑜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Oook Beijing Education Technology Co ltd
Original Assignee
Hainan Anbo Education Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hainan Anbo Education Technology Co ltd filed Critical Hainan Anbo Education Technology Co ltd
Priority to CN202111438747.1A priority Critical patent/CN114120761A/zh
Publication of CN114120761A publication Critical patent/CN114120761A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Alarm Systems (AREA)

Abstract

本公开提供了一种实训操作的培训方法、装置、介质和电子设备,所述方法包括:针对实训工位中的操作目标,获取全方位拍摄的多个监视视频;基于至少一个监视视频获取所述操作目标的当前关键信息;基于所述当前关键信息与预设有向操作图中每个当前路径上的当前节点信息进行匹配,获取每个当前节点信息的匹配结果;响应于每个匹配结果均不成立,基于所述当前关键信息和所述当前节点信息生成异常结果信息,且发送所述异常结果信息;响应于接收所述异常结果信息的反馈信息,基于所述反馈信息生成提示实训操作的指导信息。本公开及时生成异常结果信息,保证了报警和指导的及时性和准确性,提高了培训效率。

Description

实训操作的培训方法、装置、介质和电子设备
技术领域
本公开涉及视频处理领域,具体而言,涉及一种实训操作的培训方法、装置、介质和电子设备。
背景技术
学生在参加实训操作培训时,首先由培训教师演示和讲解一遍操作过程,然后再由学生进行实际操作。此时,培训教师通过巡视的方式发现参训学生操作问题,并及时进行纠正。这种培训方式常常导致问题发现不及时,或漏过问题。常常导致学生在实训时不能有效掌握操作要领,无法通过实训获得有效的知识。
因此,本公开提供了一种实训操作的培训方法,以解决上述技术问题之一。
发明内容
本公开的目的在于提供一种实训操作的培训方法、装置、介质和电子设备,能够解决上述提到的至少一个技术问题。具体方案如下:
根据本公开的具体实施方式,第一方面,本公开提供一种实训操作的培训方法,包括:
针对实训工位中的操作目标,获取全方位拍摄的多个监视视频;
基于至少一个监视视频获取所述操作目标的当前关键信息;
基于所述当前关键信息与预设有向操作图中每个当前路径上的当前节点信息进行匹配,获取每个当前节点信息的匹配结果,其中,所述当前节点信息包括当前路径上属于当前节点的操作标准信息,所述当前路径是指前一有效操作在预设有向操作图中对应的节点指向当前节点的操作路径;
响应于每个匹配结果均不成立,基于所述当前关键信息和所述当前节点信息生成异常结果信息,且发送所述异常结果信息;
响应于接收所述异常结果信息的反馈信息,基于所述反馈信息生成提示实训操作的指导信息。
根据本公开的具体实施方式,第二方面,本公开提供一种实训操作的培训装置,包括:
视频获取单元,用于针对实训工位中的操作目标,获取全方位拍摄的多个监视视频;
信息获取单元,用于基于至少一个监视视频获取所述操作目标的当前关键信息;
信息匹配单元,用于基于所述当前关键信息与预设有向操作图中每个当前路径上的当前节点信息进行匹配,获取每个当前节点信息的匹配结果,其中,所述当前节点信息包括当前路径上属于当前节点的操作标准信息,所述当前路径是指前一有效操作在预设有向操作图中对应的节点指向当前节点的操作路径;
异常生成单元,用于响应于每个匹配结果均不成立,基于所述当前关键信息和所述当前节点信息生成异常结果信息,且发送所述异常结果信息;
操作指导单元,用于响应于接收所述异常结果信息的反馈信息,基于所述反馈信息生成提示实训操作的指导信息。
根据本公开的具体实施方式,第三方面,本公开提供一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行时实现如上任一项所述实训操作的培训方法。
根据本公开的具体实施方式,第四方面,本公开提供一种电子设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如上任一项所述实训操作的培训方法。
本公开实施例的上述方案与现有技术相比,至少具有以下有益效果:
本公开提供了一种实训操作的培训方法、装置、介质和电子设备,本公开面向实训工位设置多个摄像头,全方位采集实训工位中操作目标的当前关键信息,通过当前关键信息与预设有向操作图中每个当前路径上的当前节点信息进行匹配,并基于匹配结果生成确定实训操作步骤的正确性,若操作步骤错误,则将异常结果信息上报,并基于所述反馈信息生成提示实训操作的指导信息。通过预设有向操作图的方式表示操作流程,通过简单的节点信息即可描述出操作步骤的特征和识别条件,使操作步骤设置更清晰、更灵活,表现手段简单,维护更方便,满足了实训操作步骤的所有需求,进一步提高了识别操作步骤的准确性。及时生成异常结果信息,保证了报警和指导的及时性和准确性,提高了培训效率。
附图说明
图1示出了根据本公开实施例的实训操作的培训方法的流程图;
图2示出了根据本公开实施例的实训操作的培训方法中的有环有向图;
图3示出了根据本公开实施例的实训操作的培训装置的单元框图;
图4示出了根据本公开实施例提供的一种电子设备连接结构示意图。
具体实施方式
为了使本公开的目的、技术方案和优点更加清楚,下面将结合附图对本公开作进一步地详细描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。基于本公开中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本公开保护的范围。
在本公开实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本公开。在本公开实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义,“多种”一般包含至少两种。
应当理解,本文中使用的术语“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
应当理解,尽管在本公开实施例中可能采用术语第一、第二、第三等来描述,但这些描述不应限于这些术语。这些术语仅用来将描述区分开。例如,在不脱离本公开实施例范围的情况下,第一也可以被称为第二,类似地,第二也可以被称为第一。
取决于语境,如在此所使用的词语“如果”、“若”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。类似地,取决于语境,短语“如果确定”或“如果检测(陈述的条件或事件)”可以被解释成为“当确定时”或“响应于确定”或“当检测(陈述的条件或事件)时”或“响应于检测(陈述的条件或事件)”。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的商品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种商品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的商品或者装置中还存在另外的相同要素。
特别需要说明的是,在说明书中存在的符号和/或数字,如果在附图说明中未被标记的,均不是附图标记。
下面结合附图详细说明本公开的可选实施例。
实施例1
对本公开提供的实施例,即一种实训操作的培训方法的实施例。
下面结合图1对本公开实施例进行详细说明。
步骤S101,针对实训工位中的操作目标,获取全方位拍摄的多个监视视频。
操作目标包括操作者和操作装置。例如,将操作者的手部作为操作目标。本公开实施例在实训场地中设置多个摄像头,用于全方位监控实训场地中每个实训工位中的各个操作目标,避免因视频中操作目标的关键信息缺失导致培训指导不准确,培训效果不佳。例如,在每个实训工位中设置一个主摄像头,用于采集操作目标在实训过程中的信息,而在实训场地中的基于空间的大小均匀设置若干个区域摄像头,用于监视区域中多个实训工位,以弥补主摄像头被遮挡后采集视频中关键信息的缺失。
步骤S102,基于至少一个监视视频获取所述操作目标的当前关键信息。
在实训场地中,由于任一个实训工位中的操作目标都存在多个全方位拍摄的监视视频,因此,可以从任意一个监视视频中获取全部当前关键信息,也可以从多个监视视频中分别获取全部当前关键信息。例如,当前关键信息包括操作目标的当前位置和/或当前变化信息,而当前变化信息包括操作目标的当前运动轨迹和/或当前运动趋势信息。
在一些具体实施例中,所述当前关键信息包括每个操作目标的当前位置和/或当前变化信息。
由于操作过程是一个动态变化的过程,包括操作者的动作变化和/或操作装置的动态变化。因此,本公开实施例将当前变化信息作为实训操作的当前关键信息。
相应地,所述基于至少一个监视视频获取所述操作目标的当前关键信息,包括以下步骤:
步骤S102-1,基于至少一个监视视频确定每个操作目标的当前有效视频片段。
考虑到操作因素的影响,在一个监视视频中可能无法获取每个操作目标的有效关键信息。所述有效关键信息是指操作目标在监控视频中清晰,能够准确的获得关键信息。因此,本公开实施例首先从多个监视视频中获取有效视频片段。在有效视频片段中清晰记录了操作目标的影像信息。
步骤S102-2,基于各个当前有效视频片段和相应的摄像参数获取操作目标的当前位置和/或当前变化信息。
本公开实施例采用单目摄像头采集的视频对操作目标进行定位。其中每个监视摄像头的安装位置均是固定的,其摄像参数也是根据场地情况预先设置不变的。所述摄像参数包括摄像的内外部参数,例如,外部参数包括:摄像头设置的高度、拍摄角度以及坐标系和参照物信息;内部参数包括:摄像头的焦距、摄像头中心点及畸变参数。可以通过当前有效视频片段的单张视频图像生成操作目标的当前位置,也可以通过当前有效视频片段的多张连续的视频图像生成操作目标的当前位置。
关于采用当前有效视频片段和相应的摄像参数获取操作目标的当前位置的过程本实施例不做详述,可参照现有技术中各种实现方式实施。
当前位置为后续的匹配提供了静态的匹配信息,使匹配结果更客观和准确。
所述当前变化信息包括操作目标的当前运动轨迹和/或当前运动趋势信息。
运动轨迹是记录操作目标在实训操作中动态运行的轨迹
在一些关于获取当前变化信息的具体实施例中,所述当前变化信息包括操作目标的当前运动轨迹。
运动轨迹是指操作目标从开始位置到结束位置所经过的路线中的各个位置组成的动作的空间特征。每个当前运动轨迹是以当前位置为结束位置,由操作目标的当前位置和在当前位置前所述操作目标所经过的历史位置组成的。由历史位置生成历史运动轨迹。
相应地,所述基于各个当前有效视频片段和相应的摄像参数获取操作目标的当前变化信息,包括以下步骤:
步骤S102-2a-1,基于各个当前有效视频片段和相应的摄像参数获取当前有效视频片段中操作目标的当前位置。
步骤S102-2a-2,基于各个操作目标在前一位置生成的历史运动轨迹和当前位置生成对应操作目标的当前运动轨迹。
当前运动轨迹包括了操作目标的历史运行信息,为后续的匹配提供了动态的匹配信息,使匹配结果贴近实际操作,提高了识别的准确性。
在另一些关于获取当前变化信息的具体实施例中,所述当前变化信息包括操作目标的当前运动趋势信息。
当前运动趋势信息是指当前操作目标运动发展的动向。
相应地,所述基于各个当前有效视频片段和相应的摄像参数获取操作目标的当前变化信息,包括以下步骤:
步骤S102-2b-1,基于各个当前有效视频片段和相应的摄像参数获取当前有效视频片段中操作目标的当前位置。
步骤S102-2b-2,基于各个操作目标在前一位置生成的历史运动轨迹和当前位置生成对应操作目标的当前运动轨迹。
步骤S102-2b-3,基于各个操作目标的当前运动轨迹生成对应操作目标的当前运动趋势信息。
当前运动趋势信息包括了操作目标的历史运行信息和未来运行信息,为后续的匹配提供了动态的多样的匹配信息,使匹配结果具有前瞻性和预判性,能够提早发现操作异常,及时纠正错误。
步骤S103,基于所述当前关键信息与预设有向操作图中每个当前路径上的当前节点信息进行匹配,获取每个当前节点信息的匹配结果。
预设有向操作图包括节点和有向路径,每个节点表示操作步骤,每条有向路径在两个节点间由起始节点指向终止节点,表示两个节点表示的步骤间的先后顺序。可选的,所述预设有向操作图包括预设有环有向图。例如,如图2所示,预设有环有向图中包括:节点A、节点B、节点C、节点D、节点E、节点F和节点G;每个节点表示一个操作步骤,其中记录的节点信息包括操作标准信息,节点A是操作的开始节点,节点G是操作的结束节点,其中节点C、节点D、节点E和节点F为有环节点,表示循环操作。
其中,所述当前节点信息包括当前路径上属于当前节点的操作标准信息。例如,操作目标包括测温枪、操作员的手和额头,当前节点信息包括:测温枪与手的距离d1、测温枪与额头距离的阈值。
所述当前路径是指前一有效操作在预设有向操作图中对应的节点指向当前节点的操作路径。可以理解为,当前节点是指最后一个有效执行的节点后可能执行的节点。例如,如图2所示,预设有环有向图中包括:路径a、路径b、路径c、路径d、路径e、路径f和路径g;如果当前节点为节点C,且节点C的前一有效操作在预设有环有向图中对应的节点为节点B,则当前路径是节点B指向节点C的路径b;对于有效的节点D则存在两条当前路径:路径d和路径g,且存在两个当前节点:节点E和节点G。
通过预设有向操作图的方式表示操作流程,通过简单的节点信息即可描述出操作步骤的特征和识别条件,使操作步骤设置更清晰、更灵活,表现手段简单,维护更方便,满足了实训操作步骤的所有需求。
步骤S104,响应于每个匹配结果均不成立,基于所述当前关键信息和所述当前节点信息生成异常结果信息,且发送所述异常结果信息。
如果当前操作的关键信息均不与当前关键信息匹配,可以理解为,当前操作未按照正常操作执行。
所述基于所述当前关键信息和所述当前节点信息生成异常结果信息,也就是将应该正常执行的信息和当前错误执行的信息汇总后生成异常结果信息。
例如,如图2所示,对于有效的节点D则存在两条当前路径:路径d和路径g,且存在两个当前节点:节点E和节点G;如果操作目标的当前关键信息与节点E的操作标准信息以及节点G的操作标准信息均不匹配,则表明操作目标的当前操作不符合操作要求。
相反地,响应于所有当前节点信息的匹配结果之一成立,确定所述操作目标的当前关键信息有效。
如果操作目标的当前关键信息有效,也就意味着操作目标的当前操作有效。进而可以继续对操作目标的下一个操作动作进行识别。
例如,如图2所示,继续上述例子,如果操作目标的当前关键信息与节点E的操作标准信息匹配,则表明操作目标的当前操作所走的路径为d,下一操作的当前节点为F;如果操作目标的当前关键信息与节点G的操作标准信息匹配,则表明操作目标的当前操作所走的路径为g,操作结束。
可选的,所述响应于每个匹配结果均不成立,基于所述当前关键信息生成异常结果信息,且发送所述异常结果信息,包括以下步骤:
响应于每个匹配结果均不成立,基于所述当前关键信息生成异常结果信息,且实时发送所述异常结果信息,以触发监控终端生成报警信息。
实时将异常结果信息发送给监控终端,并在监控终端生成报警信息,以便通知培训教师。
步骤S105,响应于接收所述异常结果信息的反馈信息,基于所述反馈信息生成提示实训操作的指导信息。
培训教师可以实时对异常结果信息进行处理,生成反馈信息,以便实时在实训工位的终端显示指导信息,及时纠正操作员的错误操作;也可以在实训操作结束后,对该实训操作中出现的所有异常结果信息进行统一处理,生成反馈信息,以便在实训工位的终端显示统一的指导信息,纠正操作员的全部错误操作。
所述提示实训操作的指导信息,至少包括以下一种方法:
方法一、提示标准操作的步骤信息。例如,标准操作步骤的文字信息和/或图像。
方法二、提示标准操作的视频。
方法三、提示标准操作的音频。例如,已经录制的标准操作音频。
方法四、展示培训教师的互动音频或视频。例如,培训教师通过远程语音或视频实时指导操作。
本公开实施例面向实训工位设置多个摄像头,全方位采集实训工位中操作目标的当前关键信息,通过当前关键信息与预设有向操作图中每个当前路径上的当前节点信息进行匹配,并基于匹配结果生成确定实训操作步骤的正确性,若操作步骤错误,则将异常结果信息上报,并基于所述反馈信息生成提示实训操作的指导信息。通过预设有向操作图的方式表示操作流程,通过简单的节点信息即可描述出操作步骤的特征和识别条件,使操作步骤设置更清晰、更灵活,表现手段简单,维护更方便,满足了实训操作步骤的所有需求,进一步提高了识别操作步骤的准确性。及时生成异常结果信息,保证了报警和指导的及时性和准确性,提高了培训效率。
实施例2
本公开还提供了与上述实施例承接的装置实施例,用于实现如上实施例所述的方法步骤,基于相同的名称含义的解释与如上实施例相同,具有与如上实施例相同的技术效果,此处不再赘述。
如图3所示,本公开提供一种实训操作的培训装置300,包括:
视频获取单元301,用于针对实训工位中的操作目标,获取全方位拍摄的多个监视视频;
信息获取单元302,用于基于至少一个监视视频获取所述操作目标的当前关键信息;
信息匹配单元303,用于基于所述当前关键信息与预设有向操作图中每个当前路径上的当前节点信息进行匹配,获取每个当前节点信息的匹配结果,其中,所述当前节点信息包括当前路径上属于当前节点的操作标准信息,所述当前路径是指前一有效操作在预设有向操作图中对应的节点指向当前节点的操作路径;
异常生成单元304,用于响应于每个匹配结果均不成立,基于所述当前关键信息和所述当前节点信息生成异常结果信息,且发送所述异常结果信息;
操作指导单元305,用于响应于接收所述异常结果信息的反馈信息,基于所述反馈信息生成提示实训操作的指导信息。
可选的,所述当前关键信息包括操作目标的当前位置和/或当前变化信息;
相应地,所述信息获取单元302,包括:
片段确定子单元,用于基于至少一个监视视频确定每个操作目标的当前有效视频片段;
信息获取子单元,用于基于各个当前有效视频片段和相应的摄像参数获取操作目标的当前位置和/或当前变化信息。
可选的,所述当前变化信息包括操作目标的当前运动轨迹;
相应地,所述信息获取子单元,包括:
第一位置获取子单元,用于基于各个当前有效视频片段和相应的摄像参数获取当前有效视频片段中操作目标的当前位置;
第一轨迹生成子单元,用于基于各个操作目标在前一位置生成的历史运动轨迹和当前位置生成对应操作目标的当前运动轨迹。
可选的,所述当前变化信息包括操作目标的当前运动趋势信息;
相应地,所述信息获取子单元,包括:
第二位置获取子单元,用于基于各个当前有效视频片段和相应的摄像参数获取当前有效视频片段中操作目标的当前位置;
第二轨迹生成子单元,用于基于各个操作目标在前一位置生成的历史运动轨迹和当前位置生成对应操作目标的当前运动轨迹;
趋势生成子单元,用于基于各个操作目标的当前运动轨迹生成对应操作目标的当前运动趋势信息。
可选的,所述异常生成单元304,包括:
实时发送子单元,用于响应于每个匹配结果均不成立,基于所述当前关键信息生成异常结果信息,且实时发送所述异常结果信息,以触发监控终端生成报警信息。
可选的,所述操作指导单元305,至少包括以下一种子单元:
第一提示子单元,用于提示标准操作的步骤信息;
第二提示子单元,用于提示标准操作的视频;
第三提示子单元,用于提示标准操作的音频;
展示子单元,用于展示与培训教师的互动音频或视频。
可选的,所述装置还包括:
有效确定单元,用于在所述基于所述当前关键信息与预设有向操作图中每个当前路径上的当前节点信息进行匹配,获取每个当前节点信息的匹配结果后,响应于所有当前节点信息的匹配结果之一成立,确定所述操作目标的当前关键信息有效。
本公开实施例面向实训工位设置多个摄像头,全方位采集实训工位中操作目标的当前关键信息,通过当前关键信息与预设有向操作图中每个当前路径上的当前节点信息进行匹配,并基于匹配结果生成确定实训操作步骤的正确性,若操作步骤错误,则将异常结果信息上报,并基于所述反馈信息生成提示实训操作的指导信息。通过预设有向操作图的方式表示操作流程,通过简单的节点信息即可描述出操作步骤的特征和识别条件,使操作步骤设置更清晰、更灵活,表现手段简单,维护更方便,满足了实训操作步骤的所有需求,进一步提高了识别操作步骤的准确性。及时生成异常结果信息,保证了报警和指导的及时性和准确性,提高了培训效率。
实施例3
如图4所示,本实施例提供一种电子设备,所述电子设备,包括:至少一个处理器;以及,与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行如上实施例所述的方法步骤。
实施例4
本公开实施例提供了一种非易失性计算机存储介质,所述计算机存储介质存储有计算机可执行指令,该计算机可执行指令可执行如上实施例所述的方法步骤。
实施例5
下面参考图4,其示出了适于用来实现本公开实施例的电子设备的结构示意图。本公开实施例中的终端设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图4示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图4所示,电子设备可以包括处理装置(例如中央处理器、图形处理器等)401,其可以根据存储在只读存储器(ROM)402中的程序或者从存储装置408加载到随机访问存储器(RAM)403中的程序而执行各种适当的动作和处理。在RAM 403中,还存储有电子设备操作所需的各种程序和数据。处理装置401、ROM 402以及RAM 403通过总线404彼此相连。输入/输出(I/O)接口405也连接至总线404。
通常,以下装置可以连接至I/O接口405:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置406;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置405;包括例如磁带、硬盘等的存储装置408;以及通信装置409。通信装置409可以允许电子设备与其他设备进行无线或有线通信以交换数据。虽然图4示出了具有各种装置的电子设备,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置409从网络上被下载和安装,或者从存储装置408被安装,或者从ROM 402被安装。在该计算机程序被处理装置401执行时,执行本公开实施例的方法中限定的上述功能。
需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,单元的名称在某种情况下并不构成对该单元本身的限定。

Claims (10)

1.一种实训操作的培训方法,其特征在于,包括:
针对实训工位中的操作目标,获取全方位拍摄的多个监视视频;
基于至少一个监视视频获取所述操作目标的当前关键信息;
基于所述当前关键信息与预设有向操作图中每个当前路径上的当前节点信息进行匹配,获取每个当前节点信息的匹配结果,其中,所述当前节点信息包括当前路径上属于当前节点的操作标准信息,所述当前路径是指前一有效操作在预设有向操作图中对应的节点指向当前节点的操作路径;
响应于每个匹配结果均不成立,基于所述当前关键信息和所述当前节点信息生成异常结果信息,且发送所述异常结果信息;
响应于接收所述异常结果信息的反馈信息,基于所述反馈信息生成提示实训操作的指导信息。
2.根据权利要求1所述的方法,其特征在于,
所述当前关键信息包括操作目标的当前位置和/或当前变化信息;
相应地,所述基于至少一个监视视频获取所述操作目标的当前关键信息,包括:
基于至少一个监视视频确定每个操作目标的当前有效视频片段;
基于各个当前有效视频片段和相应的摄像参数获取操作目标的当前位置和/或当前变化信息。
3.根据权利要求2所述的方法,其特征在于,
所述当前变化信息包括操作目标的当前运动轨迹;
相应地,所述基于各个当前有效视频片段和相应的摄像参数获取操作目标的当前变化信息,包括:
基于各个当前有效视频片段和相应的摄像参数获取当前有效视频片段中操作目标的当前位置;
基于各个操作目标在前一位置生成的历史运动轨迹和当前位置生成对应操作目标的当前运动轨迹。
4.根据权利要求2所述的方法,其特征在于,
所述当前变化信息包括操作目标的当前运动趋势信息;
相应地,所述基于各个当前有效视频片段和相应的摄像参数获取操作目标的当前变化信息,包括:
基于各个当前有效视频片段和相应的摄像参数获取当前有效视频片段中操作目标的当前位置;
基于各个操作目标在前一位置生成的历史运动轨迹和当前位置生成对应操作目标的当前运动轨迹;
基于各个操作目标的当前运动轨迹生成对应操作目标的当前运动趋势信息。
5.根据权利要求1所述的方法,其特征在于,所述响应于每个匹配结果均不成立,基于所述当前关键信息生成异常结果信息,且发送所述异常结果信息,包括:
响应于每个匹配结果均不成立,基于所述当前关键信息生成异常结果信息,且实时发送所述异常结果信息,以触发监控终端生成报警信息。
6.根据权利要求1所述的方法,其特征在于,所述提示实训操作的指导信息,至少包括以下一种方法:
提示标准操作的步骤信息;
提示标准操作的视频;
提示标准操作的音频;
展示与培训教师的互动音频或视频。
7.根据权利要求1所述的方法,其特征在于,在所述基于所述当前关键信息与预设有向操作图中每个当前路径上的当前节点信息进行匹配,获取每个当前节点信息的匹配结果后,还包括:
响应于所有当前节点信息的匹配结果之一成立,确定所述操作目标的当前关键信息有效。
8.一种实训操作的培训装置,其特征在于,包括:
视频获取单元,用于针对实训工位中的操作目标,获取全方位拍摄的多个监视视频;
信息获取单元,用于基于至少一个监视视频获取所述操作目标的当前关键信息;
信息匹配单元,用于基于所述当前关键信息与预设有向操作图中每个当前路径上的当前节点信息进行匹配,获取每个当前节点信息的匹配结果,其中,所述当前节点信息包括当前路径上属于当前节点的操作标准信息,所述当前路径是指前一有效操作在预设有向操作图中对应的节点指向当前节点的操作路径;
异常生成单元,用于响应于每个匹配结果均不成立,基于所述当前关键信息和所述当前节点信息生成异常结果信息,且发送所述异常结果信息;
操作指导单元,用于响应于接收所述异常结果信息的反馈信息,基于所述反馈信息生成提示实训操作的指导信息。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1至7中任一项所述的方法。
10.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如权利要求1至7中任一项所述的方法。
CN202111438747.1A 2021-11-29 2021-11-29 实训操作的培训方法、装置、介质和电子设备 Pending CN114120761A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111438747.1A CN114120761A (zh) 2021-11-29 2021-11-29 实训操作的培训方法、装置、介质和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111438747.1A CN114120761A (zh) 2021-11-29 2021-11-29 实训操作的培训方法、装置、介质和电子设备

Publications (1)

Publication Number Publication Date
CN114120761A true CN114120761A (zh) 2022-03-01

Family

ID=80368001

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111438747.1A Pending CN114120761A (zh) 2021-11-29 2021-11-29 实训操作的培训方法、装置、介质和电子设备

Country Status (1)

Country Link
CN (1) CN114120761A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050105765A1 (en) * 2003-11-17 2005-05-19 Mei Han Video surveillance system with object detection and probability scoring based on object class
KR20130050670A (ko) * 2011-11-08 2013-05-16 재단법인대구경북과학기술원 카메라를 이용한 손동작 인식 방법 및 장치
CN104933730A (zh) * 2014-03-19 2015-09-23 通用汽车环球科技运作有限责任公司 使用半穷举搜索的多视图人检测
US20150294143A1 (en) * 2014-04-10 2015-10-15 GM Global Technology Operations LLC Vision based monitoring system for activity sequency validation
CN112272288A (zh) * 2020-10-23 2021-01-26 岭东核电有限公司 核电作业监控方法、装置、计算机设备和存储介质
CN113064916A (zh) * 2021-04-22 2021-07-02 中国平安财产保险股份有限公司 异常打卡行为的监测方法、装置、计算机设备及存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050105765A1 (en) * 2003-11-17 2005-05-19 Mei Han Video surveillance system with object detection and probability scoring based on object class
KR20130050670A (ko) * 2011-11-08 2013-05-16 재단법인대구경북과학기술원 카메라를 이용한 손동작 인식 방법 및 장치
CN104933730A (zh) * 2014-03-19 2015-09-23 通用汽车环球科技运作有限责任公司 使用半穷举搜索的多视图人检测
CN104935879A (zh) * 2014-03-19 2015-09-23 通用汽车环球科技运作有限责任公司 用于活动顺序验证的基于视觉的监视系统
US20150294143A1 (en) * 2014-04-10 2015-10-15 GM Global Technology Operations LLC Vision based monitoring system for activity sequency validation
CN112272288A (zh) * 2020-10-23 2021-01-26 岭东核电有限公司 核电作业监控方法、装置、计算机设备和存储介质
CN113064916A (zh) * 2021-04-22 2021-07-02 中国平安财产保险股份有限公司 异常打卡行为的监测方法、装置、计算机设备及存储介质

Similar Documents

Publication Publication Date Title
EP3605394A1 (en) Method and apparatus for recognizing body movement
CN111950555B (zh) 文本识别方法、装置、可读介质及电子设备
CN109583391B (zh) 关键点检测方法、装置、设备及可读介质
US11455836B2 (en) Dynamic motion detection method and apparatus, and storage medium
EP3985610A1 (en) Audio collection device positioning method and apparatus, and speaker recognition method and system
US11328518B2 (en) Method and apparatus for outputting information
CN111783626B (zh) 图像识别方法、装置、电子设备及存储介质
CN110347875B (zh) 一种视频场景分类方法、装置、移动终端及存储介质
CN115616937B (zh) 自动驾驶仿真测试方法、装置、设备和计算机可读介质
WO2020155915A1 (zh) 用于播放音频的方法和装置
WO2022095674A1 (zh) 用于操作移动设备的方法和装置
CN110850807A (zh) 一种奇异点规避方法、装置、设备及介质
CN113992860B (zh) 基于云边协同的行为识别方法、装置、电子设备和介质
CN110287817B (zh) 目标识别及目标识别模型的训练方法、装置和电子设备
WO2018089510A1 (en) End-of-show content display trigger
CN114120761A (zh) 实训操作的培训方法、装置、介质和电子设备
CN111601129A (zh) 控制方法、装置、终端及存储介质
CN115546487A (zh) 图像模型训练方法、装置、介质及电子设备
CN111913574B (zh) 用于控制设备的方法、装置、电子设备和计算机可读介质
CN112507884A (zh) 直播内容的检测方法、装置、可读介质和电子设备
CN110969189B (zh) 人脸检测方法、装置及电子设备
CN116471442A (zh) 视频字幕生成方法、装置、介质及电子设备
CN114640826B (zh) 数据处理方法、装置、可读介质以及电子设备
CN114630081B (zh) 视频播放顺序确定方法、装置、设备及介质
CN115147789B (zh) 分合流道路信息检测方法、装置、设备和计算机可读介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20230627

Address after: Room 1202, 12th floor, building 1, yard 54, Shijingshan Road, Shijingshan District, Beijing 100040

Applicant after: Oook (Beijing) Education Technology Co.,Ltd.

Address before: 571924 3001, third floor, incubation building, Hainan Ecological Software Park, high tech industry demonstration zone, Laocheng Town, Chengmai County, Hainan Province

Applicant before: Hainan Anbo Education Technology Co.,Ltd.