CN105117116B - 获取执行操控任务的行为数据的系统和方法 - Google Patents

获取执行操控任务的行为数据的系统和方法 Download PDF

Info

Publication number
CN105117116B
CN105117116B CN201510225078.8A CN201510225078A CN105117116B CN 105117116 B CN105117116 B CN 105117116B CN 201510225078 A CN201510225078 A CN 201510225078A CN 105117116 B CN105117116 B CN 105117116B
Authority
CN
China
Prior art keywords
signal
data
physiological characteristic
characteristic information
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510225078.8A
Other languages
English (en)
Other versions
CN105117116A (zh
Inventor
张力
洪俊
陈青青
胡鸿
方小勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hunan Institute of Technology
Original Assignee
Hunan Institute of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hunan Institute of Technology filed Critical Hunan Institute of Technology
Priority to CN201510225078.8A priority Critical patent/CN105117116B/zh
Publication of CN105117116A publication Critical patent/CN105117116A/zh
Application granted granted Critical
Publication of CN105117116B publication Critical patent/CN105117116B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本发明公开了一种获取执行操控任务的行为数据的系统和方法,该系统包括:第一采集系统,用于采集执行操控任务的工作人员的生理特征信息;第二采集系统,用于采集工作人员执行操控任务的视频行为信息;上位机,包括数据存储系统和数据统计系统,其中,数据存储系统,与第一采集系统和第二采集系统连接,用于存储工作人员的生理特征信息及对应的视频行为信息;数据统计系统,与数据存储系统连接,用于获取工作人员的生理特征信息及视频行为信息所对应的操作行为数据。通过本发明的上述系统,解决了现有技术中不能获取数字化控制室操纵人员的行为数据的问题,为获取海量人因数据并进行有效数据挖掘提供了有效的技术手段。

Description

获取执行操控任务的行为数据的系统和方法
技术领域
[0001] 本发明涉及数控领域,具体而言,涉及一种获取执行操控任务的行为数据的系统 和方法。
背景技术
[0002] 数字化控制系统目前已经广泛地应用于核电、航空、石油化工等领域,人机交互的 重要性也已日益受到普遍的关注。一方面,有效的人机交互能促进系统的可靠性和安全性; 另一方面,人机交互又是引发人因失误的直接来源,一旦人机交互出现差错,则可能导致任 务失效或者灾难性事故。
[0003] 人机交互是人与机器之间的双向通信,以特定的符号和操作来实现,在数字化背 景下,它具有操纵员角色转变、认知负荷大、硬控制向软控制转变、人机界面更加丰富等特 点,所以人误的可能性越来越高,若能采集到控制室班组人员的操作行为数据,则能对操作 行为数据进行有效挖掘,进而分析人为因素对现代工业化数控系统的影响,就能有效的预 防人误导致的系统失效和灾难。
[0004] 针对现有技术中不能获取数字化控制室操纵人员的行为数据的问题,目前尚未提 出有效的解决方案。
发明内容
[0005] 本发明的主要目的在于提供一种获取执行操控任务的行为数据的系统和方法,以 解决不能获取数字化控制室操纵人员的行为数据的问题。
[0006] 为了实现上述目的,根据本发明实施例的一个方面,提供了一种获取执行操控任 务的行为数据的系统该系统包括:
[0007] 第一采集系统,用于采集执行操控任务的工作人员的生理特征信息;
[0008] 第二采集系统,用于采集工作人员执行操控任务的视频行为信息;
[0009] 上位机,包括数据存储系统和数据统计系统,
[0010] 其中,数据存储系统,与第一采集系统和第二采集系统连接,用于存储工作人员的 生理特征信息及对应的视频行为信息;
[0011] 数据统计系统,与数据存储系统连接,用于获取工作人员的生理特征信息及视频 行为信息所对应的操作行为数据。
[0012] 进一步地,第一采集系统包括:
[0013] 传感器单元,用于采集工作人员的原始生理特征信号,并将原始生理特征信号转 换为电信号;
[0014] 模拟信号处理单元,与传感器组连接,用于对电信号进行滤波和放大处理,得到处 理后的电信号;
[0015] 模数转换单元,与模拟信号处理单元连接,用于将处理后的电信号转换为数字信 号;
[0016] 数字信号处理单元,与模数转换单元连接,用于将数字信号转换为预定格式的生 理特征信息,并存储生理特征信息。
[0017] 进一步地,传感器单元包括:
[0018] 眼动信号传感器,用于采集工作人员的眼动信号;
[0019] 声音传感器,用于采集工作人员的声音信号;
[0020] 脑电波传感器,用于采集工作人员的脑波信号;
[0021] 心跳传感器,用于采集工作人员的心跳信号;
[0022] 体温传感器,用于采集工作人员的体温信号;
[0023] 无线发射单元,与眼动信号传感器、声音传感器、脑电波传感器、心跳传感器以及 体温传感器连接,用于将眼动信号、声音信号、脑波信号、心跳信号以及体温信号发送至模 拟信号处理单元,
[0024] 其中,原始生理特征信号包括:眼动信号、声音信号、脑波信号、心跳信号以及体温 信号。
[0025] 进一步地,模拟信号处理单元包括:
[0026] 无线接收单元,与无线发射单元通过无线网络连接,用于接收原始生理特征信号; [0027]第一信号处理子单元,与无线接收单元连接,
[0028] 其中,第一信号处理子单元包括滤波器和放大器,滤波器与无线接收单元连接,用 于对原始生理特征信号进行滤波处理得到滤波信号;放大器与滤波器连接,用于对滤波信 号进行放大处理得到处理后的电信号。
[0029] 进一步地,数字信号处理单元包括:
[0030] 第一处理器,与模拟信号处理单元连接,用于将数字信号转换为预定格式的生理 特征信息;
[0031] 内存,与第一处理器连接,用于存储预定格式的生理特征信息;
[0032] 接口电路,与第一处理器连接,用于在第一处理器的控制信号的控制下连接上位 机。
[0033] 进一步地,数据存储系统包括:
[0034] 第二处理器,与接口电路和第二采集系统连接,用于获取预定格式的生理特征信 息和视频行为信息,并根据预定格式的生理特征信息及对应的视频行为信息建立人因数据 库,以及将预定格式的生理特征信息及对应的视频行为信息保存至人因数据库中。
[0035] 进一步地,数据统计系统包括:
[0036] 第三处理器,与数据存储系统连接,用于获取人因数据库中存储的生理特征信息 及视频行为信息所对应的工作人员在执行操控任务时的操作对象、对操作对象执行操控的 操作次数以及执行每次操控时的操作时间,并基于操作对象、操作次数以及操作时间生成 数据分析报告,
[0037] 其中,操作行为数据包括操作对象、操作次数以及操作时间。
[0038] 根据本发明的另一方面,提供一种获取执行操控任务的行为数据的方法,包括:
[0039] 采集执行操控任务的工作人员的生理特征信息,并采集工作人员执行操控任务的 视频行为息;
[0040] 将生理特征信息转换为预定格式的生理特征信息;
[0041] 获取预定格式的生理特征信息及视频行为信息所对应的操作行为数据;
[0042] 生成操作行为数据的分析报告。
[0043] 进一步地,采集执行操控任务的工作人员的生理特征信息包括:
[0044] 采集工作人员的原始生理特征信号,并将原始生理特征信号转换为电信号;
[0045] 对电信号进行滤波和放大处理,得到处理后的电信号;
[0046] 将处理后的电信号转换为数字信号,并将数字信号转换为预定格式的生理特征信 息,并存储生理特征信息。
[0047] 进一步地,在将生理特征信息转换为预定格式的生理特征信息之后,方法还包括: 根据预定格式的生理特征信息及对应的视频行为信息建立人因数据库,以及将预定格式的 生理特征信息及对应的视频行为信息保存至人因数据库中;
[0048] 获取预定格式的生理特征信息及视频行为信息所对应的操作行为数据包括:
[0049] 获取人因数据库中存储的生理特征信息及视频行为信息所对应的工作人员在执 行操控任务时的操作对象、对操作对象执行操控的操作次数以及执行每次操控时的操作时 间,
[0050] 其中,操作行为数据包括操作对象、操作次数以及操作时间。
[0051] 采用本发明,利用第一采集系统、第二采集系统以及上位机构建获取执行操控任 务的行为数据的系统,其中第一采集系统采集执行操控任务的工作人员的生理特征信息, 第二采集系统采集工作人员执行操控任务的视频行为信息,将第一采集系统和第二采集系 统采集到的数据传输至上位机的数据存储系统,以便上位机的数据统计系统对数据进行分 析,并获取工作人员的生理特征信息及视频行为信息所对应的操作行为数据。通过本发明 的上述系统,解决了现有技术中不能获取数字化控制室操纵人员的行为数据的问题,为获 取海量人因数据并进行有效数据挖掘提供了有效的技术手段。
附图说明
[0052] 构成本申请的一部分的附图用来提供对本发明的进一步理解,本发明的示意性实 施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
[0053] 图1是根据本发明实施例的获取执行操控任务的行为数据的系统的示意图;
[0054] 图2是根据本发明实施例的一个可选的数据平台的示意图;
[0055] 图3是根据本发明实施例对一回路操纵员进行分析的结果的示意图;
[0056] 图4是根据本发明实施例的操控室人员之间关系的示意图;以及
[0057] 图5是根据本发明实施例的获取执行操控任务的行为数据的方法的流程图。
具体实施方式
[0058] 需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相 互组合。下面将参考附图并结合实施例来详细说明本发明。
[0059] 为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的 附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是 本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人 员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范 围。
[0060] 需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第 二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用 的数据在适当情况下可以互换,以便这里描述的本发明的实施例。此外,术语“包括”和“具 有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的 过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清 楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
[0061] 本发明实施例提供了一种获取执行操控任务的行为数据的系统。
[0062] 图1是根据本发明实施例的获取执行操控任务的行为数据的系统的示意图。如图1 所示,该系统包括:第一采集系统20、第二采集系统40以及上位机60。
[0063] 其中,第一采集系统用于采集执行操控任务的工作人员的生理特征信息;第二采 集系统用于采集工作人员执行操控任务的视频行为信息;上位机包括数据存储系统62和数 据统计系统64,数据存储系统与第一采集系统和第二采集系统连接,用于存储工作人员的 生理特征信息及对应的视频行为信息;数据统计系统与数据存储系统连接,用于获取工作 人员的生理特征信息及视频行为信息所对应的操作行为数据。
[0064] 采用本发明,利用第一采集系统、第二采集系统以及上位机构建获取执行操控任 务的行为数据的系统,其中第一采集系统采集执行操控任务的工作人员的生理特征信息, 第二采集系统采集工作人员执行操控任务的视频行为信息,将第一采集系统和第二采集系 统采集到的数据传输至上位机的数据存储系统,以便上位机的数据统计系统对数据进行分 析,并获取工作人员的生理特征信息及视频行为信息所对应的操作行为数据。通过本发明 的上述系统,解决了现有技术中不能获取数字化控制室操纵人员的行为数据的问题,为获 取海量人因数据并进行有效数据挖掘提供了有效的技术手段。
[0065] 在本发明的上述实施例中,提出了一种新的数据平台,可以通过影像采集系统(第 二采集系统)直接采集班组人员的工作行为记录,然后传送到工作站(上位机)进行储存、加 工以及挖掘。
[0066] 通过上述实施例的系统,能对数字化控制室操纵班组人员的行为与生理数据进行 有效采集、储存以及处理挖掘,该系统可广泛应用于各类数字化工业控制系统,能够获取海 量人因数据并进行有效挖掘,从而有效的解决了现有技术中人因数据采集困难、数据库匮 乏、数据的采集与分析脱节的技术问题。
[0067] 在上述实施例中,第一采集系统可以包括:传感器单元,用于采集工作人员的原始 生理特征信号,并将原始生理特征信号转换为电信号;模拟信号处理单元,与传感器组连 接,用于对电信号进行滤波和放大处理,得到处理后的电信号;模数转换单元,与模拟信号 处理单元连接,用于将处理后的电信号转换为数字信号;数字信号处理单元,与模数转换单 元连接,用于将数字信号转换为预定格式的生理特征信息,并存储生理特征信息。
[0068] 具体地,采用传感器组(第一采集系统)的传感器单元采集数控操作室的班组人员 的生理特征并将原始生理特征信号转换为电信号,并通过模拟信号处理单元对电信号进行 滤波和放大处理,然后通过模数转换装置将处理后的模拟信号转换成数字信号,并通过数 字信号处理单元进行处理,最后将处理后的有效数据储存在工作站(上位机)中,以便进一 步地进行处理与挖掘。
[0069] 通过上述实施例,可以将工作人员的原始生理特征信号(模拟信号)进行处理并转 换为电脑能够识别的数字信号,以便进一步地进行数据分析和挖掘。
[0070] 在上述实施例中,传感器单元可以包括:眼动信号传感器,用于采集工作人员的眼 动信号;声音传感器,用于采集工作人员的声音信号;脑电波传感器,用于采集工作人员的 脑波信号;心跳传感器,用于采集工作人员的心跳信号;体温传感器,用于采集工作人员的 体温信号;无线发射单元,与眼动信号传感器、声音传感器、脑电波传感器、心跳传感器以及 体温传感器连接,用于将眼动信号、声音信号、脑波信号、心跳信号以及体温信号发送至模 拟信号处理单元,其中,原始生理特征信号包括:眼动信号、声音信号、脑波信号、心跳信号 以及体温信号。
[0071] 具体地,由于眼动信息可以反映工作人员的视觉信息的选择模式,对于揭示基于 认知加工的心理机制具有重要意义,而声音、脑波、心跳以及体温信息均为工作人员的基本 生理特征信息,所以需要采集上述生理特征信息。采集方法是利用传感器采集对应的生理 特征信息并将这些特征信息转换成电信号,以便于后期的储存与处理。同时,考虑到控制室 的环境存在诸多不稳定性因素,传感器单元采集到的生理特征信号可以利用无线发射单元 传送到模拟信号处理单元。
[0072] 需要进一步说明的是,传感器单元包含但不限于眼动信号传感器、声音传感器、脑 电波传感器、心跳传感器以及体温传感器;无线发射单元的通讯协议采用IEEE802.il标准。
[0073] 通过上述实施例,可以利用传感器单元采集到工作人员的原始生理特征信息,并 通过无线发射单元传输至模拟信号处理单元,以便进一步地的对数据进行处理和分析。由 于数据传输采用先进的无线通信技术,提高了传感器系统的可移动性,降低了系统的冗余 度。
[0074] 在上述实施例中,模拟信号处理单元可以包括:无线接收单元,与无线发射单元通 过无线网络连接,用于接收原始生理特征信号;第一信号处理子单元,与无线接收单元连 接,其中,第一信号处理子单元包括滤波器和放大器,滤波器与无线接收单元连接,用于对 原始生理特征信号进行滤波处理得到滤波信号;放大器与滤波器连接,用于对滤波信号进 行放大处理得到处理后的电信号。
[0075] 具体地,无线接收单元接收传感器单元采集到的原始生理特征信号,由于原始生 理特征信号掺入了电子与环境噪声,所以需要通过滤波器对原始生理特征信号进行滤波处 理以消除噪声,然后通过放大器对微弱的信号进行放大处理。
[0076] 通过上述实施例,可以消除电子与环境噪声对采集到的生理特征信号的影响,同 时将一些比较微弱的生理特征信号进行放大处理也有利于进一步地的数据处理和挖掘。
[0077] 根据本发明的上述实施例,数字信号处理单元可以包括:第一处理器,与模拟信号 处理单元连接,用于将数字信号转换为预定格式的生理特征信息;内存,与第一处理器连 接,用于存储预定格式的生理特征信息;接口电路,与第一处理器连接,用于在第一处理器 的控制信号的控制下连接上位机。
[0078] 由于使用模拟信号时不方便对其进行处理和存储,所以需要将模拟信号进行模数 转换,转换成数字信号。模拟信号处理单元会将接收到电信号(模拟信号)进行滤波处理,然 后将其转换为数字信号,再传输至数字信号处理单元,然后数字信号处理单元的第一处理 器将数字信号转换为预定格式的生理特征信息。上述数字信号处理单元可以包括中央处理 器(第一处理器)、内存与接口电路。其中,中央处理器负责信号的处理与控制,内存用于数 据与指令的暂时储存,接口电路用于连接中央处理器和工作站(上位机)。
[0079] 通过上述实施例,可以将模拟信号处理单元传输过来的生理特征信息转换为预定 格式的生理特征信息,这样方便对生理特征信息的存储和进一步的处理,如数据挖掘等。
[0080] 在上述实施例中,数据存储系统可以包括:第二处理器,与接口电路和第二采集系 统连接,用于获取预定格式的生理特征信息和视频行为信息,并根据预定格式的生理特征 信息及对应的视频行为信息建立人因数据库,以及将预定格式的生理特征信息及对应的视 频行为信息保存至人因数据库中。
[0081] 通过上述实施例,将采集、加工后的人因数据(预定格式的生理特征信息和视频行 为信息)储存至电脑(人因数据库)中,进行电子化存档。这样的存储方式可以提高存储效率 和查询效率。
[0082] 需要进一步说明的是,人因数据库可以包括系统管理模块、班组人员生理数据模 块与班组人员行为数据模块,建立完数据库之后可以基于VC++6.0建立数据分析与挖掘平 台,对数据进行进一步地处理。
[0083] 根据本发明的上述实施例,数据统计系统可以包括:第三处理器,与数据存储系统 连接,用于获取人因数据库中存储的生理特征信息及视频行为信息所对应的工作人员在执 行操控任务时的操作对象、对操作对象执行操控的操作次数以及执行每次操控时的操作时 间,并基于操作对象、操作次数以及操作时间生成数据分析报告,其中,操作行为数据包括 操作对象、操作次数以及操作时间。
[0084] 通过上述实施例,可以将数据的采集、储存、处理与挖掘集成为一个平台,便于对 数字化工业系统控制室的操纵班组人员工作状态下的生理与行为数据的采集与分析。由于 人因数据库的数据实时更新,能够将现场数据第一时间用于分析,如基于工作人员在执行 操控任务时的操作对象、对操作对象执行操控的操作次数以及执行每次操控时的操作时 间,并基于操作对象、操作次数以及操作时间生成数据分析报告。
[0085] 进一步地,获取执行操控任务的行为数据的方法还可以包括:采集执行操控任务 的工作人员的生理特征信息,并采集工作人员执行操控任务的视频行为信息;将生理特征 信息转换为预定格式的生理特征信息;获取预定格式的生理特征信息及视频行为信息所对 应的操作行为数据;生成操作行为数据的分析报告。
[0086] 通过上述实施例,可以通过对采集到的工作人员的生理特征信息和执行操控任务 的视频行为信息进行分析并生成分析报告,从而可以根据分析报告确定控制室的人因问 题。
[0087] 进一步地,采集执行操控任务的工作人员的生理特征信息可以包括:采集工作人 员的原始生理特征信号,并将原始生理特征信号转换为电信号;对电信号进行滤波和放大 处理,得到处理后的电信号;将处理后的电信号转换为数字信号,并将数字信号转换为预定 格式的生理特征信息,并存储生理特征信息。
[0088] 通过上述实施例,可以采集到执行操控任务的工作人员的生理特征信息,并将该 特征信息做进一步的处理之后存储在数据库中,以便进一步的分析,关于对工作人员的生 理特征信息和执行操控任务的视频行为信息的分析将在下面实施例中详述。
[0089] 根据本发明的上述实施例,在将生理特征信息转换为预定格式的生理特征信息之 后,获取执行操控任务的行为数据的方法还可以包括:根据预定格式的生理特征信息及对 应的视频行为信息建立人因数据库,以及将预定格式的生理特征信息及对应的视频行为信 息保存至人因数据库中;获取预定格式的生理特征信息及视频行为信息所对应的操作行为 数据包括:获取人因数据库中存储的生理特征信息及视频行为信息所对应的工作人员在执 行操控任务时的操作对象、对操作对象执行操控的操作次数以及执行每次操控时的操作时 间,其中,操作行为数据包括操作对象、操作次数以及操作时间。
[0090] 具体地,操作对象可以为屏幕、鼠标等电子产品,操作次数可以为查看屏幕的次 数、点击鼠标的次数;操作时间可以为查看屏幕的时间、点击鼠标的时间,本发明对具体的 操作对象不做限制。
[0091] 下面结合图2和图3详述上述实施例。
[0092] 图2示出了数据平台的结构图。该数据平台包括第一采集系统20 (传感系统)、第二 采集系统40 (影像采集系统)、模拟信号处理单元10、模数转换单元30、数字信号处理单元50 以及上位机60 (工作站)。传感系统采集被试人员(工作人员)的生理特征信息,将其转换成 电信号,利用模拟信号处理单元对其进行处理,处理后的信号通过模数转换单元转换后进 入数字信号处理单元,最后进入工作站进行储存和处理;影像采集系统对被试人员的工作 行为信息(视频行为信息)进行采集,然后直接传送到工作站,经过行为分析软件提取所需 的人因数据,然后把有效数据进行储存和挖掘,如图3所示,在经过数据存储系统和数据统 计系统处理后,可以得到操作员的执行操作的时间和次数、与值长交流的时间和次数、与协 调员交换的时间和次数、电话交流时间和次数以及其他的操作行为数据。
[0093] 本实施例涉及到的大型数字化控制系统可以是数字化核电厂主控室。如对主控室 班组人员的工作行为数据进行采集与挖掘,需要将核电厂主控室班组人员的相关操纵行为 通过影像采集系统进行采集处理之后传送到工作站,然后利用基于VC++6.0平台的行为分 析软件对该影像数据进行分析、处理和挖掘,在本发明实施例中可以得到按照预定的格式 存储的数据,其中,预定的格式包括如下所述的数据库行为属性。
[0094] 数字化核电厂主控室概况:对于数字化控制系统(DCS,Digital Control System) 与状态导向规程(S0P,State Oriented Procedure)的核电厂,事故后主控室中基本人员配 置情况为:值长1名,协调员1名,一回路操纵员(ROl) 1名,二回路操纵员(R02) 1名。对于班组 中不同人员的行为,主要分为值长事故前的画面导航、监视、交流、规程执行,事故后的系统 状态察觉、规程执行监护、系统状态监视;协调员事故前的交班、画面导航、操作、监视、交 流、规程,事故后的系统状态察觉、规程执行、主要任务操作监护、系统状态监视;操作员事 故前的交班、画面导航、操作、监视(察觉)、交流、规程,事故后的系统状态察觉、规程执行、 二类任务管理、主要任务操作。
[0095] 对主控室人员连续3个小时的操控相关行为影像进行采集,传送到工作站进行储 存,建立相应的数据库系统,数据库行为属性设置如下:
[0096] ⑴培训基本信息表属性定义
[0097] 日期:录像拍摄日期/事故演练日期。
[0098] 操作员:执行培训操作的操作员。
[0099] 操作员信息:操作员个人基本信息。
[0100] 任务目标:培训开始交接班时,安排的初始背景任务。
[0101] 演练事故:培训中模拟演练的具体事故。
[0102] 基本情况描述:对操作员进行行为观察后进行的基本描述。
[0103] ⑵录像基本信息表属性定义
[0104] 日期:录像拍摄日期/事故演练日期。
[0105] 录像段名:拍摄的录像所保存的文件名。
[0106] 录像段时长:对应录像段名的时间长度。
[0107] ⑶行为记录表属性定义
[0108] 节点:事故演练中执行规程前与执行规程后的节点划分。
[0109] 日期:录像拍摄日期/事故演练日期。
[oho]录像段:拍摄的录像所保存的文件名。
[0111] 时间:录像中的时间。
[0112] 当前画面:指此前一直呈现在屏幕上的画面。
[0113] 访问目标:指通过某种打开方式需要进入的新画面。
[0114] 操作次数:在当前屏幕上对操作行为中连续计鼠标点击次数,且假设设备微调等 鼠标焦点不移动的连续点击算作1次。
[0115] 拖动窗口:在打开的画面中,因为位置不好,而需要进行的拖动操作。
[0116] 操作失误:对观察到的失误,或主观认为可能是失误而有必要进一步研究的情况。
[0117] 其他失误说明:对观察到的操作失误,进行说明或描述。
[0118] 描述性说明:对录像、事故进程及主要任务操作行为对象等进行简要描述。
[0119] 操作屏幕:由于出现事故较严重导致操作员压力大,为使行为较规范、简洁,操作 员会很好的管理DCS控制台中的六个操作屏幕,将屏幕按固有的形式设定。
[0120] 主任务操作行为包括:
[0121] a.屏幕设置:伴随打开方式中“屏幕设置后链接打开”而进行的操作。
[0122] b.画面链接:通过几次链接操作才能到达访问目标画面的几次连续操作。
[0123] c.状态监视:对系统状态和自动动作的确认。
[0124] d.查看报警:查看报警信息,然后关闭窗口。
[0125] e.确认报警:通过多次连续点击确认报警。
[0126] f.设备开闭或启停:阀门、加热器等处于两种或三种状态时对其进行的离散操作。
[0127] g.设备连续调节:栗或阀门等流量控制设备的连续状态调节。
[0128] h.定值调节:为达到或者实现预先设定的阈值或定值而进行的调节操作。
[0129] i.功率调节:功率窗口上进行的开关、功率、控制棒等一系列连续调节操作,属于 定值调节一种,由于操作较多而单独列出。
[0130] j .规程标记:执行规程过程中的确认和打勾的行为。
[0131] k.其他/未知:录像中没拍到或者看不清楚以及一些其他不属于上述情况的特殊 操作。
[0132] 在完成数据库的建设之后,可以利用基于VC++6.0平台的专用分析软件对上述数 据库数据进行分析。对屏幕管理、操作员ROl操作情况进行分析的方法如下:
[0133] (1)屏幕管理分析
[0134] 使用标准数据库查询语句,如“select操作屏幕,count (操作屏幕)as次数from dcs group by操作屏幕”、“select操作屏幕,count (操作屏幕)as次数from dcs where节点 =’事故前’group by操作屏幕”、“select操作屏幕,count (操作屏幕)as次数from dcs where节点=’事故后’group by操作屏幕”等方式即可对数据进行统计,结果如表1所示。上 述查询语句中的操作屏幕即表1中的全部操作屏幕,次数即表1中的次数,事故前即表1中事 故前操作屏幕,事故后即事故后操作屏幕。
[0135] 表1:
[0136]
Figure CN105117116BD00121
[0138] 需要进一步说明的是表1中,操作屏幕“左一”即为操作员最左边屏幕,依次至“左 六”;“左五-左三”即为当前屏幕在“左五”通过设置后在“左三”打开需要的内容。可见,操作 员对屏幕管理有基本规范要求,但实际操作中有时没有严格要求,在一定程度上会影响操 作绩效,增加失误概率,因此,良好的屏幕管理是非常重要的。
[0139] (2)操作情况分析
[0140] 对ROl操作员的操作行为进行了统计分析,如表2所示。表中含标记指所统计数据 含规程标记的操作,表中不含标记指所统计数据不含规程标记的操作。从表2可以看出,由 于对事故后处理系统操作不如正常运行时熟练、系统操作更加复杂等原因,失误率明显要 高于事故前。在二类任务的操作中,大部分是对一个开关、阀门等对象进行连续的操作,实 际中真正操作的对象数量并不多,但这恰好体现了二类任务操作在DCS系统中的重要性,由 于二类任务的整体失误率较高,且随着操作方式的多样性,还会存在大量的潜在计划冲突 且不能被发现,因此可以通过对这类任务的操作行为进行统计分析,并根据结果对操作人 员的能力进行提升,以减少操控失误。
[0141] 表2:
[0142]
Figure CN105117116BD00131
[0144] (3)操纵员RO行为分析
[0145] 将操纵员的行为主要分为:执行操作、与值长交流、与协调员交流、与操作员R02交 流、电话交流及其它,对操作员RO (其中包括操作员ROl和操作员R02)分析的结果如图4所 示,由图4不难看出:操作员以坐在工作台上执行操作任务为主,在没有具体操作内容时,会 巡盘或监视自己回路系统状态;在事故前各自回路系统故障需要检查设备或要了解现场状 态,在事故后需要现场执行操作单时,操作员会与现场进行电话交流;操作员还会有较少的 交班、记录、广播和找文件等其它行为,具体地,如图4所示,值长发起与协调员的交流的比 例为13.69 %、值长发起与外部电话交流的比例为8.73 %、值长发起与操作员RO交流的比例 为4.1 % ;协调员发起与值长的交流为12.29 %、协调员发起与操作员RO的交流的比例为 21.99 %、协调员发起与外部电话交流的比例为6.09 % ;操作员RO1发起与值长的交流的比 例为2.55 %、操作员RO1发起与外部电话交流的比例为5.89 %、操作员RO1发起与协调员的 交流的比例为14.66 %、操作员RO1发起与操作员R02的交流的比例为1.17 % ;操作员R02发 起与值长的交流的比例为1.82%、操作员R02发起与外部电话交流的比例为5.92%、操作员 R02发起与协调员的交流的比例为8.18 %、操作员R02发起与操作员RO1的交流的比例为 0.88%。除此以外,该平台还能够对其他人员的行为、操纵班组的交流等情况进行统计分 析,在此不 列举。
[0146] 通过上述实施例,可以对采集到的海量人因数据进行有效分析,根据得到的分析 报告对工作人员易出错的环境进行着重培训,从而减低人为因素对现代工业化数控系统的 影响。
[0147] 本实施例中所提供的各个单元与方法实施例对应步骤所提供的使用方法相同、应 用场景也可以相同。当然,需要注意的是,上述单元和系统涉及的方案可以不限于上述实施 例中的内容和场景,且上述单元和系统可以运行在计算机终端或移动终端,可以通过软件 或硬件实现。
[0148] 如图5所示,本发明还提供了一种获取执行操控任务的行为数据的方法,如图5所 示,该方法可以包括如下步骤:
[0149] 步骤S501:采集执行操控任务的工作人员的生理特征信息,并采集工作人员执行 操控任务的视频行为信息。
[0150] 步骤S503:将生理特征信息转换为预定格式的生理特征信息。
[0151] 步骤S505:获取预定格式的生理特征信息及视频行为信息所对应的操作行为数 据。
[0152] 步骤S507:生成操作行为数据的分析报告。
[0153] 采用本发明,采集执行操控任务的工作人员的生理特征信息和采集工作人员执行 操控任务的视频行为信息,将上述采集到的数据传输至上位机的数据存储系统,以便上位 机的数据统计系统对数据进行分析,将上述数据转换为预定格式的生理特征信息,并获取 工作人员的生理特征信息及视频行为信息所对应的操作行为数据,生成报告。通过本发明 的上述系统,解决了现有技术中不能获取数字化控制室操纵人员的行为数据的问题,为获 取海量人因数据并进行有效数据挖掘提供了有效的技术手段。
[0154] 在本发明的上述实施例中,提出了一种新的数据平台,可以通过影像采集系统(第 二采集系统)直接采集班组人员的工作行为记录,然后传送到工作站(上位机)进行储存、加 工以及挖掘。
[0155] 通过上述实施例的系统,能对数字化控制室操纵班组人员的行为与生理数据进行 有效采集、储存以及处理挖掘,该系统可广泛应用于各类数字化工业控制系统,能够获取海 量人因数据并进行有效挖掘,从而有效的解决了现有技术中人因数据采集困难、数据库匮 乏、数据的采集与分析脱节的技术问题。
[0156] 通过本发明的上述实施例,采集执行操控任务的工作人员的生理特征信息可以包 括:采集工作人员的原始生理特征信号,并将原始生理特征信号转换为电信号;对电信号进 行滤波和放大处理,得到处理后的电信号;将处理后的电信号转换为数字信号,并将数字信 号转换为预定格式的生理特征信息,并存储生理特征信息。
[0157] 根据本发明上述实施例,在将生理特征信息转换为预定格式的生理特征信息之 后,方法还包括:根据预定格式的生理特征信息及对应的视频行为信息建立人因数据库,以 及将预定格式的生理特征信息及对应的视频行为信息保存至人因数据库中。
[0158] 上述的获取预定格式的生理特征信息及视频行为信息所对应的操作行为数据可 以包括:获取人因数据库中存储的生理特征信息及视频行为信息所对应的工作人员在执行 操控任务时的操作对象、对操作对象执行操控的操作次数以及执行每次操控时的操作时 间,其中,操作行为数据包括操作对象、操作次数以及操作时间。
[0159] 通过上述实施例,可以通过对采集到的工作人员的生理特征信息和执行操控任务 的视频行为信息进行分析并生成分析报告,从而可以根据分析报告确定控制室的人因问 题;采集执行操控任务的工作人员的生理特征信息,并将该特征信息做进一步的处理之后 存储在数据库中,以便进一步的分析,关于对工作人员的生理特征信息和执行操控任务的 视频行为信息的分析将在下面实施例中详述。
[0160] 从以上的描述中,可以看出,本发明实现了如下技术效果:
[0161] 采用本发明,采集执行操控任务的工作人员的生理特征信息和采集工作人员执行 操控任务的视频行为信息,将上述采集到的数据传输至上位机的数据存储系统,以便上位 机的数据统计系统对数据进行分析,将上述数据转换为预定格式的生理特征信息,并获取 工作人员的生理特征信息及视频行为信息所对应的操作行为数据,生成报告。通过本发明 的上述系统,解决了现有技术中不能获取数字化控制室操纵人员的行为数据的问题,为获 取海量人因数据并进行有效数据挖掘提供了有效的技术手段。
[0162] 显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用 的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成 的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储 在存储装置中由计算装置来执行,或者将它们分别制作成各个集成电路模块,或者将它们 中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的 硬件和软件结合。
[0163] 需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列 的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为 依据本发明,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知 悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明 所必须的。
[0164] 在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部 分,可以参见其他实施例的相关描述。
[0165] 在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式 实现。例如,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,仅仅为一种 逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可 以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间 的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接, 可以是电性或其它的形式。
[0166] 所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显 示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个 网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目 的。
[0167] 另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以 是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单 元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
[0168] 所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用 时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上 或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式 体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机 设备(可为个人计算机、移动终端、服务器或者网络设备等)执行本发明各个实施例所述方 法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(;R0M,Read-0nly Memory)、 随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储 程序代码的介质。
[0169] 以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技 术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修 改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (7)

1. 一种获取执行操控任务的行为数据的系统,用于获取数字化控制室操纵人员的行为 数据,其特征在于,包括: 第一采集系统,用于采集执行操控任务的工作人员的生理特征信息;所述第一采集系 统包括:传感器单元,用于采集所述工作人员的原始生理特征信号,并将所述原始生理特征 信号转换为电信号;模拟信号处理单元,与所述传感器单元连接,用于对所述电信号进行滤 波和放大处理,得到处理后的电信号;模数转换单元,与所述模拟信号处理单元连接,用于 将所述处理后的电信号转换为数字信号;数字信号处理单元,所述数字信号处理单元包括: 第一处理器,与所述模拟信号处理单元连接,用于将所述数字信号转换为预定格式的生理 特征信息;内存,与所述第一处理器连接,用于存储所述预定格式的生理特征信息;接口电 路,与所述第一处理器连接,用于在所述第一处理器的控制信号的控制下连接上位机; 第二采集系统,用于采集所述工作人员执行所述操控任务的视频行为信息; 上位机,包括数据存储系统和数据统计系统, 其中,所述数据存储系统,与所述第一采集系统和所述第二采集系统连接,用于存储所 述工作人员的生理特征信息及对应的所述视频行为信息;所述数据存储系统包括:第二处 理器,与所述接口电路和所述第二采集系统连接,用于获取所述预定格式的生理特征信息 和所述视频行为信息,并根据所述预定格式的生理特征信息及对应的所述视频行为信息建 立人因数据库,以及将所述预定格式的生理特征信息及对应的所述视频行为信息保存至所 述人因数据库中; 所述数据统计系统,与所述数据存储系统连接,用于获取所述工作人员的生理特征信 息及所述视频行为信息所对应的操作行为数据,其中,所述操作行为数据包括操作对象、操 作次数以及操作时间。
2. 根据权利要求1所述的系统,其特征在于,所述传感器单元包括: 眼动信号传感器,用于采集所述工作人员的眼动信号; 声音传感器,用于采集所述工作人员的声音信号; 脑电波传感器,用于采集所述工作人员的脑波信号; 心跳传感器,用于采集所述工作人员的心跳信号; 体温传感器,用于采集所述工作人员的体温信号; 无线发射单元,与所述眼动信号传感器、所述声音传感器、所述脑电波传感器、所述心 跳传感器以及所述体温传感器连接,用于将所述眼动信号、所述声音信号、所述脑波信号、 所述心跳信号以及所述体温信号发送至所述模拟信号处理单元, 其中,所述原始生理特征信号包括:所述眼动信号、所述声音信号、所述脑波信号、所述 心跳信号以及所述体温信号。
3. 根据权利要求2所述的系统,其特征在于,所述模拟信号处理单元包括: 无线接收单元,与所述无线发射单元通过无线网络连接,用于接收所述原始生理特征 信号; 第一信号处理子单元,与所述无线接收单元连接, 其中,所述第一信号处理子单元包括滤波器和放大器,所述滤波器与所述无线接收单 元连接,用于对所述原始生理特征信号进行滤波处理得到滤波信号;所述放大器与所述滤 波器连接,用于对所述滤波信号进行放大处理得到所述处理后的电信号。
4. 根据权利要求1所述的系统,其特征在于,所述数据统计系统包括: 第三处理器,与所述数据存储系统连接,用于获取所述人因数据库中存储的生理特征 信息及所述视频行为信息所对应的所述工作人员在执行所述操控任务时的操作对象、对所 述操作对象执行操控的操作次数以及执行每次操控时的操作时间,并基于所述操作对象、 所述操作次数以及所述操作时间生成数据分析报告。
5. —种利用权利要求1至4中任一所述的系统获取执行操控任务的行为数据的方法,其 特征在于,包括: 采集执行操控任务的工作人员的生理特征信息,并采集所述工作人员执行所述操控任 务的视频行为息; 将生理特征信息转换为预定格式的生理特征信息; 获取所述预定格式的生理特征信息及所述视频行为信息所对应的操作行为数据; 生成所述操作行为数据的分析报告。
6. 根据权利要求5所述的方法,其特征在于,采集执行操控任务的工作人员的生理特征 信息包括: 采集所述工作人员的原始生理特征信号,并将所述原始生理特征信号转换为电信号; 对所述电信号进行滤波和放大处理,得到处理后的电信号; 将所述处理后的电信号转换为数字信号,并将所述数字信号转换为预定格式的生理特 征信息,并存储所述生理特征信息。
7. 根据权利要求5所述的方法,其特征在于, 在将生理特征信息转换为预定格式的生理特征信息之后,所述方法还包括:根据所述 预定格式的生理特征信息及对应的所述视频行为信息建立人因数据库,以及将所述预定格 式的生理特征信息及对应的所述视频行为信息保存至所述人因数据库中; 获取所述预定格式的生理特征信息及所述视频行为信息所对应的操作行为数据包括: 获取所述人因数据库中存储的生理特征信息及所述视频行为信息所对应的所述工作 人员在执行所述操控任务时的操作对象、对所述操作对象执行操控的操作次数以及执行每 次操控时的操作时间, 其中,所述操作行为数据包括所述操作对象、所述操作次数以及所述操作时间。
CN201510225078.8A 2015-05-06 2015-05-06 获取执行操控任务的行为数据的系统和方法 Active CN105117116B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510225078.8A CN105117116B (zh) 2015-05-06 2015-05-06 获取执行操控任务的行为数据的系统和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510225078.8A CN105117116B (zh) 2015-05-06 2015-05-06 获取执行操控任务的行为数据的系统和方法

Publications (2)

Publication Number Publication Date
CN105117116A CN105117116A (zh) 2015-12-02
CN105117116B true CN105117116B (zh) 2018-11-02

Family

ID=54665123

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510225078.8A Active CN105117116B (zh) 2015-05-06 2015-05-06 获取执行操控任务的行为数据的系统和方法

Country Status (1)

Country Link
CN (1) CN105117116B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105721108A (zh) * 2016-02-04 2016-06-29 深圳创达云睿智能科技有限公司 脑电信息数据的传输方法及系统
CN106377265A (zh) * 2016-09-21 2017-02-08 俞大海 基于深度图像和眼动注视信息的行为检测系统
CN109407847A (zh) * 2018-10-31 2019-03-01 北京津发科技股份有限公司 一种多通道人机交互与人机环境测试数据同步系统和方法
CN112137627B (zh) * 2020-09-10 2021-08-03 北京津发科技股份有限公司 智能人因测评和训练方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN202257994U (zh) * 2010-08-26 2012-05-30 交通运输部公路科学研究所 分析驾驶员期望与道路条件协调程度的装置
CN102848918A (zh) * 2012-08-31 2013-01-02 漳州师范学院 基于生理信号采集的疲劳驾驶检测控制系统及其控制方法
CN102988037A (zh) * 2011-09-16 2013-03-27 贾天民 通过对人眼部量值的检测达到警示与控制行为的智能装置
CN103824419A (zh) * 2012-11-16 2014-05-28 西安众智惠泽光电科技有限公司 汽车疲劳驾驶远程监控及实时提醒系统
CN104298722A (zh) * 2014-09-24 2015-01-21 张鸿勋 多媒体交互系统及其方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2080303A4 (en) * 2006-11-03 2013-07-03 Google Inc CONTENT MANAGEMENT SYSTEM

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN202257994U (zh) * 2010-08-26 2012-05-30 交通运输部公路科学研究所 分析驾驶员期望与道路条件协调程度的装置
CN102988037A (zh) * 2011-09-16 2013-03-27 贾天民 通过对人眼部量值的检测达到警示与控制行为的智能装置
CN102848918A (zh) * 2012-08-31 2013-01-02 漳州师范学院 基于生理信号采集的疲劳驾驶检测控制系统及其控制方法
CN103824419A (zh) * 2012-11-16 2014-05-28 西安众智惠泽光电科技有限公司 汽车疲劳驾驶远程监控及实时提醒系统
CN104298722A (zh) * 2014-09-24 2015-01-21 张鸿勋 多媒体交互系统及其方法

Also Published As

Publication number Publication date
CN105117116A (zh) 2015-12-02

Similar Documents

Publication Publication Date Title
CN105117116B (zh) 获取执行操控任务的行为数据的系统和方法
CN106709254B (zh) 一种医疗诊断机器人系统
Preece et al. Using the Viable System Model (VSM) to structure information processing complexity in disaster response
CN103198232B (zh) 数字化主控室工作人员人因可靠性的确定方法及装置
DE112004000271T5 (de) Datenerfassung,-bündelung und -optimierung auf der Basis offener Netze zum Gebrauch in Prozess-Steuersystemen
Lee et al. A template-based methodology for disaster management information systems
CN104794136A (zh) 故障分析方法和装置
CN104714529B (zh) 电动汽车的远程监控平台系统
CA2755216A1 (en) Identify code hierarchy bias in medical priority dispatch systems
Waring et al. Decision‐making in multiagency multiteam systems operating in extreme environments
CN106292496A (zh) 一种地铁监控系统报警管理方法
CN108908342A (zh) 变电站巡检机器人与调度系统业务操作联动系统及方法
CN108880706A (zh) 一种卫星信道链路故障的快速诊断方法
Hazrati‐Marangaloo et al. Detecting outbreaks in temporally dependent networks
Tsai et al. Machine learning in cyber trust: security, privacy, and reliability
CN106202655B (zh) 一种分析模型创建方法和系统
Li et al. Study on operator's SA reliability in digital NPPs. Part 2: Data-driven causality model of SA
CN103268778A (zh) 核电厂数字化主控室操作员的监视转移可靠性判定方法
Boring The use of simulators in human factors studies within the nuclear industry
Song et al. A multidimensional workload assessment method for power grid dispatcher
Mannhardt et al. Revealing Work Practices in Hospitals Using Process Mining.
Cho Design of U-healthcare System based on Smart-cloth
CN109995558A (zh) 故障信息处理方法、装置、设备及存储介质
CN107180307A (zh) 企业应用系统综合监控管理平台
CN107678931A (zh) 阅读行为评价方法及装置、存储介质和电子设备

Legal Events

Date Code Title Description
PB01 Publication
C06 Publication
SE01 Entry into force of request for substantive examination
C10 Entry into substantive examination
GR01 Patent grant
GR01 Patent grant