CN114690898A - 装置、方法和记录介质 - Google Patents

装置、方法和记录介质 Download PDF

Info

Publication number
CN114690898A
CN114690898A CN202111611042.5A CN202111611042A CN114690898A CN 114690898 A CN114690898 A CN 114690898A CN 202111611042 A CN202111611042 A CN 202111611042A CN 114690898 A CN114690898 A CN 114690898A
Authority
CN
China
Prior art keywords
output
unit
detection
information
person
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111611042.5A
Other languages
English (en)
Inventor
秋定征世
樱井康树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yokogawa Electric Corp
Original Assignee
Yokogawa Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yokogawa Electric Corp filed Critical Yokogawa Electric Corp
Publication of CN114690898A publication Critical patent/CN114690898A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/04—Programme control other than numerical control, i.e. in sequence controllers or logic controllers
    • G05B19/042—Programme control other than numerical control, i.e. in sequence controllers or logic controllers using digital processors
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B23/00—Testing or monitoring of control systems or parts thereof
    • G05B23/02—Electric testing or monitoring
    • G05B23/0205—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults
    • G05B23/0218—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults characterised by the fault detection method dealing with either existing or incipient faults
    • G05B23/0224—Process history based detection method, e.g. whereby history implies the availability of large amounts of data
    • G05B23/0227—Qualitative history assessment, whereby the type of data acted upon, e.g. waveforms, images or patterns, is not relevant, e.g. rule based assessment; if-then decisions
    • G05B23/0235—Qualitative history assessment, whereby the type of data acted upon, e.g. waveforms, images or patterns, is not relevant, e.g. rule based assessment; if-then decisions based on a comparison with predetermined threshold or range, e.g. "classical methods", carried out during normal operation; threshold adaptation or choice; when or how to compare with the threshold
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Automation & Control Theory (AREA)
  • Testing And Monitoring For Control Systems (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • Digital Computer Display Output (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明提供装置、方法和记录介质，该装置包括：检测部，检测对象者观看的对象；存储部，将在场景内发生的多个状况的每一个与根据发生了该状况而由对象者观看的对象的历史记录数据关联存储；以及输出部，在发生了多个状况中的任意一个的情况下，输出用于识别在历史记录数据中与该状况关联的对象的信息。

Description

装置、方法和记录介质
技术领域
本发明涉及装置、方法和记录介质。
背景技术
专利文献1记载了“电子设备可以包括检测用户的视线的视线检测部，控制部基于从视线检测部取得的用户的视线信息，取得用户关注的网页内的区域”。
专利文献1：日本专利公开公报特开2015-191551号
发明内容
为了解决上述课题，在本发明的第一方式中提供一种装置。装置可以包括检测对象者观看的对象的检测部。装置可以包括存储部，将在场景内发生的多个状况的每一个与根据发生了该状况而由对象者观看的对象的历史记录数据关联存储。装置可以包括输出部，在发生了多个状况中的任意一个的情况下，输出用于识别在历史记录数据中与该状况关联的对象的信息。
可以是检测部检测一个对象者观看的对象，输出部向其他对象者输出信息。
存储部可以将多个对象与检测部的检测顺序配合着存储。输出部可以按照检测部的检测顺序依次输出多个对象的信息。
装置可以还包括检测场景内的状况的变化的第二检测部。第二检测部可以根据对作为对象的设备进行了操作以及传感器的测量值跨越阈值而变化中的至少一方，检测为场景内的状况发生了变化。
输出部可以通过将用于识别对象的信息显示于对象者所佩戴的显示装置、使作为对象的设备的显示画面变亮、以及以声音表示作为对象的设备中的至少一个，输出用于识别对象的信息。
输出部可以输出用于识别对象的位置的信息。
在本发明的第二的方式中提供一种方法。方法可以包括检测对象者观看的对象的检测阶段。方法可以包括将在场景内发生的多个状况的每一个与根据发生了该状况而由对象者观看的对象的历史记录数据关联存储的存储阶段。方法可以包括在发生了多个状况中的任意一个的情况下，输出用于识别在历史记录数据中与该状况关联的对象的信息的输出阶段。
在本发明的第三方式中提供一种记录有程序的记录介质。计算机通过执行所述程序发挥作为检测对象者观看的对象的检测部的功能。计算机通过执行所述程序发挥作为将在场景内发生的多个状况的每一个与根据发生了该状况而由对象者观看的对象的历史记录数据关联存储的存储部的功能。计算机通过执行所述程序发挥作为在发生了多个状况中的任意一个的情况下，输出用于识别在历史记录数据中与该状况关联的对象的信息的输出部的功能。
另外，上述发明的概要没有列举出本发明的所有必要特征。此外，这些特征组的子组合也可以成为发明。
附图说明
图1表示本实施方式的维护管理系统1。
图2表示输出装置17。
图3表示输出装置17的动作。
图4表示输出装置17的其他动作。
图5表示显示画面。
图6表示可以整体或局部实现本发明的多种方式的计算机2200的例子。
附图标记说明
1维护管理系统，11设备，12维护用终端，15运转控制装置，16接口装置，17输出装置，18资源管理装置，100控制用网络，171摄像部，172检测部，173取得部，174第二检测部，175输入输出控制部，176存储部，177输出部，180显示画面，2200计算机，2201DVD-ROM，2210主控制器，2212CPU，2214RAM，2216图形控制器，2218显示装置，2220输入/输出控制器，2222通信接口，2224硬盘驱动器，2226DVD-ROM驱动器，2230ROM，2240输入/输出芯片，2242键盘。
具体实施方式
下面，通过发明的实施方式对本发明进行说明，但是以下的实施方式并不限定权利要求书所涉及的发明。此外，在实施方式中说明的特征的组合的全部并不是发明的解决手段所必须的。
图1表示本实施方式的维护管理系统1。维护管理系统1进行工厂的维护管理，其包括：多个设备11、维护用终端12、运转控制装置15、接口装置16、输出装置17和资源管理装置18。
在此，作为工厂，除了化学等工业工厂以外，还具有对气田或油田等井口及其周边进行管理控制的工厂、对水力、火力、原子能等发电进行管理控制的工厂、对太阳光或风力等环境发电进行管理控制的工厂、以及对上下水或水坝等进行管理控制的工厂等。多个设备11中的一部分和维护用终端12可以配置于在工厂中执行过程的现场。例如，在现场存在使被测量流体流动的管道、以及设置于管道并测量流体的流量的流量计等。运转控制装置15、多个设备11中的其他一部分、接口装置16、输出装置17和资源管理装置18可以配置于工厂的管理中心。
多个设备11是器具、机械或装置，例如可以是测量工厂的过程中的压力、温度、pH、速度、流量等物理量的传感器，可以是控制任意一个物理量的阀、流量控制阀、开闭阀、泵、风扇、电动机、加热装置、冷却装置等执行器，可以是收集工厂内的异常声音等或发出报警声等的麦克风、扬声器等音响设备，可以是输出各设备的位置信息的位置检测设备，可以是使流体流动的管道，可以是配置于管理中心等室内的开关、照相机、PC(Personal computer个人计算机)等，也可以是其他设备。多个设备11中的各设备11可以是相互不同种类，或者至少一部分的两个以上的设备11可以是相同种类。
多个设备11中的至少一些可以经由控制用网络100以有线或无线方式与运转控制装置15连接。控制用网络100内的通信可以是数字通信，也可以是将数字信号叠加于模拟信号(4～20mA信号等)的混合通信，可以是1000bps～10000bps左右(作为一例为1200bps、2400bps)的速度。控制用网络100内的通信例如可以通过ISA(International Society ofAutomation国际自动化学会)的无线通信协议来进行，作为一例可以通过ISA100、HART(Highway Addressable Remote Transducer可寻址远程传感器高速通道)(注册商标)、BRAIN(注册商标)、FOUNDATION Fieldbus、PROFIBUS等来进行。
各设备11可以具有固有的识别信息(也称为设备固有信息)。设备固有信息是用于唯一识别设备11的信息，在本实施方式中，作为一例，可以是通过通信协议(作为一例为HART)向设备11赋予的序列号、由设备11的制造商设定的序列号、以及用户赋予的设备ID中的至少一个。
维护用终端12访问多个设备11中的一些的设定参数，进行设定参数值的参照、设定和变更等。维护用终端12可以是现场的对象者携带的手持终端(HHT)(作为一例为智能手机或平板PC)，也可以是固定型的PC。在维护用终端12是手持终端的情况下，维护用终端12可以相对于设备11可装拆地连接。
运转控制装置15与多个设备11中的一些进行通信来控制过程。例如，运转控制装置15从作为传感器的设备11取得作为测量数据的过程值，驱动作为执行器的设备11。并且，运转控制装置15可以将过程值供给到接口装置16并从接口装置16接收过程值的目标值。另外，在本实施方式中，作为一例说明在维护管理系统1中具备一个运转控制装置15来控制多个设备11，但是也可以具备多个运转控制装置15，分别对一部分的设备11进行分布控制。运转控制装置15作为一例可以是FCS(Field Control Station现场控制站)。
接口装置16在显示画面上显示工厂中的各种数据，提供对象者与工厂的接口。接口装置16可以根据对象者的操作，经由运转控制装置15控制工厂的过程。例如，接口装置16可以从运转控制装置15接收过程值，并且将过程值的目标值供给到运转控制装置15。此外，接口装置16可以经由运转控制装置15变更设备11的设定参数值。此外，接口装置16可以将至少一部分的设备11与该设备11的设定参数值关联存储。接口装置16作为一例可以是HIS(Human Interface Station人机接口站)，可以由PC等构成。
输出装置17是装置的一例，在工厂的各状况下向对象者输出各种信息。例如，输出装置17可以向对象者显示在各状况下应观看的对象。输出装置17作为一例可以由可穿戴设备、PC、照相机等构成。输出装置17在本实施方式中与工厂的设备11、资源管理装置18、接口装置16、运转控制装置15和维护用终端12等(以下也称为外部装置)能够通信地连接，但是也可以不与外部装置连接。
资源管理装置18进行工厂的在线监视和集中管理。例如，资源管理装置18可以管理运转控制装置15取得的设备11的数据(作为一例为设定参数值或过程值)等。资源管理装置18作为一例可以由PC等构成。
图2表示输出装置17。输出装置17在存储模式下存储对象者观看的对象，在输出模式下显示对象者应观看的对象。输出装置17具有：摄像部171、检测部172、取得部173、第二检测部174、输入输出控制部175、存储部176和输出部177。
摄像部171为了检测对象者的视线而拍摄对象者。摄像部171拍摄对象者的一部分(眼球、头等)。摄像部171可以是眼镜型的可穿戴设备、设置于输出装置17或外部装置的显示画面的外周部的照相机、或设置于管理中心等的天花板或墙壁的监视照相机等。摄像部171可以将拍摄到的数据供给到检测部172。
检测部172检测对象者观看的对象。检测部172可以通过解析从摄像部171供给的图像来检测视线。检测部172可以从眼球的图像中检测双眼的注视位置，将把双眼的中间点与对象者的注视位置连接的直线检测为对象者的视线。检测部172也可以根据对象者的眼、鼻、口等的位置来检测对象者的头的朝向，并且将检测到的朝向的直线检测为对象者的视线。检测部172可以将检测到的视线上的区域或设备11检测为对象。检测部172可以将对象检测为坐标范围，在这种情况下，可以具有表示坐标范围与设备11的对应关系的表。检测部172可以进一步根据GPS或图像检测对象者的位置，并且根据对象者的位置和视线来检测对象。检测部172可以将表示对象的数据供给到输入输出控制部175和第二检测部174。
取得部173从对象者或外部装置取得与工厂中的状况相关的输入。取得部173可以从存在于工厂内的外部装置以有线或无线方式接收各种数据。取得部173可以包括键盘、触摸面板、通信终端和按钮等中的至少一个。取得部173可以将取得内容供给到第二检测部174。
在此，状况可以包括对象者相对于管理中心等建筑物或房间的退出/进入、到达预先确定的时刻、对象者在工厂中进行了作业(作为一例为对外部装置的规定的操作)、以及检测到工厂内的设备11的过程值的异常等中的至少一个。
第二检测部174根据来自取得部173的取得内容，检测场景内的状况的变化或发生。第二检测部174可以根据对作为对象的外部装置(作为一例为接口装置16等)进行操作、以及外部装置(作为一例为传感器等设备11)的测量值跨越阈值而变化中的至少一方，检测为场景内的状况发生了变化。第二检测部174可以使用来自检测部172的数据来检测对象者观看的对象，并且根据判断为对象者观看了特定的对象，检测为状况发生了变化。第二检测部174也可以进一步检测场景的变化。第二检测部174可以对各状况存储用于判断状况的变化或发生的条件(作为一例为阈值或范围等)。第二检测部174可以将表示检测到的状况的变化或发生的数据供给到输入输出控制部175。
在此，场景可以是工厂中的规定的空间，作为一例，可以是摄像部171的可拍摄范围、工厂中的建筑物、房间、作业场所、一个或多个设备11的设置区域、以及输出装置17或外部装置的显示画面中的至少一个。
输入输出控制部175控制存储于存储部176的数据的输入输出。输入输出控制部175可以在存储模式下将状况与对象者观看的对象(作为一例为对象者观看的坐标范围、对象者观看的设备11等)关联存储于存储部176。输入输出控制部175可以根据表示从检测部172供给的对象的数据来确定存储的对象。输入输出控制部175可以根据从第二检测部174供给的数据来确定当前的状况。
输入输出控制部175可以在输出模式下从存储部176取得用于识别与状况关联的对象的信息并供给到输出部177。输入输出控制部175可以根据对象者经由取得部173输入的模式，在存储模式与输出模式之间进行切换。
在此，用于识别对象的信息可以包括对象的坐标范围、对象的设备固有信息、对象的设备11的设置区域、以及表示显示于显示画面的任意一个窗口的信息中的至少一个。
存储部176将在场景内发生的多个状况的每一个与根据发生了该状况而由对象者观看的对象的历史记录数据关联存储。存储部176可以在存储模式下将从输入输出控制部175供给的数据存储为历史记录数据。存储部176可以将多个对象配合着检测部172的检测顺序来存储。
在发生了多个状况中的任意一个的情况下，输出部177输出用于识别在从输入输出控制部175供给的历史记录数据中与该状况关联的对象的信息。输出部177可以输出用于识别对象的位置的信息。输出部177可以按照检测部172的检测顺序依次输出多个对象的信息。输出部177可以通过将用于识别对象的信息显示于对象者所佩戴的显示装置(例如头戴式显示器)、使作为对象的设备11等外部装置的显示画面变亮、以及将作为对象的设备11等外部装置以声音来表示中的至少一个，输出用于识别对象的信息。输出部177可以以有线或无线方式与外部装置连接，以输出用于识别对象的信息。此外，输出部177可以包括用于输出该信息的显示画面或扬声器等。
图3表示输出装置17的动作。输出装置17通过进行步骤S11～S17的处理，支持工厂的维护管理。步骤S11～S17表示输出装置17的存储模式下的动作。另外，该动作可以根据工厂的启动而开始。
在步骤S11中，输出装置17判断是否满足存储开始的条件。如果从对象者或外部装置经由取得部173进行了规定的输入，则输出装置17可以开始存储动作。规定的输入可以包括特定的状况的输入、特定的场景的输入、对象者的识别信息的输入、以及设定存储模式的输入中的至少一个。此外，输出装置17也可以在到达预先确定的时刻时或第二检测部174检测到状况变化时开始存储动作。在满足存储开始的条件的情况下(步骤S11；是)，处理可以转移至步骤S13。在不满足存储开始的条件的情况下(步骤S11；否)，可以待机到满足该条件为止。
在步骤S13中，检测部172根据从摄像部171供给的数据，检测对象者观看的对象。检测部172可以预先存储多个检测预定对象(作为一例为坐标范围、设备固有信息等)，在对象者观看了该对象的情况下检测该对象。检测部172可以对每个场景预先存储多个检测预定对象。在从摄像部171供给的数据表示的坐标范围与检测预定对象的至少一部分一致的情况下，检测部172可以将该检测预定对象检测为被对象者观看的对象。检测部172可以将被对象者观看了超过预先确定的期间(例如1秒)的区域或设备11检测为对象。
在步骤S15中，输入输出控制部175将检测到的对象与当前场景内的当前状况关联存储于存储部176作为历史记录数据。输入输出控制部175可以进一步将对象者的识别信息和对象的检测顺序中的至少一方与该历史记录数据关联存储。输入输出控制部175在经由取得部173从对象者接收到删除历史记录数据中的多个对象中的任意一个的选择的情况下，可以从存储部176的历史记录数据中删除被选择的对象。
在步骤S17中，第二检测部174检测状况是否发生了变化。第二检测部174可以从工厂的外部装置经由取得部173接收各种数据，并且根据该数据来检测状况变化。第二检测部174可以根据场景或状况，使用不同测量值和/或不同阈值来检测状况变化。作为一例，在工厂内的温度传感器表示异常值的状况的情况下，第二检测部174可以在来自该温度传感器的测量温度成为正常范围内时检测为状况发生了变化。此外，在从接口装置16等外部装置经由取得部173接收到表示操作完成的信号的情况下，第二检测部174可以检测为状况发生了变化。此外，在经过了预先确定的时刻或经过了预先确定的期间的情况下，第二检测部174可以检测为状况发生了变化。
在第二检测部174检测到状况变化的情况下(步骤S17；是)，可以结束存储模式。在第二检测部174未检测到状况变化的情况下(步骤S17；否)，可以直到满足该条件为止，检测对象并继续存储模式。另外，如果由第二检测部174检测到新的状况或场景，则输出装置17可以从步骤S13开始针对该新的状况或场景的存储模式。
图4表示输出装置17的其他动作。输出装置17通过进行步骤S21～S27的处理，支持工厂的维护管理。步骤S21～S27表示输出装置17的输出模式下的动作。另外，该动作可以根据工厂的启动而开始。在此，步骤S21～S27的处理中的对象者可以与存储模式的步骤S11～S17的处理中的对象者不同。
在步骤S21中，第二检测部174检测是否发生了状况。第二检测部174可以与步骤S17同样地检测状况发生。作为一例，在工厂内的温度传感器的测量值超过阈值的情况下，第二检测部174可以检测为发生了特定的状况。此外，在从接口装置16等外部装置经由取得部173接收到表示操作开始的信号的情况下，第二检测部174可以检测为发生了状况。此外，如果从对象者经由取得部173接收到表示规定的操作开始的状况的输入，则第二检测部174可以检测为发生了状况。
在步骤S23中，输入输出控制部175确定与第二检测部174检测到的状况对应的多个对象，并且从存储部176的历史记录数据中取得表示该对象和检测顺序的数据。输入输出控制部175将取得的数据供给到输出部177。
在步骤S25中，输出部177按检测顺序输出用于识别多个对象的信息。输出部177可以在输出了表示一个对象的信息之后，在第二检测部174从对象者或外部装置接收到表示与该对象对应的作业完成的输入的情况下，按检测顺序输出表示下一对象的信息。作为一例，输出部177可以使对象者所佩戴的头戴式显示器显示作为对象的设备11的名称、设置区域等。此外，作为一例，输出部177可以输出用于在作为对象的设备11的显示画面中使对象的窗口变亮、增大对象的窗口、或变更对象的窗口的颜色等的控制信息。
在步骤S27中，第二检测部174可以与步骤S17同样地检测状况变化。在第二检测部174检测到状况变化的情况下(步骤S27；是)，输入输出控制部175可以确定与变化后的状况对应的对象。在第二检测部174未检测到状况变化的情况下(步骤S27；否)，可以返回到步骤S25，输出信息直到状况变化为止。另外，在由第二检测部174检测到的变化后的状况不符合输出条件的情况下(例如状况为正常范围的情况下)，输出装置17可以结束输出模式。
按照以上的输出装置17，能够存储熟练者的操作等，并且将与该熟练者相同的操作等有效地交接给初学者。
图5表示作为输出模式下的对象的一例的显示画面180。显示画面180可以是输出装置17的显示画面或工厂内的外部装置的显示画面。在这种情况下，摄像部171可以设置在显示画面180的端部，为了检测视线，拍摄正在观看显示画面180的对象者的眼睛等。
在显示画面180上可以显示工厂内的各设备11中的由对象者选择的一部分的设备11的过程值。例如，在显示画面180上可以设置用于选择工厂内的设备11的设置区域的选择区域1641、以及显示属于选择的设置区域的各设备11的过程值的数据显示区域1642。在任意一个设备11的过程值发生异常，输出装置17判断为发生了状况的情况下，输出部177可以变更该过程值的数据显示区域1642的显示方式。
在本图中，作为一例，在选择区域1641中显示工厂内的建筑物和房间作为设备11的设置区域的选项，选择了“B栋”的“a室”，设置于该设置区域的“设备(1)”～“设备(4)”的过程值的历史记录显示于数据显示区域1642(1)～1642(4)。此外，在“设备(1)”的过程值发生了异常而该数据显示区域1642(1)是应观看的对象的情况下，通过输出部177的控制，变更了数据显示区域1642(1)的背景颜色。此外，由于检测到对象者的视线位于区域1643，所以输出装置17判断为状况没有变化，继续数据显示区域1642(1)的背景颜色的变更。
另外，在本实施方式中输出装置17在不同的时机对不同的对象者执行输出模式和存储模式，但是也可以对相同的对象者并行地执行输出模式和存储模式。作为一例，输出装置17在输出模式下，在检测到对象者观看了未存储于存储部176的新的对象的情况下，可以在存储模式下存储该新的对象。
此外，摄像部171可以安装于对象者(例如头、肩等)，拍摄对象者所朝向的方向。例如，摄像部171可以拍摄安装于设备11的代码(作为一例为条形码、QR码(注册商标))等，检测部172通过该代码来识别设备11，输入输出控制部175将该设备11作为对象来存储于存储部176。
此外，输出装置17可以不具有摄像部171，在这种情况下，检测部172可以从外部的设备(例如可穿戴设备、照相机等)接收用于检测对象者的视线的数据。
此外，输出装置17也可以是工厂的设备11、资源管理装置18、接口装置16、运转控制装置15或维护用终端12的一部分。
此外，本发明的各种实施方式可以参照流程图和框图进行记载，在此模块可以表示(1)执行操作的过程的阶段或(2)具有执行操作的作用的装置的部分。特定的阶段和部分可以通过专用电路、与存储在计算机可读介质上的计算机可读指令一起供给的可编程电路和/或与存储在计算机可读介质上的计算机可读指令一起供给的处理器来实现。专用电路可以包括数字和/或模拟硬件电路，也可以包括集成电路(IC)和/或分立电路。可编程电路可以包括可重构硬件电路，该可重构硬件电路包括逻辑AND、逻辑OR、逻辑XOR、逻辑NAND、逻辑NOR和其他逻辑操作、触发器、寄存器、现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)等存储器元件等。
计算机可读介质可以包括能够存储由适当的设备执行的指令的任意的有形设备，其结果，具有存储在其中的指令的计算机可读介质包括包含为了制作用于执行由流程图或框图指定的操作的手段而能够执行的指令的产品。作为计算机可读介质的例子可以包括：电子存储介质、磁存储介质、光存储介质、电磁存储介质、半导体存储介质等。作为计算机可读介质的更具体的例子可以包括：软(注册商标)盘、磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或闪存器)、电可擦除可编程只读存储器(EEPROM)、静态随机存取存储器(SRAM)、光盘只读存储器(CD-ROM)、数字多用途盘(DVD)、蓝光(RTM)碟、存储棒、集成电路卡等。
计算机可读指令包括由包括汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微码、固件指令、状态设定数据、或Smalltalk(注册商标)、JAVA(注册商标)、C++等面向对象编程语言、和“C”编程语言或同样的编程语言那样的现有的过程型编程语言的一个或多个编程语言的任意组合描述的源代码和目标代码中的任意一个。
计算机可读指令可以经由本地或局域网(LAN)、互联网等广域网(WAN)提供给通用计算机、特殊目的的计算机或其他可编程的数据处理装置的处理器或可编程电路，并且为了制作用于执行由流程图或框图指定的操作的手段而执行计算机可读指令。作为处理器的例子包括：计算机处理器、处理单元、微处理器、数字信号处理器、控制器、微控制器等。
图6表示可以整体或局部实现本发明的多种方式的计算机2200的例子。通过安装于计算机2200的程序，计算机2200能够发挥作为与本发明的实施方式的装置相关联的操作或该装置的一个或多个部分的功能、或者执行该操作或该一个或多个部分、和/或计算机2200能够执行本发明的实施方式的过程或该过程的阶段。为了使计算机2200执行与本说明书记载的流程图和框图的模块中的几个或全部相关联的特定的操作，可以由CPU2212执行这种程序。
本实施方式的计算机2200包括CPU2212、RAM2214、图形控制器2216和显示装置2218，它们通过主控制器2210相互连接。计算机2200还包括通信接口2222、硬盘驱动器2224、DVD-ROM驱动器2226和IC卡驱动器那样的输入/输出单元，它们经由输入/输出控制器2220与主控制器2210连接。计算机还包括ROM2230和键盘2242那样的传统的输入/输出单元，它们经由输入/输出芯片2240与输入/输出控制器2220连接。
CPU2212按照存储在ROM2230和RAM2214内的程序而动作，由此控制各单元。图形控制器2216获取在RAM2214内提供的帧缓存器等或其自身中的由CPU2212生成的图像数据，并且在显示装置2218上显示图像数据。
通信接口2222能够经由网络与其他电子设备进行通信。硬盘驱动器2224存储由计算机2200内的CPU2212使用的程序和数据。DVD-ROM驱动器2226从DVD-ROM2201读取程序或数据，经由RAM2214向硬盘驱动器2224提供程序或数据。IC卡驱动器从IC卡读取程序和数据和/或将程序和数据写入IC卡。
ROM2230在其中存储激活时由计算机2200执行的引导程序等和/或依赖于计算机2200的硬件的程序。输入/输出芯片2240也可以经由并行端口、串行端口、键盘端口、鼠标端口等使各种输入/输出单元与输入/输出控制器2220连接。
由DVD-ROM2201或IC卡那样的计算机可读介质提供程序。程序从计算机可读介质读取，并且安装于也作为计算机可读介质的例子的硬盘驱动器2224、RAM2214或ROM2230，并由CPU2212执行。在这些程序内描述的信息处理被读取到计算机2200，从而带来程序与上述各种类型的硬件资源之间的协作。装置或方法可以通过伴随计算机2200的使用来实现信息的操作或处理而构成。
例如，在计算机2200和外部设备之间执行通信的情况下，CPU2212可以执行加载于RAM2214的通信程序，基于在通信程序中描述的处理对通信接口2222指示通信处理。通信接口2222在CPU2212的控制下，读取存储于在RAM2214、硬盘驱动器2224、DVD-ROM2201或IC卡那样的记录介质内提供的发送缓冲处理区域的发送数据，将读取到的发送数据发送到网络，或者将从网络接收到的接收数据写入到在记录介质上提供的接收缓冲处理区域等。
此外，CPU2212可以将存储于硬盘驱动器2224、DVD-ROM驱动器2226(DVD-ROM2201)、IC卡等那样的外部记录介质的文件或数据库的全部或必要的部分读取到RAM2214，并对RAM2214上的数据执行各种类型的处理。接着，CPU2212将处理后的数据写回到外部记录介质。
如各种类型的程序、数据、表和数据库那样的各种类型的信息可以存储于记录介质并接受信息处理。CPU2212对从RAM2214读取的数据执行本公开各处记载的各种类型的处理并将结果写回到RAM2214，该各种类型的处理包括由程序的指令序列指定的各种类型的操作、信息处理、条件判断、条件分支、无条件分支、信息的检索/置换等。此外，CPU2212可以检索记录介质内的文件、数据库等中的信息。例如，在分别具有与第二属性的属性值相关联的第一属性的属性值的多个条目存储在记录介质内的情况下，CPU2212可以从该多个条目中检索与指定第一属性的属性值的条件一致的条目，并且读取存储在该条目内的第二属性的属性值，由此获取与满足预先确定的条件的第一属性相关联的第二属性的属性值。
以上说明的程序或软件模块可以存储在计算机2200上或计算机2200附近的计算机可读介质中。此外，在与专用通信网络或互联网连接的服务器系统内提供的硬盘或RAM那样的记录介质能够用作计算机可读介质，由此，经由网络将程序提供给计算机2200。
以上，利用实施方式对本发明进行了说明，但是本发明的技术范围并不限定于上述实施方式记载的范围。对本领域技术人员而言能够对上述实施方式进行各种变更或改良是显而易见的。根据权利要求书的记载可知，进行了这种变更或改良的方式也可以包含于本发明的技术范围。
在权利要求书、说明书和附图中所示的装置、系统、程序和方法中的动作、过程、步骤和阶段等各处理的执行顺序没有特别明示为“更早”、“之前”等，此外，应注意的是只要在后一处理中没有使用前一处理的输出，则能够以任意的顺序实现。关于权利要求书、说明书和附图中的动作流程，即使为了便于说明而使用“首先，”、“接着，”等进行了说明，也不意味着必须按照该顺序实施。

Claims (8)

1.一种装置，其特征在于包括：
检测部，检测对象者观看的对象；
存储部，将在场景内发生的多个状况的每一个与根据发生了该状况而由对象者观看的对象的历史记录数据关联存储；以及
输出部，在发生了所述多个状况中的任意一个的情况下，输出用于识别在所述历史记录数据中与该状况关联的对象的信息。
2.根据权利要求1所述的装置，其特征在于，
所述检测部检测一个对象者观看的对象，
所述输出部向其他对象者输出信息。
3.根据权利要求1或2所述的装置，其特征在于，
所述存储部将多个对象与所述检测部的检测顺序配合着存储，
所述输出部按照所述检测部的检测顺序依次输出多个对象的所述信息。
4.根据权利要求1至3中任意一项所述的装置，其特征在于，
还包括检测所述场景内的状况的变化的第二检测部，
所述第二检测部根据对作为所述对象的设备进行了操作以及传感器的测量值跨越阈值而变化中的至少一方，检测为所述场景内的状况发生了变化。
5.根据权利要求1至4中任意一项所述的装置，其特征在于，所述输出部通过将用于识别所述对象的信息显示于对象者所佩戴的显示装置、使作为所述对象的设备的显示画面变亮、以及以声音表示作为所述对象的设备中的至少一个，输出用于识别所述对象的信息。
6.根据权利要求1至5中任意一项所述的装置，其特征在于，所述输出部输出用于识别所述对象的位置的信息。
7.一种方法，其特征在于包括：
检测阶段，检测对象者观看的对象；
存储阶段，将在场景内发生的多个状况的每一个与根据发生了该状况而由对象者观看的对象的历史记录数据关联存储；以及
输出阶段，在发生了所述多个状况中的任意一个的情况下，输出用于识别在所述历史记录数据中与该状况关联的对象的信息。
8.一种记录有程序的记录介质，其特征在于，
计算机通过执行所述程序发挥作为检测部、存储部和输出部的功能，
所述检测部检测对象者观看的对象，
所述存储部将在场景内发生的多个状况的每一个与根据发生了该状况而由对象者观看的对象的历史记录数据关联存储，
所述输出部在发生了所述多个状况中的任意一个的情况下，输出用于识别在所述历史记录数据中与该状况关联的对象的信息。
CN202111611042.5A 2020-12-28 2021-12-27 装置、方法和记录介质 Pending CN114690898A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020219165A JP7222388B2 (ja) 2020-12-28 2020-12-28 装置、方法及びプログラム
JP2020-219165 2020-12-28

Publications (1)

Publication Number Publication Date
CN114690898A true CN114690898A (zh) 2022-07-01

Family

ID=78958001

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111611042.5A Pending CN114690898A (zh) 2020-12-28 2021-12-27 装置、方法和记录介质

Country Status (4)

Country Link
US (1) US20220206574A1 (zh)
EP (1) EP4020138A1 (zh)
JP (1) JP7222388B2 (zh)
CN (1) CN114690898A (zh)

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19953739C2 (de) * 1999-11-09 2001-10-11 Siemens Ag Einrichtung und Verfahren zur objektorientierten Markierung und Zuordnung von Information zu selektierten technologischen Komponenten
US20160335731A1 (en) * 2010-05-05 2016-11-17 Site 10.01, Inc. System and method for monitoring and managing information
JP2015191551A (ja) 2014-03-28 2015-11-02 株式会社ニコン 電子機器
US9361011B1 (en) * 2015-06-14 2016-06-07 Google Inc. Methods and systems for presenting multiple live video feeds in a user interface
JP6646511B2 (ja) * 2016-04-14 2020-02-14 株式会社フジタ 技能伝承システム及び方法
US10319128B2 (en) * 2016-09-26 2019-06-11 Rockwell Automation Technologies, Inc. Augmented reality presentation of an industrial environment
JP2020098405A (ja) * 2018-12-17 2020-06-25 日本電気株式会社 監視システム、監視方法、およびプログラム
JP7109395B2 (ja) * 2019-03-08 2022-07-29 株式会社日立製作所 作業支援システム、作業支援装置、及び作業支援方法
US11235734B2 (en) * 2020-02-07 2022-02-01 Toyota Motor Engineering & Manufacturing North America, Inc. Proximity based vehicle security system

Also Published As

Publication number Publication date
EP4020138A1 (en) 2022-06-29
US20220206574A1 (en) 2022-06-30
JP7222388B2 (ja) 2023-02-15
JP2022104138A (ja) 2022-07-08

Similar Documents

Publication Publication Date Title
US10878240B2 (en) Augmented reality user interface on mobile device for presentation of information related to industrial process, control and automation system, or other system
US10395222B2 (en) Information display method, information display apparatus, information display system, and non-transitory computer readable storage medium
EP3232380B1 (en) Device maintenance apparatus, method for maintaining device, and storage medium
JP7481537B2 (ja) 情報処理システム、情報処理方法及び情報処理装置
CN114690898A (zh) 装置、方法和记录介质
CN114598935A (zh) 装置、方法以及记录介质
US20190302722A1 (en) Device management apparatus, device management method, storage medium, and device management system
JP7347409B2 (ja) 装置、方法及びプログラム
EP4009155B1 (en) Display control apparatus, method, and program
CN114697612A (zh) 装置、方法和记录介质
US11102616B2 (en) Method of tracking objects using thermostat
JP2018156373A (ja) 設備保全情報管理システム及び設備保全情報管理方法
EP3588399A1 (en) Apparatus, method and recording medium for displaying maintenance information
JP7243691B2 (ja) 装置、システム、方法およびプログラム
US20230350875A1 (en) Data processing apparatus, data processing method, and recording medium
JP7372198B2 (ja) 表示システム、表示装置及び表示方法
CN114358459A (zh) 装置、方法以及记录介质
CN115903674A (zh) 监视装置、监视方法以及计算机可读介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination