CN108874610A - 自动化影像监测方法 - Google Patents

Abstract

本发明公开了一种自动化影像监测方法包括撷取屏幕影像；若屏幕影像于预定时间内保持不变，产生监控结果信息；系统主机接收屏幕影像及监控结果信息；及根据屏幕影像及监控结果信息，系统主机执行除错程序。

Description

自动化影像监测方法

技术领域

本发明涉及一种自动化影像监测方法，特别是涉及一种能节省大量人力的自动化影像监测方法。

背景技术

随着科技日新月异，各种生产线、自动化制作流程、或是各种精细的加工流程，甚至一些游戏或影音处理，均仰赖计算机而进行辅助操作。因此，计算机的操作稳定性、程序执行的流畅度、以及计算机发生故障的机率将成为非常重要的效能指标。为了降低计算机运行时发生错误的风险，一般计算机在实际上线前会先进行系统稳定性测试以及系统效能测试。计算机在通过行系统稳定性测试以及系统效能测试的标准后才会上线而正式使用。

计算机在进行测试时，测试员必须长时间在计算机前面观察。当计算机运行到一半发生异状时必须手动记录错误信息并想办法除错。举例而言，计算机可能会先经过烧机测试(Burn-in Test)，以处理器接近满载的情况测试系统稳定度。测试员必须连续观察计算机屏幕是否有不稳定或是错误的信息出现。若计算机运行到一半发生过热的情况而导致系统失败，屏幕可能会出现蓝底白字的错误信息。测试员即可将错误的时间以及错误的状态记录下来，并停止计算机执行后续程序，再想办法除错。然而，计算机在进行测试时，由于测试员必须长时间在计算机前面观察，因此会花费大量的人力。并且，若测试员不是连续地观察计算机(例如半小时观察一次)，当计算机出现异常而画面发生停顿的现象时，测试员将无法实时解决问题，因此也会造成测试效率低落以及时间的损失。

发明内容

本发明实施例提出一种自动化影像监测方法，包括输入字组，启动摄影模块以撷取屏幕影像，若屏幕影像于预定时间内保持不变，进行影像侦测程序以侦测屏幕影像是否包括条形码影像，若屏幕影像包括条形码影像，分析并译码条形码影像以判断条形码影像是否符合字组，及根据条形码影像是否符合字组，产生对应的监控结果信息。

本发明另一个实施例提出一种自动化影像监测方法，包括输入字组，启动摄影模块以撷取屏幕影像，若屏幕影像于预定时间内保持不变，进行影像侦测程序以侦测屏幕影像是否包括文字影像，若屏幕影像包括文字影像，分析并译码文字影像以判断文字影像是否符合字组，及根据文字影像是否符合字组，产生对应的监控结果信息。

本发明另一个实施例提出一种自动化影像监测方法，包括启动摄影模块以撷取屏幕影像，及若屏幕影像于预定时间内保持不变，产生监控结果信息。

附图说明

图1是本发明的自动化影像监测系统的实施例的架构图。

图2是图1的自动化影像监测系统，操作于条形码影像辨识模式下的自动化影像监测方法的流程图。

图3是图1的自动化影像监测系统，操作于文字影像辨识模式下的自动化影像监测方法的流程图。

图4是图1的自动化影像监测系统，操作于默认影像辨识模式下的自动化影像监测方法的流程图。

其中，附图标记说明如下：

100 自动化影像监测系统

PC1 计算机

MB 主板

GPIO1及GPIO2 通用型的输入输出接口

PC2 系统主机

UE 用户设备

10 输出单元

11 屏幕装置

12 摄影模块

13 处理单元

14 存取单元

15 通信软件

16 收发器

S201至S217 步骤

S301至S317 步骤

S401至S408 步骤

具体实施方式

图1是本发明的自动化影像监测系统100的实施例的架构图。自动化影像监测系统100包括计算机PC1、屏幕装置11、摄影模块12、系统主机PC2、以及用户设备UE。计算机PC1可视为待测试的计算机。本发明的「计算机」可为个人计算机、笔记本电脑、工作站、或服务器控制机台等设备。计算机PC1具有主板MB，以驱动计算机PC1中所有硬件/软件。主板MB包括输出单元10以及通用型的输入输出接口(General-Purpose Input/Output)GPIO1。输出单元10可为任何影音信号的输出端口，例如通用串行总线(Universal Serial Bus)、视频图形数组端口(Video Graphics Array Connector)、高画质多媒体接口端口(HighDefinition Multimedia Interface Connector)等等。通用型的输入输出接口GPIO1端口的接脚(Pin)可供用户以程控的方式自由使用。屏幕装置11耦接于主板MB上的输出单元10，用以显示计算机PC目前执行程序的状态。摄影模块12可设置于屏幕装置11的前方，用以撷取屏幕装置11所显示的屏幕影像。摄影模块12可为任何的影像撷取设备，例如数字相机或数字摄影机等等。系统主机PC2也可为一台计算机，包括处理单元13、存取单元14、通用型的输入输出接口GPIO2、通信软件15、以及收发器16。处理单元13可为中央处理器或任何具备可程序化逻辑处理能力的运算单元。处理单元13耦接于摄影模块12，用以处理并分析摄影模块12所撷取的屏幕影像。存取单元14耦接于处理单元13，用以储存屏幕影像以及被处理单元13所分析的数据。存取单元14可为任何形式的内存，例如随机处理内存、非挥发性内存、或是硬盘等等。通用型的输入输出接口GPIO2耦接于处理单元13以及计算机PC1内的通用型的输入输出接口GPIO1。因此，处理单元13可以通过通用型的输入输出接口GPIO2以及通用型的输入输出接口GPIO1，控制计算机PC1内的主板MB，以排除计算机PC1的错误。通信软件15可设置于系统主机PC2的硬盘中，并与存取单元14和处理单元13进行数据沟通。通信软件15可为任何具备发送数据能力的应用程序，例如电子邮件程序(Outlook Express)。然而，自动化影像监测系统100的任何合理的硬件或软件的变更皆属于本发明所揭露的范畴。例如，通信软件15也可以安装在存取单元15中。因此，处理单元13可利用通信软件15，控制收发器16，使存取单元14内的数据通过收发器16对外传输。在本实施例中，收发器16可将存取单元14内的数据通过有线网络或无线网络传送至用户设备UE。用户设备UE可为可携式电子设备，例如智能型手机、笔记本电脑或是平板计算机等等。在自动化影像监测系统100中，当计算机PC1的主板MB发生错误时，会导致屏幕装置11所显示的屏幕影像发生停格。由于摄影模块12可持续地监控屏幕影像，因此当屏幕影像发生异常时，系统主机PC2会实时地进行错误分析，并通过通用型的输入输出接口GPIO2以及通用型的输入输出接口GPIO1，控制计算机PC1内的主板MB，以排除计算机PC1的错误。自动化影像监测系统100的执行自动化影像监测的流程描述于下。

本发明的自动化影像监测方法可分为条形码影像辨识模式、文字影像辨识模式、以及默认影像辨识模式。用户可由三种模式中选择一种影像辨识模式进行监控。以下将对这三种影像辨识模式进行说明。

图2是自动化影像监测系统100，操作于条形码影像辨识模式下的自动化影像监测方法的流程图。条形码影像辨识模式下的自动化影像监测方法包括步骤S201至步骤S217，如下所述。

步骤S201：启动影像监控程序；

步骤S202：输入字组；

步骤S203：启动摄影模块12；

步骤S204：摄影模块12持续监控屏幕影像，并判断屏幕影像是否于预定时间内保持不变？若是，执行步骤S205；若否，返回步骤S204以持续撷取屏幕装置11的屏幕影像；

步骤S205：进行影像侦测程序，以侦测屏幕影像是否包括条形码影像？若否，执行步骤S207；若是，执行步骤S206；

步骤S206：分析并译码条形码影像以判断条形码影像是否符合字组？若否，执行步骤S207；若是执行步骤S213；

步骤S207：产生非预期的错误信息；

步骤S208：系统主机PC2接收屏幕影像及非预期的错误信息；

步骤S209：将屏幕影像储存于系统主机PC2；

步骤S210：系统主机PC2利用通信软件15将非预期的错误信息及屏幕影像发送至用户设备UE；

步骤S211：用户利用用户设备UE，控制系统主机PC2执行除错程序；

步骤S212：系统主机PC2通过通用型的输入输出接口GPIO2及GPIO1，控制显示屏幕影像的计算机PC1，以排除计算机PC1的错误，并返回步骤S203以持续撷取屏幕装置11的屏幕影像；

步骤S213：产生监控结果信息；

步骤S214：系统主机PC2接收屏幕影像及监控结果信息；

步骤S215：将屏幕影像储存于系统主机PC2；

步骤S216：根据屏幕影像及监控结果信息，系统主机PC2执行除错程序；

步骤S217：系统主机PC2通过通用型的输入输出接口GPIO2及GPIO1，控制显示屏幕影像的计算机PC1，以排除计算机PC1的错误，并返回步骤S203以持续撷取屏幕装置11的屏幕影像。

各步骤描述于下。在步骤S201中，用户若想利用系统主机PC2监控计算机PC1，可先启动影像监控程序，并将监控的影像辨认模式选择在条形码影像辨识模式。在此实施例中，「条形码影像」的定义可为任何条形码的影像，例如快速响应矩阵码(Quick ResponseCode，QR Code)的二维影像、条形码(Bar Code)的一维影像等等，任何经编码后的影像都属于本发明所揭露的范畴。在步骤S202中，用户可输入对应于条形码影像的字组，例如输入译码字组或是辨识字组(举例而言，输入英文和数字组成的字组)。随后，于步骤S203中，系统主机PC2会启动摄影模块12以撷取屏幕装置11的屏幕影像。在步骤S204中，摄影模块12会持续监控屏幕影像，并判断屏幕影像是否于预定时间内保持不变？举例而言，若是摄影模块12所监控的屏幕影像已经停格了一分钟以上，则表示计算机PC1的主板MB可能出现错误，导致系统停顿在某个时间点而无法继续执行。此时，系统主机PC2就会进行步骤S205，进行进一步的分析。相反地，若是摄影模块12所监控的屏幕影像没有发生停格的情况，则表示计算机PC1的主板MB仍运作在正常状态，因此，会返回步骤S204以持续撷取屏幕装置11的屏幕影像。在步骤S205中(屏幕影像已经发生停格的情况)，系统主机PC2会进行影像侦测程序，以侦测屏幕影像是否包括条形码影像？由于本模式是以条形码影像来判定计算机PC1发生错误的状态，因此，系统主机PC2会试图由摄影模块12所监控的屏幕影像中，找出特定的关键条形码影像。若条形码影像无法被侦测(例如计算机PC1发生错误的位置在显示适配器，导致条形码影像完全失真)，则系统主机PC2会根据步骤S207，产生一个非预期的错误信息。若条形码影像可以被侦测，则系统主机PC2会根据步骤S206，分析并译码条形码影像以判断条形码影像是否符合字组。由于对应错误状态的字组已于步骤S202设定完成，因此当PC1发生错误时，若条形码影像经译码后符合先前设定的字组，表示PC1的错误是在用户的预期中。因此，根据步骤S213，监控结果信息会被产生。相反地，若条形码影像经译码后不符合先前设定的字组，表示PC1的错误是不是在用户的预期中。因此，根据步骤S207，非预期的错误信息会被产生。并且，监控结果信息或非预期的错误信息可包括错误发生的时间、画面停格时间、系统运行时间、或是任何关于屏幕影像的信息。监控结果信息或非预期的错误信息可由摄影模块12产生，亦可由系统主机PC2产生。本发明不限制监控结果信息或非预期的错误信息系由何种硬设备产生。

如前述提及，非预期的错误信息的产生条件有两种。第一种为条形码影像无法由屏幕影像被侦测出来，第二种为条形码影像可以由屏幕影像被侦测出来，但条形码影像被译码后与先前设定的字组不匹配。而对应预期错误的监控结果信息的产生条件为条形码影像可以由屏幕影像被侦测出来，且条形码影像被译码后与先前设定的字组匹配。以下将针对非预期的错误信息产生的后续步骤S208至S212，以及对应预期错误的监控结果信息产生的后续步骤S214至S217进行说明。于步骤S208中，在系统主机PC2接收屏幕影像及非预期的错误信息。随后，根据步骤S209，系统主机PC2会将屏幕影像储存，例如储存至存取单元14中。由于非预期的错误的除错方法及数据并不在系统主机PC2的数据库中，因此若欲对计算机PC1进行除错，必须要经由管理人员(用户)的辅助而除错。因此，根据步骤S210，系统主机PC2可利用通信软件15将非预期的错误信息及屏幕影像发送至用户设备UE。因此，对于远程的用户而言，也可以立即理解错误的位置和原因。接着，根据步骤S211，用户利用用户设备UE，控制系统主机PC2执行除错程序。最后，根据步骤S212，系统主机PC2将可通过通用型的输入输出接口GPIO2及GPIO1，控制显示屏幕影像的计算机PC1，以排除计算机PC1的错误，并返回步骤S203以持续撷取屏幕装置11的屏幕影像。因此对于非预期性的错误而言，由于系统主机PC2会将数据传送至远程的用户，因此用户可实时通过系统主机PC2对计算机PC1进行除错。然而，用户也可以直接操作系统主机PC2甚至直接操作计算机PC1而进行除错，任何合理的步骤变动均属于本发明所揭露的范畴。

在预期错误的监控结果的状况下，于步骤S214，系统主机PC2接收屏幕影像及监控结果信息。随后，根据步骤S215，系统主机PC2会将屏幕影像储存，例如储存至存取单元14中。由于预期错误的除错方法及数据在系统主机PC2的数据库中，因此系统主机PC2可以直接以自动化的方式对计算机PC1除错。在步骤S216，根据屏幕影像及监控结果信息，系统主机PC2执行除错程序。最后，根据步骤S217，系统主机PC2将可通过通用型的输入输出接口GPIO2及GPIO1，控制显示屏幕影像的计算机PC1，以排除计算机PC1的错误，并返回步骤S203以持续撷取屏幕装置11的屏幕影像。因此对于预期的错误而言，由于系统主机PC2可以直接以自动化的方式对计算机PC1除错，因此可以大幅减少人力的消耗。然而，如前文提及，任何步骤合理的变更皆属于本发明的范畴。因此，系统主机PC2也可以利用通信软件15将预期的监控结果信息及屏幕影像发送至用户设备UE。因此，虽然在预期错误的监控结果的状况下，系统主机PC2可以直接以自动化的方式对计算机PC1除错。但本发明亦保留了用户可以微调或控制除错程序的弹性，并且，系统主机PC2也可以利用通信软件15将实时除错的数据传送至用户设备UE，以让用户能随时掌握除错的进度和结果。

图3是自动化影像监测系统100，操作于文字影像辨识模式下的自动化影像监测方法的流程图。文字影像辨识模式下的自动化影像监测方法包括步骤S301至步骤S317，如下所述。

步骤S301：启动影像监控程序；

步骤S302：输入字组；

步骤S303：启动摄影模块12；

步骤S304：摄影模块12持续监控屏幕影像，并判断屏幕影像是否于预定时间内保持不变？若是，执行步骤S305；若否，返回步骤S304以持续撷取屏幕装置11的屏幕影像；

步骤S305：进行影像侦测程序，以侦测屏幕影像是否包括文字影像？若否，执行步骤S307；若是，执行步骤S306；

步骤S306：分析文字影像以判断文字影像是否符合字组？若否，执行步骤S307；若是执行步骤S313；

步骤S307：产生非预期的错误信息；

步骤S308：系统主机PC2接收屏幕影像及非预期的错误信息；

步骤S309：将屏幕影像储存于系统主机PC2；

步骤S310：系统主机PC2利用通信软件15将非预期的错误信息及屏幕影像发送至用户设备UE；

步骤S311：用户利用用户设备UE，控制系统主机PC2执行除错程序；

步骤S312：系统主机PC2通过通用型的输入输出接口GPIO2及GPIO1，控制显示屏幕影像的计算机PC1，以排除计算机PC1的错误，并返回步骤S303以持续撷取屏幕装置11的屏幕影像；

步骤S313：产生监控结果信息；

步骤S314：系统主机PC2接收屏幕影像及监控结果信息；

步骤S315：将屏幕影像储存于系统主机PC2；

步骤S316：根据屏幕影像及监控结果信息，系统主机PC2执行除错程序；

步骤S317：系统主机PC2通过通用型的输入输出接口GPIO2及GPIO1，控制显示屏幕影像的计算机PC1，以排除计算机PC1的错误，并返回步骤S303以持续撷取屏幕装置11的屏幕影像。

在文字影像辨识模式下的自动化影像监测方法的流程中，步骤S301至S317的运作方式类似于前述的步骤S201至步骤S207的运作方式。差异在于步骤S305，系统主机PC2会进行影像侦测程序，以侦测屏幕影像是否包括文字影像？以及步骤S306，系统主机PC2会分析文字影像以判断文字影像是否符合字组？由于步骤S301至步骤S317为在文字影像辨识模式下的步骤，因此，系统主机PC2会试图由摄影模块12所监控的屏幕影像中，找出特定的关键文字影像。举例而言，用户可以先于步骤S302中设定计算机PC1发生错误时，会出现的「Error404」的关键词。因此当计算机PC1发生屏幕停格时，系统主机PC2会试图由摄影模块12所监控的屏幕影像中，根据步骤S305判断是否有文字影像，再根据步骤S306，辨识文字影像，以判断错误的关键词是否为「Error404」。换句话说，前述提及的条形码影像辨识模式中，当计算机PC1发生屏幕停格时，系统主机PC2会试图由摄影模块12所监控的屏幕影像中，辨识出关键的条形码影像。而在文字影像辨识模式中，当计算机PC1发生屏幕停格时，系统主机PC2会试图由摄影模块12所监控的屏幕影像中，辨识出关键的文字影像。文字影像辨识模式的其余的步骤与前述的条形码影像辨识模式相同，于此将不再赘述。

图4是自动化影像监测系统100，操作于默认影像辨识模式下的自动化影像监测方法的流程图。默认影像辨识模式可视为简化的影像监测方法，包括步骤S401至S408，如下所述。

步骤S401：启动影像监控程序；

步骤S402：启动摄影模块12；

步骤S403：摄影模块12持续监控屏幕影像，并判断屏幕影像是否于预定时间内保持不变？若是，执行步骤S404；若否，返回步骤S403以持续撷取屏幕装置11的屏幕影像；

步骤S404：产生监控结果信息；

步骤S405：将屏幕影像储存于系统主机PC2；

步骤S406：系统主机PC2利用通信软件15将监控结果信息及屏幕影像发送至用户设备UE；

步骤S407：根据屏幕影像及监控结果信息，系统主机PC2执行除错程序；

步骤S408：系统主机PC2通过通用型的输入输出接口GPIO2及GPIO1，控制显示屏幕影像的计算机PC1，以排除计算机PC1的错误，并返回步骤S402以持续撷取屏幕装置11的屏幕影像。

各步骤描述于下。在步骤S401中，用户若想利用系统主机PC2监控计算机PC1，可先启动影像监控程序，并将监控的影像辨认模式选择在默认影像辨识模式。随后，于步骤S402中，系统主机PC2会启动摄影模块12以撷取屏幕装置11的屏幕影像。在步骤S403中，摄影模块12会持续监控屏幕影像，并判断屏幕影像是否于预定时间内保持不变？举例而言，若是摄影模块12所监控的屏幕影像已经停格了一分钟以上，则表示计算机PC1的主板MB可能出现错误，导致系统停顿在某个时间点而无法继续执行。此时，根据步骤S404，监控结果信息将被产生。如同前述提及，监控结果信息可包括错误发生的时间、画面停格时间、系统运行时间、或是任何关于屏幕影像的信息。监控结果信息可由摄影模块12产生，亦可由系统主机PC2产生。本发明不限制监控结果信息由何种硬设备产生。相反地，若是摄影模块12所监控的屏幕影像没有发生停格的情况，则表示计算机PC1的主板MB仍运作在正常状态，因此，会返回步骤S403以持续撷取屏幕装置11的屏幕影像。当屏幕影像发生停格的现象且监控结果信息也被产生后，根据步骤S405，系统主机PC2会将屏幕影像储存，例如储存至存取单元14中。随后，根据步骤S406，系统主机PC2可利用通信软件15将监控结果信息及屏幕影像发送至用户设备UE。因此，对于用户而言，可以立即理解错误的位置和原因。接着，根据步骤S407，用户可利用用户设备UE，并根据监控结果信息及屏幕影像，以控制系统主机PC2执行除错程序。最后，根据步骤S408，系统主机PC2将可通过通用型的输入输出接口GPIO2及GPIO1，控制显示屏幕影像的计算机PC1，以排除计算机PC1的错误，并返回步骤S402以持续撷取屏幕装置11的屏幕影像。然而，如同前文提及，当用户接收到监控结果信息及屏幕影像后，也可以直接操作系统主机PC2甚至直接操作计算机PC1而进行除错，任何合理的步骤变动均属于本发明所揭露的范畴。

综上所述，本发明描述了一种自动化影像监测方法，在测试计算机可达到节省人力以及增高检测效率的功能。自动化影像监测方法利用了摄影模块以随时监控屏幕影像，并可结合影像辨识(包括条形码或是文字等辨识功能)做更准确的除错分析。当计算机的错误是在预期的状态时，可直接通过主机系统来将错误排除。当计算机的错误是在非预期的状态时，也可以将错误发生时的屏幕影像及错误数据报告实时地通知检测人员(用户)，以将错误顺利排除。因此，本发明的自动化影像监测方法具有以下优点。第一，检测人员无需随时在计算机前待命，检测人员的时间规划将更有弹性。第二，当被检测的计算机发生问题时，系统主机可藉由通信软件实时传送影像信息给检测人员，因此就算在远程的检测人员也能实时处理问题。第三、由于系统主机可藉由通信软件与检测人员的装置同步，因此检测人员能随时掌握除错的进度和结果。第四、本发明的自动化影像监测方法可以大幅降低人力的消耗以及检测时间的损失。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种自动化影像监测方法，其特征在于，包括：

输入字组；

启动摄影模块以撷取屏幕影像；

若所述屏幕影像于预定时间内保持不变，进行影像侦测程序以侦测所述屏幕影像是否包括条形码影像；

若所述屏幕影像包括所述条形码影像，分析并译码所述条形码影像以判断所述条形码影像是否符合所述字组；及

根据所述条形码影像是否符合所述字组，产生对应的监控结果信息。

2.如权利要求1所述的方法，其特征在于，根据所述条形码影像是否符合所述字组，产生所述对应的监控结果信息，包括若所述条形码影像不符合所述字组，产生非预期的错误信息。

3.一种自动化影像监测方法，其特征在于，包括：

输入字组；

启动摄影模块以撷取屏幕影像；

若所述屏幕影像于预定时间内保持不变，进行影像侦测程序以侦测所述屏幕影像是否包括文字影像；

若所述屏幕影像包括所述文字影像，分析所述文字影像以判断所述文字影像是否符合所述字组；及

根据所述文字影像是否符合所述字组，产生对应的监控结果信息。

4.如权利要求3所述的方法，其特征在于，根据所述文字影像是否符合所述字组，产生所述对应的监控结果信息，包括若所述文字影像不符合所述字组，产生非预期的错误信息。

5.如权利要求1至4中择一所述的方法，其特征在于，所述字组是解碼字组或辨识字组。

6.一种自动化影像监测方法，其特征在于，包括：

启动摄影模块以撷取屏幕影像；及

若所述屏幕影像于预定时间内保持不变，产生监控结果信息。

7.如权利要求1至4及6中择一所述的方法，其特征在于，还包括：

系统主机接收所述屏幕影像及所述监控结果信息；及

根据所述屏幕影像及所述监控结果信息，所述系统主机执行除错程序。

8.如权利要求7所述的方法，其特征在于，还包括：

所述系统主机利用通讯软件将所述监控结果信息及所述屏幕影像发送至用户设备；

其中所述系统主机执行所述除错程序是用户利用所述用户设备，控制所述系统主机执行所述除错程序。

9.如权利要求7所述的方法，其特征在于，还包括：

在所述系统主机执行所述除错程序后，所述系统主机通过通用型的输入输出(General-Purpose Input/Output)接口，控制显示所述屏幕影像的计算机，以排除所述计算机的错误。

10.如权利要求7所述的方法，其特征在于，还包括：

将所述屏幕影像储存至所述系统主机。