CN104834904B - 一种异常眼球转动的识别与提醒方法及装置 - Google Patents

Abstract

本发明涉及一种异常眼球转动的识别与提醒方法及装置，所述方法使用的装置包括：可穿戴终端设备、云端信号处理单元、处理结果反送单元；其中，可穿戴终端设备佩戴于测试人员身体，用于捕捉并传输被测试人眼球转动数据；云端信号处理单元用于计算被测试人眼球转动数据；处理结果反送单元负责将云端信号处理单元下达指令需要提示的异常眼球转动结果通过无线网络发送回可穿戴终端设备；云端信号处理单元，通过无线信号接收，将被测试人的眼球转动数据进行三个阶段的处理：第一阶段，计算被测试人的眼球转动基线数据；第二阶段，捕捉测试问题问答阶段的眼球转动数据；第三阶段，将第二阶段的所述眼球转动数据比对第一阶段的眼球转动基线数据并进行相对运算，过滤得出异常眼球转动结果。

Description

一种异常眼球转动的识别与提醒方法及装置

技术领域

本发明涉及一种异常眼球转动的识别与提醒方法及装置，属于智能表情识别领域。

背景技术

微表情是一种持续时间仅为1/25秒至1/5秒的非常快速的表情，表达了人试图压抑与隐藏的真正情感。微表情是人类试图压抑或隐藏真实情感时泄露的非常短暂的、不能自主控制的面部表情。作为识别谎言的有效线索，微表情可应用于安全、司法、临床等领域。

现有的可穿戴(便携)表情识别设备分为两类，一类佩戴于被测试人身上，一类佩戴于测试人员身上，也有的是试用固定摄像头针对被测试人员拍摄，非便携但功能与第二类相似。

第一类佩戴于被测试人身上的眼球转动识别装备，具有的缺点是干扰被测人员的自然眼球转动。眼球转动测试的理想状况是对被测试人员没有任何视觉方面的干扰，否则无法厘清被测试人员的眼球转动产生原因，很难和其心理状态变化进行因果关联，很有可能其眼球转动是由设备的佩戴、对设备的好奇、关注等原因引发，所以所得数据是被污染的数据。

第二类为测试人员方所佩戴或使用的设备，在被测试身体以外拍摄和识别被测试人员的表情与眼球转动，这类设备存在的缺点非常明显。无论是表情捕捉和识别软件，还是眼球转动捕捉与分析设备，都缺少两个至关重要的因素，一是没有办法建立与所提测试问题之间的关联，二是没有建立基线的算法过程。所以，这类设备仅仅能够起到“表演表情”的识别作用，而不能捕捉并分析代表被测试人员真实心态的细微表情和异常眼球转动。要弥补这些缺点，需要解决两个问题，首先是测试方法中和测试问题的关联技术，其次是建立被测试人员个人基线数据的算法。

发明内容

为达到根据微表情分析被测人员心理活动的目的，本发明涉及一种异常眼球转动的识别与提醒方法，所述方法使用的装置包括：可穿戴终端设备、云端信号处理单元、处理结果反送单元；其中，可穿戴终端设备佩戴于测试人员身体，用于捕捉并传输被测试人眼球转动数据；云端信号处理单元用于计算被测试人眼球转动数据；处理结果反送单元负责将云端信号处理单元下达指令需要提示的异常眼球转动结果通过无线网络发送回可穿戴终端设备。

云端信号处理单元，通过无线信号接收，将被测试人的眼球转动数据进行三个阶段的处理：

第一阶段，计算被测试人的眼球转动基线数据；

第二阶段，捕捉测试问题问答阶段的眼球转动数据；

第三阶段，将第二阶段的所述眼球转动数据比对第一阶段的眼球转动基线数据并进行相对运算，过滤得出异常眼球转动结果。

另外，本发明还提供一种异常眼球转动的识别与提醒装置，所述装置包括互相独立的如下设备：可穿戴终端设备、云端信号处理单元、处理结果反送单元；其中，可穿戴终端设备佩戴于测试人员身体，用于捕捉并传输被测试人眼球转动数据；云端信号处理单元用于计算被测试人眼球转动数据；处理结果反送单元负责将云端信号处理单元下达指令需要提示的异常眼球转动结果通过无线网络发送回可穿戴终端设备。

本发明的优点包括：

1)设备终端可穿戴(便携)，且佩戴于测试人员一方，对于被测试人不会产生任何干扰，不会引发被测试人的关注、好奇、敏感或恐惧，所得测试数据都是由测试问题引发，不会产生被污染数据，大幅提高测试的准确性。

2)在可穿戴设备终端的后方，是由高性能计算系统组成的云端信号处理单元，拥有独特的算法程序和先进的处理能力，能够分为三大项指标有效分析被测试人员的异常眼球转动。而且，在测试过程中，针对不同被测试人员个体，首先建立基线数据，确保测试数据的针对性，大幅提高测试准确度。

3)根据云端信号处理单元的计算结果，通过反送单元以音频的形式反馈给测试人员，可以实时让测试人员掌握被测试人员的心态和情绪状态，辅助测试的顺利完成。

附图说明

通过参照附图更详细地描述本发明的示例性实施例，本发明的以上和其它方面及优点将变得更加易于清楚，在附图中：

图1为本发明的一种眼球转动的识别与提醒装置的原理意图；

图2为本发明所使用的可穿戴终端设备(手机)结构示意图；

图3为本发明根据转动方向的方法流程图；

图4为本发明根据转动频率的方法流程图；

图5为本发明所使用的可穿戴终端设备(眼镜)结构示意图。

具体实施方式

在下文中，现在将参照附图更充分地描述本发明，在附图中示出了各种实施例。然而，本发明可以以许多不同的形式来实施，且不应该解释为局限于在此阐述的实施例。相反，提供这些实施例使得本公开将是彻底和完全的，并将本发明的范围充分地传达给本领域技术人员。

在下文中，将参照附图更详细地描述本发明的示例性实施例。

本发明是具备“异常眼球转动的表情识别与提醒”功能的可穿戴设备。

如图1所示，本发明由三个部分组成：可穿戴终端设备、云端信号处理单元、处理结果反送单元。其中，可穿戴终端设备佩戴于测试人员身体，用于捕捉并传输被测试人眼球转动数据；云端信号处理单元用于计算被测试人眼球转动数据；处理结果反送单元负责将云端信号处理单元下达指令需要提示的异常眼球转动结果通过无线网络发送回可穿戴终端设备。

在本发明的具体实施例中，如图2所示可穿戴终端设备可以采用但不限于便手机和耳机。所述手机具有固定机位(底座可充电和联网传输)后拍摄、录像、传输、反馈分析结果，声音单独靠无线耳机反馈给测试人员。可穿戴终端设备中间配有高清摄像头(1)，具备自动追踪和对焦功能，始终捕捉被测试人的眼睛运动。由于配合有佩戴者的主动运动，其追踪的方向和范围较之传统眼球转动仪(不可运动)更加精准。

视频数据捕捉到之后，通信模块(2)通过无线信号(Wi-Fi)传输给云端信号处理单元。

云端信号处理单元，通过无线信号接收，将被测试人的眼球转动数据进行三个阶段的处理。

第一阶段，计算被测试人的眼球转动基线数据。

基线数据的获得，需要配合基线题目的问答。根据标准测试流程，测试人员会首先提问被测试人一组问题，这组问题的问答过程中，云端信号处理单元对被测试人的眼球转动指标进行计算，得到眼球转动基线数据。

被测试人员眼球转动则意味着他不再注视测试人员，转动的方向有不同意义表达，转动的频率映射了被测试人的神经系统兴奋状态。我们把眼球转动指标，分为两项子指标，分别是：

1)转动方向，转动方向分为向上转动和向下转动。通常来讲，向上转动表示嫌疑人在当场思考；向下转动表示嫌疑人在做选择性思考。

2)转动频率。转动频率取上限值。在基线问题问答过程中，计算可穿戴终端设备传回的视频信号，将上述两个子指标的数据统计出并存储，作为比对异常眼球转动的基线值。

第二阶段，捕捉测试问题问答阶段的眼球转动数据。

实际眼球转动数据的获得，需要配合专门的测试题目问答。根据标准测试流程，测试人员会在基线测试题完成之后，提问被测试人一组实际测试问题，这组问题的问答过程中，云端信号处理单元对被测试人的眼球转动指标进行计算，得到实际眼球转动数据。

眼球转动指标，分为转动方向和转动频率。眼球转动，意味着被测试人不再注视测试人员，转动的方向有不同意义表达，转动的频率映射了被测试人的神经系统兴奋状态，转动频率取上限值。在实际问题问答过程中，实时将可穿戴终端设备传回的视频信号中眼球转动数据与已存储的基线数据进行比对，转入第三阶段进行计算和分析。

第三阶段，比对基线并进行相对运算，过滤得出异常眼球转动结果。

如图4所示，如果眼球转动频率超过基线值1.2倍，形成异常眼球转动结果，处理单元将通过反送单元对佩戴者提出声音警示。如图3所示，如果眼球转动方向符合基线方向，则处理单元将通过反送单元对佩戴者提出声音提示。

出现异常眼球转动结果后，云端信号处理单元下达指令，通过反送处理单元将结果用语音形式发送回可穿戴终端设备，提示佩戴者。

如果出现异常眼球转动提示指令，处理单元将通过反送单元对佩戴者提出声音警示，警示音为“蜂鸣声，请注意，眼球转动加快，恐惧情绪提升比为n％”，其中，n值为比对值百分比增幅，如，眼球转动次数超过基线值1.5倍，则n＝(1.5-1.0)％＝50％。如果眼球转动方向符合基线转动方向，则提示音为“正在思考”，或者“正在选择”。

如图2所示，所述可穿戴终端设备配有高清摄像头(1)、通信模块(2)和屏幕(3)。可穿戴终端设备通过无线接收器接收反送单元发出的警示信号，以声音或图像的形式提醒测试人员表情结果。测试人员从而根据结果判断被测试人员的真实内心活动，达到测谎的效果。

如图5所示，所述可穿戴终端设备还可以为眼镜。眼镜配有高清摄像头(1)，具备自动追踪和对焦功能，始终捕捉被测试人的面部运动。由于配合有佩戴者的主动运动，其追踪的方向和范围较之传统表情识别仪器(不可运动)更加精准。视频数据捕捉到之后，通信模块(2)通过无线信号(Wi-Fi或蓝牙或RFID等技术)传输给云端信号处理单元。眼镜为单片或双片，所述眼镜配有耳机(3)和信号传输单元，所述信号传输单元具有屏幕(4)，可以进行视觉信息提示。眼镜通过无线接收器(5)接收反送单元发出的警示信号，以声音或图像的形式提醒测试人员表情结果。测试人员从而根据结果判断被测试人员的真实内心活动，达到测谎的效果。

以上所述仅为本发明的实施例而已，并不用于限制本发明。本发明可以有各种合适的更改和变化。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (6)

1.一种异常眼球转动的识别与提醒方法，

所述方法使用的装置包括：可穿戴终端设备、云端信号处理单元、处理结果反送单元；其中，可穿戴终端设备佩戴于测试人员身体，用于捕捉并传输被测试人眼球转动数据；云端信号处理单元用于计算被测试人眼球转动数据；处理结果反送单元负责将云端信号处理单元下达指令需要提示的异常眼球转动结果通过无线网络发送回可穿戴终端设备；

云端信号处理单元，通过无线信号接收，将被测试人的眼球转动数据进行三个阶段的处理：

第一阶段，计算被测试人的眼球转动基线数据；

第二阶段，捕捉测试问题问答阶段的眼球转动数据；

第三阶段，将第二阶段的所述眼球转动数据比对第一阶段的眼球转动基线数据并进行相对运算，过滤得出异常眼球转动结果，其特征在于：在所述第二阶段中，实际眼球转动数据的获得，需要配合专门的测试题目问答；根据标准测试流程，测试人员会在基线测试题完成之后，提问被测试人一组实际测试问题，这组问题的问答过程中，云端信号处理单元对被测试人的眼球转动指标进行计算，得到实际眼球转动数据；

眼球转动指标，分为转动方向和转动频率；眼球转动，意味着被测试人不再注视测试人员，转动的方向有不同意义表达，转动的频率映射了被测试人的神经系统兴奋状态，转动频率取上限值；在实际问题问答过程中，实时将可穿戴终端设备传回的视频信号中眼球转动数据与已存储的基线数据进行比对，转入第三阶段进行计算和分析。

2.如权利要求1所述的一种异常眼球转动的识别与提醒方法，其特征在于：

在所述第一阶段中，基线数据的获得，需要配合基线题目的问答；根据标准测试流程，测试人员首先提问被测试人一组问题，这组问题的问答过程中，云端信号处理单元对被测试人的眼球转动指标进行计算，得到眼球转动基线数据；

被测试人员眼球转动则意味着他不再注视测试人员，转动的方向有不同意义表达，转动的频率映射了被测试人的神经系统兴奋状态；把眼球转动指标，分为两项子指标，分别是：

1)转动方向：转动方向分为向上转动和向下转动；向上转动表示嫌疑人在当场思考；向下转动表示嫌疑人在做选择性思考；

2)转动频率：转动频率取上限值，在基线问题问答过程中，计算可穿戴终端设备传回的视频信号，将上述两个子指标的数据统计出并存储，作为比对异常眼球转动的基线值。

3.如权利要求1所述的一种异常眼球转动的识别与提醒方法，其特征在于：

所述第三阶段的具体方法如下：

如果眼球转动频率超过基线值1.2倍，形成异常眼球转动结果，处理单元将通过反送单元对佩戴者提出声音警示；如果眼球转动方向符合基线方向，则处理单元将通过反送单元对佩戴者提出声音提示；

如果出现异常眼球转动提示指令，处理单元将通过反送单元对佩戴者提出声音警示，警示音为“蜂鸣声，请注意，眼球转动加快，恐惧情绪提升比为n％”，其中，n值为比对值百分比增幅；如果眼球转动方向符合基线转动方向，则提示音为“正在思考”，或者“正在选择”。

4.如权利要求3所述的一种异常眼球转动的识别与提醒方法，其特征在于：

所述可穿戴终端设备包括手机和耳机，所述手机配有高清摄像头(1)、通信模块(2)和屏幕(3)。

5.如权利要求4所述的一种异常眼球转动的识别与提醒方法，其特征在于：

所述可穿戴终端设备包括眼镜和耳机，所述眼镜配有高清摄像头(1)和通信模块(2)。

6.如权利要求5所述的一种异常眼球转动的识别与提醒方法，其特征在于：

所述眼镜为单片或双片，所述眼镜配有信号传输单元，所述信号传输单元具有屏幕，可以进行视觉信息提示。