CN109840449A - 消除环境光影响的瞳孔缩放情绪判断方法 - Google Patents
消除环境光影响的瞳孔缩放情绪判断方法 Download PDFInfo
- Publication number
- CN109840449A CN109840449A CN201711204269.1A CN201711204269A CN109840449A CN 109840449 A CN109840449 A CN 109840449A CN 201711204269 A CN201711204269 A CN 201711204269A CN 109840449 A CN109840449 A CN 109840449A
- Authority
- CN
- China
- Prior art keywords
- pupil
- image
- scaling
- user
- emotion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Image Processing (AREA)
Abstract
本发明公开了一种消除环境光影响的瞳孔缩放情绪判断方法，情绪判断程序通过红外摄像头连续获取用户眼部图像，图像分割算法分割出用户眼部区域和瞳孔区域，对比连续帧对应图像之间瞳孔大小，判断用户瞳孔是否发生缩放，检测到瞳孔缩放后，调取缩放前后图像，综合考虑图像平均灰度值与图像曝光参数的变化，判断缩放是否为环境光引起，若瞳孔缩放并非由环境光引起，则判断用户情绪异常波动。本发明可以有效滤除外界光线干扰，通过用户瞳孔缩放，判断用户情绪是否异常波动。
Description
技术领域
本发明涉及图像处理技术领域，特别涉及一种消除环境光影响的瞳孔缩放情绪判断方法。
背景技术
获知用户情绪可以指导产品改进，提升产品使用体验，并且在特定的使用场景中对于用户人身安全也有重要意义，比如驾驶员在驾驶汽车时，若出现较大情绪波动，则会对行车安全产生威胁。
瞳孔缩放是用户情绪波动的表现之一，但瞳孔缩放更易受到外界光线变化的刺激而产生，现有技术方案中并未对外界光线的干扰进行有效滤除，影响情绪检测结果的准确性。
发明内容
为了解决上述技术问题，有效滤除外界光线干扰，通过瞳孔缩放判断用户情绪是否异常波动，本发明一种消除环境光影响的瞳孔缩放情绪判断方法。
所述消除环境光影响的瞳孔缩放情绪判断方法，通过以下步骤实现：情绪判断程序通过红外摄像头连续获取用户眼部图像，图像分割算法分割出用户眼部区域和瞳孔区域，对比连续帧对应图像之间瞳孔大小，判断用户瞳孔是否发生缩放，检测到瞳孔缩放后，调取缩放前后图像，综合考虑图像平均灰度值与图像曝光参数的变化，判断缩放是否为环境光引起，若瞳孔缩放并非由环境光引起，则判断用户情绪异常波动。
本发明消除环境光影响的瞳孔缩放情绪判断方法的改进在于，所述图像曝光参数包括光圈、快门和ISO。
本发明消除环境光影响的瞳孔缩放情绪判断方法的进一步改进在于，所述图像平均灰度值是指图像分割算法分割出的用户眼部图像的平均灰度值。
本发明通过图像平均灰度和图像曝光参数，判断拍摄不同图像时外界光线是否发生变化，从而判断用户瞳孔缩放是否由外界光线引起，本发明可以有效滤除外界光线干扰，通过用户瞳孔缩放，判断用户情绪是否异常波动。
附图说明
图1是本发明除环境光影响的瞳孔缩放情绪判断方法流程示意图。
具体实施方式
下面结合附图对本发明进行进一步详细描述。
本发明提出了一种消除环境光影响的瞳孔缩放情绪判断方法，所述方法实现步骤如图1所示，包括：
步骤1：红外摄像头拍摄用户红外眼部图像，检测瞳孔缩放。
红外摄像头连续拍摄用户红外眼部图像，分割算法分割出图像中用户眼部区域以及瞳孔区域，情绪判断程序计算当前图像中的瞳孔直径像素数量，优选的，情绪判断程序缓存当前图像之前的10帧图像中的瞳孔直径像素数量，情绪判断程序计算上述11帧图像的瞳孔直径中最大值与最小值的差值，判断差值是否大于预设的像素阈值，若大于预设像素阈值，则进行步骤2，优选的像素阈值预设为10像素。
步骤2：获取缩放前后图像曝光参数和画面平均灰度。
为了便于描述，将上述11帧图像中瞳孔直径最大的一帧图像称作图片1，将瞳孔直径最小的一帧图像称作图片2，用户图像通过步骤1检测后，记录瞳孔动作，即若图片1在图片2之后，则为瞳孔舒张，反之则为瞳孔收缩；获取图片1和图片2的曝光参数。
步骤3：根据瞳孔大小变化前后的图像和相应图像的曝光参数判断环境光变化情况。
首先对图片1和图片2进行图像分割，分别得到用户的眼部图像1和眼部图像2，计算上述两幅眼部图像的平均灰度，并记录瞳孔变化前后的平均灰度变化情况：降低、不变或提高；然后获取瞳孔变化前后图像的曝光参数，所述图像曝光参数包括光圈、快门和ISO，记录曝光参数变化对曝光度的影响：降低、不变或提高；对比图片1和图片2的平均灰度和曝光度，判断环境光变化情况：降低、不变或提高；
所述对比图片1和图片2的平均灰度和曝光度，判断环境光变化情况的判断方法包括：
若图像平均灰度降低，相机曝光度不变，则环境光降低。
若图像平均灰度降低，相机曝光度提高，则环境光降低。
若图像平均灰度不变，相机曝光度降低，则环境光提高。
若图像平均灰度不变，相机曝光度提高，则环境光降低。
若图像平均灰度提高，相机曝光度不变，则环境光提高。
若图像平均灰度提高，相机曝光度降低，则环境光提高。
若图像平均灰度不变，相机曝光度不变，则环境光不变。
若图像平均灰度提高，相机曝光度提高或图像平均灰度降低，相机曝光度降低，则计算图像平均灰度变化情况是否完全由相机曝光参数变化所引起，从而判断环境光线变化情况。
步骤4：根据环境光变化情况判断瞳孔缩放是否为环境光所引起。
若环境光降低，瞳孔扩张；或环境光提高，瞳孔收缩；则瞳孔缩放为环境光变化所引起；否则，判断为用户情绪异常波动。
显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
Claims (3)
1.一种消除环境光影响的瞳孔缩放情绪判断方法，情绪判断程序通过红外摄像头连续获取用户眼部图像，图像分割算法分割出用户眼部区域和瞳孔区域，对比连续帧对应图像之间瞳孔大小，判断用户瞳孔是否发生缩放，其特征在于，检测到瞳孔缩放后，调取缩放前后图像，综合考虑图像平均灰度值与图像曝光参数的变化，判断缩放是否为环境光引起，若瞳孔缩放并非由环境光引起，则判断用户情绪异常波动。
2.根据权利要求1所述的一种消除环境光影响的瞳孔缩放情绪判断方法，其特征在于所述图像曝光参数包括光圈、快门和ISO。
3.根据权利要求1所述的一种消除环境光影响的瞳孔缩放情绪判断方法，其特征在于所述图像平均灰度值是指图像分割算法分割出的用户眼部图像的平均灰度值。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711204269.1A CN109840449A (zh) | 2017-11-27 | 2017-11-27 | 消除环境光影响的瞳孔缩放情绪判断方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711204269.1A CN109840449A (zh) | 2017-11-27 | 2017-11-27 | 消除环境光影响的瞳孔缩放情绪判断方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109840449A true CN109840449A (zh) | 2019-06-04 |
Family
ID=66880140
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201711204269.1A Pending CN109840449A (zh) | 2017-11-27 | 2017-11-27 | 消除环境光影响的瞳孔缩放情绪判断方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109840449A (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110472521A (zh) * | 2019-07-25 | 2019-11-19 | 中山市奥珀金属制品有限公司 | 一种瞳孔定位校准方法及系统 |
| CN110853605A (zh) * | 2019-11-15 | 2020-02-28 | 中国传媒大学 | 音乐生成方法、装置及电子设备 |
| CN113657427A (zh) * | 2021-06-29 | 2021-11-16 | 东风汽车集团股份有限公司 | 一种车内多源图像融合识别方法及装置 |
| WO2023060719A1 (zh) * | 2021-10-11 | 2023-04-20 | 北京工业大学 | 基于瞳孔波计算情绪指标的方法、装置及系统 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012187190A (ja) * | 2011-03-09 | 2012-10-04 | Fujitsu Ltd | 視線検出装置及び視線検出方法 |
| CN202604845U (zh) * | 2011-12-12 | 2012-12-19 | 张占强 | 基于tms320dm642平台的瞳孔测谎仪 |
| CN103565399A (zh) * | 2012-07-27 | 2014-02-12 | 原相科技股份有限公司 | 瞳孔检测装置 |
| CN105528705A (zh) * | 2014-10-24 | 2016-04-27 | 阿里巴巴集团控股有限公司 | 用于确定用户操作信息的方法及装置 |
-
2017
- 2017-11-27 CN CN201711204269.1A patent/CN109840449A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012187190A (ja) * | 2011-03-09 | 2012-10-04 | Fujitsu Ltd | 視線検出装置及び視線検出方法 |
| CN202604845U (zh) * | 2011-12-12 | 2012-12-19 | 张占强 | 基于tms320dm642平台的瞳孔测谎仪 |
| CN103565399A (zh) * | 2012-07-27 | 2014-02-12 | 原相科技股份有限公司 | 瞳孔检测装置 |
| CN105528705A (zh) * | 2014-10-24 | 2016-04-27 | 阿里巴巴集团控股有限公司 | 用于确定用户操作信息的方法及装置 |
Non-Patent Citations (1)
| Title |
|---|
| 周泓等: "面向驾驶员状态监测的人眼凝视方向判别", 《电路与系统学报》 * |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110472521A (zh) * | 2019-07-25 | 2019-11-19 | 中山市奥珀金属制品有限公司 | 一种瞳孔定位校准方法及系统 |
| CN110853605A (zh) * | 2019-11-15 | 2020-02-28 | 中国传媒大学 | 音乐生成方法、装置及电子设备 |
| CN113657427A (zh) * | 2021-06-29 | 2021-11-16 | 东风汽车集团股份有限公司 | 一种车内多源图像融合识别方法及装置 |
| CN113657427B (zh) * | 2021-06-29 | 2024-01-23 | 东风汽车集团股份有限公司 | 一种车内多源图像融合识别方法及装置 |
| WO2023060719A1 (zh) * | 2021-10-11 | 2023-04-20 | 北京工业大学 | 基于瞳孔波计算情绪指标的方法、装置及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109840449A (zh) | 消除环境光影响的瞳孔缩放情绪判断方法 | |
| JP6863408B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
| CN107833197B (zh) | 图像处理的方法、装置、计算机可读存储介质和电子设备 | |
| CN105791709B (zh) | 带有逆光补偿的自动曝光处理方法及装置 | |
| CN105046655B (zh) | 一种视频图像自动锐化方法和装置 | |
| JP2021501517A (ja) | 低照明光条件下での物体追跡における信号対雑音比を向上させるためのシステム及び方法 | |
| JP5737400B2 (ja) | 赤目検出装置 | |
| CN108449596B (zh) | 一种融合美学和舒适度的3d立体图像质量评估方法 | |
| JP2011521521A (ja) | 最適映像選択 | |
| CN108875471A (zh) | 人脸图像底库注册的方法、装置及计算机存储介质 | |
| CN108742656A (zh) | 基于脸部特征点定位的疲劳状态检测方法 | |
| JP2009116742A (ja) | 車載用画像処理装置、画像処理方法、および、プログラム | |
| JP2020145724A (ja) | 運転者の目位置の検出装置と方法、及びローリングシャッター駆動方式のイメージセンサーを備えた撮像装置とその照明制御方法 | |
| JP6504788B2 (ja) | 瞳孔検出用光源装置の制御方法 | |
| WO2016183887A1 (zh) | 一种背光控制方法、装置及计算机存储介质 | |
| CN111738241B (zh) | 基于双摄像头的瞳孔检测方法及装置 | |
| WO2022127174A1 (zh) | 图像处理方法及电子设备 | |
| CN102625030A (zh) | 视频增强方法和系统 | |
| CN112153363B (zh) | 用于3d角膜位置估计的方法和系统 | |
| CN108093170B (zh) | 用户拍照方法、装置及设备 | |
| CN115171024A (zh) | 一种基于视频序列的面部多特征融合疲劳检测方法及系统 | |
| CN108009534B (zh) | 基于瞳孔灰度的活体检测方法 | |
| US11885970B2 (en) | Blue light reduction | |
| CN111274851A (zh) | 一种活体检测方法及装置 | |
| CN111127537A (zh) | 用于检测头戴式装置中的阴影的方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20190604 |