CN107395780A - 基于人脸识别的社交通信方法、装置及计算机处理设备 - Google Patents

Abstract

本发明公开了一种基于人脸识别的社交软件通信方法、装置及一种计算机处理设备，基于人脸识别的社交软件通信方法的步骤包括：建立并存储社交软件中的联系人及其人脸识别信息的对应关系的数据库；获取人脸照片并从人脸照片提取人脸信息；将人脸信息与存储的人脸识别信息进行对比，判断所提取的人脸信息是否与存储的人脸识别信息相匹配，如果是，则控制社交软件进入与人脸识别信息对应的联系人的消息发送界面。通过本发明，能够在浏览相册时流畅地和想要聊天的好友进行沟通，不用担心打断思绪、影响情绪，用户体验好，使用便捷，切换便捷，大大提高操作效率。

Description

基于人脸识别的社交通信方法、装置及计算机处理设备

技术领域

本发明涉及软件协议领域，特别是涉及一种基于人脸识别的社交软件通信方法、装置及一种计算机处理设备。

背景技术

如今，微信已经成为最流行的通信工具。用户在浏览相册时，如果想给相册中的朋友发送微信消息，却只能通过退出相册进入微信的方式，该方式存在以下不足：操作繁琐。用户如果想给照片中的对应好友发送微信消息，需要先退出相册、进入微信，在微信好友中搜索好友名字，找到后才能发送消息。体验较差。用户在浏览相册时通常会产生一些思绪和情感，而复杂高频的应用切换会打断用户的思绪、影响用户体验。

发明内容

本发明主要解决的技术问题是提供一种基于人脸识别的社交软件通信方法、装置及一种计算机处理设备，能够在浏览相册时流畅地和想要聊天的好友进行沟通，不用担心打断思绪、影响情绪，用户体验好，使用便捷，切换便捷，大大提高操作效率。

为解决技术问题，本发明采用的一个技术方案是：提供一种基于人脸识别的社交软件通信方法，该方法的步骤包括：建立并存储社交软件中的联系人及其人脸识别信息的对应关系的数据库；获取人脸照片并从人脸照片提取人脸信息；将人脸信息与存储的人脸识别信息进行对比，判断所提取的人脸信息是否与存储的人脸识别信息相匹配，如果是，则控制社交软件进入与人脸识别信息对应的联系人的消息发送界面。

为解决技术问题，本发明采用的一个技术方案是：提供一种计算机处理设备，包括处理器及计算机可读存储介质，处理器获取计算机可读存储介质上的计算机程序，并执行前述技术方案的步骤。

为解决技术问题，本发明采用的一个技术方案是：提供一种基于人脸识别的社交软件通信装置，包括：数据库建立模块，用于执行建立并存储社交软件中的联系人及其人脸识别信息的对应关系的数据库的步骤；计算模块，用于执行获取人脸照片并从人脸照片提取人脸信息的步骤；判断模块，用于执行将人脸信息与存储的人脸识别信息进行对比，判断所提取的人脸信息是否与存储的人脸识别信息相匹配的步骤；启动模块，用于执行控制社交软件进入与人脸识别信息对应的联系人的消息发送界面的步骤。

区别于现有技术，本发明的基于人脸识别的社交软件通信方法的步骤包括：建立并存储社交软件中的联系人及其人脸识别信息的对应关系的数据库；获取人脸照片并从人脸照片提取人脸信息；将人脸信息与存储的人脸识别信息进行对比，判断所提取的人脸信息是否与存储的人脸识别信息相匹配，如果是，则控制社交软件进入与人脸识别信息对应的联系人的消息发送界面。通过本发明，能够在浏览相册时流畅地和想要聊天的好友进行沟通，不用担心打断思绪、影响情绪，用户体验好，使用便捷，切换便捷，大大提高操作效率。

附图说明

图1是本发明提供的一种基于人脸识别的社交软件通信方法的流程示意图。

具体实施方式

在下面的描述中阐述了很多具体细节以便于充分理解本发明。但是本发明能够以很多不同于在此描述的其它方式来实施，本领域技术人员可以在不违背本发明内涵的情况下做类似推广，因此本发明不受下面公开的具体实施的限制。

其次，本发明利用示意图进行详细描述，在详述本发明实施例时，为便于说明，所述示意图只是实例，其在此不应限制本发明保护的范围。

参阅图1，图1是本发明提供的一种基于人脸识别的社交软件通信方法的流程示意图。本发明涉及的社交软件可为移动终端自带的拨打电话或发送短信的软件，或通过下载安装的QQ、微信及相近的类似软件，本发明中以微信为例进行说明。该方法的步骤包括：

S110：建立并存储社交软件中的联系人及其人脸识别信息的对应关系的数据库。

现在人们一般通过移动终端上安装的各类社交软件实现交流，通过不同类型的社交软件，不仅能够语音通信，还能发送文字信息以及实现文件传输。各类社交软件上都设置联系人列表，通过查找联系人列表寻找消息的发送对象进行发送。但是现有技术中，都需要专门打开相应的社交软件应用程序，查找联系人列表找到联系人，在相应的信息发送窗口发送信息或拨打语音电话。然而在实际中，人们可能在浏览相册等操作时在照片中发现某些特定联系人，如果需要和这些联系人联系时，必须退出当前操作的相册软件，再打开相应的社交软件与之联系，操作繁琐且浪费时间。

在本发明中，首先建立一个存储数据库，该数据库中存储了微信软件中的每一联系人与该联系人对应的照片中的人脸信息相应的对应关系。通过分析联系人的头像，获取该联系人的人脸信息。对于头像未使用联系人真实头像的，可从联系人处，或者从该微信软件内设的照片展示空间，如朋友圈进行获取人物照片，作为联系人的头像。获取到包含联系人人脸信息的图片后，通过人脸识别算法，建立存储数据库，存储每一联系人的人脸信息，以及每一联系人与其人脸信息的对应关系。

其中，获取联系人的人脸信息的人脸识别算法的步骤如下：

S111：获取包含M张人脸图像的集合S，其中，S＝{Γ₁，Γ₂，Γ₃，.........，Γ_M}，且Γ为其中一张人脸图像的像素组成的N维向量，M张人脸图像分别对应所述社交软件中的一个联系人。

在本实施方式中，将获取到的每一联系人的人物头像进行分析，将其用像素组成N维向量，然后所有联系人头像图片形成集合。

S112：遍历集合S中的每一向量Γ并进行累加，然后取平均值Ψ。其中，所述平均值Ψ的计算公式为：

通过计算得到的平均值Ψ也是一个N维向量。

S113：计算每张人脸图像和上述计算得到的平均图像的差值Φ；差值Φ的计算公式为：

Φ_i＝Γ_i-Ψ

S114：设一N*N矩阵为L，L的第m行n列的元素用下述公式表示，计算L矩阵的M个特征向量v_l。

S115：根据M个特征向量v_l，通过下述公式计算协方差矩阵的特征向量u_l，特征向量u_l即为数据库中存储的每一联系人的人脸信息。

这些特征向量如果还原成像素排列的话，所以称之为特征脸。通过本步骤获取到的特征脸，即为需要在数据库中存储的联系人人脸信息。

在获取到每一联系人的人脸信息后，需在数据库中存储联系人的信息及相应的人脸信息；存储每一联系人信息与计算得到的人脸信息的对应关系，实现联系人与人脸信息的对应，通过人脸信息识别可对应到相应联系人；同时存储人脸信息与启动社交软件、并进入相应联系人消息发送页面程序的对应关系。建立数据库后，进入步骤S120。

S120：获取人脸照片并从人脸照片提取人脸信息。

在使用移动终端浏览相册时，可能会当即需要给相册的相片中对应的人物发送微信消息的需求。现有技术中，则需要退出相册，开启微信，搜索到相应联系人，打开消息发送界面发送消息。本发明则避免了上述繁琐操作，可直接从相册的界面进入微信联系人的消息发送界面。具体即通过人脸识别技术获取照片中的人脸信息，并与数据库中存储的人脸信息进行对比，得到相同的人脸信息。在本发明中，首先需要启动本发明对相册照片的识别操作。在本实施方式中，可设置为通过双击照片，启动对该照片的识别。具体识别的步骤包括：

S121：获取人物照片，并对所述人物照片中的人脸特征按照下述公式进行标注。

S122：对于第k个特征脸u_k，上式可以计算其对应的权重，M个权重可以构成一个向量：Ω^T＝[ω₁，ω₂，.......，ω_M]。

S123：根据下述公式计算获取到的人物照片的人脸信息与数据库中存储的每一人脸信息的欧氏距离，设定阈值，判断获取到的人物照片的人脸图像是否与数据库中存储的人脸图像其中之一者相同；其中，Ω代表获取到的人物照片的人脸信息，Ω_k代表数据库中存储的人物照片的人脸信息。

ε_k＝||Ω-Ω_k||²

S130：将所述人脸信息与存储的人脸识别信息进行对比，判断所提取的人脸信息是否与存储的人脸识别信息相匹配。

上述步骤S123用于判断获取到的人物照片的人脸图像是否与数据库中存储的人脸图像其中之一者相同，即确定步骤S122得到的人脸信息十分已存储与数据库中。即在步骤S123中，计算得到ε_k，同时设定阈值ε，通过对比ε_k与ε，确定相册照片中的人脸信息是否存储于数据库中。具体的，若ε_k＜ε，则获取到的相册中的人物照片中的人脸信息与数据库中存储的联系人的人脸信息其中之一者相同；反之，则获取到的相册中的人物照片中的人脸信息与数据库中存储的联系人的人脸信息任意一者都不相同，此时存在两种情况：一是照片中的人物并非微信软件中的联系人，此时可提示用户该联系人在微信软件的联系人列表中不存在，并提醒用户是否添加该人物为联系人。此时用户需获取该联系人的信息进行添加；此外还有可能该照片中没有人脸信息，即可能为风景照片，且照片中没有人物，但是由于用户根据照片内容启动本发明对相册照片的识别计算，因此认为相册中照片都是是有人物的，可通过人脸识别技术获取到人脸信息。

S140：控制社交软件进入与人脸识别信息对应的联系人的消息发送界面。

在上述的步骤中，若判断结果是相册中照片里的人物的人脸信息与数据库中存储的联系人人脸信息其中之一者相同时，控制启动微信软件，并进入该联系人对应的消息发送界面，进行消息发送。此外，若经过识别判断，确认相册照片人物为微信的一个联系人时，用户也可能选择放弃向该联系人发送消息，因此在判断结果是相册中照片里的人物的人脸信息与数据库中存储的联系人人脸信息其中之一者相同时，在移动终端的显示界面上弹窗提示是否启动微信，若用户确定启动微信，则打开相应联系人的消息发送界面进行消息编辑及发送；若用户选择放弃启动微信，则继续停留在相册的图片浏览界面，用户可继续浏览其他照片。

区别于现有技术，本发明的基于人脸识别的社交软件通信方法的步骤包括：建立存储社交软件中的联系人与联系人的人脸信息对应关系的数据库；从移动终端获取人物照片，并计算人物照片对应的人脸信息；将照片对应的人脸信息与预先存储于数据库中的人脸识别信息进行对比，判断计算得到的人脸信息是否存储于数据库中；判断结果为是时，控制启动社交软件，并进入与人脸信息对应的联系人的消息发送页面，以进行消息发送。通过本发明，能够在浏览相册时流畅地和想要聊天的好友进行沟通，不用担心打断思绪、影响情绪，用户体验好，使用便捷，切换便捷，大大提高操作效率。

本发明提供了一种计算机处理设备，包括处理器及存储有执行前述技术方案的方法步骤的计算机程序的计算机可读存储介质，处理器通过执行计算机可读存储介质上的计算机程序，实现前述技术方案方法的步骤。

具体来说，所述计算机处理设备包括一种基于人脸识别的社交软件通信装置，该装置包括：

数据库建立模块，用于执行建立并存储社交软件中的联系人及其人脸识别信息的对应关系的数据库的步骤。

在本发明中，首先通过数据库建立模块建立一个存储数据库，数据库中存储了微信软件中的每一联系人与该联系人对应的照片中的人脸信息相应的对应关系。通过分析联系人的头像，获取该联系人的人脸信息。对于头像未使用联系人真实头像的，可从联系人处，或者从该微信软件内设的照片展示空间，如朋友圈进行获取人物照片，作为联系人的头像。获取到包含联系人人脸信息的图片后，数据库建立模块通过人脸识别算法，建立存储数据库，存储每一联系人的人脸信息，以及每一联系人与其人脸信息的对应关系。

在获取到每一联系人的人脸信息后，需在数据库中存储联系人的信息及相应的人脸信息；存储每一联系人信息与计算得到的人脸信息的对应关系，实现联系人与人脸信息的对应，通过人脸信息识别可对应到相应联系人；同时存储人脸信息与启动社交软件、并进入相应联系人消息发送页面程序的对应关系。

计算模块，用于执行获取人脸照片并从人脸照片提取人脸信息的步骤。

在使用移动终端浏览相册时，可能会当即需要给相册的相片中对应的人物发送微信消息的需求。现有技术中，则需要退出相册，开启微信，搜索到相应联系人，打开消息发送界面发送消息。本发明则避免了上述繁琐操作，可直接从相册的界面进入微信联系人的消息发送界面。具体即通过人脸识别技术获取照片中的人脸信息，并与数据库中存储的人脸信息进行对比，得到相同的人脸信息。在本发明中，首先需要启动本发明对相册照片的识别操作。在本实施方式中，可设置为通过双击照片，启动对该照片的识别。

判断模块，用于执行将所述人脸信息与存储的人脸识别信息进行对比，判断所提取的人脸信息是否与存储的人脸识别信息相匹配的步骤。

判断模块具体的判断过程如下：在计算模块计算得到ε_k后，判断模块设定阈值ε，通过对比ε_k与ε，确定相册照片中的人脸信息是否存储于数据库中。具体的，若ε_k＜ε，则获取到的相册中的人物照片中的人脸信息与数据库中存储的联系人的人脸信息其中之一者相同；反之，则获取到的相册中的人物照片中的人脸信息与数据库中存储的联系人的人脸信息任意一者都不相同，此时存在两种情况：一是照片中的人物并非微信软件中的联系人，此时可提示用户该联系人在微信软件的联系人列表中不存在，并提醒用户是否添加该人物为联系人。此时用户需获取该联系人的信息进行添加；此外还有可能该照片中没有人脸信息，即可能为风景照片，且照片中没有人物，但是由于用户根据照片内容启动本发明对相册照片的识别计算，因此认为相册中照片都是是有人物的，可通过人脸识别技术获取到人脸信息。

启动模块，用于执行控制所述社交软件进入与所述人脸识别信息对应的联系人的消息发送界面的步骤。

若判断结果是相册中照片里的人物的人脸信息与数据库中存储的联系人人脸信息其中之一者相同时，启动模块控制启动微信软件，并进入该联系人对应的消息发送界面，进行消息发送。此外，若经过识别判断，确认相册照片人物为微信的一个联系人时，用户也可能选择放弃向该联系人发送消息，因此在判断结果是相册中照片里的人物的人脸信息与数据库中存储的联系人人脸信息其中之一者相同时，在移动终端的显示界面上弹窗提示是否启动微信，若用户确定启动微信，则打开相应联系人的消息发送界面进行消息编辑及发送；若用户选择放弃启动微信，则继续停留在相册的图片浏览界面，用户可继续浏览其他照片。

本发明虽然已以较佳实施例公开如上，但其并不是用来限定本发明，任何本领域技术人员在不脱离本发明的精神和范围内，都可以利用所述揭示的方法和技术内容对本发明技术方案做出可能的变动和修改，因此，凡是未脱离本发明技术方案的内容，依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化及修饰，均属于本发明技术方案的保护范围。

Claims (10)

1.一种基于人脸识别的社交软件通信方法，其特征在于，包括：

建立并存储社交软件中的联系人及其人脸识别信息的对应关系的数据库；

获取人脸照片并从所述人脸照片提取人脸信息；

将所述人脸信息与存储的人脸识别信息进行对比，判断所提取的人脸信息是否与存储的人脸识别信息相匹配，如果是，则控制所述社交软件进入与所述人脸识别信息对应的联系人的消息发送界面。

2.根据权利要求1所述的基于人脸识别的社交软件通信方法，其特征在于，在建立并存储社交软件中的联系人及其人脸识别信息的对应关系的步骤中，包括步骤：

获取包含M张人脸图像的集合S，其中，S＝{Γ₁，Γ₂，Γ₃，.........，Γ_M}，且Γ为其中一张人脸图像的像素组成的N维向量，M张人脸图像分别对应所述社交软件中的一个联系人；

遍历集合S中的每一向量Γ并进行累加，然后取平均值Ψ；其中，所述平均值Ψ的计算公式为公式(1)；

计算每张人脸图像和上述计算得到的平均图像的差值Φ；差值Φ的计算公式为公式(2)；Φ_i＝Γ_i-Ψ 公式(2)

设一N*N矩阵为L，L的第m行n列的元素用公式(3)表示，计算L矩阵的M个特征向量v_l；

根据M个特征向量v_l，通过公式(4)计算协方差矩阵的特征向量u_l，特征向量u_l即为数据库中存储的每一联系人的人脸信息。

。

3.根据权利要求2所述的基于人脸识别的社交软件通信方法，其特征在于，在获取人脸照片并从所述人脸照片提取人脸信息的步骤中，包括步骤：

获取人物照片，并对所述人物照片中的人脸特征按照公式(5)进行标注；

对于第k个特征脸u_k，上式可以计算其对应的权重，M个权重可以构成一个向量：Ω^T＝[ω₁，ω₂，.......，ω_M]；

根据公式(6)计算获取到的人物照片的人脸信息与数据库中存储的每一人脸信息的欧氏距离，设定阈值，判断获取到的人物照片的人脸图像是否与数据库中存储的人脸图像其中之一者相同；其中，Ω代表获取到的人物照片的人脸信息，Ω_k代表数据库中存储的人物照片的人脸信息。

ε_k＝||Ω-Ω_k||² 公式(6) 。

4.根据权利要求3所述的基于人脸识别的社交软件通信方法，其特征在于，设定阈值ε，若ε_k＜ε，则获取到的人物照片中的人脸信息与数据库中存储的联系人的人脸信息其中之一者相同；反之，则获取到的人物照片中的人脸信息与数据库中存储的联系人的人脸信息任意一者都不相同。

5.根据权利要求4所述的基于人脸识别的社交软件通信方法，其特征在于，当获取到的人物照片中的人脸信息与存储的联系人的人脸识别信息任意一者都不相同时，根据用户指令，确定是否将获取到的人物照片中的人脸信息添加到数据库中进行存储。

6.根据权利要求1所述的基于人脸识别的社交软件通信方法，其特征在于，在控制所述社交软件进入与所述人脸识别信息对应的联系人的消息发送界面的步骤中，包括步骤：

弹出提示用户是否进入识别的人脸信息对应的联系人的消息发送页面，如果用户选择不进入，则停留在显示人物照片的界面，或者停留在所述社交软件的启动界面。

7.根据权利要求6所述的基于人脸识别的社交软件通信方法，其特征在于，所述数据库定时检测存储的联系人及其人脸识别信息的对应关系，在所述联系人的头像图片发生变化时，再次进行识别并建立新的对应关系。

8.根据权利要求1所述的基于人脸识别的社交软件通信方法，其特征在于，在建立并存储社交软件中的联系人及其人脸识别信息的对应关系的步骤中，包括步骤：

在数据库中存储社交软件中的每一联系人的信息及其人物照片；

根据用户指令，在数据库中建立每一联系人照片与相应人物照片的人脸识别信息的对应关系。

9.一种计算机处理设备，包括处理器及计算机可读存储介质，其特征在于，所述处理器获取所述计算机可读存储介质上的计算机程序，并执行如权利要求1-8任一所述方法的步骤。

10.一种基于人脸识别的社交软件通信装置，其特征在于，包括：

数据库建立模块，用于执行建立并存储社交软件中的联系人及其人脸识别信息的对应关系的数据库的步骤；

计算模块，用于执行获取人脸照片并从所述人脸照片提取人脸信息的步骤；

判断模块，用于执行将所述人脸信息与存储的人脸识别信息进行对比，判断所提取的人脸信息是否与存储的人脸识别信息相匹配的步骤；

启动模块，用于执行控制所述社交软件进入与所述人脸识别信息对应的联系人的消息发送界面的步骤。