CN111914693A - 一种人脸姿态调整方法、系统、装置、设备及介质 - Google Patents

一种人脸姿态调整方法、系统、装置、设备及介质 Download PDF

Info

Publication number
CN111914693A
CN111914693A CN202010683435.6A CN202010683435A CN111914693A CN 111914693 A CN111914693 A CN 111914693A CN 202010683435 A CN202010683435 A CN 202010683435A CN 111914693 A CN111914693 A CN 111914693A
Authority
CN
China
Prior art keywords
face
angle
adjusting
calibration point
feature information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010683435.6A
Other languages
English (en)
Inventor
周曦
姚志强
吴媛
杨开
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Yuncong Enterprise Development Co ltd
Original Assignee
Shanghai Yuncong Enterprise Development Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Yuncong Enterprise Development Co ltd filed Critical Shanghai Yuncong Enterprise Development Co ltd
Priority to CN202010683435.6A priority Critical patent/CN111914693A/zh
Publication of CN111914693A publication Critical patent/CN111914693A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供的一种人脸姿态调整方法、系统、装置、设备及介质，所述的方法包括：对采集的图像信息进行检测，获取人脸关联特征信息；确定用于指引人脸移动方向的视觉标定点以及调节位置，并基于所述调节位置，对人脸姿态进行调整。通过检测人脸位置和角度，利用视觉标定点的引导，调节被拍摄者的人脸姿态，让被拍摄者能够根据视觉标定点的实时反馈来纠正人脸姿态，达到较好的人像拍摄条件，避免出现人脸偏移、人眼斜视等问题。

Description

一种人脸姿态调整方法、系统、装置、设备及介质
技术领域
本发明涉及图像处理领域，特别是涉及一种人脸姿态调整方法、系统、装置、设备及介质。
背景技术
在目前现有的人脸自动拍照系统中，被拍摄者无法意识到面部的角度是否居正以及视线是否有偏差，导致拍摄结果出现人脸偏移，人眼斜视等问题。
发明内容
鉴于以上所述现有技术的缺点，本发明的目的在于提供一种人脸姿态调整方法、系统、装置、设备及介质，用于解决现有技术中人脸自动拍照出现人脸偏移的问题。
为实现上述目的及其他相关目的，本发明提供一种人脸姿态调整方法，包括：
对采集的图像信息进行检测，获取人脸关联特征信息；其中，所述人脸关联特征信息包括以下至少之一：人脸位置、人脸角度；
确定用于指引人脸移动方向的视觉标定点以及调节位置，并基于所述调节位置，对人脸姿态进行调整。
可选的，确定用于指引人脸移动方向的视觉标定点以及调节位置的步骤包括：
根据所述人脸关联特征信息的结果进行定义，确定所述视觉标定点，并根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置；
或者，通过初始化定义，预先设定所述视觉标定点，并根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置。
可选的，根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置的步骤包括：
根据所述人脸关联特征信息与所述视觉标定点的偏差确定所述调节位置，所述偏差包括位置偏差、角度偏差。
可选的，采集人脸移动过程中每一帧的人脸图像，并确定最佳人脸图像。
可选的，对采集的图像信息进行检测，获取人脸关联特征信息之后，还包括：显示人脸的轮廓信息。
可选的，所述人脸位置是指人脸外接矩形的坐标值。
可选的，所述人脸角度是指人脸的俯仰角、横滚角、偏航角。
可选的，所述人脸的俯仰角、横滚角、偏航角的获取过程为：
通过人脸关键点检测算法，检测出人脸图像中的人脸关键点，并基于所述人脸关键点的坐标及空间坐标变化矩阵，获取人脸的俯仰角、横滚角、偏航角。
可选的，对采集的图像信息进行检测，获取人脸关联特征信息还包括：判断所述人脸位置是否完整，若完整，则获取所述人脸关联特征信息。
可选的，若人脸角度偏下，处于第一调节位置的视觉标定点指引人脸向上移动；若人脸角度偏上，处于第二调节位置的视觉标定点指引人脸向下移动；若人脸角度偏左，处于第三调节位置的视觉标定点指引人脸向右移动；若人脸角度偏右，处于第四调节位置的视觉标定点指引人脸向左移动。
一种人脸姿态调整系统，包括：
采集处理模块，用于对采集的图像信息进行检测，获取人脸关联特征信息；其中，所述人脸关联特征信息包括以下至少之一：人脸位置、人脸角度；
调整模块，用于指引人脸移动方向的视觉标定点以及调节位置，并基于所述调节位置，对人脸姿态进行调整。
可选的，确定用于指引人脸移动方向的视觉标定点以及调节位置的步骤包括：
根据所述人脸关联特征信息的结果进行定义，确定所述视觉标定点，并根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置；
或者，通过初始化定义，预先设定所述视觉标定点，并根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置。
可选的，根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置的步骤包括：
根据所述人脸关联特征信息与所述视觉标定点的偏差确定所述调节位置，所述偏差包括位置偏差、角度偏差。
可选的，采集人脸移动过程中每一帧的人脸图像，并确定最佳人脸图像。
可选的，对采集的图像信息进行检测，获取人脸关联特征信息之后，还包括：显示人脸的轮廓信息。
可选的，所述人脸位置是指人脸外接矩形的坐标值。
可选的，所述人脸角度是指人脸的俯仰角、横滚角、偏航角。
可选的，所述人脸的俯仰角、横滚角、偏航角的获取过程为：
通过人脸关键点检测算法，检测出人脸图像中的人脸关键点，并基于所述人脸关键点的坐标及空间坐标变化矩阵，获取人脸的俯仰角、横滚角、偏航角。
可选的，对采集的图像信息进行检测，获取人脸关联特征信息还包括：判断所述人脸位置是否完整，若完整，则获取所述人脸关联特征信息。
可选的，若人脸角度偏下，处于第一调节位置的视觉标定点指引人脸向上移动；若人脸角度偏上，处于第二调节位置的视觉标定点指引人脸向下移动；若人脸角度偏左，处于第三调节位置的视觉标定点指引人脸向右移动；若人脸角度偏右，处于第四调节位置的视觉标定点指引人脸向左移动。
一种设备，包括：一个或多个处理器；和其上存储有指令的一个或多个机器可读介质，当所述一个或多个处理器执行时，使得所述设备执行一个或多个所述的方法。
一个或多个机器可读介质，其上存储有指令，当由一个或多个处理器执行时，使得设备执行一个或多个所述的方法。
如上所述，本发明提供一种人脸姿态调整方法、系统、装置、设备及介质，通过检测人脸位置和角度，利用视觉标定点的引导，调节被拍摄者的人脸姿态，让被拍摄者能够根据视觉标定点的实时反馈来纠正人脸姿态，达到较好的人像拍摄条件，避免出现人脸偏移、人眼斜视等问题。
附图说明
图1为本发明一实施例的人脸姿态调整方法的流程图；
图2为本发明一实施例的人脸角度的示意图；
图3为本发明又一实施例的人脸姿态调整系统的结构示意图；
图4为一实施例提供的终端设备的硬件结构示意图；
图5为另一实施例提供的终端设备的硬件结构示意图。
具体实施方式
以下通过特定的具体实例说明本发明的实施方式，本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用，本说明书中的各项细节也可以基于不同观点与应用，在没有背离本发明的精神下进行各种修饰或改变。需说明的是，在不冲突的情况下，以下实施例及实施例中的特征可以相互组合。
需要说明的是，请参阅图1-图5，以下实施例中所提供的图示仅以示意方式说明本发明的基本构想，遂图式中仅显示与本发明中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制，其实际实施时各组件的型态、数量及比例可为一种随意的改变，且其组件布局型态也可能更为复杂。
发明人发现在现有的人脸自动拍照系统中，被拍摄者无法意识到面部的角度是否居正以及视线是否有偏差，导致拍摄结果出现人脸偏移、人眼斜视等问题。请参阅图1，本发明提供一种人脸姿态调整方法，包括：
S1:对采集的图像信息进行检测，获取人脸关联特征信息；其中，所述人脸关联特征信息包括以下至少之一：人脸位置、人脸角度；
S2:确定用于指引人脸移动方向的视觉标定点以及调节位置，并基于所述调节位置，对人脸姿态进行调整。通过检测人脸位置和角度，利用视觉标定点的引导，调节被拍摄者的人脸姿态，让被拍摄者能够根据视觉标定点的实时反馈来纠正人脸姿态，达到较好的人像拍摄条件，避免出现人脸偏移、人眼斜视等问题。
在一些实施过程中，确定用于指引人脸移动方向的视觉标定点以及调节位置的步骤包括：
根据所述人脸关联特征信息的结果进行定义，确定所述视觉标定点，并根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置，例如，根据人脸关联特征信息进行3D成像，能够在拍摄屏幕上显示3D成像结果，并提供至少一个可以被拍摄者看到点，该点即为所述视觉标定点，将人脸位置、人脸角度与所述视觉标定点进行对比，进而确定被拍摄者人脸图像的调节位置；
或者，通过初始化定义，预先设定所述视觉标定点，并根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置，例如，根据人脸底库或者标准人脸样本进行随机初始化，形成预先设定的视觉标定点，将人脸位置、人脸角度与所述视觉标点进行对比，进而确定被拍摄者人脸图像的调节位置。
在一些实施过程中，根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置的步骤包括：
根据所述人脸关联特征信息与所述视觉标定点的偏差确定所述调节位置，所述偏差包括位置偏差、角度偏差，例如，将获取的人脸关联特征信息进行可视化并显示在拍摄屏幕上，同时将3D成像或者标准人脸样本形成的视觉标定点进行可视化显示，进而将所述人脸关联特征信息与所述视觉标定点的偏差进行可视化显示，又例如，所述偏差包括位置偏差、角度偏差，在拍摄屏幕上可将位置偏差和角度偏差向量化，提高姿态校正的精度和交互效率，便于将人脸姿态调正。为了提高姿态调正效率，通过采集人脸移动过程中每一帧的人脸图像，并从中确定最佳人脸图像，以便于在动态的姿态调正过程中选取已经完成姿态调正的人脸图像。
为了便于提高人脸姿态调正的精度，便于引导被拍摄者的人脸姿态调整，对采集的图像信息进行检测，获取人脸关联特征信息之后，还包括：显示人脸的轮廓信息，通过人脸的轮廓信息引导被拍摄者的人脸位置，避免出现人脸偏移，同时避免人脸图像的缺失。为避免人脸图像缺失或者被遮挡，对采集的图像信息进行检测，获取人脸关联特征信息还包括：判断所述人脸位置是否完整，若完整，则获取所述人脸关联特征信息，若不完整，则重新进行人脸图像的拍摄或者重新选择视频帧中的人脸图像。
在一些实施过程中，所述人脸位置是指人脸外接矩形的坐标值，例如，可以通过相机识别出人脸外接矩形的坐标值，进而完成人脸位置的识别和确定；
所述人脸角度是指人脸的俯仰角、横滚角、偏航角，例如，所述人脸的俯仰角、横滚角、偏航角的获取过程为：
通过人脸关键点检测算法，检测出人脸图像中的人脸关键点(包括但不限于口、鼻、嘴等人脸关键点)，并基于所述人脸关键点的坐标及空间坐标变化矩阵，获取人脸相对与该相机坐标系的俯仰角、横滚角、偏航角，请参阅图2。
在一些实施过程中，若人脸角度偏下，处于第一调节位置的视觉标定点指引人脸向上移动；若人脸角度偏上，处于第二调节位置的视觉标定点指引人脸向下移动；若人脸角度偏左，处于第三调节位置的视觉标定点指引人脸向右移动；若人脸角度偏右，处于第四调节位置的视觉标定点指引人脸向左移动。在人脸移动的过程中，人脸角度相对与视觉标定点的角度向量可视化，进而提高引导被拍摄者人脸姿态调整的交互效率，还可以在人脸移动过程中进行语音提示，进一步提高姿态调整的便捷性。
请参阅图3，一种人脸姿态调整系统，包括：
采集处理模块10，用于对采集的图像信息进行检测，获取人脸关联特征信息；其中，所述人脸关联特征信息包括以下至少之一：人脸位置、人脸角度；
调整模块20，用于指引人脸移动方向的视觉标定点以及调节位置，并基于所述调节位置，对人脸姿态进行调整。通过检测人脸位置和角度，利用视觉标定点的引导，调节被拍摄者的人脸姿态，让被拍摄者能够根据视觉标定点的实时反馈来纠正人脸姿态，达到较好的人像拍摄条件，避免出现人脸偏移、人眼斜视等问题。
可选的，确定用于指引人脸移动方向的视觉标定点以及调节位置的步骤包括：
根据所述人脸关联特征信息的结果进行定义，确定所述视觉标定点，并根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置；
或者，通过初始化定义，预先设定所述视觉标定点，并根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置。
可选的，根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置的步骤包括：
根据所述人脸关联特征信息与所述视觉标定点的偏差确定所述调节位置，所述偏差包括位置偏差、角度偏差。
可选的，采集人脸移动过程中每一帧的人脸图像，并确定最佳人脸图像。
可选的，对采集的图像信息进行检测，获取人脸关联特征信息之后，还包括：显示人脸的轮廓信息。
可选的，所述人脸位置是指人脸外接矩形的坐标值。
可选的，所述人脸角度是指人脸的俯仰角、横滚角、偏航角。
可选的，所述人脸的俯仰角、横滚角、偏航角的获取过程为：
通过人脸关键点检测算法，检测出人脸图像中的人脸关键点，并基于所述人脸关键点的坐标及空间坐标变化矩阵，获取人脸的俯仰角、横滚角、偏航角。
可选的，对采集的图像信息进行检测，获取人脸关联特征信息还包括：判断所述人脸位置是否完整，若完整，则获取所述人脸关联特征信息。
可选的，若人脸角度偏下，处于第一调节位置的视觉标定点指引人脸向上移动；若人脸角度偏上，处于第二调节位置的视觉标定点指引人脸向下移动；若人脸角度偏左，处于第三调节位置的视觉标定点指引人脸向右移动；若人脸角度偏右，处于第四调节位置的视觉标定点指引人脸向左移动。
本发明还提供一种设备，包括：一个或多个处理器；和其上存储有指令的一个或多个机器可读介质，当所述一个或多个处理器执行时，使得所述设备执行上述的方法。
本发明还提供一个或多个机器可读介质，其上存储有指令，当由一个或多个处理器执行时，使得设备执行上述的方法。
在本实施例中，该设备执行上述系统或方法，具体功能和技术效果参照上述实施例即可，此处不再赘述。
本申请实施例还提供了一种设备，该设备可以包括：一个或多个处理器；和其上存储有指令的一个或多个机器可读介质，当由所述一个或多个处理器执行时，使得所述设备执行图1所述方法。在实际应用中，该设备可以作为终端设备，也可以作为服务器，终端设备的例子可以包括：智能手机、平板电脑、电子书阅读器、MP3(动态影像专家压缩标准语音层面3，Moving Picture Experts Group Audio Layer III)播放器、MP4(动态影像专家压缩标准语音层面4，Moving Picture Experts Group Audio Layer IV)播放器、膝上型便携计算机、车载电脑、台式计算机、机顶盒、智能电视机、可穿戴设备等等，本申请实施例对于具体的设备不加以限制。
本申请实施例还提供了一种非易失性可读存储介质，该存储介质中存储有一个或多个模块(programs)，该一个或多个模块被应用在设备时，可以使得该设备执行本申请实施例的图1中图像获取方法所包含步骤的指令(instructions)。
图4为本申请一实施例提供的终端设备的硬件结构示意图。如图所示，该终端设备可以包括：输入设备1100、第一处理器1101、输出设备1102、第一存储器1103和至少一个通信总线1104。通信总线1104用于实现元件之间的通信连接。第一存储器1103可能包含高速RAM存储器，也可能还包括非易失性存储NVM，例如至少一个磁盘存储器，第一存储器1103中可以存储各种程序，用于完成各种处理功能以及实现本实施例的方法步骤。
在某些实施方式中，上述第一处理器1101例如可以为中央处理器(CentralProcessing Unit，简称CPU)、应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，该第一处理器1101通过有线或无线连接耦合到上述输入设备1100和输出设备1102。
在某些实施方式中，上述输入设备1100可以包括多种输入设备，例如可以包括面向用户的用户接口、面向设备的设备接口、软件的可编程接口、摄像头、传感器中至少一种。在某些实施方式中，该面向设备的设备接口可以是用于设备与设备之间进行数据传输的有线接口、还可以是用于设备与设备之间进行数据传输的硬件插入接口(例如USB接口、串口等)；在某些实施方式中，该面向用户的用户接口例如可以是面向用户的控制按键、用于接收语音输入的语音输入设备以及用户接收用户触摸输入的触摸感知设备(例如具有触摸感应功能的触摸屏、触控板等)；在某些实施方式中，上述软件的可编程接口例如可以是供用户编辑或者修改程序的入口，例如芯片的输入引脚接口或者输入接口等；输出设备1102可以包括显示器、音响等输出设备。
在本实施例中，该终端设备的处理器包括用于执行各设备中语音识别装置各模块的功能，具体功能和技术效果参照上述实施例即可，此处不再赘述。
图5为本申请的一个实施例提供的终端设备的硬件结构示意图。图5是对图4在实现过程中的一个具体的实施例。如图所示，本实施例的终端设备可以包括第二处理器1201以及第二存储器1202。
第二处理器1201执行第二存储器1202所存放的计算机程序代码，实现上述实施例中图1所述方法。
第二存储器1202被配置为存储各种类型的数据以支持在终端设备的操作。这些数据的示例包括用于在终端设备上操作的任何应用程序或方法的指令，例如消息，图片，视频等。第二存储器1202可能包含随机存取存储器(random access memory，简称RAM)，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。
可选地，第二处理器1201设置在处理组件1200中。该终端设备还可以包括：通信组件1203，电源组件1204，多媒体组件1205，语音组件1206，输入/输出接口1207和/或传感器组件1208。终端设备具体所包含的组件等依据实际需求设定，本实施例对此不作限定。
处理组件1200通常控制终端设备的整体操作。处理组件1200可以包括一个或多个第二处理器1201来执行指令，以完成上述数据处理方法中的全部或部分步骤。此外，处理组件1200可以包括一个或多个模块，便于处理组件1200和其他组件之间的交互。例如，处理组件1200可以包括多媒体模块，以方便多媒体组件1205和处理组件1200之间的交互。
电源组件1204为终端设备的各种组件提供电力。电源组件1204可以包括电源管理系统，一个或多个电源，及其他与为终端设备生成、管理和分配电力相关联的组件。
多媒体组件1205包括在终端设备和用户之间的提供一个输出接口的显示屏。在一些实施例中，显示屏可以包括液晶显示器(LCD)和触摸面板(TP)。如果显示屏包括触摸面板，显示屏可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。
语音组件1206被配置为输出和/或输入语音信号。例如，语音组件1206包括一个麦克风(MIC)，当终端设备处于操作模式，如语音识别模式时，麦克风被配置为接收外部语音信号。所接收的语音信号可以被进一步存储在第二存储器1202或经由通信组件1203发送。在一些实施例中，语音组件1206还包括一个扬声器，用于输出语音信号。
输入/输出接口1207为处理组件1200和外围接口模块之间提供接口，上述外围接口模块可以是点击轮，按钮等。这些按钮可包括但不限于：音量按钮、启动按钮和锁定按钮。
传感器组件1208包括一个或多个传感器，用于为终端设备提供各个方面的状态评估。例如，传感器组件1208可以检测到终端设备的打开/关闭状态，组件的相对定位，用户与终端设备接触的存在或不存在。传感器组件1208可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在，包括检测用户与终端设备间的距离。在一些实施例中，该传感器组件1208还可以包括摄像头等。
通信组件1203被配置为便于终端设备和其他设备之间有线或无线方式的通信。终端设备可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个实施例中，该终端设备中可以包括SIM卡插槽，该SIM卡插槽用于插入SIM卡，使得终端设备可以登录GPRS网络，通过互联网与服务器建立通信。
由上可知，在图5实施例中所涉及的通信组件1203、语音组件1206以及输入/输出接口1207、传感器组件1208均可以作为图4实施例中的输入设备的实现方式。
上述实施例仅例示性说明本发明的原理及其功效，而非用于限制本发明。任何熟悉此技术的人士皆可在不违背本发明的精神及范畴下，对上述实施例进行修饰或改变。因此，举凡所属技术领域中具有通常知识者在未脱离本发明所揭示的精神与技术思想下所完成的一切等效修饰或改变，仍应由本发明的权利要求所涵盖。

Claims (22)

1.一种人脸姿态调整方法，其特征在于，包括：
对采集的图像信息进行检测，获取人脸关联特征信息；其中，所述人脸关联特征信息包括以下至少之一：人脸位置、人脸角度；
确定用于指引人脸移动方向的视觉标定点以及调节位置，并基于所述调节位置，对人脸姿态进行调整。
2.根据权利要求1所述的人脸姿态调整方法，其特征在于，确定用于指引人脸移动方向的视觉标定点以及调节位置的步骤包括：
根据所述人脸关联特征信息的结果进行定义，确定所述视觉标定点，并根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置；
或者，通过初始化定义，预先设定所述视觉标定点，并根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置。
3.根据权利要求2所述的人脸姿态调整方法，其特征在于，根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置的步骤包括：
根据所述人脸关联特征信息与所述视觉标定点的偏差确定所述调节位置，所述偏差包括位置偏差、角度偏差。
4.根据权利要求2所述的人脸姿态调整方法，其特征在于，采集人脸移动过程中每一帧的人脸图像，并确定最佳人脸图像。
5.根据权利要求1或2或3或4所述的人脸姿态调整方法，其特征在于，对采集的图像信息进行检测，获取人脸关联特征信息之后，还包括：显示人脸的轮廓信息。
6.根据权利要求1所述的人脸姿态调整方法，其特征在于，所述人脸位置是指人脸外接矩形的坐标值。
7.根据权利要求1所述的人脸姿态调整方法，其特征在于，所述人脸角度是指人脸的俯仰角、横滚角、偏航角。
8.根据权利要求7所述的人脸姿态调整方法，其特征在于，所述人脸的俯仰角、横滚角、偏航角的获取过程为：
通过人脸关键点检测算法，检测出人脸图像中的人脸关键点，并基于所述人脸关键点的坐标及空间坐标变化矩阵，获取人脸的俯仰角、横滚角、偏航角。
9.根据权利要求1所述的人脸姿态调整方法，其特征在于，对采集的图像信息进行检测，获取人脸关联特征信息还包括：判断所述人脸位置是否完整，若完整，则获取所述人脸关联特征信息。
10.根据权利要求1或2或3所述的人脸姿态调整方法，其特征在于，若人脸角度偏下，处于第一调节位置的视觉标定点指引人脸向上移动；若人脸角度偏上，处于第二调节位置的视觉标定点指引人脸向下移动；若人脸角度偏左，处于第三调节位置的视觉标定点指引人脸向右移动；若人脸角度偏右，处于第四调节位置的视觉标定点指引人脸向左移动。
11.一种人脸姿态调整系统，其特征在于，包括：
采集处理模块，用于对采集的图像信息进行检测，获取人脸关联特征信息；其中，所述人脸关联特征信息包括以下至少之一：人脸位置、人脸角度；
调整模块，用于指引人脸移动方向的视觉标定点以及调节位置，并基于所述调节位置，对人脸姿态进行调整。
12.根据权利要求11所述的人脸姿态调整系统，其特征在于，确定用于指引人脸移动方向的视觉标定点以及调节位置的步骤包括：
根据所述人脸关联特征信息的结果进行定义，确定所述视觉标定点，并根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置；
或者，通过初始化定义，预先设定所述视觉标定点，并根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置。
13.根据权利要求12所述的人脸姿态调整系统，其特征在于，根据所述人脸关联特征信息以及所述视觉标定点确定所述调节位置的步骤包括：
根据所述人脸关联特征信息与所述视觉标定点的偏差确定所述调节位置，所述偏差包括位置偏差、角度偏差。
14.根据权利要求12所述的人脸姿态调整系统，其特征在于，采集人脸移动过程中每一帧的人脸图像，并确定最佳人脸图像。
15.根据权利要求11或12或13或14所述的人脸姿态调整系统，其特征在于，对采集的图像信息进行检测，获取人脸关联特征信息之后，还包括：显示人脸的轮廓信息。
16.根据权利要求11所述的人脸姿态调整系统，其特征在于，所述人脸位置是指人脸外接矩形的坐标值。
17.根据权利要求11所述的人脸姿态调整系统，其特征在于，所述人脸角度是指人脸的俯仰角、横滚角、偏航角。
18.根据权利要求17所述的人脸姿态调整系统，其特征在于，所述人脸的俯仰角、横滚角、偏航角的获取过程为：
通过人脸关键点检测算法，检测出人脸图像中的人脸关键点，并基于所述人脸关键点的坐标及空间坐标变化矩阵，获取人脸的俯仰角、横滚角、偏航角。
19.根据权利要求11所述的人脸姿态调整系统，其特征在于，对采集的图像信息进行检测，获取人脸关联特征信息还包括：判断所述人脸位置是否完整，若完整，则获取所述人脸关联特征信息。
20.根据权利要求11或12或13所述的人脸姿态调整系统，其特征在于，若人脸角度偏下，处于第一调节位置的视觉标定点指引人脸向上移动；若人脸角度偏上，处于第二调节位置的视觉标定点指引人脸向下移动；若人脸角度偏左，处于第三调节位置的视觉标定点指引人脸向右移动；若人脸角度偏右，处于第四调节位置的视觉标定点指引人脸向左移动。
21.一种设备，其特征在于，包括：
一个或多个处理器；和
其上存储有指令的一个或多个机器可读介质，当所述一个或多个处理器执行时，使得所述设备执行如权利要求1-10中一个或多个所述的方法。
22.一个或多个机器可读介质，其特征在于，其上存储有指令，当由一个或多个处理器执行时，使得设备执行如权利要求1-10中一个或多个所述的方法。
CN202010683435.6A 2020-07-16 2020-07-16 一种人脸姿态调整方法、系统、装置、设备及介质 Pending CN111914693A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010683435.6A CN111914693A (zh) 2020-07-16 2020-07-16 一种人脸姿态调整方法、系统、装置、设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010683435.6A CN111914693A (zh) 2020-07-16 2020-07-16 一种人脸姿态调整方法、系统、装置、设备及介质

Publications (1)

Publication Number Publication Date
CN111914693A true CN111914693A (zh) 2020-11-10

Family

ID=73280165

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010683435.6A Pending CN111914693A (zh) 2020-07-16 2020-07-16 一种人脸姿态调整方法、系统、装置、设备及介质

Country Status (1)

Country Link
CN (1) CN111914693A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112380972A (zh) * 2020-11-12 2021-02-19 四川长虹电器股份有限公司 一种应用于电视场景的音量调节方法
CN112836656A (zh) * 2021-02-07 2021-05-25 北京迈格威科技有限公司 设备控制方法、装置和图像采集系统
CN112987934A (zh) * 2021-04-20 2021-06-18 杭州宇泛智能科技有限公司 一种人像识别交互方法、装置及电子设备
WO2024008210A1 (zh) * 2022-07-04 2024-01-11 合肥美亚光电技术股份有限公司 锥形束ct装置的控制方法、锥形束ct装置和介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105653032A (zh) * 2015-12-29 2016-06-08 小米科技有限责任公司 显示调整方法及装置
CN107357540A (zh) * 2017-06-30 2017-11-17 维沃移动通信有限公司 一种显示方向的调整方法及移动终端
CN107807806A (zh) * 2017-10-27 2018-03-16 广东欧珀移动通信有限公司 显示参数调整方法、装置及电子装置
CN109840515A (zh) * 2019-03-06 2019-06-04 百度在线网络技术（北京）有限公司 面部姿态调整方法、装置和终端
CN110059637A (zh) * 2019-04-22 2019-07-26 上海云从企业发展有限公司 一种人脸对齐的检测方法及装置
WO2020036343A1 (en) * 2018-08-17 2020-02-20 Samsung Electronics Co., Ltd. Electronic device and control method thereof
CN111062276A (zh) * 2019-12-03 2020-04-24 广州极泽科技有限公司 基于人机交互的人体姿态推荐方法、装置、机器可读介质及设备
CN111580646A (zh) * 2020-04-22 2020-08-25 深圳市瀚邦为电子材料有限公司 一种根据人脸调整可视设备位置的方法、装置和系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105653032A (zh) * 2015-12-29 2016-06-08 小米科技有限责任公司 显示调整方法及装置
CN107357540A (zh) * 2017-06-30 2017-11-17 维沃移动通信有限公司 一种显示方向的调整方法及移动终端
CN107807806A (zh) * 2017-10-27 2018-03-16 广东欧珀移动通信有限公司 显示参数调整方法、装置及电子装置
WO2020036343A1 (en) * 2018-08-17 2020-02-20 Samsung Electronics Co., Ltd. Electronic device and control method thereof
CN109840515A (zh) * 2019-03-06 2019-06-04 百度在线网络技术（北京）有限公司 面部姿态调整方法、装置和终端
CN110059637A (zh) * 2019-04-22 2019-07-26 上海云从企业发展有限公司 一种人脸对齐的检测方法及装置
CN111062276A (zh) * 2019-12-03 2020-04-24 广州极泽科技有限公司 基于人机交互的人体姿态推荐方法、装置、机器可读介质及设备
CN111580646A (zh) * 2020-04-22 2020-08-25 深圳市瀚邦为电子材料有限公司 一种根据人脸调整可视设备位置的方法、装置和系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112380972A (zh) * 2020-11-12 2021-02-19 四川长虹电器股份有限公司 一种应用于电视场景的音量调节方法
CN112836656A (zh) * 2021-02-07 2021-05-25 北京迈格威科技有限公司 设备控制方法、装置和图像采集系统
CN112987934A (zh) * 2021-04-20 2021-06-18 杭州宇泛智能科技有限公司 一种人像识别交互方法、装置及电子设备
WO2024008210A1 (zh) * 2022-07-04 2024-01-11 合肥美亚光电技术股份有限公司 锥形束ct装置的控制方法、锥形束ct装置和介质

Similar Documents

Publication Publication Date Title
US11231845B2 (en) Display adaptation method and apparatus for application, and storage medium
CN111914693A (zh) 一种人脸姿态调整方法、系统、装置、设备及介质
CN110100251B (zh) 用于处理文档的设备、方法和计算机可读存储介质
US9756261B2 (en) Method for synthesizing images and electronic device thereof
US20120236180A1 (en) Image adjustment method and electronics system using the same
CN111062276A (zh) 基于人机交互的人体姿态推荐方法、装置、机器可读介质及设备
KR102402148B1 (ko) 전자 장치 및 그의 문자 인식 방법
CN111898495B (zh) 一种动态阈值管理方法、系统、设备及介质
CN107330868A (zh) 图片处理方法及装置
EP3544286A1 (en) Focusing method, device and storage medium
EP3175325B1 (en) Reflection-based control activation
JP2012238293A (ja) 入力装置
CN112541400B (zh) 基于视线估计的行为识别方法及装置、电子设备、存储介质
CN107958223A (zh) 人脸识别方法及装置、移动设备、计算机可读存储介质
US8983227B2 (en) Perspective correction using a reflection
CN111586279B (zh) 确定拍摄状态的方法、装置、设备及存储介质
CN112788244B (zh) 拍摄方法、拍摄装置和电子设备
WO2011096571A1 (ja) 入力装置
US9536133B2 (en) Display apparatus and control method for adjusting the eyes of a photographed user
CN112381729A (zh) 图像处理方法、装置、终端及存储介质
TW201714074A (zh) 使用手勢的拍照方法、系統與電子裝置
WO2019100547A1 (zh) 投影控制方法、装置、投影交互系统及存储介质
KR20110079969A (ko) 디스플레이 장치 및 그 제어방법
CN111710011B (zh) 一种漫画生成方法、系统、电子设备及介质
KR102614026B1 (ko) 복수의 렌즈를 구비하는 전자 장치 및 그 제어 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20201110

RJ01 Rejection of invention patent application after publication