CN108921815A - 拍照交互方法、装置、存储介质及终端设备 - Google Patents

拍照交互方法、装置、存储介质及终端设备 Download PDF

Info

Publication number
CN108921815A
CN108921815A CN201810469542.1A CN201810469542A CN108921815A CN 108921815 A CN108921815 A CN 108921815A CN 201810469542 A CN201810469542 A CN 201810469542A CN 108921815 A CN108921815 A CN 108921815A
Authority
CN
China
Prior art keywords
imaging
posture
dimensional data
evaluation information
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810469542.1A
Other languages
English (en)
Inventor
刘耀勇
陈岩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201810469542.1A priority Critical patent/CN108921815A/zh
Publication of CN108921815A publication Critical patent/CN108921815A/zh
Priority to PCT/CN2019/085459 priority patent/WO2019218879A1/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30168Image quality inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30244Camera pose

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Image Analysis (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例中提供的一种拍照交互方法、装置、存储介质及终端设备,该方法通过所述识别摄像头获取所述成像部位的姿态三维数据;通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像姿态评价信息;根据所述成像姿态评价信息确定对应的拍摄提示内容。通过采用上述技术方案,可以根据拍摄到的用户的成像部位时,根据成像部位的三维数据对成像部位的成像效果进行评价,并根据评价信息确定拍摄提示内容以提示用户拍摄到更好的照片。

Description

拍照交互方法、装置、存储介质及终端设备
技术领域
本申请实施例涉及终端设备技术领域,尤其涉及一种拍照交互方法、装置、存储介质及终端设备。
背景技术
随着终端设备的拍照技术的发展,大部分的用户都拥有可以拍照的终端设备。与传统的相机不同,通过终端设备进行拍照是非常容易的操作,传统相机进行拍摄时,一般需要进行参数设置或调整镜头焦距的操作;但是通过终端设备拍照,用户只需要在对准拍摄物后按下拍照键就可以完成。
所以随着终端设备拍照越来越方便,人们对于拍照的态度也会变得比较随意,用户可能会拍摄多张照片后再从中选取满意的照片,一般人们很难直接拍摄到满意的照片;所以需要对现有的终端设备的拍照技术进行优化。
发明内容
本申请实施例提供的一种拍照交互方法、装置、存储介质及终端设备,可以优化用户的拍照操作。
第一方面,本申请实施例提供了一种拍照交互方法,包括:
在识别摄像头拍摄到用户的成像部位时,通过所述识别摄像头获取所述成像部位的姿态三维数据;
通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像姿态评价信息;
根据所述成像姿态评价信息确定对应的拍摄提示内容。
第二方面,本申请实施例提供了一种拍照交互装置,包括:
三维数据获取模块,用于在识别摄像头拍摄到用户的成像部位时,通过所述识别摄像头获取所述成像部位的姿态三维数据;
评价确定模块,用于通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像姿态评价信息;
提示确定模块,用于根据所述成像姿态评价信息确定对应的拍摄提示内容。
第三方面,本申请实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本申请实施例所述的拍照交互方法。
第四方面,本申请实施例提供了一种终端设备,包括存储器,处理器及存储在存储器上并可在处理器运行的计算机程序,所述处理器执行所述计算机程序时实现如本申请实施例所述的拍照交互方法。
本申请实施例中提供的一种拍照交互方案,通过在识别摄像头拍摄到用户的成像部位时,通过所述识别摄像头获取所述成像部位的姿态三维数据;通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像姿态评价信息;根据所述成像姿态评价信息确定对应的拍摄提示内容。通过采用上述技术方案,可以根据拍摄到的用户的成像部位时,根据成像部位的三维数据对成像部位的成像效果进行评价,并根据评价信息确定拍摄提示内容以提示用户拍摄到更好的照片。
附图说明
图1为本申请实施例提供的一种拍照交互方法的流程示意图;
图2为本申请实施例提供的一种拍照交互方法的场景示意图;
图3为本申请实施例提供的另一种拍照交互方法的场景示意图;
图4为本申请实施例提供的另一种拍照交互方法的流程示意图;
图5为本申请实施例提供的另一种拍照交互方法的流程示意图;
图6为本申请实施例提供的另一种拍照交互方法的流程示意图;
图7为本申请实施例提供的一种初始三维数据的示意图;
图8为本申请实施例提供的另一种拍照交互方法的流程示意图;
图9为本申请实施例提供的一种拍照交互装置的结构框图;
图10为本申请实施例提供的一种终端设备的结构示意图;
图11为本申请实施例提供的另一种终端设备的结构示意图。
具体实施方式
下面结合附图并通过具体实施方式来进一步说明本申请的技术方案。可以理解的是,此处所描述的具体实施例仅仅用于解释本申请,而非对本申请的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本申请相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理,但是其中的许多步骤可以被并行地、并发地或者同时实施。此外,各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
在拍照时,由于拍摄角度和拍摄距离的不同,即使拍摄同一个人,拍出来的效果也有很大区别。普通的用户通过终端设备进行拍照时,可能不会考虑拍照的构图和拍摄角度,所以拍摄的照片的效果往往都不太美观。本申请实施例可以对用户的拍照操作提供优化提示,以使用户可以拍摄到更美观的照片。
图1为本申请实施例提供的一种拍照交互方法的流程示意图,该方法可以由拍照交互装置执行,其中该装置可以由软件和/或硬件实现,一般可以集成在终端设备中,也可以集成在其他安装有操作系统的设备中。如图1所示,该方法包括:
S110、在识别摄像头拍摄到用户的成像部位时,通过所述识别摄像头获取所述成像部位的姿态三维数据。
其中,所述成像部位为通过识别摄像头进行拍摄,所拍摄的画面中包括的用户的身体部位。示例性地,如果用户拍摄的照片是半身像,则所述成像部位包括用户的腰部以上的身体部位。
所述识别摄像头可以是终端设备上的摄像头,可以是终端设备的前置摄像头,和/或后置摄像头。示例性地,现有的终端设备中一般都设置有至少一个摄像头,一般都包括前置摄像头和后置摄像头。如果拍摄的用户是终端设备的当前使用者,所述识别摄像头可以是终端设备的前置摄像头,以便用户可以通过终端设备的屏幕了解到拍摄的画面。再如,拍摄的用户不是终端设备的当前使用者,而是其他用户,则所述识别摄像头可以是终端设备的后置摄像头;当前终端设备的当前使用者通过终端设备来拍摄其他用户的成像部位。
传统的相机进行拍摄所获取的图像一般是二维数据,即以行列矩阵规则进行排列的像素点的色彩值(RGB值)或灰度值的集合。相比二维数据,所述三维数据中还包括拍摄到的成像部位的深度信息,即拍摄的用户的身体部位上的不同空间点与摄像头的距离,所以三维数据可以表示所拍摄的物体的空间信息。所述识别摄像头可以是带有距离传感器的摄像头,距离传感器可以获取所拍摄的物体上的不同空间点与摄像头的距离,如此可以获取到拍摄的成像部位的三维数据。
所述姿态三维数据包括:所述识别摄像头拍摄的所述成像部位的三维数据;还可以包括所述成像部位在拍摄画面中的位置数据。
所述姿态三维数据可以是成像部位做静止的姿态时,所获取的一组三维数据。姿态三维数据还可以是成像部位做出动态的姿态时,所获取的多组三维数据。
可选地,所述成像部位为用户的头部。相应地,通过所述识别摄像头获取所述成像部位的姿态三维数据包括:确定头部的姿态特征部位,并通过所述识别摄像头获取所述头部的姿态特征部位的姿态三维数据。
其中,如果成像部位为用户的头部,则表示用户正在通过终端设备进行自拍,或者正在拍摄用户的证件头像照。示例性地,如果用户正在自拍,由于摄像头距离用户较近拍摄角度有限,所以如果自拍时若要拍到好看的照片,必须选择合适的角度。又如,如果正在拍摄的是用户的证件头像照,证件头像照对于拍照角度的要求更高,如果没有符合标准,则拍摄的证件头像照也无法使用。
由于用户的头部的姿态很难通过整体来判断,需要根据头部的姿态特征部位来进行判断。所述姿态特征部位可以是用于确定用户的头部姿态的特征部位。示例性地,所述姿态特征部位包括两只耳朵,可以根据两只耳朵的位置确定头部的姿态;所述姿态特征部位还可以包括脸部的五官位置,例如眼睛、鼻子和嘴巴的位置等,根据五官位置可以进一步确定头部的姿态。
所以在成像部位为用户的头部时,通过姿态特征部位的姿态三维数据可以准确确定头部的具体姿态,进一步可以提高成像姿态评价的准确性。
S111、通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像姿态评价信息。
所述姿态三维数据实际上是一组或多组的数据的集合,进一步需要根据数据的集合来分析识别该姿态三维数据实际上对应的是成像部位的具体姿态是什么。
所述成像姿态评价信息包括:对识别摄像头所拍摄的用户的成像部位的拍摄画面的评价信息,所述评价信息可以是所述拍摄画面和成像标准的差值,所述成像标准可以是系统预设。示例性地,如果是拍摄用户的证件头像照,则证件头像照的成像标准包括头部位于画面中心位置,以及双眼正视摄像头位置等。
所述成像评价模型可以是已经训练好的用于根据成像部位的姿态三维数据确定成像姿态评价信息的识别系统,所述成像评价模型可以是预存在终端设备中,或预存在后台服务器中。在需要对姿态三维数据进行识别时,调用预存的成像评价模型来识别姿态三维数据,以确定拍摄的身体部位的成像姿态评价信息。
S112、根据所述成像姿态评价信息确定对应的拍摄提示内容。
其中,可以是根据预设映射表确定姿态评价信息对应的拍摄提示内容。
所述拍摄提示内容可以是用于提示用户当前拍摄的拍摄画面的评价信息的提示内容;所述拍摄提示内容还可以是用于提示用户调整拍摄操作的提示内容,所述拍摄操作可以是对识别摄像头的操作,也可以是被拍摄的用户的姿态调整操作。
示例性地,所述拍摄提示内容可以是通过终端设备的屏幕输出的显示数据,可以是文字数据、图片数据或动画数据等;拍摄提示内容还可以是通过终端设备的扬声器输出的声音数据。拍摄提示内容可以根据系统预设或用户的选择进行设置,还可以是根据实际应用进行设置,在此不作限定。
用户可以根据拍摄提示内容,进行相应的调整,以使识别摄像头能够拍摄到更好的照片。
可选地,所述成像姿态评价信息包括所述成像部位与成像标准的误差值;所述误差值包括姿态误差值和/或构图误差值。
相应地,根据所述成像姿态评价信息确定对应的拍摄提示内容包括:
根据所述误差值确定拍摄提示内容;其中,所述拍摄提示内容用于提示用户进行相应的移动,以降低所述误差值。
其中,提示用户进行相应的移动可以包括:用户控制识别摄像头进行移动和/或用户调整成像部位的移动;用户进行相应移动后,使得误差值降低,相应地成像部位和成像标准的误差值也降低,用户可以获取到更好的照片。
示例性地,如图2所示,当前拍摄的是用户的证件头像照,通过识别摄像头113对用户进行拍摄,通过获取的成像部位的姿态三维数据得到的所述成像姿态评价信息包括:成像部位与成像标准的构图误差值较大。因为在当前拍摄的画面中,镜头角度偏高,导致头部位于画面的中下位置,而证件头像照的成像标准的头部位于画面中心位置,所以图2中成像部位和成像标准的构图误差值较大。
对应确定的拍摄提示内容可以包括:提示用户将识别摄像头的拍摄角度调低,或者提示提高用户的头部的高度。如图3所示,用户根据拍摄提示内容进行调整拍照操作后,识别摄像头拍摄的用户的头部位于画面的中心位置,更接近成像标准。从而识别摄像头对调整后的成像部位进行拍摄,可以生成更好的证件头像照。
又如,如果用户此前没有正视识别摄像头,偏向了右边;则获取的成像姿态三维数据得到的成像评价信息可以包括:成像部位与成像标准的姿态误差值较大。可以通过拍摄提示内容提示用户调整姿势,和/或调整识别摄像头的位置。
本申请实施例中提供的一种拍照交互方法,通过在识别摄像头拍摄到用户的成像部位时,通过所述识别摄像头获取所述成像部位的姿态三维数据;通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像姿态评价信息;根据所述成像姿态评价信息确定对应的拍摄提示内容。通过采用上述技术方案,可以根据拍摄到的用户的成像部位时,根据成像部位的三维数据对成像部位的成像效果进行评价,并根据评价信息确定拍摄提示内容以提示用户拍摄到更好的照片。
图4为本申请实施例提供的另一种拍照交互方法的流程示意图,在上述实施例所提供的技术方案的基础上,对根据所述成像姿态评价信息以及光源位置确定对应的拍摄提示内容进行了优化,可选地,如图4所示,该方法包括:
S120、在识别摄像头拍摄到用户的头部时,确定头部的姿态特征部位,并通过所述识别摄像头获取所述头部的姿态特征部位的姿态三维数据;以及,获取头部的光照信息,并根据所述光照信息确定光源位置。
其中,确定头部的姿态特征部位,并通过所述识别摄像头获取所述头部的姿态特征部位的姿态三维数据的具体实施方式可以参考上文的相关描述,在此不再赘述。
其中,所述头部的光照信息,为所述识别摄像头所拍摄的画面中头部包括的空间点的光照值分布信息;所述光照值可以根据所拍摄的画面的像素值进行确定。示例性地,如果所拍摄的画面中头部的平均光照值较低,低于整体画面的平均光照值,则可以确定当前拍摄角度逆光,拍摄的画面用户的头部的画面可能会过暗。所以需要确定光源位置,进而可以使用户的脸部朝向光源,以获取清楚的拍摄画面。
可以根据头部的空间点的光照值的分布信息确定光源位置;示例性地,如果所述头部的左侧的平均光照值大于右侧的平均光照值,则可以确定光源位于头部的左侧。确定了光源位置之后,可以进一步辅助用户拍摄到更清楚的画面。
S121、通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像姿态评价信息。
具体实施方式可以参考上文的相关描述,在此不再赘述。
S122、根据所述成像姿态评价信息以及光源位置确定对应的拍摄提示内容。
姿态评价信息包括成像部位在拍摄画面中的姿态的评价,光源位置可以确定拍摄画面中的成像部位的清晰效果;所以根据成像姿态评价信息以及光源位置可以对识别摄像头所拍摄的拍摄画面进行综合的判断,相应的可以提高对拍摄画面评价的准确性。
示例性地,如果当前拍摄的是用户的证件头像照,得到的所述成像姿态评价信息包括:在当前拍摄的画面中,镜头角度偏高,导致人脸位于画面的中下位置,偏离成像标准。同时用户的头部的平均光照值不均匀,头部左侧的光照平均值高于右侧的光照平均值,则也不符合证件头像照对于脸部光照均匀的要求。根据成像姿态评价信息以及光源位置确定对应的拍摄提示内容,可以进一步提高用户调整姿态或调整摄像头的准确性。
本申请实施例通过根据成像姿态评价信息以及光源位置确定对应的拍摄提示内容,可以提高对识别摄像头的拍摄画面评价的准确性,进一步提高拍摄提示内容的准确性。
图5为本申请实施例提供的另一种拍照交互方法的流程示意图,在上述任意实施例所提供的技术方案的基础上,对通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像姿态评价信息的操作进行了优化,可选地,如图5所示,该方法包括:
S130、在识别摄像头拍摄到用户的成像部位时,通过所述识别摄像头获取所述成像部位的姿态三维数据。
具体实施方式可以参考上文的相关描述,在此不再赘述。
S131、通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像类别,以及根据所述成像类别确定所述成像部位的成像姿态评价信息。
其中,照片的类型包括多种,例如,人像照片包括头像照、本身照、全身照和合照等等,不同类别的照片的成像标准也不一样。示例性地、头像照对于头部的角度和姿态要求较高,而半身照和全身照则对拍照画面构图要求较高。所以在用户通过识别摄像头进行拍照时,可以首先根据成像部位的姿态三维数据确定成像类别,进而可以根据成像类别确定对应的成像标准,如此可以提高所述成像部位的成像姿态评价信息的准确性。
S132、根据所述成像姿态评价信息确定对应的拍摄提示内容。
具体实施方式可以参考上文的相关描述,在此不再赘述。
本申请实施例通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像类别,以及根据所述成像类别确定所述成像部位的成像姿态评价信息;通过首先确定成像类别,从而选择和成像类别对应的成像标准,提高成像姿态评价信息的评价的准确性,进一步可以提高用户的拍照的操作效率。
图6为本申请实施例提供的另一种拍照交互方法的流程示意图,在上述任意实施例所提供的技术方案的基础上,对通过所述识别摄像头获取所述成像部位的姿态三维数据的操作进行了优化,可选地,如图6所示,该方法包括:
S140、在识别摄像头拍摄到用户的成像部位时,通过所述识别摄像头获取所述成像部位的部位深度数据,以及部位红外数据。
所述识别摄像头为三维(3D,Three Dimens ional)摄像头,三维摄像头中包括多种硬件结构,可包括:红外传感器、距离传感器和镜头等。
所述部位深度数据为成像部位所包括的空间点距离识别摄像头的距离值的集合;可以通过识别摄像头中的距离传感器获取成像部位的部位深度数据。
所述部位红外数据为成像部位所包括的空间点反射的红外数据的集合。其中,三维摄像头在拍摄时,其中红外传感器发射红外信号至成像部位,成像部位会对红外信息进行反射,红外传感器根据接收到的反射的红外数据可以实现成像部位的成像。
S141、根据所述部位深度数据确定所述成像部位的初始三维数据。
其中,部位深度数据中包括了成像部位所包括的空间点的距离值,所以可以根据部位深度数据确定成像部位的初始三维数据。示例性地,如图7所示,图中点a、b、c和d为四个空间点,X、Y和Z轴表示空间,其中Z轴表示空间点的深度数据,X和Y轴表示空间点的平面位置坐标。其中点a的深度数据最大,也就是点a距离识别摄像头的距离最远,从图中可以看到根据四个空间点的平面坐标和深度数据可以形成一个三维的椎体,从而根据多个空间点的部位深度数据以及空间点的平面坐标可以确定初始的三维数据。
但是如果成像部位的某些细节处被遮挡或者发生数据丢失的情况,则初始三维数据中对应的细节位置会出现数据缺失的问题,所以进一步需要根据部位红外数据对初始三维数据进行校正。
S142、根据所述部位红外数据对所述初始三维数据进行校正,以得到所述成像部位的姿态三维数据。
其中,对于成像部位所包括的空间点,每个空间点的深度数据和红外数据一一对应。对于数据缺失的空间点的深度数据,根据其对应的红外数据可以通过对整体的初始三维数据进行衡量和比对,进而对缺失的空间点进行特征补全。红外信号是一种电磁波,人眼无法看到红外信号,但是如果在夜晚或者环境较暗没有可见光的时候,红外光依然可以进行传播,所以在较暗的环境中,根据红外数据也可以生成较清晰的成像;进而可以根据部位红外数据来对初始三维数据进行校正。
可选地,可以根据相邻点的深度数据和红外数据建立拟合关系函数,并根据拟合关系函数以及缺失空间点的部位红外数据计算对应的深度数据,进而得到校正后的姿态三维数据;其中,缺失空间点为深度数据缺失的空间点,相邻空间点为缺失空间点的相邻的空间点。
S143、通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像姿态评价信息。
S144、根据所述成像姿态评价信息确定对应的拍摄提示内容。
上述操作的具体实施方式可以参考上文的相关描述,在此不再赘述。
虽然通过普通摄像头来拍摄成像部位的图像,即获取的成像部位的姿态二维数据,通过图像处理识别技术也可以识别成像部位所作的姿态。但是二维数据仅包括平面图像的数据,对于光线的要求较高,如果用户在较暗的环境中摆出成像部位的姿态,所获取的平面图像的数据中可能无法识别准确的成像姿态评价信息,所以二维数据的准确性较低。
本申请实施例通过根据所述部位深度数据确定所述成像部位的初始三维数据,根据所述部位红外数据对所述初始三维数据进行校正,以得到所述成像部位的姿态三维数据;在光线较暗的位置进行识别,也能通过部位红外数据对初始三维数据进行校正,得到完整的姿态三维数据,进而可以提高成像姿态评价信息的识别的精确性。
图8为本申请实施例提供的另一种拍照交互方法的流程示意图,在上述任意实施例所提供的技术方案的基础上,可选地,如图8所示,该方法包括:
S150、将预设样本数据输入至预设分类器中进行训练,得到成像评价模型。
其中,所述成像评价模型用于根据拍摄到的成像部位的姿态三维数据确定对应的成像姿态评价信息;所述预设样本数据包括成像部位的样本三维数据,以及对应的样本成像姿态评价信息。
其中,所述预设样本数据可以包括多个不同的样本数据,不同的样本数据对应为获取的不同成像部位,所对应的样本三维数据和对应的样本成像姿态评价信息;示例性地,如果成像部位是头部,预设样本数据可以是不同的证件头像照的样本三维数据以及对应的样本成像姿态评价信息,其中包括成像姿态评价信息不同的样本三维数据。
如果通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像类别,以及根据所述成像类别确定所述成像部位的成像姿态评价信息,则对应的预设样本数据包括成像部位的样本三维数据、对应的成像类别以及对应的样本成像姿态评价信息。由于每个成像类别的样本三维数据有所不同,对应的成像标准也有所不同,所以姿态评价信息也不同。所以将样本三维数据、对应的成像类别以及对应的样本成像姿态评价信息作为预设样本数据输入值预设分类器中进行训练,以得到成像评价模型,可以根据输入的姿态三维数据进行识别,确定对应的成像类别,并根据成像类别确定所述成像部位的成像姿态评价信息。
所述预设分类器可以是神经网络,通过将预设样本数据输入值预设分类器中进行训练;预设分类器可以提取样本三维数据的特征数据,由于样本三维数据标注了对应的样本成像姿态评价信息和/或成像类别,所以可以根据提取的特征数据确定对应的成像姿态评价信息和/或成像类别。
通过预设样本数据对预设分类器进行训练后,得到的成像评价模型可以对不同的用户的成像部位做出的姿态进行识别,并确定对应的成像姿态评价信息。
S151、在识别摄像头拍摄到用户的成像部位时,通过所述识别摄像头获取所述成像部位的姿态三维数据。
S152、通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像姿态评价信息。
S153、根据所述成像姿态评价信息确定对应的拍摄提示内容。
本申请实施例通过将预设样本数据输入至预设分类器中进行训练,得到的成像评价模型,可以对姿态三维数据进行特征提取并进行分类确定对应的成像姿态评价信息,提高成像姿态评价信息的准确性。
图9为本申请实施例提供的一种拍照交互装置的结构框图,该装置可以执行拍照交互方法,如图9所示,该装置包括:
三维数据获取模块210,用于在识别摄像头拍摄到用户的成像部位时,通过所述识别摄像头获取所述成像部位的姿态三维数据;
评价确定模块211,用于通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像姿态评价信息;
提示确定模块212,用于根据所述成像姿态评价信息确定对应的拍摄提示内容。
本申请实施例中提供的一种拍照交互装置,通过在识别摄像头拍摄到用户的成像部位时,通过所述识别摄像头获取所述成像部位的姿态三维数据;通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像姿态评价信息;根据所述成像姿态评价信息确定对应的拍摄提示内容。通过采用上述技术方案,可以根据拍摄到的用户的成像部位时,根据成像部位的三维数据对成像部位的成像效果进行评价,并根据评价信息确定拍摄提示内容以提示用户拍摄到更好的照片。
可选地,所述成像部位为用户的头部;
相应地,三维数据获取模块具体用于:确定头部的姿态特征部位,并通过所述识别摄像头获取所述头部的姿态特征部位的姿态三维数据。
可选地,还包括:
光源确定模块,用于在识别摄像头拍摄到用户的成像部位时,获取头部的光照信息,并根据所述光照信息确定光源位置;
相应地,提示确定模块具体用于:
根据所述成像姿态评价信息以及光源位置确定对应的拍摄提示内容。
可选地,评价确定模块具体包括:
通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像类别,以及根据所述成像类别确定所述成像部位的成像姿态评价信息。
可选地,所述成像姿态评价信息包括所述成像部位与成像标准的误差值;
相应地,提示确定模块具体用于:
根据所述误差值确定拍摄提示内容;其中,所述拍摄提示内容用于提示用户进行相应的移动,以降低所述误差值。
可选地,所述识别摄像头为三维摄像头;
相应地,三维数据获取模块具体用于:
通过所述识别摄像头获取所述成像部位的部位深度数据,以及部位红外数据;
根据所述部位深度数据确定所述成像部位的初始三维数据;
根据所述部位红外数据对所述初始三维数据进行校正,以得到所述成像部位的姿态三维数据。
可选地,还包括:
训练模块,用于在通过预设的成像评价模型对所述姿态三维数据进行识别之前,将预设样本数据输入至预设分类器中进行训练,得到成像评价模型;
其中,所述成像评价模型用于根据拍摄到的成像部位的姿态三维数据确定对应的成像姿态评价信息;
所述预设样本数据包括成像部位的样本三维数据,以及对应的样本成像姿态评价信息。
本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的拍照交互操作,还可以执行本申请任意实施例所提供的拍照交互方法中的相关操作。
本申请实施例还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行拍照交互方法,该方法包括:
在识别摄像头拍摄到用户的成像部位时,通过所述识别摄像头获取所述成像部位的姿态三维数据;
通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像姿态评价信息;
根据所述成像姿态评价信息确定对应的拍摄提示内容。
存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括:安装介质,例如CD-ROM、软盘或磁带装置;计算机系统存储器或随机存取存储器,诸如DRAM、DDR RAM、SRAM、EDO RAM,兰巴斯(Rambus)RAM等;非易失性存储器,诸如闪存、磁介质(例如硬盘或光存储);寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外,存储介质可以位于程序在其中被执行的第一计算机系统中,或者可以位于不同的第二计算机系统中,第二计算机系统通过网络(诸如因特网)连接到第一计算机系统。第二计算机系统可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括可以驻留在不同部位中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。
本申请实施例提供了一种终端设备,该终端设备中可集成本申请实施例提供的拍照交互装置。
图10为本申请实施例提供的一种终端设备的结构示意图,本申请实施例提供了一种终端设备30,包括存储器31,处理器32及存储在存储器31上并可在处理器运行的计算机程序,所述处理器执行所述计算机程序时实现上述实施例所述的拍照交互方法。本申请实施例提供的终端设备,可以优化用户的拍照操作。
图11为本申请实施例提供的一种终端设备的结构示意图。如图11所示,该终端设备可以包括:壳体(图中未示出)、触摸屏(图中未示出)、触摸按键(图中未示出)、存储器301、中央处理器(Central Processing Unit,CPU)302(又称处理器,以下简称CPU)、电路板(图中未示出)和电源电路(图中未示出)。所述电路板安置在所述壳体围成的空间内部;所述CPU302和所述存储器301设置在所述电路板上;所述电源电路,用于为所述终端设备的各个电路或器件供电;所述存储器301,用于存储可执行程序代码;所述CPU302通过读取所述存储器301中存储的可执行程序代码来运行与所述可执行程序代码对应的计算机程序,以实现以下步骤:
在识别摄像头拍摄到用户的成像部位时,通过所述识别摄像头获取所述成像部位的姿态三维数据;
通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像姿态评价信息;
根据所述成像姿态评价信息确定对应的拍摄提示内容。
所述终端设备还包括:外设接口303、RF(Radio Frequency,射频)电路305、音频电路306、扬声器311、电源管理芯片308、输入/输出(I/O)子系统309、触摸屏312、其他输入/控制设备310以及外部端口304,这些部件通过一个或多个通信总线或信号线307来通信。
应该理解的是,图示终端设备300仅仅是终端设备的一个范例,并且终端设备300可以具有比图中所示出的更多的或者更少的部件,可以组合两个或更多的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
下面就本实施例提供的用于实现拍照交互的终端设备进行详细的描述,该终端设备以手机为例。
存储器301,所述存储器301可以被CPU302、外设接口303等访问,所述存储器301可以包括高速随机存取存储器,还可以包括非易失性存储器,例如一个或多个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
外设接口303,所述外设接口303可以将设备的输入和输出外设连接到CPU302和存储器301。
I/O子系统309,所述I/O子系统309可以将设备上的输入输出外设,例如触摸屏312和其他输入/控制设备310,连接到外设接口303。I/O子系统309可以包括显示控制器3091和用于控制其他输入/控制设备310的一个或多个输入控制器3092。其中,一个或多个输入控制器3092从其他输入/控制设备310接收电信号或者向其他输入/控制设备310发送电信号,其他输入/控制设备310可以包括物理按钮(按压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击滚轮。值得说明的是,输入控制器3092可以与以下任一个连接:键盘、红外端口、USB接口以及诸如鼠标的指示设备。
触摸屏312,所述触摸屏312是用户终端设备与用户之间的输入接口和输出接口,将可视输出显示给用户,可视输出可以包括图形、文本、图标、视频等。
I/O子系统309中的显示控制器3091从触摸屏312接收电信号或者向触摸屏312发送电信号。触摸屏312检测触摸屏上的接触,显示控制器3091将检测到的接触转换为与显示在触摸屏312上的用户界面对象的交互,即实现人机交互,显示在触摸屏312上的用户界面对象可以是运行游戏的图标、联网到相应网络的图标等。值得说明的是,设备还可以包括光鼠,光鼠是不显示可视输出的触摸敏感表面,或者是由触摸屏形成的触摸敏感表面的延伸。
RF电路305,主要用于建立手机与无线网络(即网络侧)的通信,实现手机与无线网络的数据接收和发送。例如收发短信息、电子邮件等。具体地,RF电路305接收并发送RF信号,RF信号也称为电磁信号,RF电路305将电信号转换为电磁信号或将电磁信号转换为电信号,并且通过该电磁信号与通信网络以及其他设备进行通信。RF电路305可以包括用于执行这些功能的已知电路,其包括但不限于天线系统、RF收发机、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、CODEC(COder-DECoder,编译码器)芯片组、用户标识模块(Subscriber Identity Module,SIM)等等。
音频电路306,主要用于从外设接口303接收音频数据,将该音频数据转换为电信号,并且将该电信号发送给扬声器311。
扬声器311,用于将手机通过RF电路305从无线网络接收的语音信号,还原为声音并向用户播放该声音。
电源管理芯片308,用于为CPU302、I/O子系统及外设接口所连接的硬件进行供电及电源管理。
本申请实施例提供的终端设备,可以优化用户的拍照操作。
上述实施例中提供的拍照交互装置、存储介质及终端设备可执行本申请任意实施例所提供的拍照交互方法,具备执行该方法相应的功能模块和有益效果。未在上述实施例中详尽描述的技术细节,可参见本申请任意实施例所提供的拍照交互方法。
注意,上述仅为本申请的较佳实施例及所运用技术原理。本领域技术人员会理解,本申请不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本申请的保护范围。因此,虽然通过以上实施例对本申请进行了较为详细的说明,但是本申请不仅仅限于以上实施例,在不脱离本申请构思的情况下,还可以包括更多其他等效实施例,而本申请的范围由所附的权利要求范围决定。

Claims (10)

1.一种拍照交互方法,其特征在于,包括:
在识别摄像头拍摄到用户的成像部位时,通过所述识别摄像头获取所述成像部位的姿态三维数据;
通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像姿态评价信息;
根据所述成像姿态评价信息确定对应的拍摄提示内容。
2.如权利要求1所述的方法,其特征在于,所述成像部位为用户的头部;相应地,通过所述识别摄像头获取所述成像部位的姿态三维数据包括:
确定头部的姿态特征部位,并通过所述识别摄像头获取所述头部的姿态特征部位的姿态三维数据。
3.如权利要求2所述的方法,其特征在于,在识别摄像头拍摄到用户的成像部位时,还包括:
获取头部的光照信息,并根据所述光照信息确定光源位置;
相应地,根据所述成像姿态评价信息确定对应的拍摄提示内容包括:
根据所述成像姿态评价信息以及光源位置确定对应的拍摄提示内容。
4.如权利要求1所述的方法,其特征在于,通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像姿态评价信息包括:
通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像类别,以及根据所述成像类别确定所述成像部位的成像姿态评价信息。
5.如权利要求1所述的方法,其特征在于,所述成像姿态评价信息包括所述成像部位与成像标准的误差值;
相应地,根据所述成像姿态评价信息确定对应的拍摄提示内容包括:
根据所述误差值确定拍摄提示内容;其中,所述拍摄提示内容用于提示用户进行相应的移动,以降低所述误差值。
6.如权利要求1至5任一项所述的方法,其特征在于,所述识别摄像头为三维摄像头;相应地,通过所述识别摄像头获取所述成像部位的姿态三维数据包括:
通过所述识别摄像头获取所述成像部位的部位深度数据,以及部位红外数据;
根据所述部位深度数据确定所述成像部位的初始三维数据;
根据所述部位红外数据对所述初始三维数据进行校正,以得到所述成像部位的姿态三维数据。
7.如权利要求1至5任一项所述的方法,其特征在于,在通过预设的成像评价模型对所述姿态三维数据进行识别之前,还包括:
将预设样本数据输入至预设分类器中进行训练,得到成像评价模型;
其中,所述成像评价模型用于根据拍摄到的成像部位的姿态三维数据确定对应的成像姿态评价信息;
所述预设样本数据包括成像部位的样本三维数据,以及对应的样本成像姿态评价信息。
8.一种拍照交互装置,其特征在于,包括:
三维数据获取模块,用于在识别摄像头拍摄到用户的成像部位时,通过所述识别摄像头获取所述成像部位的姿态三维数据;
评价确定模块,用于通过预设的成像评价模型对所述姿态三维数据进行识别,以确定所述成像部位的成像姿态评价信息;
提示确定模块,用于根据所述成像姿态评价信息确定对应的拍摄提示内容。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一项所述的拍照交互方法。
10.一种终端设备,其特征在于,包括存储器,处理器及存储在存储器上并可在处理器运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1-7任一项所述的拍照交互方法。
CN201810469542.1A 2018-05-16 2018-05-16 拍照交互方法、装置、存储介质及终端设备 Pending CN108921815A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201810469542.1A CN108921815A (zh) 2018-05-16 2018-05-16 拍照交互方法、装置、存储介质及终端设备
PCT/CN2019/085459 WO2019218879A1 (zh) 2018-05-16 2019-05-05 拍照交互方法、装置、存储介质及终端设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810469542.1A CN108921815A (zh) 2018-05-16 2018-05-16 拍照交互方法、装置、存储介质及终端设备

Publications (1)

Publication Number Publication Date
CN108921815A true CN108921815A (zh) 2018-11-30

Family

ID=64403768

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810469542.1A Pending CN108921815A (zh) 2018-05-16 2018-05-16 拍照交互方法、装置、存储介质及终端设备

Country Status (2)

Country Link
CN (1) CN108921815A (zh)
WO (1) WO2019218879A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109600550A (zh) * 2018-12-18 2019-04-09 维沃移动通信有限公司 一种拍摄提示方法及终端设备
WO2019218879A1 (zh) * 2018-05-16 2019-11-21 Oppo广东移动通信有限公司 拍照交互方法、装置、存储介质及终端设备
CN114727002A (zh) * 2021-01-05 2022-07-08 北京小米移动软件有限公司 拍摄方法、装置、终端设备及存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104125396A (zh) * 2014-06-24 2014-10-29 小米科技有限责任公司 图像拍摄方法和装置
CN104914995A (zh) * 2015-05-19 2015-09-16 广东欧珀移动通信有限公司 一种拍照方法及终端
CN105205462A (zh) * 2015-09-18 2015-12-30 北京百度网讯科技有限公司 一种拍照提示方法及装置
CN105307017A (zh) * 2015-11-03 2016-02-03 Tcl集团股份有限公司 智能电视用户的姿势矫正方法及装置
CN106203254A (zh) * 2016-06-23 2016-12-07 青岛海信移动通信技术股份有限公司 一种调整拍照方向的方法及装置
CN106851094A (zh) * 2016-12-30 2017-06-13 纳恩博(北京)科技有限公司 一种信息处理方法和装置
CN107566529A (zh) * 2017-10-18 2018-01-09 维沃移动通信有限公司 一种拍照方法、移动终端及云端服务器
CN107580209A (zh) * 2017-10-24 2018-01-12 维沃移动通信有限公司 一种移动终端的拍照成像方法及装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106484086B (zh) * 2015-09-01 2019-09-20 北京三星通信技术研究有限公司 用于辅助拍摄的方法及其拍摄设备
CN107479801B (zh) * 2017-07-31 2020-06-02 Oppo广东移动通信有限公司 基于用户表情的终端显示方法、装置及终端
CN108921815A (zh) * 2018-05-16 2018-11-30 Oppo广东移动通信有限公司 拍照交互方法、装置、存储介质及终端设备

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104125396A (zh) * 2014-06-24 2014-10-29 小米科技有限责任公司 图像拍摄方法和装置
CN104914995A (zh) * 2015-05-19 2015-09-16 广东欧珀移动通信有限公司 一种拍照方法及终端
CN105205462A (zh) * 2015-09-18 2015-12-30 北京百度网讯科技有限公司 一种拍照提示方法及装置
CN105307017A (zh) * 2015-11-03 2016-02-03 Tcl集团股份有限公司 智能电视用户的姿势矫正方法及装置
CN106203254A (zh) * 2016-06-23 2016-12-07 青岛海信移动通信技术股份有限公司 一种调整拍照方向的方法及装置
CN106851094A (zh) * 2016-12-30 2017-06-13 纳恩博(北京)科技有限公司 一种信息处理方法和装置
CN107566529A (zh) * 2017-10-18 2018-01-09 维沃移动通信有限公司 一种拍照方法、移动终端及云端服务器
CN107580209A (zh) * 2017-10-24 2018-01-12 维沃移动通信有限公司 一种移动终端的拍照成像方法及装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019218879A1 (zh) * 2018-05-16 2019-11-21 Oppo广东移动通信有限公司 拍照交互方法、装置、存储介质及终端设备
CN109600550A (zh) * 2018-12-18 2019-04-09 维沃移动通信有限公司 一种拍摄提示方法及终端设备
CN109600550B (zh) * 2018-12-18 2022-05-31 维沃移动通信有限公司 一种拍摄提示方法及终端设备
CN114727002A (zh) * 2021-01-05 2022-07-08 北京小米移动软件有限公司 拍摄方法、装置、终端设备及存储介质

Also Published As

Publication number Publication date
WO2019218879A1 (zh) 2019-11-21

Similar Documents

Publication Publication Date Title
US11138434B2 (en) Electronic device for providing shooting mode based on virtual character and operation method thereof
CN108681402A (zh) 识别交互方法、装置、存储介质及终端设备
US20230394775A1 (en) Electronic device for generating image including 3d avatar reflecting face motion through 3d avatar corresponding to face and method of operating same
WO2019120032A1 (zh) 模型构建方法、拍照方法、装置、存储介质及终端
CN108646920A (zh) 识别交互方法、装置、存储介质及终端设备
CN108566516B (zh) 图像处理方法、装置、存储介质及移动终端
CN109348135A (zh) 拍照方法、装置、存储介质及终端设备
US11189071B2 (en) Electronic device for providing avatar animation and method thereof
CN108830892B (zh) 人脸图像处理方法、装置、电子设备及计算机可读存储介质
CN108494996B (zh) 图像处理方法、装置、存储介质及移动终端
CN112328091B (zh) 弹幕显示方法、装置、终端及存储介质
CN108345848A (zh) 用户注视方向识别方法及相关产品
CN109978640A (zh) 服饰试穿方法、装置、存储介质及移动终端
CN108921815A (zh) 拍照交互方法、装置、存储介质及终端设备
CN108683845B (zh) 图像处理方法、装置、存储介质及移动终端
CN113515987B (zh) 掌纹识别方法、装置、计算机设备及存储介质
CN108491780A (zh) 图像美化处理方法、装置、存储介质及终端设备
CN110349271B (zh) 透镜颜色调节方法、装置、存储介质及增强现实设备
CN112351188A (zh) 根据对象显示图形元素的装置和方法
CN108683859A (zh) 拍照优化方法、装置、存储介质及终端设备
CN112449098B (zh) 一种拍摄方法、装置、终端及存储介质
CN108388842A (zh) 智能提醒方法及相关产品
CN108765321A (zh) 拍照修复方法、装置、存储介质及终端设备
CN111982293B (zh) 体温测量方法、装置、电子设备及存储介质
CN111310701B (zh) 手势识别方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20181130