CN111953907B - 构图方法、装置 - Google Patents

构图方法、装置 Download PDF

Info

Publication number
CN111953907B
CN111953907B CN202010890174.5A CN202010890174A CN111953907B CN 111953907 B CN111953907 B CN 111953907B CN 202010890174 A CN202010890174 A CN 202010890174A CN 111953907 B CN111953907 B CN 111953907B
Authority
CN
China
Prior art keywords
key point
determining
skeleton key
portrait
composition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010890174.5A
Other languages
English (en)
Other versions
CN111953907A (zh
Inventor
孙赟
梁宇
任泓宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN202010890174.5A priority Critical patent/CN111953907B/zh
Publication of CN111953907A publication Critical patent/CN111953907A/zh
Application granted granted Critical
Publication of CN111953907B publication Critical patent/CN111953907B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)

Abstract

本申请公开了构图方法、装置及电子设备,属于通信技术领域,所述方法包括:通过摄像头获取预览图像;确定所述预览图像中,人像主体包含的各第一骨骼关键点的位置;基于各第一骨骼关键点的位置,确定人像主体对应的第一姿态;依据第一姿态以及各第一骨骼关键点,估计出人像主体的第二骨骼关键点,并得到目标人体框;基于目标人体框,生成目标构图。本申请公开的构图方法,可在构图时完善第一姿态下的人像主体应显示的骨骼关键点,避免构图时裁切掉人像主体边缘的问题,能够确保目标构图中人像主体的完整性。

Description

构图方法、装置
技术领域
本发明实施例涉及通信技术领域,尤其涉及一种构图方法、装置及电子设备。
背景技术
随着电子设备相机功能的不断提升,电子设备拍摄已基本取代了专业相机。电子设备中的摄像头组件不仅可在用户出游时辅助用户拍摄图像,还可以辅助用户查看或者记录远处的事物。
在使用电子设备拍摄图像的过程中,为拍摄出构图合理的图像,需预先对待拍摄对象进行构图。目前主流的构图方式主要包括:三分构图法以及中心构图法。中心构图法、三分构图法均聚焦于待拍摄对象中心在图像中的位置,容易出现待拍摄对象边缘被裁切的情况。
发明内容
本申请实施例的目的是提供一种构图方法,能够解决现有的构图方法存在的易将待拍摄对象边缘裁切掉的问题。
为了解决上述技术问题,本发明是这样实现的:
第一方面,本申请实施例提供了一种构图方法,其中,所述方法包括:通过摄像头获取预览图像;确定所述预览图像中,人像主体包含的各第一骨骼关键点的位置;基于各所述第一骨骼关键点的位置,确定所述人像主体对应的第一姿态;依据所述第一姿态以及各所述第一骨骼关键点,估计出所述人像主体的第二骨骼关键点,并得到目标人体框;基于所述目标人体框,生成目标构图。
第二方面,本申请实施例提供了一种构图装置,其中,所述装置包括:获取模块,用于通过摄像头获取预览图像;位置确定模块,用于确定所述预览图像中,人像主体包含的各第一骨骼关键点的位置;确定模块,用于基于各所述第一骨骼关键点的位置,确定所述人像主体对应的第一姿态;估计模块,用于依据所述第一姿态以及各所述第一骨骼关键点,估计出所述人像主体的第二骨骼关键点,并得到目标人体框;生成模块,用于基于所述目标人体框,生成目标构图。
第三方面,本申请实施例提供了一种电子设备,该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
第四方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的方法。
本申请实施例中,通过摄像头获取预览图像,确定预览图像中,人像主体包含的各第一骨骼关键点的位置;基于各第一骨骼关键点的位置,确定人像主体对应的第一姿态;依据第一姿态以及各第一骨骼关键点,估计出人像主体的第二骨骼关键点,并得到目标人体框;基于目标人体框,生成目标构图,可在构图时完善第一姿态下的人像主体应显示的骨骼关键点,避免构图时裁切掉人像主体边缘的问题,能够确保目标构图中人像主体的完整性。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对本申请实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是表示本申请实施例的一种构图方法的步骤流程图;
图2是表示本申请实施例的人像主体骨骼关键点分布示意图;
图3是表示本申请实施例的目标构图示意图;
图4是表示本申请实施例的一种构图装置的结构框图;
图5是表示本申请实施例的一种电子设备的结构框图;
图6是表示本申请实施例的一种电子设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的构图方法进行详细地说明。
参照图1,示出了本申请实施例的一种构图方法的步骤流程图。
本申请实施例的构图方法包括以下步骤:
步骤101:通过摄像头获取预览图像。
本申请实施例提供的构图方法既适用于图像拍摄场景,又适用于视频拍摄场景。相应地,预览图像可以为拍摄图像时采集的预览图像,也可以为录制视频时采集的预览图像。
步骤102:确定预览图像中,人像主体包含的各第一骨骼关键点的位置。
确定第一骨骼关键点的位置时,可通过预先训练好的人体骨骼关键点模型对拍摄预览图像进行分析,人体骨骼关键点模型中包含人体对应的骨骼关键点布局信息,将拍摄预览图像中的人像主体与人体骨骼关键点模型中的训练得到的人体骨骼关键点布局信息进行比对后,可识别到人像主体包含的各人体骨骼关键点的位置及置信度。置信度高于预设置信度的骨骼关键点可被确定为第一骨骼关键点,若骨骼关键点的置信度低于预设置信度,则确定该骨骼关键点未包含在人像主体中。
人体骨骼关键点可以包括但不限于:左耳,右耳,鼻子,左肩,右键,左髋,右髋,左肘,右肘,左手腕,右手腕,左膝,右膝,左脚踝,右脚踝等。
步骤103:基于各第一骨骼关键点的位置,确定人像主体对应的第一姿态。
人体姿态可以包括但不限于:坐姿、站姿、半身、特写等。人体姿态不同,则骨骼关键点间的位置坐标不同,因此在确定各第一骨骼关键点的位置后,可确定人像主体对应的第一姿态。
步骤104:依据第一姿态以及各第一骨骼关键点,估计出人像主体的第二骨骼关键点,并得到目标人体框。
例如:人体骨骼关键点共14个点,而人像主体中包含的第一骨骼关键点共12个点,则可估计出的第二骨骼关键点为2个,这两个第二骨骼关键点为待补全骨骼关键点。补全这两个第二骨骼关键点时,需结合第一姿态确定这两个第二骨骼关键点的具体位置。
目标人体框中包含第一骨骼关键点以及估计出的第二骨骼关键点。
图2为预览图像中的人像主体骨骼关键点分布示意图,如图2所示,人像主体中包含12个第一骨骼关键点,而训练好的人体骨骼关键点模型中默认人体包含14个骨骼关键点,通过识别可确定拍摄预览图像中的人像主体存在两个待补全的骨骼关键点分别为左脚踝和右脚踝,即估计出的第二骨骼关键点为左脚踝和右脚踝。补全人像主体的骨骼关键点后,所得到的目标人体框如图3所示。
步骤105:基于目标人体框,生成目标构图。
目标构图中包含的人像主体,相较于当前所采集到的预览图像中的人像主体更加完整。基于目标构图可进行图像拍摄或视频录制。由于目标人体框中人像主体包含全部人体骨骼关键点,因此基于目标人体框生成的目标构图可展示出完整的人物形象,从而提升所拍摄目标图像或视频的质量。
基于目标人体框生成目标构图的具体方式,可参照现有相关构图方式如:采用中心构图法、三分法构图法等,本申请实施例中对此不做具体限制。
本申请实施例提供的构图方法,通过摄像头获取预览图像;确定预览图像中,人像主体包含的各第一骨骼关键点的位置;基于各第一骨骼关键点的位置,确定人像主体对应的第一姿态;依据第一姿态以及各第一骨骼关键点估计出人像主体的第二骨骼关键点,并得到目标人体框;基于目标人体框,生成目标构图,可在构图时完善第一姿态下的人像主体应显示的骨骼关键点,避免构图时裁切掉人像主体边缘的问题,能够确保目标构图中人像主体的完整性。
例如,用户在拍照预览时,由于用户手持的原因,可能并不是整个人像都在预览视场角内,从而根据预览图像仅能确定第一骨骼关键点。这时,若按照现有技术的构图推荐方法,则会基于这些第一骨骼关键点来进行构图推荐,从而造成推荐的构图中人像主体边缘被裁剪。而基于本申请的方案,则会先估计出第二骨骼关键点,再进行构图推荐,用户可基于该构图推荐信息调整摄像头的视场角,从而将整个人像都拍摄到,避免裁切掉人像主体边缘的问题。
在一种可选地实施例中,确定预览图像中,人像主体包含的各第一骨骼关键点的位置时,可通过如下方式实现:
首先,将预览图像输入预先训练的人体骨骼关键点模型中,得到各预设骨骼关键点在人像主体中的位置及置信度;
人体骨骼关键点模型属于深度神经网络模型,人体骨骼关键点模型基于预先标记有骨骼关键点的各人体图像样本训练生成。对于基于人体图像样本训练人体骨骼关键点模型的具体方式,参照现有相关的基于图像样本训练模型的方式即可,本申请实施例中对此不做具体限制。
预览图像作为输入数据输入至人体骨骼关键点模型中,人体骨骼关键点模型的输出为各人体骨骼关键点坐标和置信度。若某个骨骼关键点在拍摄预览图像中不存在,则对应的该骨骼关键点的置信度低于预设置信度。
其次,从各预设骨骼关键点中,筛选出置信度高于预设置信度的各骨骼关键点;
再次,将各骨骼关键点,确定为预览图像中人像主体包含的第一骨骼关键点;
最后,确定各第一骨骼关键点在人像主体中的位置。
该可选地基于人体骨骼关键点模型确定预览图像中,人像主体包含的各第一骨骼关键点的位置的方式,相较于人工手动确定方式,效率高且精度高。
在一种可选地实施例中,基于各第一骨骼关键点的位置,确定人像主体对应的第一姿态的方式如下:从预设的人像主体姿态与骨骼关键点位置对应关系中,查找与各第一骨骼关键点位置匹配的第一姿态。从而准确确定用户的姿态。
在一种可选地实施例中,基于目标人体框,生成目标构图时,可通过调整目标人体框在预览图像中位置、大小,得到多个候选构图;从多个候选构图中,确定目标构图。
在具体实现过程中,可通过输出提示信息提示用户调整摄像头角度、焦距等,从而调整目标人体框在预览图像中位置、大小。每次调整后对预览图像进行采集,得到一个候选构图。从多个候选构图中确定目标构图时,可显示多个候选构图供用户选择,依据用户的选择结果确定目标构图,也可以由系统对多个候选构图进行评分,基于评分结果确定目标构图。
该种可选地确定目标构图的方式,不仅可增加拍摄的趣味性,还可以提供多个候选构图供用户选择,以满足用户的个性化需求。
可选地,从多个候选构图中,确定目标构图时,基于预先训练的构图推荐模型,对各候选构图进行评分;将评分最高的候选构图,确定为目标构图。
构图推荐模型属于深度神经网络模型,构图推荐模型是一个美学评分模型,该模型会综合考虑人体位置与图像背景的和谐度等维度的信息。构图推荐模型对候选构图的评分越高说明构图越合理,基于该构图所拍摄的目标图像布局越合理,图像质量越高。
该种可选地确定目标构图的方式,无需用户参与操作,操作便捷,能够提升用户的拍摄体验。
需要说明的是,本申请实施例提供的构图方法,执行主体可以为构图装置,或者该构图装置中的用于执行构图方法的控制模块。本申请实施例中后续以构图模块执行构图方法为例,说明本申请实施例提供的构图装置。
图4为实现本申请实施例的一种构图装置的结构框图。
本申请实施例的构图装置400包括:
获取模块401,用于通过摄像头获取预览图像;
位置确定模块,用于确定所述预览图像中,人像主体包含的各第一骨骼关键点的位置;
确定模块403,用于基于各所述第一骨骼关键点的位置,确定所述人像主体对应的第一姿态;
估计模块404,用于依据所述第一姿态以及各所述第一骨骼关键点,估计出所述人像主体的第二骨骼关键点,并得到目标人体框;
生成模块405,用于基于所述目标人体框,生成目标构图。
可选地,所述位置确定模块包括:输入子模块,用于将所述预览图像输入预先训练的人体骨骼关键点模型中,得到各预设骨骼关键点在人像主体中的位置及置信度;筛选子模块,用于从各所述预设骨骼关键点中,筛选出置信度高于预设置信度的各骨骼关键点;第一确定子模块,用于将所述各骨骼关键点,确定为所述预览图像中人像主体包含的第一骨骼关键点;位置确定子模块,用于确定各所述第一骨骼关键点在所述人像主体中的位置。
可选地,所述确定模块具体用于:从预设的人像主体姿态与骨骼关键点位置对应关系中,查找与各所述第一骨骼关键点位置匹配的第一姿态。
可选地,所述生成模块包括:调整子模块,用于通过调整所述目标人体框在所述预览图像中位置、大小,得到多个候选构图;第二确定子模块,用于从所述多个候选构图中,确定目标构图。
可选地,所述第二确定子模块包括:评分单元,用于基于预先训练的构图推荐模型,对各所述候选构图进行评分;目标构图确定单元,用于将评分最高的候选构图,确定为目标构图。
本申请实施例提供的构图装置,通过摄像头获取预览图像,确定预览图像中,人像主体包含的各第一骨骼关键点的位置;基于各第一骨骼关键点的位置,确定人像主体对应的第一姿态;依据第一姿态以及各第一骨骼关键点,估计出人像主体的第二骨骼关键点,并得到目标人体框;基于目标人体框,生成目标构图,可在构图时完善第一姿态下的人像主体应显示的骨骼关键点,避免构图时裁切掉人像主体边缘的问题,能够确保目标构图中人像主体的完整性。
本申请实施例中的构图装置可以是装置,也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备,也可以为非移动电子设备。示例性的,移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personaldigital assistant,PDA) 等,非移动电子设备可以为服务器、网络附属存储器(NetworkAttached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的构图装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为iOS操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的构图装置能够实现图1至图3的方法实施例中实现的各个过程,为避免重复,这里不再赘述。
可选地,如图5所示,本申请实施例还提供一种电子设备500,包括处理器501,存储器502,存储在存储器502上并可在所述处理器501上运行的程序或指令,该程序或指令被处理器501执行时实现上述构图方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要注意的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图6为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备600包括但不限于:射频单元601、网络模块602、音频输出单元603、输入单元604、传感器605、显示单元606、用户输入单元607、接口单元608、存储器609、以及处理器610等部件。
本领域技术人员可以理解,电子设备600还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器610逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图6中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,处理器610,用于通过摄像头获取预览图像;确定所述预览图像中,人像主体包含的各第一骨骼关键点的位置;基于各所述第一骨骼关键点的位置,确定所述人像主体对应的第一姿态;依据所述第一姿态以及各所述第一骨骼关键点,估计出所述人像主体的第二骨骼关键点,并得到目标人体框;基于所述目标人体框,生成目标构图。
本申请实施例提供的电子设备,通过摄像头获取预览图像;确定预览图像中,人像主体包含的各第一骨骼关键点的位置;基于各第一骨骼关键点的位置,确定人像主体对应的第一姿态;依据第一姿态以及各所述第一骨骼关键点,估计出人像主体的第二骨骼关键点,并得到目标人体框;基于目标人体框,生成目标构图,可在构图时完善第一姿态下的人像主体应显示的骨骼关键点,避免构图时裁切掉人像主体边缘的问题,能够确保目标构图中人像主体的完整性。
可选的,处理器610确定所述预览图像中,人像主体包含的各第一骨骼关键点的位置时,具体用于:将所述预览图像输入预先训练的人体骨骼关键点模型中,得到各预设骨骼关键点在人像主体中的位置及置信度;从各所述预设骨骼关键点中,筛选出置信度高于预设置信度的各骨骼关键点;将所述各骨骼关键点,确定为所述预览图像中人像主体包含的第一骨骼关键点;确定各所述第一骨骼关键点在所述人像主体中的位置。
可选的,处理器610基于各所述第一骨骼关键点的位置,确定所述人像主体对应的第一姿态时,具体用于:从预设的人像主体姿态与骨骼关键点位置对应关系中,查找与各所述第一骨骼关键点位置匹配的第一姿态。
可选的,处理器610基于所述目标人体框,生成目标构图时,具体用于:通过调整所述目标人体框在所述预览图像中位置、大小,得到多个候选构图;从所述多个候选构图中,确定目标构图。
可选的,处理器610从所述多个候选构图中,确定目标构图时,具体用于:基于预先训练的构图推荐模型,对各所述候选构图进行评分;将评分最高的候选构图,确定为目标构图。
应理解的是,本申请实施例中,输入单元604可以包括图形处理器 (GraphicsProcessing Unit,GPU)6041和麦克风6042,图形处理器6041 对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元606可包括显示面板6061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板6061。用户输入单元607包括触控面板6071以及其他输入设备6072。触控面板6071,也称为触摸屏。触控面板6071可包括触摸检测装置和触摸控制器两个部分。其他输入设备6072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器609可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器610 可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器610中。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述构图方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述构图方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。

Claims (10)

1.一种构图方法,其特征在于,所述方法包括:
通过摄像头获取预览图像;
确定所述预览图像中,人像主体包含的各第一骨骼关键点的位置;
基于各所述第一骨骼关键点的位置,确定所述人像主体对应的第一姿态;
依据所述第一姿态以及各所述第一骨骼关键点,估计出所述人像主体的第二骨骼关键点,并得到目标人体框;其中,所述第一骨骼关键点和所述第二骨骼关键点互为补全关系,所述目标人体框中包含所述第一骨骼关键点以及所述第二骨骼关键点;基于所述目标人体框,生成目标构图。
2.根据权利要求1所述的方法,其特征在于,确定所述预览图像中,人像主体包含的各第一骨骼关键点的位置的步骤,具体包括:
将所述预览图像输入预先训练的人体骨骼关键点模型中,得到各预设骨骼关键点在人像主体中的位置及置信度;
从各所述预设骨骼关键点中,筛选出置信度高于预设置信度的各骨骼关键点;
将所述各骨骼关键点,确定为所述预览图像中人像主体包含的第一骨骼关键点;
确定各所述第一骨骼关键点在所述人像主体中的位置。
3.根据权利要求1所述的方法,其特征在于,基于各所述第一骨骼关键点的位置,确定所述人像主体对应的第一姿态的步骤,具体包括:
从预设的人像主体姿态与骨骼关键点位置对应关系中,查找与各所述第一骨骼关键点位置匹配的第一姿态。
4.根据权利要求1所述的方法,其特征在于,基于所述目标人体框,生成目标构图的步骤,具体包括:
通过调整所述目标人体框在所述预览图像中位置、大小,得到多个候选构图;
从所述多个候选构图中,确定目标构图。
5.根据权利要求4所述的方法,其特征在于,从所述多个候选构图中,确定目标构图的步骤,具体包括:
基于预先训练的构图推荐模型,对各所述候选构图进行评分;
将评分最高的候选构图,确定为目标构图。
6.一种构图装置,其特征在于,所述装置包括:
获取模块,通过摄像头获取预览图像;
位置确定模块,用于确定所述预览图像中,人像主体包含的各第一骨骼关键点的位置;
确定模块,用于基于各所述第一骨骼关键点的位置,确定所述人像主体对应的第一姿态;
估计模块,用于依据所述第一姿态以及各所述第一骨骼关键点,估计出所述人像主体的第二骨骼关键点,并得到目标人体框;其中,所述第一骨骼关键点和所述第二骨骼关键点互为补全关系,所述目标人体框中包含所述第一骨骼关键点以及所述第二骨骼关键点;生成模块,用于基于所述目标人体框,生成目标构图。
7.根据权利要求6所述的装置,其特征在于,所述位置确定模块包括:
输入子模块,用于将所述预览图像输入预先训练的人体骨骼关键点模型中,得到各预设骨骼关键点在人像主体中的位置及置信度;
筛选子模块,用于从各所述预设骨骼关键点中,筛选出置信度高于预设置信度的各骨骼关键点;
第一确定子模块,用于将所述各骨骼关键点,确定为所述预览图像中人像主体包含的第一骨骼关键点;
位置确定子模块,用于确定各所述第一骨骼关键点在所述人像主体中的位置。
8.根据权利要求6所述的装置,其特征在于,所述确定模块具体用于:
从预设的人像主体姿态与骨骼关键点位置对应关系中,查找与各所述第一骨骼关键点位置匹配的第一姿态。
9.根据权利要求6所述的装置,其特征在于,所述生成模块包括:
调整子模块,用于通过调整所述目标人体框在所述预览图像中位置、大小,得到多个候选构图;
第二确定子模块,用于从所述多个候选构图中,确定目标构图。
10.根据权利要求9所述的装置,其特征在于,所述第二确定子模块包括:
评分单元,用于基于预先训练的构图推荐模型,对各所述候选构图进行评分;
目标构图确定单元,用于将评分最高的候选构图,确定为目标构图。
CN202010890174.5A 2020-08-28 2020-08-28 构图方法、装置 Active CN111953907B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010890174.5A CN111953907B (zh) 2020-08-28 2020-08-28 构图方法、装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010890174.5A CN111953907B (zh) 2020-08-28 2020-08-28 构图方法、装置

Publications (2)

Publication Number Publication Date
CN111953907A CN111953907A (zh) 2020-11-17
CN111953907B true CN111953907B (zh) 2021-11-23

Family

ID=73366946

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010890174.5A Active CN111953907B (zh) 2020-08-28 2020-08-28 构图方法、装置

Country Status (1)

Country Link
CN (1) CN111953907B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113542832B (zh) * 2021-07-01 2023-07-04 深圳创维-Rgb电子有限公司 显示控制方法、显示装置及计算机可读存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106534669A (zh) * 2016-10-25 2017-03-22 华为机器有限公司 一种拍摄构图方法及移动终端

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105100625B (zh) * 2015-08-27 2018-06-12 华南理工大学 一种基于图像美学的人物图像辅助拍摄方法和系统
JP6393854B2 (ja) * 2016-04-12 2018-09-19 株式会社オプティム 全天球カメラ表示画像変更システム、全天球カメラ表示画像変更方法及びプログラム
CN106357961A (zh) * 2016-08-25 2017-01-25 维沃移动通信有限公司 一种拍照方法及移动终端
CN108875573A (zh) * 2018-05-11 2018-11-23 广州二元科技有限公司 一种非全身照片转全身照片的方法
CN111368751A (zh) * 2020-03-06 2020-07-03 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN111343382B (zh) * 2020-03-09 2021-09-10 Oppo广东移动通信有限公司 拍照方法、装置、电子设备及存储介质

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106534669A (zh) * 2016-10-25 2017-03-22 华为机器有限公司 一种拍摄构图方法及移动终端

Also Published As

Publication number Publication date
CN111953907A (zh) 2020-11-17

Similar Documents

Publication Publication Date Title
CN113132618B (zh) 辅助拍照方法、装置、终端设备及存储介质
CN112954199B (zh) 视频录制方法及装置
CN113014801B (zh) 录像方法、装置、电子设备及介质
WO2022161260A1 (zh) 对焦方法、装置、电子设备及介质
CN113852757B (zh) 视频处理方法、装置、设备和存储介质
CN114598819A (zh) 视频录制方法、装置和电子设备
CN114025100B (zh) 拍摄方法、装置、电子设备和可读存储介质
CN114390201A (zh) 对焦方法及其装置
CN110086998B (zh) 一种拍摄方法及终端
CN111953907B (zh) 构图方法、装置
CN114390206A (zh) 拍摄方法、装置和电子设备
CN113347356A (zh) 拍摄方法、装置、电子设备及存储介质
CN113194256A (zh) 拍摄方法、装置、电子设备和存储介质
CN115242981B (zh) 视频播放方法、视频播放装置和电子设备
CN113852756B (zh) 图像获取方法、装置、设备和存储介质
CN112565605B (zh) 图像显示方法、装置和电子设备
CN114785957A (zh) 拍摄方法及其装置
CN114245193A (zh) 显示控制方法、装置和电子设备
CN114125297A (zh) 视频拍摄方法、装置、电子设备及存储介质
CN113660420A (zh) 视频帧处理方法和视频帧处理装置
CN113473012A (zh) 虚化处理方法、装置和电子设备
CN112672056A (zh) 图像处理方法及装置
CN112367562B (zh) 图像处理方法、装置及电子设备
CN112367468B (zh) 图像处理方法、装置及电子设备
CN110493511B (zh) 一种全景图像生成方法及移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant