CN114845038A - 视频拍摄设备的拍摄调整方法、装置及电子设备 - Google Patents
视频拍摄设备的拍摄调整方法、装置及电子设备 Download PDFInfo
- Publication number
- CN114845038A CN114845038A CN202110142550.7A CN202110142550A CN114845038A CN 114845038 A CN114845038 A CN 114845038A CN 202110142550 A CN202110142550 A CN 202110142550A CN 114845038 A CN114845038 A CN 114845038A
- Authority
- CN
- China
- Prior art keywords
- person
- shooting
- video
- position information
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 90
- 230000036544 posture Effects 0.000 claims description 149
- 238000012545 processing Methods 0.000 claims description 17
- 238000006073 displacement reaction Methods 0.000 claims description 15
- 238000003860 storage Methods 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 12
- 230000004044 response Effects 0.000 claims description 10
- 230000005540 biological transmission Effects 0.000 claims description 9
- 238000013507 mapping Methods 0.000 claims description 9
- 230000010365 information processing Effects 0.000 claims description 8
- 238000010586 diagram Methods 0.000 description 20
- 230000008569 process Effects 0.000 description 16
- 230000006870 function Effects 0.000 description 7
- 238000001514 detection method Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001902 propagating effect Effects 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- 210000003423 ankle Anatomy 0.000 description 1
- 238000013475 authorization Methods 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 229910052802 copper Inorganic materials 0.000 description 1
- 239000010949 copper Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 210000003127 knee Anatomy 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 210000000707 wrist Anatomy 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
本申请公开了一种视频拍摄设备的拍摄调整方法、装置及电子设备,包括:获取至少一个视频影像,其中,所述视频影像包含至少一个人物;获取所述视频影像中多个关键点的影像位置信息,所述关键点对应所述人物的指定的身体部位;根据所述多个关键点的影像位置信息,获得所述人物的目标姿态信息以及所述人物在视频影像中的人物相对位置信息;根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数,所述拍摄参数至少包括拍摄方向与拍摄位置;利用调整后的拍摄参数,拍摄视频影像。该方法使得视频拍摄设备可以快速的跟随人物姿态动态调整自身拍摄参数,以适应拍摄场景和人物姿态,避免人物手动操作时可能需要中断拍摄的问题。
Description
技术领域
本公开涉及互联网直播技术领域,更具体地,涉及一种针对视频拍摄设备的拍摄调整方法、装置及电子设备。本申请同时还涉及一种视频拍摄设备。
背景技术
目前,用户在进行直播或录播时,一般是将移动终端或个人计算机等设备直接作为视频拍摄设备。在该种情形下,在开始拍摄视频时,一般需要用户根据拍摄场景的变化以及自身姿态,手动调整视频拍摄设备的拍摄参数;并且,在拍摄视频的过程中,当用户自身姿态发生变化时,也需要中断直播,手动调整视频拍摄设备到相应位姿后再继续拍摄视频。因此,现有的视频拍摄设备至少存在不能根据拍摄场景或用户姿态动态调整自身拍摄参数的问题。
发明内容
本公开实施例的一个目的是提供一种调整视频拍摄设备的拍摄参数的新技术方案。
根据本公开的第一方面,提供了一种针对视频拍摄设备的拍摄调整方法,该方法包括:
获取至少一个视频影像,其中,所述视频影像包含至少一个人物;
获取所述视频影像中多个关键点的影像位置信息,所述关键点对应所述人物的指定的身体部位;
根据所述多个关键点的影像位置信息,获得所述人物的目标姿态信息以及所述人物在视频影像中的人物相对位置信息;
根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数,所述拍摄参数至少包括拍摄方向与拍摄位置;
利用调整后的拍摄参数,拍摄视频影像。
可选地,所述根据所述多个关键点的影像位置信息,获得所述人物的目标姿态信息,包括:
根据所述多个关键点的影像位置信息,获得关键点数量;
根据所述关键点数量,获得所述人物的目标姿态信息。
可选地,所述根据所述关键点数量,获得所述人物的目标姿态信息,包括:在所述关键点数量小于预设数量阈值的情况下,确定所述目标姿态信息为表征坐姿的第一姿态信息;以及,在所述关键点数量不小于所述预设数量阈值的情况下,确定所述目标姿态信息为表征站姿的第二姿态信息。
可选地,所述至少一个视频影像满足以下至少一项条件:所述至少一个视频影像的数量不小于预设数量、及所述至少一个视频影像对应的时长不小于预设时长。
可选地,所述身体部位包括头部部位;所述根据所述多个关键点的影像位置信息,获得所述人物在视频影像的人物相对位置信息,包括:从所述多个关键点的影像位置信息中,获取所述人物的头部部位的影像位置数据,其中,所述影像位置数据表征所述人物的头部部位在视频影像中的位置;根据所述影像位置数据,获得所述人物相对位置信息。
可选地,所述根据所述影像位置数据,获得所述人物相对位置信息,包括以下至少一项:在所述影像位置数据表征所述人物的头部部位处于所述视频影像的第一预设区域的情况下,确定所述人物相对位置信息为第一相对位置信息,其中,所述第一相对位置信息表征所述视频拍摄设备的影像采集装置的高度高于所述人物的头部部位;在所述位置数据表征所述人物的头部部位处于所述视频影像的第二预设区域的情况下,确定所述人物相对位置信息为第二相对位置信息,其中,所述第二相对位置信息表征所述影像采集装置的高度低于所述人物的头部部位;在所述位置数据表征所述人物的头部部位处于所述视频影像的第三预设区域的情况下,确定所述人物相对位置信息为第三相对位置信息,其中,所述第三相对位置信息表征所述影像采集装置位于所述人物的右侧;在所述位置数据表征所述人物的头部部位处于所述视频影像的第四预设区域的情况下,确定所述人物相对位置信息为第四对位置信息,其中,所述第四相对位置信息表征所述影像采集装置位于所述人物的左侧。
可选地,所述根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数,包括:根据所述目标姿态信息,调整所述视频拍摄设备的显示装置的姿态;以及,根据所述人物相对位置信息,调整所述视频拍摄设备的影像采集装置的拍摄参数。
可选地,所述根据所述目标姿态信息,调整所述视频拍摄设备的显示装置的姿态,包括:在所述目标姿态信息为表征站姿的第一姿态信息的情况下,将所述视频拍摄设备的显示装置调整为竖屏显示模式;以及,在所述目标姿态信息为表征坐姿的第二姿态信息的情况下,将所述显示装置调整为横屏显示模式。
可选地,所述根据所述人物相对位置信息,调整所述视频拍摄设备的影像采集装置的拍摄参数,包括以下至少一项:在所述人物相对位置信息为第一人物相对位置信息的情况下,控制所述影像采集装置垂直向下移动;在所述人物相对位置信息为第二人物相对位置信息的情况下,控制所述影像采集装置垂直向上移动;在所述人物相对位置信息为第三人物相对位置信息的情况下,控制所述影像采集装置水平向左移动;以及,在所述人物相对位置信息为第四人物相对位置信息的情况下,控制所述影像采集装置水平向右移动。
可选地,所述根据所述人物相对位置信息,调整所述视频拍摄设备的影像采集装置的拍摄参数,包括:获取位移数值,所述位移数值用于指示所述影像采集装置的移动距离;根据所述人物相对位置信息和所述位移数值,调整所述影像采集装置的拍摄参数。
可选地,在调整所述视频拍摄设备的拍摄参数的过程中,所述方法还包括:接收用于确认当前拍摄参数的第一输入;响应于所述第一输入,停止调整所述拍摄参数,并将当前时刻的拍摄参数作为所述视频拍摄设备的拍摄参数。
可选地,所述目标姿态信息和所述人物相对位置信息均为至少一个,所述至少一个目标姿态信息和所述至少一个人物相对位置信息分别与所述至少一个人物对应;所述根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数,包括:根据所述至少一个目标姿态信息和所述至少一个人物相对位置信息,调整所述视频拍摄设备的拍摄参数。
可选地,在调整所述拍摄参数之后,所述方法还包括:获取所述视频影像中所述人物的人物标识;根据所述人物标识与所述调整后的拍摄参数间的对应关系,获得映射数据;存储所述映射数据。
可选地,在获取到所述至少一个视频影像之后,所述方法还包括:获取所述视频影像中所述人物的人物标识;根据所述人物标识,获得与所述人物对应的预设拍摄参数;根据所述预设拍摄参数,调整所述视频拍摄设备的拍摄参数。
可选地,在调整所述拍摄参数之前,所述方法还包括:获取目标对象在所述视频影像的对象相对位置信息,其中,所述目标对象为所述视频影像中包含的、所述人物以外的对象,并且,所述目标对象对应的影像像素与所述视频影像的前景像素的比值不小于预设像素比值;所述根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数,包括:根据所述目标姿态信息、所述人物相对位置信息和所述对象相对位置信息,调整所述视频拍摄设备的拍摄参数。
可选地,在利用调整后的拍摄参数,拍摄视频影像的过程中,所述方法还包括:接收用于调整当前拍摄参数的第二输入;响应于所述第二输入,调整所述视频拍摄设备的拍摄参数。
根据本公开的第二方面,还提供一种视频拍摄设备,包括:
影像采集装置,用于采集视频影像;
影像传输装置,用于将所述视频影像实时传输至服务器;
控制模块,用于根据本公开的第一方面所述的方法调整所述影像采集装置的拍摄参数。
可选地,所述视频拍摄设备还包括:显示装置,所述显示装置与所述影像采集装置连接,用于接收并显示所述视频影像。
根据本公开的第三方面,还提供一种视频拍摄设备的拍摄调整装置,包括:
影像获取模块,用于获取至少一个视频影像,其中,所述视频影像包含至少一个人物;
影像位置信息获取模块,用于获取所述视频影像中多个关键点的影像位置信息,所述关键点对应所述人物的指定的身体部位;
信息处理模块,用于根据所述多个关键点的影像位置信息,获得所述人物的目标姿态信息以及所述人物在视频影像中的人物相对位置信息;
参数调整模块,用于根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数,所述拍摄参数至少包括拍摄方向与拍摄位置;
影像拍摄模块,用于利用调整后的拍摄参数,拍摄视频影像。
根据本公开的第四方面,还提供一种电子设备,包括根据本公开的第三方面所述的装置;或者,包括:
存储器,用于存储可执行的指令;
处理器,用于根据所述可执行的指令的控制,运行所述电子设备执行根据本公开的第一方面所述的方法。
根据本公开的第五方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有可被计算机读取执行的计算机程序,所述计算机程序用于在被所述计算机读取运行时,执行根据本公开的第一方面所述的方法。
根据本公开的实施例,在用户开始拍摄视频时或者在拍摄视频的过程中,通过获取包含至少一个人物的至少一个视频影像,并通过获取该视频影像中对应其包含的人物的指定的身体部位的多个关键点的影像位置信息,根据该影像位置信息,即可获得该人物的目标姿态信息以及该人物在该视频影像中的人物相对位置信息,进而根据该目标姿态信息和该人物相对位置信息,视频拍摄设备即可自动调整自身的拍摄参数,并利用该调整后的拍摄参数,拍摄视频影像。该方法可以使得视频拍摄设备可以快速的跟随人物姿态动态调整自身拍摄参数,以适应录制场景和人物姿态,避免人物手动操作时可能需要中断直播的问题。
通过以下参照附图对本公开的示例性实施例的详细描述,本公开的其他特征及其优点将会变得清楚。
附图说明
被结合在说明书中并构成说明书的一部分的附图示出了本公开的实施例,并且连同其说明一起用于解释本公开的原理。
图1是本公开实施例提供的视频拍摄设备的结构示意图。
图2是本公开实施例提供的视频拍摄设备的拍摄调整方法的场景示意图。
图3是本公开实施例提供的视频拍摄设备的拍摄调整方法的流程示意图。
图4是本公开实施例提供的对应人物的指定的身体部位的多个关键点的示意图。
图5是本公开实施例提供的拍摄调整方法的流程示意图。
图6是本公开实施例提供的视频拍摄设备的拍摄调整装置的示意性原理框图。
图7a是根据本公开一个实施例的电子设备的示意性原理框图。
图7b是根据本公开另一个实施例的电子设备的示意性原理框图。
具体实施方式
现在将参照附图来详细描述本公开的各种示例性实施例。应注意到:除非另外具体说明,否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本公开的范围。
以下对至少一个示例性实施例的描述实际上仅仅是说明性的,决不作为对本公开及其应用或使用的任何限制。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论,但在适当情况下,所述技术、方法和设备应当被视为说明书的一部分。
在这里示出和讨论的所有例子中,任何具体值应被解释为仅仅是示例性的,而不是作为限制。因此,示例性实施例的其他例子可以具有不同的值。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步讨论。
针对现有技术中在将移动终端或个人计算机等设备直接作为视频拍摄设备时,所存在的视频拍摄设备不能根据录制场景或人物姿态动态调整自身拍摄参数的问题,本公开的实施例提供一种用于解决上述问题的视频拍摄设备,请参看图1,其是本公开实施例提供的视频拍摄设备的结构示意图。
如图1所示,本公开的实施例提供的视频拍摄设备10可以包括影像采集装置12和影像传输装置(图中未示出)以及控制模块(图中未示出),该影像采集装置12用于采集视频影像;该影像传输装置,用于将所述视频影像实时传输至服务器;该控制模块,用于根据本公开的实施例提供的视频拍摄设备的拍摄调整方法调整所述影像采集装置的拍摄参数
在一个实施例中,该视频拍摄设备还可以包括支撑组件11,该支撑组件11与该影像采集装置12活动连接。
在具体实施时,支撑组件11可以是用于支撑影像采集装置12以及显示装置13的组件,例如,可以为云台。
在一个实施例中,影像采集装置12可以是摄像头,影像采集装置12与支撑组件11活动连接,例如,可以通过第一连接组件14与支撑组件11活动连接,该活动连接使得影像采集装置12可以相对于所述支撑组件11垂直上下移动或者水平左右移动,以调整其垂直高度或者调整其水平位置,此处不做特殊限定。
在一个实施例中,该视频拍摄设备10还可以包括显示装置13,该显示装置13与该影像采集装置12连接,并用于接收并显示影像采集装置12采集的视频影像。
显示装置13与影像采集装置12连接,其可以接收并显示影像采集装置采集的视频影像,以形成直播画面。
在具体实施时,显示装置13可以与支撑组件11活动连接,例如,可以通过第二连接组件(图中未示出)与支撑组件11活动连接,该活动连接使得显示装置13可以相对于所述支撑组件11旋转移动以及垂直上下移动,以调整其高度以及调整其竖屏显示模式或横屏显示模式。
在本实施例中,控制模块可以根据本公开实施例提供的视频拍摄设备的拍摄调整方法调整视频拍摄设备10中的显示装置13以及影像采集装置12的位姿。在具体实施时,控制模块可以通过电机控制第一连接组件14或者第二连接组件移动,以调整影像采集装置12或者显示装置13的位姿。
图2是本公开实施例提供的视频拍摄设备的拍摄调整方法的场景示意图。如图2所示,在第一时刻,视频拍摄设备10的影像采集装置12采集包含至少一个人物的至少一个视频影像,在该时刻,显示装置13可以显示该视频影像以形成直播画面或者也可以通过影像传输装置将该视频影像实时传输至服务器,根据图2所示可知,在第一时刻,人物的头部部位处于视频影像的下部区域,并且,由于人物为站姿,所以在显示装置13为横屏显示模式时,并不能在垂直方向呈现较多的影像内容,不利于用户观看;因此,视频拍摄设备10的控制模块可以获取对应该人物的指定的身体部位的多个关键点的影像位置信息,并根据该多个关键点的影像位置信息,获得该人物的目标姿态信息以及该人物在视频影像中的人物相对位置信息,进而根据该目标姿态信息以及该人物相对位置关系,调整该视频拍摄设备的拍摄参数,例如,使影像采集装置12垂直下移,以降低其高度;以及还可以翻转显示装置13,将其调整为竖屏显示模式,以使得在第二时刻,视频拍摄设备10采集的视频影像中可以在垂直方向呈现较多的影像内容,以及使人物处于视频影像的中心区域,以利于用户观看。
需要说明的是,在具体实施时,视频拍摄设备10还可以包括音频输入装置,该音频输入装置例如可以为麦克风。
根据以上描述可知,本公开实施例提供的视频拍摄设备,可以在人物开始拍摄视频或拍摄视频的过程中,根据人物的目标姿态信息,动态自适应的调整其拍摄参数,以适应拍摄场景和人物姿态,避免人物手动操作时可能需要中断拍摄的问题。
图3是本公开实施例提供的视频拍摄设备的拍摄调整方法的流程示意图。本实施例提供的方法可以应用于视频拍摄设备中,例如,可以应用于图1所示的视频拍摄设备10中。
需要说明的是,在本实施例中,是以该方法直接应用于视频拍摄设备中为例进行说明,在具体实施时,由于视频拍摄设备的计算能力可能较慢,因此,为提升计算速度,该方法也可以应用于与视频拍摄设备通信连接的电子设备,例如,服务器中,该电子设备通过获取对应人物的指定的身体部位的多个关键点的影像位置信息,获得人物的目标姿态信息以及人物在视频影像中的人物相对位置信息,并根据该目标姿态信息以及人物相对位置信息,生成调整视频拍摄设备的拍摄参数的指令,并将该指令发送给视频拍摄设备的控制模块,以使得控制模块根据该指令调整其拍摄参数,其详细处理过程此处不再赘述。
根据图3所示,本实施例的方法可以包括如下步骤S3100~S3500,以下予以详细说明。
步骤S3100,获取至少一个视频影像,其中,所述视频影像包含至少一个人物。
在本实施例中,该视频影像可以是视频拍摄设备的影像采集装置采集的包含人物的影像,例如,可以是摄像头采集的nv21格式的视频流中的视频影像。
在使用本申请实施例提供的方法调整视频拍摄设备的拍摄参数时,为了避免人物瞬间动态而造成的可能频繁调整拍摄参数,从而造成影像频繁抖动的问题,在具体实施时,该至少一个视频影像可以满足以下至少一项条件:所述至少一个视频影像的数量不小于预设数量、及所述至少一个视频影像对应的时长不小于预设时长。即,基于预设数量的视频影像或者预设时长的视频影像判断是否需要调整视频拍摄设备的拍摄参数,其中,该预设数量以及该预设时长可以根据需要进行设置,此处不做特殊限定。
步骤S3200,获取所述视频影像中多个关键点的影像位置信息,所述关键点对应所述人物的指定的身体部位。
关键点可以为对应人物的指定身体部位的点。在本实施例中,可以通过获取对应人物的不同身体部位的点,来确定人物的姿态信息,例如,人物当前是站姿还是坐姿。
请参看图4,其是本公开实施例提供的对应人物的指定身体部位的多个关键点的示意图。如图4所示,关键点可以为人物身体部位中的关节部位、头部部位等部位的关键点,例如,对应人物头部部位的关键点1,分别对应人物左右肩的关键点2以及关键点6,分别对应人物左右肘的关键点3以及关键点7,对应人物身体胸腔中间部位的关键点5,分别对应人物左右腕的关键点4以及关键点8,分别对应人物左右臀的关键点9以及关键点10,分别对应人物左右膝的关键点11以及关键点13,以及,分别对应人物左右脚踝的关键点12以及关键点14。
需要说明的是,在本实施例中,以对应人物的指定身体部位的多个关键点的数量为14个进行举例说明,在具体实施时,多个关键点的位置以及多个关键点的数量也可以根据需要进行设置,此处不做特殊限定。
另外,在本实施例中,对应每一关键点的影像位置信息,可以是该关键点在对应视频影像中的位置数据,即,坐标数据,其中,该视频影像可以是视频拍摄设备的影像采集装置采集的包含该人物的影像。
具体来讲,在本实施例中,所述获取所述视频影像的多个关键点的影像位置信息,包括:将所述视频影像输入到人体关键点识别模型中,获得所述多个关键点的影像位置信息。
即,在本实施例中,为了获得人物的姿态信息,可以通过人体关键点检测(HumanKeypointsDetection)算法,即,人体姿态估计算法获得人物是的姿态信息,例如,人物为站姿还是坐姿。
在本实施例中,在开始拍摄视频或拍摄视频的过程中,可以将视频拍摄设备的影像采集装置采集的包含至少一个人物的视频影像输入到人体关键点识别模型中,以获得该多个关键点在该视频影像中的影像位置信息。
所述人体关键点识别模型,可以为预先训练获得的、用于识别人体关键点的位置信息的卷积神经网络模型,该模型可以为2D关键点检测模型,也可以为3D关键点检测模型,此处不做特殊限定。
当然,随着技术的不断进步,也可以通过其他算法获得对应人物的指定的身体部位的多个关键点的影像位置信息,此处不再赘述。
步骤S3300,根据所述多个关键点的影像位置信息,获得所述人物的目标姿态信息以及所述人物在视频影像中的人物相对位置信息。
在经过步骤S3200获取到对应人物的指定的身体部位的多个关键点在视频影像中的位置信息之后,即可根据该多个关键点的影像位置信息,获得该人物的目标姿态信息以及该人物在该视频影像中的人物相对位置信息,以下予以详细说明。
具体来讲,所述根据所述多个关键点的影像位置信息,获得所述人物的目标姿态信息,包括:根据所述多个关键点的影像位置信息,获得关键点数量;根据所述关键点数量,获得所述人物的目标姿态信息。
在本实施例中,所述关键点数量,为有效关键点的数量,其中,有效关键点,是指该关键点对应的位置信息有效,例如,该关键点在其对应的视频帧的坐标空间中的位置数据不为零。
具体来讲,在计算机视觉领域,在使用人体关键点识别算法识别人体关键点时,当可以识别到某点的位置信息时,输出表征该点位置信息的坐标数据;而当无法识别到某点的位置信息时,则该点的坐标数据一般使用零表示,因此,可以通过判断关键点对应的位置数据是否为零来确定关键点是否有效。
例如,在位置信息为二维坐标数据时,则当某一关键点的横坐标以及纵坐标均不为零时,可以确定该关键点为有效关键点。
当然,在实际中,当人体关键点检测算法无法识别到某个关键点时,也可能将其坐标数据均设置为负值,此时,可以根据关键点的坐标数据中的数值是否大于零来判断该关键点是否有效,此处不再赘述。
需要说明的是,本实施例中是根据多个关键点的影像位置信息,来获得关键点数量,在具体实施时,也可以在使用人体关键点识别模型获得多个关键点的位置信息时,由该模型同时输出关键点数量,此处不做特殊限定。
在经过上述处理获得与人物当前姿态对应的关键点数量之后,即可根据该关键点数量,获得人物的目标姿态信息。在本实施例中,所述根据所述关键点数量,获得所述人物的目标姿态信息,包括:在所述关键点数量小于预设数量阈值的情况下,确定所述目标姿态信息为表征坐姿的第一姿态信息;以及,在所述关键点数量不小于所述预设数量阈值的情况下,确定所述目标姿态信息为表征站姿的第二姿态信息。
在本实施例中,以预设数量阈值为14进行举例说明,即,对应人物身体部位的多个关键点的数据为14个,则当关键点数量小于14个时,可以确定人物的当前姿态为坐姿,并将姿态信息设置为表征坐姿的第一姿态信息,例如,设置为“0”;反之,在关键点数量不小于14个时,则可以确定人物的当前姿态为站姿,并将姿态信息设置为表征站姿的第二姿态信息,例如,设置为“1”。需要说明的是,在具体实施时,该预设数量阈值可以根据情况进行设置,此处不做特殊限定。
还需要说明的是,在具体实施时,在视频影像的数量为多个的情况下,可以先分别根据每一视频影像,确定与人物对应的一待确定姿态信息,之后,从与该多个视频影像对应的多个待确定姿态信息中,选择对应姿态类别的数量最大且不小于预设的姿态数量阈值的待确定姿态信息作为该人物的目标姿态信息。
例如,在视频影像的数量为10,预设的姿态数量阈值为5的情况下,当在该10个视频影像对应的10个待确定姿态信息中,姿态类别为第二姿态信息,即,站姿的待确定姿态信息的数量为6个,即大于预设的姿态数量阈值的情况下,可以根据该10个视频影像,确定该人物的目标姿态信息为第二姿态信息,即,站姿。
以上,针对如何获得人物的目标姿态信息进行了说明,以下针对如何获得人物在视频影像中的人物相对位置信息进行详细说明。
在本实施例中,人物的身体部位包括头部部位;所述根据所述多个关键点的影像位置信息,获得所述人物在视频影像的人物相对位置信息,包括:从所述多个关键点的影像位置信息中,获取所述人物的头部部位的影像位置数据,其中,所述影像位置数据表征所述人物的头部部位在视频影像中的位置;根据所述影像位置数据,获得所述人物相对位置信息。
具体来讲,所述根据所述影像位置数据,获得所述人物相对位置信息,包括以下至少一项:在所述影像位置数据表征所述人物的头部部位处于所述视频影像的第一预设区域的情况下,确定所述人物相对位置信息为第一相对位置信息,其中,所述第一相对位置信息表征所述视频拍摄设备的影像采集装置的高度高于所述人物的头部部位;在所述位置数据表征所述人物的头部部位处于所述视频影像的第二预设区域的情况下,确定所述人物相对位置信息为第二相对位置信息,其中,所述第二相对位置信息表征所述影像采集装置的高度低于所述人物的头部部位;在所述位置数据表征所述人物的头部部位处于所述视频影像的第三预设区域的情况下,确定所述人物相对位置信息为第三相对位置信息,其中,所述第三相对位置信息表征所述影像采集装置位于所述人物的右侧;在所述位置数据表征所述人物的头部部位处于所述视频影像的第四预设区域的情况下,确定所述人物相对位置信息为第四对位置信息,其中,所述第四相对位置信息表征所述影像采集装置位于所述人物的左侧。
在本实施例中,该第一预设区域可以为视频影像的中央以下区域,例如可以为视频影像的1/3高度以下的区域;该第二预设区域可以为视频影像的中央以上区域,例如可以为视频影像的2/3高度以上的区域;该第三预设区域可以为视频影像的中央以左区域,例如,为最左1/3的区域;该第四预设区域可以为视频影像的中央以右区域,例如,为最右1/3的区域。
即,在拍摄视频的过程中,在人物姿态发生变化或者人物与视频拍摄设备的远近距离发生变化的情况下,为了保证人物可以处于视频影像的中心区域,以提升用户观看体验,在本实施例中,可以通过对应用户头部部位的关键点在视频影像中的影像位置数据,即坐标数据,获得用户在视频影像中的人物相对位置信息。
例如,该位置数据为二维坐标数据(x1,y1);在具体实施时,可以获得视频影像的中心点的纵坐标y,则可以在y1>y的情况下,确定人物的头部部位处于视频影像的中央以上区域;而在y1<y的情况下,确定人物的头部部位处于视频影像的中央以下区域;另外,还可以获得视频影像的中心点的横坐标x,则可以在x1<x的情况下,确定人物的头部部位处于视频影像的中央以左区域,以及,在x1>x的情况下,确定人物的头部部位处于视频影像的中央以右区域。
需要说明的是,在具体实施时,也可以通过其他方法获得人物在视频影像中的人物相对位置信息,此处不做特殊限定。
在步骤S3300之后,执行步骤S3400,根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数,所述拍摄参数至少包括拍摄方向与拍摄位置。
在经过步骤S3300获得表征人物当前姿态的目标姿态信息以及人物在视频影像中的人物相对位置信息之后,即可根据上述信息,调整视频拍摄设备的拍摄参数。
具体来讲,所述调整视频拍摄设备的拍摄参数,具体可以为调整视频拍摄设备的显示装置的横屏、竖屏显示模式,以及调整影像采集装置的高度位置和/或水平位置。
即,所述根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数,包括:根据所述目标姿态信息,调整所述视频拍摄设备的显示装置的姿态;以及,根据所述人物相对位置信息,调整所述视频拍摄设备的影像采集装置的拍摄参数。
在具体实施时,所述根据所述目标姿态信息,调整所述视频拍摄设备的显示装置的姿态,包括:在所述目标姿态信息为表征站姿的第一姿态信息的情况下,将所述视频拍摄设备的显示装置调整为竖屏显示模式;以及,在所述目标姿态信息为表征坐姿的第二姿态信息的情况下,将所述显示装置调整为横屏显示模式。
例如,在用户当前姿态为站姿时,可以旋转视频拍摄设备的显示装置,以使其为竖屏显示模式,使得视频影像可以在垂直方向显示较多内容;而在用户当前姿态为坐姿时,可以旋转视频拍摄设备的显示装置,以使其为横屏显示模式,使得视频影像可以在水平方向显示较多内容。
另外,所述根据所述人物相对位置信息,调整所述视频拍摄设备的影像采集装置的拍摄参数,包括以下至少一项:在所述相对位置关系为第一相对位置关系的情况下,控制所述影像采集装置垂直向下移动;在所述相对位置关系为第二相对位置关系的情况下,控制所述影像采集装置垂直向上移动;在所述人物相对位置信息为第三人物相对位置信息的情况下,控制所述影像采集装置水平向左移动;以及,在所述人物相对位置信息为第四人物相对位置信息的情况下,控制所述影像采集装置水平向右移动。
在具体实施时,视频拍摄设备,例如,视频拍摄设备10的控制模块可以通过第一电机控制第一连接组件14垂直上下移动和/或水平左右移动,以控制影像采集装置向上移动、向下移动、向左移动以及向右移动;以及,可以通过第二电机控制第二连接组件旋转,以调整显示装置的位姿,以使得人物处于视频影像的中央位置。
在一个实施例中,所述根据所述人物相对位置信息,调整所述视频拍摄设备的影像采集装置的拍摄参数,包括:获取位移数值,所述位移数值用于指示所述影像采集装置的移动距离;根据所述人物相对位置信息和所述位移数值,调整所述影像采集装置的拍摄参数。
即,为了精确的调整视频拍摄设备拍摄的拍摄参数,在获取到人物在视频影像中的人物相对位置信息之后,还可以根据影像采集装置的参数,计算一位移数值,该位移数值可以表征影像采集装置在垂直方向和/或水平方向上的移动距离,之后,可以根据该人物相对位姿信息以及该位移数值,精确的调整影像采集装置的拍摄参数。
在一个实施例中,在调整所述视频拍摄设备的拍摄参数的过程中,所述方法还包括:接收用于确认当前拍摄参数的第一输入;响应于所述第一输入,停止调整所述拍摄参数,并将当前时刻的拍摄参数作为所述视频拍摄设备的拍摄参数。
即,在视频拍摄设备根据人物的目标姿态信息和人物相对位置信息等信息调整其拍摄参数的过程中,在调整的过程中,当用户认为当前时刻的参数已经满足视频拍摄需求时,为了避免拍摄参数被过度调整或调整不当,用户可以通过遥控器、语音、手势或者按键等输入方式向视频拍摄设备输入确认当前拍摄参数的第一输入;响应于该第一输入,视频拍摄设备停止调整拍摄参数,并将当前时刻的拍摄参数作为视频拍摄设备的拍摄参数。当然,在具体实施时,也可以通过其他方式向视频拍摄设备输入确认信息,此处不做特殊限定。
在一个实施例中,在视频影像中包含至少一个人物的情况下,所述目标姿态信息和所述人物位置信息可以均为至少一个,并且,所述至少一个目标姿态信息和所述至少一个人物相对位置信息分别与所述至少一个人物对应;在该实施例中,所述根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数,包括:根据所述至少一个目标姿态信息和所述至少一个人物相对位置信息,调整所述视频拍摄设备的拍摄参数。
即,在视频影像中包含多个人物的情况下,可以根据该多个人物在视频影像中的综合分布,调整其拍摄参数,其具体实现方法此处不再赘述。
在步骤S3400之后,执行步骤S3500,利用调整后的拍摄参数,拍摄视频影像。
在一个实施例中,在经过上述处理调整视频拍摄设备的拍摄参数之后,为了使人物在以后使用该视频拍摄设备时,该设备可以自行将其拍摄参数调整为与该人物适配的参数,以提升用户使用体验,本实施例提供的方法还包括:获取所述视频影像中所述人物的人物标识;根据所述人物标识与所述调整后的拍摄参数间的对应关系,获得映射数据;存储所述映射数据。
在该实施例中,在经过上述步骤S3100,获取到包含至少一个人物的至少一个视频影像之后,为了进一步减少用户操作,使得视频拍摄设备可以快速的调整适配人物喜好的拍摄参数,本实施例提供的方法还包括:获取所述视频影像中所述人物的人物标识;根据所述人物标识,获得与所述人物对应的预设拍摄参数;根据所述预设拍摄参数,调整所述视频拍摄设备的拍摄参数。其中,有关如何识别视频影像中人物的人物标识,可以是在获得用户授权之后,通过使用人脸识别方法识别该人物的人物标识,其详细实现方法此处不再赘述。
在一个实施例中,在人物拍摄视频时,拍摄的视频影像中还可能包含物品,例如,在直播购物场景中,人物在直播时,视频影像中在包含人物的同时,往往还包含商品;为了更精确、智能的调整设备的拍摄参数,在本实施例中,在调整拍摄参数之前,该方法还包括:获取目标对象在所述视频影像的对象相对位置信息,其中,所述目标对象为所述视频影像中包含的、所述人物以外的对象,并且,所述目标对象对应的影像像素与所述视频影像的前景像素的比值不小于预设像素比值;所述根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数,包括:根据所述目标姿态信息、所述人物相对位置信息和所述对象相对位置信息,调整所述视频拍摄设备的拍摄参数。
在具体实施时,可以通过对视频影像进行前景、背景分割处理,并通过分割处理获得的前景图像进行对象识别处理,识别其中包含的人物以外的对象,例如,前景图像中,某一物品的像素占所有像素的比值为20%,则在预设像素比值为15%时,可以将该物品识别为目标对象;以及,在调整拍摄参数时,还可以同时根据该目标对象在视频影像中的对象相对位置信息,调整视频拍摄设备的拍摄参数。当然,在具体实施时,也可以通过其他方法识别视频影像中的目标对象,此处不再赘述。
另外,在利用调整后的拍摄参数,拍摄视频影像的过程中,为了方便用户根据需要随时调整或微调视频拍摄设备的拍摄参数,该方法还包括:接收用于调整当前拍摄参数的第二输入;响应于所述第二输入,调整所述视频拍摄设备的拍摄参数。
例如,在直播购物场景中,当需要对当前商品进行特写时,可以由用户向视频拍摄设备输入调整当前拍摄参数的第二输入,进而精确的调整设备的拍摄参数,其中,该第二输入可以是用于指示视频拍摄设备水平、垂直移动或者旋转影像采集装置的采集角度的信息,其输入方式可以为遥控器、手势、语音以及按键等方式,此处不做特殊限定。
综上所述,本实施例提供的视频拍摄设备以及视频拍摄设备的拍摄调整方法,在用户开始拍摄视频时或者在拍摄视频的过程中,通过获取包含至少一个视频影像,并通过获取该视频影像中对应其包含的人物的指定的身体部位的多个关键点的影像位置信息,根据该影像位置信息,即可获得该人物的目标姿态信息以及该人物在该视频影像中的人物相对位置信息,进而根据该目标姿态信息和该人物相对位置信息,视频拍摄设备即可自动调整自身的拍摄参数,并利用该调整后的拍摄参数,拍摄视频影像。该方法可以使得视频拍摄设备可以快速的跟随人物姿态动态调整自身拍摄参数,以适应录制场景和人物姿态,避免人物手动操作时可能需要中断直播的问题。
图5给出了视频拍摄设备10应用上述拍摄调整方法的一个实施例的流程示意图,在该例子中以该视频拍摄设备10用于拍摄直播视频为例进行说明。
步骤S5100,开始直播。
步骤S5200,采集至少一个视频影像,其中,所述视频影像包含主播。
即,在视频拍摄设备接收到主播的开播指令之后,响应于该指令,视频拍摄设备控制其包含的面相主播的影像采集装置,例如,摄像头采集包含主播的至少一个视频影像。在具体实施时,该视频影像的格式可以为nv21格式。
步骤S5300,获取视频影像中对应于主播的指定身体部位的多个关键点的影像位置信息。
在获取到上述视频影像之后,通过将该视频影像逐帧调用人体姿态识别算法,例如,pixelAI算法,得到人体姿态识别的多个关键点,例如,14个关键点的影像位置信息,该影像位置信息例如可以直接为该14个关键点的坐标。
在步骤5300之后,执行步骤S5400,根据影像位置信息,获得头部关键点的坐标;以及,执行步骤S5700,根据影像位置信息,获得关键点数量。
具体来讲,在获得该多个关键点的影像位置信息,即,坐标之后,可以通过头部关键点的坐标,判断头部关键点坐标在屏幕,即,视频影像中所处的区域,在该头部关键点的坐标位于屏幕上方的情况下,执行步骤S5500,向上调节摄像头高度;以及,在该头部关键点的坐标位于屏幕下方的情况下,执行步骤S5600,向下调节摄像头高度;即,通过步骤S5500以及步骤S5600,确保主播位置在视频影像的中心。
另外,还可以通过该多个关键点中的有效关键点,即对应坐标中数值不为零的关键点的数量,确定主播当前时刻是站播还是坐播,其中,用于执行判断的预设数量阈值可以为14;并在该关键点数量小于14的情况下,执行步骤S5800,确定主播位姿为坐播,调节显示装置为横屏显示,以在水平方向上展示更多影像内容;以及,在该关键点数量不小于14的情况下,执行步骤S5900,确定主播位姿为站播,调节显示装置为竖屏展示,以在垂直方向上展示更多影像内容。
在该实施例中,可以通过调节电机调节影像采集装置的采集参数以及显示装置的显示模式;当然,在调整过程中,也可以使用遥控器对拍摄参数进行微调,以更精确的调整设备的拍摄参数。
根据以上实施例可知,在视频拍摄,例如直播的过程中,视频拍摄设备通过识别人物对应的多个关键点的影像位置信息,从而获得头部关键点坐标以及获得关键点数量;之后,视频拍摄设备可以不需要用户手动调整其拍摄参数,而是根据头部关键点坐标,自适应的调整其影像采集装置的拍摄参数,例如,拍摄方向和拍摄角度等;以及,还可以根据关键点数量,确定主播是站播还是坐播,从而自适应的调整其显示装置的显示模式,以向用户提供较好的观看体验。
与上述实施例对应,本实施例还提供一种视频拍摄设备的拍摄调整装置,如图6所示,其是本公开实施例提供的视频拍摄设备的拍摄调整装置的示意性原理框图。
根据图6所示,本实施例的视频拍摄设备的拍摄调整装置6000包括影像获取模块6100、影像位置信息获取模块6200、信息处理模块6300、参数调整模块6400和影像拍摄模块6500。
该影像获取模块6100,用于获取至少一个视频影像,其中,所述视频影像包含至少一个人物。
该影像位置信息获取模块6200,用于获取所述视频影像中多个关键点的影像位置信息,所述关键点对应所述人物的指定的身体部位。
在一个实施例中,该影像位置信息获取模块6200在获取所述视频影像的多个关键点的影像位置信息时,可以用于:将所述视频影像输入到人体关键点识别模型中,获得所述多个关键点的影像位置信息。
该信息处理模块6300,用于根据所述多个关键点的影像位置信息,获得所述人物的目标姿态信息以及所述人物在视频影像中的人物相对位置信息。
在一个实施例中,该信息处理模块6300在根据所述多个关键点的影像位置信息,获得所述人物的目标姿态信息时,可以用于:根据所述多个关键点的影像位置信息,获得关键点数量;根据所述关键点数量,获得所述人物的目标姿态信息。
在该实施例中,该信息处理模块6300在根据所述关键点数量,获得所述人物的目标姿态信息时,可以用于:在所述关键点数量小于预设数量阈值的情况下,确定所述目标姿态信息为表征坐姿的第一姿态信息;以及,在所述关键点数量不小于所述预设数量阈值的情况下,确定所述目标姿态信息为表征站姿的第二姿态信息。
在一个实施例中,所述身体部位包括头部部位;该信息处理模块6300在根据所述多个关键点的影像位置信息,获得所述人物在视频影像的人物相对位置信息时,可以用于:从所述多个关键点的影像位置信息中,获取所述人物的头部部位的影像位置数据,其中,所述影像位置数据表征所述人物的头部部位在视频影像中的位置;根据所述影像位置数据,获得所述人物相对位置信息。
在该实施例中,该信息处理模块6300用于通过以下至少一项,获得所述人物相对位置信息:在所述影像位置数据表征所述人物的头部部位处于所述视频影像的第一预设区域的情况下,确定所述人物相对位置信息为第一相对位置信息,其中,所述第一相对位置信息表征所述视频拍摄设备的影像采集装置的高度高于所述人物的头部部位;在所述位置数据表征所述人物的头部部位处于所述视频影像的第二预设区域的情况下,确定所述人物相对位置信息为第二相对位置信息,其中,所述第二相对位置信息表征所述影像采集装置的高度低于所述人物的头部部位;在所述位置数据表征所述人物的头部部位处于所述视频影像的第三预设区域的情况下,确定所述人物相对位置信息为第三相对位置信息,其中,所述第三相对位置信息表征所述影像采集装置位于所述人物的右侧;在所述位置数据表征所述人物的头部部位处于所述视频影像的第四预设区域的情况下,确定所述人物相对位置信息为第四对位置信息,其中,所述第四相对位置信息表征所述影像采集装置位于所述人物的左侧。
该参数调整模块6400,用于根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数,所述拍摄参数至少包括拍摄方向与拍摄位置。
在一个实施例中,该参数调整模块6400在根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数时,可以用于:根据所述目标姿态信息,调整所述视频拍摄设备的显示装置的姿态;以及,根据所述人物相对位置信息,调整所述视频拍摄设备的影像采集装置的拍摄参数。
在该实施例中,该参数调整模块6400在根据所述目标姿态信息,调整所述视频拍摄设备的显示装置的姿态时,可以用于:在所述目标姿态信息为表征站姿的第一姿态信息的情况下,将所述视频拍摄设备的显示装置调整为竖屏显示模式;以及,在所述目标姿态信息为表征坐姿的第二姿态信息的情况下,将所述显示装置调整为横屏显示模式。
在该实施例中,该参数调整模块6400用于通过以下至少一项调整所述视频拍摄设备的影像采集装置的拍摄参数:在所述人物相对位置信息为第一人物相对位置信息的情况下,控制所述影像采集装置垂直向下移动;在所述人物相对位置信息为第二人物相对位置信息的情况下,控制所述影像采集装置垂直向上移动;在所述人物相对位置信息为第三人物相对位置信息的情况下,控制所述影像采集装置水平向左移动;以及,在所述人物相对位置信息为第四人物相对位置信息的情况下,控制所述影像采集装置水平向右移动。
在一个实施例中,该参数调整模块6400在根据所述人物相对位置信息,调整所述视频拍摄设备的影像采集装置的拍摄参数时,可以用于:获取位移数值,所述位移数值用于指示所述影像采集装置的移动距离;根据所述人物相对位置信息和所述位移数值,调整所述影像采集装置的拍摄参数。
在一个实施例中,该装置还包括拍摄参数确认模块,用于:在调整所述视频拍摄设备的拍摄参数的过程中,接收用于确认当前拍摄参数的第一输入;响应于所述第一输入,停止调整所述拍摄参数,并将当前时刻的拍摄参数作为所述视频拍摄设备的拍摄参数。
在一个实施例中,所述目标姿态信息和所述人物相对位置信息均为至少一个,所述至少一个目标姿态信息和所述至少一个人物相对位置信息分别与所述至少一个人物对应;该参数调整模块6400在根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数时,可以用于:根据所述至少一个目标姿态信息和所述至少一个人物相对位置信息,调整所述视频拍摄设备的拍摄参数。
在一个实施例中,该装置还包括映射数据存储模块,用于:在调整所述拍摄参数之后,获取所述视频影像中所述人物的人物标识;根据所述人物标识与所述调整后的拍摄参数间的对应关系,获得映射数据;存储所述映射数据。
在一个实施例中,该装置还包括对象相对位置信息获取模块,用于:在调整所述拍摄参数之前,获取目标对象在所述视频影像的对象相对位置信息,其中,所述目标对象为所述视频影像中包含的、所述人物以外的对象,并且,所述目标对象对应的影像像素与所述视频影像的前景像素的比值不小于预设像素比值。
在该实施例中,该参数调整模块6400在根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数时,可以用于:根据所述目标姿态信息、所述人物相对位置信息和所述对象相对位置信息,调整所述视频拍摄设备的拍摄参数。
该影像拍摄模块6500,用于利用调整后的拍摄参数,拍摄视频影像。
在一个实施例中,该装置还包括标识对应模块,用于:在获取到所述至少一个视频影像之后,获取所述视频影像中所述人物的人物标识;根据所述人物标识,获得与所述人物对应的预设拍摄参数;根据所述预设拍摄参数,调整所述视频拍摄设备的拍摄参数。
在一个实施例中,该装置还包括参数微调模块,用于:在利用调整后的拍摄参数,拍摄视频影像的过程中,接收用于调整当前拍摄参数的第二输入;响应于所述第二输入,调整所述视频拍摄设备的拍摄参数。
与上述实施例对应,本实施例提供一种电子设备,如图7a所示,该电子设备100包括根据本公开任意实施例的视频拍摄设备的拍摄调整装置6000。
在另一个实施例中,如图7b所示,该电子设备100可以包括存储器110和处理器120,该存储器110用于存储可执行的指令;该处理器120用于根据该可执行的指令的控制,执行如本公开任意方法实施例的方法。
与上述方法实施例对应,在本实施例中,还提供一种计算机可读存储介质,该计算机可读存储介质存储有可被计算机读取并运行的计算机程序,所述计算机程序用于在被所述计算机读取运行时,执行如本公开以上任意实施例所述的方法。
本公开可以是系统、方法和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质,其上载有用于使处理器实现本公开的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身,诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如,通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备,或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令,并转发该计算机可读程序指令,以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本公开操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码,所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等,以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中,通过利用计算机可读程序指令的状态信息来个性化定制电子电路,例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA),该电子电路可以执行计算机可读程序指令,从而实现本公开的各个方面。
这里参照根据本公开实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本公开的各个方面。应当理解,流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合,都可以由计算机可读程序指令实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,从而生产出一种机器,使得这些指令在通过计算机或其他可编程数据处理装置的处理器执行时,产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中,这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作,从而,存储有指令的计算机可读介质则包括一个制造品,其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
也可以把计算机可读程序指令加载到计算机、其他可编程数据处理装置、或其他设备上,使得在计算机、其他可编程数据处理装置或其他设备上执行一系列操作步骤,以产生计算机实现的过程,从而使得在计算机、其他可编程数据处理装置、或其他设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本公开的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分,所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。对于本领域技术人员来说公知的是,通过硬件方式实现、通过软件方式实现以及通过软件和硬件结合的方式实现都是等价的。
以上已经描述了本公开的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中的技术改进,或者使本技术领域的其他普通技术人员能理解本文披露的各实施例。本公开的范围由所附权利要求来限定。
Claims (22)
1.一种视频拍摄设备的拍摄调整方法,包括:
获取至少一个视频影像,其中,所述视频影像包含至少一个人物;
获取所述视频影像中多个关键点的影像位置信息,所述关键点对应所述人物的指定的身体部位;
根据所述多个关键点的影像位置信息,获得所述人物的目标姿态信息以及所述人物在视频影像中的人物相对位置信息;
根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数,所述拍摄参数至少包括拍摄方向与拍摄位置;
利用调整后的拍摄参数,拍摄视频影像。
2.根据权利要求1所述的方法,所述根据所述多个关键点的影像位置信息,获得所述人物的目标姿态信息,包括:
根据所述多个关键点的影像位置信息,获得关键点数量;
根据所述关键点数量,获得所述人物的目标姿态信息。
3.根据权利要求2所述的方法,所述根据所述关键点数量,获得所述人物的目标姿态信息,包括:
在所述关键点数量小于预设数量阈值的情况下,确定所述目标姿态信息为表征坐姿的第一姿态信息;以及,
在所述关键点数量不小于所述预设数量阈值的情况下,确定所述目标姿态信息为表征站姿的第二姿态信息。
4.根据权利要求1所述的方法,所述至少一个视频影像满足以下至少一项条件:所述至少一个视频影像的数量不小于预设数量、及所述至少一个视频影像对应的时长不小于预设时长。
5.根据权利要求1所述的方法,所述身体部位包括头部部位;
所述根据所述多个关键点的影像位置信息,获得所述人物在视频影像的人物相对位置信息,包括:
从所述多个关键点的影像位置信息中,获取所述人物的头部部位的影像位置数据,其中,所述影像位置数据表征所述人物的头部部位在视频影像中的位置;
根据所述影像位置数据,获得所述人物相对位置信息。
6.根据权利要求5所述的方法,所述根据所述影像位置数据,获得所述人物相对位置信息,包括以下至少一项:
在所述影像位置数据表征所述人物的头部部位处于所述视频影像的第一预设区域的情况下,确定所述人物相对位置信息为第一相对位置信息,其中,所述第一相对位置信息表征所述视频拍摄设备的影像采集装置的高度高于所述人物的头部部位;
在所述位置数据表征所述人物的头部部位处于所述视频影像的第二预设区域的情况下,确定所述人物相对位置信息为第二相对位置信息,其中,所述第二相对位置信息表征所述影像采集装置的高度低于所述人物的头部部位;
在所述位置数据表征所述人物的头部部位处于所述视频影像的第三预设区域的情况下,确定所述人物相对位置信息为第三相对位置信息,其中,所述第三相对位置信息表征所述影像采集装置位于所述人物的右侧;
在所述位置数据表征所述人物的头部部位处于所述视频影像的第四预设区域的情况下,确定所述人物相对位置信息为第四对位置信息,其中,所述第四相对位置信息表征所述影像采集装置位于所述人物的左侧。
7.根据权利要求1所述的方法,所述根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数,包括:
根据所述目标姿态信息,调整所述视频拍摄设备的显示装置的姿态;以及,
根据所述人物相对位置信息,调整所述视频拍摄设备的影像采集装置的拍摄参数。
8.根据权利要求7所述的方法,所述根据所述目标姿态信息,调整所述视频拍摄设备的显示装置的姿态,包括:
在所述目标姿态信息为表征站姿的第一姿态信息的情况下,将所述视频拍摄设备的显示装置调整为竖屏显示模式;以及,
在所述目标姿态信息为表征坐姿的第二姿态信息的情况下,将所述显示装置调整为横屏显示模式。
9.根据权利要求7所述的方法,所述根据所述人物相对位置信息,调整所述视频拍摄设备的影像采集装置的拍摄参数,包括以下至少一项:
在所述人物相对位置信息为第一人物相对位置信息的情况下,控制所述影像采集装置垂直向下移动;
在所述人物相对位置信息为第二人物相对位置信息的情况下,控制所述影像采集装置垂直向上移动;
在所述人物相对位置信息为第三人物相对位置信息的情况下,控制所述影像采集装置水平向左移动;以及,
在所述人物相对位置信息为第四人物相对位置信息的情况下,控制所述影像采集装置水平向右移动。
10.根据权利要求7所述的方法,所述根据所述人物相对位置信息,调整所述视频拍摄设备的影像采集装置的拍摄参数,包括:
获取位移数值,所述位移数值用于指示所述影像采集装置的移动距离;
根据所述人物相对位置信息和所述位移数值,调整所述影像采集装置的拍摄参数。
11.根据权利要求1所述的方法,在调整所述视频拍摄设备的拍摄参数的过程中,所述方法还包括:
接收用于确认当前拍摄参数的第一输入;
响应于所述第一输入,停止调整所述拍摄参数,并将当前时刻的拍摄参数作为所述视频拍摄设备的拍摄参数。
12.根据权利要求1所述的方法,所述目标姿态信息和所述人物相对位置信息均为至少一个,所述至少一个目标姿态信息和所述至少一个人物相对位置信息分别与所述至少一个人物对应;
所述根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数,包括:
根据所述至少一个目标姿态信息和所述至少一个人物相对位置信息,调整所述视频拍摄设备的拍摄参数。
13.根据权利要求1所述的方法,在调整所述拍摄参数之后,所述方法还包括:
获取所述视频影像中所述人物的人物标识;
根据所述人物标识与所述调整后的拍摄参数间的对应关系,获得映射数据;
存储所述映射数据。
14.根据权利要求1所述的方法,在获取到所述至少一个视频影像之后,所述方法还包括:
获取所述视频影像中所述人物的人物标识;
根据所述人物标识,获得与所述人物对应的预设拍摄参数;
根据所述预设拍摄参数,调整所述视频拍摄设备的拍摄参数。
15.根据权利要求1所述的方法,在调整所述拍摄参数之前,所述方法还包括:
获取目标对象在所述视频影像的对象相对位置信息,其中,所述目标对象为所述视频影像中包含的、所述人物以外的对象,并且,所述目标对象对应的影像像素与所述视频影像的前景像素的比值不小于预设像素比值;
所述根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数,包括:
根据所述目标姿态信息、所述人物相对位置信息和所述对象相对位置信息,调整所述视频拍摄设备的拍摄参数。
16.根据权利要求1所述的方法,在利用调整后的拍摄参数,拍摄视频影像的过程中,所述方法还包括:
接收用于调整当前拍摄参数的第二输入;
响应于所述第二输入,调整所述视频拍摄设备的拍摄参数。
17.根据权利要求1所述的方法,所述获取所述视频影像的多个关键点的影像位置信息,包括:
将所述视频影像输入到人体关键点识别模型中,获得所述多个关键点的影像位置信息。
18.一种视频拍摄设备,包括:
影像采集装置,用于采集视频影像;
影像传输装置,用于将所述视频影像实时传输至服务器;
控制模块,用于根据权利要求1-17任意一项所述的方法调整所述影像采集装置的拍摄参数。
19.根据权利要求18所述的视频拍摄设备,所述视频拍摄设备还包括:
显示装置,所述显示装置与所述影像采集装置连接,用于接收并显示所述视频影像。
20.一种视频拍摄设备的拍摄调整装置,包括:
影像获取模块,用于获取至少一个视频影像,其中,所述视频影像包含至少一个人物;
影像位置信息获取模块,用于获取所述视频影像中多个关键点的影像位置信息,所述关键点对应所述人物的指定的身体部位;
信息处理模块,用于根据所述多个关键点的影像位置信息,获得所述人物的目标姿态信息以及所述人物在视频影像中的人物相对位置信息;
参数调整模块,用于根据所述目标姿态信息和所述人物相对位置信息,调整所述视频拍摄设备的拍摄参数,所述拍摄参数至少包括拍摄方向与拍摄位置;
影像拍摄模块,用于利用调整后的拍摄参数,拍摄视频影像。
21.一种电子设备,包括权利要求20所述的装置;或者,包括:
存储器,用于存储可执行的指令;
处理器,用于根据所述可执行的指令的控制,运行所述电子设备执行根据权利要求1-17中任意一项所述的方法。
22.一种计算机可读存储介质,其中,所述计算机可读存储介质存储有可被计算机读取执行的计算机程序,所述计算机程序用于在被所述计算机读取运行时,执行根据权利要求1-17中任意一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110142550.7A CN114845038A (zh) | 2021-02-02 | 2021-02-02 | 视频拍摄设备的拍摄调整方法、装置及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110142550.7A CN114845038A (zh) | 2021-02-02 | 2021-02-02 | 视频拍摄设备的拍摄调整方法、装置及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114845038A true CN114845038A (zh) | 2022-08-02 |
Family
ID=82561098
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110142550.7A Pending CN114845038A (zh) | 2021-02-02 | 2021-02-02 | 视频拍摄设备的拍摄调整方法、装置及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114845038A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115484411A (zh) * | 2022-09-16 | 2022-12-16 | 维沃移动通信有限公司 | 拍摄参数的调整方法、装置、电子设备和可读存储介质 |
CN116684748B (zh) * | 2023-08-01 | 2023-09-26 | 世优(北京)科技有限公司 | 摄影构图框的生成方法、装置及摄影设备 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106331489A (zh) * | 2016-08-25 | 2017-01-11 | 天脉聚源(北京)传媒科技有限公司 | 一种拍摄界面的调整方法及装置 |
CN106909172A (zh) * | 2017-03-06 | 2017-06-30 | 重庆零度智控智能科技有限公司 | 环绕跟踪方法、装置和无人机 |
CN109376604A (zh) * | 2018-09-25 | 2019-02-22 | 北京飞搜科技有限公司 | 一种基于人体姿态的年龄识别方法和装置 |
CN109788191A (zh) * | 2018-12-21 | 2019-05-21 | 中国科学院自动化研究所南京人工智能芯片创新研究院 | 拍照方法、装置、计算机设备和存储介质 |
CN109936697A (zh) * | 2019-04-29 | 2019-06-25 | 佛山伊苏巨森科技有限公司 | 一种视频拍摄目标跟踪方法和装置 |
CN110719392A (zh) * | 2019-11-08 | 2020-01-21 | 广州酷狗计算机科技有限公司 | 可移动摄像设备、拍摄控制方法、控制设备及存储介质 |
CN110785753A (zh) * | 2019-09-27 | 2020-02-11 | 京东方科技集团股份有限公司 | 用于搜索图像的方法、装置及存储介质 |
CN111277751A (zh) * | 2020-01-22 | 2020-06-12 | Oppo广东移动通信有限公司 | 拍照方法、装置、存储介质及电子设备 |
CN112261281A (zh) * | 2020-09-03 | 2021-01-22 | 科大讯飞股份有限公司 | 视野调整方法及电子设备、存储装置 |
-
2021
- 2021-02-02 CN CN202110142550.7A patent/CN114845038A/zh active Pending
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106331489A (zh) * | 2016-08-25 | 2017-01-11 | 天脉聚源(北京)传媒科技有限公司 | 一种拍摄界面的调整方法及装置 |
CN106909172A (zh) * | 2017-03-06 | 2017-06-30 | 重庆零度智控智能科技有限公司 | 环绕跟踪方法、装置和无人机 |
CN109376604A (zh) * | 2018-09-25 | 2019-02-22 | 北京飞搜科技有限公司 | 一种基于人体姿态的年龄识别方法和装置 |
CN109788191A (zh) * | 2018-12-21 | 2019-05-21 | 中国科学院自动化研究所南京人工智能芯片创新研究院 | 拍照方法、装置、计算机设备和存储介质 |
CN109936697A (zh) * | 2019-04-29 | 2019-06-25 | 佛山伊苏巨森科技有限公司 | 一种视频拍摄目标跟踪方法和装置 |
CN110785753A (zh) * | 2019-09-27 | 2020-02-11 | 京东方科技集团股份有限公司 | 用于搜索图像的方法、装置及存储介质 |
CN110719392A (zh) * | 2019-11-08 | 2020-01-21 | 广州酷狗计算机科技有限公司 | 可移动摄像设备、拍摄控制方法、控制设备及存储介质 |
CN111277751A (zh) * | 2020-01-22 | 2020-06-12 | Oppo广东移动通信有限公司 | 拍照方法、装置、存储介质及电子设备 |
CN112261281A (zh) * | 2020-09-03 | 2021-01-22 | 科大讯飞股份有限公司 | 视野调整方法及电子设备、存储装置 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115484411A (zh) * | 2022-09-16 | 2022-12-16 | 维沃移动通信有限公司 | 拍摄参数的调整方法、装置、电子设备和可读存储介质 |
WO2024055957A1 (zh) * | 2022-09-16 | 2024-03-21 | 维沃移动通信有限公司 | 拍摄参数的调整方法、装置、电子设备和可读存储介质 |
CN116684748B (zh) * | 2023-08-01 | 2023-09-26 | 世优(北京)科技有限公司 | 摄影构图框的生成方法、装置及摄影设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11481975B2 (en) | Image processing method and apparatus, electronic device, and computer-readable storage medium | |
JP6330036B2 (ja) | 画像処理装置及び画像表示装置 | |
CN105718887A (zh) | 基于移动终端摄像头实现动态捕捉人脸摄像的方法及系统 | |
EP2752733A1 (en) | Apparatus and method for providing control service using head tracking technology in an electronic device | |
KR102124617B1 (ko) | 이미지 합성 방법 및 그 전자 장치 | |
CN105554430B (zh) | 一种视频通话方法、系统及装置 | |
CN104954672B (zh) | 一种移动终端的手动调焦方法及移动终端 | |
CN104601892A (zh) | 一种终端、图像拍摄方法及装置 | |
CN108156374B (zh) | 一种图像处理方法、终端及可读存储介质 | |
CN114845038A (zh) | 视频拍摄设备的拍摄调整方法、装置及电子设备 | |
CN106254784A (zh) | 一种视频处理的方法及装置 | |
CN108038417A (zh) | 云台控制方法、装置及系统 | |
CN106503682B (zh) | 视频数据中的关键点定位方法及装置 | |
CN108769636B (zh) | 投影方法及装置、电子设备 | |
CN112995501A (zh) | 摄像头的控制方法、装置、电子设备及存储介质 | |
CN103002244A (zh) | 一种交互式视频通话的方法和通话终端 | |
CN110928509B (zh) | 显示控制方法、显示控制装置、存储介质、通信终端 | |
US9392223B2 (en) | Method for controlling visual light source, terminal, and video conference system | |
US9536133B2 (en) | Display apparatus and control method for adjusting the eyes of a photographed user | |
US20130147980A1 (en) | Apparatus and associated method for face tracking in video conference and video chat communications | |
CN104599236A (zh) | 一种图像校正的方法和装置 | |
KR20110090623A (ko) | 얼굴추적이 가능한 홈네트워크 단말 및 그 단말에서의 얼굴추적방법 | |
CN113010057B (zh) | 位姿控制方法及电子设备、计算机可读存储介质 | |
TWM569008U (zh) | 眼球定位校正系統 | |
CA2793631C (en) | Apparatus and associated method for face tracking in video conference and video chat communications |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |