CN117177066A - 一种拍摄方法及相关设备 - Google Patents
一种拍摄方法及相关设备 Download PDFInfo
- Publication number
- CN117177066A CN117177066A CN202210956581.0A CN202210956581A CN117177066A CN 117177066 A CN117177066 A CN 117177066A CN 202210956581 A CN202210956581 A CN 202210956581A CN 117177066 A CN117177066 A CN 117177066A
- Authority
- CN
- China
- Prior art keywords
- video
- window
- encoder
- recording
- electronic device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 124
- 230000000694 effects Effects 0.000 claims description 32
- 230000015654 memory Effects 0.000 claims description 23
- 230000008569 process Effects 0.000 claims description 22
- 238000004590 computer program Methods 0.000 claims description 5
- 230000000977 initiatory effect Effects 0.000 claims 1
- 238000007726 management method Methods 0.000 description 52
- 230000004044 response Effects 0.000 description 37
- 230000008859 change Effects 0.000 description 18
- 238000010586 diagram Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 10
- 230000005236 sound signal Effects 0.000 description 7
- 230000003993 interaction Effects 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 239000000725 suspension Substances 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 2
- 230000003139 buffering effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 238000009432 framing Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 238000004513 sizing Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
- H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
- H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
- H04N23/635—Region indicators; Field of view indicators
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/675—Focus control based on electronic image sensor signals comprising setting of focusing regions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本申请提供了一种拍摄方法及相关设备。该拍摄方法可以应用于设置有摄像头和显示屏的电子设备。根据该拍摄方法,多个拍摄对象同框的拍摄场景下,电子设备可以针对其中一个拍摄对象进行追焦,并创建两个编码器分别对预览大窗显示的原始图像和预览小窗显示的特写图像进行编码,从而得到原始视频和特写视频。在本申请的一些实施例中,电子设备可以拍摄得到一个原始视频和多个特写视频。这种拍摄方法使得用户在正常拍摄的情况下就可以同时获取特写视频,可以在相同时间内满足用户对不同取景范围的视频的需求,提升了用户体验。
Description
技术领域
本申请涉及终端技术领域,尤其涉及一种拍摄方法及相关设备。
背景技术
随着终端技术的发展,视频拍摄拥有了更多可能性。例如,人们可以通过手机等终端设备实现对人脸、人物、宠物等被摄体的自动追焦,以解决被摄体移动时无法自动对焦到被摄体上而导致的虚焦或焦点转移等问题。
发明内容
本申请提供了一种拍摄方法及相关设备。该拍摄方法可以应用于设置有摄像头和显示屏的电子设备。根据该拍摄方法,在多个拍摄对象同框的拍摄场景下,电子设备可以针对其中一个拍摄对象进行追焦,并创建两个编码器分别基于预览大窗显示的图像和预览小窗显示的图像进行编码,从而得到两个或更多的视频。可理解,电子设备可以拍摄得到一个原始视频和至少一个特写视频。这种拍摄方法使得用户在正常拍摄的情况下可以同时获取特写视频,可以在相同时间内满足用户对不同取景范围的视频的需求,提升了用户体验。
第一方面,本申请提供了一种拍摄方法。该拍摄方法可以应用于具有摄像头、显示屏、第一编码器和第二编码器的电子设备。该方法可以包括:显示第一界面,第一界面包括第一窗口,第一窗口中显示摄像头采集的图像,第一窗口中显示的图像包括一个或多个第一对象;在一个或多个第一对象中选择第二对象;在显示屏中显示第一窗口的同时,还显示第二窗口,第二窗口中显示的图像包括所述第二对象;通过第一编码器和第二编码器,录制第一窗口中的图像以生成第一视频,录制第二窗口中的图像以生成第二视频。
在本申请提供的方案中,用户可以触发电子设备进入追焦模式。在追焦模式下,电子设备可以同时显示第一窗口和第二窗口,并通过第一编码器和第二编码器,对第一窗口中的画面进行录制以生成第一视频,以及对第二窗口中的图像进行录制以生成第一视频。也就是说,结束录制之后,用户至少可以得到两个视频:基于第一窗口中的图像生成的原始视频,以及基于第二窗口中的图像生成的特写视频。这样,用户可以在正常拍摄的情况下同时获取特写视频。也就是说,通过上述方法,用户可以在相同拍摄时间内得到不同取景范围的视频,满足了用户不同时刻不同场景下的个性化需求,提升了用户体验。
可理解,第一窗口可以指后文中所提及的“预览大窗”,还可以指后文中所提及的“大窗”。第二窗口可以指后文中所提及的“预览小窗”,还可以指后文中所提及的“小窗”。示例性的,第一窗口可以为预览窗201,第二窗口可以为预览小窗501。
可理解,第一视频可以为原始视频,第二视频可以为第二对象的特写视频。其中,原始视频是基于摄像头采集的原始图像得到的。组成原始视频的图像的内容与摄像头拍摄时的取景范围是相符的。特写视频是在原始图像的基础上,识别图像中的主角,然后裁剪主角图像得到的。特写视频以主角为中心。在录制视频的过程中,电子设备可同时显示原始视频和特写视频,以供用户预览。
结合第一方面,在一种可能的实现方式中,电子设备显示第二窗口之后,还可以接收到开始录制的操作,并启动第一编码器,以及启动第二编码器。
在本申请提供的方案中,在电子设备在显示屏上显示第一窗口和第二窗口的情况下,用户可以触发电子设备开始录制。相应的,电子设备可以接收到开始录制的操作。响应于该操作,电子设备可以启动第一编码器,以及启动第二编码器。通过上述方式,用户可以启动第一编码器和第二编码器以录制第一窗口中的画面和第二窗口中的画面,从而使得用户可以在同一时间对不同取景范围的画面进行录制,同时满足了用户对不同取景范围视频的需求。
在本申请中,“对第一窗口中的画面进行录制”、“录制第一窗口中的图像”与“基于第一窗口中的图像进行录制”的含义相同。类似的,“对第二窗口中的画面进行录制”、“录制第二窗口中的图像”与“基于第二窗口中的图像进行录制”的含义相同。
在本申请的一些实施例中,“接收到开始录制的操作”与“接收到同时开启大窗录制和小窗录制的请求”(如步骤S600)的含义相同。
结合第一方面,在一种可能的实现方式中,电子设备在一个或多个第一对象中选择第二对象之前,还可以接收到开始录制的操作,并启动第一编码器。并且,在一个或多个第一对象中选择第二对象之后,电子设备还可以启动第二编码器。
在本申请提供的方案中,在显示有第一窗口的情况下,电子设备可以启动第一编码器以录制第一窗口中的画面。在选择第二对象之后,电子设备可以在显示屏上显示第二窗口,并启动第二编码器以录制第二窗口中的画面。可理解,用户利用电子设备对第二窗口中的画面进行录制的开始时间是可选地,用户可以选择同时对第一窗口和第二窗口中的画面进行录制,也可以选择先对第一窗口中的画面进行录制,然后再对第二窗口中的画面进行录制。上述方法可以满足了不同时刻不同场景下用户的录制需求,提升了用户体验。
结合第一方面,在一种可能的实现方式中,第一界面还可以包括第一控件,第一控件可以用于启动追焦模式。电子设备显示第一界面之后,还可以接收到作用于第一控件上的操作,并创建第一编码器,以及创建第二编码器。
在本申请提供的方案中,用户可以通过第一界面上的第一控件来触发电子设备进入追焦模式。相应的,电子设备可以进入追焦模式,并创建第一编码器,以及创建第二编码器,以便后续可以对第一窗口和第二窗口中的画面进行录制,即以便同时实现两路视频的录制。
在本申请的一些实施例中,第一控件可以为追焦模式控件。例如,追焦模式控件301。
在本申请的一些实施例中,“接收到作用于第一控件上的操作”与“接收到开启追焦模式的请求”(如步骤S505)的含义相同。
可理解,创建第一编码器和创建第二编码器的相关内容可以参考与图5相关的描述,在此不展开说明。
示例性的,如图2C所示,用户界面300可以包括追焦模式控件300。用户可以点击追焦模式控件301,相应的,电子设备可以接收到作用于追焦模式控件301上的操作,响应于该操作,电子设备可以创建第一编码器,并创建第二编码器。
结合第一方面,在一种可能的实现方式中,电子设备通过第一编码器和第二编码器,录制所述第一窗口中的图像以生成第一视频,录制所述第二窗口中的图像以生成第二视频,具体可以包括:在启动第一编码器之后,电子设备可以通过第一编码器录制第一窗口中的图像以生成第一视频,以及在启动第二编码器之后,通过第二编码器录制第二窗口中的图像以生成第二视频。
在本申请提供的方案中,在电子设备启动第一编码器之后,电子设备可以通过第一编码器录制第一窗口中的图像,并且,在电子设备启动第二编码器之后,电子设备可以通过第二编码器录制第二窗口中的图像。也就是说,电子设备可以将第一编码器与第一窗口关联,使得第一编码器用于录制第一窗口中的图像,而将第二编码器与第二窗口关联,使得第二编码器用于录制第二窗口中的图像。通过上述方法,第一编码器和第二编码器各司其职,分别对不同窗口中的画面进行录制,电子设备无需等待录制时再分配这两个编码器对应的窗口,在某种程度上提高了录制效率。
结合第一方面,在一种可能的实现方式中,电子设备通过所述第一编码器和所述第二编码器,录制所述第一窗口中的图像以生成第一视频,录制所述第二窗口中的图像以生成第二视频之后,该方法还可以包括:电子设备可以接收到结束录制的操作,可以停止第一编码器的编码和第二编码器的编码,并生成第一视频和第二视频。其中,第一视频的结束录制时刻与第二视频的结束录制时刻是相同的。
在本申请提供的方案中,用户在通过电子设备录制第一窗口和第二窗口中的图像时,可以自由确定第一窗口和第二窗口的结束录制时刻。比如,同时结束第一窗口和第二窗口的录制。上述方法可以满足了不同时刻不同场景下用户的录制需求,提升了用户体验。
在本申请的一些实施例中,“接收到结束录制的操作”与“接收到同时结束大窗录制和小窗录制的请求”(如步骤S800)的含义相同。
在本申请的一些实施例中,电子设备在同时显示有第一窗口和第二窗口的情况下同时开始第一窗口和第二窗口的录制,且电子设备同时结束第一窗口和第二窗口的录制,则电子设备生成的第一视频的时长和第二视频的时长是相同的。示例性的,第一视频可以为图2N中的a所示的视频14011,第二视频可以为图2N中的a所示的视频14012。视频14011和视频 14012的时长均为3s。
在本申请的一些实施例中,电子设备在同时显示有第一窗口的情况下首先开始第一窗口的录制,然后再开始第二窗口的录制,且电子设备同时结束第一窗口和第二窗口的录制,则电子设备生成的第一视频的时长要比第二视频的时长更长一些。示例性的,第一视频可以为图2N中的b所示的视频14021,第二视频可以为图2N中的b所示的视频14022。视频14021 的时长为8s,视频14022的时长为3s。
可理解,结束录制时刻指的是结束视频录制的时刻。第一视频的结束录制时刻指的是结束对第一窗口所显示的画面的时刻。第二视频的结束录制时刻指的是结束对第二窗口所显示的画面的时刻。
结合第一方面,在一种可能的实现方式中,电子设备通过第二编码器录制第二窗口中的图像以生成第二视频之后,该方法还可以包括:电子设备可以接收到作用于第二窗口的结束录制操作,关闭第二窗口,停止第二编码器的编码,并生成第二视频。
在本申请提供的方案中,用户在通过电子设备录制第一窗口和第二窗口中的图像时,可以自由确定第一窗口和第二窗口的结束录制时刻。比如,首先结束第二窗口的录制。上述方法可以满足不同时刻不同场景下用户的录制需求,提升了用户体验。
在本申请的一些实施例中,“接收到作用于第二窗口的结束录制操作”与“接收到结束小窗录制的请求”(如步骤S700)的含义相同。
可理解,电子设备可以首先结束第二窗口的录制。在这种情况下,电子设备生成的第一视频的时长要比第二视频的时长更长一些。示例性的,第一视频可以为图2N中的b所示的视频14021,第二视频可以为图2N中的b所示的视频14022。视频14021的时长为8s,视频14022的时长为3s。
结合第一方面,在一种可能的实现方式中,电子设备生成第二视频之后,该方法还可以包括:电子设备可以接收到作用于第一窗口的结束录制的操作,可以停止第一编码器的编码,并生成第一视频。其中,第一视频的结束录制时刻晚于第二视频的结束录制时刻。
在本申请提供的方案中,电子设备可以在结束第二窗口的录制的情况下,直接结束第一窗口的录制。这样,电子设备可以生成两个视频——第二视频和第一视频。其中,第一视频的结束录制时刻晚于第二视频的结束录制时刻,第一视频的时长要比第二视频的时长更长一些。
在本申请的一些实施例中,“接收到作用于第一窗口的结束录制的操作”与“接收到结束大窗录制的请求”(如步骤S900)的含义相同。
结合第一方面,在一种可能的实现方式中,电子设备生成第二视频之后,该方法还可以包括:电子设备可以在一个或多个第一对象中选择第三对象;在显示屏中显示第一窗口的同时,电子设备可以重新显示第二窗口;电子设备可以启动第二编码器,并通过第二编码器录制第二窗口中的图像以生成第三视频。其中,第三对象与第二对象可以相同,也可以不同。
在本申请提供的方案中,电子设备首先结束第二窗口的录制之后,电子设备还可以响应于用户再次选择第二对象的操作,重新选择第二对象。在这种情况下,电子设备可以重新在显示屏上显示第二窗口,并启动编码器对第二窗口中的画面进行录制以生成第三视频。这样,电子设备可以至少生成三个视频——第一视频、第二视频和第三视频。其中,第二视频的录制结束时刻早于第一视频的录制结束时刻,第二视频和第一视频的录制结束时刻均早于第三视频的录制开始时刻。上述方法可以满足不同时刻不同场景下用户的录制需求,提升了用户体验。
示例性的,电子设备可以接收到作用于如图2J所示的用户界面1000所包括的录制结束控件1003上的操作。响应于该操作,电子设备可以显示如图2P所示的用户界面1600。用户界面1600可以包括人体框402、人体框403和人体框404。其中,人体框402、人体框403 和人体框404分别用于框选人物R1、人物R2和人物R3。此时,电子设备已经结束以人物 R2为追焦目标的特写视频的录制,但是仍在录制原始视频。电子设备可以接收到作用于用户界面1600所包括的人体框404上的用户操作。响应于该操作,电子设备可以重新确定人体框 404所框选的人物(即人物R3)为追焦目标,并录制人物R3的特写视频。可理解,这个示例中的人物R3为电子设备重新选择的第二对象。而人物R1、人物R2和人物R3为第一对象。
可理解,第二视频和第三视频可以为相同追焦目标的特写视频,也可以为不同追焦目标的特写视频。也就是说,电子设备重新选择的第二对象可以与之前选择的第二对象相同,也可以不同。
结合第一方面,在一种可能的实现方式中,电子设备通过第二编码器录制第二窗口中的图像以生成第三视频之后,该方法还可以包括:电子设备可以接收到结束录制的操作,可以停止第一编码器的编码和第二编码器的编码,并生成第一视频和第三视频。其中,第一视频的开始录制时刻早于所述第三视频的开始录制时刻,第一视频的结束录制时刻与所述第三视频的结束录制时刻是相同的。
在本申请提供的方案中,电子设备重新开始第二窗口的录制之后,可以同时结束第一窗口和第二窗口的录制。也就是说,第一视频的结束录制时刻与所述第三视频的结束录制时刻是相同的。上述方法可以满足了不同时刻不同场景下用户的录制需求,提升了用户体验。
在本申请的一些实施例中,电子设备可以再次结束第二窗口的录制,而继续录制第一窗口中的图像。在这种情况下,第三视频的结束录制时刻早于第一视频的结束录制时刻。可理解,电子设备可以再次选择开始第二窗口的录制。在这种情况下,电子设备最终可以生成三个以上的视频,其中包括一个原始视频和至少三个特写视频。
在本申请的一些实施例中,“接收到结束录制的操作”与“接收到同时结束大窗录制和小窗录制的请求”(如步骤S800)的含义相同。
结合第一方面,在一种可能的实现方式中,一个或多个第一对象上显示有选择框。电子设备在一个或多个第一对象中选择第二对象,具体可以包括:电子设备可以接收到作用于第一选择框上的操作,将第一选择框对应的第一对象确定为第二对象。
在本申请提供的方案中,电子设备可以在识别到第一窗口中的图像所包括的对象之后,在显示屏上显示各个对象对应的选择框。这样,用户可通过上述选择框确定电子设备识别到的各个对象,以及通过上述选择框选择上述各个对象中的任意一个对象,并将其作为追焦对象。
在本申请的一些实施例中,选择框可以为后文所提及的人体框。例如,人体框402、人体框403和人体框404。
可理解,第一选择框为该一个或多个第一对象上显示的选择框中的一个选择框。
在本申请的一些实施例中,在一个或多个第一对象上显示选择框之后,该方法还可以包括:在第一时长内没有检测到作用于屏幕的用户操作,选择框消失。
可理解,电子设备可以在显示选择框之后检测显示屏上的交互事件,若在预设时间内,例如第一时长内,未检测到任何作用于显示屏上的交互事件,则电子设备可以隐藏选择框。这样既可以减少选择框对显示屏中显示的图像的遮挡,也可以减少绘制图像所需的计算成本,节省功耗。
可理解,预设时间(例如,第一时长)可以根据实际需求进行设置,本申请对此不作限制。例如,预设时间可以为3s。
结合第一方面,在一种可能的实现方式中,第二窗口中显示的图像包括第二对象,具体可以包括:第二窗口中显示第二对象的特写对象。
结合第一方面,在一种可能的实现方式中,在上述录制过程中,该方法还可以包括:电子设备可以在一个或多个第一对象中选择第四对象。第四对象与第二对象不同。第二窗口中可以显示第四对象的特写图像。
在本申请提供的方案中,用户可以在录制过程中随时切换追焦目标(即变更第二对象)。在切换追焦目标之后,电子设备可以对重新选择的追焦目标进行追焦,并在第二窗口中显示该重新选择的追焦目标的特写图像。通过上述方式,在一次录制过程中,用户就可以获取不同追焦目标的特写图像,还可以获取同一追焦目标在不同时间段的特写图像。
结合第一方面,在一种可能的实现方式中,电子设备可以包括相机HAL。电子设备通过第一编码器和第二编码器,录制所述第一窗口中的图像以生成第一视频,录制所述第二窗口中的图像以生成第二视频,具体可以包括:相机HAL可以基于与第一路数据流匹配的图像效果对原始图像数据进行处理,得到第一图像数据,以及基于与第二路数据流匹配的图像效果对原始图像数据进行处理,得到第二图像数据;相机HAL可以将第一图像数据发送给第一编码器,还可以将第二图像数据发送给第二编码器;第一编码器可以对第一图像数据进行编码,得到第一编码图像数据,还可以将第一编码图像数据写入到第一视频文件中;第二编码器可以对第二图像数据进行编码,得到第二编码图像数据,还可以将第二编码图像数据写入到第二视频文件中。其中,第一路数据流为第一窗口对应的数据流;第二路数据流为第二窗口对应的数据流。第一视频文件用于存储第一视频。第二视频文件用于存储第二视频。
在本申请提供的方案中,在对第一窗口和第二窗口所显示的画面进行录制的过程中,电子设备可以通过相机HAL对原始图像数据进行不同的处理,并将处理后的图像分别发送给第一编码器和第二编码器进行编码,再将编码后的图像写入不同的视频文件中。也就是说,电子设备可以同时生成两路数据流,并对两路数据流中的图像数据进行编码,这两路数据流的编码和最终写入相应视频文件的过程都是相互独立的,互不影响。因此,电子设备可以同时生成两路视频,在一定时间内就可以满足用户在不同时刻不同场景下的录制需求,提升了用户体验。
可理解,原始图像数据指的是摄像头采集的原始图像。
在本申请的一些实施例中,第一路数据流可以为后文所提及的大窗数据流,第二路数据流可以为后文所提及的小窗数据流。
在本申请的一些实施例中,第一图像数据可以为后文所提及的大窗图像数据,第二图像数据可以为后文所提及的小窗图像数据。第一编码图像数据可以为后文所提及的编码后的大窗图像数据。第二编码图像数据可以为后文所提及的编码后的小窗图像数据。
在本申请的一些实施例中,第一视频文件可以为后文所提及的大窗视频文件,第二视频文件可以为后文所提及的小窗视频文件。
结合第一方面,在一种可能的实现方式中,电子设备可以包括相机模式模块、编码控制模块和存储模块。电子设备接收到作用于所述第二窗口的结束录制操作之后,该方法还可以包括:相机模式模块可以向编码控制模块发送第一提示信息。第一提示信息用于提示第二窗口录制结束。电子设备停止第二编码器的编码,并生成第二视频,具体可以包括:编码控制模块可以向第二编码器发送停止请求;第二编码器可以停止对第二路数据流中的图像数据的编码;编码控制模块可以向存储模块发送第一结束信息;存储模块可以保存第二视频文件中的第二视频,并基于当前的系统时间生成第三视频文件。其中,第一结束信息用于提示第二窗口录制结束。第三视频文件用于存储对第二路数据流中的图像数据进行编码后所得的视频。
在本申请提供的方案中,用户在通过电子设备录制第一窗口和第二窗口中的图像时,可以自由确定第一窗口和第二窗口的结束录制时刻。比如,首先结束第二窗口的录制。上述方法可以满足不同时刻不同场景下用户的录制需求,提升了用户体验。
在本申请的一些实施例中,第一提示信息可以为后文所提及的结束小窗录制的提示信息。
在本申请的一些实施例中,编码控制模块向第二编码器发送的停止请求可以为后文所提及的停止第二编码器的请求。
在本申请的一些实施例中,第一结束信息可以为后文所提及的小窗录制结束信息。
在本申请的一些实施例中,第三视频文件可以为重新创建的小窗视频文件(如步骤S705)。
结合第一方面,在一种可能的实现方式中,电子设备可以包括相机模式模块、编码控制模块和相机HAL。电子设备在一个或多个第一对象中重新选择第二对象之后,该方法还可以包括:相机模式模块可以向编码控制模块发送第二提示信息。第二提示信息用于提示第二窗口重新开始录制。电子设备启动第二编码器,具体可以包括:编码控制模块可以向第二编码器发送启动请求;第二编码器可以启动。电子设备通过第二编码器录制第二窗口中的图像以生成第三视频,具体可以包括:相机HAL可以基于与第二路数据流匹配的图像效果对原始图像数据进行处理,得到第二图像数据,还可以将第二图像数据发送给第二编码器;第二编码器可以对第二图像数据进行编码,得到第二编码图像数据,还可以将第二编码图像数据写入到第三视频文件中。第三视频文件用于存储第三视频。第三视频文件的生成时间晚于用于存储第二视频的文件的生成时间。
在本申请提供的方案中,电子设备首先结束第二窗口的录制之后,电子设备还可以响应于用户再次选择第二对象的操作,重新选择第二对象。在这种情况下,电子设备可以重新在显示屏上显示第二窗口,并启动编码器对第二窗口中的画面进行录制以生成第三视频。这样,电子设备可以至少生成三个视频——第一视频、第二视频和第三视频。其中,第二视频的录制结束时刻早于第一视频的录制结束时刻,第二视频和第一视频的录制结束时刻均早于第三视频的录制开始时刻。上述方法可以满足不同时刻不同场景下用户的录制需求,提升了用户体验。
结合第一方面,在一种可能的实现方式中,电子设备可以包括相机模式模块、编码控制模块和存储模块。电子设备接收到结束录制的操作之后,该方法还可以包括:相机模式模块可以向编码控制模块发送第三提示信息。第三提示信息用于提示第一窗口和第二窗口录制结束。电子设备停止第一编码器的编码和第二编码器的编码,并生成第一视频和第二视频,具体可以包括:编码控制模块可以向第一编码器发送停止请求,向第二编码器发送停止请求;第一编码器可以停止对第一路数据流中的图像数据的编码;第二编码器停止对第二路数据流中的图像数据的编码;编码控制模块向存储模块发送第二结束信息;存储模块可以保存第一视频文件中的第一视频和第二视频文件中的第二视频,并基于当前的系统时间生成第四视频文件和第三视频文件。其中,第二结束信息用于提示第一窗口和第二窗口录制结束。第四视频文件用于存储对第一路数据流中的图像数据进行编码后所得的视频。第三视频文件用于存储对第二路数据流中的图像数据进行编码后所得的视频。
在本申请提供的方案中,用户在通过电子设备录制第一窗口和第二窗口中的图像时,可以自由确定第一窗口和第二窗口的结束录制时刻。比如,同时结束第一窗口和第二窗口的录制。上述方法可以满足了不同时刻不同场景下用户的录制需求,提升了用户体验。
在本申请的一些实施例中,第三提示信息可以为后文所提及的结束大窗录制和小窗录制的提示信息。
在本申请的一些实施例中,编码控制模块向第一编码器发送的停止请求可以为后文所提及的停止第一编码器的请求。编码控制模块向第二编码器发送的停止请求可以为后文所提及的停止第二编码器的请求。
在本申请的一些实施例中,第二结束信息可以为后文所提及的大小窗录制结束信息。
在本申请的一些实施例中,第三视频文件可以为重新创建的小窗视频文件。第四视频文件可以为重新创建的大窗视频文件(如步骤S807)。
结合第一方面,在一种可能的实现方式中,电子设备中的存储模块在保存第二视频文件中的第二视频之前,该方法还可以包括:存储模块可以将第二视频文件的时间戳更新为当前的系统时间。
在本申请提供的方案中,电子设备可以将第二视频文件的时间戳更新为当前的系统时间,从而使得第二视频对应的时间戳晚于第一视频对应的时间戳。这也就意味着,电子设备在图库中显示第一视频的缩略图和第二视频的缩略图时,第一视频的缩略图的位置比第二视频缩略图的位置更靠前,这说明第一视频的生成时间晚于第二视频的生成时间。电子设备可以直接根据上述方式显示第一视频的缩略图和第二视频的缩略图,而无需因两个视频的生成时间一样而再去判断怎么显示。
结合第一方面,在一种可能的实现方式中,电子设备包括流管理模块、存储模块、编码控制模块和相机HAL。电子设备接收到作用于第一控件上的操作之后,该方法还可以包括:流管理模块可以配置第一路数据流和第二路数据流,并将配流信息所述发送给编码控制模块;存储模块可以基于当前的系统时间分别生成第一视频文件和第二视频文件,并将文件信息发送给所述编码控制模块;流管理模块可以将配流信息发送给相机HAL;相机HAL可以基于配流信息确定与第一路数据流匹配的图像效果,以及与第二路数据流匹配的图像效果。其中,文件信息包括第一视频文件的文件标识和第二视频文件的文件标识。
结合第一方面,在一种可能的实现方式中,电子设备可以包括编码控制模块和编码器。电子设备创建第一编码器,创建第二编码器,具体可以包括:编码控制模块可以基于配流信息和文件信息,确定第一编码参数和第二编码参数;编码控制模块可以将第一编码参数和第二编码参数发送给编码器;编码器可以基于第一编码参数创建第一编码器,以及基于第二编码参数创建第二编码器。其中,第一编码参数为第一编码器对应的编码器参数。第一编码器与第一路数据流和第一视频文件关联。第二编码参数为第二编码器对应的编码器参数。第二编码器与第二路数据流和第二视频文件关联。
在本申请提供的方案中,电子设备可以配置与分别与第一窗口和第二窗口对应的第一路数据流和第二路数据流,并将这两路数据流分别与不同的视频文件和编码器关联,以及匹配不同的图像效果,从而实现对第一窗口显示的画面的录制和第二窗口显示的画面的录制。通过上述方法,用户可以在相同拍摄时间内得到不同取景范围的视频,满足了用户不同时刻不同场景下的个性化需求,提升了用户体验。
在本申请的一些实施例中,配流信息可以包括大窗配流信息和小窗配流信息(如步骤 S511)。
在本申请的一些实施例中,第一视频文件的文件标识可以为第一视频文件的文件名。第二视频文件的文件标识可以为第二视频文件的文件名。当然,文件标识还可以为其他与视频文件相关的内容(例如,视频文件的时间戳),本申请对此不作限制。
第二方面,本申请提供了一种电子设备,该电子设备包括一个或多个处理器和一个或多个存储器;其中,一个或多个存储器与一个或多个处理器耦合,一个或多个存储器用于存储计算机程序代码,计算机程序代码包括计算机指令,当一个或多个处理器执行计算机指令时,使得电子设备执行如第一方面以及第一方面中任一可能的实现方式描述的方法。
第三方面,本申请实施例提供了一种芯片系统,该芯片系统应用于电子设备,该芯片系统包括一个或多个处理器,该处理器用于调用计算机指令以使得该电子设备执行如第一方面以及第一方面中任一可能的实现方式描述的方法。
第四方面,本申请提供一种计算机可读存储介质,包括指令,当上述指令在电子设备上运行时,使得上述电子设备执行如第一方面以及第一方面中任一可能的实现方式描述的方法。
第五方面,本申请提供一种包含指令的计算机程序产品,当上述计算机程序产品在电子设备上运行时,使得上述电子设备执行如第一方面以及第一方面中任一可能的实现方式描述的方法。
可以理解地,上述第二方面提供的电子设备、第三方面提供的芯片系统、第四方面提供的计算机存储介质、第五方面提供的计算机程序产品均用于执行本申请所提供的方法。因此,其所能达到的有益效果可参考对应方法中的有益效果,此处不再赘述。
附图说明
图1为本申请实施例提供的一种拍摄场景的示意图;
图2A-图2X为本申请实施例提供的一组用户界面示意图;
图3为本申请实施例提供的一种电子设备的软件结构示意图;
图4为本申请实施例提供的一种模块交互示意图;
图5-图9为本申请实施例提供的一种拍摄方法的一组时序图;
图10为本申请实施例提供的一种拍摄方法的流程图;
图11为本申请实施例提供的一种电子设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。其中,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;文本中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况,另外,在本申请实施例的描述中,“多个”是指两个或多于两个。
应当理解,本申请的说明书和权利要求书及附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本申请中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本申请所描述的实施例可以与其它实施例相结合。
本申请提供了一种拍摄方法。该拍摄方法可以应用于设置有摄像头的电子设备。根据该拍摄方法,多个拍摄对象同框的拍摄场景下,电子设备可以针对其中一个拍摄对象进行追焦,并对该拍摄对象进行针对性的特写录制,分别生成原始视频和追焦视频。在本申请的一些实施例中,电子设备可以拍摄得到一个原始视频和多个追焦视频。
请参阅图1,图1为本申请实施例提供的一种拍摄场景的示意图。
如图1所示,拍摄环境中存在多个人物——人物R1、人物R2和人物R3。用户可以确定拍摄主体为人物R2,并利用电子设备进行拍摄。由于拍摄主体处于运动状态,可能会出现虚焦问题。并且,拍摄环境中还存在其他人物(例如,人物R1和人物R3)的干扰,还可能出现焦点转移的问题。即焦点从人物R2转移至其他人物上。在这种情况下,用户可以开启追焦模式,并选定人物R2为追焦目标。用户选定人物R2为追焦目标之后,可以点击电子设备上的录像开始控件进行录制。如图1所示,录制的过程中,电子设备的预览大窗显示的是摄像头基于整个取景范围所采集的原始图像(包含有人物R1、人物R2和人物R3的图像)。预览大窗上还可以显示预览小窗。而预览小窗显示的是追焦目标(即人物R2)的特写图像。可理解,结束录制之后,电子设备可以生成两段视频——原始视频和特写视频。原始视频是由预览大窗所显示的原始图像所构成的视频。而特写视频是由预览小窗所显示的追焦目标的特写图像所构成的视频。
可理解,本申请中所提及的拍摄主体指的是用户利用电子设备进行拍摄时的主要拍摄对象。取景范围与电子设备的摄像头参数(例如,视场角、焦距等)相关。
可理解,电子设备具体可以是手机、平板电脑、可穿戴设备、车载设备、增强现实(Augmented Reality,AR)/虚拟现实(Virtual Reality,VR)设备、笔记本电脑、超级移动个人计算机(Ultra-Mobile Personal Computer,UMPC)、上网本、个人数字助理(PersonalDigital Assistant,PDA)或专门的照相机(例如,单反相机、卡片式相机)等设备,本申请实施例对电子设备的具体类型不作任何限制。
下面结合一组用户界面示意图具体介绍本申请提供的拍摄场景。
可理解,本申请的说明书和权利要求书及附图中的术语“界面”和“用户界面”,是应用程序或操作系统与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(graphicuser interface, GUI),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素,其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。
1、进入追焦模式(图2A~图2D)
如图2A所示,用户界面100显示了一个放置有应用图标的页面,该页面可包括多个应用图标(例如,天气应用图标、日历应用图标、相册应用图标、便签应用图标、电子邮件应用图标、应用商店应用图标、设置应用图标等等)。上述多个应用图标下方还可显示有页面指示符,以表明当前显示的页面与其他页面的位置关系。页面指示符的下方有多个应用图标(例如,相机应用图标101、浏览器应用图标、信息应用图标、拨号应用图标)。这些应用图标在页面切换时保持显示。
可理解,相机应用图标101为相机应用程序(即相机应用)的图标。相机应用图标101 可以用于触发启动相机应用程序。
电子设备可以检测到作用于相机应用图标101的用户操作,响应于该操作,电子设备可以显示如图2B所示的用户界面200。用户界面200为相机应用程序的默认拍照模式的拍摄界面,用户可以在该界面上预览图像并完成拍照。
可理解,本申请中所提及的用户操作可以包括但不限于触摸(例如,点击等)、声控、手势等操作,本申请对此不作限制。
如图2B所示,用户界面200可包括预览窗201、相机模式选项202、相册快捷控件203、快门控件和摄像头翻转控件。
预览窗201可用于显示预览图像。预览窗201显示的预览图像为电子设备的摄像头基于取景范围采集的原始图像。
相机模式选项202中可以显示有一个或多个拍摄模式选项。这一个或多个拍摄模式选项可以包括:夜景模式选项、智能人像模式选项、拍照模式选项、录像模式选项2021和更多选项。可理解,相机模式选项202中还可以包含更多或更少的拍摄模式选项。
相册快捷控件203可用于开启相册应用程序。用户通过相册快捷控件203触发电子设备开启相册应用程序后,可以查看拍摄所得的图像和视频。另外,相册快捷控件203上还可以显示有拍摄所得的图像或视频的缩略图。
电子设备可以检测到作用于录像模式选项2021上的用户操作。响应于该用户操作,电子设备可以显示如图2C所示的用户界面300。用户界面300为相机应用程序的录像预览界面。
用户界面300所包括的控件与用户界面200所包括的控件大致相同,不同的是,用户界面300还可以包括追焦模式控件301和录像开始控件302。其中,追焦模式控件301可以用于触发电子设备进入追焦模式。录像开始控件302用于触发电子设备开始录像。
电子设备可以检测到作用于追焦模式控件301上的用户操作。响应于该用户操作,电子设备可以显示如图2D所示的用户界面400。用户界面400为进入追焦模式之后,尚未开始追焦时的录像预览界面。
用户界面400可以包括显示区域401、预览窗201、人体框402、人体框403和人体框404。其中,显示区域401可以包括开启追焦模式的提示信息,以及录制特写视频的操作提示信息。如图2D所示,显示区域401显示有“点击人体框,可额外生成一段特写视频”,以及“追焦模式已开始”。如图2D所示,预览窗201可以显示包含人物R1、人物R2和人物R3的图像。人体框402可以用于框选人物R1。人体框403可以用于框选人物R2。人体框404可以用于框选人物R3。
在本申请的一些实施例中,电子设备可以检测到作用于相机模式选项202中的更多选项上的用户操作。响应于该用户操作,电子设备可以显示更多的拍摄模式选项。这些拍摄模式选项中可以包括追焦模式选项。电子设备可以检测到作用于追焦模式选项上的用户操作。响应于该用户操作,电子设备可以显示如图2D所示的用户界面400。
可理解,电子设备还可以通过其他方式进入追焦模式,本申请对此不作限制。
2、预览时选择追焦目标(图2E~图2F)
电子设备可以检测到作用于人体框403上的用户操作。响应于该用户操作,电子设备可以显示如图2E所示的用户界面500。用户界面500为电子设备在追焦模式下,并且追焦成功时所显示的录像预览界面。
可理解,电子设备检测到作用于人体框403上的用户操作之后,可以确定追焦目标为人物R2。追焦成功之后,电子设备可以将焦点锁定在人物R2上。
用户界面500可以包括预览窗201、预览小窗501、追焦人体框502和录像开始控件302。可理解,预览窗201可以为上文所提及的预览大窗。预览小窗501可以为上文所提及的预览小窗。
预览小窗501用于显示追焦目标的特写图像。也就是说,与预览窗201显示的图像相比,预览小窗501显示的图像是以追焦目标为主要内容。预览小窗501可以包括控件5011和控件 5012。控件5011用于退出本次追焦。控件5012用于调整预览小窗501的尺寸。具体地,控件5012可以用于调整预览小窗501的宽高比。
追焦人体框502可以用于框选追焦目标。如图2E所示,追焦人体框用于框选人物R2。
可理解,预览小窗501可以悬浮显示在预览窗201上。在本申请的一些实施例中,用户可以拖动预览小窗501,使得预览小窗501可以悬浮在预览窗201上的任何区域。
电子设备可以检测到作用于控件5012上的用户操作。响应于该用户操作,电子设备可以显示如图2F所示的用户界面600。用户界面600所包括的控件与用户界面500所包括的控件大致相同,不同的是,用户界面600和用户界面500中的预览小窗501的尺寸发生变化。
在本申请的一些实施例中,用户界面600和用户界面500中的预览小窗501的宽高比互为倒数。
需要说明的是,预览小窗501的默认尺寸可以根据实际需求进行设置,本申请对此不作限制。
可理解,开始追焦并追焦成功之后,电子设备可以默认显示如图2E所示的预览小窗501,也可以默认显示如图2F所示的预览小窗501。
当然,用户界面500还可以包括用于框选未被选作追焦目标的人的人体框。
在本申请的一些实施例中,用户选择追焦目标并点击相应的人体框之后,若一段时间内用户并未切换追焦目标,电子设备可以隐藏其他未被选中的人体框。
3、预览时丢失追焦目标、退出追焦及找回追焦目标(图2G~图2I)
在本申请的一些实施例中,电子设备处于追焦模式下的录像预览状态时,由于追焦目标远离电子设备或者超出电子设备的取景范围,电子设备可能会丢失追焦目标,即无法检测到追焦目标。可理解,电子设备的取景范围与视场角和焦距相关。
如图2G所示,电子设备可以显示用户界面700。用户界面700可以包括显示区域701、预览小窗501和预览窗201。根据预览窗201所显示的图像,人物R2即将完全超出电子设备的取景范围。此时,电子设备无法检测到追焦目标,处于失焦(即丢失追焦目标)状态。在这种情况下,预览小窗501可以在一段时间(例如,5s)内持续显示原始图像。即在失焦后的预设时长(例如,5s)内,预览小窗501可以与预览窗201显示相同的图像。一旦持续失焦超过预设时长,预览小窗501会关闭。即电子设备退出本次追焦。
在本申请的一些实施例中,电子设备丢失追焦目标后,预览小窗501可以在一段时间(例如,5s)内持续显示失焦前预览小窗501所显示的最后一帧图像。
显示区域701可以显示关于失焦和退出追焦的提示信息。如图2G所示,显示区域701 可以显示有“追焦目标丢失,5s后退出追焦”。需要说明的是,这里所提及的退出追焦指的是关闭追焦目标的特写图像的显示窗口(即预览小窗501),而不是退出追焦模式。
可理解,追焦目标丢失5s后,电子设备自动退出追焦。如图2H所示,电子设备可以显示用户界面800。用户界面800为电子设备退出追焦后所显示的界面。用户界面800可以包括人体框402和人体框404。在这种情况下,用户可以再次选择追焦目标并点击相应的人体框,或者,等待原追焦目标重新进入电子设备的取景范围。
可理解,电子设备从失焦开始到退出追焦的时间间隔还可以为其他数值。例如,2s、3s、 6s等。这一时间间隔可以根据实际需求进行设置,本申请对此不作限制。
在本申请的一些实施例中,电子设备丢失追焦目标之后,用户并未切换追焦目标。在这种情况下,在失焦后的预设时长内,电子设备可以重新找回追焦目标,并在预览小窗中重新显示追焦目标的特写图像。
如图2G所示,电子设备丢失追焦目标,预览小窗501显示有失焦前预览小窗501显示的最后一帧图像。并且,显示区域701可以显示有“追焦目标丢失,5s后退出追焦”。在这种情况下,若5s内电子设备重新找回追焦目标,则电子设备可以重新显示预览小窗501。如图2I所示,电子设备可以显示用户界面900。根据预览窗201所显示的图像,人物R2重新出现在电子设备的取景范围内。此时,电子设备可以再次检测到追焦目标,并显示预览小窗501 和追焦人体框502。
4、追焦成功状态下的视频录制、暂停、保存查看(图2J~图2N)
(一)同时开启大窗录制和小窗录制
电子设备可以检测到作用在如图2E所示的用户界面500所包括的录像开始控件302上的用户操作。响应于该用户操作,电子设备可以开始录制视频。
如图2J所示,电子设备可以显示用户界面1000。用户界面1000可以包括显示区域1001、预览小窗501、录像结束控件1004和录像暂停控件1005。
显示区域1001用于显示预览窗201所对应的视频录制时间。即原始视频的录制时间。如图2I所示,预览窗201所对应的视频录制时间为“00:03”,即原始视频的录制时间为3s。
可理解,电子设备在追焦模式下开始录制视频之后,预览小窗501可以隐藏控件5011和控件5012。如图2J所示,预览小窗501可以包括显示区域1002和录像结束控件1003。
显示区域1002用于显示预览小窗501所对应的视频录制时间。即特写视频的录制时间。与显示区域1001显示的视频录制时间一致,显示区域1002显示的视频录制时间也为“00:03”,即原始视频的录制时间为3s,特写视频的录制时间也为3s。
需要说明的是,关于原始视频和特写视频的相关含义可参考上文,在此不再赘述。
录像结束控件1003用于结束预览小窗501所对应的视频(即特写视频)的录制。录像结束控件1004用于结束预览窗201所对应的视频(即原始视频)的录制。录像暂停控件1005 用于暂停原始视频的录制。
在本申请的一些实施例中,一旦电子设备暂停录制原始视频,特写视频的录制也会暂停。相应地,一旦电子设备继续录制原始视频,特写视频也会继续录制。
示例性的,电子设备可以检测到作用在录像暂停控件1005上的用户操作。响应于该用户操作,电子设备可以显示如图2K所示的用户界面1100。用户界面1100所包括的控件与用户界面1000所包括的控件大致相同,不同的是,用户界面1100可以包括继续录像控件1101。继续录像控件1101用于继续录制原始视频。如图2K所示,用户界面1100所包括的显示区域 1001和显示区域1002所显示的视频录制时间均停留在“00:03”。这也就意味着,原始视频和特写视频均暂停录制。
在本申请的一些实施例中,若电子设备暂停录制特写视频,原始视频的录制不会暂停。
在本申请的一些实施例中,预览小窗501也可以包括录像暂停控件。该录像暂停控件可以用于暂停录制特写视频。在这种情况下,一旦电子设备检测到作用在预览小窗501所包括的录像暂停控件上的用户操作,响应于该用户操作,电子设备可以暂停录制特写视频。电子设备可以继续录制原始视频。
在本申请的一些实施例中,一旦电子设备结束录制原始视频之后,特写视频的录制也会结束。
电子设备可以检测到作用于用户界面1000包括的录像结束控件1004上的用户操作。响应于该用户操作,电子设备可以显示如图2L所示的用户界面1200。用户界面1200所包括的控件与用户界面400所包括的控件基本一致。用户界面1200所包括的相册快捷控件203可以显示电子设备保存的原始视频中的第一帧图像的缩略图。
电子设备可以检测到作用于用户界面1200所包括的相册快捷控件203上的用户操作。响应于该用户操作,电子设备可以显示如图2M的(a)所示的用户界面1301。用户界面1301 可以包括显示区域13011。显示区域13011可以包括控件130111。电子设备可以检测到作用于控件130111上的用户操作。响应于该用户操作,电子设备可以播放原始视频,相应的,显示区域13011也可以显示原始视频中的图像。
电子设备可以检测到作用在用户界面1301上的左滑操作。响应于该用户操作,电子设备可以显示如图2M的(b)所示的用户界面1302。与用户界面1301类似,用户界面1302可以包括显示区域13011,显示区域13011可以包括控件130111。电子设备可以检测到作用于控件130111上的用户操作。响应于该用户操作,电子设备可以播放特写视频,相应的,显示区域13011也可以显示特写视频中的图像。
可理解,用户可以在图库应用中查看上述结束用户界面1000中的录制之后保存的两个视频。如图2N的(a)所示,电子设备可以显示用户界面1401。用户界面1401可以包括视频 14011和视频14012。视频14011的时长和视频14012的时长均为3s。可理解,视频14011为原始视频,视频14012为特写视频。也就是说,原始视频的时长和特写视频的时长相同。
在本申请的一些实施例中,若电子设备结束录制原始视频,特写视频的录制不会结束。在这种情况下,一旦电子设备检测到作用于录像结束控件1003上的用户操作,响应于该用户操作,电子设备可以结束录制特写视频。
(二)大窗录制后开启小窗录制
电子设备可以检测到作用于如图2D所示的用户界面400所包括的录像开始控件302上的用户操作。响应于该用户操作,电子设备可以开始录制视频。
如图2P所示,电子设备可以显示用户界面1600。用户界面1600可以包括预览窗201、录像结束控件1004和录像暂停控件1005。预览窗201所对应的视频录制时间为“00:03”,即原始视频的录制时间为3s。
电子设备可以检测到作用于如图2P所示的用户界面1600所包括的人体框404上的用户操作。响应于该用户操作,电子设备可以确定人体框404所框选的人物(即人物R3)为追焦目标。电子设备可以录制人物R3的特写视频。
如图2Q所示,电子设备可以显示用户界面1700。用户界面1700可以包括预览窗201、预览小窗501、录像结束控件和录像暂停控件。用户界面1700所包括的显示区域1001显示的视频录制时间为“00:08”,而预览小窗501中的显示区域1002显示的视频录制时间为“00:05”。即原始视频的录制时间已经录制到第8s,而人物R3的特写视频才录制到第5s。
电子设备可以检测到作用于用户界面1700包括的录像结束控件上的用户操作。响应于该用户操作,电子设备可以保存预览窗201中录制的视频和预览小窗501中录制的视频。可理解,用户可以在图库应用中查看上述保存的两个视频。如图2N的(b)所示,电子设备可以显示用户界面1402。用户界面1402可以包括视频14021和视频14022。视频14021的时长为 8s,视频14022的时长为5s。可理解,视频14021为原始视频,视频14022为特写视频。也就是说,原始视频的时长比特写视频的时长要长。
5、录制时切换追焦目标(图2O~图2Q)
(1)原始视频和特写视频同时录制时,切换追焦目标(图2O)
电子设备可以检测到作用于如图2J所示的用户界面1000所包括的人体框404上的用户操作。响应于该用户操作,电子设备可以显示如图2O所示的用户界面1500。用户界面1500 所包括的控件与用户界面1000所包括的控件大致相同,不同的是,用户界面1500还可以包括追焦人体框1501,并且,用户界面1500中的预览小窗501显示的是人物R3的特写图像。追焦人体框1501可以用于框选追焦目标。如图2O所示,追焦人体框1501用于框选人物R3。也就是说,追焦目标已经从人物R2切换至人物R3,电子设备也追焦成功。
可理解,切换追焦目标之后,用户也可以通过点击录像结束控件1003、录像结束控件1004 和录像暂停控件1005来结束或暂停相应预览窗口的视频录制,具体可参考上文,在此不再赘述。
(2)特写视频结束录制但原始视频录制时,切换追焦目标(图2P~图2Q)
电子设备可以检测到作用于如图2J所示的用户界面1000所包括的录制结束控件1003上的用户操作。响应于该用户操作,电子设备可以显示如图2P所示的用户界面1600。用户界面1600可以包括人体框402、人体框403和人体框404。可理解,此时,电子设备已经结束以人物R2为追焦目标的特写视频的录制,但是仍在录制原始视频。
电子设备可以检测到作用于如图2P所示的用户界面1600所包括的人体框404上的用户操作。响应于该用户操作,电子设备可以重新确定人体框404所框选的人物(即人物R3)为追焦目标。电子设备可以录制人物R3的特写视频。
如图2Q所示,电子设备可以显示用户界面1700。用户界面1700所包括的控件与用户界面1500所包括的控件基本一致。用户界面1700所包括的显示区域1001显示的视频录制时间为“00:08”,而预览小窗501中的显示区域1002显示的视频录制时间为“00:05”。即原始视频的录制时间已经录制到第8s,而人物R3的特写视频才录制到第5s。
6、录制时丢失追焦目标及找回追焦目标(图2R~图2X)
与预览时丢失追焦目标类似,在本申请的一些实施例中,电子设备处于追焦模式下的录像状态时,由于追焦目标远离电子设备或者超出电子设备的取景范围,电子设备可能会丢失追焦目标,即无法检测到追焦目标。在这种情况下,电子设备可以继续录制原始视频,而对特写视频的录制进行相应处理。
(1)方式一(图2R~图2V)
在本申请的一些实施例中,在失焦后的一段时间内,电子设备继续录制原始视频和特写视频。在这一段时间内,电子设备录制的特写视频中的图像与原始视频中的图像相同。若超过这一段时间后,追焦目标仍未找回且用户未切换追焦目标,电子设备可以继续录制原始视频,而暂停录制特写视频。
如图2J所示,电子设备可以录制原始视频和人物R2的特写视频。在录制过程中,电子设备可以显示如图2R所示的用户界面1800。根据预览窗201所显示的图像,人物R2即将完全超出电子设备的取景范围。此时,电子设备无法检测到追焦目标,处于失焦状态。在这种情况下,预览小窗501可以在一段时间(例如,5s)内持续显示原始图像。即在失焦后的一段时间(例如,5s)内,预览小窗501可以与预览窗201显示相同的图像。
如图2S所示,电子设备可以显示用户界面1900。用户界面1900所包括的显示区域1001 显示的视频录制时间为“00:11”,显示区域1002显示的视频录制时间为“00:11”。也就是说,电子设备继续录制原始视频和特写视频。
可理解,若失焦超过5s之后,追焦目标(即人物R2)仍未找回且用户未切换追焦目标,电子设备可以继续录制原始视频,而暂停录制特写视频。在这种情况下,预览小窗501持续显示暂停录制前显示的最后一帧图像。
如图2T所示,电子设备可以显示用户界面2000。用户界面2000所包括的显示区域1001 显示的视频录制时间为“00:16”,显示区域1002显示的视频录制时间为“00:15”。也就是说,失焦超过5s后,电子设备继续录制原始视频,而暂停录制特写视频。预览小窗501显示的是暂停录制前显示的最后一帧图像。
可理解,若失焦后5s内找回追焦目标,电子设备继续录制原始视频和特写视频。追焦目标找回后,电子设备录制的特写视频中的图像为追焦目标的特写图像。也就是说,追焦目标找回后,预览小窗501显示的是追焦目标的特写图像。
如图2R和图2S所示,电子设备无法检测到追焦目标(即人物R2),预览小窗501内显示的图像与预览窗201显示的图像相同。在这种情况下,若失焦后5s内找回追焦目标,电子设备可以继续录制原始视频和特写视频。如图2U所示,电子设备可以显示用户界面2100。用户界面2100所包括的显示区域1001显示的视频录制时间为“00:13”,显示区域1002显示的视频录制时间为“00:13”。可理解,电子设备失焦的时间在5s内。根据图2U中的预览窗 201所显示的图像,人物R2重新出现在电子设备的取景范围内。此时,电子设备可以再次检测到追焦目标,并显示追焦人体框502。如图2U所示,在这种情况下,预览小窗501不再显示原始图像,而是显示追焦目标(即人物R2)的特写图像。
可理解,若失焦后5s之后找回追焦目标,电子设备继续录制原始视频,并且不再暂停录制特写视频。追焦目标找回后,电子设备录制的特写视频中的图像为追焦目标的特写图像。也就是说,追焦目标找回后,预览小窗501显示的是追焦目标的特写图像。
如图2V所示,电子设备可以显示用户界面2200。用户界面2200所包括的显示区域1001 显示的视频录制时间为“00:19”,显示区域1002显示的视频录制时间为“00:16”。可理解,电子设备失焦的时间超过5s。根据上文,失焦超过5s之后,电子设备继续录制原始视频,而暂停录制特写视频。根据图2V中的预览窗201所显示的图像,人物R2重新出现在电子设备的取景范围内。此时,电子设备可以再次检测到追焦目标,并显示追焦人体框502。如图2V所示,在这种情况下,预览小窗501不再显示原始图像,而是显示追焦目标(即人物R2)的特写图像。
可理解,电子设备从开始失焦到开始暂停录制特写视频的时间间隔还可以为其他数值。例如,2s、3s、6s等。这一时间间隔可以根据实际需求进行设置,本申请对此不作限制。
(2)方式二(图2W~图2X)
在本申请的一些实施例中,在失焦后的一段时间内,电子设备继续录制原始视频和特写视频。在这一段时间内,电子设备录制的特写视频中的图像均为特写视频中的最后一帧图像。若超过这一段时间后,追焦目标仍未找回且用户未切换追焦目标,电子设备可以继续录制原始视频,而暂停录制特写视频。
如图2J所示,电子设备可以录制原始视频和人物R2的特写视频。在录制过程中,电子设备可以显示如图2W所示的用户界面2300。根据预览窗201所显示的图像,人物R2已经完全超出电子设备的取景范围。此时,电子设备无法检测到追焦目标,处于失焦状态。在这种情况下,电子设备可以在一段时间(例如,5s)继续录制特写视频。并且,预览小窗501 可以在这一段时间内持续显示失焦前预览小窗501显示的最后一帧图像。即失焦前电子设备录制的特写视频的最后一帧图像。
可理解,若失焦超过5s之后,追焦目标(即人物R2)仍未找回且用户未切换追焦目标,电子设备可以继续录制原始视频,而暂停录制特写视频。在这种情况下,预览小窗501持续显示暂停录制前显示的最后一帧图像。
在本申请的一些实施例中,失焦超过5s之后,电子设备可以给预览小窗501添加蒙层。通俗来说,预览小窗501显示的图像看起来会变灰。
如图2X所示,电子设备可以显示用户界面2400。用户界面2400所包括的显示区域1001 显示的视频录制时间为“00:18”,显示区域1002显示的视频录制时间为“00:15”。也就是说,失焦超过5s后,电子设备继续录制原始视频,而暂停录制特写视频。预览小窗501显示的是暂停录制前显示的最后一帧画面,并且显示蒙层。
与方式一类似,若失焦5s内找回追焦目标,电子设备继续录制原始视频和特写视频。追焦目标找回后,预览小窗501不再显示追焦目标丢失前显示的最后一帧图像,而是显示实时获取的追焦目标的特写图像。这一部分具体可以参见图2U和相关描述,在此不再赘述。
与方式一类似,若失焦后5s之后找回追焦目标,电子设备继续录制原始视频,并且不再暂停录制特写视频。可理解,追焦目标找回后,预览小窗501不再显示蒙层。这一部分具体可以参见图2V和相关描述,在此不再赘述。
在本申请的一些实施例中,电子设备失焦之后,可以显示关于失焦和退出追焦的提示信息,具体可以参考图2G所示的显示区域701,在此不再赘述。
在本申请的一些实施例中,电子设备失焦超过一段时间(例如,5s)后,可以关闭预览小窗501,并自动保存特写视频。在这种情况下,电子设备可以继续录制原始视频。若失焦超过一段时间后,电子设备重新检测到追焦目标,可以重启显示预览小窗501来录制追焦目标的特写视频。
可理解,电子设备还可以在横屏状态下进行追焦预览和追焦录制,并且,还可能出现追焦目标丢失、追焦目标切换等情况,具体可参考竖屏状态下的界面图(如图2A-图2X),在此不再赘述。
需要说明的是,上述用户界面仅为本申请提供的一些示例,不应视为对本申请的限制。
下面结合图3介绍本申请实施例提供的一种电子设备的软件结构。
如图3所示,本申请涉及的电子设备的软件框架可以包括应用程序层,应用程序框架层 (framework,FWK)、系统库、安卓运行时、硬件抽象层(HAL)和内核层(kernel)。
其中,应用程序层可以包括一系列应用程序包,例如相机,图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息等应用程序(也可以称为应用)。其中,相机应用可以用于获取图像和视频。
如图3所示,相机应用可以包括相机模式模块、流管理模块、编码控制模块、存储模块和显示模块。相机模式模块可以用于监听用户操作并确定相机的模式。相机的模式可以包括但不限于:拍照模式、录像预览模式、录像模式、延时摄影模式、连拍模式等。其中,录像预览模式可以包括追焦模式下的录像预览模式。录像模式可以包括追焦模式下的录像模式。流管理模块用于进行数据流管理。例如,数据流配置信息(可简称为配流信息)的下发。流管理模块可以包括数据流缓存区域。例如,大窗图像缓存区和小窗图像缓存区。大窗图像缓存区和小窗图像缓存区可以存放相机HAL返回的两路图像数据。具体的,大窗图像缓存区用于缓存预览大窗对应的数据流,小窗图像缓存区用于缓存预览小窗图像对应的数据流。编码控制模块可以包括混合器、视频编码器和音频管理器。编码控制模块中的视频编码器用于控制编码器对摄像头采集的图像进行编码。音频管理器用于对拾音器等设备采集的音频进行编码。混合器用于将编码后的图像和编码后的音频合并为视频文件。存储模块用于存储原始视频和特写视频。显示模块用于控制预览大窗和预览小窗的显示。
应用程序框架层为应用程序层的应用程序提供应用编程接口(ApplicationProgramming Interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图3所示,应用程序框架层可以包括相机FWK和媒体FMK。相机FWK可以提供API接口给应用(例如,相机应用)进行调用,进而接收来自应用的请求,同时维护着请求在内部流转的业务逻辑,最终通过调用相机AIDL跨进程接口将请求发送至相机服务(CameraService)中进行处理,紧接着,等待相机服务(Camera Service)结果的回传,进而将最终结果发送至相机应用。其中,AIDL的英文全称为Android Interface Definition Language,中文含义为安卓接口定义语言。类似的,媒体FWK可以API接口给相应应用(例如,相机应用)进行调用,进而接收来自应用(例如,相机应用)的请求,并向下传递应用的请求,然后再回传给应用。
可理解,应用程序框架层还可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。其具体含义可以参考相关技术文档,在此不展开说明。
运行时(Runtime)负责系统的调度和管理。Runtime包括核心库和虚拟机。其中,核心库包含两部分:一部分是编程语言(例如,java语言)需要调用的功能函数,另一部分是系统的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的编程文件(例如,java文件)执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(Surface Manager),媒体库(Media Libraries),三维图形处理库(例如:OpenGL ES),二维图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了二维(2-Dimensional, 2D)和三维(3-Dimensional,3D)图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现3D图形绘图,图像渲染,合成,和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
硬件抽象层(HAL)是位于操作系统内核与上层软件之间的接口层,其目的在于将硬件抽象化。硬件抽象层是设备内核驱动的抽象接口,用于实现向更高级别的Java API框架提供访问底层设备的应用编程接口。HAL包含多个库模块,例如相机HAL、Vendor仓、显示屏、蓝牙、音频等。其中每个库模块都为特定类型的硬件组件实现一个接口。可理解,相机HAL 可以为相机FWK提供访问摄像头等硬件组件的接口。Vendor仓可以为媒体FWK提供访问编码器等硬件组件的接口。为当系统框架层API要求访问便携设备的硬件时,Android操作系统将为该硬件组件加载库模块。
内核层是Android操作系统的基础,Android操作系统最终的功能都是通过内核层完成。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动,虚拟卡驱动。
需要说明的是,本申请提供的图3所示的电子设备的软件结构示意图仅作为一种示例,并不限定Android操作系统不同分层中的具体模块划分,具体可以参考常规技术中对Android 操作系统软件结构的介绍。另外,本申请提供的拍摄方法还可以基于其他操作系统实现,本申请不再一一举例。
基于图3所示的电子设备的软件结构,结合图4介绍本申请实施例提供的一种拍摄方法。
如图4所示,除了图3所示的软件模块,电子设备可以包括摄像头、存储器和编码器等硬件模块。其中,摄像头可以用于采集原始图像数据。存储器可以用于存储预览大窗录制的视频和预览小窗录制的视频。编码器可以用于对预览大窗对应的数据流和预览小窗对应的数据流中的图像数据进行编码。电子设备可以包括第一编码器和第二编码器。其中,第一编码器可以用于对预览大窗对应的数据流中的图像数据进行编码。第二编码器可以用于对预览小窗对应的数据流中的图像数据进行编码。
相机模式模块可以监听到作用于追焦模式控件上的用户操作,从而确定当前相机模式变为追焦模式下的录像预览模式,并通知流管理模块。相应的,流管理模块可以向相机FWK 下发两路数据流的配流信息。这两路数据流分别是预览大窗对应的数据流和预览小窗对应的数据流。相机FWK接收配流信息之后,可以将配流信息下发给相机HAL。相机HAL可以对摄像头采集的图像数据进行处理,得到两路不同效果的图像数据。相机HAL可以将该两路不同效果的图像数据返回给相机FWK。相应的,相机FWK可以继续将该两路不同效果的图像数据返回给相机应用,并分别存放在相机应用的大窗图像缓存区和小窗图像缓存区中。可理解,该两路不同效果的图像数据可以用于预览大窗和预览小窗中的图像显示,以及生成相应视频。
相机模式控件可以监听到作用于录像开始控件上的用户操作,从而确定当前相机模式变为追焦模式下的录像模式,并通知编码控制模块。编码控制模块控制编码器对大窗图像缓存区和小窗图像缓存区中的两路图像数据进行编码,从而得到原始视频和特写视频。可理解,编码控制模块控制编码器对小窗图像缓存区中的图像数据进行编码,可以得到一个或多个特写视频。在本申请的一些实施例中,编码控制模块控制编码器对大窗图像缓存区和小窗图像缓存区中的两路图像数据进行编码之后,可以生成一个原始视频和多个特写视频,并将生成的视频保存至存储器中。
可理解,本申请中所提及的大窗与预览大窗的含义是相同的,小窗与预览小窗的含义是相同的。
下面结合图5-图9说明前述实施例的具体实现。
S500:相机模式模块接收到启动相机应用的请求。
可理解,用户可以触发电子设备启动相机应用。相应的,电子设备中的相机模式模块可以接收到该启动相机应用的请求。
示例性的,如图2A所示,用户可以点击相机应用图标101,相应的,电子设备可以接收到启动相机应用的请求。响应于该启动相机应用的请求,电子设备可以启动相机应用并显示图2B所示的用户界面200。可理解,用户也可以通过语音、手势等方式启动相机应用,本申请对用户触发电子设备启动相机应用的具体方式不作限制。
S501:相机模式模块向摄像头发送启动摄像头的请求。
可理解,摄像头可以接收相机模式模块发送的启动摄像头的请求。
S502:摄像头启动并采集原始图像数据。
可理解,摄像头接收相机模式模块发送的启动摄像头的请求之后,可以启动。并且,摄像头启动之后,可以持续采集原始图像数据。
S503:摄像头向相机HAL发送原始图像数据。
可理解,摄像头可以将采集的原始图像数据发送给相机HAL。
S504:相机HAL对原始图像数据进行处理,将处理后的图像送到显示屏进行显示。
可理解,相机应用处于预览模式时,相机HAL可以对原始图像数据进行处理,并将处理后的图像送到显示屏进行显示。可理解,这里所提及的预览模式可以包括拍照预览模式、录像预览模式等。
一、配置数据流(如图5中的步骤S505-步骤S516所示)
S505:相机模式模块接收到开启追焦模式的请求。
可理解,用户可以触发相机进入追焦模式。可理解,相机模式模块可以监听到用户的相应触发操作。相应的,相机模式模块可以接收开启追焦模式的请求。
示例性的,电子设备启动相机应用之后,可以显示如图2C所示的用户界面300。用户界面300可以包括追焦模式控件301。用户可以点击追焦模式控件301,相应的,电子设备中的相机模式模块可以接收到进入追焦模式的请求。响应于该进入追焦模式的请求,电子设备可以显示如图2D所示的用户界面400。可理解,用户也可以通过语音、手势等方式触发电子设备进入追焦模式。
在本申请的一些实施例中,用户可以通过桌面的快捷控件、语音、手势等方式触发电子设备快速进入追焦模式。
S506:相机模式模块向存储模块发送进入追焦模式的提示信息。
可理解,相机模式模块接收开启追焦模式的请求之后,可以向存储模块发送相机应用进入追焦模式的提示信息。该提示信息可以理解为相机应用由默认录像预览模式变化为追焦模式的模式变化信息。可理解,默认录像预览模式指的是电子设备处于默认录像状态下的录像预览模式(如图2C所示)。
在本申请的一些实施例中,该提示信息可以包括相机应用的当前模式(即追焦模式)。该提示信息还可以包括相机应用的原始模式。可理解,相机应用的原始模式指的是进入追焦模式前的模式。例如默认录像预览模式。
S507:存储模块基于当前的系统时间分别生成大窗视频文件和小窗视频文件。
可理解,存储模块基于当前的系统时间分别生成的大窗视频文件和小窗视频文件的初始状态为空(即没有数据)。
在本申请的一些实施例中,大窗视频文件和小窗视频文件的时间戳分别为第一时刻和第二时刻。其中,第二时刻不早于第一时刻。
S508:存储模块向编码控制模块发送大窗视频文件的文件名和小窗视频文件的文件名。
可理解,存储模块基于当前的系统时间分别生成大窗视频文件和小窗视频文件之后,可以将大窗视频文件的文件名和小窗视频文件的文件名发送给编码控制模块。大窗视频文件的文件名和小窗视频文件的文件名可以为文字、数字、字符串等形式,本申请对此不作限制。
在本申请的一些实施例中,存储模块还可以向编码控制模块发送大窗视频文件和小窗视频文件的时间戳(即第一时刻和第二时刻)。存储模块还可以向编码控制模块发送文件名与时间戳的对应关系。
可理解,存储模块还可以向编码控制模块发送的小窗视频文件的文件标识和大窗视频文件的文件标识还可以表现为其他形式和内容,不限于上述文件名和时间戳,本申请对此不作限制。
示例性的,存储模块可以向编码控制模块发送video-1-time-1-video-2-time-2。可参见表1, video-1与time-1对应。video-1为大窗视频文件的文件名。time-1为大窗视频文件的时间戳(即第一时刻)。video-2与time-2对应。video-2为小窗视频文件的文件名。time-2为小窗视频文件的时间戳(即第二时刻)。
表1
示例性的,存储模块可以向编码控制模块发送10987662098767。字符串的第1位表示的是大窗视频文件的文件名。字符串的第8位表示的是小窗视频文件的文件名。字符串的第2 位到第7位表示的是大窗视频文件的时间戳。字符串的第9位到第14位表示的是小窗视频文件的时间戳。
在本申请的一些实施例中,大窗视频文件和小窗视频文件可以分别以其时间戳来命名。
相应的,编码控制模块可以接收存储模块发送的大窗视频文件的文件名和小窗视频文件的文件名。
S509:相机模式模块向流管理模块发送进入追焦模式的提示信息。
可理解,相机模式模块接收到开启追焦模式的请求之后,可以向流管理模块发送相机应用进入追焦模式的提示信息。该提示信息的相关描述可以参考步骤S506,在此不再赘述。
可理解,本申请对电子设备执行步骤S506和步骤S509的先后顺序不作限制。电子设备可以首先执行步骤S506,可以首先执行步骤S509,还可以同时执行步骤S506和步骤S509。
S510:流管理模块配置大窗数据流和小窗数据流。
可理解,流管理模块可以确定大窗数据流和小窗数据流的配流信息,并以此来配置大窗数据流和小窗数据流。大窗数据流指的是预览大窗所对应的数据流,即预览大窗所显示的图像所对应的数据流。小窗数据流指的是预览小窗所对应的数据流,即预览小窗所显示的图像所对应的数据流。
可理解,大窗数据流和小窗数据流的配流信息可以包括格式和分辨率等。在本申请的一些实施例中,大窗数据流和小窗数据流的配流信息是一样的。示例性的,格式可以为YUV。分辨率可以为1920px*1080px。可理解,px的全称是“Pixel”,中文意思为“像素”,是表示图片或者图形的最小单位。需要说明的是,配置信息的具体内容可以根据行业规定和实际需求进行设置,本申请对此不作限制。在本申请的一些实施例中,大窗数据流和小窗数据流的配流信息还可以包括大窗数据流的流标识和小窗数据流的流标识。大窗数据流的流标识和小窗数据流的流标识可以用于区分大窗数据流和小窗数据流。可理解,流管理模块可以存储有大窗数据流的流标识和小窗数据流的流标识。
S511:流管理模块向编码控制模块发送大窗配流信息和小窗配流信息。
可理解,大窗配流信息指的是大窗数据流的配流信息,小窗配流信息指的是小窗数据流的配流信息。根据上文,配流信息可以包括格式、分辨率等,本申请对此不作限制。
相应的,编码控制模块可以接收流管理模块发送的配流信息。
S512:编码控制模块基于大窗配流信息和大窗视频文件的文件名,确定与大窗数据流和大窗视频文件关联的第一编码器对应的编码器参数,以及基于小窗配流信息和小窗视频文件的文件名,确定与小窗数据流和小窗视频文件关联的第二编码器对应的编码器参数。
可理解,编码控制模块接收大窗配流信息和小窗配流信息之后,可以对其进行解析,确定流管理模块配置的数据流有2路。类似的,编码控制模块接收大窗视频文件的文件名和小窗视频文件的文件名之后,可以确定视频文件的有2个。相应的,编码控制模块确定需要创建的编码器的数量为2。可理解,这2个编码器(即第一编码器和第二编码器)可以分别与2 路数据流(即大窗数据流和小窗数据流)关联,以及与2个视频文件(即大窗视频文件和小窗视频文件)关联。也就是说,编码控制模块可以确定第一编码器用于对大窗数据流中的图像数据进行编码,并且,第一编码器可以将该编码后的数据写入大窗视频文件中。类似的,编码控制模块可以确定第二编码器用于对小窗数据流中的图像数据进行编码,并且,第二编码器可以将该编码后的数据写入小窗视频文件中。
S513:编码控制模块向编码器发送第一编码器对应的编码器参数和第二编码器对应的编码器参数。
可理解,编码器的编码器参数可以包括格式和分辨率。示例性的,格式可以为H.264。分辨率可以为1920px*1080px。需要说明的是,编码器的编码器参数的具体内容可以根据行业规定和实际需求进行设置,本申请对此不作限制。
在本申请的一些实施例中,第一编码器的编码器参数和第二编码器的编码器参数可以是一样的,也可以是不一样的,其具体参数可以根据实际需要和相关技术文档进行设置。
相应的,编码器可以接收编码控制模块发送的第一编码器对应的编码器参数和第二编码器对应的编码器参数。
S514:编码器基于第一编码器对应的编码器参数和第二编码器对应的编码器参数创建第一编码器和第二编码器。
可理解,编码器接收编码控制模块发送的第一编码器对应的编码器参数和第二编码器对应的编码器参数之后,可以基于第一编码器对应的编码器参数创建第一编码器,还可以基于第二编码器对应的编码器参数创建第二编码器。
需要说明的是,本申请所提及的创建编码器指的是调用硬件资源来实现相应的编码功能。通俗来说,编码器创建第一编码器和第二编码器之后,编码控制模块可以调用硬件资源分别实现对大窗数据流中的图像数据的编码,以及对小窗数据流中的图像数据的编码。
S515:流管理模块向相机HAL发送大窗配流信息和小窗配流信息。
具体的,流管理模块可以将大窗配流信息和小窗配流信息发送给相机FWK,然后,相机FWK将大窗配流信息和小窗配流信息发送给相机HAL。大窗配流信息和小窗配流信息的相关描述可以参考上文,在此不再赘述。
相应的,相机HAL可以接收流管理模块发送的配流信息。
可理解,本申请对电子设备执行步骤S511和步骤S515的先后顺序不作限制。
S516:相机HAL基于大窗配流信息确定与大窗数据流匹配的图像效果,以及基于小窗配流信息确定与小窗数据流匹配的图像效果。
可理解,相机HAL接收流管理模块发送的配流信息之后,可以确定与大窗数据流匹配的图像效果,以及与小窗数据流匹配的图像效果。
可理解,图像效果可以包括裁剪、尺寸、美颜、滤镜等,本申请对此不作限制。在本申请的一些实施例中,与大窗数据流匹配的图像效果不包括对原始图像数据进行裁剪处理,而与小窗数据流匹配的图像效果包括对原始图像数据进行裁剪处理。
二、在追焦成功的情况下开始录像(如图6A和图6B所示)
需要说明的是,摄像头启动(如步骤S502)之后,可以持续采集原始图像数据,并将其发送给相机HAL(如步骤S503)。
(一)同时开启大窗录制和小窗录制(如图6A所示)
S600:相机模式模块接收到同时开启大窗录制和小窗录制的请求。
在追焦成功并显示预览大窗和预览小窗时,用户可以触发大窗和小窗同时录制。相应的,相机模式模块可以接收到同时开启大窗录制和小窗录制的请求。
示例性的,电子设备可以显示如图2E所示的用户界面500。用户界面500包括预览窗201 和预览小窗501。也就是说,电子设备追焦成功,并且同时显示预览大窗和预览小窗。可理解,用户可以点击用户界面500所包括的录像开始控件302,相应的,电子设备中的相机模式模块可以接收到同时开启大窗录制和小窗录制的请求。响应于该同时开启大窗录制和小窗录制的请求,电子设备可以开始录制视频。电子设备开始录制视频之后,可以显示如图2J所示的用户界面1000。可理解,用户还可以通过语音、手势等方式触发电子设备同时进行大窗录制和小窗录制。
S601:相机模式模块向编码控制模块发送开始大小窗录制的提示信息。
可理解,相机模式模块接收到同时开启大窗录制和小窗录制的请求之后,可以向编码控制模块发送相机应用开始大小窗录制的提示信息。该提示信息也可以理解为相机应用由大小窗预览模式变化为大小窗录制模式的模式变化信息。可理解,大小窗预览指的是预览大窗和预览小窗均处于预览状态,大小窗录制指的是预览大窗和预览小窗均处于录制状态。
相应的,编码控制模块可以接收相机模式模块发送的相机应用开始大小窗录制的提示信息。
S602:编码控制模块向第一编码器发送启动第一编码器的请求。
可理解,编码控制模块接收相机模式模块发送的开始大小窗录制的提示信息之后,可以向第一编码器发送启动第一编码器的请求。具体的,编码控制模块可以将启动第一编码器的请求发送给媒体FWK,然后,媒体FWK再将该启动第一编码器的请求经由Vendor仓发送给第一编码器。
示例性的,该启动第一编码器的请求可以包括:codec-1.start。
相应的,第一编码器可以接收编码控制模块发送的启动第一编码器的请求。
S603:第一编码器启动。
可理解,第一编码器接收编码控制模块发送的启动第一编码器的请求之后,第一编码器可以启动。
S604:编码控制模块向第二编码器发送启动第二编码器的请求。
可理解,编码控制模块接收相机模式模块发送的开始大小窗录制的提示信息之后,可以向第二编码器发送启动第二编码器的请求。具体的,编码控制模块可以将启动第二编码器的请求发送给媒体FWK,然后,媒体FWK再将该启动第二编码器的请求经由Vendor仓发送给第二编码器。
示例性的,该启动第二编码器的请求可以包括:codec-2.start。
可理解,本申请对电子设备执行步骤S602和步骤S604的先后顺序不作限制。
相应的,第二编码器可以接收编码控制模块发送的启动第二编码器的请求。
S605:第二编码器启动。
可理解,第二编码器接收编码控制模块发送的启动第二编码器的请求之后,第二编码器可以启动。
S606:相机模式模块向流管理模块发送开始大小窗录制的提示信息。
可理解,相机模式模块接收到同时开启大窗录制和小窗录制的请求之后,可以向流管理模块发送相机应用开始大小窗录制的提示信息。可理解,步骤S606的相关描述可以参考步骤S601,在此不再赘述。
可理解,本申请对步骤S601和步骤S606的先后顺序不作限制。
相应的,流管理模块可以接收相机模式模块发送的开始大小窗录制的提示信息。
S607:流管理模块向相机HAL发送生成大窗数据流和小窗数据流的请求。
可理解,流管理模块可以将生成大窗数据流和小窗数据流的请求发送给相机FWK,然后,相机FWK可以将该请求发送给相机HAL。
需要说明的是,在相机模式不发生变化(相机应用的模式为大小窗录制模式)的情况下,流管理模块可以持续向相机HAL下发该生成大窗数据流和小窗数据流的请求。在本申请的一些实施例中,流管理模块以一定的频率(或者说是时间间隔)向相机HAL发送该请求。例如,流管理模块每隔33毫秒向相机HAL发送一次该请求。
相应的,相机HAL可以接收流管理模块发送的生成大窗数据流和小窗数据流的请求。
S608:相机HAL分别基于与大窗数据流匹配的图像效果,以及与小窗数据流匹配的图像效果,对原始图像数据进行处理,得到大窗图像数据和小窗图像数据。
根据前文,摄像头启动之后可以持续采集原始图像数据,并将采集的原始图像数据发送给相机HAL。可理解,相机HAL接收流管理模块发送的生成大窗数据流和小窗数据流的请求之后,可以基于与大窗数据流匹配的图像效果对原始图像数据进行处理,得到大窗图像数据,还可以基于与小窗数据流匹配的图像效果对原始图像数据进行处理,得到小窗图像数据。
S609:相机HAL将大窗图像数据发送给第一编码器。
可理解,相机HAL对原始图像数据进行处理并得到大窗图像数据之后,可以将大窗图像数据发送给第一编码器。
相应的,第一编码器可以接收相机HAL发送的大窗图像数据。
S610:相机HAL将小窗图像数据发送给第二编码器。
可理解,相机HAL对原始图像数据进行处理并得到小窗图像数据之后,可以将小窗图像数据发送给第二编码器。
相应的,第二编码器可以接收相机HAL发送的小窗图像数据。
可理解,本申请对电子设备执行步骤S609和步骤S610的先后顺序不作限制。
S611:第一编码器对大窗图像数据进行编码,得到编码后的大窗图像数据,并将编码后的大窗图像数据写入到大窗视频文件中。
可理解,第一编码器可以接收相机HAL发送的大窗图像数据。第一编码器启动之后,可以对大窗图像数据进行编码。根据上文,第一编码器与大窗数据流、大窗视频文件相关联。因此,第一编码器可以将编码后的大窗图像数据写入大窗视频文件中。
可理解,第一编码器编码后的大窗图像数据可以构成原始视频。示例性的,第一编码器将编码后的大窗图像数据写入大窗视频文件的频率可以为每秒30次。相应的,原始视频的帧率可以为30fps。fps的英文全称为Frames per Second,表示的含义为每秒显示帧数。当然,第一编码器将编码后的大窗图像数据写入大窗视频文件的频率还可以为其他值,本申请对此不作限制。
S612:第二编码器对小窗图像数据进行编码,得到编码后的小窗图像数据,将编码后的小窗图像数据写入到小窗视频文件中。
可理解,第二编码器可以接收相机HAL发送的小窗图像数据。第二编码器启动之后,可以对小窗图像数据进行编码。根据上文,第二编码器与小窗数据流、小窗视频文件相关联。因此,第二编码器可以将编码后的小窗图像数据写入小窗视频文件中。
可理解,第二编码器编码后的小窗图像数据可以构成特写视频。与第一编码器类似,示例性的,第二编码器将编码后的小窗图像数据写入小窗视频文件的频率也可以为每秒30次。相应的,特写视频的帧率可以为30fps。当然,第二编码器将编码后的小窗图像数据写入小窗视频文件的频率还可以为其他值,本申请对此不作限制。
可理解,本申请对步骤S611和步骤S612的先后顺序不作限制。
(二)首先开启大窗录制,再开启小窗录制(如图6B所示)
S613:相机模式模块接收到开启大窗录制的请求。
电子设备进入追焦模式之后,用户可以触发进行大窗录制。相应的,相机模式模块可以接收到开启大窗录制的请求。
示例性的,电子设备进入追焦模式之后,可以显示如图2D所示的用户界面400。用户可以点击用户界面400所包括的录像开始控件302,相应的,电子设备中的相机模式模块可以接收到开启大窗录制的请求。响应于该开启大窗录制的请求,电子设备可以开始进行大窗录制。可理解,用户还可以通过语音、手势等方式触发电子设备进行大窗录制。
S614:相机模式模块向编码控制模块发送开始大窗录制的提示信息。
可理解,相机模式模块接收到开启大窗录制的请求之后,可以向编码控制模块发送开始大窗录制的提示信息。该提示信息也可以理解为相机应用由追焦模式下的大窗预览模式变化为追焦模式下的大窗录制模式的模式变化信息。大窗预览指的是预览大窗处于预览状态。大窗录制指的是预览大窗处于录制状态。
相应的,编码控制模块可以接收相机模式模块发送的开始大窗录制的提示信息。
S615:编码控制模块向第一编码器发送启动第一编码器的请求。
可理解,步骤S615的具体实现方式可以参考步骤S602,在此不再赘述。
S616:第一编码器启动。
可理解,第一编码器接收编码控制模块发送的启动第一编码器的请求之后,第一编码器可以启动。
S617:相机模式模块向流管理模块发送开始大窗录制的提示信息。
可理解,相机模式模块接收到开启大窗录制的请求之后,可以向流管理模块发送相机应用开始大窗录制的提示信息。
可理解,本申请对步骤S614和步骤S617的先后顺序不作限制。
相应的,流管理模块可以接收相机模式模块发送的开始大窗录制的提示信息。
S618:流管理模块向相机HAL发送生成大窗数据流的请求。
可理解,流管理模块可以将生成大窗数据流的请求发送给相机FWK,然后,相机FWK可以将该请求发送给相机HAL。
需要说明的是,在相机模式不发生变化(即相机应用的模式为追焦模式下的大窗录制模式)的情况下,流管理模块可以持续向相机HAL下发该生成大窗数据流的请求。在本申请的一些实施例中,流管理模块以一定的频率(或者说是时间间隔)向相机HAL发送该请求。例如,流管理模块每隔33毫秒向相机HAL发送一次该请求。
相应的,相机HAL可以接收流管理模块发送的生成大窗数据流的请求。
S619:相机HAL基于与大窗数据流匹配的图像效果对原始图像数据进行处理,得到大窗图像数据。
根据前文,摄像头启动之后可以持续采集原始图像数据,并将采集的原始图像数据发送给相机HAL。可理解,相机HAL接收流管理模块发送的生成大窗数据流的请求之后,可以基于与大窗数据流匹配的图像效果对原始图像数据进行处理,得到大窗图像数据。
S620:相机HAL将大窗图像数据发送给第一编码器。
可理解,相机HAL对原始图像数据进行处理并得到大窗图像数据之后,可以将大窗图像数据发送给第一编码器。
相应的,第一编码器可以接收相机HAL发送的大窗图像数据。
S621:第一编码器对大窗图像数据进行编码,得到编码后的大窗图像数据,将编码后的大窗图像数据写入到大窗视频文件中。
可理解,步骤S621的具体实现方式可以参考步骤S611,在此不再赘述。
S622:相机模式模块接收显示小窗的请求。
在追焦模式下进行大窗录制时,用户可以触发对大窗显示的拍摄对象进行追焦,从而触发显示小窗和开启小窗录制。相应的,相机模式模块可以接收显示小窗的请求。
示例性的,电子设备在追焦模式下进行大窗录制时,可以显示如图2P所示的用户界面 1600。用户可以点击用户界面1600所包括的人体框404,相应的,电子设备中的相机模式模块可以接收显示小窗的请求。响应于该接收显示小窗的请求,电子设备可以确定人体框404 所框选的人物(即人物R3)为追焦目标,并在大窗录制的基础上再进行小窗录制。在后续录制过程中,电子设备可以显示如图2Q所示的用户界面1700。
S623:相机模式模块向显示模块发送显示小窗的请求。
可理解,相机模式模块接收到显示小窗的请求之后,可以向显示模块发送显示小窗的请求。
相应的,显示模块可以接收相机模式模块发送的显示小窗的请求。
S624:显示模块显示小窗。
显示模块接收相机模式模块发送的显示小窗的请求之后,可以显示预览小窗(即小窗)。可理解,小窗中显示的图像为相机HAL基于与小窗数据流匹配的图像效果对原始图像数据进行处理后所得的预览图像。对于预览图像的生成方式,本申请中不展开说明。
S625:相机模式模块向编码控制模块发送开始小窗录制的提示信息。
可理解,电子设备处于追焦模式,并已经开启大窗录制。在这种情况下,相机模式模块接收到显示小窗的请求之后,可以向编码控制模块发送开始小窗录制的提示信息。该提示信息也可以理解为相机应用由追焦模式下的大窗录制模式变化为大小窗录制模式的模式变化信息。
相应的,编码控制模块可以接收相机模式模块发送的相机应用开始小窗录制的提示信息。
S626:编码控制模块向第二编码器发送启动第二编码器的请求。
可理解,步骤S626的具体实现方式可以参考步骤S604,在此不再赘述。
S627:第二编码器启动。
可理解,第二编码器接收编码控制模块发送的启动第二编码器的请求之后,第二编码器可以启动。
S628:相机模式模块向流管理模块发送开始小窗录制的提示信息。
可理解,相机模式模块接收到显示小窗的请求之后,可以向流管理模块发送开始小窗录制的提示信息。可理解,步骤S628的相关描述可以参考步骤S625,在此不再赘述。
可理解,本申请对步骤S625和步骤S628的先后顺序不作限制。
S629:流管理模块向相机HAL发送生成小窗数据流和小窗数据流的请求。
可理解,步骤S629的相关描述可以参考步骤S607,在此不再赘述。
相应的,相机HAL可以接收流管理模块发送的生成大窗数据流和小窗数据流的请求。
S630:相机HAL分别基于与大窗数据流匹配的图像效果,以及与小窗数据流匹配的图像效果,对原始图像数据进行处理,得到大窗图像数据和小窗图像数据。
可理解,步骤S630的相关描述可以参考步骤S608,在此不再赘述。
S631:相机HAL将大窗图像数据发送给第一编码器。
S632:相机HAL将小窗图像数据发送给第二编码器。
S633:第一编码器对大窗图像数据进行编码,得到编码后的大窗图像数据,并将编码后的大窗图像数据写入到大窗视频文件中。
S634:第二编码器对小窗图像数据进行编码,得到编码后的小窗图像数据,将编码后的小窗图像数据写入到小窗视频文件中。
可理解,步骤S631-步骤S634的相关描述可以参考步骤S609-步骤S612,在此不再赘述。
三、预览小窗结束录制,预览大窗继续录制(如图7所示)
需要说明的是,摄像头启动(如步骤S502)之后,可以持续采集原始图像数据,并将其发送给相机HAL(如步骤S503)。
S700:相机模式模块接收到结束小窗录制的请求。
在预览小窗和预览大窗均正常录制的情况下,用户可以通过点击预览小窗上的录像结束控件等方式来触发结束小窗视频录制。相应的,相机模式模块可以接收到结束小窗录制的请求。
示例性的,电子设备可以显示如图2J所示的用户界面1000。用户界面1000中的预览小窗501包括录像结束控件1003。用户可以点击用户界面1000包括的录像结束控件1003,相应的,电子设备中的相机模式模块可以接收到结束小窗录制的请求。响应于该结束小窗录制的请求,电子设备可以结束预览小窗501的录制,即结束特写视频的录制。而预览窗201中的录制不受影响。可理解,用户还可以通过语音、手势等方式触发结束小窗视频录制。
S701:相机模式模块向编码控制模块发送结束小窗录制的提示信息。
相机模式模块接收到结束小窗录制的请求之后,可以向编码控制模块发送结束小窗录制的提示信息。该提示信息也可以理解为相机应用由大小窗录制模式变化为大窗录制模式的模式变化信息。大小窗录制的相关描述可以参考前文,在此不再赘述。大窗录制模式指的是预览大窗处于录制状态。
相应的,编码控制模块可以接收相机模式模块发送的结束小窗录制的提示信息。
S702:编码控制模块向第二编码器发送停止第二编码器的请求。
可理解,编码控制模块接收相机模式模块发送的结束小窗录制的提示信息之后,可以向第二编码器发送停止第二编码器的请求。具体地,编码控制模块可以将该停止第二编码器的请求发送给媒体FWK,然后,媒体FWK再将该停止第二编码器的请求经由Vendor仓发送给第二编码器。
示例性的,该停止第二编码器的请求可以包括:codec-2.stop。
相应的,第二编码器可以接收编码控制模块发送的停止第二编码器的请求。
S703:第二编码器停止。
可理解,第二编码器接收编码控制模块发送的停止第二编码器的请求之后,可以停止。
S704:编码控制模块向存储模块发送小窗录制结束信息。
在本申请的一些实施例中,小窗录制结束信息可以包括小窗视频文件的文件名。
在本申请的一些实施例中,小窗录制结束信息还可以包括小窗视频文件的时间戳。
在本申请的一些实施例中,小窗录制结束信息可以为结束符。当然,小窗录制结束信息还可以表现为其他形式,例如,文字、字符、数字等,本申请对此不作限制。
相应的,存储模块可以接收编码控制模块发送的小窗录制结束信息。
S705:存储模块保存小窗视频文件中的视频,并基于当前的系统时间重新创建小窗视频文件。
可理解,存储模块接收编码控制模块发送的小窗录制结束信息之后,可以将小窗视频文件中的视频保存到存储器中,并基于当前的系统时间重新创建小窗视频文件。其中,重新创建的小窗视频文件的时间戳为第三时刻。需要说明的是,该基于当前的系统时间重新创建的小窗视频文件的初始状态为空(即没有数据)。
在本申请的一些实施例中,重新创建的小窗视频文件可以为video-3。第三时刻为time-3。
需要说明的是,在这种情况下,编码控制模块可以确定与小窗数据流和重新创建的小窗视频文件相关联的第三编码器的编码器参数。编码控制模块还可以将第三编码器的编码器参数发送给编码器。编码器可以基于第三编码器的编码器参数创建第三编码器。这一部分的相关描述可以参考步骤S508、步骤S512-步骤S514,在此不再赘述。
示例性的,第三编码器可以为codec-3。
可理解,电子设备可以先结束小窗录制并保存录制所得的视频,之后再结束大窗录制并保存录制所得的视频。用户可以在图库应用中查看录制所得的多个视频。示例性的,电子设备可以显示如图2N的(b)所示的用户界面1402。用户界面1402可以包括视频14021和视频14022。可理解,视频14021为大窗录制所得的视频(即原始视频),视频14022为小窗录制所得的视频(即特写视频)。视频14021的时长为8s,视频14022的时长为5s。即视频14021的时长比视频14022的时长要长。
S706:相机模式模块可以向流管理模块发送结束小窗录制的提示信息。
相机模式模块接收到结束小窗录制的请求之后,可以向流管理模块发送结束小窗录制的提示信息。可理解,步骤S706的相关描述可以参考步骤S701,在此不再赘述。
可理解,本申请对电子设备执行S701和步骤S706的先后顺序不作限制。
S707:流管理模块向相机HAL生成大窗数据流的请求。
可理解,流管理模块可以将生成大窗数据流的请求发送给相机FWK,然后,相机FWK可以将该请求发送给相机HAL。
需要说明的是,在相机模式不发生变化(相机应用的模式为大窗录制模式)的情况下,流管理模块可以持续向相机HAL下发该生成大窗数据流的请求。在本申请的一些实施例中,流管理模块以一定的频率(或者说是时间间隔)向相机HAL发送该请求。例如,流管理模块每隔33毫秒向相机HAL发送一次该请求。
相应的,相机HAL可以接收流管理模块发送的生成大窗数据流的请求。
S708:相机HAL基于与大窗数据流匹配的图像效果对原始图像数据进行处理,得到大窗图像数据。
根据前文,摄像头启动之后可以持续采集原始图像数据,并将采集的原始图像数据发送给相机HAL。可理解,相机HAL接收流管理模块发送的生成大窗数据流的请求之后,可以基于与大窗数据流匹配的图像效果对原始图像数据进行处理,得到大窗图像数据。
S709:相机HAL向第一编码器发送大窗图像数据。
可理解,相机HAL对原始图像数据进行处理并得到大窗图像数据之后,可以将大窗图像数据发送给第一编码器。
相应的,第一编码器可以接收相机HAL发送的大窗图像数据。
S710:第一编码器对大窗图像数据进行编码,得到编码后的大窗图像数据,将编码后的大窗图像数据写入到大窗视频文件中。
可理解,步骤S710的相关描述可以参考步骤S611,在此不再赘述。
四、预览小窗和预览大窗均结束录制(如图8和图9所示)
(一)在预览小窗和预览大窗均正常录制的情况下,结束大窗录制。(如图8所示)
如图6A和图6B所示的流程图,电子设备可以同时进行预览小窗的录制和预览大窗的录制。在这种情况下,用户可以触发结束预览小窗和预览大窗的录制。
S800:相机模式模块接收到同时结束大窗录制和小窗录制的请求。
在预览小窗和预览大窗均正常录制的情况下,用户可以通过点击预览大窗对应的录像结束控件等方式来触发结束小窗视频录制和大窗视频录制。相应的,相机模式模块可以接收到同时结束大窗录制和小窗录制的请求。
示例性的,电子设备可以显示如图2J所示的用户界面1000。用户界面1000包括录像结束控件1004。用户可以点击录像结束控件1004,相应的,电子设备中的相机模式模块可以接收到同时结束大窗录制和小窗录制的请求。响应于该同时结束大窗录制和小窗录制的请求,电子设备可以结束预览小窗501和预览窗201的录制,即结束原始视频和特写视频的录制。
S801:相机模式模块向编码控制模块发送结束大窗录制和小窗录制的提示信息。
相机模式模块接收到同时结束大窗录制和小窗录制的请求之后,可以向编码控制模块发送结束大窗录制和小窗录制的提示信息。该提示信息也可以理解为相机应用由大小窗录制模式变化为预览模式的模式变化信息。大小窗录制的相关描述可以参考前文,在此不再赘述。预览模式可以指的是预览大窗处于录像预览状态,且预览小窗并未显示。
相应的,编码控制模块可以接收相机模式模块发送的结束大窗录制和小窗录制的提示信息。
S802:编码控制模块向第一编码器发送停止第一编码器的请求。
可理解,编码控制模块接收相机模式模块发送的结束大窗录制和小窗录制的提示信息之后,可以向第一编码器发送停止第一编码器的请求。具体地,编码控制模块可以将该停止第一编码器的请求发送给媒体FWK,然后,媒体FWK再将该停止第一编码器的请求经由Vendor 仓发送给第一编码器。
示例性的,该停止第二编码器的请求可以包括:codec-1.stop。
相应的,第一编码器可以接收编码控制模块发送的停止第一编码器的请求。
S803:第一编码器停止。
可理解,第一编码器接收编码控制模块发送的停止第一编码器的请求之后,可以停止。
S804:编码控制模块向第二编码器发送停止第二编码器的请求。
可理解,步骤S804的相关描述可以参考步骤S702,在此不再赘述。可理解,本申请对电子设备执行步骤S802和步骤S804的先后顺序不作限制。
S805:第二编码器停止。
可理解,第二编码器接收编码控制模块发送的停止第二编码器的请求之后,可以停止。
S806:编码控制模块向存储模块发送大小窗录制结束信息。
在本申请的一些实施例中,大小窗录制结束信息可以包括大窗视频文件的文件名和小窗视频文件的文件名。
在本申请的一些实施例中,大小窗录制结束信息还可以包括大窗视频文件的时间戳和小窗视频文件的时间戳。
在本申请的一些实施例中,大小窗录制结束信息可以为结束符。当然,大小窗录制结束信息还可以表现为其他形式,例如,文字、字符、数字等,本申请对此不作限制。
相应的,存储模块可以接收编码控制模块发送的大小窗录制结束信息。
S807:存储模块分别保存大窗视频文件和小窗视频文件中的视频,并基于当前的系统时间重新创建大窗视频文件和小窗视频文件。
可理解,存储模块接收编码控制模块发送的大小窗录制结束信息之后,可以将大窗视频文件和小窗视频文件中的视频保存到存储器中,并基于当前的系统时间重新创建大窗视频文件和小窗视频文件。其中,重新创建的小窗视频文件的时间戳为第三时刻。
在本申请的一些实施例中,存储模块保存大窗视频文件中的视频时,可以将大窗视频文件的时间戳更新为第四时刻。在本申请的一些实施例中,大窗视频文件的时间戳与大窗视频文件中的视频的时间戳相同。第四时刻为当前的系统时间。
可理解,第四时刻晚于第三时刻。
在本申请的一些实施例中,第四时刻为time-4。
示例性的,在大小窗录制模式下,用户可以触发结束小窗录制后再触发开启小窗录制。一旦结束大窗和小窗的录制,存储模块可以保存大窗视频文件和重新创建的小窗视频文件,其文件名与时间戳的对应关系如表2所示:
表2
文件名 | 时间戳 |
video-1 | time-4 |
video-3 | time-3 |
示例性的,在大小窗录制模式下,并不存在单独触发结束大窗录制的情况。一旦结束小窗和大窗的录制,存储模块可以保存大窗视频文件和小窗视频文件,其文件名与时间戳的对应关系可参考表3,在此不再赘述。
表3
文件名 | 时间戳 |
video-1 | time-4 |
video-2 | time-2 |
可理解,电子设备可以同时结束大窗录制和小窗录制,并保存录制所得的视频。用户可以在图库应用中查看录制所得的多个视频。示例性的,电子设备可以显示如图2N的(a)所示的用户界面1401。用户界面1401可以包括视频14011和视频14012。可理解,视频14011为大窗录制所得的视频(即原始视频),视频14012为小窗录制所得的视频(即特写视频)。视频14011的时长和视频14012的时长均为3s。即视频14011的时长比视频14012的时长相同。
(二)在预览小窗结束录制且预览大窗正常录制的情况下,结束大窗录制。(如图9所示)
如图7所示的流程图,电子设备结束预览小窗的录制之后,可以继续进行预览大窗的录制。在这种情况下,用户可以触发结束预览大窗的录制。
S900:相机模式模块接收到结束大窗录制的请求。
在预览小窗结束录制且预览大窗正常录制的情况下,用户可以通过点击预览大窗对应的录像结束控件等方式来触发结束大窗视频录制。相应的,相机模式模块可以接收到结束大窗录制的请求。
示例性的,电子设备可以显示如图2J所示的用户界面1000。用户界面1000中的预览小窗501包括录像结束控件1003。电子设备可以检测到作用于录像结束控件1003上的用户操作,响应于该用户操作,电子设备可以结束预览小窗501的录制,并显示如图2P所示的用户界面1600。用户界面1600可以包括录像结束控件1004。用户可以点击录像结束控件1004,电子设备中的相机模式模块可以接收到结束大窗录制的请求。响应于该结束大窗录制的请求,电子设备可以结束预览窗201的录制。
S901:相机模式模块向编码控制模块发送结束大窗录制的提示信息。
相机模式模块接收到结束大窗录制的请求之后,可以向编码控制模块发送结束大窗录制的提示信息。该提示信息也可以理解为相机应用由大窗录制模式变化为预览模式的模式变化信息。
相应的,编码控制模块可以接收相机模式模块发送的结束大窗录制的提示信息。
S902:编码控制模块向第一编码器发送停止第一编码器的请求。
可理解,步骤S902的相关描述可以参考步骤S802,在此不再赘述。
S903:第一编码器停止。
可理解,步骤S903的相关描述可以参考步骤S803,在此不再赘述。
S904:编码控制模块向存储模块发送大窗录制结束信息。
在本申请的一些实施例中,大窗录制结束信息可以包括大窗视频文件的文件名。
在本申请的一些实施例中,大窗录制结束信息还可以包括大窗视频文件的时间戳。
在本申请的一些实施例中,大窗录制结束信息可以为结束符。当然,大窗录制结束信息还可以表现为其他形式,例如,文字、字符、数字等,本申请对此不作限制。
相应的,存储模块可以接收编码控制模块发送的大窗录制结束信息。
S905:存储模块保存大窗视频文件中的视频,并基于当前的系统时间重新创建大窗视频文件。
可理解,存储模块接收编码控制模块发送的大窗录制结束信息之后,可以将大窗视频文件中的视频保存到存储器中,并基于当前的系统时间重新创建大窗视频文件。
在本申请的一些实施例中,存储模块保存大窗视频文件中的视频时,可以将大窗视频文件的时间戳更新为当前的系统时间。
可理解,电子设备可以先结束小窗录制并保存录制所得的视频,之后再结束大窗录制并保存录制所得的视频。用户可以在图库应用中查看录制所得的多个视频。示例性的,电子设备可以显示如图2N的(b)所示的用户界面1402。用户界面1402可以包括视频14021和视频14022。可理解,视频14021为大窗录制所得的视频(即原始视频),视频14022为小窗录制所得的视频(即特写视频)。视频14021的时长为8s,视频14022的时长为5s。即视频14021的时长比视频14022的时长要长。
下面介绍本申请实施例提供的一种拍摄方法。
请参阅图10,图10为本申请实施例提供的一种拍摄方法的流程图。该拍摄方法可以应用与具有摄像头和显示屏的电子设备。该拍摄方法可以包括但不限于以下步骤:
S1001:电子设备显示第一界面。其中,第一界面包括第一窗口,第一窗口中显示摄像头采集的图像,第一窗口中显示的图像包括一个或多个第一对象。
电子设备可以在显示屏上显示第一界面。其中,第一界面可以包括第一窗口。第一窗口中可以显示摄像头采集的图像。第一窗口中显示的图像可以包括一个或多个第一对象。
可理解,第一界面可以为电子设备进入追焦模式前所显示的界面,也可以为电子设备进入追焦模式后所显示的界面。示例性的,第一界面可以为图2C所示的用户界面300。示例性的,第一界面可以为图2D所示的用户界面400。
在一种可能的实现方式中,第一对象可以为人物。示例性的,如图2D所示,第一窗口中显示的图像所包括的一个或多个第一对象可以为预览窗201中所显示的人物R1、人物R2 和人物R3。在又一种可能的实现方式中,第一对象还可以为动物、植物等,本申请对第一对象的具体类型不作限制。
可理解,电子设备可以通过检测算法(例如,人体检测算法)来识别第一窗口中显示的图像所包括的第一对象。检测算法的相关描述可以参考相关技术文档,在此不展开说明。
可理解,第一窗口可以为上述实施例中的预览大窗/大窗。示例性的,第一窗口可以为预览窗201。
S1002:电子设备在一个或多个第一对象中选择第二对象。
用户可以通过点击、语音、手势等方式触发电子设备选择第二对象。具体地,电子设备可以接收到选择第二对象的请求,响应于该请求,电子设备可以在第一窗口中显示的图像所包括的一个或多个第一对象中选择第二对象。电子设备可以将选择的第二对象作为追焦对象。
示例性的,如图2D所示,用户可以点击人体框403,相应的,电子设备可以接收到选择人物R2的请求,响应于该请求,电子设备可以在预览窗201中显示的图像所包括的人物R1、人物R2和人物R3中选择人物R2,并将其作为追焦对象。
S1003:在显示屏中显示第一窗口的同时,电子设备还显示第二窗口,第二窗口中显示的图像包括第二对象。
可理解,电子设备在显示屏中显示第一窗口的同时,还可以在显示屏中显示第二窗口。其中,第二窗口显示的图像可以包括第二对象。
在一种可能的实现方式中,第一窗口与第二窗口可以分屏显示。
在又一种可能的实现方式中,第二窗口可以显示在第一窗口之上,但不完全覆盖第一窗口。示例性的,如图2E所示,预览小窗501显示在预览窗201上,但预览小窗501不完全覆盖预览窗201。
需要说明的是,第二窗口可以为预览小窗/小窗。示例性的,第二窗口可以为预览小窗501。
S1004:电子设备通过第一编码器和第二编码器,录制第一窗口中的图像以生成第一视频,录制第二窗口中的图像以生成第二视频。
可理解,电子设备可以通过第一编码器和第二编码器来对第一窗口和第二窗口中的画面进行录制。电子设备可以通过第一编码器录制第一窗口中的图像以生成第一视频,以及通过第二编码器录制第二窗口中的图像以生成第二视频。
可理解,第一视频可以为原始视频,第二视频可以为第二对象的特写视频。示例性的,第一视频可以为图2N中的a所示的视频14011,第二视频可以为图2N中的a所示的视频14012。示例性的,第一视频可以为图2N中的b所示的视频14021,第二视频可以为图2N中的b所示的视频14022。
图11是本申请实施例提供的电子设备的硬件结构示意图。
电子设备可以包括处理器110,外部存储器接口120,内部存储器121,音频模块130,扬声器130A,受话器130B,麦克风130C,耳机接口130D,显示屏140,摄像头150,触摸传感器160。
本发明实施例示意的结构并不构成对电子设备的具体限定。在本申请另一些实施例中,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。本发明实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备的结构限定。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit, NPU)等。处理器110中还可以设置存储器,用于存储指令和数据。
电子设备通过GPU,显示屏140,以及应用处理器等实现显示功能。
GPU为图像处理的微处理器,连接显示屏140和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。显示屏140用于显示图像,视频等。在一些实施例中,电子设备可以包括1个或N 个显示屏140,N为大于1的正整数。
在本申请实施例中,电子设备显示摄像头采集的原始图像、经过追焦确定的主角的特写图像,以及图2A-图2X所示的用户界面的能力,依赖于上述GPU,显示屏140,以及应用处理器提供的显示功能。
电子设备可以通过ISP,摄像头150,视频编解码器,GPU,显示屏140以及应用处理器等实现拍摄功能。
摄像头150用于捕获静态图像或视频。ISP用于处理摄像头150反馈的数据。光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。电子设备可以包括1个或N个摄像头150,N为大于1的正整数。视频编解码器用于对数字视频压缩或解压缩。电子设备可以支持一种或多种视频编解码器。这样,电子设备可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
在本申请实施例中,电子设备实施本申请实施例提供的拍摄方法,首先依赖于ISP,摄像头150采集的图像,其次还依赖于视频编解码器,GPU提供的图像计算与处理能力。
内部存储器121可以包括一个或多个随机存取存储器(random access memory,RAM) 和一个或多个非易失性存储器(non-volatile memory,NVM)。随机存取存储器可以由处理器 110直接进行读写,可以用于存储操作系统或其他正在运行中的程序的可执行程序(例如机器指令),还可以用于存储用户及应用程序的数据等。非易失性存储器也可以存储可执行程序和存储用户及应用程序的数据等,可以提前加载到随机存取存储器中,用于处理器110直接进行读写。
在本申请实施例中,实现本申请实施例所述的拍摄方法的代码可存储在非易失性存储器上。在运行相机应用时,电子设备可将非易失性存储器中存储的可执行代码加载到随机存取存储器。
外部存储器接口120可以用于连接外部的非易失性存储器,实现扩展电子设备的存储能力。
电子设备可以通过音频模块130,扬声器130A,受话器130B,麦克风130C,耳机接口130D,以及应用处理器等实现音频功能。
音频模块130用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。扬声器130A,也称“喇叭”,用于将音频电信号转换为声音信号。受话器 130B,也称“听筒”,用于将音频电信号转换成声音信号。麦克风130C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。耳机接口130D用于连接有线耳机。
在本申请实施例中,电子设备在启用摄像头采集图像的过程中,可以同时启用麦克风 130C采集声音信号,并将声音信号转换为电信号存储下来。这样,用户可以得到有声视频。
触摸传感器160,也称“触控器件”。触摸传感器160可以设置于显示屏140,由触摸传感器160与显示屏140组成触摸屏,也称“触控屏”。触摸传感器160用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏140提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器 160也可以设置于电子设备的表面,与显示屏140所处的位置不同。
在本申请实施例中,电子设备可利用触摸传感器160检测用户作用于显示屏140上的点击、滑动等操作,以实现图2A-图2X所示的拍摄方法。
以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
Claims (22)
1.一种拍摄方法,应用于电子设备,所述电子设备具有摄像头、显示屏、第一编码器和第二编码器,其特征在于,所述方法包括:
显示第一界面,所述第一界面包括第一窗口,所述第一窗口中显示所述摄像头采集的图像,所述第一窗口中显示的图像包括一个或多个第一对象;
在所述一个或多个第一对象中选择第二对象;
在所述显示屏中显示所述第一窗口的同时,还显示第二窗口,所述第二窗口中显示的图像包括所述第二对象;
通过所述第一编码器和所述第二编码器,录制所述第一窗口中的图像以生成第一视频,录制所述第二窗口中的图像以生成第二视频。
2.如权利要求1所述的方法,其特征在于,所述显示第二窗口之后,所述方法还包括:
接收到开始录制的操作,启动所述第一编码器,启动所述第二编码器。
3.如权利要求1所述的方法,其特征在于,所述在所述一个或多个第一对象中选择第二对象之前,所述方法还包括:接收到开始录制的操作,启动所述第一编码器;
所述在所述一个或多个第一对象中选择第二对象之后,所述方法还包括:启动所述第二编码器。
4.如权利要求1-3任一项所述的方法,其特征在于,所述第一界面还包括第一控件,所述第一控件用于启动追焦模式;所述显示第一界面之后,所述方法还包括:
接收到作用于所述第一控件上的操作,创建所述第一编码器,创建所述第二编码器。
5.如权利要求1-4任一项所述的方法,其特征在于,所述通过所述第一编码器和所述第二编码器,录制所述第一窗口中的图像以生成第一视频,录制所述第二窗口中的图像以生成第二视频,具体包括:
在启动所述第一编码器之后,通过所述第一编码器录制所述第一窗口中的图像以生成所述第一视频,以及在启动所述第二编码器之后,通过所述第二编码器录制所述第二窗口中的图像以生成所述第二视频。
6.如权利要求1-5任一项所述的方法,其特征在于,所述通过所述第一编码器和所述第二编码器,录制所述第一窗口中的图像以生成第一视频,录制所述第二窗口中的图像以生成第二视频之后,所述方法还包括:
接收到结束录制的操作,停止所述第一编码器的编码和所述第二编码器的编码,并生成所述第一视频和所述第二视频;所述第一视频的结束录制时刻与所述第二视频的结束录制时刻是相同的。
7.如权利要求5所述的方法,其特征在于,所述在启动所述第二编码器之后,通过所述第二编码器录制所述第二窗口中的图像以生成所述第二视频之后,所述方法还包括:
接收到作用于所述第二窗口的结束录制操作,关闭所述第二窗口,停止所述第二编码器的编码,并生成所述第二视频。
8.如权利要求7所述的方法,其特征在于,所述生成所述第二视频之后,所述方法还包括:
接收到作用于所述第一窗口的结束录制的操作,停止所述第一编码器的编码,并生成所述第一视频;所述第一视频的结束录制时刻晚于所述第二视频的结束录制时刻。
9.如权利要求7所述的方法,其特征在于,所述生成所述第二视频之后,所述方法还包括:
在所述一个或多个第一对象中选择第三对象,所述第三对象与所述第二对象相同或不同;
在所述显示屏中显示所述第一窗口的同时,重新显示所述第二窗口;
启动所述第二编码器,并通过所述第二编码器录制所述第二窗口中的图像以生成第三视频。
10.如权利要求9所述的方法,其特征在于,所述通过所述第二编码器录制所述第二窗口中的图像以生成第三视频之后,所述方法还包括:
接收到结束录制的操作,停止所述第一编码器的编码和所述第二编码器的编码,并生成所述第一视频和所述第三视频;所述第一视频的开始录制时刻早于所述第三视频的开始录制时刻,所述第一视频的结束录制时刻与所述第三视频的结束录制时刻是相同的。
11.如权利要求1-10任一项所述的方法,其特征在于,所述一个或多个第一对象上显示有选择框,所述在所述一个或多个第一对象中选择第二对象,具体包括:接收到作用于第一选择框上的操作,将所述第一选择框对应的第一对象确定为所述第二对象。
12.如权利要求1-11任一项所述的方法,其特征在于,所述第二窗口中显示的图像包括所述第二对象,具体包括:所述第二窗口中显示所述第二对象的特写对象。
13.如权利要求1-12任一项所述的方法,其特征在于,在所述录制过程中,所述方法还包括:
在所述一个或多个第一对象中选择第四对象,所述第四对象与所述第二对象不同;
所述第二窗口中显示所述第四对象的特写图像。
14.如权利要求1-13任一项所述的方法,其特征在于,所述电子设备包括相机HAL;所述通过所述第一编码器和所述第二编码器,录制所述第一窗口中的图像以生成第一视频,录制所述第二窗口中的图像以生成第二视频,具体包括:
所述相机HAL基于与第一路数据流匹配的图像效果对原始图像数据进行处理,得到第一图像数据,以及基于与第二路数据流匹配的图像效果对所述原始图像数据进行处理,得到第二图像数据;所述第一路数据流为所述第一窗口对应的数据流;所述第二路数据流为所述第二窗口对应的数据流;
所述相机HAL将所述第一图像数据发送给所述第一编码器,将所述第二图像数据发送给所述第二编码器;
所述第一编码器对所述第一图像数据进行编码,得到第一编码图像数据,并将所述第一编码图像数据写入到第一视频文件中;所述第一视频文件用于存储所述第一视频;
所述第二编码器对所述第二图像数据进行编码,得到第二编码图像数据,并将所述第二编码图像数据写入到第二视频文件中;所述第二视频文件用于存储所述第二视频。
15.如权利要求7-10任一项所述的方法,其特征在于,所述电子设备包括相机模式模块、编码控制模块和存储模块;所述接收到作用于所述第二窗口的结束录制操作之后,所述方法还包括:所述相机模式模块向所述编码控制模块发送第一提示信息;所述第一提示信息用于提示所述第二窗口录制结束;
所述停止所述第二编码器的编码,并生成所述第二视频,具体包括:
所述编码控制模块向所述第二编码器发送停止请求;
所述第二编码器停止对第二路数据流中的图像数据的编码;
所述编码控制模块向所述存储模块发送第一结束信息;所述第一结束信息用于提示所述第二窗口录制结束;
所述存储模块保存第二视频文件中的所述第二视频,并基于当前的系统时间生成第三视频文件;所述第三视频文件用于存储对所述第二路数据流中的图像数据进行编码后所得的视频。
16.如权利要求9或10所述的方法,其特征在于,所述电子设备包括相机模式模块、编码控制模块和相机HAL;
所述在所述一个或多个第一对象中选择第三对象之后,所述方法还包括:所述相机模式模块向所述编码控制模块发送第二提示信息;所述第二提示信息用于提示所述第二窗口重新开始录制;
所述启动所述第二编码器,具体包括:所述编码控制模块向所述第二编码器发送启动请求;所述第二编码器启动;
所述通过所述第二编码器录制所述第二窗口中的图像以生成第三视频,具体包括:
所述相机HAL基于与第二路数据流匹配的图像效果对原始图像数据进行处理,得到第二图像数据,并将所述第二图像数据发送给所述第二编码器;
所述第二编码器对所述第二图像数据进行编码,得到第二编码图像数据,并将所述第二编码图像数据写入到第三视频文件中;所述第三视频文件用于存储所述第三视频;所述第三视频文件的生成时间晚于用于存储所述第二视频的文件的生成时间。
17.如权利要求6所述的方法,其特征在于,所述电子设备包括相机模式模块、编码控制模块和存储模块;所述接收到结束录制的操作之后,所述方法还包括:所述相机模式模块向所述编码控制模块发送第三提示信息;所述第三提示信息用于提示所述第一窗口和所述第二窗口录制结束;
所述停止所述第一编码器的编码和所述第二编码器的编码,并生成所述第一视频和所述第二视频,具体包括:
所述编码控制模块向所述第一编码器发送停止请求,向所述第二编码器发送停止请求;
所述第一编码器停止对第一路数据流中的图像数据的编码;
所述第二编码器停止对第二路数据流中的图像数据的编码;
所述编码控制模块向所述存储模块发送第二结束信息;所述第二结束信息用于提示所述第一窗口和所述第二窗口录制结束;
所述存储模块保存第一视频文件中的所述第一视频和第二视频文件中的所述第二视频,并基于当前的系统时间生成第四视频文件和第三视频文件;所述第四视频文件用于存储对所述第一路数据流中的图像数据进行编码后所得的视频;所述第三视频文件用于存储对所述第二路数据流中的图像数据进行编码后所得的视频。
18.如权利要求16所述的方法,其特征在于,在保存所述第二视频文件中的所述第二视频之前,所述方法还包括:所述存储模块将所述第二视频文件的时间戳更新为当前的系统时间。
19.如权利要求4所述的方法,其特征在于,所述电子设备包括编码控制模块和编码器;所述创建所述第一编码器,创建所述第二编码器,具体包括:
所述编码控制模块基于配流信息和文件信息,确定第一编码参数和第二编码参数;所述第一编码参数为所述第一编码器对应的编码器参数;所述第一编码器与第一路数据流和第一视频文件关联;所述第二编码参数为所述第二编码器对应的编码器参数;所述第二编码器与第二路数据流和第二视频文件关联;
所述编码控制模块将所述第一编码参数和所述第二编码参数发送给所述编码器;
所述编码器基于所述第一编码参数创建所述第一编码器,以及基于所述第二编码参数创建所述第二编码器。
20.如权利要求4或19所述的方法,其特征在于,所述电子设备包括流管理模块、存储模块、编码控制模块和相机HAL;所述接收到作用于所述第一控件上的操作之后,所述方法还包括:
所述流管理模块配置第一路数据流和第二路数据流,并将配流信息所述发送给所述编码控制模块;所述存储模块基于当前的系统时间分别生成第一视频文件和第二视频文件,并将文件信息发送给所述编码控制模块;所述文件信息包括所述第一视频文件的文件标识和所述第二视频文件的文件标识;
所述流管理模块将所述配流信息发送给所述相机HAL;
所述相机HAL基于所述配流信息确定与所述第一路数据流匹配的图像效果,以及与所述第二路数据流匹配的图像效果。
21.一种电子设备,包括摄像头、显示屏、存储器,以及一个或多个处理器,其特征在于,所述存储器用于存储计算机程序;所述处理器用于调用所述计算机程序,使得所述电子设备执行权利要求1-20中任一项所述的方法。
22.一种计算机存储介质,其特征在于,包括:计算机指令;当所述计算机指令在电子设备上运行时,使得所述电子设备执行权利要求1-20中任一项所述的方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP23814884.5A EP4401414A1 (en) | 2022-05-30 | 2023-05-05 | Photographing method and related device |
PCT/CN2023/092384 WO2023231698A1 (zh) | 2022-05-30 | 2023-05-05 | 一种拍摄方法及相关设备 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2022106034684 | 2022-05-30 | ||
CN202210603468 | 2022-05-30 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117177066A true CN117177066A (zh) | 2023-12-05 |
CN117177066B CN117177066B (zh) | 2024-09-20 |
Family
ID=88934196
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210956581.0A Active CN117177066B (zh) | 2022-05-30 | 2022-08-10 | 一种拍摄方法及相关设备 |
Country Status (3)
Country | Link |
---|---|
EP (1) | EP4401414A1 (zh) |
CN (1) | CN117177066B (zh) |
WO (1) | WO2023231698A1 (zh) |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1081956A1 (en) * | 1999-08-16 | 2001-03-07 | University of Washington | Interactive video object processing environment having concurrently active subordinate windows |
CN105491437A (zh) * | 2014-10-01 | 2016-04-13 | 索尼公司 | 手语显示的选择性启用 |
CN105763926A (zh) * | 2014-12-18 | 2016-07-13 | 中兴通讯股份有限公司 | 屏幕录制的方法及装置 |
CN111093026A (zh) * | 2019-12-30 | 2020-05-01 | 维沃移动通信(杭州)有限公司 | 视频处理方法、电子设备及计算机可读存储介质 |
CN112216309A (zh) * | 2015-04-29 | 2021-01-12 | 通腾科技股份有限公司 | 数据处理系统 |
CN112954219A (zh) * | 2019-03-18 | 2021-06-11 | 荣耀终端有限公司 | 一种多路录像方法及设备 |
CN113572948A (zh) * | 2020-04-29 | 2021-10-29 | 华为技术有限公司 | 视频处理方法和视频处理装置 |
WO2021227693A1 (zh) * | 2020-05-15 | 2021-11-18 | 华为技术有限公司 | 拍摄方法、装置、移动终端及芯片系统 |
CN113923391A (zh) * | 2021-09-08 | 2022-01-11 | 荣耀终端有限公司 | 视频处理的方法、设备、存储介质和程序产品 |
CN114125284A (zh) * | 2021-11-18 | 2022-03-01 | Oppo广东移动通信有限公司 | 图像处理方法、电子设备及存储介质 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130155308A1 (en) * | 2011-12-20 | 2013-06-20 | Qualcomm Incorporated | Method and apparatus to enhance details in an image |
CN113473007B (zh) * | 2021-06-24 | 2023-04-18 | 维沃移动通信(杭州)有限公司 | 拍摄方法及装置 |
CN113766129B (zh) * | 2021-09-13 | 2023-12-05 | 维沃移动通信(杭州)有限公司 | 录像方法、装置、电子设备及介质 |
CN113873166A (zh) * | 2021-10-26 | 2021-12-31 | 维沃移动通信有限公司 | 视频拍摄方法、装置、电子设备和可读存储介质 |
-
2022
- 2022-08-10 CN CN202210956581.0A patent/CN117177066B/zh active Active
-
2023
- 2023-05-05 EP EP23814884.5A patent/EP4401414A1/en active Pending
- 2023-05-05 WO PCT/CN2023/092384 patent/WO2023231698A1/zh active Application Filing
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1081956A1 (en) * | 1999-08-16 | 2001-03-07 | University of Washington | Interactive video object processing environment having concurrently active subordinate windows |
CN105491437A (zh) * | 2014-10-01 | 2016-04-13 | 索尼公司 | 手语显示的选择性启用 |
CN105763926A (zh) * | 2014-12-18 | 2016-07-13 | 中兴通讯股份有限公司 | 屏幕录制的方法及装置 |
CN112216309A (zh) * | 2015-04-29 | 2021-01-12 | 通腾科技股份有限公司 | 数据处理系统 |
CN112954219A (zh) * | 2019-03-18 | 2021-06-11 | 荣耀终端有限公司 | 一种多路录像方法及设备 |
CN112954218A (zh) * | 2019-03-18 | 2021-06-11 | 荣耀终端有限公司 | 一种多路录像方法及设备 |
CN111093026A (zh) * | 2019-12-30 | 2020-05-01 | 维沃移动通信(杭州)有限公司 | 视频处理方法、电子设备及计算机可读存储介质 |
CN113572948A (zh) * | 2020-04-29 | 2021-10-29 | 华为技术有限公司 | 视频处理方法和视频处理装置 |
WO2021227693A1 (zh) * | 2020-05-15 | 2021-11-18 | 华为技术有限公司 | 拍摄方法、装置、移动终端及芯片系统 |
CN113923391A (zh) * | 2021-09-08 | 2022-01-11 | 荣耀终端有限公司 | 视频处理的方法、设备、存储介质和程序产品 |
CN114125284A (zh) * | 2021-11-18 | 2022-03-01 | Oppo广东移动通信有限公司 | 图像处理方法、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
WO2023231698A1 (zh) | 2023-12-07 |
WO2023231698A9 (zh) | 2024-02-15 |
EP4401414A1 (en) | 2024-07-17 |
CN117177066B (zh) | 2024-09-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2021104508A1 (zh) | 一种视频拍摄方法与电子设备 | |
CN115002340B (zh) | 一种视频处理方法和电子设备 | |
EP4436198A1 (en) | Method for capturing images in video, and electronic device | |
CN114296949A (zh) | 一种虚拟现实设备及高清晰度截屏方法 | |
EP4171002A1 (en) | Method for image snapshot in video recording, and electronic device | |
CN115689963A (zh) | 一种图像处理方法及电子设备 | |
CN115567633A (zh) | 拍摄方法、介质、程序产品及电子设备 | |
CN115390957A (zh) | 一种应用程序动效衔接的方法及装置 | |
CN117177066B (zh) | 一种拍摄方法及相关设备 | |
US20240267615A1 (en) | Video processing method and electronic device | |
US20240171701A1 (en) | Image obtaining method and electronic device | |
US20240064397A1 (en) | Video Shooting Method and Electronic Device | |
CN111367598B (zh) | 动作指令的处理方法、装置、电子设备及计算机可读存储介质 | |
CN115484387A (zh) | 一种提示方法及电子设备 | |
WO2023231696A1 (zh) | 一种拍摄方法及相关设备 | |
CN116033261B (zh) | 一种视频处理方法、电子设备、存储介质和芯片 | |
CN116828099B (zh) | 一种拍摄方法、介质和电子设备 | |
WO2023231616A9 (zh) | 一种拍摄方法和电子设备 | |
US20240040235A1 (en) | Video shooting method and electronic device | |
KR101722681B1 (ko) | 동영상 처리 장치, 및 방법 | |
CN117221708A (zh) | 一种拍摄方法及相关电子设备 | |
CN117221743A (zh) | 一种拍摄方法和电子设备 | |
CN117459825A (zh) | 一种拍摄方法和电子设备 | |
CN117221709A (zh) | 一种拍摄方法及相关电子设备 | |
CN115408071A (zh) | 一种动效计算方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant |