WO2023231696A1 - 一种拍摄方法及相关设备 - Google Patents

一种拍摄方法及相关设备 Download PDF

Info

Publication number
WO2023231696A1
WO2023231696A1 PCT/CN2023/092371 CN2023092371W WO2023231696A1 WO 2023231696 A1 WO2023231696 A1 WO 2023231696A1 CN 2023092371 W CN2023092371 W CN 2023092371W WO 2023231696 A1 WO2023231696 A1 WO 2023231696A1
Authority
WO
WIPO (PCT)
Prior art keywords
window
electronic device
video
small window
recording
Prior art date
Application number
PCT/CN2023/092371
Other languages
English (en)
French (fr)
Inventor
王拣贤
Original Assignee
荣耀终端有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 荣耀终端有限公司 filed Critical 荣耀终端有限公司
Priority to EP23814882.9A priority Critical patent/EP4395354A1/en
Publication of WO2023231696A1 publication Critical patent/WO2023231696A1/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/675Focus control based on electronic image sensor signals comprising setting of focusing regions

Definitions

  • the first data stream is a large window data stream mentioned below
  • the second data stream is a small window data stream mentioned below.
  • the mark can be a tracking box.
  • the tracking box 311 and the tracking box 312 shown in FIG. 2C can also have other forms of expression, which is not limited by this application.
  • markers can appear as triangles, arrows, and other patterns, and the color of markers can also be set to other colors.
  • the shooting method may further include: the electronic device may detect a fourth operation acting on a mark; in response to the first In the fourth operation, the second window displays a close-up image of the second subject, and the second subject is the subject corresponding to the mark of the fourth operation.
  • the user can end the recording of the second window by triggering the fourth control on the second window. It is understandable that after the recording of the second window ends, the recording of the first window will not be affected, and the electronic device can continue the recording of the first window (as shown in Figure 3E).
  • the second window includes a fourth control.
  • the processor after being used to record the pictures in the first window and the second window respectively, can also be used to: respond to the operation on the fourth control, stop recording the pictures in the second window, and save Second video.
  • the first encoder is used to encode the image data in the first data stream
  • the second encoder is used to encode the image data in the second data stream.
  • the first window video file is used to store the video obtained by encoding the image data in the first data stream
  • the second window video file is used to store the video obtained by encoding the image data in the second data stream.
  • the first image effect is an image effect corresponding to the image data in the first channel of data stream
  • the second image effect is an image effect corresponding to the second channel of image data.
  • the electronic device in the embodiment of the present application can mark a tracking box corresponding to the person when it recognizes two or more people; the electronic device can also mark a tracking box corresponding to the single person when it recognizes a single person. , or the tracking box may not be marked, there is no restriction here.
  • Zoom button 310 is used to adjust the zoom of the preview interface.
  • the zoom button provides wide-angle, 1X and 2X zoom functions.
  • the zoom button can be used to resize the preview scene in the large window, and the preview scene in the small window can follow the large window The scaling is performed proportionally.
  • the electronic device is in the main interface shown in a of Figure 2A.
  • the electronic device detects the user's operation of opening the camera application 401, the electronic device can enter the photo preview interface shown in b of Figure 2A.
  • the photo-taking preview interface may include a preview screen and a shooting mode selection button.
  • the preview screen can display the scene captured by the camera of the electronic device in real time.
  • the shooting mode selection buttons include but are not limited to: "Portrait” button, "Photography” button, "Video” button 402, "Professional” button and "More” button 403.
  • the large window of the preview interface includes male characters and female characters
  • the focus object displayed in the small window is the male character.
  • the electronic device detects a click operation on the tracking box for a female character
  • the focus of the tracking in the preview screen of the small window gradually moves from the male character to the female character.
  • the small window originally displays a male character in the center.
  • the cropping ratio of the preview screen of the small window and the preview screen of the large window remains unchanged, but the preview screen of the small window will move closer according to the original cropping ratio. Crop in the direction of the female figure.
  • the female character is located to the left of the male character.
  • FIG. 2D shows a schematic diagram of the interface for adjusting small window specifications provided by the embodiment of the present application.
  • the small window may include a functional area with a small window closing button 306 and a second horizontal and vertical screen switching button 305 and a non-functional area that displays a preview screen of the focus object.
  • the user can press any position of the non-functional area in the small window with two fingers and adjust the distance between the two fingers.
  • the interface shown in b of Figure 2D is entered. Users can control the size of the small window by adjusting the distance between their two fingers.
  • the default style of a small window can be shown in interface d in Figure 2F.
  • the preview direction of the large window is inconsistent with the preview direction of the small window. For example, when the large window is previewed in horizontal screen, the small window is previewed in vertical screen. ; When the large window is previewed vertically, the small window is previewed horizontally.
  • the preview direction of the large window is consistent with the preview direction of the small window. For example, when the large window is previewed horizontally, the small window is also previewed horizontally; when the large window is previewed vertically, the small window is also previewed vertically. screen preview.
  • the embodiment of this application does not limit the default setting style of the small window.
  • the embodiment of the present application also provides a scene for adjusting the horizontal and vertical screen of a small window when there is no small window, which is exemplary.
  • interface a of Figure 2I when the electronic device enters the protagonist mode or closes the small window preview, the preview interface does not need to include the small window.
  • the icon of the first horizontal and vertical screen switching button 304 is displayed in the style of the horizontal screen preview. If the electronic device receives a click operation on the tracking frame of the focus object, the electronic device can start the small window horizontal screen preview. If the electronic device receives a click operation on the first horizontal and vertical screen switching button 304, it can enter the interface shown in b in Figure 2I.
  • the small window will not be included in the preview interface. If the electronic device does not recognize an object that can be focused and there is no person in the preview screen, the first horizontal and vertical screen switching button can be hidden. When the electronic device recognizes the focus-trackable object and marks the tracking frame, the first horizontal and vertical screen switching button can be displayed.
  • the male character i.e., the focus target
  • the background such as the female character, trees, and road signs
  • the preview image of the small window can display the preview image of the background where the focus object was before it was lost.
  • the small window when the electronic device recognizes the focus object before it is lost, the small window can automatically restore and display the focus object.
  • the electronic device recognizes multiple focusable objects within a period of time after the small window is closed, wherein, based on face recognition technology, the electronic device can determine the current Whether the focus-tracking object before loss is included among the multiple focus-trackable objects. If the focus object before it is lost is included, the small window can automatically preview the focus object. If it is not included, the electronic device can perform the above method of clicking the tracking box to reselect the focus object.
  • Scenario 3 For example, in interface a of Figure 2N, the male character in the large window is lost, and the loss time does not exceed 5 seconds. At this time, the small window appears masked, and the male character in the small window does not exist.
  • the large window of the electronic device starts recording video, and the recording time is displayed in the recording screen of the large window.
  • the recording time during recording may include but is not limited to a combination of dots and time.
  • a small window displays a preview of the masked layer status. It is understandable that the small window in the masked state can still dynamically display the picture at the corresponding position in the large window, but the small window is only in preview mode and cannot record the picture or save the video.
  • the electronic device can also adjust the display position of the small window.
  • the large window can display the image acquired by the camera in real time
  • the small window can display the image of the focus object in real time, but the electronic device will not save the images displayed in the large window and the small window.
  • interface a in Figure 3L may be an interface entered when the electronic device detects a click operation on the pause recording button in the large window, and the large window and the small window are in a recording pause state at the same time.
  • the electronic device can be in a preview state, that is, the large window and the small window can continue to track the preview of the focus object, but no recording is performed.
  • the electronic device may not be able to detect the focus object, as shown in b in Figure 3L.
  • the electronic device does not recognize the focus object, it can enter interface b in Figure 3L.
  • the small window in the b interface of Figure 3L automatically displays a masked state.
  • the masked state can prompt the user that the focus tracking object is lost, and the electronic device needs to retrieve the focus tracking object or reselect the focus tracking object to resume recording.
  • the click operation of the female character tracking box records the video of the female character in the small window of the electronic device 1603.
  • the electronic device detects a click operation on the end recording button, and the electronic device ends recording video 1603 and video 1604, and saves video 1603 and video 1602 successively.
  • videos recorded in a large window may include images and sounds
  • videos recorded in a small window may also include images and sounds.
  • the electronic device crops the recording image of the small window from the image of the large window to obtain the video of the small window, the electronic device can also synchronize the sound to the video of the small window.
  • the electronic device implements display functions through the GPU, display screen 194, and application processor.
  • the GPU is an image processing microprocessor and is connected to the display screen 194 and the application processor. GPUs are used to perform mathematical and geometric calculations for graphics rendering.
  • Processor 110 may include one or more GPUs that execute program instructions to generate or alter display information.
  • the acceleration sensor 180E can detect the acceleration of the electronic device in various directions (generally three axes). When the electronic device is stationary, the magnitude and direction of gravity can be detected. It can also be used to identify the posture of electronic devices and be used in horizontal and vertical screen switching, pedometer and other applications.
  • the application layer can include a series of application packages, such as camera, gallery, calendar, call, map, navigation, WLAN, Bluetooth, music, video, short message and other applications (also called applications).
  • the camera application can be used to obtain images and videos.
  • the user can trigger the startup of the camera application (for example, in the main interface shown in a of FIG. 2A , the user can trigger the electronic device to start the camera application by operating on the camera application 401).
  • the camera mode module can monitor the user operation and send message X1 to the camera. Message X1 is used to request to start the camera.
  • the encoding control module can receive the flow identification parameter information sent by the flow management module.
  • the storage module generates large window video files and small window video files based on the current system time. Among them, the timestamps of the large window video file and the small window video file are the first moment and the second moment respectively.
  • the initial state of the large window video file and the small window video file respectively generated by the storage module based on the current system time is empty (that is, there is no data).
  • the file information W1 may be video-1-time-1-video-2-time-2.
  • video-1 corresponds to time-1.
  • video-1 is the file name of the large window video file.
  • time-1 is the timestamp of the large window video file (i.e. the first moment).
  • video-2 corresponds to time-2.
  • video-2 is the file name of the small window video file.
  • time-2 is the timestamp of the small window video file (i.e. the second moment).
  • the camera HAL parses the stream identifier parameter information, obtains the first stream identifier and the second stream identifier, and matches the first stream identifier and the second stream identifier with the first image effect and the second image effect respectively.
  • the first image effect is an image effect corresponding to the image displayed in the large preview window
  • the second image effect is an image effect corresponding to the image displayed in the small preview window.
  • the stream management module sends the dynamic request D1 to the camera HAL.
  • Dynamic request D1 is used to request the return of large window data stream and small window data stream.
  • the camera HAL can receive the dynamic request D1 sent by the stream management module.
  • the camera HAL can return large window image data to the stream management module, and return small window image data to the stream management module.
  • the encoding control module can start the first encoder and the second encoder. Specifically, the encoding control module can send the encoder command to the media FWK, and then the media FWK sends the encoder command B1 to the encoder via the Vendor bin. After the encoder receives the encoder command B1, the corresponding encoder (ie, the first encoder and the second encoder) can be started according to the encoder command.
  • the image data encoded by the second encoder may constitute an image in a close-up video. Similar to the first encoder, for example, the frequency at which the second encoder writes the encoded image data into the small window video file may also be 30 times per second. Correspondingly, the frame rate of close-up video can be 30fps. Of course, the frequency at which the second encoder writes the encoded image data into the small window video file can also be other values, and this application does not limit this.
  • the small preview window ends recording, and the large preview window continues recording (as shown in Figure 9)
  • the stream management module and the encoding control module can receive the message X4 sent by the camera mode module.
  • the flow management module deletes the second flow identifier included in the dynamic request D1 and generates the dynamic request D2.
  • the recreated small window video file may be video-3.
  • the third time is time-3.
  • the large window image data can be obtained from the corresponding cache area (for example, the large window image cache area) of the stream management module, and then the large window image data can be encoded, and the encoded The image data is written to the large window video file in the storage module.
  • the image data encoded by the first encoder may constitute an image of the original video.
  • the third encoder obtains the small window image data after refocusing, encodes the small window image data after refocusing, and writes the encoded image data into the recreated small window video file.
  • the user can trigger the end of the recording of the large preview window and the small preview window (for example, as shown in a of Figure 3M, the user can trigger the electronic recording by clicking the end recording button 314.
  • the device ends recording of the large preview window and small preview window).
  • the camera mode module can monitor the user's corresponding trigger operation and notify other modules in the camera application.
  • the stream management module, storage module and encoding control module can receive the message X6 sent by the camera mode module.
  • the flow management module deletes the first flow identifier and the second flow identifier included in the dynamic request D3, and generates the dynamic request D4.
  • S1103 The storage module saves the large window video file and the recreated small window video file, and updates the timestamp of the large window video file to the fourth moment.
  • the fourth moment is the current system time.
  • the encoder command B4 may include: codec-1.stop and codec-2.stop.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)

Abstract

本申请提供了一种拍摄方法及相关设备。该拍摄方法可以应用于设置有摄像头的电子设备。根据该拍摄方法,多个拍摄对象同框的拍摄场景下,电子设备可以针对其中一个拍摄对象进行追焦,并对该拍摄对象进行针对性的特写录制,分别生成原始视频和追焦视频。具体地,电子设备可以给预览大窗和预览小窗的数据流分配流标识,并根据不同的流标识关联不同的视频文件和编码器,以及匹配不同的图像效果,从而实现对预览大窗对应的原始视频和预览小窗对应的特写视频的录制。这种拍摄方法可以在相同时间内满足用户对不同取景范围的视频的需求,提升了用户体验。

Description

一种拍摄方法及相关设备
本申请要求于2022年05月30日提交中国专利局、申请号为202210603408.2、申请名称为“一种拍摄方法及相关设备”的中国专利申请的优先权,以及要求于2022年07月29日提交中国专利局、申请号为202210910909.5、申请名称为“一种拍摄方法及相关设备”的中国专利申请的优先权,其全部内容通过引用结合在本申请中。
技术领域
本申请涉及终端技术领域,尤其涉及一种拍摄方法及相关设备。
背景技术
随着终端技术的发展,视频拍摄拥有了更多可能性。例如,人们可以通过手机等电子设备实现对人脸、人物、宠物等被摄体的自动追焦,以解决被摄体移动时无法自动对焦到被摄体上而导致的虚焦或焦点转移等问题。
发明内容
本申请提供了一种拍摄方法及相关设备。该拍摄方法可以应用于设置有摄像头的电子设备。根据该拍摄方法,电子设备进入追焦模式之后,可以配置两路数据流,并通过流标识来区分这两路数据流。在多个拍摄对象同框的拍摄场景下,电子设备可以针对其中一个拍摄对象进行针对性的特写录制。在用户选定需要进行特写录制的拍摄对象后,电子设备的小窗口可以显示该拍摄对象。并且,用户触发录制之后,电子设备可以基于其显示的大窗口录制原始视频,而基于其显示的小窗口来录制特写视频。在这个过程中,电子设备中的编码器可以通过小窗数据流对应的流标识获取小窗数据流中的图像数据,并对该图像数据进行编码,从而得到特写视频,以及通过大窗数据流对应的流标识获取大窗数据流中的图像数据,并对该图像数据进行编码,从而得到原始视频。在本申请的一些实施例中,电子设备可以拍摄得到一个原始视频和多个特写视频。通过这种方式,电子设备可以区分用于录制特写视频的小窗口对应的数据流(即小窗数据流)和用于录制原始视频的大窗口对应的数据流(即大窗数据流),并且同时录制原始视频和特写视频,极大地满足了用户的拍摄需求,提高了用户体验。
第一方面,本申请提供了一种拍摄方法。该拍摄方法可以应用于设置有摄像头的电子设备。根据该方法,电子设备可以显示第一界面,第一界面包括第一窗口和第一控件,第一窗口显示有摄像头采集的第一图像。电子设备可以检测到作用于第一控件的第一操作,响应于第一操作,电子设备可以配置第一窗口对应的第一路数据流和第二窗口对应的第二路数据流,并显示第二界面。第二界面包括第一窗口和第二控件。第一窗口显示有摄像头采集的第一图像和在第一图像中的主体上显示的标记。第一路数据流与第一流标识对应,第二路数据流与第二流标识对应。电子设备还可以检测到作用于一个标记的第二操作,响应于第二操作,显示第二窗口。第二窗口小于第一窗口。第二窗口显示有第一主体的特写图像。第一主体为第二操作作用的标记对应的主体。电子设备响应作用于第二控件的操作,可以对第一窗口和第二窗口中的画面分别进行录像。其中,电子设备中的编码器可以基于第一流标识获取第一路数据流中的图像数据,对第一路数据流中的图像数据进行编码得到第一视频,并且,电子设备中的编码器可以基于第二流标识获取第二路数据流中的图像数据,并对第二路数据流中的图像数据进行编码得到第二视频。
在本申请提供的方案中,电子设备可以在进入追焦模式的情况下,配置第一路数据流和 第二路数据流,并给第一路数据流和第二路数据流分配不同的流标识(即第一流标识和第二流标识)。在后续过程中,一旦触发大小窗同时录像,电子设备中的编码器可以基于第一流标识来获取第一路数据流中的图像数据,并对该图像数据进行编码,从而得到原始视频,电子设备中的编码器还可以基于第二流标识来获取第二路数据流中的图像数据,并对该图像数据进行编码,从而得到特写视频。这种拍摄方法可以在相同时间内满足用户对原始视频和特写视频的拍摄需求,提升了用户体验。
可理解,电子设备对第一窗口和第二窗口中的画面分别进行录像时,电子设备中的编码器可以基于第一流标识获取第一路数据流中的图像数据,对第一路数据流中的图像数据进行编码得到第一视频,并且,电子设备中的编码器可以基于第二流标识获取第二路数据流中的图像数据,并对第二路数据流中的图像数据进行编码得到第二视频。
在本申请的一些实施例中,第一窗口为后文所提及的大窗口/预览大窗/大窗,第二窗口为后文所提及的小窗口/预览小窗/小窗。例如,第一窗口可以为大窗口301,小窗口可以为小窗口302,具体可以参考图1等附图。
在本申请的一些实施例中,第一控件为用于触发进入追焦模式(即主角模式)的控件。例如,第一控件可以为主角模式按钮404(如图2A所示)。再例如,第一控件可以为主角模式按钮405(如图2B所示)。可理解,作用在第一控件上的第一操作可以为点击操作,还可以为手势、声控等操作,本申请对此不作限制。
在本申请的一些实施例中,第一路数据流为后文所提及的大窗数据流,第二路数据流为后文所提及的小窗数据流。
可理解,第一界面可以为电子设备进入追焦模式后的预览界面。例如,第一界面可以为图2A的d所示的预览界面。再例如,第一界面可以为图2B的d所示的预览界面。可理解,电子设备显示第一界面时,电子设备的相机模式为追焦模式下的录像预览模式。
在本申请的一些实施例中,第二控件为用于触发大窗口录制和小窗口录制的控件。例如,第二控件可以为开始录制按钮303(如图1所示)。可理解,作用在第二控件上的操作可以为点击操作,还可以为手势、声控等操作,本申请对此不作限制。
可理解,第一图像为由电子设备的摄像头采集且显示在第一窗口的图像。第一图像中的主体指的是拍摄对象,也可以理解为预览界面中的追焦对象。例如,第一图像可以为图2C中的a界面所显示的图像。第一图像中的主体可以为图2C中的a界面所显示的男性人物(即追踪框311所标记的人物)和女性人物(即追踪框312所标记的人物)。
可理解,标记可以为追踪框。例如,图2C所示的追踪框311和追踪框312。当然,标记还可以有其他表现形式,本申请对此不作限制。例如,标记可以表现为三角形、箭头等其他图案,标记的颜色也可以设置为其他颜色。
例如,在第二操作作用的标记为图2C所示的追踪框311的情况下,第一主体为追踪框311对应的男性人物。再例如,在第二操作作用的标记为图2C所示的追踪框312的情况下,第一主体为追踪框312对应的女性人物。
可理解,与第一操作类似,第二操作也可以为点击操作,还可以为手势、声控等操作,本申请对此不作限制。
可理解,第一视频为原始视频,第二视频为特写视频。在本申请的一些实施例中,第二视频为第一主体的特写视频。
结合第一方面,在一种可能的实现方式中,该拍摄方法还可以包括:电子设备可以响应 于作用于第二控件的操作,显示第三界面。第三界面可以包括第一窗口、第二窗口和第三控件。对第一窗口和第二窗口中的画面分别进行录像之后,该拍摄方法还可以包括:电子设备可以响应作用于第三控件上的操作,保存第一视频和第二视频。
在本申请提供的方案中,电子设备开始大窗口录制和小窗口录制之后,可以响应于作用在录像结束控件上的用户操作,保存大窗口对应的原始视频和小窗口对应的特写视频。这种拍摄方法可以在相同时间内满足用户对原始视频和特写视频的拍摄需求,提升了用户体验。
在本申请的一些实施例中,第三控件可以用于结束视频录制。可理解,电子设备显示第三界面时,第三界面包括第一窗口、第二窗口和第三控件。即电子设备同时显示第一窗口和第二窗口。在这种情况下,第三控件可以用于同时结束第一窗口和第二窗口的录制。可理解,作用于第三控件上的操作可以为点击操作,还可以为手势、声控等操作,本申请对此不作限制。
例如,第三控件可以为结束录制按钮314,第三界面可以为图3M所示的a界面。可理解,如图3M所示,电子设备接收到针对结束录制按钮314的点击操作时,电子设备可同时结束大窗口(即第一窗口)的录制与小窗口(即第二窗口)的录制并进入图3M的b界面。
结合第一方面,在一种可能的实现方式中,电子设备保存第一视频和第二视频之前,该拍摄方法还可以包括:电子设备可以检测到作用于一个标记的第四操作;响应于第四操作,第二窗口显示有第二主体的特写图像,第二主体为第四操作作用的标记对应的主体。
在本申请提供的方案中,在电子设备显示有包括第一窗口和第二窗口的录像预览界面(如图2C所示的b界面)的情况下,电子设备可以针对用户作用在其他标记上的操作来更换追焦对象(如图2C所示)。通过这种方式,用户可以自由选择追焦对象并为后续特写视频的录制做准备。类似的,在电子设备显示有包括第一窗口和第二窗口的录制界面(如图3I所示的a界面)的情况下,电子设备可以针对用户作用在其他标记上的操作来更换追焦对象(如图3I所示)。通过这种方式,用户可以在录制过程中切换追焦对象,可以满足用户的不同拍摄需求,提升了用户体验。
可理解,第一主体和第二主体可以相同,也可以不同。
可理解,第四操作可以为点击操作,还可以为手势、声控等操作,本申请对此不作限制。
结合第一方面,在一种可能的实现方式中,第二窗口包括第四控件。电子设备对第一窗口和第二窗口中的画面分别进行录像之后,该拍摄方法还可以包括:响应作用于第四控件上的操作,停止对第二窗口中的画面进行录像,并保存第二视频。
在本申请提供的方案中,用户可以通过触发第二窗口上的第四控件来结束第二窗口的录制。可理解,结束第二窗口的录制之后,第一窗口的录制不会受到影响,电子设备可以继续第一窗口的录制(如图3E所示)。
在本申请的一些实施例中,第四控件可以用于结束第二窗口的录制,而不影响第一窗口的录制。例如,第四控件可以为结束小窗口录制按钮315。电子设备可基于结束小窗口录制按钮315结束小窗口(即第二窗口)的录制,大窗口(即第一窗口)的录制不会受到影响。
结合第一方面,在一种可能的实现方式中,电子设备保存第二视频之后,该拍摄方法可以包括:电子设备响应作用于第三控件上的操作,停止对第一窗口中的画面进行录像,并保存第一视频。
可理解,在录制界面不包括第二窗口的情况下,电子设备可以通过第三控件仅结束第一窗口的录制。在本申请提供的方案中,电子设备可以在保存第二视频之后,再保存第一视频。在这种情况下,第一视频的时长比第二视频的时长更长一些。
结合第一方面,在一种可能的实现方式中,电子设备保存第二视频之后,该拍摄方法还可以包括:电子设备可以检测到作用于一个标记的第五操作;响应于第五操作,电子设备可以重新显示第二窗口,并对第二窗口中的画面进行录像,第二窗口显示有第三主体的特写图像,第三主体为第五操作作用的标记对应的主体。其中,电子设备中的编码器基于第二流标识获取第二路数据流中的图像数据,并对第二路数据流中的图像数据进行编码得到第三视频。
在本申请提供的方案中,电子设备首先结束第二窗口的录制之后,可以重新选择追焦对象,并录制该追焦对象的特写视频。在这种情况下,电子设备可以在一次拍摄过程中获取一个原始视频和若干特写视频。并且,在本申请的一些实施例中,该若干特写视频可以为不同追焦对象的特写视频。这种拍摄方法可以在相同时间内满足用户对原始视频和不同追焦对象的特写视频的拍摄需求,提升了用户体验。
可理解,在电子设备重新显示第二窗口并对第二窗口中的画面进行录像的情况下,电子设备中的编码器基于第二流标识获取第二路数据流中的图像数据,并对第二路数据流中的图像数据进行编码得到第三视频。
可理解,第三主体与第一主体可以相同,也可以不同。
结合第一方面,在一种可能的实现方式中,该拍摄方法还可以包括:电子设备响应于第五操作,显示第四界面,第四界面包括第一窗口、第二窗口和第三控件。电子设备重新显示第二窗口,并对第二窗口中的画面进行录像之后,该拍摄方法还可以包括:响应作用于第三控件上的操作,保存第一视频和第三视频。
在本申请提供的方案中,电子设备重新开始第二窗口的录制之后,可以同时结束第一窗口和第二窗口的录制。通过这种拍摄方法,用户可以在录制原始视频的过程中获取多个不同时间段的特写视频,使得用户可以记录不同时刻的精彩瞬间。
可理解,电子设备结束第二窗口的录制,再重新开始第二窗口的录制时,可以显示第四界面。例如,第四界面可以为图3E所示的d界面。
可理解,第三视频为特写视频。第二视频和第三视频可以为同一个追焦对象的特写视频,也可以为不同追焦对象的特写视频。
结合第一方面,在一种可能的实现方式中,电子设备检测到作用于第一控件的第一操作之后,该拍摄方法还可以包括:响应于第一操作,电子设备可以基于当前的系统时间分别生成第一窗口视频文件和第二窗口视频文件;电子设备可以基于第一流标识将第一编码器与第一路数据流关联,以及基于第二流标识将第二编码器与第二路数据流关联;电子设备可以基于第一窗口视频文件的文件标识,将第一编码器与第一窗口视频文件关联;基于第二窗口视频文件的文件标识,将第二编码器与第二窗口视频文件关联;电子设备可以将第一流标识和第二流标识分别与第一图像效果与第二图像效果进行匹配。其中,第一编码器用于对第一路数据流中的图像数据进行编码,第二编码器用于对第二路数据流中的图像数据进行编码。第一窗口视频文件用于存储对第一路数据流中的图像数据进行编码后所得的视频,第二窗口视 频文件用于存储对第二路数据流中的图像数据进行编码后所得的视频。第一图像效果为第一路数据流中的图像数据对应的图像效果,第二图像效果为第二路图像数据对应的图像效果。
在本申请提供的方案中,电子设备可以给预览大窗和预览小窗的数据流分配流标识,并根据不同的流标识关联不同的视频文件和编码器,以及匹配不同的图像效果,从而实现对预览大窗对应的原始视频和预览小窗对应的特写视频的录制。这种拍摄方法可以在相同时间内满足用户对不同取景范围的视频的需求,提升了用户体验。
在本申请的一些实施例中,第一窗口视频文件可以为大窗视频文件,第二窗口视频文件可以为小窗视频文件。
可理解,上述内容的相关描述可以参考图7,以及后文中步骤S701-S709的描述。
结合第一方面,在一种可能的实现方式中,电子设备配置第一窗口对应的第一路数据流和第二窗口对应的第二路数据流之后,该拍摄方法还可以包括:电子设备中的流管理模块可以将第一流标识参数信息发送给电子设备中的编码控制模块和电子设备中的相机HAL;第一流标识参数信息包括第一流标识和第二流标识。电子设备基于当前的系统时间分别生成第一窗口视频文件和第二窗口视频文件之后,该拍摄方法还可以包括:电子设备中的存储模块将第一文件信息发送给编码控制模块;第一文件信息包括第一窗口视频文件的文件标识和第二窗口视频文件的文件标识。电子设备基于第一流标识将第一编码器与第一路数据流关联,基于第二流标识将第二编码器与第二路数据流关联,基于第一窗口视频文件的文件标识将第一编码器与第一窗口视频文件关联,以及基于第二窗口视频文件的文件标识,将第二编码器与第二窗口视频文件关联,具体可以包括:编码控制模块解析第一流标识参数信息和第一文件信息,得到第一流标识和第二流标识,以及第一窗口视频文件的文件标识和第二窗口视频文件的文件标识;编码控制模块创建第一编码器和第二编码器;编码控制模块基于第一流标识和第一窗口视频文件的文件标识,确定第一编码器的输入为第一路数据流中的图像数据,并确定第一编码器编码后的图像数据的存储区域为第一窗口视频文件;编码控制模块基于第二流标识和第二窗口视频文件的文件标识,确定第二编码器的输入为第二路数据流中的图像数据,并确定第二编码器编码后的图像数据的存储区域为第二窗口视频文件。电子设备将第一流标识和第二流标识分别与第一图像效果与第二图像效果进行匹配,具体可以包括:相机HAL解析第一流标识参数信息,得到第一流标识和第二流标识;相机HAL基于第一流标识确定与第一图像效果匹配的数据流为第一路数据流,并基于第二流标识确定与第二图像效果匹配的数据流为第二路数据流。
在本申请的一些实施例中,第一流标识参数信息可以为图7中所示的流标识信息,具体可以参考步骤S703和步骤S708的相关描述。第一文件信息可以为文件信息W1,具体可以参考步骤S705中的相关描述。
可理解,第一窗口视频文件的文件标识用于标记第一窗口视频文件。第一窗口视频文件的文件标识可以包括第一窗口视频文件的时间戳,还可以包括第一窗口视频文件的文件名。第二窗口视频文件的文件标识用于标记第二窗口视频文件。第二窗口视频文件的文件标识可以包括第二窗口视频文件的时间戳,还可以包括第二窗口视频文件的文件名。当然,第一窗口视频文件的文件标识和第二窗口视频文件的文件标识还可以包括其他内容,本申请对此不作限制。
在本申请的一些实施例中,第一路数据流中的图像数据可以为大窗图像数据,第二路数据流中的图像数据可以为小窗图像数据。
可理解,上述内容的相关描述可以参考图7,以及后文中步骤S701-S709的描述。
结合第一方面,在一种可能的实现方式中,该拍摄方法还可以包括:响应于作用于第二控件的操作,电子设备中的编码控制模块向电子设备中的编码器发送第一编码器命令,第一编码器命令用于启动第一编码器和第二编码器;电子设备中的流管理模块向电子设备中的相机HAL发送第一动态请求,第一动态请求包括第一流标识和第二流标识。电子设备对第一窗口和第二窗口中的画面分别进行录像,具体可以包括:相机HAL对第一动态请求进行解析,得到第一流标识和第二流标识;相机HAL分别基于与第一流标识相匹配的第一图像效果,以及与第二流标识相匹配的第二图像效果,对原始图像数据进行处理,得到第一窗口图像数据和第二窗口图像数据;第一编码器获取第一窗口图像数据,对第一窗口图像数据进行编码,并将编码后的图像数据写入第一窗口视频文件;第二编码器获取第二窗口图像数据,对第二窗口图像数据进行编码,并将编码后的图像数据写入第二窗口视频文件。
在本申请的一些实施例中,第一编码器命令可以为编码器命令B1。第一动态请求可以为动态请求D1。第一窗口图像数据为第一路数据流中的图像数据,第一窗口图像数据可以为大窗图像数据。第二窗口图像数据为第二路数据流中的图像数据,第二窗口图像数据可以为小窗图像数据。
可理解,上述内容的相关描述可以参考图8,以及后文中步骤S801-S807的描述。
结合第一方面,在一种可能的实现方式中,电子设备响应作用于第四控件上的操作,停止对第二窗口中的画面进行录像,并保存第二视频,具体可以包括:响应作用于第四控件上的操作,电子设备中的编码器停止对第二路数据流的图像数据进行编码;电子设备中的流管理模块删除第一动态请求中的第二流标识,得到第二动态请求,并将第二动态请求发送给电子设备中的相机HAL;第二动态请求包括第一流标识;电子设备中的存储模块保存第二窗口视频文件中的第二视频。
在本申请提供的方案中,电子设备可以通过删除动态请求中第二路数据流的流标识来停止对第二窗口的录制,相应的,电子设备中可以保存第二窗口视频文件中的特写视频。这种拍摄方法可以灵活实现对原始视频的拍摄和特写视频的拍摄,提升了用户体验。
在本申请的一些实施例中,第二动态请求可以为动态请求D2。
在本申请的一些实施例中,电子设备中的编码器停止对第二路数据流的图像数据进行编码,具体可以包括,电子设备中的编码控制模块可以向第二编码器发送编码器命令B2,第二编码器接收编码器命令B2之后,可以停止对第二路数据流中的图像数据进行编码。
可理解,上述内容的相关描述可以参考图9,以及后文中步骤S901-S909的描述。
结合第一方面,在一种可能的实现方式中,电子设备停止对第二窗口中的画面进行录像之后,该拍摄方法还可以包括:流管理模块将第二流标识参数信息发送给电子设备中的编码控制模块;第二流标识参数信息包括第二流标识;存储模块基于当前的系统时间重新创建第二窗口视频文件,并将第二文件信息发送给编码控制模块;第二文件信息包括重新创建的第二窗口视频文件的文件标识;编码控制模块基于第二流标识参数信息和第二文件信息,创建第三编码器,并将第二路数据流和重新创建的第二窗口视频文件,与第三编码器关联。
在本申请的一些实施例中,电子设备停止对第二窗口中的画面进行录像之后,流管理模块可以直接将第二流标识发送给电子设备中的编码控制模块,具体可以参考步骤S911,在 此不再赘述。
在本申请的一些实施例中,第二文件信息可以为文件信息W2。
可理解,重新创建的第二窗口视频文件的文件标识可以包括重新创建的第二窗口视频文件的文件名,还可以包括重新创建的第二窗口视频文件的时间戳。当然,重新创建的第二窗口视频文件的文件标识还可以包括其他用于标记该重新创建的第二窗口视频文件的内容,本申请对此不作限制。
可理解,上述内容的相关描述可以参考图9中步骤S910-S912的描述。
结合第一方面,在一种可能的实现方式中,电子设备检测到作用于一个标记的第五操作之后,该拍摄方法还可以包括:响应于第五操作,电子设备中的流管理模块可以将第二流标识添加到第二动态请求中,得到第三动态请求,并将第三动态请求发送给电子设备中的相机HAL;第三动态请求包括第一流标识和第二流标识;相机HAL对第三动态请求进行解析,得到第一流标识和第二流标识;相机HAL确定与第一流标识和第二流标识对应的图像效果分别为第一图像效果和第二图像效果,并分别基于第一图像效果和第二图像效果对原始图像数据进行处理,得到第一窗口图像数据和第二窗口图像数据;电子设备中的编码控制模块控制第一编码器和第三编码器分别对第一窗口图像数据和第二窗口图像数据进行编码,并将编码后的图像数据分别写入第一窗口视频文件和重新创建的第二窗口视频文件中。
在本申请提供的方案中,电子设备可以通过将第二路数据流对应的第二流标识添加到动态请求中来实现对第二窗口的录制。可理解,电子设备可以在录制原始视频的情况下,录制多个特写视频。这种拍摄方式可以满足用户在不同时刻对特写视频的拍摄需求,提升了用户体验。
在本申请的一些实施例中,第三动态请求可以为动态请求D3。
在本申请的一些实施例中,响应于第五操作,电子设备中的编码控制模块还可以向第三编码器发送编码器命令B3,第三编码器接收编码器命令B3之后,可以开始对第二路数据流中的图像数据进行编码,具体可以参考步骤S1002,在此不再赘述。
可理解,上述内容的相关描述可以参考图10,以及后文中步骤S1001-S1008的描述。
第二方面,本申请提供了一种电子设备。该电子设备可以包括显示屏、摄像头、存储器、一个或多个处理器。其中,存储器用于存储计算机程序。显示屏,可以用于:显示第一界面,第一界面包括第一窗口和第一控件,第一窗口显示有摄像头采集的第一图像。处理器,可以用于:检测到作用于第一控件的第一操作;响应于第一操作,配置第一窗口对应的第一路数据流和第二窗口对应的第二路数据流。显示屏,还用于:响应于第一操作,显示第二界面,第二界面包括第一窗口和第二控件,第一窗口显示有摄像头采集的第一图像和在第一图像中的主体上显示的标记,第一路数据流与第一流标识对应,第二路数据流与第二流标识对应。处理器,还可以用于:检测到作用于一个标记的第二操作。显示屏,还可以用于:响应于第二操作,显示第二窗口,第二窗口小于第一窗口,第二窗口显示有第一主体的特写图像,第一主体为第二操作作用的标记对应的主体。处理器,还可以用于:响应作用于第二控件的操作,对第一窗口和第二窗口中的画面分别进行录像。可理解,电子设备还可以包括编码器。编码器,可以用于:基于第一流标识获取第一路数据流中的图像数据,对第一路数据流中的图像数据进行编码得到第一视频,以及基于第二流标识获取第二路数据流中的图像数据,并对第二路数据流中的图像数据进行编码得到第二视频。
结合第二方面,在一种可能的实现方式中,显示屏,还可以用于:响应于作用于第二控件的操作,显示第三界面,第三界面包括第一窗口、第二窗口和第三控件。处理器,在用于对第一窗口和第二窗口中的画面分别进行录像之后,还可以用于:响应作用于第三控件上的操作,保存第一视频和第二视频。
结合第二方面,在一种可能的实现方式中,处理器,在用于保存第一视频和第二视频之前,还可以用于:检测到作用于一个标记的第四操作。显示屏,还可以用于:响应于第四操作,第二窗口显示有第二主体的特写图像,第二主体为第四操作作用的标记对应的主体。
结合第二方面,在一种可能的实现方式中,第二窗口包括第四控件。处理器,在用于对第一窗口和第二窗口中的画面分别进行录像之后,还可以用于:响应作用于第四控件上的操作,停止对第二窗口中的画面进行录像,并保存第二视频。
结合第二方面,在一种可能的实现方式中,处理器,在用于保存第二视频之后,还可以用于:检测到作用于一个标记的第五操作。显示屏,可以用于:响应于第五操作,重新显示第二窗口,第二窗口显示有第三主体的特写图像,第三主体为第五操作作用的标记对应的主体。处理器,还可以用于:响应于第五操作,对第二窗口中的画面进行录像。编码器,还可以用于:基于第二流标识获取第二路数据流中的图像数据,并对第二路数据流中的图像数据进行编码得到第三视频。
结合第二方面,在一种可能的实现方式中,显示屏,还可以用于:响应于第五操作,显示第四界面,第四界面包括第一窗口、第二窗口和第三控件。处理器,用于对第二窗口中的画面进行录像之后,还可以用于:响应作用于第三控件上的操作,保存第一视频和第三视频。
结合第二方面,在一种可能的实现方式中,处理器,在用于检测到作用于第一控件的第一操作之后,还可以用于:响应于第一操作,基于当前的系统时间分别生成第一窗口视频文件和第二窗口视频文件;基于第一流标识将第一编码器与第一路数据流关联,以及基于第二流标识将第二编码器与第二路数据流关联;基于第一窗口视频文件的文件标识,将第一编码器与第一窗口视频文件关联;基于第二窗口视频文件的文件标识,将第二编码器与第二窗口视频文件关联;将第一流标识和第二流标识分别与第一图像效果与第二图像效果进行匹配。其中,第一编码器用于对第一路数据流中的图像数据进行编码,第二编码器用于对第二路数据流中的图像数据进行编码。第一窗口视频文件用于存储对第一路数据流中的图像数据进行编码后所得的视频,第二窗口视频文件用于存储对第二路数据流中的图像数据进行编码后所得的视频。第一图像效果为第一路数据流中的图像数据对应的图像效果,第二图像效果为第二路图像数据对应的图像效果。
结合第二方面,在一种可能的实现方式中,电子设备还可以包括流管理模块、编码控制模块和相机HAL。在处理器用于配置第一窗口对应的第一路数据流和第二窗口对应的第二路数据流之后,流管理模块,可以用于:将第一流标识参数信息发送给编码控制模块和相机HAL;第一流标识参数信息包括第一流标识和第二流标识。电子设备还可以包括存储模块。在处理器基于当前的系统时间分别生成第一窗口视频文件和第二窗口视频文件之后,存储模块,可以用于:将第一文件信息发送给编码控制模块;第一文件信息包括第一窗口视频文件的文件标识和第二窗口视频文件的文件标识。处理器,在基于第一流标识将第一编码器与第一路数据流关联,基于第二流标识将第二编码器与第二路数据流关联,基于第一窗口视频文件的文件标识,将第一编码器与第一窗口视频文件关联,以及基于第二窗口视频文件的文件标识,将第二编码器与第二窗口视频文件关联时,具体可以用于:控制编码控制模块解析第一流标识参数信息和第一文件信息,得到第一流标识和第二流标识,以及第一窗口视频文件 的文件标识和第二窗口视频文件的文件标识;控制编码控制模块创建第一编码器和第二编码器;控制编码控制模块基于第一流标识和第一窗口视频文件的文件标识,确定第一编码器的输入为第一路数据流中的图像数据,并确定第一编码器编码后的图像数据的存储区域为第一窗口视频文件;控制编码控制模块基于第二流标识和第二窗口视频文件的文件标识,确定第二编码器的输入为第二路数据流中的图像数据,并确定第二编码器编码后的图像数据的存储区域为第二窗口视频文件。处理器,在用于将第一流标识和第二流标识分别与第一图像效果与第二图像效果进行匹配时,具体可以用于:控制相机HAL解析第一流标识参数信息,得到第一流标识和第二流标识;控制相机HAL基于第一流标识确定与第一图像效果匹配的数据流为第一路数据流,并基于第二流标识确定与第二图像效果匹配的数据流为第二路数据流。
结合第二方面,在一种可能的实现方式中,编码控制模块,可以用于:响应于作用于第二控件的操作,向电子设备中的编码器发送第一编码器命令,第一编码器命令用于启动第一编码器和第二编码器。流管理模块,可以用于:向电子设备中的相机HAL发送第一动态请求,第一动态请求包括第一流标识和第二流标识。处理器,在用于对第一窗口和第二窗口中的画面分别进行录像时,具体可以用于:控制相机HAL对第一动态请求进行解析,得到第一流标识和第二流标识;控制相机HAL分别基于与第一流标识相匹配的第一图像效果,以及与第二流标识相匹配的第二图像效果,对原始图像数据进行处理,得到第一窗口图像数据和第二窗口图像数据;控制第一编码器获取第一窗口图像数据,对第一窗口图像数据进行编码,并将编码后的图像数据写入第一窗口视频文件;控制第二编码器获取第二窗口图像数据,对第二窗口图像数据进行编码,并将编码后的图像数据写入第二窗口视频文件。
结合第二方面,在一种可能的实现方式中,处理器,在用于响应作用于第四控件上的操作,停止对第二窗口中的画面进行录像,并保存第二视频时,具体可以用于:响应作用于第四控件上的操作,控制编码器停止对第二路数据流的图像数据进行编码;控制流管理模块删除第一动态请求中的第二流标识,得到第二动态请求,并将第二动态请求发送给电子设备中的相机HAL;第二动态请求包括第一流标识;控制存储模块保存第二窗口视频文件中的第二视频。
结合第二方面,在一种可能的实现方式中,在处理器用于停止对第二窗口中的画面进行录像之后,流管理模块,可以用于:将第二流标识参数信息发送给电子设备中的编码控制模块;第二流标识参数信息包括第二流标识。存储模块,可以用于:基于当前的系统时间重新创建第二窗口视频文件,并将第二文件信息发送给编码控制模块;第二文件信息包括重新创建的第二窗口视频文件的文件标识。编码控制模块,可以用于:基于第二流标识参数信息和第二文件信息,创建第三编码器,并将第二路数据流和重新创建的第二窗口视频文件,与第三编码器关联。
结合第二方面,在一种可能的实现方式中,在处理器用于检测到作用于一个标记的第五操作之后,流管理模块,可以用于:响应于第五操作,将第二流标识添加到第二动态请求中,得到第三动态请求,并将第三动态请求发送给电子设备中的相机HAL;第三动态请求包括第一流标识和第二流标识。相机HAL,可以用于:对第三动态请求进行解析,得到第一流标识和第二流标识;确定与第一流标识和第二流标识对应的图像效果分别为第一图像效果和第二图像效果,并分别基于第一图像效果和第二图像效果对原始图像数据进行处理,得到第一窗口图像数据和第二窗口图像数据。编码控制模块,可以用于:控制第一编码器和第三编码器分别对第一窗口图像数据和第二窗口图像数据进行编码,并将编码后的图像数据分别写 入第一窗口视频文件和重新创建的第二窗口视频文件中。
第三方面,本申请提供一种计算机存储介质,包括计算机指令,当该计算机指令在电子设备上运行时,使得该电子设备执行上述第一方面中任一种可能的实现方式。
第四方面,本申请实施例提供一种芯片,该芯片可以应用于电子设备,该芯片包括一个或多个处理器,该处理器用于调用计算机指令以使得该电子设备执行上述第一方面中任一种可能的实现方式。
第五方面,本申请实施例提供一种包含指令的计算机程序产品,当该计算机程序产品在电子设备上运行时,使得该电子设备执行上述第一方面任一种可能的实现方式。
可理解,上述第二方面提供的电子设备、第三方面提供的计算机存储介质、第四方面提供的芯片,以及第五方面提供的计算机程序产品均用于执行上述第一方面中任一种可能的实现方式。因此,其所能达到的有益效果可参考上述第一方面中任一种可能的实现方式的有益效果,此处不再赘述。
附图说明
图1为本申请实施例提供的一种拍摄场景的示意图;
图2A-图2P为本申请实施例提供的一组用户界面示意图;
图3A-图3N为本申请实施例提供的又一组用户界面示意图;
图4为本申请实施例提供的一种电子设备的硬件结构示意图;
图5为本申请实施例提供的一种电子设备的软件结构示意图;
图6为本申请实施例提供的一种模块交互示意图;
图7为本申请实施例提供的一种拍摄方法的流程图;
图8为本申请实施例提供的又一种拍摄方法的流程图;
图9为本申请实施例提供的又一种拍摄方法的流程图;
图10为本申请实施例提供的又一种拍摄方法的流程图;
图11为本申请实施例提供的又一种拍摄方法的流程图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。其中,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;文本中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况,另外,在本申请实施例的描述中,“多个”是指两个或多于两个。
应当理解,本申请的说明书和权利要求书及附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本申请中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地 理解的是,本申请所描述的实施例可以与其它实施例相结合。
本申请提供了一种拍摄方法。该拍摄方法可以应用于设置有摄像头的电子设备。根据该拍摄方法,多个拍摄对象同框的拍摄场景下,电子设备可以针对其中一个拍摄对象进行追焦,并对该拍摄对象进行针对性的特写录制,分别生成原始视频和特写视频。在本申请的一些实施例中,电子设备可以拍摄得到一个原始视频和多个特写视频。
可理解,原始视频是由预览大窗所显示的原始图像所构成的视频。而特写视频是由预览小窗所显示的追焦目标的特写图像所构成的视频。
可理解,本申请中所提及的拍摄主体指的是用户利用电子设备进行拍摄时的主要拍摄对象。取景范围与电子设备的摄像头参数(例如,视场角、焦距等)相关。
可理解,电子设备具体可以是手机、平板电脑、可穿戴设备、车载设备、增强现实(Augmented Reality,AR)/虚拟现实(Virtual Reality,VR)设备、笔记本电脑、超级移动个人计算机(Ultra-Mobile Personal Computer,UMPC)、上网本、个人数字助理(Personal Digital Assistant,PDA)或专门的照相机(例如,单反相机、卡片式相机)等设备,本申请实施例对电子设备的具体类型不作任何限制。
下面结合一组用户界面示意图具体介绍本申请提供的拍摄场景。
可理解,本申请的说明书和权利要求书及附图中的术语“界面”和“用户界面”,是应用程序或操作系统与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(graphic user interface,GUI),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素,其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。
下面结合图1对本申请实施例涉及的主角模式进行说明。
为便于描述本申请实施例提供的拍摄方法,下面对本申请实施例中的名词定义进行说明。主角模式可以理解为,在电子设备录制视频时,可额外生成一份人像追踪视频的模式。其中,该人像追踪视频中的人像可以理解为用户关注的“主角”,生成“主角”对应的视频的方式可以为:从电子设备常规录制的视频中裁剪出“主角”对应的视频内容。可以理解的是,电子设备的主角模式可提供预览模式与录制模式。预览模式下,电子设备的显示屏中可显示预览界面。录制模式下,电子设备的显示屏中可显示录制界面。
需要说明的是,电子设备在预览模式(录制前)和录制模式(录制过程中)显示的界面均可以被称为预览界面;预览模式(录制前)的预览界面中显示的画面不会生成视频并保存;录制模式(录制过程中)的预览界面中显示的画面可以生成视频并保存。为方便区分,下文中,将预览模式(录制前)的预览界面称为预览界面;将录制模式(录制过程中)的预览界面称为录制界面。
预览界面中可包括大窗口与小窗口。其中,大窗口可以是规格等于或略小于显示屏的窗口,大窗口可显示摄像头获得的图像,大窗口在预览模式下所显示的图像可定义为大窗口的预览画面。小窗口可以是规格小于大窗口的窗口,小窗口可显示用户选定的追焦对象的图像,电子设备可基于与追焦对象关联的追踪标识选中追焦对象,小窗口在预览模式下所显示的图像可定义为小窗口的预览画面。可以理解的是,预览模式下,电子设备可基于大窗口显示摄像头获取的图像,小窗口显示追焦对象的图像,但电子设备可以不生成视频,也可以不保存 大窗口和小窗口显示的内容。
录制界面中可包括大窗口与小窗口。其中,大窗口可以是规格等于或略小于显示屏的窗口,大窗口可显示摄像头获得的图像,大窗口在录制模式下所显示的图像可定义为大窗口的录制画面。小窗口可以是规格小于大窗口的窗口,小窗口可显示用户选定的追焦对象的图像,小窗口在录制模式下所显示的图像可定义为小窗口的录制画面。可以理解的是,录制模式下,电子设备不仅可以显示大窗口的录制画面与小窗口的录制画面,电子设备还可以生成开启录制模式后录制得到的大窗视频和小窗视频,并可以在大窗口录制结束时对大窗口中生成的视频保存,在小窗口录制结束时对小窗口中生成的视频保存。本申请实施例对预览模式与录制模式的命名不作限制。
需要说明的是,本申请实施例中描述的预览界面可理解为电子设备的相机应用处于主角模式的预览模式;录制界面可理解为电子设备的相机应用处于主角模式的录制模式。后续不再对此赘述。
示例性的,上述主角模式的功能可设置在相机应用(也可称为相机或相机APP)中。例如,在预览场景下,电子设备中主角模式的预览界面可如图1的a所示。该预览界面中可包括大窗口301、小窗口302与多个按钮。其中,按钮可包括开始录制按钮303、第一横竖屏切换按钮304、第二横竖屏切换按钮305、小窗口关闭按钮306和退出主角模式按钮307。可选的,按钮还可以包括录像设置按钮308、闪光灯按钮309及变焦按钮310等。
电子设备可在大窗口301中显示预览画面,预览画面中可包括多个人物。在电子设备检测到大窗口的预览画面中存在人物时,预览画面中可显示与人物关联的追踪标识。示例性的,追踪标识可以是在人物相应位置处显示的追踪框(例如,追踪框311和追踪框312)。例如,预览画面中男性人物可对应追踪框311,女性人物可对应追踪框312。追踪框可提示用户相应人物可设置为追焦对象或可切换为追焦对象。当电子设备识别到N个人物时,大窗口中可显示M(M≤N)个追踪框。电子设备可将任一人物设置为追焦对象,以生成该追焦对象的视频内容。本申请实施例对“主角”不作限制,其中,“主角”可以人物、动物等生命体,也可以是车辆等非生命体。可以理解的是,任一可基于算法模型识别的物品均可作为本申请实施例的“主角”。本申请实施例中可将“主角”定义为追焦对象,追焦对象还可称为主角对象、追踪目标、追踪对象与追焦目标等,本申请实施例以人物作为“主角”进行示例性说明,但本申请实施例对“主角”的概念不作限制。
一些实施例中,追踪标识还可以是其他形式的追踪标识,例如,当电子设备识别到多个可追焦对象时,大窗口在可对焦对象附近显示与该可追焦对象对应的追踪标识,追踪标识可以是数字、字母和图形等。用户点击追踪标识,电子设备响应该次点击操作,选定追焦对象。又例如,大窗口的多个可追焦对象被标记了数字、图形、用户图像或其他追踪标识。电子设备可在大窗口显示区域的边缘或其他位置排列多个追踪标识,用户可点击大窗口中的追踪标识来选定追焦对象。本申请实施例以追踪框为例示例性说明录像方法,但本申请实施例对追踪标识的形态不作限制。
需要说明的是,本申请实施例的电子设备可以在识别到双人或多人时,为该人物标记对应的追踪框;电子设备也可以在识别到单人时,为单人标记对应的追踪框,也可以不标记追踪框,此处不作限制。
可选的,大窗口显示的N个人物可以为可追焦对象,选定的“主角”为追焦对象,未选定为“主角”的人物为其他对象。追焦对象的追踪框(例如,追踪框311)与其他对象的追踪框(例如,追踪框312)可显示不同样式。这样,方便用户区分被追踪的人物。
一些实施例中,追踪框的形状、颜色、大小和位置可调。例如,追焦对象的追踪框311样式可以为虚框。其他对象的追踪框312样式可以为虚框与“+”的组合。除追踪框的形状不同,本申请实施例还可设置追踪框的颜色,例如追踪框311与追踪框312的颜色不同。这样,可直观的区分追焦对象与其他对象。可以理解的是,追踪框也可以是其他显示形式,追踪框满足能够被用户触发实现追踪可追焦对象的功能即可。
追踪框可以标记在可追焦对象的任意位置,本申请实施例不作具体限定。可能的实现中,为了不对大窗口中可追焦对象的预览造成视觉干扰,追踪框可以避开可追焦对象的脸部,比如,追踪框可标记在可追焦对象的身体较居中的位置。电子设备可进行人脸识别与人体识别,当电子设备识别到人脸时,电子设备可显示追踪框。电子设备可根据人脸识别与人体识别确定追踪框的显示位置,追踪框显示在人体居中位置。
需要说明的是,一些实施例中可能出现以下场景,大窗口的预览画面中包括N个人物,其中,有M(M≤N)个标记追踪框的可追焦对象与N-M个电子设备未识别的人物。实际拍摄中,电子设备可基于人脸技术显示追踪框,当电子设备无法捕捉人物的人脸时(例如,人物的背影),电子设备不会为该人物标记追踪框。本申请实施例对实现追踪框显示的方法不作限制。
在预览场景下,小窗口302显示有追焦对象的预览画面。小窗口的预览画面可以为大窗口预览画面的一部分。可能的实现中,小窗口的预览画面是基于追焦对象按照一定比例裁剪大窗口的预览画面得到的。电子设备可根据算法对大窗口中的图像进行裁剪,小窗口得到大窗口的图像的一部分。一些实施例中,在裁剪计算的时间长的情况下,小窗口实时显示的可能为大窗口实时显示的前几帧图像的裁剪图像。本申请实施例对于小窗口显示的画面不作具体限定。
当追焦对象切换时,小窗口302显示的预览画面中的人物进行相应切换。例如,若追焦对象从男性人物切换为女性角色时,小窗口302显示的预览画面也相应发生变化。后面会结合图2C对电子设备选择或切换追焦对象的场景进行详细说明,此处不做赘述。
一些实施例中,小窗口的规格、位置和横竖屏显示方式等可调,用户可根据录像习惯调整小窗口的样式,后面会结合图2D-图2J对小窗口样式调整进行详细说明,此处不做赘述。
预览界面中还包括多个按钮,下面对各个按钮的功能进行说明。
开始录制按钮303,用于控制电子设备启动大窗口的录制与小窗口的录制。
第一横竖屏切换按钮304可显示于大窗口中,用于调整小窗口的横屏显示与竖屏显示。
第二横竖屏切换按钮305可显示于小窗口中,也用于调整小窗口的横屏显示与竖屏显示。
小窗口关闭按钮306,用于电子设备关闭小窗口。
退出主角模式按钮307,用于电子设备退出主角模式,进入常规录像模式。
可选的,预览界面的按钮还可包括:
录像设置按钮308,用于使电子设备显示相机设置界面,用户在该界面调整相机的多种拍摄参数。
闪光灯按钮309,用于设置闪光灯效果,闪光灯按钮可展开为多种闪光灯功能的按钮,其中,这些按钮可用于控制闪光灯强制开启、强制关闭、拍照时开启及根据环境适应性开启等。
变焦按钮310,用于调整预览界面的变焦。其中,变焦按钮可提供广角、1X和2X等变焦功能。变焦按钮可用于调整大窗口中预览场景的大小,小窗口中的预览场景可跟随大窗口 的缩放进行等比例的缩放。
可以理解的是,在预览场景中,预览界面中可包括大窗口与小窗口。大窗口的预览画面中包括可追焦对象。当电子设备选定追焦对象时,小窗口的预览画面可居中显示追焦对象。一些场景中,追焦对象可处于移动状态,当追焦对象发生移动但未离开镜头时,小窗口的预览画面可持续居中显示追焦对象。例如,预览界面中可追踪对象包括男性人物与女性人物,电子设备响应于用户针对男性人物的追踪框的点击操作,电子设备选定男性人物为追焦对象,并进入如图1的a所示的界面。图1的a界面中,小窗口的预览画面居中显示男性人物,男性人物居于女性人物的右侧。男性人物发生移动,电子设备可持续追焦男性人物,并将男性人物居中显示到小窗口中。当男性人物走到女性人物左侧时,电子设备的界面可如图1的b所示。图1的b界面中,小窗口的预览画面仍居中显示男性人物,男性人物居于女性人物的左侧。
示例性的,在录制场景下,电子设备中主角模式的录制界面可如图1的c所示。该录制界面中可包括大窗口301、小窗口302、多个按钮及录制时间。其中,按钮可包括暂停录制按钮313、结束录制按钮314及结束小窗口录制按钮315。
与预览场景不同的是,在录制场景下,小窗口302显示的是追焦对象的录制画面。录制过程中,电子设备可在大窗口录制的视频的基础上,额外生成一路小窗口录制的视频。与预览过程相似,小窗口的录制画面可以为大窗口录制画面的一部分。可能的实现中,小窗口的录制画面是基于追焦对象按照一定比例裁剪大窗口的录制画面得到的。两路视频独立保存在电子设备中。这样,无需后续对整个视频进行人工剪辑,即可得到追焦对象对应的视频,操作简单方便,提升用户体验。
录制界面可包括多个按钮,下面对按钮的功能进行说明。
暂停录制按钮313,用于暂停视频录制。其中,大窗口与小窗口的录制可同时暂停,当录制界面中不包括小窗口时,暂停录制按钮313可仅暂停大窗口的录制。
结束录制按钮314,用于结束视频录制。其中,大窗口与小窗口的录制可同时结束,当录制界面中不包括小窗口时,结束录制按钮314可仅结束大窗口的录制。
结束小窗口录制按钮315,用于结束录制小窗口的视频。其中,电子设备可基于结束小窗口录制按钮315结束小窗口的录制,大窗口的录制不会受到影响。
录制时间,用于标识当前视频已录制的时长。大窗口的录制时长可与小窗口相同,也可以不同。
可以理解的是,在录制场景中,录制界面中可包括大窗口与小窗口。大窗口的录制画面中包括可追焦对象。当电子设备选定追焦对象时,小窗口的录制画面可居中显示追焦对象。一些场景中,追焦对象可处于移动状态,当追焦对象发生移动但未离开镜头时,焦点随追焦对象移动而移动,小窗口的录制画面可持续居中显示追焦对象。例如,录制界面中可追踪对象包括男性人物与女性人物,电子设备响应于用户针对男性人物的追踪框的点击操作,电子设备选定男性人物为追焦对象,并进入如图1的c所示界面。图1的c界面中,小窗口的录制画面居中显示男性人物,男性人物居于女性人物的右侧,此时焦点位于男性人物的脸部区域,位于画面的中间偏右部分。男性人物发生移动,电子设备可持续追焦录制男性人物,并将男性人物居中显示到小窗口中。当男性人物走到女性人物左侧时,电子设备的界面可如图1的b所示。图1的b界面中,小窗口的录制画面仍居中显示男性人物,男性人物居于女性人物的左侧,此时焦点位于男性人物的脸部区域,位于画面的中间偏左部分。
本申请实施例将基于追焦对象额外生成一路追焦视频的拍摄模式定义为主角模式,该拍 摄模式还可以称为追焦模式等,本申请实施例对此不作限定。
一、进入主角模式(图2A~图2B)
在使用主角模式进行录像时,可以有多种进入主角模式的方式。
示例性的,下面结合图2A与图2B对本申请实施例中进入主角模式的方法进行说明。
一种可能的实现方式中,电子设备处于图2A的a所示的主界面,当电子设备检测到用户开启相机应用401的操作时,电子设备可进入图2A的b所示的拍照预览界面。该拍照预览界面可以包括预览画面与拍摄模式选择按钮。预览画面可以实时显示电子设备的摄像头捕捉的场景。拍摄模式选择按钮包括但不限于:“人像”按钮、“拍照”按钮、“录像”按钮402、“专业”按钮与“更多”按钮403。
当电子设备检测到用户点击“录像”按钮402的操作时,电子设备由拍照预览界面切换至如图2A的c所示的录像预览界面;该录像预览界面中可以包括但不限于:用于接收触发进入主角模式的主角模式按钮404、用于接收触发进入设置的录制设置按钮,用于接收触发开启滤镜效果的滤镜按钮和用于设置闪光灯效果的闪光灯按钮。
电子设备可基于录像预览界面中的主角模式按钮404进入主角模式。例如,用户点击界面中的主角模式按钮404,电子设备响应该次点击操作,进入如图2A的d所示的预览界面;在预览界面中,大窗口内可以有多个拍摄对象,电子设备可基于大窗口的图像内容识别该多个拍摄对象,该多个拍摄对象可作为可追焦对象,电子设备的预览界面中可以为各个可追焦对象标记追踪框。
另一种可能的实现方式中,电子设备处于图2B的a所示的主界面。当电子设备检测到用户开启相机应用401的操作时,电子设备可进入图2B的b所示的拍照预览界面。该拍照界面中可包括多个按钮,例如,“人像”按钮、“拍照”按钮、“录像”按钮402、“专业”按钮与“更多”按钮403。电子设备检测到用户点击“更多”按钮403的操作时,电子设备进入如图2B的c所示界面,该图2B的c的界面中可展开显示“更多”按钮的多个功能按钮,例如,“更多”按钮可以包括但不限于:“专业PRO”按钮、“全景”按钮、“高动态范围图像(high-dynamic-range,HDR)”按钮、“延时拍摄”按钮、“水印”按钮、“文档矫正”按钮、“高像素”按钮、“微电影”按钮与主角模式按钮405。或者可以理解为,主角模式可隐藏在“更多”按钮中。
在用户点击如图2B的c所示的界面中的主角模式按钮405时,电子设备响应该次点击操作,可以进入如图2B的d所示的预览界面,其中,图2B的d所示的预览界面的相关内容可以参照图2A的d所示的预览界面的描述,在此不再赘述。
可以理解的是,本申请实施例以图2A和图2B示出了两种电子设备进入主角模式的方法,但本申请实施例不局限于以上两种进入方法,主角模式按钮除了如图2A的c与图2B的c所示的图标形式,还可以为其他形式。主角模式按钮也可设置在其他隐藏菜单中或其他窗口显示位置,本申请实施例对此不作限制。
在电子设备进入主角模式后,可以实现在大窗口录制的同时,额外生成一路用户选定的“主角”对应的视频内容在小窗口显示。可以理解的是,在电子设备进入主角模式进行录像时,电子设备可以为横屏状态也可以为竖屏状态。在横屏状态或竖屏状态中,电子设备实现主角模式的原理类似,为便于阐明本申请实施例的录像方法,以下实施例将以电子设备横屏录制为例,对主角模式的多个应用场景进行描述。
其中,本申请实施例结合图2C-图2P对主角模式中预览模式下的场景进行详细说明,以及本申请实施例结合图3A-图3L对主角模式中录制模式下的场景进行详细说明。首先对预览模式的场景进行介绍。
二、主角模式中预览模式下的场景(图2C~图2P)
1、在主角模式中的预览模式下切换追焦对象(图2C)
示例性的,图2C示出了主角模式的预览模式中选择追焦对象的界面示意图。如图2C所示:
电子设备进入主角模式的预览模式,如图2C的a所示,电子设备可以显示主角模式的预览界面。预览界面中包括多个可追焦对象,各可追焦对象可以对应标记有各自的追踪框(例如,男性人物标记追踪框311,女性人物标记追踪框312)。
电子设备可根据用户对追踪框的点击操作来确定用户选中的追焦对象。示例性的,用户希望在电子设备的小窗口中预览男性人物的追焦画面,可点击与男性人物对应的追踪框311。相应的,电子设备可以响应该点击操作,进入如图2C的b所示的界面。
如图2C的b所示的界面,电子设备选中男性人物为追焦对象时,预览界面的大窗口中悬浮出现小窗口,小窗口呈现大窗口中追焦对象所在位置对应的画面,其中,小窗口中,追焦对象可以为小窗口的居中位置,体现追焦对象的“主角”地位。可选的,在追焦对象的追踪框被触发后,追焦对象对应的追踪框颜色可以改变,例如变浅、变深或变为其他颜色,追踪框的形状也可发生改变,例如男性人物的追踪框311为虚框,女性人物的追踪框312为虚框与“+”的组合。本申请实施例中追焦对象与其他对象的追踪框样式可表现为颜色不同、大小不同及形状不同等任一组合,以便于用户区分大窗口中的追焦对象与其他对象。可选的,在追焦对象的追踪框被触发后,追焦对象对应的追踪框可以消失,这样,可以使得用户不会重复选择已选中的追焦对象。
可以理解的是,在主角模式的预览模式中,用户在选择追焦对象后可自主更改追焦对象,如图2C的b所示界面,电子设备接收到用户点击女性人物的追踪框312的操作时,进入如图2C的c所示界面。此时,小窗口中的追焦对象由男性人物切换至女性人物。人物的追踪框状态改变,例如女性人物的追踪框312颜色及形状发生改变,男性人物的追踪框311恢复为未选中时的样式,其中追踪框样式的改变可以参照图2C的b所示界面中相关的描述,在此不再赘述。
可选的,电子设备在预览模式下切换追焦对象,小窗口的预览画面中显示的对象由原追焦对象变为新的追焦对象。为使切换过程中画面会更加流畅,本申请实施例还提供了一种切换追焦对象的动态特效。示例性的,下面以男性人物为原追焦对象,女性人物为新的追焦对象为例,对动态特效的设计进行说明。
一种可能的实现中,预览界面的大窗口中包括男性人物与女性人物,小窗口中显示的追焦对象为男性人物。当电子设备检测到针对女性人物的追踪框的点击操作时,小窗口的预览画面可由男性人物的追焦显示切换为全景显示,再由全景显示切换为女性人物的追焦显示。例如,小窗口原本居中显示男性人物,在用户点击女性人物的追踪框后,小窗口的预览画面与大窗口的预览画面的裁剪比例增加,小窗口的预览画面可包括大窗口的预览画面中更多的内容,可表现为小窗口中的男性人物及所处背景等逐渐缩小,直至小窗口中可同时显示女性人物与男性人物的全景。随后小窗口针对全景中的女性人物进行居中及放大显示。可选的,全景可以是等比例缩小的大窗口的预览画面,也可以是在大窗口的预览画面中针对男性人物与女性人物共有区域进行裁剪的图像。
另一种可能的实现中,预览界面的大窗口中包括男性人物与女性人物,小窗口中显示的追焦对象为男性人物。当电子设备检测到针对女性人物的追踪框的点击操作时,小窗口的预览画面中追焦点逐渐由男性人物运镜至女性人物。例如,小窗口原本居中显示男性人物,在用户点击女性人物的追踪框后,小窗口的预览画面与大窗口的预览画面的裁剪比例不变,但小窗口的预览画面将按原裁剪比例向靠近女性人物的方向进行裁剪。示例性的,女性人物居于男性人物左侧,电子设备在切换追焦对象的过程中,小窗口中男性人物及所处背景向右平移,直至女性角色居中显示在小窗口中。
这样,电子设备在切换追焦对象的过程中,小窗口中原追焦对象切换为新的追焦对象的画面更加流畅,提升了用户的录像体验。
2、在主角模式中的预览模式下对小窗口的样式进行调整(图2D~图2J)
(1)对小窗口的位置进行调整(图2D~图2F)
在主角模式的预览模式中,电子设备的预览界面中出现小窗口后,用户还可根据需求对小窗口的样式进行调整。下面结合图2D、图2E与图2F对小窗口的调整方法进行说明。
示例性的,图2D示出了本申请实施例提供的调整小窗规格的界面示意图。如图2D的a所示,小窗口中可包括小窗口关闭按钮306和第二横竖屏切换按钮305的功能区与显示追焦对象预览画面的非功能区。用户可双指按压小窗口中非功能区的任一位置并调整双指的距离。在电子设备检测到上述按压操作时,进入如图2D的b所示界面。用户可通过调整双指的距离来控制小窗口的大小。当电子设备检测到双指距离改变时,可根据距离变化量相应的调整小窗口规格,例如,双指距离缩小时小窗口缩小,双指距离变大时小窗口变大小。用户松开双指后,小窗口的大小保持在松开手指时的大小,预览界面如图2D的c所示。
需要说明的是,一些实施例中,在主角模式的预览模式下,电子设备在调整小窗口规格时,小窗口的预览画面可相对于小窗口的原预览画面进行一定比例的放大与缩小。示例性的,在小窗口放大的过程中,小窗口所显示的预览画面中的内容不变,只是根据双指调整的距离将原预览画面按一定比例进行放大,原预览画面中的人物及背景相应放大,得到放大后的预览画面,如图2D的c所示。
一些实施例中,电子设备在调整小窗口规格时,小窗口的预览画面相对于大窗口的预览画面进行放大与缩小。示例性的,在小窗口放大过程中,小窗口所显示的预览画面中内容增多。电子设备可根据双指调整的距离增添小窗口的预览画面中的内容,例如,电子设备在大窗口的预览界面中裁剪更多内容并在小窗口中预览,表现为小窗口的预览画面中的人物与原预览画面中的人物大小一致,但预览画面中的背景增多。
本申请实施例中小窗口的规格可自定义调节,用户可将小窗口规格调整到适当大小,用户可以更加清晰的查看追焦对象的小窗口预览画面,提升用户的录制体验。
可以理解的是,因小窗口规格较小,双指操作时手指的接触面积过大,可能导致小窗口中的按钮误触发。可选的,本申请实施例提供了一种小窗口调整过程中防止按钮误触发的方法,其中,电子设备在检测到小窗口的非功能区中存在点击或长按操作时,小窗口中的小窗口关闭按钮与第二横竖屏切换按钮隐藏。电子设备检测到小窗口中不存在触控操作时,隐藏的按钮将恢复显示。
在主角模式的预览模式下,为提升用户的录制体验,电子设备还提供了一种调整小窗口显示位置的功能。示例性的,图2E示出了一种调整小窗口显示位置的方法,如图2E所示:
图2E的a所示界面中小窗口的显示位置位于大窗口的左下方,当电子设备检测到用户 点击小窗口并长按拖动小窗口的操作时,进入如图2E的b所示界面。图2E的b界面中,小窗口的显示位置可跟随用户手指移动,例如,用户长按小窗口并向上拖动时,小窗口相应向上移动。用户将小窗口拖动至预设位置后,松开手指。电子设备检测到用户的抬起操作,停止移动小窗口,小窗口则停留在手指执行抬起操作的位置处,电子设备进入如图2E的c所示界面。图2E的c界面中,小窗口被移动到左上方。
需要说明的是,一种可能的实现中,小窗口的显示位置调整后,随着电子设备镜头中人物的移动或电子设备镜头的移动等,小窗口可能对大窗口的预览画面中的人像或人脸有遮挡,影响用户的预览体验。本申请实施例可对小窗口的显示位置进行自动调整或默认调整。示例性的,电子设备可检测大窗口中人脸的显示位置与小窗口的显示位置,当电子设备检测到小窗口与人脸所处的区域有重合时,电子设备可对小窗口的显示位置自动调整,直至两个区域不再存在重合区域。或者,电子设备可检测人脸的位置与小窗口矩形边框的位置,当电子设备检测到边框与人脸区域的距离小于一定阈值时,电子设备默认停止小窗口向人脸方向的移动,以使小窗口无法移动到有人脸显示的区域。
另一种可能的实现中,小窗口的显示位置调整后,部分小窗口可能超过大窗口的边缘,用户无法预览到完整的小窗口,影响用户的预览体验。本申请实施例可对小窗口的显示位置进行自动调整或默认调整。示例性的,电子设备可检测小窗口是否完整出现在显示屏中,若部分小窗口无法完整显示,则电子设备将沿着上一次调整小窗口显示位置的反方向自动移动小窗口,直至小窗口完整显示。电子设备也可根据其他原理对小窗口的显示位置进行自动调整,本申请实施例对此不作限制。或者,电子设备可检测大窗口矩形边框与小窗口矩形边框的边界线位置,当两个矩形边框的任一边界线存在重合时,电子设备将默认停止移动小窗口,以使小窗口不能够被移动出大窗口的边缘。
可选的,主角模式的预览模式下,电子设备在调整小窗口位置的过程中,电子设备也可设置将小窗口中的按钮隐藏以防止按钮误触发,此处不在赘述。
本申请实施例中小窗口显示位置可自定义调节,用户可实时调整小窗口的位置,减少小窗口对大窗口预览画面的遮挡情况,提升用户的录制体验。
本申请实施例提供了通过手势调整小窗口的方法,该方法可灵活、快速的调整小窗口样式。本申请实施例不限制于以上方法,其中,电子设备还可以通过其他方式实现小窗口的调整。例如,电子设备可通过具备倍数放大/缩小功能的按钮调节小窗口规格。电子设备可以设置小窗口调整菜单,通过手动输入长/宽等参数调节小窗口规格。电子设备还可以通过设置移动方位按钮来向上、向下、向左或向右移动调整小窗口的位置。本申请实施例对实现小窗口调整的方法不作限制。
一种可能的实现中,本申请实施例主角模式中预览模式下的小窗口还可以具备记忆机制,下面结合图2F对主角模式的记忆机制进行说明。
示例性的,主角模式可提供调整小窗口的显示位置的功能,用户可根据自身拍摄习惯移动小窗口的位置,如图2F的a所示,小窗口被调整到预览界面的左上方位置。当电子设备检测到用户点击小窗口关闭按钮306的操作时,电子设备进入如图2F的b所示界面。图2F的b界面中,小窗口关闭。大窗口画面中无选中的追焦对象,追踪框311恢复为未选中时的样式。电子设备在接收到用户点击追踪框311的操作时,进入如图2F的c所示界面。图2F的c界面中,小窗口被重新开启,此时,小窗口的样式与图2F的a中的小窗口样式一致,例如图2F的a的界面与图2F的c界面中,小窗口的大小、位置、横竖屏显示等均相同。
本申请实施例还可设置记忆机制的时限,在电子设备未显示小窗口的时长在时限内时, 或者电子设备未使用录像功能的时长在时限内时,若电子设备再次触发显示小窗口,小窗口的样式将沿用上次关闭前的小窗口样式。在电子设备未显示小窗口的时长超过时限时,或者电子设备未使用录像功能的时长超过时限时,若电子设备再次触发小窗口,小窗口将恢复默认设置的样式。
主角模式的预览模式下,小窗口默认设置的样式可以是当天首次进入主角模式并开启小窗口时小窗口的样式,也可以是系统默认的样式。其中,时限可以设置为15分钟(min)。示例性的,图2F的b界面中的小窗口关闭,15min后,用户点击男性人物的追踪框311,电子设备进入如图2F的d图所示界面,图2F的d界面的小窗口样式可以为默认设置的样式,例如,大窗口横屏预览,小窗口竖屏预览,且小窗口出现在预览界面的左下方。
可以理解的是,一种小窗口默认设置的样式可如图2F的d界面所示,大窗口的预览方向与小窗口的预览方向不一致,比如,大窗口横屏预览时,小窗口竖屏预览;大窗口竖屏预览时,小窗口横屏预览。另一种小窗口默认设置的样式中,大窗口的预览方向与小窗口的预览方向一致,比如大窗口横屏预览时,小窗口也横屏预览;大窗口竖屏预览时,小窗口也竖屏预览。本申请实施例对小窗口默认设置的样式不作限制。
本申请实施例提供了一种主角模式中预览模式下的小窗口记忆机制,在一定时限内重新开启小窗口,小窗口样式可沿用上一次用户调整的小窗口样式,同时,电子设备可以在小窗口误关闭时自动调整至误关闭前的样式,减少用户调整小窗口样式的时间,提升了用户的录制体验。
本申请实施例中电子设备可单独设定小窗口的记忆机制,使得一段时间内第K次开启小窗口时,小窗口的样式与第K-1次的小窗口的样式一致。此外,本申请实施例中电子设备还可将小窗口的样式与追焦对象建立绑定关系。
示例性的,一些实施例中,电子设备可基于人脸识别技术设置记忆机制。电子设备选定追焦对象且对小窗口的样式进行了调整,电子设备可将该追焦对象的人脸特征及小窗口的调整数据建立绑定关系,并将数据保存在电子设备中。当电子设备再次识别到该追焦对象时,电子设备自动调用与该追焦对象绑定的调整数据,当前小窗口的样式可与上一次选定该追焦对象时小窗口的样式一致。
一些实施例中,电子设备在第K次识别到该追焦对象时,对小窗口的样式进行了调整,电子设备可保存第K次的调整数据并将新的调整数据与该追焦对象建立绑定关系。可选的,第K次的调整数据可替换第K-1次的调整数据,电子设备只保留最近一次该追焦对象对应的调整数据。可选的,电子设备可保存第K次的调整数据并将新的调整数据与该追焦对象建立新的绑定关系,电子设备可保留根据第K-1次的调整数据建立的绑定关系。当电子设备第K+1次选中该追焦对象时,电子设备可提供第K次及第K-1次的小窗口的调整数据供用户选择。
可选的,当电子设备选中追焦对象但未调整小窗口的样式时,电子设备可存储该追焦对象的人脸特征与小窗口默认设置的样式的数据并建立绑定关系。当电子设备再次识别到该追焦对象时,小窗口可显示默认设置的样式。
本申请实施例提供了一种主角模式中预览模式下的追焦对象与小窗口的记忆机制,当电子设备识别到已选中过的追焦对象时,电子设备可根据绑定关系自动调用上一次选中该追焦对象时的小窗口的调整数据,使得小窗口的样式与上一次选定该追焦对象时小窗口的样式一致,从而减少对小窗口的调整时间,提升用户的录制体验。
(2)对小窗口进行横竖屏切换(图2G~图2J)
为满足用户的多样化需求,在主角模式的预览模式下,本申请实施例可提供小窗口的横屏预览与竖屏预览,还可以支持小窗口中横屏预览与竖屏预览的切换。下面结合图2G、图2H与图2I对电子设备切换小窗口横竖屏的场景进行说明。
一种可能的实现中,大窗口的横竖屏预览与电子设备的显示屏有关,其中,电子设备水平放置时,大窗口可显示横屏预览的画面;电子设备竖直放置时,大窗口可显示竖屏预览的画面。小窗口的横竖屏预览可由横竖屏切换按钮控制,其中,横竖屏切换按钮可以是第一横竖屏切换按钮304和/或第二横竖屏切换按钮305。当电子设备检测到点击横竖屏切换按钮的操作时,小窗口可由横屏预览切换为竖屏预览,或由竖屏预览切换为横屏预览。
另一种可能的实现中,大窗口的横竖屏预览与小窗口的横竖屏预览可联动设置,当大窗口进行横竖屏预览切换时,小窗口的横竖屏预览也发生变化。例如,大窗口与小窗口均为横屏预览,大窗口切换为竖屏预览时,小窗口也切换为竖屏预览。下面以小窗口横屏预览切换为竖屏预览为例,结合上述可能的实现对三种切换小窗口横竖屏预览的方法进行说明。本申请实施例还可提供小窗口竖屏预览切换为横屏预览的方法,二者方法及原理相似,此处将不再赘述。
需要说明的是,第二横竖屏切换按钮305的图标可具备两种样式,其中第二横竖屏切换按钮305的图标可以为横屏预览时的样式,如图2G中的a界面所示,表现为横框指向竖框的形式。可以理解为小窗口当前横屏预览,当第二横竖屏切换按钮305被点击后,小窗口可由横屏预览切换为竖屏预览。第二横竖屏切换按钮305的图标还可以为竖屏预览时的样式,如图2G中的c界面所示,表现为竖框指向横框的形式,可以理解为小窗口当前竖屏预览,当第二横竖屏切换按钮305被点击后,小窗口可由竖屏预览切换为横屏预览。本申请对第二横竖屏切换按钮的图标样式不做限定。
示例性的,如图2G的a界面中显示横屏预览的小窗口,小窗口中包括第二横竖屏切换按钮305,第二横竖屏切换按钮305为横屏预览时的样式。当电子设备接收到针对第二横竖屏切换按钮305的点击操作时,电子设备进入如图2G的c图所示界面。图2G的c界面中,小窗口竖屏预览,第二横竖屏切换按钮305的图标也相应变化,改变为竖屏预览时的样式。
可以理解的是,小窗口的横竖屏切换不会影响大窗口的预览画面,例如,小窗口由横屏预览切换为竖屏预览时,大窗口的横竖屏预览不会发生变化。
可选的,为了使小窗口在横竖屏切换时增强可观赏性,电子设备可在设置动态特效。示例性的,如图2G的a所示,用户点击小窗口中的第二横竖屏切换按钮305,电子设备响应该次操作,进入图2G的b所示界面。在图2G的b界面中,小窗口可显示动态特效701,动态特效701用于提示用户小窗口正处于横竖屏切换的过程中。例如,动态特效可以是电子设备对小窗口中预览画面的模糊、柔焦、添加蒙层等处理。小窗口横竖屏切换完毕,电子设备进入如图2G的c所示界面,小窗口的动态特效消失。动态特效可使小窗口在横竖屏切换时预览画面更加流畅,减少切换过程中人物、背景等出现变形扭曲的问题,提升小窗口预览的美观性。
可以理解的是,电子设备还可以在检测到小窗口中有点击操作时,在点击的相应位置处生成突出显示的图标7010,以表示用户在小窗口中进行了点击操作,以表明小窗口获得了焦点,如图2G的b图所示。例如:电子设备在接收到双指调整小窗口规格、单击拖动调整小窗口位置和单击小窗口区域时,电子设备可以生成突出显示的图标7010。本申请对突出显示的图标7010的生成场景不作限制。
主角模式的预览界面中还包括第一横竖屏切换按钮。其中第一横竖屏切换按钮304的图 标也可具备两种样式,第一横竖屏切换按钮304的图标可以为横屏预览时的样式,如图2H中的a界面所示,表现为大矩形框中嵌套水平放置的小矩形框的形式。可以理解为小窗口当前横屏预览。第一横竖屏切换按钮304的图标还可以为竖屏预览时的样式,如图2H中的c界面所示,表现为大矩形框中嵌套竖直放置的小矩形框的形式,可以理解为小窗口当前竖屏预览。需要说明的是,本申请实施例以电子设备水平放置为例,大窗口横屏预览,所以第一横竖屏切换按钮304的图标中,大矩形为水平放置。可以理解的是当电子设备竖直放置时,大矩形可显示为竖直放置。本申请对第一横竖屏切换按钮的图标样式不做限定。
示例性的,如图2H的a界面中显示横屏预览的小窗口,电子设备的大窗口中包括第一横竖屏切换按钮304。当电子设备接收到针对第一横竖屏切换按钮304的点击操作时,进入图2H的b所示界面。图2H的b界面中,第一横竖屏切换按钮304变为展开状态,预览界面中提供横屏显示按钮703与竖屏显示按钮702。横屏显示按钮703用于指示电子设备将小窗口显示为横屏预览,竖屏显示按钮702用于指示电子设备将小窗口显示为竖屏预览。当电子设备接收到针对竖屏显示按钮702的点击操作时,电子设备进入图2H的c所示界面。图2H的c界面中,小窗口切换为竖屏预览,相应的,第一切换横竖屏切换按钮304的图标显示为竖屏预览时的样式。
可选的,一种可能的实现中,本申请实施例在基于第一横竖屏切换按钮切换小窗口横竖屏时,电子设备可由图2H的b界面直接进入到图2H的c界面。小窗口横竖屏切换过程中,小窗口中无动态特效。另一种可能的实现中,电子设备在小窗口横竖屏切换过程中也可设置动态特效,可参见图2G中的相关描述,此处不再赘述。
需要说明的是,以上两种切换小窗口横竖屏的方法中,小窗口中的第二横竖屏切换按钮305与大窗口中的第一横竖屏切换按钮304可设置联动。示例性的,当小窗口切换为竖屏预览时,第一横竖屏切换按钮304的图标为竖屏预览时的样式,第二横竖屏切换按钮305的图标也为竖屏预览时的样式,如图2H的c界面所示。
可选的,在主角模式的预览模式下,本申请实施例还提供了一种无小窗口时调整小窗口横竖屏的场景,示例性的。图2I的a界面中,电子设备进入主角模式或关闭小窗口预览时,预览界面中可以不包括小窗口。此时,第一横竖屏切换按钮304的图标显示为横屏预览时的样式,若电子设备接收到针对追焦对象追踪框的点击操作,电子设备可启动小窗口横屏预览。若电子设备接收到针对第一横竖屏切换按钮304的点击操作,可进入图2I的b所示界面。图2I的b界面中第一横竖屏切换按钮304展开为横屏显示按钮703与竖屏显示按钮702。当电子设备接收到针对竖屏显示按钮702的点击操作时,电子设备进入如图2I的c所示界面。图2I的c界面中,第一横竖屏切换按钮304的图标为竖屏预览时的样式。用户点击追焦对象的追踪框311时,电子设备响应该次点击操作,进入如图2I的d所示界面。图2I的d界面中,小窗口竖屏显示预览画面,第一横竖屏切换按钮304显示为竖屏预览时的样式,第二横竖屏切换按钮305也联动切换为竖屏预览时的样式。
可选的,电子设备首次进入主角模式或关闭小窗口预览时,预览界面中不包括小窗口。若电子设备未识别到可追焦对象,预览画面中无人物,则第一横竖屏切换按钮可隐藏。当电子设备识别到可追焦对象并标记追踪框时,第一横竖屏切换按钮可显示。
可选的,在图2I的d所示界面中,电子设备可基于第一横竖屏切换按钮304与第二横竖屏切换按钮305执行竖屏预览切换到横屏预览的过程。该场景与图2G及图2H所示场景类似,此处不做赘述。
本申请实施例还提供了一种大窗口与小窗口联动切换横竖屏的场景,如图2J所示:
示例性的,电子设备水平放置,电子设备的预览界面可如图2J的a所示,大窗口为横屏预览状态,小窗口也处于横屏预览状态。当电子设备检测到其自身竖直放置时,电子设备的大窗口切换成竖屏预览状态,小窗口也切换为竖屏预览,如图2J的b所示。
示例性的,电子设备水平放置,电子设备的预览界面中,大窗口为横屏预览状态,此时小窗口还可以为竖屏预览状态。当电子设备检测到其自身竖直放置时,电子设备的大窗口切换为竖屏预览状态,小窗口切换为横屏预览。
本申请实施例电子设备竖直放置转换为水平放置时,大窗口与小窗口横竖屏状态的变化可以是上述实施例的逆过程,此处不再赘述。
可以理解的是,电子设备的显示屏由水平放置切换为竖直放置时,大窗口由横屏切换为竖屏,小窗口相对于大窗口未发生变化,小窗口的预览画面仍为大窗口的相应位置的裁剪画面。但小窗口因电子设备放置状态的变更表现为由横屏切换为竖屏,第一横竖屏切换按钮与第二横竖屏切换按的图标也切换为竖屏预览的样式。
其中,电子设备在切换横竖屏时,可检测加速度传感器,得到X、Y和Z方向的加速度值。电子设备基于加速度值计算得到旋转角度,从而确定电子设备的横竖屏状态。在电子设备检测到自身发生旋转时,大窗口进行横竖屏切换,部分图标位置及状态也发生相应变化。例如,图2J的b图界面中,大窗口由横屏切换为竖屏,变焦按钮310的图标、大窗口的按钮、小窗口的按钮及已录制视频的预览框704等显示的内容可相应旋转,变为竖屏预览时的样式。
一种可能的实现中,电子设备在旋转屏幕的过程中,小窗口相应旋转,但小窗口中的功能按钮可不跟随旋转。例如,不论小窗口横屏预览还是竖屏预览,第二横竖屏切换按钮305始终位于小窗口的右上角的位置,如图2J的a与图2J的b所示。
另一种可能的实现中,电子设备在旋转屏幕的过程中,小窗口相应旋转,小窗口中的功能按钮也相应旋转。例如,若小窗口横屏预览时,第二横竖屏切换按钮位于小窗口的右上角位置,当电子设备顺时针转动90°(或者90°左右)时,小窗口变为竖屏预览,同时第二横竖屏切换按钮位于小窗口的右下角的位置。
3、在主角模式中的预览模式下丢失追焦对象(图2K~图2P)
以上实施例为用户正常使用主角模式进行预览的应用场景,一些实施例中,电子设备可能在预览模式中识别不到追焦对象。下面结合图2K、图2L与图2M对主角模式中预览模式下,大窗口丢失追焦对象的几种场景进行说明。
示例性的,图2K示出了本申请实施例的在主角模式的预览模式中,电子设备检测不到追焦对象时,小窗口可显示的界面示意图。
一种可能的实现方式中,电子设备镜头的位置未发生变化,追焦对象移动出镜头可拍摄范围,从而导致大窗口中追焦对象丢失。这种情况下可如图2K的a与b所示,在图2K的a的界面中,大窗口的预览画面可包括男性人物、女性人物以及路标、树木等背景,此时男性人物离开了原来的位置,电子设备识别不到追焦对象。电子设备进入如图2K的b所示界面,图2K的b界面中,小窗口的画面可以是大窗口当前画面的裁剪画面。例如,电子设备的镜头在未移动的情况下,大窗口的预览画面中的男性人物(即追焦对象)消失,女性人物、树木及路标等背景未发生变化。在电子设备的镜头未移动的情况下,小窗口的预览画面可显示追焦对象丢失前所处背景的预览画面。
另一种可能的实现方式中,人物未发生移动,电子设备的镜头偏离追焦对象,从而导致大窗口中追焦对象丢失。这种情况下可如图2K的a与c所示,图2K的c界面相对于图2K 的a所示界面,可以发现电子设备的镜头向左偏移,大窗口的预览画面中树木由左侧移动到右侧,人物移出可拍摄范围,追焦对象丢失。可以理解的是,追焦对象丢失前,小窗口显示追焦对象在大窗口相应位置处的画面(追焦位置在大窗口预览画面的右侧,小窗口显示该处的画面);在追焦对象丢失后,小窗仍显示大窗口画面中该相应位置的画面(追焦位置仍在大窗口预览画面的右侧,小窗口显示该处的画面)。例如,追焦对象丢失前,如图2K的a所示,小窗口显示大窗口右侧男性人物的画面。追焦对象丢失后,如图2K的c所示,男性人物所在位置的画面此时为树木,则电子设备的小窗口中显示该树木的预览画面。
可以理解的是,以上两种人物移动或者电子设备的镜头移动导致大窗口的追焦对象丢失的场景中,当电子设备的大窗口选中追焦对象时,小窗口可显示针对追焦对象的画面。在追焦对象丢失前,小窗口显示画面与大窗口显示画面相对应;追焦对象丢失后,小窗口显示画面仍与大窗口显示画面相对应,且对应位置与丢失前保持一致。此时,大窗口处于动态预览状态,小窗口也动态显示大窗口相应位置处的画面。
又一种可能的实现方式中,电子设备在预览模式下切换了小窗口的横竖屏状态。以小窗口横屏预览切换为竖屏预览为例,当电子设备由横屏切换为竖屏时,原来横屏预览模式下用于裁剪小窗口的数据可能出现丢失,或横屏预览的数据与竖屏预览的数据不匹配,导致切换后小窗口无法获取大窗口中的追焦位置,进而导致小窗口丢失追焦对象。该场景后续结合图2O与图2P进行详细说明,此处不再赘述。
又一种可能的实现方式中,在主角模式的预览模式下,追焦对象丢失后,电子设备的小窗口可显示追焦对象丢失前的最后一帧画面的静态图片。示例性的,如图2K的d所示,大窗口的画面中追焦对象丢失,电子设备可保留能够识别男性人物的最后一帧画面,小窗口可以不动态追踪大窗口的预览画面,只显示最后一帧画面的静态图片。
又一种可能的实现方式中,在主角模式的预览模式下追焦对象丢失后,小窗口可显示图2K的b、c及d所示界面。以小窗口图2K的c界面为例,电子设备在追焦对象丢失时,电子设备进入如图2K的e所示界面。图2K的e界面中,电子设备为小窗口添加了蒙层。示例性的,蒙层可以为悬浮于小窗口预览画面上方的灰度层,处于蒙层状态的小窗口明暗度低于大窗口,可以提醒用户当前小窗口的预览出现异常。
可以理解的是,电子设备在追焦对象丢失时,小窗口所呈现的画面可以是图2K的b、c及d所示的任一界面,也可以是图2K的b、c及d所示任一界面与蒙层状态的组合,本申请实施例对此不作限制。
本申请实施例提供了在主角模式的预览模式下,几种追焦对象丢失后小窗口显示界面的实现方式,可以理解的是,小窗口也可有其他显示界面的实现方式,此处不再进行列举。下面以上述一种实现方式为例,对预览模式下大窗口追焦对象丢失后,电子设备的处理过程进行示例性说明,以下场景中可将男性人物选定为追焦对象。
场景一、示例性的,图2L的a所示界面中,当大窗口中的男性人物作为追焦对象丢失时,大窗口与小窗口中不显示男性人物,且小窗口呈蒙层状态。在一定时间内,电子设备的小窗口可保持显示预览画面,例如,时间可以为5s。若5s内电子设备重新识别到男性人物,电子设备进入如图2L的b所示界面,小窗口可自动追焦男性人物并恢复男性人物的预览画面,电子设备取消小窗口的蒙层状态。若5s内电子设备一直未识别到男性人物,电子设备则由图2L的a界面进入图2L的c界面,图2L的c界面中,小窗口关闭,电子设备保留大窗口的预览画面。
场景二、示例性的,电子设备在大窗口中丢失男性人物(即追焦对象)后,5s内一直未 识别到男性人物,终端进入图2M的a界面,图2M的a界面中小窗口已关闭。若电子设备在小窗口关闭时,重新识别到男性人物的追焦对象,则进入如图2M的c所示界面。图2M的c界面中,小窗口重新显示追焦对象的预览画面。
一种由图2M的a界面进入图2M的c界面的实现方式中,电子设备在未开启小窗口时识别到多个可追焦对象(可追焦对象中可包括丢失前的追焦对象,也可不包括丢失前的追焦对象),大窗口的预览画面中包括多个可追焦对象及对应的追踪框,如图2M的b所示。当电子设备检测到用户点击追踪框311的操作时,进入如图2M的c所示界面。图2M的c界面中,小窗口可追焦用户选中的追焦对象。在该过程中,用户可重新点击追踪框选择追焦对象或更换追焦对象。
另一种实现方式中,电子设备在识别到丢失前的追焦对象时,小窗口可自动恢复并显示追焦对象。示例性的,如图2M的a到图2M的c所示,电子设备在小窗关闭后的一段期间内识别到多个可追焦对象,其中,基于人脸识别技术,电子设备可确定当前多个可追焦对象中是否包括丢失前的追焦对象。若包括丢失前的追焦对象,则小窗口可自动对追焦对象进行追焦预览。若不包括,电子设备可执行上述点击追踪框重新选择追焦对象的方法。
其中,在主角模式的预览模式下,大窗口中的追焦对象丢失,若电子设备在追焦对象丢失的5秒内检测到用户点击开始录制的操作,大窗口开始录制无追焦对象的视频。而小窗口中无追焦对象,无法针对追焦对象裁剪大窗口的视频,也无法生成追焦视频。此时小窗口可执行如图2N所示的方法。
场景三、示例性的,图2N的a界面中,大窗口中的男性人物丢失,且丢失时间未超过5s,此时,小窗口呈现蒙层状态,并且小窗口中的男性人物也不存在。用户点击大窗口中的开始录制按钮303,电子设备响应该次操作,进入如图2N的b所示界面。图2N的b界面中,电子设备的大窗口开始录制视频,大窗口的录制画面中显示录制时间,例如,录制中的录制时间可包括但不限于圆点和时间组合的形式。小窗口显示蒙层状态的预览画面。可以理解的是,蒙层状态的小窗口仍可以动态显示大窗口中相应位置的画面,但小窗口只是处于预览模式,无法对画面进行录制及保存视频。
可选的,一些实施例中,在图2N的a界面切换为图2N的b界面时,第一横竖屏切换按钮304与第二横竖屏切换按钮305可显示图标。一些实施例中,大窗口启动录制后,横竖屏切换按钮可隐藏,如图2N的b所示。
在小窗口处于蒙层状态时,若电子设备在大窗口开始录制的5s内识别到追焦对象,小窗口可消除蒙层状态并开始录制,否则小窗口关闭。可理解为,小窗口的蒙层状态可保持5s,5s内电子设备找回追焦对象,则小窗口开始录制针对追焦对象的追焦视频。5s内电子设备始终未找回追焦对象,则小窗口消失。
例如,图2N的b界面中,大窗口中无追焦对象且处于录制视频中,小窗口中无追焦对象且处于蒙层状态。电子设备在大窗口开始录制的第3s识别到男性人物,电子设备进入图2N的c界面。图2N的c界面中,小窗口的蒙层状态消失,且小窗口针对追焦对象自动启动录制,此时大窗口录制时间(3s)与小窗口的录制时间(1s)不一致,录制时差可以为电子设备检测到用户点击录制按钮到重新识别追焦对象的时间差。
又例如,图2N的b界面中,大窗口中无追焦对象且处于录制视频中,小窗口中无追焦对象且处于蒙层状态。若电子设备追焦对象丢失的5s内未重新识别到追焦对象,电子设备进入图2N的d界面。图2N的d界面中,小窗口关闭,电子设备只保留大窗口的录制画面。
以上场景可以理解为追焦对象丢失后,小窗呈现的蒙层状态,且蒙层状态可以保持5s。 若从追焦对象丢失到找回追焦对象的时间在5s内,则小窗口自动开始对追焦对象进行录制。若从追焦对象丢失到找回追焦对象的时间超过5s或一直未找回追焦对象,则小窗口关闭。
可以理解的是,在大窗开始录制且小窗口因追焦对象丢失超过5s而关闭时,若电子设备重新识别到追焦对象,用户可基于可追焦对象的追踪框重新选择追焦对象。电子设备响应该次操作后,小窗口自动出现并开始录制。该场景与图3B所示场景相似,此处不做赘述。
在主角模式的预览模式下,电子设备可能因镜头移动或人物移动等人为因素导致大窗口的追焦对象丢失。电子设备也可能因小窗口横竖屏切换时,小窗口数据丢失或数据不匹配导致追焦对象丢失。本申请实施例提供了一种横竖屏切换导致追焦对象丢失的处理方法。
示例性的,针对小窗口切换横竖屏导致追焦对象丢失的场景,本申请实施例提供了如图2O与图2P所示的处理方法。
图2O的a界面中,小窗口呈横屏预览状态,且小窗口中包括追焦对象。电子设备接收到针对横竖屏切换按钮的点击操作时(例如,图2O的a界面中,用户点击了第二横竖屏切换按钮305),电子设备可进入如图2O的b所示界面。电子设备因小窗口横竖屏切换导致小窗口中的追焦对象丢失,图2O的b界面中小窗口的预览画面无追焦对象且处于蒙层状态,追踪框311恢复未选中时的样式。可以理解的是,由于小窗口的数据丢失或不适用,小窗口无法准确的追踪追焦位置,但小窗口仍处于预览状态,可实时显示大窗口中任一位置的裁剪画面。例如,图2O的b界面中,小窗口的追焦位置由原来的男性人物所处位置转换为树木所处位置。当电子设备接收到用户点击追踪框311的操作时,进入图2O的c界面。电子设备重新选中追焦对象,图2O的c界面中,小窗口的预览画面出现追焦对象。电子设备选中的追焦对象可以是丢失前的追焦对象,也可以是其他对象,此处不作限制。
可选的,电子设备也可在重新检测到追焦对象时,小窗口恢复追踪该追焦对象。示例性的,电子设备的小窗口由横屏切换为竖屏时,小窗口的追焦对象可能丢失。当电子设备再次识别到丢失前的追焦对象时,小窗口中自动显示追焦对象且蒙层状态消失。例如,电子设备的小窗口横竖屏切换前,追焦对象为男性人物,如图2O的a所示;小窗口横竖屏切换过程中,男性人物消失,小窗口呈现蒙层状态,如图2O的b所示;电子设备在小窗口切换完毕后,再次识别到男性人物,在小窗口自动恢复对男性人物的追踪,如图2O的c所示。
可以理解的是,小窗口在进行横竖屏切换时,电子设备需重新计算小窗口相对于大窗口的裁剪位置。电子设备可在接收用户针对追焦对象的点击操作时,重新获取追焦位置的数据,对该追焦位置的画面进行裁剪。这样,可减少小窗口横竖屏切换时追焦对象丢失的场景。
可选的,当小窗口因横竖屏切换导致追焦对象丢失后,小窗口的预览画面中不包括追焦对象且处于蒙层状态,如图2P的a所示。在一段时间后(例如,丢失追焦对象后的5s),若电子设备未接收到用户针对追踪框的点击操作,电子设备可进入如图2P的b所示界面。图2P的b图界面中包括大窗口的预览画面,小窗口则关闭。
可选的,当小窗口因横竖屏切换导致追焦对象丢失后,小窗口的预览画面中不包括追焦对象,如图2P的c所示。电子设备在小窗口丢失追焦对象期间(例如,丢失追焦对象后的5s内),检测到针对大窗口中开始录制按钮303的点击操作,电子设备可进入图2P的d界面。图2P的d界面显示大窗口的录制画面及录制时间,小窗口消失。后续电子设备也可接收针对追踪框的点击操作,启动小窗口的录制,此处不做赘述。
本申请实施例提供了几种主角模式的预览模式下丢失追焦对象的场景,基于以上实施例的方法,电子设备可在追焦对象丢失的情况下,选择相应的处理方法,提升了电子设备使用 主角模式进行录制的灵活性与准确性,进而提升了用户的录制体验。
三、主角模式中录制模式下的场景(图3A~图3L)
以上实施例对主角模式的预览模式进行了说明,下面将结合附图对主角模式的录制模式进行描述。在主角模式的录制模式时,电子设备可启动小窗口录制针对追焦对象的视频,并保存该视频。
1、开始大、小窗口录制(图3A~图3D)
示例性的,首先结合图3A、图3B与图3C介绍电子设备启动小窗口录制的场景。
一种启动小窗口录制的场景中,大窗口与小窗口的视频可同时开始录制。图3A的a界面中,大窗口的预览画面中包括追焦对象(例如男性人物),小窗口显示追焦对象的预览画面。当电子设备检测到针对大窗口中开始录制按钮303的点击操作时,电子设备进入如图3A的b所示界面。电子设备同时启动大窗口的录制与小窗口的录制,小窗口可实时针对大窗口中的追焦对象进行显示。图3A的b界面中,小窗口显示录制画面以及录制时间。又例如,小窗口中还显示录制模式的结束小窗口录制按钮315,大窗口中开始录制按钮303转换为录制模式下的暂停录制按钮313与结束录制按钮314。大窗口与小窗口可分别显示各自的录制时间,其中大窗口与小窗口的录制时间可保持一致。为美化录制界面以及减少对追焦对象的遮挡,本申请实施例中录制时间的显示位置可以如图3A的b所示,录制时间也可设置在不影响录制的其他位置。
可选的,一些实施例中,电子设备在由预览模式进入录制模式时,第一横竖屏切换按钮、第二横竖屏切换按钮、变焦按钮及小窗口关闭按钮可消失,如图3A的b图。一些实施例也可保留这些按钮,本申请实施例对此不作限制。
另一种启动小窗口录制的场景中,大窗口与小窗口的视频可先后进行录制。图3B的a界面中,大窗口的预览画面中未包括追焦对象,电子设备未开启小窗口。当电子设备检测到针对大窗口中开始录制按钮303的点击操作时,电子设备进入如图3B的b所示界面。图3B的b界面中,电子设备启动大窗口的录制,大窗口中显示录制时间。一段时间后,电子设备识别到追焦对象,大窗口的录制画面可如图3B的c所示。图3B的c界面中包括男性人物以及男性人物所对应的追踪框311。电子设备在录制时间为第7s接收到用户针对男性人物的追踪框311的点击操作时,电子设备启动小窗口的录制并进入如图3B的d所示界面。图3B的d界面中,小窗口中可以显示追焦对象的录制画面、录制时间以及小窗口录制按钮等,小窗口可实时针对大窗口中的追焦对象进行录制。
又一种启动小窗口录制的场景中,大窗口与小窗口的视频可先后进行录制。图3C的a界面中,大窗口的预览画面中包括追焦对象,电子设备未选中追焦对象导致小窗口未开启。电子设备响应于用户针对开始录制按钮303的点击操作,电子设备启动大窗口的录制并进入如图3C的b所示界面。图3C的b界面中,大窗口显示录制画面及录制时间,电子设备未开启小窗口。在大窗口的录制过程中,电子设备检测到用户选定追踪框311的点击操作时,电子设备显示图3C的c所示界面。图3C的c界面中,电子设备保持大窗口的录制以及启动小窗口的录制。
电子设备可以基于以上场景开启小窗口的视频录制,并得到多路视频。需要说明的是,小窗口可显示大窗口中有关追焦对象的画面,但小窗口录制的视频与大窗口录制的视频为多个独立的视频,并不是一个大窗口录制画面中嵌套小窗口的画中画形式的合成视频。
需要说明的是,若电子设备未开启小窗口的录制,则电子设备可得到大窗口录制的一路视频。若电子设备开启小窗口的录制,则电子设备可得到大窗口录制的一路视频与小窗口录 制的多路视频。例如,在大窗口录制视频期间,电子设备可多次开启小窗口录制,其中,电子设备在检测到针对结束小窗口录制按钮的点击操作时,可结束小窗口的录制,得到一路视频。当小窗口再次开启录制后,电子设备可得到一路新的视频。小窗口得到的视频数量可与小窗口开启录制的次数相关。
在主角模式的录制模式下,本申请实施例还提供了4种电子设备的小窗口录制时的界面示意图。如图3D所示。
示例性的,电子设备大窗口与小窗口在录制时,录制画面可如图3D的a所示。用户将电子设备依次顺时针旋转90°(或90°左右),电子设备大窗口与小窗口的录制界面可如图3D的b、c与d所示。其中,录制时间与小窗口的结束录制按钮可随横竖屏切换进行适应性的调整。
图3D示例性的给出了4种录制模式下的界面示意图。可以理解的是,主角模式的录制模式下,小窗口默认设置的样式可如图3D所示,大窗口的录制方向与小窗口的录制方向不一致。例如,图3D的a界面中,大窗口横屏录制,小窗口竖屏录制;又例如,图3D的b界面中,大窗口竖屏录制,小窗口横屏录制。小窗口默认设置的样式还可以是大窗口的录制方向与小窗口的录制方向一致,例如,大窗口横屏录制,小窗口横屏录制;又例如,大窗口竖屏录制,小窗口横屏录制。本申请实施例对小窗口默认设置的样式不作限制。
可以理解的是,在电子设备旋转的过程中,小窗口的相对显示位置固定(例如,图3D中小窗口始终位于靠近摄像头的角落附近)。基于人像识别技术,电子设备可实时锁定追焦对象的位置,使得小窗口中始终追踪追焦对象并显示追焦对象,例如图3D中,电子设备旋转后,小窗口仍追焦男性人物并且男性人物处于居中位置。
由于小窗口的显示位置固定,在电子设备旋转的过程中,小窗口可能对大窗口中的人物有遮挡,如图3D的c所示。一种可能的实现中,用户可手动将小窗口移动到未遮挡位置。另一种可能的实现中,电子设备可检测小窗口与大窗口中追焦对象是否存在重叠区域。若存在,则自动调节小窗口显示位置,直至两者不存在重叠区域。
本申请实施例提供了几种主角模式下电子设备开启小窗口录制的场景,用户可根据实际情况进行相应操作以启动小窗口的录制,使得主角模式的录制更加方便与灵活,提升用户的录制体验。
2、在主角模式中的录制模式下对小窗口的样式进行调整(图3E~图3H)
在主角模式的录制模式下,电子设备的录制界面中出现小窗后,用户还可根据需求对小窗口的样式进行调整。下面结合图3E-图3H对小窗口的调整方法进行说明。
示例性的,图3E示出了在主角模式的录制模式下,使用小窗口中结束小窗口录制按钮的场景示意图。
录制模式的小窗口中包括结束小窗口录制按钮315。电子设备可基于用户对结束小窗口录制按钮315的操作,在小窗口录制过程中,随时结束小窗口的录制。示例性的,图3E的a界面中电子设备在大窗口录制到第4s时接收到用户针对小窗口中结束小窗口录制按钮315的点击操作,电子设备可进入如图3E的b所示界面。图3E的b界面中,小窗口关闭,大窗中无选中的追焦对象,追踪框311恢复未选中时的样式。此时,小窗口已结束录制,电子设备可保存小窗口录制的视频。一段时间后,如图3E的c所示界面,电子设备在大窗口录制到第7s时接收到针对追踪框311的点击操作,电子设备可进入如图3E的d所示界面。图3E的d界面可包括小窗口,小窗口开始录制视频。图3E的d中录制的视频可以与图3E的a中结束录制的视频不为同一视频。例如,在第4s结束小窗口录制时,电子设备保存第一段 4s的视频。在第7s时电子设备选定追焦对象,小窗口开始录制第二段视频。
可以理解的是,小窗口中的结束小窗口录制按钮315可控制小窗口的录制,但小窗口的录制与否对大窗口的录制不造成影响,即电子设备在执行如图3E的过程时,大窗口始终保持录制。
此外,在主角模式的录制模式下,电子设备也可设置记忆机制,在15min内重新启动小窗口的录制,则当前的小窗口样式与前次小窗口的样式一致,比如图3E的a与图3E的d中的小窗口的位置、大小、横竖屏录制等相同。记忆机制可参考图2F的描述,此处不做赘述。
在主角模式的录制模式下,电子设备启动小窗口录制时,用户还可对小窗口的规格进行调整。示例性的,用户可通过双指调节小窗口的规格,电子设备可检测用户双指点击显示屏的位置,根据两个点击位置的距离控制小窗口的放大与缩小,小窗口规格的调整过程可如图3F的a至c。此处对小窗口的调整过程可参见图2D的描述,此处不做赘述。可以理解的是,小窗口调整期间不会影响大窗口与小窗口的录制。
需要说明的是,一种可能的实现中,在主角模式的录制模式下,电子设备调节小窗口的规格时,小窗口的录制画面可相对应的放大与缩小。示例性的,在小窗口放大过程中,小窗口录制画面不发生改变,只是相应的放大,这样使得用户能够清晰的浏览小窗口录制过程中的画面。在这种情况下,录制过程中小窗口的调节不会影响小窗口录制视频,即在小窗口视频的播放过程中,不会出现忽然放大或缩小的不连续画面。该方法提升了录制过程的可观赏性,同时不会影响视频播放时的流畅性。
另一种可能的实现中,电子设备调节小窗口的规格时,小窗口的预览画面相对于大窗口进行放大与缩小,示例性的,在小窗口放大过程中,小窗口预览画面发生改变,小窗口中的录制内容增多。即在小窗口视频的播放过程中,画面中的内容增多,追焦对象相应缩小。这种方法中,用户可基于小窗口的放大与缩小调节追焦对象在小窗口视频中的显示比例,追焦对象可得到更好的展示,进而提升用户的录制体验。
在主角模式的录制模式下,电子设备还可以对小窗口的显示位置进行调整。
示例性的,用户可通过长按拖动的操作调节小窗口的显示位置,电子设备可检测用户点击并拖动时的操作,小窗口可根据用户手指的移动而调整在大窗口中的位置,小窗口位置的调整过程可如图3G的a至c。此处对小窗口的调整过程可参见图2E的描述,此处不做赘述。可以理解的是,小窗口调整期间不会影响大窗口与小窗口的录制。
可选的,在主角模式的录制模式下,当用户对小窗口的大小与位置进行调整时,电子设备也可隐藏小窗口中的按钮。例如,电子设备在检测到手指接触显示屏时,将隐藏如图3G中的结束小窗口录制按钮315。这样,可防止用户误触发按钮导致小窗口结束录制。
在主角模式的录制模式下,电子设备启动小窗口录制时,可设置隐藏模式提升用户的录制体验。示例性的,如图3H的a所示,小窗口中包括录制时间与结束小窗口录制按钮315。当电子设备接收到用户点击小窗口非功能区时,小窗口的结束小窗口录制按钮315隐藏,如图3H的b所示。当电子设备再次接收到用户点击小窗口时,电子设备可进入如图3H的c所示界面。图3H的c界面中结束小窗口录制按钮恢复。
可选的,电子设备在一定时间未接收到点击操作时,小窗口可自动隐藏按钮,大窗口可隐藏追踪框。例如,时间可以设定为5s。当隐藏模式下的电子设备接收到点击操作时,隐藏的内容将恢复显示。这样,在录制过程中可减少按钮对录制画面的遮挡,用户可沉浸式体验录制过程,提升用户的录制体验。
3、在主角模式中的录制模式下切换追焦对象(图3I)
本申请实施例还提供了一种在主角模式的录制模式下切换追焦对象的方法,如图3I所示。示例性的,图3I的a界面中,在主角模式的录制场景下,大窗口中追焦对象为男性人物,男性人物对应的追踪框311突出显示。小窗口中显示男性人物的录制画面。电子设备检测到用户点击女性人物对应追踪框312的操作时,进入图3I的b界面。电子设备将追焦对象由男性人物变更为女性人物。图3I的b界面中,大窗口中追焦对象为女性人物,女性人物对应的追踪框312突出显示。小窗口中显示女性人物的录制画面。
可选的,电子设备在录制模式下切换追焦对象时,也可设置动态特效,提升追焦对象切换过程中录制画面的流畅性。动态特效可参见图2C的描述,本申请实施例对此不做赘述。
本申请实施例提供了几种灵活调整小窗口录制画面的场景,以提升用户在录制过程中的体验。
4、暂停录制(图3J)
本申请实施例提供的录制方法,在主角模式的录制模式下,电子设备可提供暂停录制功能。
示例性的,如图3J的a所示界面,电子设备处于录制过程中,大窗口可包括暂停录制按钮313、结束录制按钮314与大窗口的录制时间。小窗口可包括结束小窗口录制按钮315与小窗口的录制时间。电子设备在接收到针对暂停录制按钮313的点击操作时,电子设备进入如图3J的b所示界面。图3J的b界面中,大窗口与小窗口同时暂停录制。暂停录制按钮313更改为继续录制按钮1301。继续录制按钮1301用于指示电子设备继续本次录制暂停状态的视频。在大窗口和小窗口中,录制时间为电子设备暂停录制的时间,暂停录制下的录制时间可表现为“||”与时间的组合。当电子设备接收到针对继续录制按钮1301的点击操作时,电子设备的大窗口与小窗口同时恢复录制,如图3J的c所示。
需要说明的是,电子设备在暂停录制期间,大窗口可实时显示摄像头获取的图像,小窗口可实时显示追焦对象的图像,但电子设备不会保存大窗口与小窗口所显示的图像。
可以理解的是,大窗口暂停后的视频与暂停前的视频为同一视频,小窗口暂停后的视频与暂停前的视频也为同一视频,例如,用户在第4s点击暂停录制按钮,电子设备响应该次点击操作并暂停视频录制,视频录制时间为4s。一段时间后,电子设备接收到针对继续录制按钮的点击操作时,电子设备在4s视频的基础上开始录制第5s的视频。
5、在主角模式中的录制模式下丢失追焦目标(图3K~图3L)
在主角模式的录制模式下,电子设备在录制过程中可能出现追焦对象丢失的情况,下面结合图3K与图3L对录制过程中丢失追焦对象的处理方法进行说明。
示例性的,如图3K的a所示界面,电子设备大窗口与小窗口均处于录制中,其中,小窗口中有追焦对象。当电子设备如图3K的b所示识别不到大窗口中的追焦对象时,小窗口中的追焦对象也丢失,小窗口保持录制并处于蒙层状态。一些实施例中,追焦对象丢失后,小窗口可继续录制追焦对象丢失前所处位置的画面,录制画面可以是不包括追焦对象的空镜,录制时间可以是5s。若电子设备在追焦对象丢失后5s内重新识别到追焦对象,电子设备则进入如图3K的c所示界面,小窗口保持追焦对象丢失前的状态。该场景中,追焦对象的丢失不会对小窗口的追焦视频造成影响,小窗口始终保持录制。在追焦对象找回并恢复录制时,电子设备可将小窗口中追焦对象丢失前的视频、空镜视频与追焦对象找回后的视频进行剪辑。一种可能的实现中,电子设备可将空镜删除,并将追焦对象丢失前的视频与追焦对象找回后的视频进行拼接,合成一路视频。另一种可能的实现中,电子设备可将空镜视频进 行模糊、柔焦、添加蒙层等处理,减少空镜视频对整体视频的连贯性的影响,提升后续用户查看录制视频的体验。
若电子设备在追焦对象丢失后5s内未识别到追焦对象,电子设备则由图3K的b所示界面进入如图3K的d所示界面。图3K的d界面中,电子设备继续进行大窗口的录制,暂停小窗口的录制,其中,小窗口可以仍呈现蒙层状态。例如,电子设备在第6s检测不到追焦对象,以及在随后的5s内未识别到追焦对象,则电子设备在第11s暂停小窗口的录制,大窗口的录制则不会受到干扰。这种场景下,若电子设备未找回追焦对象或未结束小窗口录制,则小窗口一直处于暂停状态且呈现蒙层。或者,电子设备也可以结束小窗口录制,不再在大窗口的录制界面中显示小窗口以及小窗口中的内容。
需要说明的是,电子设备的小窗口暂停录制时,小窗口可持续追踪大窗口中相对位置的画面,但电子设备不会进行小窗口的录制。电子设备也可以在小窗口暂停录制时,小窗口显示录制时最后一帧的静态画面,小窗口不追踪显示大窗口中相对位置的画面。
当电子设备在追焦对象丢失后的5s内未找回追焦对象,小窗口暂停录制时,电子设备录制界面如图3K的d所示。在小窗口暂停录制的过程中,电子设备识别到追焦对象,小窗口可自动恢复录制,进入如图3K的e与f所示界面。例如,电子设备在第11s暂停小窗口录制。在15s时,电子设备识别到追焦对象并恢复小窗口录制,此时,小窗口可在11s视频的基础上继续录制第12s的视频。
电子设备在小窗口录制模式中遇到追焦对象丢失时,可执行上述过程。另一种可能的场景中,电子设备可在大窗口暂停录制时遇到追焦对象丢失的情况,如图3L所示:
示例性的,图3L的a界面可以是电子设备检测到针对大窗口中暂停录制按钮的点击操作时进入的界面,大窗口与小窗口同时处于暂停录制的状态。电子设备暂停录制时可处于预览状态,即大窗口与小窗口可持续追踪追焦对象的预览画面,但不进行录制。在电子设备暂停录制并预览的阶段,电子设备可出现检测不到追焦对象的情况,如图3L的b所示。电子设备在未识别追焦对象时,可进入图3L的b界面。图3L的b界面中小窗口自动呈现蒙层状态,蒙层状态可提示用户追焦对象丢失,电子设备需找回追焦对象或重选追焦对象以恢复录制。
可选的,一种可能的实现中,图3L的b界面中,小窗口处于暂停录制状态且呈现蒙层。若电子设备未找回追焦对象或未结束/继续录制,则小窗口的蒙层状态一直存在。
本申请实施例提供了几种主角模式下录制模式下追焦对象丢失的场景,电子设备可针对场景执行相应的处理方法,减小追焦对象丢失对录制过程造成的影响,提升用户的录制体验。
四、结束录制以及退出主角模式(图3M)
用户在没有使用主角模式的需求时,可选择退出主角模式,恢复常规的录像模式。下面结合图3M对本申请实施例提供的退出主角模式的场景进行说明,如图3M所示:
示例性的,当电子设备接收到针对图3M的a界面中结束录制按钮314的点击操作时,电子设备可同时结束大窗口的录制与小窗口的录制并进入图3M的b界面。电子设备结束录制时,可同时保存大窗口录制的视频与小窗口录制的视频。电子设备可将两个视频保存在同一路径,也可以保存在不同路径。例如,大窗口的视频与小窗口的视频可保存至相册的文件夹下,也可将大窗口的视频保存到常规路径,小窗口的视频保存到相册中主角模式的文件夹下。本申请实施例对两个视频的保存路径不作限制。
图3M的b界面中,大窗口与小窗口已结束录制并恢复到预览模式。当接收到针对退出主角模式按钮307的点击操作时,电子设备进入如图3M的c所示界面。电子设备恢复常规 的录像模式。当然,电子设备也可在图3M的a界面中检测到对结束录制按钮314的点击操作后,直接退出主角模式,并显示图3M的c所示界面。或者,用户也可以通过手势等方法触发电子设备退出主角模式,本申请实施例对此不作任何限制。
五、查看主角模式下拍摄得到的大窗视频和小窗视频(图3N)
可选的,用户可基于相机应用的相册浏览大窗口录制的视频与小窗口录制的多路视频,多路视频的显示顺序可以为视频的录制顺序,即电子设备可根据录制视频的结束时间点或开始时间点进行排序。多路视频的显示顺序还可以为视频的录制倒序,即电子设备可根据录制视频的结束时间或开始时间进行倒序排列。
可选的,大窗口录制的视频与小窗口录制的视频可显示在同一相册界面的视频缩略图中。为便于区分大窗口录制的视频与小窗口录制的视频,电子设备可为小窗口录制的视频设置标识。例如,电子设备可为小窗口录制的视频添加外边框、字体及图形等,电子设备还可设置小窗口录制的视频缩略图大小,使得小窗口与大窗口所录制的视频缩略图存在大小差异。可以理解的是,本申请实施例对相册中视频缩略图的形式不作限制。
示例性的,一种视频缩略图的排列顺序可如图3N所示。用户可基于图3N的a所示界面浏览录制得到的视频,当电子设备检测到针对视频图标1601的点击操作时,电子设备进入图3N的b所示界面。图3N的b界面可显示当前已录制的视频缩略图,其中,视频1602、视频1603与视频1604可以为单次使用主角模式进行录像得到的多路视频。下面结合具体的录制场景对视频顺序进行说明。
例如,电子设备基于主角模式进行录制,录制界面中包括大窗口与小窗口,大窗口中显示男性人物和女性人物,小窗口中显示男性人物。当电子设备检测到针对开始录制按钮的点击操作时,电子设备的大窗口中录制包括男性人物和女性人物的视频1602,小窗口中录制追焦男性人物的视频1604。视频1604录制到35s时,电子设备检测到针对结束小窗口录制按钮的点击操作,电子设备结束录制视频1604,并将其进行保存;大窗口则持续录制视频1602。5s后,电子设备检测到针对女性人物追踪框的点击操作,电子设备的小窗口中录制追焦女性人物的视频1603。在大窗口的视频1602录制到80s时,电子设备检测到针对结束录制按钮的点击操作,电子设备结束录制视频1603与视频1604,并先后保存视频1603与视频1602。
上述录制场景中,电子设备单次使用主角模式进行录像,得到了三路视频。电子设备可根据三路视频先后结束的时间进行保存,而先保存的视频排列在图3N的b界面中靠后的位置。例如,视频的保存顺序为视频1604、视频1603、视频1602;视频缩略图的排列顺序与保存顺序相反,为视频1602、视频1603、视频1604。
可以理解的是,本申请实施例示例性的对视频缩略图的排列顺序及视频的保存顺序进行了说明,本申请实施例对此不作限制。
可以理解的是,大窗口录制的视频可包括图像与声音,小窗口录制的视频也可包括图像与声音。例如,电子设备在从大窗口的图像上裁剪出小窗口的录制画面,从而获取小窗口视频时,电子设备还可将声音同步到小窗口的视频中。
本申请实施例提供了一种退出主角模式的场景,电子设备可切换常规录像与主角模式录像。用户可根据自身需求选择常规录像与主角模式录像,提升了用户的使用体验。
需要说明的是,上述用户界面仅为本申请提供的一些示例,不应视为对本申请的限制。
下面介绍本申请实施例涉及的装置。
图4为本申请实施例提供的一种电子设备的硬件结构示意图。
电子设备可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(Universal Serial Bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(Subscriber Identification Module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本发明实施例示意的结构并不构成对电子设备的具体限定。在本申请另一些实施例中,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(Application Processor,AP),调制解调处理器,图形处理器(Graphics Processing unit,GPU),图像信号处理器(Image Signal Processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(Digital Signal Processor,DSP),基带处理器,和/或神经网络处理器(Neural-network Processing Unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。其中,控制器可以是电子设备的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。处理器110中还可以设置存储器,用于存储指令和数据。
在本申请提供的实施例中,电子设备可以通过处理器110执行所述拍摄方法。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行电子设备的各种功能应用以及数据处理。
天线1和天线2用于发射和接收电磁波信号。移动通信模块150可以提供应用在电子设备上的包括2G/3G/4G/5G等无线通信的解决方案。无线通信模块160可以提供应用在电子设备上的包括无线局域网(Wireless Local Area Networks,WLAN)(如无线保真(Wireless Fidelity,Wi-Fi)网络),蓝牙(Bluetooth,BT),全球导航卫星系统(Global Navigation Satellite System,GNSS),调频(Frequency Modulation,FM),近距离无线通信技术(Near Field Communication,NFC),红外技术(Infrared,IR)等无线通信的解决方案。
电子设备通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(Liquid Crystal Display,LCD),有机发光二极管(Organic Light-Emitting Diode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(Active-Matrix Organic Light Emitting Diode的,AMOLED),柔性发光二极管(Flex Light-Emitting Diode,FLED),Mini LED,Micro LED,Micro-OLED,量子点发光二极管(Quantum Dot Light Emitting Diodes,QLED)等。在一些实施例中,电子设备可以包括1个或N个显示屏194,N为大于1的正整 数。
电子设备可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现获取功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像或视频。ISP还可以对图像的噪点,亮度,颜色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(Charge Coupled Device,CCD)或互补金属氧化物半导体(Complementary Metal-Oxide-Semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像或视频信号。ISP将数字图像或视频信号输出到DSP加工处理。DSP将数字图像或视频信号转换成标准的RGB,YUV等格式的图像或视频信号。在一些实施例中,电子设备可以包括多个摄像头193。
视频编解码器用于对数字视频压缩或解压缩。电子设备可以支持一种或多种视频编解码器。这样,电子设备可以播放或录制多种编码格式的视频,例如:动态图像专家组(Moving Picture Experts Group,MPEG)1,MPEG2,MPEG3,MPEG4等。
陀螺仪传感器180B可以用于确定电子设备的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。
加速度传感器180E可检测电子设备在各个方向上(一般为三轴)加速度的大小。当电子设备静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
触摸传感器180K,也称“触控面板”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备的表面,与显示屏194所处的位置不同。
需要说明的是,图4所示的电子设备中其他未提及的模块的作用可以参考相关技术文档,本申请对此不展开说明。
图5为本申请实施例提供的一种电子设备的软件结构示意图。
如图5所示,本申请涉及的电子设备的软件框架可以包括应用程序层,应用程序框架层(framework,FWK)、系统库、安卓运行时、硬件抽象层(HAL)和内核层(kernel)。
其中,应用程序层可以包括一系列应用程序包,例如相机,图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息等应用程序(也可以称为应用)。其中,相机应用可以用于获取图像和视频。
如图5所示,相机应用可以包括相机模式模块、流管理模块、编码控制模块和存储模块。相机模式模块可以用于监听用户操作并确定相机的模式。相机的模式可以包括但不限于:拍照模式、录像预览模式、录像模式、延时摄影模式、连拍模式等。其中,录像预览模式可以包括追焦模式下的录像预览模式。录像模式可以包括追焦模式下的录像模式。流管理模块用 于进行数据流管理。例如,数据流配置信息(可简称为配流信息)的下发。流管理模块可以包括数据流缓存区域。例如,大窗图像缓存区和小窗图像缓存区。大窗图像缓存区和小窗图像缓存区可以存放相机HAL返回的两路图像数据。编码控制模块可以包括混合器、视频编码器和音频编码器。其中,视频编码器用于对摄像头采集的图像进行编码。音频编码器用于对拾音器等设备采集的音频进行编码。混合器用于将编码后的图像和编码后的音频合并为视频文件。存储模块用于存储原始视频和特写视频。
应用程序框架层为应用程序层的应用程序提供应用编程接口(Application Programming Interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图5所示,应用程序框架层可以包括相机FWK和媒体FMK。相机FWK可以提供API接口给应用(例如,相机应用)进行调用,进而接收来自应用的请求,同时维护着请求在内部流转的业务逻辑,最终通过调用相机AIDL跨进程接口将请求发送至相机服务(Camera Service)中进行处理,紧接着,等待相机服务(Camera Service)结果的回传,进而将最终结果发送至相机应用。其中,AIDL的英文全称为Android Interface Definition Language,中文含义为安卓接口定义语言。类似的,媒体FWK可以API接口给相应应用(例如,相机应用)进行调用,进而接收来自应用(例如,相机应用)的请求,并向下传递应用的请求,然后再回传给应用。
可理解,应用程序框架层还可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。其具体含义可以参考相关技术文档,在此不展开说明。
运行时(Runtime)负责系统的调度和管理。Runtime包括核心库和虚拟机。其中,核心库包含两部分:一部分是编程语言(例如,java语言)需要调用的功能函数,另一部分是系统的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的编程文件(例如,java文件)执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(Surface Manager),媒体库(Media Libraries),三维图形处理库(例如:OpenGL ES),二维图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了二维(2-Dimensional,2D)和三维(3-Dimensional,3D)图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现3D图形绘图,图像渲染,合成,和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
硬件抽象层(HAL)是位于操作系统内核与上层软件之间的接口层,其目的在于将硬件抽象化。硬件抽象层是设备内核驱动的抽象接口,用于实现向更高级别的Java API框架提供访问底层设备的应用编程接口。HAL包含多个库模块,例如相机HAL、Vendor仓、显示屏、蓝牙、音频等。其中每个库模块都为特定类型的硬件组件实现一个接口。可理解,相机HAL可以为相机FWK提供访问摄像头等硬件组件的接口。Vendor仓可以为媒体FWK提供访问编码器等硬件组件的接口。为当系统框架层API要求访问便携设备的硬件时,Android操作系统将为该硬件组件加载库模块。
内核层是Android操作系统的基础,Android操作系统最终的功能都是通过内核层完成。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动,虚拟卡驱动。
需要说明的是,本申请提供的图5所示的电子设备的软件结构示意图仅作为一种示例,并不限定Android操作系统不同分层中的具体模块划分,具体可以参考常规技术中对Android操作系统软件结构的介绍。另外,本申请提供的拍摄方法还可以基于其他操作系统实现,本申请不再一一举例。
基于图4和图5所示的电子设备的软硬件结构,结合图6从软硬件协作的角度介绍本申请实施例提供的一种拍摄方法。
相机模式模块可以监听到作用于追焦模式控件(例如,主角模式按钮404)上的用户操作,从而确定当前相机模式变为追焦模式下的录像预览模式,并通知流管理模块和存储模块。
流管理模块可以将配置的两路数据流对应的流标识(video-surface-1和video-surface-2)发给编码控制模块。存储模块也可以将创建的两路数据流对应的视频文件的文件信息发给编码控制模块。文件信息可以包括该视频文件的文件名和时间戳。编码控制模块收到流标识和文件信息之后可以创建编码器(video-codec-1和video-codec-2),并将收到的流标识和文件信息,与相应的编码器关联。然后,编码控制模块可以下发编码器初始化请求。
后续过程中,若用户触发追焦模式下的录像,相机HAL可以对摄像头采集的图像数据进行处理,得到两路不同效果的图像数据。相机HAL可以将该两路不同效果的图像数据返回给相机FWK。相应的,相机FWK可以继续将该两路不同效果的图像数据返回给相机应用,并分别存放在相机应用的大窗图像缓存区和小窗图像缓存区中。可理解,该两路不同效果的图像数据可以用于预览大窗和预览小窗中的图像显示,以及生成相应视频。
相机模式模块可以监听到作用于录像开始控件(例如,开始录制按钮303)上的用户操作,从而确定当前相机模式变为追焦模式下的录像模式,并通知编码控制模块。编码控制模块控制编码器对大窗图像缓存区和小窗图像缓存区中的两路图像数据进行编码,从而得到原始视频和特写视频。可理解,编码控制模块控制编码器对小窗图像缓存区中的图像数据进行编码,可以得到一个或多个特写视频。在本申请的一些实施例中,编码控制模块控制编码器对大窗图像缓存区和小窗图像缓存区中的两路图像数据进行编码之后,可以生成一个原始视频和多个特写视频。
可理解,本申请中所提及的大窗、预览大窗和大窗口的含义是相同的,小窗、预览小窗和小窗口的含义是相同的。
下面结合图7-图11说明前述实施例的具体实现。
首先,需要说明的是,电子设备可以配置预览数据流和视频数据流。预览数据流中的图像数据可以显示在电子设备的显示屏上以便用户预览,而视频数据流中的图像数据则保存在电子设备内以便视频录制结束后用户查看。本申请中所提及的数据流指的是视频数据流。
可理解,用户可以触发启动相机应用(例如,如图2A的a所示的主界面,用户可以通过作用于相机应用401上的操作来触发电子设备启动相机应用)。相机模式模块可以监听到该用户操作,并下发消息X1给摄像头。消息X1用于请求启动摄像头。
一、配置数据流(如图7所示)
用户可以触发相机进入追焦模式(例如,如图2B的c所示,用户可以通过点击主角模式按钮405来触发电子设备进入追焦模式)。可理解,相机模式模块可以监听到用户的相应触发操作,并通知相机应用中的其他模块。
S701:相机模式模块向流管理模块和存储模块发送消息X2。
可理解,消息X2用于将相机应用的模式变化提示给相机应用中的其他模块。这里所提及的模式变化具体可以指相机应用即将从录像模式变化为追焦模式。
相应的,流管理模块和存储模块可以接收相机模式模块发送的消息X2。
S702:流管理模块配置大窗数据流和小窗数据流,并确定大窗数据流和小窗数据流的流标识分别为第一流标识和第二流标识。
可理解,流标识可以用于区分不同的数据流。流管理模块可以通过设置流标识来区分大窗数据流和小窗数据流对应的数据流。具体的,第一流标识用于标记大窗数据流,第二流标识用于标记小窗数据流。
在本申请的一些实施例中,第一流标识为video-surface-1,第二流标识为video-surface-2。
需要说明的是,流管理模块可以包括大窗数据流和小窗数据流的缓存区域。例如,图5和图6所示的大窗图像缓存区和小窗图像缓存区。大窗图像缓存区对应的流标识为第一流标识。而小窗图像缓存区对应的流标识为第二流标识。
可理解,大窗数据流和小窗数据流的配置信息可以完全相同。大窗数据流和小窗数据流的配置信息可以包括格式和分辨率等。示例性的,大窗数据流和小窗数据流的配置信息中的格式可以为YUV。大窗数据流和小窗数据流的配置信息中的分辨率可以为1920px*1080px。可理解,px的全称是“Pixel”,中文意思为“像素”,是表示图片或者图形的最小单位。当然,该配置信息中的格式和分辨率还可以为其他值,本申请不作限制。
S703:流管理模块向编码控制模块发送流标识参数信息。流标识参数信息包括第一流标识和第二流标识。
可理解,流标识参数信息可以为文字、数字、字符串等形式,本申请对此不作限制。
例如,流标识参数信息可以为12。再例如,流标识参数信息可以为video-surface-1-video-surface-2。
相应的,编码控制模块可以接收流管理模块发送的流标识参数信息。
S704:存储模块基于当前的系统时间分别生成大窗视频文件和小窗视频文件。其中,大窗视频文件和小窗视频文件的时间戳分别为第一时刻和第二时刻。
可理解,存储模块基于当前的系统时间分别生成的大窗视频文件和小窗视频文件的初始状态为空(即没有数据)。
在本申请的一些实施例中,第二时刻不早于第一时刻。
S705:存储模块向编码控制模块发送文件信息W1。文件信息W1包括大窗视频文件的文件名和小窗视频文件的文件名。
在本申请的一些实施例中,文件信息W1还可以包括大窗视频文件和小窗视频文件的时间戳(即第一时刻和第二时刻)。文件信息W1还可以包括文件名与时间戳的对应关系。
可理解,文件信息W1还可以包括其他与大窗视频文件和小窗视频文件相关的内容,本申请对此不作限制。另外,文件信息W1可以为文字、数字、字符串等形式,本申请对此不作限制。
示例性的,文件信息W1可以为video-1-time-1-video-2-time-2。可参见表1,video-1与time-1对应。video-1为大窗视频文件的文件名。time-1为大窗视频文件的时间戳(即第一时刻)。video-2与time-2对应。video-2为小窗视频文件的文件名。time-2为小窗视频文件的时间戳(即第二时刻)。
表1

示例性的,文件信息W1为10987662098767。字符串的第1位表示的是大窗视频文件的文件名。字符串的第8位表示的是小窗视频文件的文件名。字符串的第2位到第7位表示的是大窗视频文件的时间戳。字符串的第9位到第14位表示的是小窗视频文件的时间戳。
在本申请的一些实施例中,大窗视频文件和小窗视频文件可以分别以其时间戳来命名。
相应的,编码控制模块可以接收存储模块发送的文件信息W1。
S706:编码控制模块基于流标识参数信息和文件信息W1,创建第一编码器和第二编码器,将大窗数据流和小窗数据流,以及大窗视频文件和小窗视频文件,与第一编码器和第二编码器进行关联,并将大窗数据流和小窗数据流分别作为第一编码器和第二编码器的输入,还将大窗视频文件和小窗视频文件分别作为存储第一编码器和第二编码器编码所得的视频的文件。
可理解,编码控制模块接收流标识参数信息之后,可以对其进行解析,确定流管理模块配置的数据流有2路,并且,还可以确定流标识和数据流的对应关系。类似的,编码控制模块接收文件信息W1之后,可以对其进行解析,确定文件的数量为2个,以及文件名。相应的,编码控制模块创建两个编码器(即第一编码器和第二编码器),并且根据流标识和数据流的对应关系,来将两路数据流与两个编码器关联。编码控制模块还可以根据文件名来将两个文件与两个编码器关联。
具体的,编码控制模块可以将第一流标识和大窗视频文件分别与第一编码器关联,并将第一流标识对应的数据流作为第一编码器的输入,而将大窗视频文件作为第一编码器的输出数据的存储文件。类似的,编码控制模块可以将第二流标识和小窗视频文件分别与第二编码器关联,并将第二流标识对应的数据流作为第二编码器的输入,而将小窗视频文件作为第二编码器的输出数据的存储文件。
在本申请的一些实施例中,第一编码器为video-codec-1,第二编码器为video-codec-2。
示例性的,流标识参数信息为video-surface-1-video-surface-2。编码控制模块对流标识参数信息进行解析,确定流管理模块配置了两路数据流。这两路数据流的流标识分别为:video-surface-1和video-surface-2。如表2所示,编码控制模块可以将流标识为video-surface-1的数据流(即大窗数据流)与video-codec-1关联。而流标识为video-surface-1的数据流(即大窗数据流)是预览大窗对应的数据流。这就意味着,video-codec-1用于编码生成预览大窗对应的视频。类似的,如表2所示,编码控制模块可以将流标识为video-surface-2的数据流(即小窗数据流)与video-codec-2关联。而流标识为video-surface-2(即小窗数据流)的数据流是预览小窗对应的数据流。这就意味着,video-codec-2用于编码生成预览小窗对应的视频。
示例性的,文件信息W1为video-1-time-1-video-2-time-2。编码控制模块对文件信息W1进行解析,确定存储模块生成了两个文件。这两个文件的文件名分别为:video-1和video-2。如表2所示,编码控制模块可以将文件名为video-1的文件(即大窗视频文件)与第一编码器关联。其中,文件名为video-1的文件(即大窗视频文件)用于存储预览大窗对应的视频。第一编码器用于编码生成预览大窗对应的视频。类似的,如表2所示,编码控制模块可以将文件名为video-2的文件(即小窗视频文件)与第二编码器关联。其中,文件名为video-2的文件(即小窗视频文件)用于存储预览小窗对应的视频。第二编码器用于编码 生成预览小窗对应的视频。
表2
S707:编码控制模块向编码器发送编码器初始化请求。编码器初始化请求中包括第一编码器的编码参数和第二编码器的编码参数。
可理解,编码器的编码参数可以包括格式和分辨率。示例性的,格式可以为H.264。分辨率可以为1920px*1080px。需要说明的是,编码器的编码参数的具体内容可以根据行业规定和实际需求进行设置,本申请对此不作限制。
在本申请的一些实施例中,第一编码器的编码参数和第二编码器的编码参数可以是一样的,也可以是不一样的,其具体参数可以根据实际需要和相关技术文档进行设置。
相应的,编码器可以接收编码控制模块发送的编码器初始化请求。
S708:流管理模块向相机HAL发送流标识参数信息。
具体的,流管理模块可以将流标识参数信息发送给相机FWK,然后,相机FWK将流标识参数信息发送给相机HAL。流标识参数信息的相关描述可以参考上文,在此不再赘述。
相应的,相机HAL可以接收流管理模块发送的流标识参数信息。
S709:相机HAL解析流标识参数信息,得到第一流标识和第二流标识,并将第一流标识和第二流标识分别与第一图像效果和第二图像效果进行匹配。其中,第一图像效果为预览大窗显示的图像所对应的图像效果,第二图像效果为预览小窗显示的图像所对应的图像效果。
可理解,图像效果可以包括裁剪范围、图像尺寸、滤镜效果和美颜效果等。第一图像效果和第二图像效果可以预先设置,并存储在电子设备中。电子设备中的相机HAL可以调用存储的第一图像效果和第二图像效果。
示例性的,第一图像效果包括:1920px*1080px,添加滤镜效果,添加美颜效果。
示例性的,流标识参数信息可以为video-surface-1-video-surface-2。相机HAL对流标识参数信息进行解析,确定流管理模块配置了两路数据流。这两路数据流的流标识分别为:video-surface-1和video-surface-2。相机HAL可以将流标识为video-surface-1的数据流(即大窗数据流)与第一图像效果进行匹配,而将流标识为video-surface-2的数据流(即小窗数据流)与第二图像效果进行匹配。
可理解,本申请对步骤S702和步骤S704的先后顺序不作限制。本申请对步骤S703和步骤S705的先后顺序不作限制。
二、在追焦成功的情况下开始录像(如图8所示)
在追焦成功并显示预览大窗和预览小窗时,用户可以触发大小窗录像(例如,如图3A的a所示,用户可以通过点击录制按钮303来触发电子设备开始大小窗录像)。可理解,相机模式模块可以监听到用户的相应触发操作,并通知相机应用中的其他模块。
S801:相机模式模块向流管理模块和编码控制模块发送消息X3。
可理解,消息X3用于将相机应用的模式变化提示给相机应用中的其他模块。这里所提及的模式变化具体可以指相机应用即将从大小窗预览模式变化为大小窗录像模式。大小窗预 览模式指的是相机同时显示有预览大窗和预览小窗,且处于预览状态。大小窗录像模式指的是相机同时显示有预览大窗和预览小窗,且预览大窗和预览小窗均处于录像状态。
相应的,流管理模块和编码控制模块可以接收相机模式模块发送的消息X3。
S802:流管理模块向相机HAL发送动态请求D1。动态请求D1用于请求返回大窗数据流和小窗数据流。
可理解,流管理模块可以将动态请求D1发送给相机FWK,然后,相机FWK将动态请求D1发送给相机HAL。
需要说明的是,流管理模块可以持续向相机HAL下发动态请求。本申请中,流管理模块可以修改动态请求的内容。在本申请的一些实施例中,流管理模块以一定的频率(或者说是时间间隔)向相机HAL发送动态请求。示例性的,流管理模块每隔33ms向相机HAL发送一次动态请求。
可理解,动态请求D1可以包括第一流标识和第二流标识。
相应的,相机HAL可以接收流管理模块发送的动态请求D1。
S803:相机HAL对动态请求D1进行解析,得到第一流标识和第二流标识,并确定与第一流标识和第二流标识相匹配的图像效果分别是第一图像效果和第二图像效果,再根据第一图像效果和第二图像效果分别对原始图像数据进行处理,得到大窗图像数据和小窗图像数据。其中,原始图像数据为摄像头发送给相机HAL的图像数据。
可理解,相机HAL接收动态请求D1之后,可以对动态请求D1进行解析,并得到第一流标识和第二流标识,相机HAL可以根据之前对流标识和图像效果的匹配情况来确定与第一流标识和第二流标识相匹配的图像效果。具体的,相机HAL可以确定与第一流标识相匹配的图像效果为第一图像效果,并根据第一图像效果来对原始数据进行处理,得到大窗图像数据。大窗图像数据的流标识为第一流标识。类似的,相机HAL可以确定与第二流标识相匹配的图像效果为第二图像效果,并根据第二图像效果来对原始数据进行处理,得到小窗图像数据。小窗图像数据的流标识为第二流标识。
S804:相机HAL向流管理模块发送大窗图像数据和小窗图像数据。
可理解,相机HAL可以将大窗图像数据返回给流管理模块,而将小窗图像数据返回给流管理模块。
相应的,流管理模块可以接收相机HAL发送的大窗图像数据和小窗图像数据,并根据大窗图像数据和小窗图像数据的流标识来将其放入相应的缓存区域。
示例性的,由于大窗图像数据的流标识与大窗图像缓存区的流标识一致,流管理模块可以将大窗图像数据存储在大窗图像缓存区中。类似的,由于小窗图像数据的流标识与小窗图像缓存区的流标识一致,流管理模块可以将小窗图像数据存储在小窗图像缓存区中。
S805:编码控制模块向第一编码器和第二编码器发送编码命令B1。编码命令B1用于启动第一编码器和第二编码器。
可理解,编码控制模块接收相机模式模块发送的消息X3之后,编码控制模块可以启动第一编码器和第二编码器。具体的,编码控制模块可以将编码器命令发送给媒体FWK,然后,媒体FWK再将编码器命令B1经由Vendor仓发送给编码器。编码器接收编码器命令B1之后,可以根据编码器命令启动相应的编码器(即第一编码器和第二编码器)。
示例性的,编码器命令B1可以包括:codec-1.start和codec-2.start。
S806:第一编码器获取大窗图像数据,对大窗图像数据进行编码,并将编码所得的图像 数据写入大窗视频文件中。
可理解,第一编码器启动之后,可以从流管理模块的相应缓存区域(例如,大窗图像缓存区)中获取大窗图像数据,然后再对大窗图像数据进行编码,并将编码所得的图像数据写入存储模块里的大窗视频文件中。
可理解,第一编码器编码所得的图像数据可以构成原始视频的图像。示例性的,第一编码器将编码所得的图像数据写入大窗视频文件的频率可以为每秒30次。相应的,原始视频的帧率可以为30fps。fps的英文全称为Frames per Second,表示的含义为每秒显示帧数。当然,第一编码器将编码所得的图像数据写入大窗视频文件的频率还可以为其他值,本申请对此不作限制。
S807:第二编码器获取小窗图像数据,对小窗图像数据进行编码,并将编码所得的图像数据写入小窗视频文件中。
可理解,第二编码器启动之后,可以从流管理模块的相应存储区域(例如,小窗图像缓存区)中获取小窗图像数据,然后再对小窗图像数据进行编码,并将编码所得的图像数据写入存储模块里的小窗视频文件中。
可理解,第二编码器编码所得的图像数据可以构成特写视频中的图像。与第一编码器类似,示例性的,第二编码器将编码所得的图像数据写入小窗视频文件的频率也可以为每秒30次。相应的,特写视频的帧率可以为30fps。当然,第二编码器将编码所得的图像数据写入小窗视频文件的频率还可以为其他值,本申请对此不作限制。
可理解,本申请对步骤S802和步骤S805的先后顺序不作限制。本申请对步骤S806和步骤S807的先后顺序不作限制。
三、预览小窗结束录制,预览大窗继续录制(如图9所示)
在预览小窗和预览大窗均正常录制的情况下,用户可以触发结束小窗视频录制(例如,如图3E的a所示,用户可以通过点击结束小窗口录制按钮315来触发电子设备结束小窗视频录制)。可理解,相机模式模块可以监听到用户的相应触发操作,并通知相机应用中的其他模块。
S901:相机模式模块向流管理模块和编码控制模块发送消息X4。
可理解,消息X4用于将相机应用的模式变化提示给相机应用中的其他模块。这里所提及的模式变化具体可以指相机应用即将从大小窗录像模式变化为大窗录像模式。
相应的,流管理模块和编码控制模块可以接收相机模式模块发送的消息X4。
S902:流管理模块删除动态请求D1所包括的第二流标识,生成动态请求D2。
流管理模块接收相机模式模块发送的消息X4之后,可以删除原动态请求(即动态请求D1)中的第二流标识,生成动态请求D2。
S903:流管理模块向相机HAL发送动态请求D2。动态请求D2用于请求返回大窗数据流。
可理解,流管理模块可以将动态请求D2发送给相机FWK,然后,相机FWK将动态请求D2发送给相机HAL。
可理解,动态请求D2可以包括第一流标识。
相应的,相机HAL可以接收流管理模块发送的动态请求D2。
S904:相机HAL对动态请求D2进行解析,得到第一流标识,并确定与第一流标识相匹配的图像效果是第一图像效果,再根据第一图像效果对原始图像数据进行处理,得到大窗 图像数据。
可理解,相机HAL接收动态请求D2之后,可以对动态请求D2进行解析,并得到第一流标识,相机HAL可以根据之前对流标识和图像效果的匹配情况来确定与第一流标识相匹配的图像效果。具体的,相机HAL可以确定与第一流标识相匹配的图像效果为第一图像效果,并根据第一图像效果来对原始数据进行处理,得到大窗图像数据。大窗图像数据的流标识为第一流标识。
S905:相机HAL向流管理模块发送大窗图像数据。
相应的,流管理模块可以接收相机HAL发送的大窗图像数据和小窗图像数据,并根据大窗图像数据的流标识来将其放入相应的缓存区域。
可理解,步骤S905的相关描述可以参考步骤S804,在此不再赘述。
S906:获取大窗图像数据,对大窗图像数据进行编码,并将编码所得的图像数据写入大窗视频文件中。
可理解,步骤S906的相关描述可以参考步骤S806,在此不再赘述。
S907:编码控制模块向第二编码器发送编码命令B2。编码命令B2用于停止第二编码器。
可理解,编码控制模块接收相机模式模块发送的消息X4之后,编码控制模块可以停止第二编码器。具体的,编码控制模块可以将编码器命令B2发送给媒体FWK,然后,媒体FWK再将编码器命令B2经由Vendor仓发送给编码器。编码器接收编码器命令B2之后,可以根据编码器命令停止相应的编码器(即第二编码器)。
示例性的,编码器命令B2可以包括:codec-2.stop。
S908:编码控制模块向存储模块发送结束信息。结束信息包括小窗视频文件的文件名。
在本申请的一些实施例中,结束信息可以为结束符。当然,结束信息还可以表现为其他形式,例如,文字、字符、数字等,本申请对此不作限制。
相应的,存储模块可以接收编码控制模块的结束信息。
S909:存储模块基于结束信息保存小窗视频文件,并基于当前的系统时间重新创建小窗视频文件。其中,重新创建的小窗视频文件的时间戳为第三时刻。
可理解,存储模块接收结束信息之后,可以基于当前的系统时间重新创建小窗视频文件。需要说明的是,该基于当前的系统时间分别生成的重新创建的小窗视频文件的初始状态为空(即没有数据)。
在本申请的一些实施例中,存储模块接收结束信息之后,可以对结束信息进行解析,得到小窗视频文件的文件名,并相应保存小窗视频文件,并基于当前的系统时间重新创建小窗视频文件。
在本申请的一些实施例中,重新创建的小窗视频文件可以为video-3。第三时刻为time-3。
S910:流管理模块向编码控制模块发送文件信息W2。文件信息W2包括重新创建的小窗视频文件的文件名。
可理解,文件信息W2的相关描述可以参考步骤S705中文件信息W1的关于描述,在此不再赘述。
S911:流管理模块向编码控制模块发送第二流标识。
相应的,编码控制模块可以接收流管理模块发送的第二流标识。
S912:基于第二流标识和文件信息W2,创建第三编码器,将小窗数据流和重新创建的小窗视频文件,来与第三编码器进行关联,并将小窗数据流作为第三编码器的输入,还将重 新创建的小窗视频文件作为存储第二编码器编码所得的视频的文件。
在本申请的一些实施例中,第三编码器为video-codec-3。
示例性的,在上述情况下,编码器、数据流和文件之间的对应关系可以如下表3所示:
表3
可理解,本申请对步骤S903和步骤S907的先后顺序不作限制。
四、预览小窗重新开始录制,预览大窗继续录制(如图10所示)
在预览小窗结束录制但预览大窗继续录制的情况下,用户可以触发重新开始预览小窗的录制(例如,如图3E的c和d所示,用户可以通过点击追踪框311来触发电子设备重新开始预览小窗的录制)。可理解,相机模式模块可以监听到用户的相应触发操作,并通知相机应用中的其他模块。
S1001:相机模式模块向流管理模块和编码控制模块发送消息X5。
可理解,消息X5用于将相机应用的模式变化提示给相机应用中的其他模块。这里所提及的模式变化具体可以指相机应用即将从大窗录像模式变化为大小窗录制模式。
相应的,流管理模块和编码控制模块可以接收相机模式模块发送的消息X4。
S1002:编码控制模块向第三编码器发送编码命令B3。编码命令B3用于开启第三编码器。
可理解,编码控制模块接收相机模式模块发送的消息X5之后,编码控制模块可以开启第三编码器。具体的,编码控制模块可以将编码器命令B3发送给媒体FWK,然后,媒体FWK再将编码器命令B3经由Vendor仓发送给编码器。编码器接收编码器命令B3之后,可以根据编码器命令停止相应的编码器(即第三编码器)。
示例性的,编码器命令B3可以包括:codec-3.start。
S1003:流管理模块将第二流标识添加到动态请求D2中,得到动态请求D3。
流管理模块接收相机模式模块发送的消息X5之后,可以将第二流标识添加至原动态请求(即动态请求D2)中,生成动态请求D3。
S1004:流管理模块向相机HAL发送动态请求D3。动态请求D2用于请求返回大窗数据流和小窗数据流。
可理解,流管理模块可以将动态请求D3发送给相机FWK,然后,相机FWK将动态请求D3发送给相机HAL。
可理解,动态请求D3可以包括第一流标识和第二流标识。
相应的,相机HAL可以接收流管理模块发送的动态请求D3。
S1005:相机HAL对动态请求D3进行解析,得到第一流标识和第二流标识,并确定与第一流标识和第二流标识相匹配的图像效果分别是第一图像效果和第二图像效果,再根据第一图像效果和第二图像效果分别对原始图像数据进行处理,得到大窗图像数据和重新追焦后的小窗图像数据。其中,原始图像数据为摄像头发送给相机HAL的图像数据。
S1006:相机HAL向流管理模块发送大窗图像数据和重新追焦后的小窗图像数据。
可理解,步骤S1004和步骤S1005的相关描述可以参考步骤S802和步骤S803,在此不 再赘述。
S1007:第一编码器获取大窗图像数据,对大窗图像数据进行编码,并将编码所得的图像数据写入大窗视频文件中。
可理解,第一编码器启动之后,可以从流管理模块的相应缓存区域(例如,大窗图像缓存区)中获取大窗图像数据,然后再对大窗图像数据进行编码,并将编码所得的图像数据写入存储模块里的大窗视频文件中。
可理解,第一编码器编码所得的图像数据可以构成原始视频的图像。
S1008:第三编码器获取重新追焦后的小窗图像数据,对重新追焦后的小窗图像数据进行编码,并将编码所得的图像数据写入重新创建的小窗视频文件中。
可理解,第三编码器启动之后,可以从流管理模块的相应缓存区域(例如,小窗图像缓存区)中获取重新追焦后的小窗图像数据,然后再对重新追焦后的小窗图像数据进行编码,并将编码所得的图像数据写入存储模块里的重新创建的小窗视频文件中。
可理解,第三编码器编码所得的图像数据可以构成特写视频中的图像。
需要说明的是,小窗图像数据和重新追焦后的小窗图像数据可以为同一个拍摄对象的特写图像,也可以为不同拍摄对象的特写图像。
可理解,本申请对步骤S1002和步骤S1003的先后顺序不作限制,对步骤S1007和步骤S1008的先后顺序也不作限制。
五、预览小窗和预览大窗均结束录制(如图11所示)
在预览小窗和预览大窗均正常录制的情况下,用户可以触发结束预览大窗和预览小窗的录制(例如,如图3M的a所示,用户可以通过点击结束录制按钮314来触发电子设备结束预览大窗和预览小窗的录制)。可理解,相机模式模块可以监听到用户的相应触发操作,并通知相机应用中的其他模块。
S1101:相机模式模块向流管理模块、存储模块和编码控制模块发送消息X6。
可理解,消息X6用于将相机应用的模式变化提示给相机应用中的其他模块。这里所提及的模式变化具体可以指相机应用即将从大小窗录像模式变化为预览模式。
相应的,流管理模块、存储模块和编码控制模块可以接收相机模式模块发送的消息X6。
S1102:流管理模块删除动态请求D3所包括的第一流标识和第二流标识,生成动态请求D4。
流管理模块接收相机模式模块发送的消息X6之后,可以删除原动态请求(即动态请求D3)中的第一流标识和第二流标识,生成动态请求D4。
可理解,流管理模块生成新的动态请求之后,可以持续下发该新的动态请求。
S1103:存储模块保存大窗视频文件和重新创建的小窗视频文件,并将大窗视频文件的时间戳更新为第四时刻。第四时刻为当前的系统时间。
可理解,第四时刻晚于第三时刻。
在本申请的一些实施例中,第四时刻为time-4。
示例性的,根据上文,大窗视频文件和重新创建的小窗视频文件保存之后,其文件名与时间戳的对应关系如表4所示:
表4
在本申请的一些实施例中,流管理模块接收消息X6之后,可以删除动态请求D1所包括的第一流标识和第二流标识。存储模块接收消息X6之后,可以保存大窗视频文件和小窗视频文件,并将大窗视频文件的时间戳由第一时刻更新为第四时刻。第四时刻为当前的系统时间。
S1104:编码控制模块向编码器发送编码命令B4。编码命令B4用于停止编码器。
在本申请的一些实施例中,编码控制模块接收相机模式模块发送的消息X6之后,编码控制模块可以停止第一编码器和第二编码器。
示例性的,编码器命令B4可以包括:codec-1.stop和codec-2.stop。
在本申请的一些实施例中,编码控制模块接收相机模式模块发送的消息X6之后,编码控制模块可以停止第一编码器和第三编码器。
示例性的,编码器命令B4可以包括:codec-1.stop和codec-3.stop。
具体的,编码控制模块可以将编码器命令B4发送给媒体FWK,然后,媒体FWK再将编码器命令B4经由Vendor仓发送给编码器。编码器接收编码器命令B4之后,可以根据编码器命令停止相应的编码器。
可理解,本申请对步骤S1102-步骤S1104的先后顺序不作限制。
需要说明的是,电子设备可以在上述不同场景下进行拍摄,上述拍摄场景下的不同拍摄方法的组合也在本申请的范围内。
以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims (14)

  1. 一种拍摄方法,其特征在于,应用于设置有摄像头的电子设备;所述方法包括:
    显示第一界面,所述第一界面包括第一窗口和第一控件,所述第一窗口显示有所述摄像头采集的第一图像;
    检测到作用于所述第一控件的第一操作;
    响应于所述第一操作,配置所述第一窗口对应的第一路数据流和第二窗口对应的第二路数据流,并显示第二界面,所述第二界面包括所述第一窗口和第二控件,所述第一窗口显示有所述摄像头采集的所述第一图像和在所述第一图像中的主体上显示的标记,所述第一路数据流与第一流标识对应,所述第二路数据流与第二流标识对应;
    检测到作用于一个标记的第二操作;
    响应于所述第二操作,显示所述第二窗口,所述第二窗口小于所述第一窗口,所述第二窗口显示有第一主体的特写图像,所述第一主体为所述第二操作作用的标记对应的主体;
    响应作用于所述第二控件的操作,对所述第一窗口和所述第二窗口中的画面分别进行录像;
    其中,所述电子设备中的编码器基于所述第一流标识获取所述第一路数据流中的图像数据,对所述第一路数据流中的图像数据进行编码得到第一视频;以及所述电子设备中的编码器基于所述第二流标识获取所述第二路数据流中的图像数据,并对所述第二路数据流中的图像数据进行编码得到第二视频。
  2. 如权利要求1所述的方法,其特征在于,所述方法还包括:响应于作用于所述第二控件的操作,显示第三界面,所述第三界面包括所述第一窗口、所述第二窗口和第三控件;
    所述对所述第一窗口和所述第二窗口中的画面分别进行录像之后,所述方法还包括:
    响应作用于所述第三控件上的操作,保存所述第一视频和所述第二视频。
  3. 如权利要求2所述的方法,其特征在于,所述保存所述第一视频和所述第二视频之前,所述方法还包括:
    检测到作用于一个标记的第四操作;
    响应于所述第四操作,所述第二窗口显示有第二主体的特写图像,所述第二主体为所述第四操作作用的标记对应的主体。
  4. 如权利要求1所述的方法,其特征在于,所述第二窗口包括第四控件;所述对所述第一窗口和所述第二窗口中的画面分别进行录像之后,所述方法还包括:
    响应作用于所述第四控件上的操作,停止对所述第二窗口中的画面进行录像,并保存所述第二视频。
  5. 如权利要求4所述的方法,其特征在于,所述保存所述第二视频之后,所述方法还包括:
    检测到作用于一个标记的第五操作;
    响应于所述第五操作,重新显示所述第二窗口,并对所述第二窗口中的画面进行录像,所述第二窗口显示有第三主体的特写图像,所述第三主体为所述第五操作作用的标记对应的主体;
    其中,所述电子设备中的编码器基于所述第二流标识获取所述第二路数据流中的图像数据,并对所述第二路数据流中的图像数据进行编码得到第三视频。
  6. 如权利要求5所述的方法,其特征在于,所述方法还包括:响应于所述第五操作,显示第四界面,所述第四界面包括所述第一窗口、所述第二窗口和第三控件;
    所述重新显示所述第二窗口,并对所述第二窗口中的画面进行录像之后,所述方法还包括:
    响应作用于所述第三控件上的操作,保存所述第一视频和所述第三视频。
  7. 如权利要求1-6任一项所述的方法,其特征在于,所述检测到作用于所述第一控件的第一操作之后,所述方法还包括:
    响应于所述第一操作,基于当前的系统时间分别生成第一窗口视频文件和第二窗口视频文件;
    基于所述第一流标识将第一编码器与所述第一路数据流关联,以及基于所述第二流标识将第二编码器与所述第二路数据流关联;
    基于所述第一窗口视频文件的文件标识,将所述第一编码器与所述第一窗口视频文件关联;基于所述第二窗口视频文件的文件标识,将所述第二编码器与所述第二窗口视频文件关联;
    将所述第一流标识和所述第二流标识分别与第一图像效果与第二图像效果进行匹配;
    其中,所述第一编码器用于对所述第一路数据流中的图像数据进行编码;所述第二编码器用于对所述第二路数据流中的图像数据进行编码;所述第一窗口视频文件用于存储对所述第一路数据流中的图像数据进行编码后所得的视频;所述第二窗口视频文件用于存储对所述第二路数据流中的图像数据进行编码后所得的视频;所述第一图像效果为所述第一路数据流中的图像数据对应的图像效果;所述第二图像效果为所述第二路图像数据对应的图像效果。
  8. 如权利要求7所述的方法,其特征在于,所述配置所述第一窗口对应的第一路数据流和第二窗口对应的第二路数据流之后,所述方法还包括:
    所述电子设备中的流管理模块将第一流标识参数信息发送给所述电子设备中的编码控制模块和所述电子设备中的相机HAL;所述第一流标识参数信息包括所述第一流标识和所述第二流标识;
    所述基于当前的系统时间分别生成第一窗口视频文件和第二窗口视频文件之后,所述方法还包括:
    所述电子设备中的存储模块将第一文件信息发送给所述编码控制模块;所述第一文件信息包括所述第一窗口视频文件的文件标识和所述第二窗口视频文件的文件标识;
    所述基于所述第一流标识将第一编码器与所述第一路数据流关联,以及基于所述第二流标识将第二编码器与所述第二路数据流关联;基于所述第一窗口视频文件的文件标识,将所述第一编码器与所述第一窗口视频文件关联;基于所述第二窗口视频文件的文件标识,将所述第二编码器与所述第二窗口视频文件关联,具体包括:
    所述编码控制模块解析所述第一流标识参数信息和所述第一文件信息,得到所述第一流标识和所述第二流标识,以及所述第一窗口视频文件的文件标识和所述第二窗口视频文件的文件标识;
    所述编码控制模块创建所述第一编码器和所述第二编码器;
    所述编码控制模块基于所述第一流标识和所述第一窗口视频文件的文件标识,确定所述 第一编码器的输入为所述第一路数据流中的图像数据,并确定所述第一编码器编码后的图像数据的存储区域为所述第一窗口视频文件;
    所述编码控制模块基于所述第二流标识和所述第二窗口视频文件的文件标识,确定所述第二编码器的输入为所述第二路数据流中的图像数据,并确定所述第二编码器编码后的图像数据的存储区域为所述第二窗口视频文件;
    所述将所述第一流标识和所述第二流标识分别与第一图像效果与第二图像效果进行匹配,具体包括:
    所述相机HAL解析所述第一流标识参数信息,得到所述第一流标识和所述第二流标识;
    所述相机HAL基于所述第一流标识确定与所述第一图像效果匹配的数据流为所述第一路数据流,并基于所述第二流标识确定与所述第二图像效果匹配的数据流为所述第二路数据流。
  9. 如权利要求1-8任一项所述的方法,其特征在于,所述方法还包括:
    响应于作用于所述第二控件的操作,所述电子设备中的编码控制模块向所述电子设备中的编码器发送第一编码器命令,所述第一编码器命令用于启动第一编码器和第二编码器;所述电子设备中的流管理模块向所述电子设备中的相机HAL发送第一动态请求,所述第一动态请求包括所述第一流标识和所述第二流标识;
    所述对所述第一窗口和所述第二窗口中的画面分别进行录像,具体包括:
    所述相机HAL对所述第一动态请求进行解析,得到所述第一流标识和所述第二流标识;
    所述相机HAL分别基于与所述第一流标识相匹配的第一图像效果,以及与所述第二流标识相匹配的第二图像效果,对原始图像数据进行处理,得到第一窗口图像数据和第二窗口图像数据;
    所述第一编码器获取所述第一窗口图像数据,对所述第一窗口图像数据进行编码,并将编码后的图像数据写入第一窗口视频文件;
    所述第二编码器获取所述第二窗口图像数据,对所述第二窗口图像数据进行编码,并将编码后的图像数据写入第二窗口视频文件。
  10. 如权利要求4所述的方法,其特征在于,所述响应作用于所述第四控件上的操作,停止对所述第二窗口中的画面进行录像,并保存所述第二视频,具体包括:
    响应作用于所述第四控件上的操作,所述电子设备中的编码器停止对所述第二路数据流的图像数据进行编码;
    所述电子设备中的流管理模块删除第一动态请求中的所述第二流标识,得到第二动态请求,并将所述第二动态请求发送给所述电子设备中的相机HAL;所述第二动态请求包括所述第一流标识;
    所述电子设备中的存储模块保存第二窗口视频文件中的所述第二视频。
  11. 如权利要求10所述的方法,其特征在于,所述停止对所述第二窗口中的画面进行录像之后,所述方法还包括:
    所述流管理模块将第二流标识参数信息发送给所述电子设备中的编码控制模块;所述第二流标识参数信息包括所述第二流标识;
    所述存储模块基于当前的系统时间重新创建第二窗口视频文件,并将第二文件信息发送 给所述编码控制模块;所述第二文件信息包括所述重新创建的第二窗口视频文件的文件标识;
    所述编码控制模块基于所述第二流标识参数信息和所述第二文件信息,创建第三编码器,并将所述第二路数据流和所述重新创建的第二窗口视频文件,与所述第三编码器关联。
  12. 如权利要求5所述的方法,其特征在于,所述检测到作用于一个标记的第五操作之后,所述方法还包括:
    响应于所述第五操作,所述电子设备中的流管理模块将所述第二流标识添加到第二动态请求中,得到第三动态请求,并将所述第三动态请求发送给所述电子设备中的相机HAL;所述第三动态请求包括所述第一流标识和所述第二流标识;
    所述相机HAL对所述第三动态请求进行解析,得到所述第一流标识和所述第二流标识;
    所述相机HAL确定与所述第一流标识和所述第二流标识对应的图像效果分别为第一图像效果和第二图像效果,并分别基于所述第一图像效果和所述第二图像效果对原始图像数据进行处理,得到第一窗口图像数据和第二窗口图像数据;
    所述电子设备中的编码控制模块控制第一编码器和第三编码器分别对所述第一窗口图像数据和所述第二窗口图像数据进行编码,并将编码后的图像数据分别写入第一窗口视频文件和重新创建的第二窗口视频文件中。
  13. 一种电子设备,包括显示屏、摄像头、存储器、一个或多个处理器,其特征在于,所述存储器用于存储计算机程序;所述处理器用于调用所述计算机程序,使得所述电子设备执行权利要求1-12中任一项所述的方法。
  14. 一种计算机存储介质,其特征在于,包括:计算机指令;当所述计算机指令在电子设备上运行时,使得所述电子设备执行权利要求1-12中任一项所述的方法。
PCT/CN2023/092371 2022-05-30 2023-05-05 一种拍摄方法及相关设备 WO2023231696A1 (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
EP23814882.9A EP4395354A1 (en) 2022-05-30 2023-05-05 Photographing method and related device

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
CN202210603408 2022-05-30
CN202210603408.2 2022-05-30
CN202210910909.5 2022-07-29
CN202210910909.5A CN117177064A (zh) 2022-05-30 2022-07-29 一种拍摄方法及相关设备

Publications (1)

Publication Number Publication Date
WO2023231696A1 true WO2023231696A1 (zh) 2023-12-07

Family

ID=88938110

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2023/092371 WO2023231696A1 (zh) 2022-05-30 2023-05-05 一种拍摄方法及相关设备

Country Status (3)

Country Link
EP (1) EP4395354A1 (zh)
CN (1) CN117177064A (zh)
WO (1) WO2023231696A1 (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110072070A (zh) * 2019-03-18 2019-07-30 华为技术有限公司 一种多路录像方法及设备
CN113542581A (zh) * 2020-04-22 2021-10-22 华为技术有限公司 多路录像的取景方法、图形用户界面及电子设备
CN113923391A (zh) * 2021-09-08 2022-01-11 荣耀终端有限公司 视频处理的方法、设备、存储介质和程序产品
CN114500901A (zh) * 2022-04-02 2022-05-13 荣耀终端有限公司 双景录像方法、装置和电子设备

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102378081B (zh) * 2010-08-23 2016-03-30 联想(北京)有限公司 电子设备及其发音方法和一种音箱
WO2016202764A1 (en) * 2015-06-15 2016-12-22 Thomson Licensing Apparatus and method for video zooming by selecting and tracking an image area
CN111684267B (zh) * 2018-02-02 2024-06-28 富士胶片株式会社 图像处理装置及图像处理方法
CN110324553B (zh) * 2018-03-28 2021-02-26 北京富纳特创新科技有限公司 基于视频通信的实景窗系统
CN111757137A (zh) * 2020-07-02 2020-10-09 广州博冠光电科技股份有限公司 一种基于单镜头直播视频的多路特写播放方法及装置
CN113810604B (zh) * 2021-08-12 2023-04-07 荣耀终端有限公司 文档拍摄方法、电子设备和存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110072070A (zh) * 2019-03-18 2019-07-30 华为技术有限公司 一种多路录像方法及设备
CN112954219A (zh) * 2019-03-18 2021-06-11 荣耀终端有限公司 一种多路录像方法及设备
CN113542581A (zh) * 2020-04-22 2021-10-22 华为技术有限公司 多路录像的取景方法、图形用户界面及电子设备
CN113923391A (zh) * 2021-09-08 2022-01-11 荣耀终端有限公司 视频处理的方法、设备、存储介质和程序产品
CN114500901A (zh) * 2022-04-02 2022-05-13 荣耀终端有限公司 双景录像方法、装置和电子设备

Also Published As

Publication number Publication date
EP4395354A1 (en) 2024-07-03
CN117177064A (zh) 2023-12-05

Similar Documents

Publication Publication Date Title
WO2021104508A1 (zh) 一种视频拍摄方法与电子设备
CN114205522B (zh) 一种长焦拍摄的方法及电子设备
WO2021244455A1 (zh) 一种图像内容的去除方法及相关装置
CN113099146B (zh) 一种视频生成方法、装置及相关设备
EP4109879A1 (en) Image color retention method and device
WO2022262550A1 (zh) 一种拍摄视频的方法及电子设备
CN113918766B (zh) 视频缩略图的显示方法、设备和存储介质
CN115442509A (zh) 拍摄方法、用户界面及电子设备
US20230353864A1 (en) Photographing method and apparatus for intelligent framing recommendation
WO2023231697A1 (zh) 一种拍摄方法及相关设备
CN115883958A (zh) 一种人像拍摄方法
WO2023231696A1 (zh) 一种拍摄方法及相关设备
WO2023226695A1 (zh) 录像方法、装置及存储介质
WO2023226694A1 (zh) 录像方法、装置及存储介质
WO2023226699A1 (zh) 录像方法、装置及存储介质
CN115484392B (zh) 一种拍摄视频的方法及电子设备
CN115484390B (zh) 一种拍摄视频的方法及电子设备
WO2023072113A1 (zh) 显示方法及电子设备
WO2023035868A1 (zh) 拍摄方法及电子设备
WO2023231616A1 (zh) 一种拍摄方法和电子设备
CN117395496A (zh) 一种拍摄方法及相关设备
CN115811656A (zh) 一种拍摄视频的方法及电子设备
CN117459825A (zh) 一种拍摄方法和电子设备
CN117119285A (zh) 一种拍摄方法
CN117201713A (zh) 音频处理方法及电子设备

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23814882

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 23814882.9

Country of ref document: EP

Ref document number: 2023814882

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 2023814882

Country of ref document: EP

Effective date: 20240326