CN113347378A - 一种录像方法及设备 - Google Patents
一种录像方法及设备 Download PDFInfo
- Publication number
- CN113347378A CN113347378A CN202110612009.8A CN202110612009A CN113347378A CN 113347378 A CN113347378 A CN 113347378A CN 202110612009 A CN202110612009 A CN 202110612009A CN 113347378 A CN113347378 A CN 113347378A
- Authority
- CN
- China
- Prior art keywords
- party application
- camera
- cameras
- data
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 61
- 230000001960 triggered effect Effects 0.000 claims abstract description 25
- 238000003860 storage Methods 0.000 claims description 14
- 238000005520 cutting process Methods 0.000 claims description 9
- 230000004048 modification Effects 0.000 claims description 9
- 238000012986 modification Methods 0.000 claims description 9
- 238000012545 processing Methods 0.000 abstract description 14
- 230000008569 process Effects 0.000 abstract description 12
- 238000010586 diagram Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
- H04M1/72439—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
- H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Computer Networks & Wireless Communication (AREA)
- Studio Devices (AREA)
Abstract
本发明涉及录像领域，尤其涉及一种录像方法及设备。其中，该方法应用于部署在终端硬件抽象层中的相机模块，包括：接收到由第三方应用触发的开启指令时，启动N个摄像头，所述N≥2；接收到由所述第三方应用触发的预览指令时，对所述N个摄像头拍摄的图像帧数据进行拼接，得到拼接图像数据；接收到由所述第三方应用触发的录像指令时，将所述拼接图像数据发送给所述第三方应用的录制控件，所述录制控件用于基于拼接图像数据生成录制数据。本发明实施例中，通过将图像帧数据拼接的相关过程交由终端硬件抽象层中的相机模块来执行，从而降低了第三方应用的数据处理压力，增加了录像过程的流畅度，提高了用户的录像体验。
Description
【技术领域】
本发明涉及录像领域，尤其涉及一种录像方法及设备。
【背景技术】
录像是一种手机上常用的功能，通过光学、电磁等方法把摄像头采集到的图像记录下来，并生成对应的录制数据。用户可以通过录像功能记录喜欢的画面。而随着手机的硬件发展与扩充，现在手机上往往配置有多个摄像头。而传统的录像方式仅能使用单一摄像头进行录像。因此，如何同时使用多个摄像头进行录像并生成对应的录制数据，是目前亟待解决的问题。
【发明内容】
为了解决上述问题，本发明实施例提供了一种录像方法及设备，通过部署在终端硬件抽象层中的相机模块来对N个摄像头的拍摄的图像帧数据进行拼接，并将拼接后生成的拼接图像数据发送给第三方应用的录制控件，进而生成录制数据。
第一方面，本发明实施例提供一种录像方法，所述方法应用于部署在终端硬件抽象层的相机模块，包括：
接收到由第三方应用触发的开启指令时，启动N个摄像头，所述N≥2；
接收到由所述第三方应用触发的预览指令时，对所述N个摄像头拍摄的图像帧数据进行拼接，得到拼接图像数据；
接收到由所述第三方应用触发的录像指令时，将所述拼接图像数据发送给所述第三方应用的录制控件，所述录制控件用于基于拼接图像数据生成录制数据。
本发明实施例中，通过部署在终端硬件抽象层的相机模块对N个摄像头拍摄的图像帧数据进行拼接，并将拼接后生成的拼接图像数据发送给第三方应用的录制控件，进而得到录像数据。降低了第三方应用的处理压力，增加了录像过程的流畅性以及用户的录像体验。
在一种可能的实现方式中，接收到由第三方应用触发的开启指令时，启动N个摄像头，包括：
检测到应用框架层的相机服务模块创建相机服务的消息时，根据所述创建相机服务的消息确定待开启的N个摄像头的标识信息；其中，所述相机服务模块是检测到所述第三方应用创建相机实例时创建所述相机服务；
根据所述N个摄像头的标识信息，启动所述N个摄像头。
在一种可能的实现方式中，接收到由所述第三方应用触发的预览指令之前，所述方法还包括：
接收应用框架层的相机服务模块发送的第一数据流配置指令，所述第一数据流配置指令中包括缓存容器信息；
根据所述缓存容器信息配置所述N个摄像头与所述相机模块之间的数据流通道，所述相机模块根据所述数据流通道从所述N个摄像头获取图像帧数据以及将所述拼接图像数据发送到所述相机服务模块的缓存容器中。
在一种可能的实现方式中，所述第一数据流配置指令是所述相机服务模块接收到来自所述第三方应用的初始数据流配置指令时发送的；
所述初始数据流配置指令中包括录制控件的第一缓存容器信息和预览控件的第二缓存容器信息，所述第一缓存容器信息和所述第二缓存容器信息用于确定所述缓存容器信息。
在一种可能的实现方式中，接收到由所述第三方应用触发的预览指令时，对所述N个摄像头拍摄的图像帧数据进行拼接，得到拼接图像数据之后，所述方法还包括：
将所述拼接图像数据发送到所述相机服务模块的缓存容器中，所述相机服务模块用于将所述缓存容器中的所述拼接图像数据发送到所述预览控件的第二缓存容器中，所述第二缓存容器中的拼接图像数据用于进行预览。
在一种可能的实现方式中，将所述拼接图像数据发送给所述第三方应用的录制控件，包括：
将所述拼接图像数据发送给所述相机服务模块的缓存容器中，所述相机服务模块用于将所述缓存容器中的所述拼接图像数据发送到所述录制控件的第一缓存容器中，所述第一缓存容器中的拼接图像数据用于生成所述录制数据。
在一种可能的实现方式中，所述方法还包括：
接收所述第三方应用发送的N个显示区域的区域参数信息，所述N个显示区域与所述N个摄像头一一对应，所述N个显示区域分别用于显示所述拼接图像数据中与其对应的摄像头的图像帧部分；
对所述N个摄像头拍摄的图像帧数据进行拼接，得到拼接图像数据，包括：
根据所述N个显示区域的区域参数信息，分别对所述N个摄像头拍摄的图像帧数据进行裁剪；
对裁剪之后的N个图像帧数据进行拼接，得到所述拼接图像数据。
在一种可能的实现方式中，所述方法还包括：
接收所述第三方应用发送的区域参数修改信息；
根据所述区域参数修改信息，对所述N个显示区域的区域参数信息进行对应修改；
根据修改后的所述N个显示区域的区域参数信息，分别对所述N个摄像头拍摄的图像帧数据重新进行裁剪；
对重新裁剪之后的N个图像帧数据进行拼接，得到重新拼接的拼接图像数据并发送给所述第三方应用的录制控件。
第二方面，本发明实施例提供一种终端设备，包括：
应用层和终端硬件抽象层，所述应用层中部署有第三方应用，所述终端硬件抽象层中部署有相机模块；
所述相机模块用于：
接收到由第三方应用触发的开启指令时，启动N个摄像头，所述N≥2；
接收到由所述第三方应用触发的预览指令时，对所述N个摄像头拍摄的图像帧数据进行拼接，得到拼接图像数据；
接收到由所述第三方应用触发的录像指令时，将所述拼接图像数据发送给所述第三方应用的录制控件。
在一种可能的实现方式中，所述终端设备包括：
至少一个处理器；以及
与所述处理器通信连接的至少一个存储器，其中：
所述存储器存储有可被所述处理器执行的程序指令，所述处理器调用所述程序指令能够执行第一方面所述的方法。
第三方面，本发明实施例提供一种计算机可读存储介质，所述计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行第一方面所述的方法。
应当理解的是，本发明实施例的第二～三方面与本发明实施例的第一方面的技术方案一致，各方面及对应的可行实施方式所取得的有益效果相似，不再赘述。
【附图说明】
为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明实施例的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。
图1为本发明实施例提供的一种终端设备的系统架构示意图；
图2为本发明实施例提供的一种录像方法的流程图；
图3为本发明实施例提供的另一种录像方法的流程图；
图4为本发明实施例提供的另一种图像帧数据的拼接示意图；
图5为本发明实施例提供的另一种录像方法的流程图；
图6为本发明实施例提供的一种终端设备的结构示意图；
图7为本发明实施例提供的另一种终端设备的结构示意图。
【具体实施方式】
为了更好的理解本说明书的技术方案，下面结合附图对本发明实施例进行详细描述。
应当明确，所描述的实施例仅仅是本说明书一部分实施例，而不是全部的实施例。基于本说明书中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
在本发明实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本说明书。在本发明实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。
本发明实施例中，由终端硬件抽象层中的相机模块来对N个摄像头拍摄的图像帧数据进行拼接，降低了第三方应用的数据处理压力，提高了用户体验。
图1为本发明实施例提供的一种终端设备的系统框架图，如图1所示，终端设备主要包含应用层、应用框架层、终端硬件抽象层、驱动层和硬件层。其中，应用层主要包含系统应用和第三方应用。所述第三方应用可以为相机应用。具体的，相机应用可以为系统自带的相机应用程序，也可以为非系统自带的相机应用程序。应用框架层种包含窗口管理器、内容提供器、通知管理器、视图系统、相机服务层(图1中未示出)中的相机服务模块和资源管理器。终端硬件抽象层中包含显示模块、相机模块、音频模块和传感器模块。其中，终端硬件抽象层中的各个模块用于通过驱动层中各自的驱动与硬件层中对应的硬件进行交互，并将硬件输出的数据进行处理后提供给应用框架层，由应用框架层将相应的数据提供给应用层中的应用。其中，每个硬件均拥有属于自己的驱动以及硬件抽象层。本发明实施例中，为了降低第三方应用的数据处理压力，在终端硬件抽象层中设置了相机模块，通过相机模块来完成图像帧数据的拼接工作。第三方应用只需要对拼接后的拼接图像数据进行对应显示即可，无需对拼接图像数据进行处理。从而可以避免录像过程中由于第三方应用的数据处理压力过大而产生的卡顿现象，增加录像过程的流畅度，提高用户的录像体验。驱动层中主要包含各种硬件对应的驱动，如图1中示出的显示驱动、摄像头驱动、音频驱动和传感器驱动等。硬件层主要包含终端上设置的各个硬件设备，如图1中示出的摄像头、传感器、存储器、电池、麦克风、扬声器、显示屏和指示器等。
图2为本发明实施例提供的一种应用于终端硬件抽象层的相机模块的流程图。如图2所示，该方法包括：
步骤201，接收到由第三方应用触发的开启指令时，启动N个摄像头，所述N≥2。其中，第三方应用可以为相机应用，开启指令中可以包含N个摄像头的标识信息，以使相机模块根据N个摄像头的标识信息来启动对应的N个摄像头。可选的，当相机模块成功启动N个摄像头后，可以向第三方应用发送一个开启成功反馈信息，或者在对一个或多个摄像头启动失败后，可以向第三方应用发送一个开启失败的反馈信息，以使第三方应用知晓摄像头的开启情况。在一些实施例中，所述开启指令可以为双景录像模式的开启指令，则对应的摄像头的数量为两个。具体的，两个摄像头可以为一个前置摄像头与一个后置摄像头的组合形式，也可以为两个后置摄像头的组合形式。两个摄像头的组合形式可以根据用户选择的双景录像模式确定。
步骤202，接收到由第三方应用触发的预览指令时，对N个摄像头拍摄的图像帧数据进行拼接，得到拼接图像数据。其中，相机模块可以根据第三方应用提供的N个显示区域的区域参数信息来对N个摄像头拍摄的图像帧数据进行拼接，如图3所示，该方法处理步骤包括：
步骤S2021，接收第三方应用发送的N个显示区域的区域参数信息，所述N个显示区域与所述N个摄像头一一对应，所述N个显示区域分别用于显示所述拼接图像数据中与其对应的摄像头的图像帧部分。其中，区域参数信息可以包含在第三方应用发送的预览指令中，可选的，也可以由第三方应用单独发送区域参数信息给相机模块。可选的，区域参数信息可以为每个显示区域对应的数据格式信息，例如，第N个显示窗口对应的区域参数信息为720×1080。
步骤S2022，根据N个显示区域的区域参数信息，分别对N个摄像头拍摄的图像帧数据进行裁剪。例如，共有两个显示区域，每个摄像头所拍摄的图像帧数据的原格式为1920×1080，两个显示区域的区域参数信息分别为：1280×1080和740×1080。其中，N个显示区域的区域参数信息之和应与裁剪前的原图像帧数据相同，例如，显示区域共有三个，图像帧数据的原数据格式为1920×1080，则三个显示区域的区域参数信息中的长度之和应为1920，三个显示区域的区域参数信息中的宽度都应为1080。
图4示出了一种对两个摄像头拍摄的图像帧数据进行裁剪以及拼接的示意图，如图4所示，在对图像帧数据进行裁剪时，可以以图像帧数据的中心为界限，向两边分别取二分之一区域参数信息，例如图中示出的左侧的图像帧数据，以图像帧数据中心为界限，向两侧分别取1280的二分之一，并进行切割，所得即为裁剪后的图像帧数据。
步骤S2023，对裁剪之后的N个图像帧数据进行拼接，得到拼接图像数据。如图4所示，拼接后的拼接图像数据的数据格式应与原图像帧数据的数据格式相同，均为1920×1080。
步骤203，接收到由第三方应用触发的录像指令时，将拼接图像数据发送给第三方应用的录制控件，录制控件用于基于拼接图像数据生成录制数据。其中，录制控件可以为第三方应用所携带的录制控件，也可以为终端设备的系统中自带的录制控件。录制控件通过对拼接图像数据进行编码的方式生成对应的录制数据。例如，终端设备的系统为安卓系统，则对应的录制控件可以为MediaRecoder。其中，录制数据的格式可以为MP4、AVI和MOV等常见视频数据的格式。
在一些实施例中，在录像过程中，用户可以随时调整N个摄像头对应的显示区域的大小。具体的，用户可以在第三方应用上通过拖动或点击等操作后，第三方应用根据用户的操作生成该对应的区域参数修改信息，并将该区域参数修改信息发送给相机模块。相机模块接收第三方应用发送的区域参数修改信息后，根据区域参数修改信息，对N个显示区域的区域参数信息进行对应修改。之后根据修改后的N个显示区域的区域参数信息，分别对N个摄像头拍摄的图像帧数据重新进行裁剪。相机模块对重新裁剪之后的N个图像帧数据进行拼接，得到重新拼接的拼接图像数据并发送给第三方应用的录制控件。由此可以在保证各个摄像头拍摄的图像帧数据不发生变形的情况下调整各个摄像头的对应的显示区域的大小的技术效果。
在一些实施例中，第三方应用无法直接向终端硬件抽象层中的相机模块发送指令或消息，因此需要由应用框架层进行转发。具体的，当相机模块检测到应用框架层的相机服务模块创建相机服务的消息时，根据创建相机服务的消息确定待开启的N个摄像头的标识信息。其中，相机服务模块是检测到第三方应用创建相机实例时创建相机服务。最后，相机模块根据N个摄像头的标识信息，启动N个摄像头。
在一些实施例中，在接收到由第三方应用触发的预览指令之前，需要先配置数据流，如图5所示，该方法包括：
步骤501，接收应用框架层的相机服务模块发送的第一数据流配置指令，第一数据流配置指令中包括缓存容器信息。其中，缓存容器为一种用于存放数据传输载体。在安卓系统的终端设备中，缓存容器信息可以为surface信息。其中，第一数据流配置指令是相机服务模块接收到来自第三方应用的初始数据流配置指令时发送的。初始数据流配置指令中包括录制控件的第一缓存容器信息和预览控件的第二缓存容器信息，第一缓存容器信息和第二缓存容器信息用于确定缓存容器信息。
步骤502，根据缓存容器信息配置N个摄像头与相机模块之间的数据流通道，相机模块根据数据流通道从N个摄像头获取图像帧数据以及将拼接图像数据发送到相机服务模块的缓存容器中。具体的，在录像时，相机模块将拼接图像数据发送给相机服务模块的缓存容器中，相机服务模块用于将缓存容器中的所述拼接图像数据发送到录制控件的第一缓存容器中，第一缓存容器中的拼接图像数据用于生成录制数据。
在数据流配置完成之后，第三方应用可以下发预览指令，以进行预览步骤。具体的，相机模块接收到第三方应用通过相机服务模块发送的预览指令后，将拼接图像数据发送到相机服务模块的缓存容器中，相机服务模块用于将缓存容器中的拼接图像数据发送到预览控件的第二缓存容器中，第二缓存容器中的拼接图像数据用于进行预览。
在一些实施例中，相机模块在接收到第三方应用发送的预览指令之后，不仅需要对N个摄像头拍摄的图像帧数据进行拼接，还需要将拼接图像数据发送给预览控件进行预览显示。具体的，相机模块将拼接图像数据发送到相机服务模块的缓存容器中，相机服务模块用于将缓存容器中的拼接图像数据发送到预览控件的第二缓存容器中，第二缓存容器中的拼接图像数据用于进行预览。例如，终端设备的系统为安卓系统，则预览控件可以为SurfaceView。可选的，在预览过程中，用户可以调整各个显示区域的大小。
在一个具体示例中，上述方法可以应用于安卓系统的智能终端中，例如安卓系统的手机、平板电脑等。对应的，上述的第三方应用可以为相机APP，终端硬件抽象层中的相机模块可以为相机硬件抽象层(Camera HAL)，上述相机服务层中的相机服务模块可以为部署在相机框架层(Camera Framework)中的相机服务器(Camera Server)，上述录制控件可以为媒体录制器(MediaRecoder)，上述预览控件可以为预览显示器(SurfaceView)。图6示出了一种安卓系统中的终端设备的系统结构示意图，如图所示，终端设备可以包含相机APP、相机服务器、相机硬件抽象层、媒体录制器和预览显示器。当摄像头的数量N为2的时候，对应的录像方法可以为双景录像方法。则双景录像方法的处理步骤为，当用户通过相机APP开启双景录像模式时，相机APP与Camera Server进行信息交互，仅打开一个Camera实例，其中，包含第一摄像头和第二摄像头的标识信息。之后Camera Server负责创建相机服务来与Camera HAL进行交互。当Camera HAL检测到Camera Server创建相机服务的消息后，从相机服务的消息中确定第一摄像头和第二摄像头的标识信息，并根据第一摄像头和第二摄像头的标识信息来启动第一摄像头和第二摄像头。当第一摄像头和第二摄像头启动后，CameraHAL向Camera Server反馈一个成功信息。Camera Server接收到之后再向相机APP发送一个开启成功的反馈消息，此时，该Camera实例打开完成。
相机APP接收到Camera Server发送的开启成功的反馈消息后，开始配置数据流。具体的，相机APP将从SurfaceView获取的surface容器信息以及从MediaRecoder获取的video surface容器信息提供给Camera Server，Camera Server对surface容器信息和video surface容器信息进行包装处理，之后Camera Server将包装处理后的容器信息发送给Camera HAL。由此完成配置数据流的过程。之后，Camera HAL向Camera Server发送一个配置成功的反馈信息，Camera Server接收到该反馈信息后，向相机APP发送一个配置成功的反馈信息。相机APP接收到Camera Server发送的反馈信息后，确定配置数据流完成。
相机APP确定数据流配置完成后，发送包含区域参数信息的预览指令给CameraServer。Camera Server将预览指令转发给Camera HAL，Camera HAL接收到预览指令后，将第一摄像头和第二摄像头采集的YUV数据根据预览指令中的区域参数信息进行裁剪以及拼接，得到拼接YUV数据。之后将拼接YUV数据发送到Camera Server的缓存容器中。之后，Camera Server从缓存容器中获取拼接YUV数据，并将拼接YUV数据发送到SurfaceView的surface容器中。最后，SurfaceView从surface容器中获取到拼接YUV数据，并进行预览显示。相机APP可以通过调用SurfaceView的显示窗口的方式将预览画面在APP的预览界面进行显示，其中APP并不涉及YUV数据的处理。
之后，当用户在相机APP中触发录像按键时，相机APP生成对应的录像指令，并将录像指令发送给Camera Server,Camera Server接收到录像指令后，将拼接YUV数据发送到MediaRecoder的video surface容器中，MediaRecoder从video surface容器中获取到拼接YUV数据，并进行对应的编码处理以生成录制数据。
对应上述录像方法，本发明实施例提供一种终端设备的结构示意图，如图7所示，终端设备可以包括至少一个处理器；以及与上述处理器通信连接的至少一个存储器，其中：存储器存储有可被处理器执行的程序指令，上述处理器调用上述程序指令能够执行本说明书图1～图6所示实施例提供的录像方法。
如图7所示，终端设备以通用计算设备的形式表现。终端设备的组件可以包括但不限于：一个或者多个处理器710、通信接口720和存储器730，连接不同系统组件(包括存储器730、通信接口720和处理单元710)的通信总线740。
通信总线740表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，外围总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(Industry StandardArchitecture；以下简称：ISA)总线，微通道体系结构(Micro Channel Architecture；以下简称：MAC)总线，增强型ISA总线、视频电子标准协会(Video Electronics StandardsAssociation；以下简称：VESA)局域总线以及外围组件互连(Peripheral ComponentInterconnection；以下简称：PCI)总线。
终端设备典型地包括多种计算机系统可读介质。这些介质可以是任何能够被终端设备访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。
存储器730可以包括易失性存储器形式的计算机系统可读介质，例如随机存取存储器(Random Access Memory；以下简称：RAM)和/或高速缓存存储器。终端设备可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。存储器730可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本说明书各实施例的功能。
具有一组(至少一个)程序模块的程序/实用工具，可以存储在存储器730中，这样的程序模块包括——但不限于——操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块通常执行本说明书所描述的实施例中的功能和/或方法。
处理器710通过运行存储在存储器730中的程序，从而执行各种功能应用以及数据处理，例如实现本说明书图1～图6所示实施例提供的录像方法。
本说明书实施例提供一种计算机可读存储介质，所述计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行本说明书图1～图6所示实施例提供的录像方法。
上述计算机可读存储介质可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ReadOnly Memory；以下简称：ROM)、可擦式可编程只读存储器(Erasable Programmable ReadOnly Memory；以下简称：EPROM)或闪存、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下，在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外，在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中，多任务处理和并行处理也是可以的或者可能是有利的。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本说明书的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本说明书的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现定制逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本说明书的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本说明书的实施例所属技术领域的技术人员所理解。
取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。类似地，取决于语境，短语“如果确定”或“如果检测(陈述的条件或事件)”可以被解释成为“当确定时”或“响应于确定”或“当检测(陈述的条件或事件)时”或“响应于检测(陈述的条件或事件)”。
需要说明的是，本说明书实施例中所涉及的设备可以包括但不限于个人计算机(Personal Computer；以下简称：PC)、个人数字助理(Personal Digital Assistant；以下简称：PDA)、无线手持设备、平板电脑(Tablet Computer)、手机、MP3显示器、MP4显示器等。
在本说明书所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
另外，在本说明书各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机装置(可以是个人计算机，连接器，或者网络装置等)或处理器(Processor)执行本说明书各个实施例所述方法的部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory；以下简称：ROM)、随机存取存储器(Random Access Memory；以下简称：RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本说明书的较佳实施例而已，并不用以限制本说明书，凡在本说明书的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本说明书保护的范围之内。
Claims (11)
1.一种录像方法，其特征在于，所述方法应用于部署在终端硬件抽象层的相机模块，包括：
接收到由第三方应用触发的开启指令时，启动N个摄像头，所述N≥2；
接收到由所述第三方应用触发的预览指令时，对所述N个摄像头拍摄的图像帧数据进行拼接，得到拼接图像数据；
接收到由所述第三方应用触发的录像指令时，将所述拼接图像数据发送给所述第三方应用的录制控件，所述录制控件用于基于拼接图像数据生成录制数据。
2.根据权利要求1所述的方法，其特征在于，接收到由第三方应用触发的开启指令时，启动N个摄像头，包括：
检测到应用框架层的相机服务模块创建相机服务的消息时，根据所述创建相机服务的消息确定待开启的N个摄像头的标识信息；其中，所述相机服务模块是检测到所述第三方应用创建相机实例时创建所述相机服务；
根据所述N个摄像头的标识信息，启动所述N个摄像头。
3.根据权利要求1所述的方法，其特征在于，接收到由所述第三方应用触发的预览指令之前，所述方法还包括：
接收应用框架层的相机服务模块发送的第一数据流配置指令，所述第一数据流配置指令中包括缓存容器信息；
根据所述缓存容器信息配置所述N个摄像头与所述相机模块之间的数据流通道，所述相机模块根据所述数据流通道从所述N个摄像头获取图像帧数据以及将所述拼接图像数据发送到所述相机服务模块的缓存容器中。
4.根据权利要求3所述的方法，其特征在于，所述第一数据流配置指令是所述相机服务模块接收到来自所述第三方应用的初始数据流配置指令时发送的；
所述初始数据流配置指令中包括录制控件的第一缓存容器信息和预览控件的第二缓存容器信息，所述第一缓存容器信息和所述第二缓存容器信息用于确定所述缓存容器信息。
5.根据权利要求4所述的方法，其特征在于，接收到由所述第三方应用触发的预览指令时，对所述N个摄像头拍摄的图像帧数据进行拼接，得到拼接图像数据之后，所述方法还包括：
将所述拼接图像数据发送到所述相机服务模块的缓存容器中，所述相机服务模块用于将所述缓存容器中的所述拼接图像数据发送到所述预览控件的第二缓存容器中，所述第二缓存容器中的拼接图像数据用于进行预览。
6.根据权利要求4所述的方法，其特征在于，将所述拼接图像数据发送给所述第三方应用的录制控件，包括：
将所述拼接图像数据发送给所述相机服务模块的缓存容器中，所述相机服务模块用于将所述缓存容器中的所述拼接图像数据发送到所述录制控件的第一缓存容器中，所述第一缓存容器中的拼接图像数据用于生成所述录制数据。
7.根据权利要求1所述的方法，其特征在于，所述方法还包括：
接收所述第三方应用发送的N个显示区域的区域参数信息，所述N个显示区域与所述N个摄像头一一对应，所述N个显示区域分别用于显示所述拼接图像数据中与其对应的摄像头的图像帧部分；
对所述N个摄像头拍摄的图像帧数据进行拼接，得到拼接图像数据，包括：
根据所述N个显示区域的区域参数信息，分别对所述N个摄像头拍摄的图像帧数据进行裁剪；
对裁剪之后的N个图像帧数据进行拼接，得到所述拼接图像数据。
8.根据权利要求7所述的方法，其特征在于，所述方法还包括：
接收所述第三方应用发送的区域参数修改信息；
根据所述区域参数修改信息，对所述N个显示区域的区域参数信息进行对应修改；
根据修改后的所述N个显示区域的区域参数信息，分别对所述N个摄像头拍摄的图像帧数据重新进行裁剪；
对重新裁剪之后的N个图像帧数据进行拼接，得到重新拼接的拼接图像数据并发送给所述第三方应用的录制控件。
9.一种终端设备，其特征在于，包括：
应用层和终端硬件抽象层，所述应用层中部署有第三方应用，所述终端硬件抽象层中部署有相机模块；
所述相机模块用于：
接收到由第三方应用触发的开启指令时，启动N个摄像头，所述N≥2；
接收到由所述第三方应用触发的预览指令时，对所述N个摄像头拍摄的图像帧数据进行拼接，得到拼接图像数据；
接收到由所述第三方应用触发的录像指令时，将所述拼接图像数据发送给所述第三方应用的录制控件。
10.根据权利要求9所述的终端设备，其特征在于，包括：
至少一个处理器；以及
与所述处理器通信连接的至少一个存储器，其中：
所述存储器存储有可被所述处理器执行的程序指令，所述处理器调用所述程序指令能够执行如权利要求1至8任一所述的方法。
11.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行如权利要求1至8任一所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110612009.8A CN113347378A (zh) | 2021-06-02 | 2021-06-02 | 一种录像方法及设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110612009.8A CN113347378A (zh) | 2021-06-02 | 2021-06-02 | 一种录像方法及设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113347378A true CN113347378A (zh) | 2021-09-03 |
Family
ID=77472706
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110612009.8A Pending CN113347378A (zh) | 2021-06-02 | 2021-06-02 | 一种录像方法及设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113347378A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117479000A (zh) * | 2022-08-08 | 2024-01-30 | 荣耀终端有限公司 | 录像方法和相关装置 |
| WO2024183345A1 (zh) * | 2023-03-03 | 2024-09-12 | 西安广和通无线软件有限公司 | 多摄像头画面预览方法、装置、电子设备及存储介质 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103442172A (zh) * | 2013-08-15 | 2013-12-11 | Tcl集团股份有限公司 | 一种基于android平台的相机画质调节方法、系统及移动终端 |
| WO2019056242A1 (zh) * | 2017-09-21 | 2019-03-28 | 深圳传音通讯有限公司 | 一种智能终端的相机拍摄参数设置方法、设置装置及智能终端 |
| CN109587401A (zh) * | 2019-01-02 | 2019-04-05 | 广州市奥威亚电子科技有限公司 | 电子云台多场景拍摄实现方法及系统 |
| CN110072070A (zh) * | 2019-03-18 | 2019-07-30 | 华为技术有限公司 | 一种多路录像方法及设备 |
| CN110933275A (zh) * | 2019-12-09 | 2020-03-27 | Oppo广东移动通信有限公司 | 拍照方法及相关设备 |
| CN111491102A (zh) * | 2020-04-22 | 2020-08-04 | Oppo广东移动通信有限公司 | 拍照场景的检测方法、系统、移动终端及存储介质 |
-
2021
- 2021-06-02 CN CN202110612009.8A patent/CN113347378A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103442172A (zh) * | 2013-08-15 | 2013-12-11 | Tcl集团股份有限公司 | 一种基于android平台的相机画质调节方法、系统及移动终端 |
| WO2019056242A1 (zh) * | 2017-09-21 | 2019-03-28 | 深圳传音通讯有限公司 | 一种智能终端的相机拍摄参数设置方法、设置装置及智能终端 |
| CN109587401A (zh) * | 2019-01-02 | 2019-04-05 | 广州市奥威亚电子科技有限公司 | 电子云台多场景拍摄实现方法及系统 |
| CN110072070A (zh) * | 2019-03-18 | 2019-07-30 | 华为技术有限公司 | 一种多路录像方法及设备 |
| CN110933275A (zh) * | 2019-12-09 | 2020-03-27 | Oppo广东移动通信有限公司 | 拍照方法及相关设备 |
| CN111491102A (zh) * | 2020-04-22 | 2020-08-04 | Oppo广东移动通信有限公司 | 拍照场景的检测方法、系统、移动终端及存储介质 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117479000A (zh) * | 2022-08-08 | 2024-01-30 | 荣耀终端有限公司 | 录像方法和相关装置 |
| CN117479000B (zh) * | 2022-08-08 | 2024-08-27 | 荣耀终端有限公司 | 录像方法和相关装置 |
| WO2024183345A1 (zh) * | 2023-03-03 | 2024-09-12 | 西安广和通无线软件有限公司 | 多摄像头画面预览方法、装置、电子设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20240168624A1 (en) | Screen capture method and related device | |
| CN111597000B (zh) | 一种小窗口管理方法及终端 | |
| US20150094106A1 (en) | Image and message integration system and method | |
| CN113347378A (zh) | 一种录像方法及设备 | |
| CN110865837B (zh) | 一种进行系统升级的方法和终端 | |
| CN111367456A (zh) | 通信终端及多窗口模式下的显示方法 | |
| US20230260482A1 (en) | Electronic device projection method, medium thereof, and electronic device | |
| EP3547136A1 (en) | Method and apparatus for communication between webpage and operating system | |
| CN115525453B (zh) | 多屏协同中断的处理方法及电子设备 | |
| CN113360226A (zh) | 数据内容处理方法、装置、终端及存储介质 | |
| CN113709026B (zh) | 即时通信消息的处理方法、设备、存储介质和程序产品 | |
| WO2024183345A1 (zh) | 多摄像头画面预览方法、装置、电子设备及存储介质 | |
| US11194598B2 (en) | Information display method, terminal and storage medium | |
| CN114035870A (zh) | 一种终端设备、应用资源控制方法和存储介质 | |
| CN108469991B (zh) | 多媒体数据处理方法及装置 | |
| EP4346194A1 (en) | Vehicle, and processing method and device for vehicle user privacy | |
| CN113129238B (zh) | 拍照终端及图像校正方法 | |
| CN114449171B (zh) | 控制摄像头的方法、终端设备、存储介质及程序产品 | |
| CN113642010B (zh) | 一种获取扩展存储设备数据的方法及移动终端 | |
| CN112565873A (zh) | 屏幕录制方法和装置、设备及存储介质 | |
| WO2024037421A1 (zh) | 一种操作方法、电子设备及介质 | |
| CN112181676B (zh) | 共享录音数据的方法、装置、终端设备及可读存储介质 | |
| CN113949684B (zh) | 视频传输方法、装置、介质和计算设备 | |
| CN113255644B (zh) | 显示设备及其图像识别方法 | |
| CN116775261A (zh) | 内存分配方法、装置、电子设备和存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210903 |