CN111679772B - 一种屏幕录制方法、系统、多屏设备和可读存储介质 - Google Patents
一种屏幕录制方法、系统、多屏设备和可读存储介质 Download PDFInfo
- Publication number
- CN111679772B CN111679772B CN202010823229.0A CN202010823229A CN111679772B CN 111679772 B CN111679772 B CN 111679772B CN 202010823229 A CN202010823229 A CN 202010823229A CN 111679772 B CN111679772 B CN 111679772B
- Authority
- CN
- China
- Prior art keywords
- screen
- recording
- user
- screens
- recorded video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种屏幕录制方法、系统、多屏设备和可读存储介质，属于计算机技术领域。本发明通过根据用户所选定的多个标识，为多个扩展屏分别创建录屏虚拟设备、图层传输接口以及图层接口；根据多个录屏虚拟设备、多个图层传输接口以及多个图层接口，分别录制多个扩展屏的录制视频；实现了对多个扩展屏的显示内容进行录制，从而提高了用户体验。通过根据用户的操作和/或用户的瞳孔参数，分别获取用户对多个屏幕的关注度；根据多个关注度，将多个录制视频合成为最终录制视频，使得可以根据用户的关注需求，按照不同的方式对录制画面的大小和位置进行处理，从而进一步满足了用户对多个扩展屏的显示内容进行录制过程中的体验。
Description
技术领域
本发明涉及计算机技术领域，特别涉及一种屏幕录制方法、系统、多屏设备和可读存储介质。
背景技术
对于支持多屏的电子设备而言，常常需要在多块显示屏上分别显示不同的内容。当需要对多屏电子设备的屏幕进行录制时，通常默认对主屏进行屏幕录制，而对于扩展屏，尤其是多个扩展屏，不支持进行屏幕录制。
实际应用中，如当主屏和扩展屏中显示相关性显示内容时，对主屏及扩展屏同时进行录制的需求的场景较多，如利用主屏和扩展屏进行交互类的应用展示时，需要将扩展屏上的显示内容与主屏内容进行比较，以确定扩展屏相对于主屏显示内容的变化内容，基于该变化内容完成交互，但是现有技术却无法实现该交互过程中对扩展屏，尤其是多个扩展屏屏幕的显示内容进行录制，从而降低了用户体验。
发明内容
为了解决现有技术的问题，本发明实施例提供了一种屏幕录制方法、系统、多屏设备和可读存储介质。所述技术方案如下：
第一方面，提供了一种屏幕录制方法，所述方法包括：
获取用户触发的屏幕录制指令，显示多个屏幕的标识，所述多个屏幕包括主屏幕和多个扩展屏；
根据用户所选定的多个标识，为所述多个扩展屏分别创建录屏虚拟设备、图层传输接口以及图层接口；
根据所述多个录屏虚拟设备、所述多个图层传输接口以及所述多个图层接口，分别录制所述多个扩展屏的录制视频；
录制所述主屏幕的录制视频；
根据用户的操作和/或用户的瞳孔参数，分别获取用户对所述多个屏幕的关注度；
根据多个关注度，设置多个录制视频的尺寸和位置；
将所述多个录制视频，按照所述尺寸和所述位置，合成为最终录制视频；
其中，所述根据多个关注度，设置多个录制视频的尺寸和位置包括：
将所述关注度最高的屏幕所对应录制视频的尺寸设置为最大值，并将所述关注度最高的屏幕所对应录制视频的位置设置于中心位置；
将所述关注度中等的屏幕所对应录制视频的尺寸设置为中等值，并将所述关注度中等的屏幕所对应录制视频的位置设置于中心位置与边缘位置之间；
将所述关注度最小的屏幕所对应录制视频的尺寸设置为最小值，并将所述关注度最小的屏幕所对应录制视频的位置设置于边缘位置；
所述中心位置为所述最终录制视频画面的几何中心位置，所述边缘位置为所述最终录制视频画面的轮廓边缘位置。
可选的，所述获取用户触发的屏幕录制指令，显示多个屏幕的标识包括：
根据预设时间内用户的操作以及所运行的程序，获取所述多个扩展屏的运行状态，所述运行状态包括活跃或不活跃；
显示所述主屏幕的标识，以及所述运行状态为活跃的多个扩展屏的标识。
可选的，所述屏幕录制指令包括与所述多个扩展屏对应的画面尺寸和画面位置，所述分别录制所述多个扩展屏的录制视频包括：
分别在所述多个扩展屏上，显示与所述画面尺寸和所述画面位置对应的录制窗口；
在用户确认后，根据所述画面尺寸和所述画面位置，分别录制所述多个扩展屏的录制视频。
可选的，所述方法还包括：
在将所述运行状态为非活跃的扩展屏显示所述录制窗口；
其中，所述录制窗口至少包括多个屏幕的当前录制画面以及录制时间。
第二方面，提供了一种多屏设备，所述多屏设备包括：
获取模块，用于获取用户触发的屏幕录制指令，显示多个屏幕的标识，所述多个屏幕包括主屏幕和多个扩展屏；
创建模块，用于根据用户所选定的多个标识，为所述多个扩展屏分别创建录屏虚拟设备、图层传输接口以及图层接口；
录制模块，用于根据所述录屏虚拟设备、所述图层传输接口以及所述图层接口，分别录制所述多个扩展屏的录制视频；
所述录制模块还用于录制所述主屏幕的录制视频；
识别模块，用于根据用户的操作和/或用户的瞳孔参数，分别获取用户对所述多个屏幕的关注度；
合成模块，用于根据多个关注度，设置多个录制视频的尺寸和位置；
所述合成模块还用于将所述多个录制视频，按照所述尺寸和所述位置，合成为最终录制视频；
其中，所述合成模块具体用于：
将所述关注度最高的屏幕所对应录制视频的尺寸设置为最大值，并将所述关注度最高的屏幕所对应录制视频的位置设置于中心位置；
将所述关注度中等的屏幕所对应录制视频的尺寸设置为中等值，并将所述关注度中等的屏幕所对应录制视频的位置设置于中心位置与边缘位置之间；
将所述关注度最小的屏幕所对应录制视频的尺寸设置为最小值，并将所述关注度最小的屏幕所对应录制视频的位置设置于边缘位置；
所述中心位置为所述最终录制视频画面的几何中心位置，所述边缘位置为所述最终录制视频画面的轮廓边缘位置。
可选的，所述获取模块具体用于：
根据预设时间内用户的操作以及所运行的程序，获取所述多个扩展屏的运行状态，所述运行状态包括活跃或不活跃；
显示所述主屏幕的标识，以及所述运行状态为活跃的多个扩展屏的标识。
可选的，所述录制模块具体用于：
分别在所述多个扩展屏上，显示与所述画面尺寸和所述画面位置对应的录制窗口；
在用户确认后，根据所述画面尺寸和所述画面位置，分别录制所述多个扩展屏的录制视频。
可选的，所述设备还包括显示模块，用于：
在将所述运行状态为非活跃的扩展屏显示所述录制窗口；
其中，所述录制窗口至少包括多个屏幕的当前录制画面以及录制时间。
第三方面，提供了一种屏幕录制系统，所述系统包括：
获取装置，用于获取用户触发的屏幕录制指令，显示多个屏幕的标识，所述多个屏幕包括主屏幕和多个扩展屏；
创建装置，用于根据用户所选定的多个标识，为所述多个扩展屏分别创建录屏虚拟设备、图层传输接口以及图层接口；
录制装置，用于根据所述录屏虚拟设备、所述图层传输接口以及所述图层接口，分别录制所述多个扩展屏的录制视频；
所述录制装置还用于录制所述主屏幕的录制视频；
识别装置，用于根据用户的操作和/或用户的瞳孔参数，分别获取用户对所述多个屏幕的关注度；
合成装置，用于根据多个关注度，设置多个录制视频的尺寸和位置；
所述合成装置还用于将所述多个录制视频，按照所述尺寸和所述位置，合成为最终录制视频；
其中，所述合成装置具体用于：
将所述关注度最高的屏幕所对应录制视频的尺寸设置为最大值，并将所述关注度最高的屏幕所对应录制视频的位置设置于中心位置；
将所述关注度中等的屏幕所对应录制视频的尺寸设置为中等值，并将所述关注度中等的屏幕所对应录制视频的位置设置于中心位置与边缘位置之间；
将所述关注度最小的屏幕所对应录制视频的尺寸设置为最小值，并将所述关注度最小的屏幕所对应录制视频的位置设置于边缘位置；
所述中心位置为所述最终录制视频画面的几何中心位置，所述边缘位置为所述最终录制视频画面的轮廓边缘位置。
可选的，所述获取装置具体用于：
根据预设时间内用户的操作以及所运行的程序，获取所述多个扩展屏的运行状态，所述运行状态包括活跃或不活跃；
显示所述主屏幕的标识，以及所述运行状态为活跃的多个扩展屏的标识。
可选的，所述录制装置具体用于：
分别在所述多个扩展屏上，显示与所述画面尺寸和所述画面位置对应的第录制窗口；
在用户确认后，根据所述画面尺寸和所述画面位置，分别录制所述多个扩展屏的录制视频。
可选的，所述系统还包括显示装置，用于：
在将所述运行状态为非活跃的扩展屏显示所述录制窗口；
其中，所述录制窗口至少包括多个屏幕的当前录制画面以及录制时间。
第四方面，提供了一种计算机可读存储介质，所述可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现第一方面任一项所述方法的步骤。
本发明实施例提供了一种屏幕录制方法、系统、多屏设备和可读存储介质，包括：获取用户触发的屏幕录制指令，显示多个屏幕的标识，多个屏幕包括主屏幕和多个扩展屏；根据用户所选定的多个标识，为多个扩展屏分别创建录屏虚拟设备、图层传输接口以及图层接口；根据多个录屏虚拟设备、多个图层传输接口以及多个图层接口，分别录制多个扩展屏的录制视频；录制主屏幕的录制视频；根据用户的操作和/或用户的瞳孔参数，分别获取用户对多个屏幕的关注度；根据多个关注度，将多个录制视频合成为最终录制视频。
本发明实施例提供的技术方案带来的有益效果是：
1、通过根据用户所选定的多个标识，为多个扩展屏分别创建录屏虚拟设备、图层传输接口以及图层接口；根据多个录屏虚拟设备、多个图层传输接口以及多个图层接口，分别录制多个扩展屏的录制视频；实现了对多个扩展屏的显示内容进行录制，从而提高了用户体验。
2、通过根据用户的操作和/或用户的瞳孔参数，分别获取用户对多个屏幕的关注度；根据多个关注度，将多个录制视频合成为最终录制视频，使得可以根据用户的关注需求，按照不同的方式对录制画面的大小和位置进行处理，从而进一步满足了用户对多个扩展屏的显示内容进行录制过程中的体验。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种屏幕录制方法流程图；
图2是本发明实施例提供的一种多屏设备结构示意图；
图3是本发明实施例提供的一种屏幕录制系统示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
实施例一
本发明实施例提供了一种屏幕录制方法，参照图1所示，该方法包括：
101、获取用户触发的屏幕录制指令，显示多个屏幕的标识，多个屏幕包括主屏幕和多个扩展屏。
具体的，根据预设时间内用户的操作以及所运行的程序，获取多个扩展屏的运行状态，运行状态包括活跃或不活跃；
显示主屏幕的标识，以及运行状态为活跃的多个扩展屏的标识。
102、根据用户所选定的多个标识，为多个扩展屏分别创建录屏虚拟设备、图层传输接口以及图层接口。
103、根据多个录屏虚拟设备、多个图层传输接口以及多个图层接口，分别录制多个扩展屏的录制视频。
具体的，屏幕录制指令包括与多个扩展屏对应的画面尺寸和画面位置，分别录制多个扩展屏的录制视频包括：
分别在多个扩展屏上，显示与画面尺寸和画面位置对应的录制窗口；
在用户确认后，根据画面尺寸和画面位置，分别录制多个扩展屏的录制视频。
104、录制主屏幕的录制视频。
可选的，在执行步骤103至步骤104的同时，还可以执行步骤105。
105、在将运行状态为非活跃的扩展屏显示录制窗口。
具体的，录制窗口至少包括多个屏幕的当前录制画面以及录制时间。
106、根据用户的操作和/或用户的瞳孔参数，分别获取用户对多个屏幕的关注度。
107、根据多个关注度，将多个录制视频合成为最终录制视频。
具体的，根据多个关注度，设置多个录制视频的尺寸和位置；
将多个录制视频，按照尺寸和位置，合成为最终录制视频。
实施例二
本发明实施例提供了一种屏幕录制方法，该方法包括：
201、根据预设时间内用户的操作以及所运行的程序，获取多个扩展屏的运行状态。
具体的，运行状态包括活跃或不活跃，进一步的，对于任意一个扩展屏，当预设时间内，该屏幕上至少包含某个程序的界面或者子界面时，则该扩展屏的运行状态为活跃，否则，则为不活跃；
可选的，在实际应用中，对于任意一个扩展屏，当预设时间内，该屏幕上至少包含某个程序的界面或者子界面时，判断该界面或者子界面所占屏幕的大小，若该该界面或者子界面占屏幕的50%或者50%以上，则该扩展屏的运行状态为活跃，否则，则为不活跃。
进一步的，根据预设时间内用户的操作，获取多个扩展屏的运行状态的过程可以为：
确认预设时间内用户是否有针对某个程序的界面或者子界面的操作，该操作可以是点击该界面或者子界面，或者激活该该界面或者子界面；若是，则该扩展屏的运行状态为活跃。
进一步的，若多屏设备还包括摄像头，则根据预设时间内用户的操作，获取多个扩展屏的运行状态的过程可以为：
通过摄像头获取用户的瞳孔朝向数据；
根据该瞳孔朝向数据，以及主屏幕和多个扩展屏的位置，获取预设时间内，用户的视线是否分别在主屏幕和多个扩展屏停留，若是，则用户的视线所停留的扩展屏的运行状态为活跃。
202、获取用户触发的屏幕录制指令。
具体的，用户触发屏幕录制指令可以为：
用户通过触控或者输入设备输入点击手势，该点击手势指向录制图标，则指示用户触发屏幕录制指令。
可选的，用户触发屏幕录制指令的过程还可以为：
用户通过输入设备输入快捷键；或者
用户输入预设的语音指令；或者
用户通过输入设备输入预设的文本指令。
可选的，用户在触发屏幕录制指令后，还可以显示屏幕录制界面，本发明实施例对该屏幕录制界面的界面布局以及显示位置不加以限定。
203、显示主屏幕的标识，以及运行状态为活跃的多个扩展屏的标识。
具体的，该标识可以是屏幕的名称，该名称可以是用户自定义的，也可以是系统自动设置的；
设置主屏幕的标识与扩展屏的标识的显示方式不同，主屏幕的标识后增加用于指示主屏幕的标志，或者，该主屏幕的标识在实现界面所占的面积或者颜色与扩展屏的标识不同。
可选的，用户通过点击该扩展屏的标识，可以将操作标识或者光标切换至该标识对应的扩展屏；
可选的，在实际应用中，还可以显示主屏幕的标识，以及所有扩展屏的标识；该所有扩展屏的标识后增加运行状态更改图标；
若扩展屏的运行状态为活跃，用户可以点击该运行状态更改图标，关闭该扩展屏上至少包含的某个程序的界面或者子界面，并将该扩展屏的运行状态设置为不活跃。
值得注意的是，步骤201至步骤203是实现获取用户触发的屏幕录制指令，显示多个屏幕的标识的过程，除了上述步骤所述的方式之外，还可以通过其他方式实现该过程，本发明实施例对具体的实现方式不加以限定，另外，本发明实施例所述的多个屏幕包括主屏幕和多个扩展屏。
204、根据用户所选定的多个标识，为多个扩展屏分别创建录屏虚拟设备、图层传输接口以及图层接口。
具体的，获取用户通过选取标识所选择的多个扩展屏；对于该多个扩展屏中的任意一个，通过以下方式，创建与该扩展屏对应的录屏虚拟设备、图层传输接口以及图层接口：
调用系统服务MediaProjectionManagerService实例，通过MediaProjectionManagerService实例获取媒体投影MediaProjection实例，调用MediaProjection实例中的创建录屏虚拟设备createVirtualDisplay实例创建与该扩展屏对应的录屏虚拟设备；
为该扩展屏创建媒体录制MediaRecorder实例，调用MediaProjection实例，创建用于将扩展屏的图层数据向多媒体模块传输的Surface实例，该Surface实例即为与该扩展屏对应的图层传输接口；
启动设备管理服务DisplayManagerService实例，通过DisplayManagerService实例调用图像渲染合成控制者SurfaceFinger实例，SurfaceFinger实例用于获取扩展屏的图层数据，该SurfaceFinger实例即为与扩展屏对应的图层接口；
将Surface实例及SurfaceFinger实例配置于录屏虚拟设备中，建立Surface实例与SurfaceFinger实例之间的关联关系。
下一个扩展屏，继续执行上述操作，直至创建与多个扩展屏分别一一对应的录屏虚拟设备、图层传输接口以及图层接口。
示例性的，为了进一步使本领域技术人员了解本发明实施例所述的方法，假设该多个扩展屏的数量为3，分别为扩展屏a、扩展屏b和扩展屏c，则在执行上述步骤后，分别创建与扩展屏a对应的录屏虚拟设备a、图层传输接口a以及图层接口a，与扩展屏b对应的录屏虚拟设备b、图层传输接口b以及图层接口b，与扩展屏c对应的录屏虚拟设备c、图层传输接口c以及图层接口c。
205、获取用户触发屏幕录制指令所包括的与多个扩展屏对应的画面尺寸和画面位置。
具体的，用户在触发屏幕录制指令之后，还可以输入多个扩展屏对应的画面尺寸和画面位置，该过程可以具体为：
在用户通过选取标识所选择的多个扩展屏后，分别在该多个扩展屏上的预设位置上显示预设尺寸的录制窗口；
用户通过输入设备选取该录制窗口后，可以通过拖拽的方式，重新确定该录制窗口的画面位置；
用户在重新确定该录制窗口的位置后，可以通过放大或者缩小操作，重新确定该录制窗口的画面尺寸。
可选的，为了提高用户体验，在实际应用中，对于任意一个扩展屏，在该扩展屏上的预设位置上显示预设尺寸的录制窗口的过程还可以为：
获取在该扩展屏上某个程序的界面或者子界面的画面位置和画面尺寸；
设置录制窗口的画面位置和画面尺寸与该界面或者子界面的画面位置和画面尺寸相同。
206、分别在多个扩展屏上，显示与画面尺寸和画面位置对应的录制窗口。
具体的，对于该多个扩展屏中的任意一个，可以执行以下操作：
根据用户所确定的录制窗口的画面位置和画面尺寸，显示该录制窗口，该录制窗口上还包括确认图标；
为了方便用户调整录制窗口，在显示该录制窗口后，还可以继续执行步骤205，并在步骤205之后，继续执行步骤206。
207、在用户确认后，根据画面尺寸和画面位置，以及多个录屏虚拟设备、多个图层传输接口以及多个图层接口，分别录制多个扩展屏的录制视频。
具体的，录屏虚拟设备可以基于图层接口获取待录制屏幕的待显示图像的图层数据，再将所获取的图层数据通过图层传输接口传输给后端的图像处理单元如多媒体模块，从而实现待录制的扩展屏的显示图像的录制，并形成相应的视频流；
当操作系统的多媒体模块接收到录制的扩展屏的图层数据后，对图层数据进行渲染、合并等处理，即将所述录屏虚拟设备对扩展屏录制的图像数据呈现为待显示图像，并生成与该扩展屏对应的录屏视频；
在上述过程中，对电子设备中的操作系统中的设备（Display）管理机制的设备管理服务（DisplayManagerService）类和图像渲染合成控制者（SurfaceFlinger）类的进行修改，使电子设备的操作系统能够支持扩展屏的录制。
值得注意的是，步骤205至207是实现根据多个录屏虚拟设备、多个图层传输接口以及多个图层接口，分别录制多个扩展屏的录制视频的过程，除了上述步骤所述的方式之外，还可以通过其他方式实现该过程，本发明实施例对具体的实现方式不加以限定，另外，本发明实施例所述的屏幕录制指令包括与多个扩展屏对应的画面尺寸和画面位置。
208、录制主屏幕的录制视频。
具体的，本发明实施例对具体的录制方式不加以限定。
需要说明的是，在实际应用中，若用户的屏幕录制指令指示用户所录制的屏幕不包括主屏幕，则不必执行步骤208。
可选的，在执行步骤207至步骤208的同时，还可以执行步骤209：
209、在将运行状态为非活跃的扩展屏显示录制窗口。
具体的，录制窗口至少包括多个屏幕的当前录制画面以及录制时间。
本发明实施例对具体的显示方式不加以限定。
可选的，为了用户还可以输入针对该当前录制画面以及该录制时间的操作，该过程可以具体为：
用户可以通过点击该当前录制画面，暂停录制，同时在暂停录制后，还可以通过点击该当前录制画面，继续录制，与该扩展屏对应的录制视频不包括暂停录制与继续录制之间的录制视频片段；
可选的，用户还可以通过点击该当前录制画面，通过手势或者鼠标的轮轨滚动实现以用户点击点为中心，在不改变录制窗口的前提下，实现对画面的放大或者缩小；
可选的，用户还可以通过放大或者缩小操作，改变该录制窗口的画面尺寸。
210、根据用户的操作和/或用户的瞳孔参数，分别获取用户对多个屏幕的关注度。
具体的，多屏设备还包括摄像头，则根据用户的瞳孔参数，分别获取用户对多个屏幕的关注度的过程可以为：
通过摄像头获取用户的瞳孔朝向数据；
根据该瞳孔朝向数据，以及主屏幕和多个扩展屏的位置，获取预设时间内，用户的瞳孔朝向分别在主屏幕和多个扩展屏的停留时间；
按照停留时间的长短，分别获取用户对多个屏幕的关注度；该过程可以为：
用户的瞳孔朝向在某个屏幕的停留时间越长，则用户对该屏幕的关注度越高。
据用户的操作，分别获取用户对多个屏幕的关注度的过程可以为：
获取用户通过输入设备（如鼠标或者触摸板等）进行操作时，获取用于指示输入设备的光标在各个屏幕上的持续滑动时间；
按照持续滑动时间的长短，分别获取用户对多个屏幕的关注度；该过程可以为：
持续滑动时间越长，则用户对该屏幕的关注度越高。
211、根据多个关注度，设置多个录制视频的尺寸和位置。
具体的，将关注度最高的屏幕所对应录制视频的尺寸设置为最大值，并将该录制视频的位置设置于中心位置；
将其余屏幕所对应录制视频的尺寸设置为中等值，并将该录制视频的位置设置于非中心位置。
可选的，还以为：
将关注度中等的屏幕所对应录制视频的尺寸设置为中等值，并将该录制视频的位置设置于中心位置与边缘位置之间。
将关注度最小的屏幕所对应录制视频的尺寸设置为最小值，并将该录制视频的位置设置于边缘位置。
本发明实施例所述的中心位置为最终录制视频画面的几何中心位置，边缘位置为最终录制视频画面的轮廓边缘位置，示例性的，以最终录制视频画面为矩形为例，则中心位置为该矩形的几何中心，该边缘位置为矩形边框的位置，上述过程可以具体为：
将关注度最高的屏幕所对应录制视频的尺寸设置为最大值，并将该录制视频的几何中心位置设置于最终录制视频画面的中心位置；
将其余屏幕所对应录制视频的尺寸设置为中等值，并将该录制视频的任意边框设置为与最终录制视频画面的边框重合。
上述过程仅仅是示例性的，在实际应用，用户可以按照需求，自定义该多个录制视频的尺寸和位置，本发明实施例对具体的设置方式和自定义方式不加以限定。
212、将多个录制视频，按照尺寸和位置，合成为最终录制视频。
具体的，该合成过程可以是通过操作系统的多媒体模块实现的，本发明实施例对具体的步骤212所述合成为最终录制视频的方式不加以限定。
值得注意的是，步骤211至步骤212是实现根据多个关注度，将多个录制视频合成为最终录制视频的过程，除了上述步骤所述的方式之外，还可以其他方式实现该过程，本发明实施例对具体的实现方式不加以限定。
实施例三
本发明实施例提供了一种多屏设备2，其中，多屏设备2与多个屏幕通过有线或者无线的方式连接，该多个屏幕包括一个主屏幕和多个扩展屏，参照图2所示，该多屏设备2包括：
获取模块21，用于获取用户触发的屏幕录制指令，显示多个屏幕的标识，多个屏幕包括主屏幕和多个扩展屏；
创建模块22，用于根据用户所选定的多个标识，为多个扩展屏分别创建录屏虚拟设备、图层传输接口以及图层接口；
录制模块23，用于根据录屏虚拟设备、图层传输接口以及图层接口，分别录制多个扩展屏的录制视频；
录制模块23还用于录制主屏幕的录制视频；
识别模块24，用于根据用户的操作和/或用户的瞳孔参数，分别获取用户对多个屏幕的关注度；
合成模块25，用于根据多个关注度，将多个录制视频合成为最终录制视频。
可选的，获取模块21具体用于：
根据预设时间内用户的操作以及所运行的程序，获取多个扩展屏的运行状态，运行状态包括活跃或不活跃；
显示主屏幕的标识，以及运行状态为活跃的多个扩展屏的标识。
可选的，屏幕录制指令包括与多个扩展屏对应的画面尺寸和画面位置，录制模块23具体用于：
分别在多个扩展屏上，显示与画面尺寸和画面位置对应的录制窗口；
在用户确认后，根据画面尺寸和画面位置，分别录制多个扩展屏的录制视频。
可选的，多屏设备2还包括显示模块26，用于：
在将运行状态为非活跃的扩展屏显示录制窗口；
其中，录制窗口至少包括多个屏幕的当前录制画面以及录制时间。
可选的，合成模块25具体用于：
根据多个关注度，设置多个录制视频的尺寸和位置；
将多个录制视频，按照尺寸和位置，合成为最终录制视频。
实施例四
本发明实施例提供了一种屏幕录制系统，该系统还包括多个屏幕，该多个屏幕包括一个主屏幕和多个扩展屏，参照图3所示，该系统包括：
获取装置31，用于获取用户触发的屏幕录制指令，显示多个屏幕的标识，多个屏幕包括主屏幕和多个扩展屏；
创建装置32，用于根据用户所选定的多个标识，为多个扩展屏分别创建录屏虚拟设备、图层传输接口以及图层接口；
录制装置33，用于根据录屏虚拟设备、图层传输接口以及图层接口，分别录制多个扩展屏的录制视频；
录制装置33还用于录制主屏幕的录制视频；
识别装置34，用于根据用户的操作和/或用户的瞳孔参数，分别获取用户对多个屏幕的关注度；
合成装置35，用于根据多个关注度，将多个录制视频合成为最终录制视频。
可选的，获取装置31具体用于：
根据预设时间内用户的操作以及所运行的程序，获取多个扩展屏的运行状态，运行状态包括活跃或不活跃；
显示主屏幕的标识，以及运行状态为活跃的多个扩展屏的标识。
可选的，屏幕录制指令包括与多个扩展屏对应的画面尺寸和画面位置，录制装置33具体用于：
分别在多个扩展屏上，显示与画面尺寸和画面位置对应的录制窗口；
在用户确认后，根据画面尺寸和画面位置，分别录制多个扩展屏的录制视频。
可选的，系统还包括显示装置36，用于：
在将运行状态为非活跃的扩展屏显示录制窗口；
其中，录制窗口至少包括多个屏幕的当前录制画面以及录制时间。
可选的，合成装置35具体用于：
根据多个关注度，设置多个录制视频的尺寸和位置；
将多个录制视频，按照尺寸和位置，合成为最终录制视频。
实施例五
本发明实施例提供了一种计算机可读存储介质，该可读存储介质存储有计算机程序，该计算机程序被处理器执行时实现实施例一和/或实施例二任一项所述方法的步骤。
本发明实施例提供了一种屏幕录制方法、系统、多屏设备和可读存储介质，通过根据用户所选定的多个标识，为多个扩展屏分别创建录屏虚拟设备、图层传输接口以及图层接口；根据多个录屏虚拟设备、多个图层传输接口以及多个图层接口，分别录制多个扩展屏的录制视频；实现了对多个扩展屏的显示内容进行录制，从而提高了用户体验。通过根据用户的操作和/或用户的瞳孔参数，分别获取用户对多个屏幕的关注度；根据多个关注度，将多个录制视频合成为最终录制视频，使得可以根据用户的关注需求，按照不同的方式对录制画面的大小和位置进行处理，从而进一步满足了用户对多个扩展屏的显示内容进行录制过程中的体验。
上述所有可选技术方案，可以采用任意结合形成本发明的可选实施例，在此不再一一赘述。
需要说明的是：上述实施例提供的多屏设备和屏幕录制系统在执行屏幕录制方法时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将设备和系统的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的屏幕录制方法、系统、多屏设备和可读存储介质实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。
以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (7)
1.一种屏幕录制方法，其特征在于，所述方法包括：
获取用户触发的屏幕录制指令，显示多个屏幕的标识，所述多个屏幕包括主屏幕和多个扩展屏；
根据用户所选定的多个标识，为所述多个扩展屏分别创建录屏虚拟设备、图层传输接口以及图层接口；
根据所述多个录屏虚拟设备、所述多个图层传输接口以及所述多个图层接口，分别录制所述多个扩展屏的录制视频；
录制所述主屏幕的录制视频；
根据用户的操作和/或用户的瞳孔参数，分别获取用户对所述多个屏幕的关注度；
根据多个关注度，设置多个录制视频的尺寸和位置；
将所述多个录制视频，按照所述尺寸和所述位置，合成为最终录制视频；
其中，所述根据多个关注度，设置多个录制视频的尺寸和位置包括：
将所述关注度最高的屏幕所对应录制视频的尺寸设置为最大值，并将所述关注度最高的屏幕所对应录制视频的位置设置于中心位置；
将所述关注度中等的屏幕所对应录制视频的尺寸设置为中等值，并将所述关注度中等的屏幕所对应录制视频的位置设置于中心位置与边缘位置之间；
将所述关注度最小的屏幕所对应录制视频的尺寸设置为最小值，并将所述关注度最小的屏幕所对应录制视频的位置设置于边缘位置；
所述中心位置为所述最终录制视频画面的几何中心位置，所述边缘位置为所述最终录制视频画面的轮廓边缘位置。
2.根据权利要求1所述的方法，其特征在于，所述获取用户触发的屏幕录制指令，显示多个屏幕的标识包括：
根据预设时间内用户的操作以及所运行的程序，获取所述多个扩展屏的运行状态，所述运行状态包括活跃或不活跃；
显示所述主屏幕的标识，以及所述运行状态为活跃的多个扩展屏的标识。
3.根据权利要求2所述的方法，其特征在于，所述屏幕录制指令包括与所述多个扩展屏对应的画面尺寸和画面位置，所述分别录制所述多个扩展屏的录制视频包括：
分别在所述多个扩展屏上，显示与所述画面尺寸和所述画面位置对应的录制窗口；
在用户确认后，根据所述画面尺寸和所述画面位置，分别录制所述多个扩展屏的录制视频。
4.根据权利要求3所述的方法，其特征在于，所述方法还包括：
在所述运行状态为非活跃的扩展屏上，显示所述录制窗口；
其中，所述录制窗口至少包括多个屏幕的当前录制画面以及录制时间。
5.一种多屏设备，其特征在于，所述多屏设备包括：
获取模块，用于获取用户触发的屏幕录制指令，显示多个屏幕的标识，所述多个屏幕包括主屏幕和多个扩展屏；
创建模块，用于根据用户所选定的多个标识，为所述多个扩展屏分别创建录屏虚拟设备、图层传输接口以及图层接口；
录制模块，用于根据所述录屏虚拟设备、所述图层传输接口以及所述图层接口，分别录制所述多个扩展屏的录制视频；
所述录制模块还用于录制所述主屏幕的录制视频；
识别模块，用于根据用户的操作和/或用户的瞳孔参数，分别获取用户对所述多个屏幕的关注度；
合成模块，用于根据多个关注度，设置多个录制视频的尺寸和位置；
所述合成模块还用于将所述多个录制视频，按照所述尺寸和所述位置，合成为最终录制视频；
其中，所述合成模块具体用于：
将所述关注度最高的屏幕所对应录制视频的尺寸设置为最大值，并将所述关注度最高的屏幕所对应录制视频的位置设置于中心位置；
将所述关注度中等的屏幕所对应录制视频的尺寸设置为中等值，并将所述关注度中等的屏幕所对应录制视频的位置设置于中心位置与边缘位置之间；
将所述关注度最小的屏幕所对应录制视频的尺寸设置为最小值，并将所述关注度最小的屏幕所对应录制视频的位置设置于边缘位置；
所述中心位置为所述最终录制视频画面的几何中心位置，所述边缘位置为所述最终录制视频画面的轮廓边缘位置。
6.一种屏幕录制系统，其特征在于，所述系统包括：
获取装置，用于获取用户触发的屏幕录制指令，显示多个屏幕的标识，所述多个屏幕包括主屏幕和多个扩展屏；
创建装置，用于根据用户所选定的多个标识，为所述多个扩展屏分别创建录屏虚拟设备、图层传输接口以及图层接口；
录制装置，用于根据所述录屏虚拟设备、所述图层传输接口以及所述图层接口，分别录制所述多个扩展屏的录制视频；
所述录制装置还用于录制所述主屏幕的录制视频；
识别装置，用于根据用户的操作和/或用户的瞳孔参数，分别获取用户对所述多个屏幕的关注度；
合成装置，用于根据多个关注度，设置多个录制视频的尺寸和位置；
所述合成装置还用于将所述多个录制视频，按照所述尺寸和所述位置，合成为最终录制视频；
其中，所述合成装置具体用于：
将所述关注度最高的屏幕所对应录制视频的尺寸设置为最大值，并将所述关注度最高的屏幕所对应录制视频的位置设置于中心位置；
将所述关注度中等的屏幕所对应录制视频的尺寸设置为中等值，并将所述关注度中等的屏幕所对应录制视频的位置设置于中心位置与边缘位置之间；
将所述关注度最小的屏幕所对应录制视频的尺寸设置为最小值，并将所述关注度最小的屏幕所对应录制视频的位置设置于边缘位置；
所述中心位置为所述最终录制视频画面的几何中心位置，所述边缘位置为所述最终录制视频画面的轮廓边缘位置。
7.一种计算机可读存储介质，所述可读存储介质存储有计算机程序，所述程序被处理器执行时实现权利要求1-4任一项所述方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010823229.0A CN111679772B (zh) | 2020-08-17 | 2020-08-17 | 一种屏幕录制方法、系统、多屏设备和可读存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010823229.0A CN111679772B (zh) | 2020-08-17 | 2020-08-17 | 一种屏幕录制方法、系统、多屏设备和可读存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111679772A CN111679772A (zh) | 2020-09-18 |
| CN111679772B true CN111679772B (zh) | 2020-11-24 |
Family
ID=72438638
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010823229.0A Active CN111679772B (zh) | 2020-08-17 | 2020-08-17 | 一种屏幕录制方法、系统、多屏设备和可读存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111679772B (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112860161A (zh) * | 2020-12-31 | 2021-05-28 | 中国农业银行股份有限公司 | 一种基于考试防作弊场景的多屏截屏和录屏的方法和装置 |
| CN112954248B (zh) * | 2021-02-21 | 2022-12-02 | 北京津发科技股份有限公司 | 多屏录制方法、装置、多屏设备及计算机可读存储介质 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105828166A (zh) * | 2015-09-10 | 2016-08-03 | 维沃移动通信有限公司 | 一种终端屏幕显示内容的录制方法及终端 |
Family Cites Families (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8890864B2 (en) * | 2011-12-12 | 2014-11-18 | Lg Electronics Inc. | Mobile terminal and controlling method thereof |
| CN104035684A (zh) * | 2013-03-06 | 2014-09-10 | 腾讯科技（深圳）有限公司 | 一种应用于移动终端上的动态截屏方法及系统 |
| US9519420B2 (en) * | 2013-10-16 | 2016-12-13 | Samsung Electronics Co., Ltd. | Apparatus and method for editing synchronous media |
| CN107220585A (zh) * | 2017-03-31 | 2017-09-29 | 南京邮电大学 | 一种基于多特征融合镜头聚类的视频关键帧提取方法 |
| CN107295260A (zh) * | 2017-07-27 | 2017-10-24 | 深圳市泰衡诺科技有限公司 | 一种用于智能设备的照片拍摄方法及照片拍摄装置 |
| CN108919958B (zh) * | 2018-07-16 | 2020-10-09 | 北京七鑫易维信息技术有限公司 | 一种图像传输方法、装置、终端设备及存储介质 |
| JP6972393B2 (ja) * | 2019-01-21 | 2021-11-24 | 三菱電機株式会社 | 注意力判定装置、注意力判定システム、注意力判定方法、およびプログラム |
| CN111327873B (zh) * | 2019-07-29 | 2021-09-21 | 杭州海康威视系统技术有限公司 | 一种场景布局调整方法、装置、电子设备及存储介质 |
| CN110493538B (zh) * | 2019-08-16 | 2021-08-24 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
| CN111147768A (zh) * | 2019-12-25 | 2020-05-12 | 北京恒峰致远科技有限公司 | 一种提高回看效率的智能监控视频回看方法 |
| CN111338536B (zh) * | 2020-05-20 | 2020-11-13 | 北京小米移动软件有限公司 | 多屏电子设备的屏幕录制方法及装置、多屏电子设备、存储介质 |
-
2020
- 2020-08-17 CN CN202010823229.0A patent/CN111679772B/zh active Active
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105828166A (zh) * | 2015-09-10 | 2016-08-03 | 维沃移动通信有限公司 | 一种终端屏幕显示内容的录制方法及终端 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111679772A (zh) | 2020-09-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109164964B (zh) | 内容分享方法、装置、终端及存储介质 | |
| CN112135181B (zh) | 视频预览方法、装置及电子设备 | |
| CN109218819B (zh) | 一种视频预览方法及移动终端 | |
| CN111443863A (zh) | 页面操控方法、装置、存储介质及终端 | |
| CN112099707A (zh) | 显示方法、装置和电子设备 | |
| CN111641797B (zh) | 视频通话界面显示控制方法、装置、存储介质及设备 | |
| CN111679772B (zh) | 一种屏幕录制方法、系统、多屏设备和可读存储介质 | |
| US20230345113A1 (en) | Display control method and apparatus, electronic device, and medium | |
| CN112860163A (zh) | 图像编辑方法和装置 | |
| CN112672061B (zh) | 视频拍摄方法、装置、电子设备及介质 | |
| CN112911147B (zh) | 显示控制方法、显示控制装置及电子设备 | |
| EP4343580A1 (en) | Media file processing method and apparatus, device, readable storage medium, and product | |
| WO2023030306A1 (zh) | 视频编辑方法、装置及电子设备 | |
| US20240187726A1 (en) | Video Recording Method, Electronic Device, and Medium | |
| CN110647286A (zh) | 屏幕元素控制方法、装置、设备、存储介质 | |
| US20130169660A1 (en) | Image editing system and method | |
| CN115460448A (zh) | 一种媒体资源编辑方法、装置、电子设备以及存储介质 | |
| CN113923392A (zh) | 视频录制方法、视频录制装置和电子设备 | |
| CN115550741A (zh) | 视频管理方法、装置、电子设备及可读存储介质 | |
| CN115344159A (zh) | 文件的处理方法、装置、电子设备和可读存储介质 | |
| CN113885748A (zh) | 对象切换方法、装置、电子设备和可读存储介质 | |
| EP4343522A1 (en) | Live-streaming interface display method and apparatus, and device, storage medium and program product | |
| CN113726953B (zh) | 显示内容获取方法和装置 | |
| CN112911060B (zh) | 显示控制方法、第一显示控制装置和第一电子设备 | |
| CN110662104B (zh) | 视频拖动条生成方法、装置、电子设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20221215 Address after: 8-006, Building B3, Science and Technology Innovation City, No. 34, Dazhou Road, Yuhuatai District, Nanjing, Jiangsu Province, 210000 Patentee after: Nanjing chuangsiqi Technology Co.,Ltd. Address before: 518114 Room 101, No.1 Workshop, Juyin technology industrial plant, No.1 Ganli Road, gankeng community, Buji street, Longgang District, Shenzhen City, Guangdong Province Patentee before: SINCERE LETTER SCIENCE AND TECHNOLOGY LTD. |
|
| TR01 | Transfer of patent right |