CN110262866B - 一种屏幕多画面布局的切换方法、装置及可读存储介质 - Google Patents
一种屏幕多画面布局的切换方法、装置及可读存储介质 Download PDFInfo
- Publication number
- CN110262866B CN110262866B CN201910528157.4A CN201910528157A CN110262866B CN 110262866 B CN110262866 B CN 110262866B CN 201910528157 A CN201910528157 A CN 201910528157A CN 110262866 B CN110262866 B CN 110262866B
- Authority
- CN
- China
- Prior art keywords
- video signals
- switching
- screen
- path
- input audio
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
Abstract
本发明公开了一种屏幕多画面布局的切换方法、装置及可读存储介质。该切换方法包括：获取输入的各路音视频信号；对输入的各路音视频信号进行检测识别，以得到对应的应用场景；依据对应的应用场景，将屏幕切换至对应的多画面布局；将输入的各路音视频信号在对应的子画面中进行显示。该切换方法可依据不同的应用场景，对屏幕上的多画面布局自动进行切换，提高了便利性和效率。
Description
技术领域
本发明涉及多画面布局技术，尤其涉及一种屏幕多画面布局的切换方法、装置及可读存储介质。
背景技术
很多用于会议协作的产品（如会议电视、演示切换器）等都支持多画面功能，即在同一个屏幕上同时显示来自多个视频源的内容，很多产品还会根据当前有效视频源的数量来自动切换屏幕布局，例如：会议电视在尚未接通时会全屏（单画面）显示本地的视频，接通后则会以双画面模式同时显示本地和远端的视频，如果是多方会议，则还会自动切换到三画面、四画面甚至更多画面的布局。
但是现有的多画面布局的切换方法仅针对有效视频源的数量进行切换，不够方便和灵活，难以满足不同场景的应用需求。仍以会议电视举例，如果是简单的自由讨论，则采用各子画面尺寸相等的布局即可，但如果是有主持人或者主讲人的会议，则最好采用一个大画面搭配几个小画面的布局，从而突出主角。对于上述两种不同的应用场景，现有技术有两种解决方法：
1、在会议开始前对屏幕布局进行修改，从而使得设备中所有的屏幕布局都与即将举行的会议场景相匹配，缺点在于每次会议前都要对检查全部的屏幕布局，对不合适的屏幕布局要进行删除或修改，必要时还要增加或导入新的屏幕布局，操作繁琐工作量大；
2、在会议进行中手工操作，切换到需要使用的屏幕布局，缺点在于需要会议的参与人员手工操作，抛开基础性培训的成本不说，在会议过程中频繁进行与会议内容无关的操作也会对会议带来干扰，影响会议的效率。
发明内容
为了解决上述现有技术的不足，本发明提供一种屏幕多画面布局的切换方法、装置及可读存储介质，可依据不同的应用场景，对屏幕上的多画面布局自动进行切换，提高了便利性和效率。
本发明所要解决的技术问题通过以下技术方案予以实现：
一种屏幕多画面布局的切换方法，包括：
获取输入的各路音视频信号；
对输入的各路音视频信号进行检测识别，以得到对应的应用场景；
依据对应的应用场景，将屏幕切换至对应的多画面布局；
将输入的各路音视频信号在对应的子画面中进行显示。
进一步地，预设有对输入的各路音视频信号进行检测识别以得到对应的应用场景的至少一种检测识别规则。
进一步地，预设的至少一种检测识别规则中包括：
第一检测识别规则，计算输入的音视频信号的声音时间占比，依据各路音视频信号的声音时间占比来判断对应的应用场景。
进一步地，预设的至少一种检测识别规则中包括：
第二检测识别规则，识别输入的各路音视频信号为计算机图像还是自然图像，依据各路音视频信号的图像识别结果来判断对应的应用场景。
进一步地，预设的至少一种检测识别规则中包括：
第三检测识别规则，计算输入的各路音视频信号的人脸面积占比，依据各路音视频信号的人脸面积占比来判断对应的应用场景。
进一步地，包括普通切换模式，在普通切换模式中，依据预设的其中一种检测识别规则对输入的各路音视频信号进行检测识别，以得到对应的应用场景。
进一步地，还包括融合切换模式，在融合切换模式中，依据预设的至少两种检测识别规则对输入的各路音视频信号进行检测识别，以得到至少两个应用场景，然后按照预设的数学处理方法对得到的至少两个应用场景进行处理，得到最终对应的应用场景。
进一步地，将屏幕切换至对应的多画面布局包括：
获取音视频信号的输入数量；
依据音视频信号的输入数量，在对应的应用场景下切换至具有相同子画面数量的多画面布局。
一种屏幕多画面布局的切换装置，包括处理器和与所述处理器连接的存储器，所述存储器内储存有供所述处理器执行的计算机程序；所述处理器执行该计算机程序时，进行上述的屏幕多画面布局的切换方法。
一种可读存储介质，存储有供处理器执行的计算机程序，所述处理器执行该计算机程序时，进行上述的屏幕多画面布局的切换方法。
本发明具有如下有益效果：该切换方法可自动识别应用场景，然后依据识别到的应用场景将屏幕自动切换至对应的多画面布局，无需在每次使用前都对屏幕进行繁琐的多画面布局调整，也不需要打断会议进程而进行手工切换，提供了产品的易用性，也提升了整体的效率。
附图说明
图1为本发明提供的屏幕多画面布局的切换方法的步骤框图；
图2为本发明提供的屏幕多画面布局的切换方法中选择切换模式的步骤框图。
具体实施方式
下面结合附图和实施例对本发明进行详细的说明。
实施例一
如图1所示，一种屏幕多画面布局的切换方法，应用于一切换装置中。
该方法包括：
S101：获取输入的各路音视频信号；
在该步骤101中，所述切换装置具有至少两个输入接口，以从至少两个源装置中获取至少两路音视频信号。所述输入接口为HDMI接口，同一源设备的音频信号和视频信号共用一个HDMI接口进行输入。
S102：对输入的各路音视频信号进行检测识别，以得到对应的应用场景；
在该步骤S102中，所述切换装置中预设有对输入的各路音视频信号进行检测识别以得到对应的应用场景的至少一种检测识别规则，预设有至少两种应用场景，且每种检测识别规则均具有至少两种检测识别结果，以对应于至少两种应用场景。
其中，预设的至少一种检测识别规则包括：
第一检测识别规则，计算输入的音视频信号的声音时间占比，依据各路音视频信号的声音时间占比来判断对应的应用场景，比如若输入的任一路音视频信号的声音时间在输入的各路音视频信号的总声音时间中的比例超过第一阈值，则可判断应用场景为会议场景，若输入的各路音视频信号的声音时间在输入的各路音视频信号的总声音时间中的比例均低于第一阈值，则可判断应用场景为自由讨论场景；
第二检测识别规则，识别输入的各路音视频信号为计算机图像还是自然图像，依据各路音视频信号的图像识别结果来判断对应的应用场景，比如若输入的各路音视频信号均为计算机图像，则可判断应用场景为自由讨论场景，若输入的任一路音视频信号为自然图像，则可判断应用场景为会议场景；
第三检测识别规则，计算输入的各路音视频信号的人脸面积占比，依据各路音视频信号的人脸面积占比来判断对应的应用场景，比如输入的任一路音视频信号的人脸面积占其画面面积的比例超过第二阈值，则可判断应用场景为会议场景，若输入的各路音视频信号的人脸面积占其画面面积的比例均低于第二阈值，则可判断应用场景为自由讨论场景。
其中，预设的至少两种应用场景包括会议场景和自由讨论场景。在会议场景的多画面布局中，其中一子画面的面积最大，其他子画面的面积较小或相同；在自由讨论场景中，各个子画面的面积均相同。
另外，如图2所示，所述切换装置包括普通切换模式和融合切换模式。
在普通切换模式中，依据预设的其中一种检测识别规则对输入的各路音视频信号进行检测识别，以得到对应的应用场景。
因此，在普通切换模式中，步骤S101前，还包括：依据通过UI界面、遥控、手势、传感器、web网页或后台管理器等输入的选择信号，选择其中一种检测识别规则。
在融合切换模式中，依据预设的至少两种检测识别规则对输入的各路音视频信号进行检测识别，以得到至少两个应用场景，然后按照预设的数学处理方法对得到的至少两个应用场景进行处理，得到最终对应的应用场景。
因此，在融合切换模式中，步骤S101前，还包括：依据通过UI界面、遥控、手势、传感器、web网页或后台管理器等输入的选择信号，选择至少两种检测识别规则。
在一具体实施方式的融合切换模式中，按照预设的数学处理方法对得到的至少两个应用场景进行处理包括：
统计各个应用场景被检测识别到的次数；
依据统计结果，将被检测识别到次数最多的应用场景作为最终对应的应用场景。
比如同时采用上述的第一检测识别规则、第二检测识别规则和检测识别规则对输入的各路音视频信号进行检测，其中第一检测识别规则和第二检测识别规则检测识别到为会议模式，而第三检测识别规则检测识别到为自由讨论模式，那么少数服从多数，则将被检测识别到次数最多的会议模式作为最终对应的应用场景。
在另一具体实施方式的融合切换模式中，按照预设的数学处理方法对得到的至少两个应用场景进行处理包括：
统计各个应用场景被检测识别到的次数；
依据各个检测识别规则的优先级或分值和统计结果，将总优先级或总分值最大的应用场景作为最终对应的应用场景。
比如同时采用上述的第一检测识别规则、第二检测识别规则和检测识别规则对输入的各路音视频信号进行检测，其中第一检测识别规则和第二检测识别规则检测识别到为会议模式，而第三检测识别规则检测识别到为自由讨论模式，虽然自由讨论模式仅被检测识别到一次，但是第三检测识别规则的优先级较高，对应的分值有10分，而第一检测识别规则和第二检测识别规则的优先级较低，对应的分值均为4分，那么自由讨论模式的分值还是最大，则将分值最大的自由讨论模式作为最终对应的应用场景。
因此，在融合切换模式中，选择至少两种检测识别规则之后，还包括：依据通过UI界面、遥控、手势、传感器、web网页或后台管理器等输入的设置信号，为选择的至少两种检测识别规则设置优先级或分值。
在步骤S101前，还包括：依据通过UI界面、遥控、手势、传感器、web网页或后台管理器等输入的切换信号，切换至普通切换模式或融合切换模式。其中，所述普通切换模式可以作为所述切换装置的默认切换模式。
S103：依据对应的应用场景，将屏幕切换至对应的多画面布局；
在该步骤S103中，每种应用场景均对应有多个多画面布局，以形成对应的布局集合组，同一布局集合组中不同的多画面布局之间均具有不同的子画面数量。
因此，将屏幕切换至对应的多画面布局包括：
S1031：获取音视频信号的输入数量；
S1032：依据音视频信号的输入数量，在对应的应用场景下切换至具有相同子画面数量的多画面布局。
S104：将输入的各路音视频信号在对应的子画面中进行显示；
在该步骤S104中，所述切换装置具有至少一个输出接口，以向至少一个显示装置输出多画面布局后的显示画面。所述输出接口为HDMI接口，同一显示设备的音频信号和视频信号共用一个HDMI接口进行输出。
该切换方法可自动识别应用场景，然后依据识别到的应用场景将屏幕自动切换至对应的多画面布局，无需在每次使用前都对屏幕进行繁琐的多画面布局调整，也不需要打断会议进程而进行手工切换，提供了产品的易用性，也提升了整体的效率。
实施例二
一种屏幕多画面布局的切换装置，包括处理器和与所述处理器连接的存储器，所述存储器内储存有供所述处理器执行的计算机程序；所述处理器执行该计算机程序时，进行实施例一所述的屏幕多画面布局的切换方法。
实施例三
一种可读存储介质，存储有供处理器执行的计算机程序，所述处理器执行该计算机程序时，进行实施例一所述的屏幕多画面布局的切换方法。
以上所述实施例仅表达了本发明的实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制，但凡采用等同替换或等效变换的形式所获得的技术方案，均应落在本发明的保护范围之内。
Claims (14)
1.一种屏幕多画面布局的切换方法，其特征在于，包括：
获取输入的各路音视频信号；
对输入的各路音视频信号进行检测识别，以得到对应的应用场景；
依据对应的应用场景，将屏幕切换至对应的多画面布局；
将输入的各路音视频信号在对应的子画面中进行显示；
预设有对输入的各路音视频信号进行检测识别以得到对应的应用场景的至少一种检测识别规则，其中，预设的至少一种检测识别规则中包括：
第二检测识别规则，识别输入的各路音视频信号为计算机图像还是自然图像，依据各路音视频信号的图像识别结果来判断对应的应用场景。
2.根据权利要求1所述的屏幕多画面布局的切换方法，其特征在于，预设的至少一种检测识别规则中包括：
第一检测识别规则，计算输入的音视频信号的声音时间占比，依据各路音视频信号的声音时间占比来判断对应的应用场景。
3.根据权利要求1所述的屏幕多画面布局的切换方法，其特征在于，预设的至少一种检测识别规则中包括：
第三检测识别规则，计算输入的各路音视频信号的人脸面积占比，依据各路音视频信号的人脸面积占比来判断对应的应用场景。
4.根据权利要求1-3中任一所述的屏幕多画面布局的切换方法，其特征在于，包括普通切换模式，在普通切换模式中，依据预设的其中一种检测识别规则对输入的各路音视频信号进行检测识别，以得到对应的应用场景。
5.根据权利要求1-3中任一所述的屏幕多画面布局的切换方法，其特征在于，还包括融合切换模式，在融合切换模式中，依据预设的至少两种检测识别规则对输入的各路音视频信号进行检测识别，以得到至少两个应用场景，然后按照预设的数学处理方法对得到的至少两个应用场景进行处理，得到最终对应的应用场景。
6.根据权利要求1所述的屏幕多画面布局的切换方法，其特征在于，将屏幕切换至对应的多画面布局包括：
获取音视频信号的输入数量；
依据音视频信号的输入数量，在对应的应用场景下切换至具有相同子画面数量的多画面布局。
7.一种屏幕多画面布局的切换方法，其特征在于，包括：
获取输入的各路音视频信号；
对输入的各路音视频信号进行检测识别，以得到对应的应用场景；
依据对应的应用场景，将屏幕切换至对应的多画面布局；
将输入的各路音视频信号在对应的子画面中进行显示；
预设有对输入的各路音视频信号进行检测识别以得到对应的应用场景的至少一种检测识别规则，其中，预设的至少一种检测识别规则中包括：
第三检测识别规则，计算输入的各路音视频信号的人脸面积占比，依据各路音视频信号的人脸面积占比来判断对应的应用场景。
8.根据权利要求7所述的屏幕多画面布局的切换方法，其特征在于，预设的至少一种检测识别规则中包括：
第一检测识别规则，计算输入的音视频信号的声音时间占比，依据各路音视频信号的声音时间占比来判断对应的应用场景。
9.根据权利要求7所述的屏幕多画面布局的切换方法，其特征在于，预设的至少一种检测识别规则中包括：
第二检测识别规则，识别输入的各路音视频信号为计算机图像还是自然图像，依据各路音视频信号的图像识别结果来判断对应的应用场景。
10.根据权利要求7-9中任一所述的屏幕多画面布局的切换方法，其特征在于，包括普通切换模式，在普通切换模式中，依据预设的其中一种检测识别规则对输入的各路音视频信号进行检测识别，以得到对应的应用场景。
11.根据权利要求7-9中任一所述的屏幕多画面布局的切换方法，其特征在于，还包括融合切换模式，在融合切换模式中，依据预设的至少两种检测识别规则对输入的各路音视频信号进行检测识别，以得到至少两个应用场景，然后按照预设的数学处理方法对得到的至少两个应用场景进行处理，得到最终对应的应用场景。
12.根据权利要求7所述的屏幕多画面布局的切换方法，其特征在于，将屏幕切换至对应的多画面布局包括：
获取音视频信号的输入数量；
依据音视频信号的输入数量，在对应的应用场景下切换至具有相同子画面数量的多画面布局。
13.一种屏幕多画面布局的切换装置，包括处理器和与所述处理器连接的存储器，所述存储器内储存有供所述处理器执行的计算机程序；其特征在于，所述处理器执行该计算机程序时，进行权利要求1-12中任一所述的屏幕多画面布局的切换方法。
14.一种可读存储介质，存储有供处理器执行的计算机程序，其特征在于，所述处理器执行该计算机程序时，进行权利要求1-12中任一所述的屏幕多画面布局的切换方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910528157.4A CN110262866B (zh) | 2019-06-18 | 2019-06-18 | 一种屏幕多画面布局的切换方法、装置及可读存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910528157.4A CN110262866B (zh) | 2019-06-18 | 2019-06-18 | 一种屏幕多画面布局的切换方法、装置及可读存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110262866A CN110262866A (zh) | 2019-09-20 |
| CN110262866B true CN110262866B (zh) | 2022-06-28 |
Family
ID=67919160
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910528157.4A Active CN110262866B (zh) | 2019-06-18 | 2019-06-18 | 一种屏幕多画面布局的切换方法、装置及可读存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110262866B (zh) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112752037A (zh) * | 2019-10-30 | 2021-05-04 | 北京国双科技有限公司 | 混合音视频流的处理方法和装置 |
| CN111740968A (zh) * | 2020-06-12 | 2020-10-02 | 深圳市拔超科技有限公司 | 一种用于分组讨论培训系统的控制方法及控制器 |
| CN112817681B (zh) * | 2021-02-09 | 2023-03-24 | 杭州海康威视系统技术有限公司 | 一种数据显示方法、装置、设备及机器可读存储介质 |
| CN113382182B (zh) * | 2021-08-12 | 2021-11-09 | 江西省天轴通讯有限公司 | 一种直播画面控制方法、装置、存储介质及设备 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101860715A (zh) * | 2010-05-14 | 2010-10-13 | 中兴通讯股份有限公司 | 多画面合成方法、系统及媒体处理装置 |
| CN102857732A (zh) * | 2012-05-25 | 2013-01-02 | 华为技术有限公司 | 一种多画面视讯会议中的画面控制方法、设备及系统 |
| CN107731032A (zh) * | 2017-09-08 | 2018-02-23 | 蒋翔东 | 一种音视频切换方法、装置以及远程多点互动教学系统 |
-
2019
- 2019-06-18 CN CN201910528157.4A patent/CN110262866B/zh active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101860715A (zh) * | 2010-05-14 | 2010-10-13 | 中兴通讯股份有限公司 | 多画面合成方法、系统及媒体处理装置 |
| CN102857732A (zh) * | 2012-05-25 | 2013-01-02 | 华为技术有限公司 | 一种多画面视讯会议中的画面控制方法、设备及系统 |
| CN107731032A (zh) * | 2017-09-08 | 2018-02-23 | 蒋翔东 | 一种音视频切换方法、装置以及远程多点互动教学系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110262866A (zh) | 2019-09-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110262866B (zh) | 一种屏幕多画面布局的切换方法、装置及可读存储介质 | |
| US9756285B2 (en) | Method, device, and display device for switching video source | |
| US10528239B2 (en) | Display processing method, display processing apparatus and electronic device | |
| JP6171319B2 (ja) | 情報処理装置、情報処理方法、情報処理システム及びプログラム | |
| US9285945B2 (en) | Method and apparatus for displaying multi-task interface | |
| CN107122148B (zh) | 远程协作方法及系统 | |
| US10349020B2 (en) | Information processing method and electronic apparatus | |
| US11687311B2 (en) | Screen projection processing method and device | |
| CN109358941B (zh) | 一种控制方法及电子设备 | |
| JP2021512436A (ja) | グローバル特効の切替方法、装置、端末装置及び記憶媒体 | |
| CN112616078A (zh) | 投屏处理方法、装置、电子设备和存储介质 | |
| US20140085402A1 (en) | Conference terminal and method for processing videos from other conference terminals | |
| CN114095793A (zh) | 一种视频播放方法、装置、计算机设备及存储介质 | |
| WO2024066538A1 (zh) | 显示设备和显示设备控制方法 | |
| CN101533314B (zh) | 通过光标定位终端的方法、系统及终端控制器 | |
| CN112860212A (zh) | 一种音量调节方法及显示设备 | |
| US20230195403A1 (en) | Information processing method and electronic device | |
| CN114007022A (zh) | 视频源切换方法、装置和led显示屏控制系统 | |
| US11921971B2 (en) | Live broadcasting recording equipment, live broadcasting recording system, and live broadcasting recording method | |
| CN112835506B (zh) | 一种显示设备及其控制方法 | |
| CN112118414B (zh) | 视频会话方法、电子设备以及计算机存储介质 | |
| US9798355B2 (en) | Projection method and electronic device | |
| CN112565667A (zh) | 一种回看应用程序历史内容的方法与系统 | |
| US8405703B2 (en) | Television conference apparatus, method of controlling television conference, and computer-readable medium storing control program executable on television conference apparatus | |
| CN114554133B (zh) | 一种信息处理方法、装置和电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information |
Address after: 3-4 / F, building 16, Hejing Industrial Zone, No.87 Hexiu West Road, Heping community, Fuhai street, Bao'an District, Shenzhen, Guangdong 518100 Applicant after: Shenzhen Bachao Technology Co.,Ltd. Address before: 3-4 / F, building 16, Hejing Industrial Zone, No.87 Hexiu West Road, Heping community, Fuhai street, Bao'an District, Shenzhen, Guangdong 518100 Applicant before: SHENZHEN BACHAO TECHNOLOGY Co.,Ltd. |
|
| CB02 | Change of applicant information | ||
| CB02 | Change of applicant information |
Address after: 518103 301-401, building 16, Hejing Industrial Zone, No. 87, Hexiu West Road, Zhancheng community, Fuhai street, Bao'an District, Shenzhen, Guangdong Province Applicant after: Shenzhen Bachao Technology Co.,Ltd. Address before: 3-4 / F, building 16, Hejing Industrial Zone, No.87 Hexiu West Road, Heping community, Fuhai street, Bao'an District, Shenzhen, Guangdong 518100 Applicant before: Shenzhen Bachao Technology Co.,Ltd. |
|
| CB02 | Change of applicant information | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |