CN106961568A - 一种画面切换方法、装置和系统 - Google Patents

Abstract

本发明实施例公开了一种画面切换方法，用于解决现有导播切换方法容易出现导播判断失误、导播切换时机不准确的问题。本发明实施例方法包括：若检测到所述第一指定区域的视频画面中存在第一用户，且同时检测到所述第一指定区域的音频信号中包括所述第一用户的语音，则生成第一切换信号；若检测到所述第二指定区域的视频画面中存在第二用户，且同时检测到所述第二指定区域的音频信号中包括所述第二用户的语音，则生成第二切换信号；根据所述第一切换信号和/或所述第二切换信号按照预设的主画面切换规则对所述显示设备的主画面进行切换。本发明实施例还提供一种画面切换装置和一种录播系统。

Description

一种画面切换方法、装置和系统

技术领域

本发明涉及视频处理技术领域，尤其涉及一种画面切换方法、装置和系统。

背景技术

在使用录播系统时，人们在追求更高的视频品质的同时，视频播放中更流畅的角色切换视频体验往往也是一种人们潜在的品质需求。

目前，市面上的录播系统一般采用人工手动导播的方法，或者划分特定识别区域、判别用户高度等方式的自动导播切换方法。例如，在教学的应用场景中，在使用录播系统时，一般设有两个摄像枪机，第一个枪机安装于教室后方，从教室后方往前摄像，主要拍摄区域为整个讲台，拍摄对象为教师，当显示画面为整个讲台时，此时显示画面为教师全景画面；第二个枪机安装于教室前方，从教室前方往后摄像，主要拍摄区域为整个教室，拍摄对象为学生，当显示画面为整个教室时，此时显示画面为学生全景画面。现有的自动导播切换方法，通过在教师全景画面中预先设定教师区域，使用帧间差分法，当发现预设的教师区域有运动目标对象时，则将主画面切换至教师的特写画面；另外，检测学生全景画面，通过帧间差分法，若从学生全景画面中识别到目标学生存在起立动作，则将主画面切换至该目标学生的特写画面。

现有的自动导播切换方法不仅需要预先在全景画面中预先设定好特定区域（如教师全景画面中设定教师区域），而且通过帧间差分法判断画面中的用户是否存在相应的动作时，往往容易发生误判，例如当学生举手时，很容易被误判为该学生存在起立动作。可见，现有技术容易出现导播判断失误、导播切换时机不准确的问题。

发明内容

本发明实施例提供了一种画面切换方法、装置和系统，能够提高录播系统的便捷性，并减少导播判断失误的情况，提高导播画面切换时机的准确性。

第一方面，提供了一种画面切换方法，应用于一种录播系统，所述录播系统包括第一视频采集设备、第二视频采集设备、第一音频采集设备、第二音频采集设备和显示设备；

所述第一视频采集设备和第二视频采集设备分别用于采集第一指定区域和第二指定区域的视频画面；所述第一音频采集设备和第二音频采集设备分别用于采集所述第一指定区域和所述第二指定区域的音频信号；

所述画面切换方法包括：

若检测到所述第一指定区域的视频画面中存在第一用户，且同时检测到所述第一指定区域的音频信号中包括所述第一用户的语音，则生成第一切换信号，所述第一切换信号为将所述显示设备的主画面切换至所述第一指定区域的视频画面中指定画面的请求信号；

若检测到所述第二指定区域的视频画面中存在第二用户，且同时检测到所述第二指定区域的音频信号中包括所述第二用户的语音，则生成第二切换信号，所述第二切换信号为将所述显示设备的主画面切换至所述第二指定区域的视频画面中指定画面的请求信号；

根据所述第一切换信号和/或所述第二切换信号按照预设的主画面切换规则对所述显示设备的主画面进行切换。

第二方面，提供了一种画面切换装置，应用于一种录播系统，所述录播系统包括第一视频采集设备、第二视频采集设备、第一音频采集设备、第二音频采集设备和显示设备；

所述第一视频采集设备和第二视频采集设备分别用于采集第一指定区域和第二指定区域的视频画面；所述第一音频采集设备和第二音频采集设备分别用于采集所述第一指定区域和所述第二指定区域的音频信号；

所述画面切换装置包括：

第一切换信号生成模块，用于若检测到所述第一指定区域的视频画面中存在第一用户，且同时检测到所述第一指定区域的音频信号中包括所述第一用户的语音，则生成第一切换信号，所述第一切换信号为将所述显示设备的主画面切换至所述第一指定区域的视频画面中指定画面的请求信号；

第二切换信号生成模块，用于若检测到所述第二指定区域的视频画面中存在第二用户，且同时检测到所述第二指定区域的音频信号中包括所述第二用户的语音，则生成第二切换信号，所述第二切换信号为将所述显示设备的主画面切换至所述第二指定区域的视频画面中指定画面的请求信号；

画面切换模块，用于根据所述第一切换信号和/或所述第二切换信号按照预设的主画面切换规则对所述显示设备的主画面进行切换。

第三方面，提供了一种录播系统，包括上述的画面切换装置。

从以上技术方案可以看出，本发明实施例具有以下优点：

本发明实施例中，若检测到所述第一指定区域的视频画面中存在第一用户，且同时检测到所述第一指定区域的音频信号中包括所述第一用户的语音，则生成第一切换信号，所述第一切换信号为将所述显示设备的主画面切换至所述第一指定区域的视频画面中指定画面的请求信号；若检测到所述第二指定区域的视频画面中存在第二用户，且同时检测到所述第二指定区域的音频信号中包括所述第二用户的语音，则生成第二切换信号，所述第二切换信号为将所述显示设备的主画面切换至所述第二指定区域的视频画面中指定画面的请求信号；然后，根据所述第一切换信号和/或所述第二切换信号按照预设的主画面切换规则对所述显示设备的主画面进行切换。在本发明实施例中，分别检测第一指定区域和第二指定区域的视频画面中是否存在用户，无需预先在视频画面中设定好特定区域，提高录播系统的便捷性；另外，加入了用户语音的检测判断，减少了导播判断失误的情况，提高了导播画面切换时机的准确性。

附图说明

图1为本发明实施例中一种画面切换方法第一个实施例流程图；

图2a为本发明实施例中一种画面切换方法在一个教学应用场景下教师特写区域的示意图；

图2b为本发明实施例中一种画面切换方法在一个教学应用场景下学生特写区域的示意图；

图3为本发明实施例中一种画面切换方法第二个实施例流程图；

图4a为一个录播系统在一个教学应用场景下录播系统布局的结构示意图；

图4b为一个录播系统在一个教学应用场景下默认导播布局的结构示意图；

图4c为一个录播系统在一个教学应用场景下教师特写布局的结构示意图；

图4d为一个录播系统在一个教学应用场景下学生特写布局的结构示意图；

图5为本发明实施例中一种画面切换装置一个实施例结构图。

具体实施方式

本发明实施例提供了一种画面切换方法、装置和系统，用于解决现有导播切换方法容易出现导播判断失误、导播切换时机不准确的问题。

为使得本发明的发明目的、特征、优点能够更加的明显和易懂，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，下面所描述的实施例仅仅是本发明一部分实施例，而非全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

本发明实施例提供的一种画面切换方法，主要应用于一种录播系统，所述录播系统包括第一视频采集设备、第二视频采集设备、第一音频采集设备、第二音频采集设备和显示设备。其中，所述第一视频采集设备和第二视频采集设备分别用于采集第一指定区域和第二指定区域的视频画面；所述第一音频采集设备和第二音频采集设备分别用于采集所述第一指定区域和所述第二指定区域的音频信号；所述显示设备用于显示录播系统播放视频时的视频画面。

为便于理解，下面实施例主要在教学场景下对该画面切换方法进行描述。

在教学场景下，该第一视频采集设备、第二视频采集设备可以为两个摄像枪机，第一个枪机安装于教室后方，从教室后方往前摄像，主要拍摄区域为整个讲台，拍摄对象为教师，当显示画面为整个讲台时，此时显示画面为教师全景画面，当显示画面为教师的特写区域时，该显示画面为教师特写画面；第二个枪机安装于教室前方，从教室前方往后摄像，主要拍摄区域为整个教室，拍摄对象为学生，当显示画面为整个教室时，此时显示画面为学生全景画面，而当显示画面为学生的特写区域时，该显示画面为学生特写画面。

另外，为了采集教师和学生的声音，该第一音频采集设备、第二音频采集设备可以为至少两个麦克风，一个麦克风设置在讲台上，用来采集教师的声音；另外的麦克风设置在学生活动区域，用来采集学生的声音，而由于学生往往存在多个，可以设置多个麦克风在学生活动区域中，以确保可以准确采集到各个学生说话时的声音。特别地，为了准确采集单个学生的声音，可以在学生活动区域中设置可活动的麦克风，学生讲话时，该活动的麦克风移动到讲话学生的位置上。当然，若在不考虑成本的情况下，也可以为每个学生均设置一个麦克风，以便准确采集到各个学生的声音，并可以通过声音信号的来源定位讲话学生的身份（用户身份）。

可以理解的是，下述实施例中主要在教学场景下对本发明的一种画面切换方法进行描述，但该画面切换方法还可以运用于教学场景意外的其它场景中，例如网络主播场景、节目主持场景等。举例说明，若应用于节目主持场景中，则第一视频采集设备、第二视频采集设备分别设置于主持人所在舞台以及观众席区域，而第一音频采集设备为主持人说话的麦克风，第二音频采集设备则为提供给观众说话的麦克风。对于本发明的画面切换方法的适用场景，这里不再一一赘述。

请参阅图1，本发明实施例中一种画面切换方法第一个实施例包括：

101、检测第一指定区域的视频画面中是否存在第一用户；

本实施例中，在教学场景下，该第一指定区域可以为教师所在的讲台区域，该第一用户可以指的是教师。因此，可以通过检测第一视频采集设备采集得到的教师全景画面中是否存在用户来判断教师是否在讲台区域中。

在检测视频画面（教师全景画面）时，可以将视频画面拆分为每一小段，该每一小段可以包含3至15个的视频帧，然后，通过对这些视频帧用图像识别的方法进行分析，可得知画面中是否存在用户。特别地，面对教学场景下的需求，为了准确定位教师的人脸，进一步地，可以对所述第一指定区域的视频画面进行人脸识别，若识别到所述第一指定区域的视频画面中存在人脸，则确定检测到所述第一指定区域的视频画面中存在第一用户，也即存在该教师。

可以理解的是，通过人脸识别的方法检测到视频画面中存在教师的同时，还可以根据识别到的人脸特征获知该教师的身份信息，例如得知目前授课的是哪位教师。

本实施例中，为了便于录播系统对检测结果的获取和管理，可以预先设置标记Tv作为教师全景画面中是否存在教师的标识符，Tv的初始值可以设为0，Tv=0时，表示教师全景画面中未检测到教师（第一用户）。当检测到教师时，则将Tv置为1，Tv=1时，表示教师全景画面中检测到教师。

102、检测所述第一指定区域的音频信号中是否包括所述第一用户的语音；

本实施例中，为了提高第一用户判定的准确性，减少发生误判导致导播切换时机不准确的情况，通过语音检测的方式确定该第一用户是否在讲话。可以理解的是，在教学场景中，导播画面的切换往往是在教师发言时，将主画面切换至教师；而在学生发言时，将主画面切换至学生。可见，主画面切换的时机与第一用户、第二用户是否在讲话密切相关。

在教学场景中，第一音频采集设备采集讲台区域声音，也即教师的声音。通过分析采集得到的音频信号中是否存在人声，例如可以用傅里叶变化数字信号处理来分析该音频信号。

进一步地，还可以预留各个教师的语音信息，在检测到当前教师的语音时，通过将检测到的语音与预留的语音信息进行对比，从而可以确定当前教师的身份。

本实施例中，为了便于录播系统对检测结果的获取和管理，可以预先设置标记Ta作为“第一指定区域的音频信号中是否包括所述第一用户的语音”的标记符，Ta的初始值可以设为0，Ta=0时，表示第一指定区域的音频信号中不包括所述第一用户的语音，也即没有教师正在讲话。当检测到该第一用户的语音时，则将Ta置为1，Ta=1时，表示第一指定区域的音频信号中包括所述第一用户的语音，也即教师正在讲话。

103、若检测到所述第一指定区域的视频画面中存在第一用户，且同时检测到所述第一指定区域的音频信号中包括所述第一用户的语音，则生成第一切换信号，所述第一切换信号为将所述显示设备的主画面切换至所述第一指定区域的视频画面中指定画面的请求信号；

本实施例中，在教学场景下，若检测到教师全景画面中存在教师，并且同时该教师正在讲话，则需要将主画面切换至教师特写画面。

对于录播系统来说，若Tv=1，且同时Ta=1，则生成一个第一切换信号，并将该第一切换信号发送给录播系统，请求录播系统将所述显示设备的主画面切换至所述第一指定区域的视频画面中指定画面。特别地，该第一指定区域的视频画面中指定画面指的是教师特写画面。更进一步地，在生成第一切换信号之前，还可以对比教师全景画面中的教师身份与正在讲话的教师的身份是否一致，若一致，才生成该第一切换信号。从而更进一步提高导播切换的准确性。

本实施例中，进一步地，所述第一指定区域的视频画面中指定画面可以通过以下步骤确定：在识别到所述第一指定区域的视频画面中存在人脸之后，将所述识别到的人脸对应用户确定为所述第一用户；将针对所述第一用户人脸的特写画面确定为所述第一指定区域的视频画面中的指定画面。也即，若在教师全景画面中检测到人脸，则将该人脸所属用户确定为教师，并将该教师的人脸特写画面确定为该指定画面。

在录播系统进行视频播放时，显示设备上显示的人脸特写画面对应的特写区域可以根据实际使用情况确定。本实施例中，提供一种具体的人脸特写区域确定方法来确定该指定画面，请参考图2a。

如图2a所示，当从教师全景画面中分析出人脸时，获得该人脸在视频中的最左坐标Fx、最上坐标Fy、脸部的最宽长度Fw、脸部的最高长度Fh，记作（Fx,Fy,Fw,Fh）；为了更好的特写输出效果，可以将视频输出的总宽度设为人脸的五倍，即以人脸为中心，分别往左右扩开两倍，使特定区域为T，则Tx=Fx-2Fw,Tx>=0，Tw=5Fw；将视频输出的顶点设为脸部顶点的上方的1/2脸高度，总高度设为人脸的3倍，则T=Fy-(1/2)Fy,Ty>0,Th=3Fh；因此得特写区域为T(Tx,Ty,Tw,Th)。

104、检测第二指定区域的视频画面中是否存在第二用户；

本实施例中，在教学场景下，该第二指定区域可以为教室，也即学生所在区域，该第二用户可以指的是学生。因此，可以通过检测第二视频采集设备采集得到的学生全景画面中是否存在用户来判断学生是否在学生所在区域中。

在检测视频画面（教师全景画面）时，可以将视频画面拆分为每一小段，该每一小段可以包含3至15个的视频帧，然后，通过对这些视频帧用图像识别的方法进行分析，可得知画面中是否存在用户。特别地，面对教学场景下的需求，为了更准确地判定学生是否作出起立动作，进一步地，可以对所述第二指定区域的视频画面进行人体轮廓识别；若识别到所述第二指定区域的视频画面中存在至少半身的人体轮廓，则确定检测到所述第二指定区域的视频画面中存在第二用户，也即存在站立的学生。可以理解的是，在教学场景中，当学生回答问题或者发言提问时，该学生会站立起来讲话，此时该学生相对其它学生来说发生了起立的动作，并处于站立状态。在学生全景画面中，通过人体轮廓的识别，可知，未发言的学生为坐下的状态，其人体轮廓识别小于半身，而对站立状态的学生识别出的人体轮廓则会不少于半身。从而，可以准确地判定是否有学生处于站立状态。

本实施例中，为了便于录播系统对检测结果的获取和管理，可以预先设置标记Sv作为学生全景画面中是否存在站立的学生的标识符，Sv的初始值可以设为0，Sv=0时，表示学生全景画面中未检测到第二用户（例如站立状态的学生）。当检测到第二用户时，则将Sv置为1，Sv=1时，表示学生全景画面中检测到该第二用户，或者检测到处于站立状态的学生。

105、检测所述第二指定区域的音频信号中是否包括所述第二用户的语音；

与上述步骤102类似，对于上述步骤105，在教学场景中，第二音频采集设备采集教室区域声音，也即学生的声音。通过分析采集得到的音频信号中是否存在人声，例如可以用傅里叶变化数字信号处理来分析该音频信号。可以理解的是，由于学生的人数往往较多，可以为每个学生安装一个指定的麦克风，这样不仅可以使得麦克风采集的学生的音频信号更加清晰，而且可以根据麦克风的音频输入来源确定正在讲话的学生的身份。

另外，还可以预留各个学生的语音信息，在检测到当前学生的语音时，通过将检测到的语音与预留的语音信息进行对比，也可以确定当前学生的身份。

本实施例中，为了便于录播系统对检测结果的获取和管理，可以预先设置标记Sa作为“第二指定区域的音频信号中是否包括所述第二用户的语音”的标记符，Sa的初始值可以设为0，Sa=0时，表示第二指定区域的音频信号中不包括所述第二用户的语音，也即没有学生正在讲话。当检测到该第二用户的语音时，则将Sa置为1，Sa=1时，表示第二指定区域的音频信号中包括所述第二用户的语音，也即学生正在讲话。

106、若检测到所述第二指定区域的视频画面中存在第二用户，且同时检测到所述第二指定区域的音频信号中包括所述第二用户的语音，则生成第二切换信号，所述第二切换信号为将所述显示设备的主画面切换至所述第二指定区域的视频画面中指定画面的请求信号；

本实施例中，在教学场景下，若检测到学生全景画面中存在学生，并且该学生正在讲话，则需要将主画面切换至该学生的特写画面。

对于录播系统来说，若Sv=1，且同时Sa=1，则生成一个第二切换信号，并将该第二切换信号发送给录播系统，请求录播系统将所述显示设备的主画面切换至所述第二指定区域的视频画面中指定画面。特别地，该第二指定区域的视频画面中指定画面指的是学生特写画面。更进一步地，在生成第二切换信号之前，还可以对比学生全景画面中的学生身份与正在讲话的学生的身份是否一致，若一致，才生成该第二切换信号。从而更进一步提高导播切换的准确性。

本实施例中，进一步地，所述第二指定区域的视频画面中指定画面通过以下步骤确定：在识别到所述第二指定区域的视频画面中存在至少半身的人体轮廓之后，将所述至少半身的人体轮廓对应用户确定为所述第二用户；将针对所述第二用户人体轮廓的特写画面确定为所述第二指定区域的视频画面中的指定画面。也即，若在学生全景画面中检测到站立状态的人体轮廓，则将该人体轮廓所述用户确定为处于站立状态的学生，并将该学生的人体轮廓特的特写画面确定为该指定画面。

在录播系统进行视频播放时，显示设备上显示的人体轮廓特写画面对应的特写区域可以根据实际使用情况确定。本实施例中，提供一种具体的人体轮廓特写区域确定方法来确定该指定画面，请参考图2b。

如图2b所示，当从学生全景画面中分析出至少半身的人体轮廓信息时，获得该人体轮廓的最左坐标Cx、最上坐标Cy、轮廓的最宽长度Cw、轮廓的最高长度Ch，记作（Cx,Cy,Cw,Ch）；在第二枪机进行拍摄时，会同时拍摄到其它的学生，而当需要换到特写区域时，往往是因为学生起立回答问题，因此，站立的学生的人体轮廓会相对完整，目标拍摄区域也是站立学生，此时允许特写画面中出现站立学生旁边的（坐下的）学生；为了更好的特写输出效果，可以将视频输出的总宽度设为人体最宽长度的五倍，即以人体为中心，分别往左右扩开两倍，使特定区域为S，则Sx=Sx-5Cw,Sx>=0，Sw=5Cw；将视频输出的顶点设为轮廓顶点的上方的1/2人体轮廓高度，总高度设为人体轮廓高度和1/2人体轮廓高度的总和，则Sy=Cy-(1/2)Cy,Sy>0, Sh=Ch+(1/2)Ch；因此得到人体轮廓特写区域为S(Sx,Sy,Sw,Sh)。

107、根据所述第一切换信号和/或所述第二切换信号按照预设的主画面切换规则对所述显示设备的主画面进行切换。

本实施例中，在录播系统获取到该第一切换信号和/或第二切换信号时，根据获取到的切换信号按照预设的主画面切换规则对显示设备的主画面进行切换。在进行主画面切换时，需要考虑当前主画面显示的画面进行相应处理。下面分三种情况进行说明。

第一种情况，当前主画面显示的是教师特写画面。此时，若录播系统获取到第一切换信号，没有获取到第二切换信号，则不对主画面进行切换处理；若录播系统获取到第二切换信号，没有获取到第一切换信号，则将主画面切换至学生特写画面；若录播系统既获取到第一切换信号，也获取到第二切换信号，则可以将主画面切换至学生特写画面。需要说明的是，当录播系统同时获取到第一切换信号和第二切换信号时，根据预先的设定，也可以不对主画面进行切换处理。

第二种情况，当前主画面显示的是学生特写画面。此时，若录播系统获取到第一切换信号，没有获取到第二切换信号，则将主画面切换至教室特别画面；若录播系统获取到第二切换信号，没有获取到第一切换信号，则不对主画面进行切换处理；若录播系统既获取到第一切换信号，也获取到第二切换信号，则不对主画面进行切换处理。需要说明的是，当录播系统同时获取到第一切换信号和第二切换信号时，根据预先的设定，也可以将主画面切换至教室特别画面。

第三种情况，当前主画面显示的是其它画面。此时，若录播系统获取到第一切换信号，没有获取到第二切换信号，则将主画面切换至教室特别画面；若录播系统获取到第二切换信号，没有获取到第一切换信号，则将主画面切换至学生特写画面；若录播系统既获取到第一切换信号，也获取到第二切换信号，则可以将主画面切换至学生特写画面。需要说明的是，当录播系统同时获取到第一切换信号和第二切换信号时，根据预先的设定，也可以将主画面切换至教室特别画面。

由上述内容可知，在本实施例的画面切换方法具有以下优点：

1、通过人脸识别定位，无需预先设定区域，提高使用的便捷性；加入语音识别的方法，防止判断失误，提高判断的准确性；

2、通过人体轮廓的判别方法，可以直接忽略掉障碍判断（障碍判断有可能是学生们举手动作，现有技术使用帧间差分法判断时，举手动作与起立动作相似，经常误判），找到目标人物位置，提高导播区域选择的准确性；结合语音识别的方法，提高导播切换时机的准确性。

上面第一个实施例主要描述了教室特写画面和学生特写画面之间的导播切换，下面将通过第二个实施例对本发明的一种画面切换方法从另一个方面进行描述，请参阅图3，本发明实施例中一种画面切换方法第二个实施例包括：

301、检测第一指定区域的视频画面中是否存在第一用户；

302、检测所述第一指定区域的音频信号中是否包括所述第一用户的语音；

303、若检测到所述第一指定区域的视频画面中存在第一用户，且同时检测到所述第一指定区域的音频信号中包括所述第一用户的语音，则生成第一切换信号，所述第一切换信号为将所述显示设备的主画面切换至所述第一指定区域的视频画面中指定画面的请求信号；

304、检测第二指定区域的视频画面中是否存在第二用户；

305、检测所述第二指定区域的音频信号中是否包括所述第二用户的语音；

306、若检测到所述第二指定区域的视频画面中存在第二用户，且同时检测到所述第二指定区域的音频信号中包括所述第二用户的语音，则生成第二切换信号，所述第二切换信号为将所述显示设备的主画面切换至所述第二指定区域的视频画面中指定画面的请求信号；

本实施例中，上述步骤301~306与第一个实施例中的步骤101~106类似，此处不再赘述。

307、若所述第一指定区域的视频画面中不存在第一用户，且同时所述第一指定区域的音频信号中不包括所述第一用户的语音，则生成第一结束信号，所述第一结束信号为结束在所述显示设备的主画面中显示所述第一指定区域的视频画面中指定画面的请求信号；

在教学场景中，若检测到教师全景画面中不存在教师，且同时也未检测到该教师的语音，则可以将教师特写画面结束掉。

对于录播系统来说，在第一枪机采集的视频流和第一麦克风的音频流同时分析的过程中，若Tv=0，且同时Ta=0，则生成一个第一结束信号，并将该第一结束信号发送给录播系统，请求录播系统将显示设备当前显示的教师特写画面结束掉。

308、若所述第二指定区域的视频画面中不存在第二用户，且同时所述第二指定区域的音频信号中不包括所述第二用户的语音，则生成第二结束信号，所述第二结束信号为结束在所述显示设备的主画面中显示所述第二指定区域的视频画面中指定画面的请求信号；

在教学场景中，若检测到学生全景画面中不存在满足条件的学生（第二用户），且同时也未检测到该学生的语音，则可以将该学生的特写画面结束掉。需要说明的是，对于上述步骤308，该第二用户并非指任意一名学生，而是指满足预设条件的学生。例如，处于站立状态的学生为该第二用户，若学生全景画面中不存在第二用户，则表示该学生全景画面中没有处于站立状态的学生。

对于录播系统来说，在第二枪机采集的视频流和安装于教师区域的麦克风的音频流同时分析的过程中，若Sv=0，且同时Sa=0，则生成一个第二结束信号，并将该第二结束信号发送给录播系统，请求录播系统将显示设备当前显示的学生特写画面结束掉。

309、根据所述第一切换信号、所述第二切换信号、所述第一结束信号和/或第二结束信号按照预设的主画面切换规则对所述显示设备的主画面进行切换；

本实施例中，在录播系统获取到该第一切换信号、所述第二切换信号、所述第一结束信号和/或第二结束信号时，根据获取到的切换信号、结束信号按照预设的主画面切换规则对显示设备的主画面进行切换。在进行主画面切换时，需要考虑当前主画面显示的画面进行相应处理。

在一个教学应用场景下，如图4a~4d所示，为了获得更好的观影体验，本实施例为录播系统设置了不同的导播布局种类，录播系统中视频播放时，可在播放画面中划分为三个画面区域，其中最大的画面区域为主画面，其它两个小的画面区域为子画面。而在录播系统开始运作时，使用默认的导播布局，将授课讲义画面（默认画面）设置为主画面，老师及学生的全景画面设置为子画面。在将教师特写画面设置为主画面时，导播切换画面，使录播系统切换为教师特写布局；在将学生特写画面设置为主画面时，导播切换画面，使录播系统切换为学生特写布局。

以上面的教学应用场景为例，对于上述步骤309，其主画面切换的情况包括以下几种：

情况a，当前导播布局为默认导播布局，当前主画面为授课讲义画面。此时，若录播系统获取到第一切换信号，则将主画面切换至教师特写画面；若录播系统获取到第二切换信号，则将主画面切换至学生特写画面；对于录播系统获取到的其它信号（第一结束信号和/或第二结束信号），不予处理。

情况b，当前导播布局为教师特写布局，当前主画面为教师特写画面。此时，若录播系统获取到第一结束信号，则将主画面切换至授课讲义画面；若录播系统获取到第二切换信号，则将主画面切换至学生特写画面；对于录播系统获取到的其它信号（第一切换信号和/或第二结束信号），不予处理。

情况c，当前导播布局为学生特写布局，当前主画面为学生特写画面。此时，若录播系统获取到第二结束信号，则将主画面切换至上一次显示的画面。即，若主画面上一次显示的画面为教师特写画面，主画面当前显示的画面为学生特写画面，录播系统获取到第二结束信号时，将主画面切换至教师特写画面；若主画面上一次显示的画面为授课讲义画面，主画面当前显示的画面为学生特写画面，录播系统获取到第二结束信号时，将主画面切换至授课讲义画面。在情况c中，对于录播系统获取到的其它信号（第一切换信号、第一结束信号和/或第二切换信号），不予处理。

本实施例中，在进行导播画面切换的过程中，进一步地加入了第一结束信号和第二结束信号的判断、生成，当学生离开站立状态并结束讲话后，结束显示学生特写画面；当教师离开讲台并结束讲话后，结束显示教师特写画面，进一步提高导播画面切换的灵活性和准确性，提升导播系统的使用体验。

上面主要描述了一种画面切换方法，下面将对一种画面切换装置进行详细描述。

图5示出了本发明实施例中一种画面切换装置一个实施例结构图。

如图5所示，本实施例中，该画面切换装置应用于一种录播系统，所述录播系统包括第一视频采集设备、第二视频采集设备、第一音频采集设备、第二音频采集设备和显示设备；

所述第一视频采集设备和第二视频采集设备分别用于采集第一指定区域和第二指定区域的视频画面；所述第一音频采集设备和第二音频采集设备分别用于采集所述第一指定区域和所述第二指定区域的音频信号；

所述画面切换装置包括：

第一切换信号生成模块501，用于若检测到所述第一指定区域的视频画面中存在第一用户，且同时检测到所述第一指定区域的音频信号中包括所述第一用户的语音，则生成第一切换信号，所述第一切换信号为将所述显示设备的主画面切换至所述第一指定区域的视频画面中指定画面的请求信号；

第二切换信号生成模块502，用于若检测到所述第二指定区域的视频画面中存在第二用户，且同时检测到所述第二指定区域的音频信号中包括所述第二用户的语音，则生成第二切换信号，所述第二切换信号为将所述显示设备的主画面切换至所述第二指定区域的视频画面中指定画面的请求信号；

画面切换模块503，用于根据所述第一切换信号和/或所述第二切换信号按照预设的主画面切换规则对所述显示设备的主画面进行切换。

进一步地，所述画面切换装置还可以包括：

人体轮廓识别模块，用于对所述第二指定区域的视频画面进行人体轮廓识别；

轮廓识别确定模块，用于若识别到所述第二指定区域的视频画面中存在至少半身的人体轮廓，则确定检测到所述第二指定区域的视频画面中存在第二用户。

进一步地，所述第二指定区域的视频画面中指定画面可以通过以下步骤确定：

第二用户确定模块，用于在识别到所述第二指定区域的视频画面中存在至少半身的人体轮廓之后，将所述至少半身的人体轮廓对应用户确定为所述第二用户；

第二指定画面确定模块，用于将针对所述第二用户人体轮廓的特写画面确定为所述第二指定区域的视频画面中的指定画面。

进一步地，所述画面切换装置还可以包括：

人脸识别模块，用于对所述第一指定区域的视频画面进行人脸识别；

人脸识别确定模块，用于若识别到所述第一指定区域的视频画面中存在人脸，则确定检测到所述第一指定区域的视频画面中存在第一用户；

所述第一指定区域的视频画面中指定画面可以通过以下模块确定：

第一用户确定模块，用于在识别到所述第一指定区域的视频画面中存在人脸之后，将所述识别到的人脸对应用户确定为所述第一用户；

第一指定画面确定模块，用于将针对所述第一用户人脸的特写画面确定为所述第一指定区域的视频画面中的指定画面。

进一步地，所述画面切换装置还可以包括：

第一结束信号生成模块，用于若所述第一指定区域的视频画面中不存在第一用户，且同时所述第一指定区域的音频信号中不包括所述第一用户的语音，则生成第一结束信号，所述第一结束信号为结束在所述显示设备的主画面中显示所述第一指定区域的视频画面中指定画面的请求信号；

第一主画面切换模块，用于若所述显示设备当前显示的主画面为所述第一指定区域的视频画面中的指定画面，则将所述主画面切换至预设的默认画面。

进一步地，所述画面切换装置还可以包括：

第二结束信号生成模块，用于若所述第二指定区域的视频画面中不存在第二用户，且同时所述第二指定区域的音频信号中不包括所述第二用户的语音，则生成第二结束信号，所述第二结束信号为结束在所述显示设备的主画面中显示所述第二指定区域的视频画面中指定画面的请求信号；

第二主画面切换模块，用于若所述显示设备当前显示的主画面为所述第二指定区域的视频画面中的指定画面，则将所述主画面切换至所述主画面上一次显示的画面。

本发明实施例还提供了一种录播系统，其包括图5对应实施例中描述的任意一种画面切换装置。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器（ROM，Read-OnlyMemory）、随机存取存储器（RAM，Random Access Memory）、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种画面切换方法，其特征在于，应用于一种录播系统，所述录播系统包括第一视频采集设备、第二视频采集设备、第一音频采集设备、第二音频采集设备和显示设备；

所述第一视频采集设备和第二视频采集设备分别用于采集第一指定区域和第二指定区域的视频画面；所述第一音频采集设备和第二音频采集设备分别用于采集所述第一指定区域和所述第二指定区域的音频信号；

所述画面切换方法包括：

若检测到所述第一指定区域的视频画面中存在第一用户，且同时检测到所述第一指定区域的音频信号中包括所述第一用户的语音，则生成第一切换信号，所述第一切换信号为将所述显示设备的主画面切换至所述第一指定区域的视频画面中指定画面的请求信号；

若检测到所述第二指定区域的视频画面中存在第二用户，且同时检测到所述第二指定区域的音频信号中包括所述第二用户的语音，则生成第二切换信号，所述第二切换信号为将所述显示设备的主画面切换至所述第二指定区域的视频画面中指定画面的请求信号；

根据所述第一切换信号和/或所述第二切换信号按照预设的主画面切换规则对所述显示设备的主画面进行切换。

2.根据权利要求1所述的画面切换方法，其特征在于，在若检测到所述第二指定区域的视频画面中存在第二用户，且同时检测到所述第二指定区域的音频信号中包括所述第二用户的语音，则生成第二切换信号的步骤之前，还包括：

对所述第二指定区域的视频画面进行人体轮廓识别；

若识别到所述第二指定区域的视频画面中存在至少半身的人体轮廓，则确定检测到所述第二指定区域的视频画面中存在第二用户。

3.根据权利要求2所述的画面切换方法，其特征在于，所述第二指定区域的视频画面中指定画面通过以下步骤确定：

在识别到所述第二指定区域的视频画面中存在至少半身的人体轮廓之后，将所述至少半身的人体轮廓对应用户确定为所述第二用户；

将针对所述第二用户人体轮廓的特写画面确定为所述第二指定区域的视频画面中的指定画面。

4.根据权利要求1所述的画面切换方法，其特征在于，在若检测到所述第一指定区域的视频画面中存在第一用户，且同时检测到所述第一指定区域的音频信号中包括所述第一用户的语音，则生成第一切换信号的步骤之前，还包括：

对所述第一指定区域的视频画面进行人脸识别；

若识别到所述第一指定区域的视频画面中存在人脸，则确定检测到所述第一指定区域的视频画面中存在第一用户；

所述第一指定区域的视频画面中指定画面通过以下步骤确定：

在识别到所述第一指定区域的视频画面中存在人脸之后，将所述识别到的人脸对应用户确定为所述第一用户；

将针对所述第一用户人脸的特写画面确定为所述第一指定区域的视频画面中的指定画面。

5.根据权利要求1至4中任一项所述的画面切换方法，其特征在于，还包括：

若所述第一指定区域的视频画面中不存在第一用户，且同时所述第一指定区域的音频信号中不包括所述第一用户的语音，则生成第一结束信号，所述第一结束信号为结束在所述显示设备的主画面中显示所述第一指定区域的视频画面中指定画面的请求信号；

若所述显示设备当前显示的主画面为所述第一指定区域的视频画面中的指定画面，则将所述主画面切换至预设的默认画面。

6.根据权利要求1至4中任一项所述的画面切换方法，其特征在于，还包括：

若所述第二指定区域的视频画面中不存在第二用户，且同时所述第二指定区域的音频信号中不包括所述第二用户的语音，则生成第二结束信号，所述第二结束信号为结束在所述显示设备的主画面中显示所述第二指定区域的视频画面中指定画面的请求信号；

若所述显示设备当前显示的主画面为所述第二指定区域的视频画面中的指定画面，则将所述主画面切换至所述主画面上一次显示的画面。

7.一种画面切换装置，其特征在于，应用于一种录播系统，所述录播系统包括第一视频采集设备、第二视频采集设备、第一音频采集设备、第二音频采集设备和显示设备；

所述第一视频采集设备和第二视频采集设备分别用于采集第一指定区域和第二指定区域的视频画面；所述第一音频采集设备和第二音频采集设备分别用于采集所述第一指定区域和所述第二指定区域的音频信号；

所述画面切换装置包括：

第一切换信号生成模块，用于若检测到所述第一指定区域的视频画面中存在第一用户，且同时检测到所述第一指定区域的音频信号中包括所述第一用户的语音，则生成第一切换信号，所述第一切换信号为将所述显示设备的主画面切换至所述第一指定区域的视频画面中指定画面的请求信号；

第二切换信号生成模块，用于若检测到所述第二指定区域的视频画面中存在第二用户，且同时检测到所述第二指定区域的音频信号中包括所述第二用户的语音，则生成第二切换信号，所述第二切换信号为将所述显示设备的主画面切换至所述第二指定区域的视频画面中指定画面的请求信号；

画面切换模块，用于根据所述第一切换信号和/或所述第二切换信号按照预设的主画面切换规则对所述显示设备的主画面进行切换。

8.根据权利要求7所述的画面切换装置，其特征在于，所述画面切换装置还包括：

人体轮廓识别模块，用于对所述第二指定区域的视频画面进行人体轮廓识别；

轮廓识别确定模块，用于若识别到所述第二指定区域的视频画面中存在至少半身的人体轮廓，则确定检测到所述第二指定区域的视频画面中存在第二用户。

9.根据权利要求7所述的画面切换装置，其特征在于，所述画面切换装置还包括：

人脸识别模块，用于对所述第一指定区域的视频画面进行人脸识别；

人脸识别确定模块，用于若识别到所述第一指定区域的视频画面中存在人脸，则确定检测到所述第一指定区域的视频画面中存在第一用户；

所述第一指定区域的视频画面中指定画面通过以下模块确定：

第一用户确定模块，用于在识别到所述第一指定区域的视频画面中存在人脸之后，将所述识别到的人脸对应用户确定为所述第一用户；

第一指定画面确定模块，用于将针对所述第一用户人脸的特写画面确定为所述第一指定区域的视频画面中的指定画面。

10.一种录播系统，其特征在于，包括如权利要求7至9中任一项所述的画面切换装置。