CN107147927B

CN107147927B - 基于直播连麦的直播方法及装置

Info

Publication number: CN107147927B
Application number: CN201710245821.5A
Authority: CN
Inventors: 韩尚佑; 李志刚
Original assignee: Beijing Xiaomi Mobile Software Co Ltd
Current assignee: Beijing Xiaomi Mobile Software Co Ltd
Priority date: 2017-04-14
Filing date: 2017-04-14
Publication date: 2020-04-03
Anticipated expiration: 2037-04-14
Also published as: CN107147927A

Abstract

本公开是关于一种基于直播连麦的直播方法及装置，属于直播技术领域。该方法包括：获取主播终端采集的第一直播画面，并获取接入终端采集的第二直播画面和该接入终端的重力感应信息，该接入终端为与该主播终端进行直播连麦的直播终端，该重力感应信息用于指示该接入终端在采集该第二直播画面时相对于本端在水平状态时的倾斜方向和倾斜角度；基于该接入终端的重力感应信息对该第二直播画面的画面方向进行调整；根据该第一直播画面和调整后的第二直播画面获取合成直播画面，该合成直播画面用于进行直播。通过根据重力感应信息对第二直播画面的画面方向进行调整，能够保证主播终端直播的合成直播画面能够一直保持端正，优化直播效果。

Description

基于直播连麦的直播方法及装置

技术领域

本公开涉及直播技术领域，尤其涉及一种基于直播连麦的直播方法及直播装置。

背景技术

目前，直播技术正处于蓬勃发展的时期。在直播业务中，最初的业务形态为单相视频展示，即观众只能单向观看主播的直播，后来逐渐发展为观众可以通过文字、弹幕的形式与主播互动。如今，为进一步提高互动体验，产生了一种直播连麦业务，即主播可以通过主播终端与直播连麦者的终端(也称为接入终端)建立连麦会话连接，在建立连麦会话连接之后，主播可以与直播连麦者进行双向的音视频互动，而观众可以观看该主播与该直播连麦者的音视频互动过程。其中，该直播连麦者可以为该主播所在直播间内的特定观众，也可以为其他直播间内的主播。

相关技术中，在基于直播连麦业务进行直播的过程中，主播终端可以获取自身采集的主播的直播画面，也即是第一直播画面，并从直播服务器获取接入终端采集的直播连麦者的直播画面，也即是第二直播画面，而且所获取的第二直播画面的显示方向通常维持不变。之后主播终端即可在第二直播画面的显示方向维持不变的情况下，将该第一直播画面和该第二直播画面进行合成，得到合成直播画面，并基于该合成直播画面进行直播。当观众终端接收到该合成直播画面时，观众即可基于显示的合成直播画面观看到该主播和该直播连麦者的互动过程。比如，观众终端显示的合成直播画面可以是一个分屏画面，该分屏画面的左半部分为该主播的直播画面，右半部分为该直播连麦者的直播画面。

但是当接入终端为移动终端时，该接入终端将可能会在竖屏模式和横屏模式之间来回切换，导致第二直播画面的画面方向发生变化。当第二直播画面的画面方向发生变化后，若仍按照第二直播画面的原有显示方向进行画面合成，则可能会导致合成直播画面中第二直播画面的画面方向不是端正的，比如画面方向可能是朝左或朝右的，甚至可能是倒置的，从而影响直播效果。

发明内容

为克服相关技术中存在的在基于直播连麦业务进行直播的过程中，主播终端所直播的合成直播画面无法维持端正，从而影响直播效果问题，本公开提供了一种基于直播连麦的直播方法及装置。所述技术方案如下：

根据本公开实施例的第一方面，提供了一种基于直播连麦的直播方法，所述方法包括：

获取主播终端采集的第一直播画面，并获取接入终端采集的第二直播画面和所述接入终端的重力感应信息，所述接入终端为与所述主播终端进行直播连麦的直播终端，所述接入终端的重力感应信息用于指示所述接入终端在采集所述第二直播画面时相对于本端在水平状态时的倾斜方向和倾斜角度；

基于所述接入终端的重力感应信息对所述第二直播画面的画面方向进行调整，以将所述第二直播画面的画面方向调整端正；

根据所述第一直播画面和调整后的第二直播画面获取合成直播画面，所述合成直播画面用于进行直播。

可选地，所述方法还包括：

获取所述主播终端的重力感应信息；

按照基于所述接入终端的重力感应信息对所述第二直播画面的画面方向进行调整的方式，基于所述主播终端的重力感应信息对所述第一直播画面的画面方向进行调整，以将所述第一直播画面的画面方向调整端正；

所述根据所述第一直播画面和调整后的第二直播画面获取合成直播画面，包括：

将调整后的第一直播画面和调整后的第二直播画面进行合成，得到所述合成直播画面。

可选地，所述基于所述接入终端的重力感应信息对所述第二直播画面的画面方向进行调整，包括：

基于所述接入终端的重力感应信息确定所述接入终端相对于本端在水平状态时的倾斜方向和倾斜角度；

将所述第二直播画面按照所述倾斜方向翻转所述倾斜角度。

基于所述倾斜方向和倾斜角度确定所述接入终端的直播姿势，所述直播姿势包括左横屏、右横屏、第一竖屏和第二竖屏中的至少一种，所述第一竖屏是指所述接入终端的顶端朝上时的竖屏状态，所述第二竖屏是指所述接入终端的顶端朝下时的竖屏状态；

基于所述直播姿势对所述第二直播画面的画面方向进行调整。

可选地，所述基于所述直播姿势对所述第二直播画面的画面方向进行调整，包括以下方式中的至少一种：

当基于所述接入终端的重力感应信息确定所述接入终端的直播姿势为左横屏时，将所述第二直播画面向左翻转90度；

当基于所述接入终端的重力感应信息确定所述接入终端的直播姿势为右横屏时，将所述第二直播画面向右翻转90度；

当基于所述接入终端的重力方向信息确定所述接入终端的直播姿势为第二竖屏时，将所述第二直播画面翻转180度。

根据本公开实施例的第二方面，提供了一种基于直播连麦的直播装置，所述直播装置包括：

第一获取模块，用于获取主播终端采集的第一直播画面，并获取接入终端采集的第二直播画面和所述接入终端的重力感应信息，所述接入终端为与所述主播终端进行直播连麦的直播终端，所述接入终端的重力感应信息用于指示所述接入终端在采集所述第二直播画面时相对于本端在水平状态时的倾斜方向和倾斜角度；

第一调整模块，用于基于所述接入终端的重力感应信息对所述第二直播画面的画面方向进行调整，以将所述第二直播画面的画面方向调整端正；

第二获取模块，用于根据所述第一直播画面和调整后的第二直播画面获取合成直播画面，所述合成直播画面用于进行直播。

可选地，所述装置还包括：

第三获取模块，用于获取所述主播终端的重力感应信息；

第二调整模块，用于按照基于所述接入终端的重力感应信息对所述第二直播画面的画面方向进行调整的方式，基于所述主播终端的重力感应信息对所述第一直播画面的画面方向进行调整，以将所述第一直播画面的画面方向调整端正；

所述第二获取模块，用于将调整后的第一直播画面和调整后的第二直播画面进行合成，得到所述合成直播画面。

可选地，所述第一调整模块包括：

第一确定子模块，用于基于所述接入终端的重力感应信息确定所述接入终端相对于本端在水平状态时的倾斜方向和倾斜角度；

第一调整子模块，用于将所述第二直播画面按照所述倾斜方向翻转所述倾斜角度。

可选地，所述第一调整模块包括：

第二确定子模块，用于基于所述接入终端的重力感应信息确定所述接入终端相对于本端在水平状态时的倾斜方向和倾斜角度；

第三确定子模块，用于基于所述倾斜方向和倾斜角度确定所述接入终端的直播姿势，所述直播姿势包括左横屏、右横屏、第一竖屏和第二竖屏中的至少一种，所述第一竖屏是指所述接入终端的顶端朝上时的竖屏状态，所述第二竖屏是指所述接入终端的顶端朝下时的竖屏状态；

第二调整子模块，用于基于所述直播姿势对所述第二直播画面的画面方向进行调整。

可选地，所述第二调整子模块用于执行以下方式中的至少一种：

根据本公开实施例的第三方面，提供了一种基于直播连麦的直播装置，所述直播装置包括：

处理器；

用于存储所述处理器可执行指令的存储器；

其中，所述处理器用于：

本公开的实施例提供的技术方案可以包括以下有益效果：本公开实施例中，在主播终端与接入终端进行直播连麦的过程中，除获取接入终端的第二直播画面之外，还可以获取接入终端的重力感应信息，并可以根据接入终端的重力感应信息对第二直播画面的画面方向进行调整，使得第二直播画面的画面方向保持端正。由于第二直播画面的画面方向在调整后可以保持端正，因此根据主播终端的第一直播画面和调整后的第二直播画面获取的合成直播画面也可以保持端正，从而解决了基于直播连麦进行直播的过程中主播终端所直播的合成直播画面无法维持端正的问题，优化了直播效果。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。

图1A是根据一示例性实施例示出的一种直播连麦的直播系统示意图；

图1B是根据一示例性实施例示出的一种第二直播画面的示意图；

图1C是根据一示例性实施例示出的一种合成直播画面的示意图；

图1D是根据一示例性实施例示出的一种基于直播连麦的直播方法的流程图；

图2是根据另一示例性实施例示出的一种基于直播连麦的直播方法的流程图；

图3A是根据又一示例性实施例示出的一种基于直播连麦的直播方法的流程图；

图3B是根据一示例性实施例示出的一种重力传感器检测原理示意图；

图3C是根据一示例性实施例示出的一种第二直播画面的调整示意图；

图3D是根据另一示例性实施例示出的一种第二直播画面的调整示意图；

图3E是根据又一示例性实施例示出的一种第二直播画面的调整示意图；

图3F是根据一示例性实施例示出的一种合成直播画面的合成示意图；

图4是根据又一示例性实施例示出的一种基于直播连麦的直播方法的流程图；

图5A是根据一示例性实施例示出的一种基于直播连麦的直播装置的框图；

图5B是根据另一示例性实施例示出的一种基于直播连麦的直播装置的框图；

图5C是根据一示例性实施例示出的一种第一调整模块520的结构示意图；

图5D是根据另一示例性实施例示出的一种第一调整模块520的结构示意图；

图6是根据一示例性实施例示出的一种基于直播连麦的直播装置600的硬件结构示意图；

图7是根据另一示例性实施例示出的一种基于直播连麦的直播装置700的硬件结构示意图。

具体实施方式

为使本公开的目的、技术方案和优点更加清楚，下面将结合附图对本公开实施方式作进一步地详细描述。

在对本公开实施例进行详细的解释说明之前，先对本公开实施例的应用场景予以介绍。本公开实施例提供的方法应用于直播连麦的直播场景中，具体可以应用于主播与某一观众进行直播连麦的场景中，或者应用于主播与其他直播间内的主播进行直播连麦的场景中等。比如，主播可以与某一观众进行直播连麦，从而与该观众进行互动；或者主播可以在玩游戏的过程中，通过与另一主播进行直播连麦向另一主播分享游戏画面，以便另一主播对该游戏画面进行解说等等。

图1A是根据一示例性实施例示出的一种直播连麦的直播系统示意图，参见图1A，该直播系统包括主播终端1、接入终端2和直播服务器3，接入终端2为与主播终端1进行直播连麦的直播终端。在基于直播连麦进行直播的过程中，接入终端2可以获取采集的第二直播画面，并将该第二直播画面发送给直播服务器3。而主播终端1则可以获取自身采集的第一直播画面，并从直播服务器3中获取接入终端2采集的第二直播画面；将该第一直播画面与该第二直播画面进行合成，得到合成直播画面；将该合成直播画面发送给直播服务器3，由该直播服务器3转发给观众终端，从而基于该合成直播画面进行直播。

其中，主播终端1获取的接入终端2的第二直播画面的显示方向通常维持不变，且通常为竖直显示方向。但是当接入终端2为移动终端时，该接入终端2将可能会在竖屏模式和横屏模式之间来回切换，导致产生的第二直播画面的画面方向发生变化。比如，如图1B的左图所示，当接入终端2为竖屏模式时，第二直播画面的画面方向将竖直朝上；如图1B的右图所示，当接入终端2由竖屏模式切换为左横屏模式时，若显示方向不变，则该第二直播画面的画面方向将水平朝右。相关技术中，当第二直播画面的画面方向发生变化时，主播终端1将仍按照竖直显示方向将第二直播画面与第一直播画面进行合成，此时得到的合成直播画面中的第二直播画面的画面方向将可能无法维持端正，即画面方向可能会朝左或朝右，甚至可能会倒置，从而影响直播效果。比如，参见图1C，直播的合成直播画面中的左图为第一直播画面，右图为第二直播画面，但是第一直播画面的画面方向是竖直朝上的，而第二直播画面的画面方向却是水平朝右的。

为了解决相关技术中存在的在基于直播连麦进行直播的过程中，主播终端所直播的合成直播画面无法维持端正的问题，本公开实施例提供了一种基于直播连麦的直播方法，通过该方法可以优化主播终端的合成算法，使得所直播的合成直播画面一直保持端正，从而优化直播效果。

图1D是根据一示例性实施例示出的一种基于直播连麦的直播方法的流程图，该方法应用于主播终端或直播服务器中，该主播终端可以为手机、平板电脑、计算机等终端。如图1所示，该方法包括以下步骤：

在步骤101中，获取主播终端采集的第一直播画面，并获取接入终端采集的第二直播画面和该接入终端的重力感应信息，该接入终端为与该主播终端进行直播连麦的直播终端，该接入终端的重力感应信息用于指示该接入终端在采集该第二直播画面时相对于本端在水平状态时的倾斜方向和倾斜角度。

在步骤102中，基于该接入终端的重力感应信息对该第二直播画面的画面方向进行调整，以将该第二直播画面的画面方向调整端正。

在步骤103中，根据该第一直播画面和调整后的第二直播画面获取合成直播画面，该合成直播画面用于进行直播。

本公开实施例中，在主播终端与接入终端进行直播连麦的过程中，除获取接入终端的第二直播画面之外，还可以获取该接入终端的重力感应信息，并可以根据接入终端的重力感应信息对该第二直播画面的画面方向进行调整，以将该第二直播画面的画面方向调整端正。由于该第二直播画面的画面方向在调整后可以保持端正，因此根据主播终端的第一直播画面和调整后的第二直播画面获取的合成直播画面也可以保持端正，从而解决了基于直播连麦进行直播的过程中主播终端所直播的合成直播画面无法维持端正的问题，优化了直播效果。

可选地，该方法还包括：

获取该主播终端的重力感应信息；

按照基于该接入终端的重力感应信息对该第二直播画面的画面方向进行调整的方式，基于该主播终端的重力感应信息对该第一直播画面的画面方向进行调整，以将该第一直播画面的画面方向调整端正；

该根据该第一直播画面和调整后的第二直播画面获取合成直播画面，包括：

将调整后的第一直播画面和调整后的第二直播画面进行合成，得到该合成直播画面。

可选地，该基于该接入终端的重力感应信息对该第二直播画面的画面方向进行调整，包括：

基于该接入终端的重力感应信息确定该接入终端相对于本端在水平状态时的倾斜方向和倾斜角度；

将该第二直播画面按照该倾斜方向翻转该倾斜角度。

基于该倾斜方向和倾斜角度确定该接入终端的直播姿势，该直播姿势包括左横屏、右横屏、第一竖屏和第二竖屏中的至少一种，该第一竖屏是指该接入终端的顶端朝上时的竖屏状态，该第二竖屏是指该接入终端的顶端朝下时的竖屏状态；

基于该直播姿势对该第二直播画面的画面方向进行调整。

可选地，该基于该直播姿势对该第二直播画面的画面方向进行调整，包括以下方式中的至少一种：

当基于该重力感应信息确定该接入终端的直播姿势为左横屏时，将该第二直播画面向左翻转90度；

当基于该重力感应信息确定该接入终端的直播姿势为右横屏时，将该第二直播画面向右翻转90度；

当基于该重力方向信息确定该接入终端的直播姿势为第二竖屏时，将该第二直播画面翻转180度。

上述所有可选技术方案，均可按照任意结合形成本公开的可选实施例，本公开实施例对此不再一一赘述。

图2是根据一示例性实施例示出的一种基于直播连麦的直播方法的流程图，该方法应用于接入终端中，该接入终端可以为手机、平板电脑等移动终端。如图2所示，该方法包括以下步骤：

在步骤201中，获取采集的第二直播画面和重力感应信息，该重力感应信息用于指示该接入终端在采集该第二直播画面时相对于本端在水平状态时的倾斜方向和倾斜角度。

在步骤202中，将该第二直播画面和该重力感应信息发送给直播服务器，由该直播服务器或者接收到该直播服务器所转发的该第二直播画面和该重力感应信息的主播终端，基于该重力感应信息对该第二直播画面的画面方向进行调整，以将该第二直播画面的画面方向调整端正，并根据该主播终端的第一直播画面和调整后的第二直播画面获取合成直播画面，该主播终端为与该接入终端进行直播连麦的直播终端。

本公开实施例中，接入终端在将采集的第二直播画面发送给直播服务器之外，还可以获取当前的重力感应信息，并将该重力感应信息发送给该直播服务器，以便该直播服务器或者主播终端基于该重力感应信息对该第二直播画面的画面方向进行调整，使得该第二直播画面的画面方向保持端正，之后再根据主播终端的第一直播画面和调整后的第二直播画面获取合成直播画面，如此可以保证主播终端所直播的合成直播画面一直维持端正，从而优化了直播效果。

可选地，该获取重力感应信息，包括：

通过安装的重力传感器获取该重力感应信息。

图3A是根据一示例性实施例示出的一种基于直播连麦的直播方法的流程图，该方法的交互主体为主播终端、接入终端和直播服务器。参见图3A，该方法包括以下步骤：

在步骤301中，主播终端接收接入终端发送的直播连麦请求，并基于该直播连麦请求建立与该接入终端的连麦会话连接，以与该接入终端进行直播连麦。

其中，该主播终端可以在基于该直播连麦请求接收到确认连麦指令时，建立与该接入终端的连麦会话连接，该连麦会话连接用于支持该主播终端与该接入终端之间的直播连麦。也即是，当主播终端建立了与该接入终端的连麦会话连接时，即可与该接入终端进行直播连麦。

其中，该接入终端可以为该主播终端的观众终端，也可以为其他主播终端，本公开实施例对此不做限定。为了便于说明，接下来将该主播终端的用户称为主播，并将该接入终端的用户称为直播连麦者。

其中，该直播连麦请求可以由该接入终端的直播连麦者通过指定操作触发，比如该直播连麦者可以通过点击主播所在直播间内的连线按钮触发。该确认连麦指令可以由该主播通过指定操作触发，比如该主播可以通过点击确认连接按钮触发，该确认连接按钮为该主播终端在接收到该接入终端发送的直播连麦请求时显示。

以该接入终端为观众终端为例，观众通过观众终端进入主播所在的直播间后，该观众终端可以在直播页面中显示连线按钮，当检测对该连线按钮的触发操作时，即可向该主播终端发送直播连麦请求。而主播终端可以接收多个观众终端的直播连麦请求，并在直播间的特定窗口中显示该多个观众终端登录的观众账号，主播可以基于该多个观众账号选择要连线的观众终端，并触发主播终端建立与选择的观众终端之间的连麦会话连接。

需要说明的是，本公开实施例仅是以主播终端通过接入终端发送的直播连麦请求与该接入终端进行直播连麦为例进行说明，而实际应用中，该主播终端也可以通过向接入终端发送直播连麦请求，从而与该接入终端进行直播连麦。比如，主播终端可以向选择的任一观众终端发送直播连麦请求，当观众终端接收到该直播连麦请求，并基于该直播连麦请求接收到确认连麦指令时，即可成功建立与该主播终端的连麦会话连接，从而与该主播终端进行直播连麦。

在步骤302中，在与主播终端进行直播连麦的过程中，该接入终端获取采集的第二直播画面和重力感应信息，并将该第二直播画面和该重力感应信息发送给直播服务器，该重力感应信息用于指示该接入终端在采集该第二直播画面时相对于本端在水平状态时的倾斜方向和倾斜角度。

其中，该第二直播画面是指该直播连麦者的直播画面，该接入终端可以通过安装的摄像头采集该第二直播画面。同时，该接入终端可以通过安装的重力传感器获取本端的重力感应信息，当然也可以通过安装的加速度传感器、陀螺仪等其他传感器获取本端的重力感应信息，本公开实施例对此不做限定。

其中，该接入终端的重力感应信息可以指示该接入终端的重力加速度方向，根据该重力加速度方向可以确定该接入终端相对于水平状态的倾斜方向和倾斜角度。该水平状态是指该接入终端未发生倾斜时的状态，比如该水平状态可以为该接入终端的顶端竖直朝上时的状态。

比如，实际应用中，该接入终端的重力感应信息通常为该接入终端的重力加速度在预设坐标轴上的分量，按照预设算法将该重力加速度在预设坐标轴上的分量进行转换，即可得到该接入终端相对于水平状态的倾斜方向和倾斜角度。其中，重力加速度在预设坐标轴上的分量用于指示重力加速度方向。

以两轴重力感应的重力传感器为例，假设以该接入终端的顶端竖直朝上时的状态作为该接入终端未发生倾斜的水平状态，则在获取该接入终端的重力感应信息时，即可以该接入终端的指定点为中心建立如图3B所示的平面直角坐标系，该平面直角坐标系以该接入终端顶端朝上的方向为y轴正方向，以水平向右的方向为x轴正方向。该重力传感器的重力感应信息为重力加速度矢量，且静止状态下矢量方向永远指向地心，矢量单位为1。该平面直角坐标系的x轴和y轴即为预设坐标轴。

当该接入终端保持如图3B所示的竖直方向时，该接入终端的重力加速度方向为y轴负方向，重力感应信息为(0，-1)，表示该接入终端的重力加速度在x轴的分量为0，在y轴上的分量为-1；当该接入终端从图3B的位置倒置时，该接入终端的重力加速度方向将为y轴正方向，重力感应信息为(0，1)，表示该接入终端的重力加速度在x轴的分量为0，在y轴上的分量为1；当该接入终端从图3B的位置向左翻转90度时，该接入终端的重力加速度方向将为x轴负方向，重力感应信息为(-1，0)，表示该接入终端的重力加速度在x轴的分量为-1，在y轴上的分量为0；当该接入终端从图3B的位置向右翻转90度时，该接入终端的重力加速度方向将为x轴正方向，重力感应信息为(1，0)，表示该接入终端的重力加速度在x轴的分量为1，在y轴上的分量为0；当该接入终端从图3B的位置倾斜45度时，该矢量单位1将会均匀分解到两个轴上，也即是，该接入终端的重力加速度将会被均匀分解到x轴和y轴上。

由此可知，该矢量的重力感应信息即为该接入终端的重力加速度在预设坐标轴上的分量。按照直角三角函数定量，对该重力加速度在预设坐标轴上的分量进行角度换算，即可得出重力加速度方向相对于y轴负方向的倾斜方向和倾斜角度。之后，即可将该重力加速度方向相对于y轴负方向的倾斜方向的反方向确定为该接入终端相对于本端在水平状态时的倾斜方向，并可以将该重力加速度方向相对于y轴负方向的倾斜角度确定为该接入终端相对于本端在水平状态时的倾斜角度。

实际应用中，将该第二直播画面和该重力感应信息发送给直播服务器可以包括以下两种实现方式：

第一种实现方式：对该第二直播画面进行编码，得到压缩码流；对该压缩码流和该重力感应信息进行封装，得到第一视频流；将该第一视频流发送给该直播服务器。

其中，除了对该压缩码流和该重力感应信息进行封装之外，该接入终端还可以将该接入终端的音频、结构化描述符(如字幕)等不同属性的信息与该压缩码流和该重力感应信息封装到一起，得到该第一视频流，本公开实施例对此不做限定。

通过将该第二直播画面的压缩码流和该重力感应信息封装到一起进行传输，能够避免重力感应信息在传输过程中的丢失和传输的不同步，提高传输的准确性。

第二种实现方式：对该第二直播画面进行编码，得到压缩码流；对该压缩码流进行封装，得到第二视频流；将该第二视频流和该重力感应信息一起发送给该直播服务器。

其中，除了对该压缩码流进行封装之外，该接入终端还可以将该接入终端的音频、结构化描述符(如字幕)等不同属性的信息与该压缩码流封装到一起，得到该第二视频流，本公开实施例对此不做限定。

其中，该接入终端可以按照直播系统的预设编码协议进行编码，并按照预设封装协议进行封装。也即是，该接入终端无需更改现有的封装协议，仅需将得到的视频流和该重力感应信息一起发送给该直播服务器即可，操作简便，适应性较高。

在步骤303中，该主播终端获取采集的第一直播画面，并从该直播服务器获取该接入终端采集的第二直播画面和该接入终端的重力感应信息。

其中，该第一直播画面为主播的直播画面，可以为直接通过摄像头采集得到的直播画面。另外由于当该主播终端为移动终端时，该主播终端也具有横竖屏模式自动切换功能，因此该第一直播画面也可以为通过获取的重力感应信息对摄像头采集的画面进行调整后得到的直播画面，本公开实施例对此不做限定。

实际应用中，从该直播服务器获取该接入终端的第二直播画面和该接入终端的重力感应信息的方式可以包括以下两种：

第一种实现方式，当接入终端向直播服务器发送的为上述第一视频流时，该主播终端可以从该直播服务器中获取该第一视频流；对该第一视频流进行解封装，得到该压缩码流和该接入终端的重力感应信息；对该压缩码流进行解码，得到该第二直播画面。

第二种实现方式，当接入终端向直播服务器发送的为上述第二视频流和重力感应信息时，该主播终端可以从该直播服务器中获取该第二视频流和该接入终端的重力感应信息；对该第二直播视频流进行解封装，得到该压缩码流；对该压缩码流进行解码，得到该第二直播画面。

在步骤304中，该主播终端基于该接入终端的重力感应信息对该第二直播画面的画面方向进行调整。

该主播终端可以基于该接入终端的重力感应信息对该第二直播画面的画面方向进行调整，以将该第二直播画面的画面方向调整端正。该第二直播画面的画面方向是指该第二直播画面的画面内容的整体朝向，将该第二直播画面的画面方向调整端正，也即是保证该第二直播画面的画面内容的整体朝向符合观看者的正视角度，而不会发生翻转或倒置，比如保证人或物体的朝向均竖直向上。

其中，基于该接入终端的重力感应信息对该第二直播画面的画面方向进行调整可以包括以下两种实现方式：

第一种实现方式：基于该接入终端的重力感应信息确定该接入终端相对于水平状态的倾斜方向和倾斜角度；将该第二直播画面按照该倾斜方向翻转该倾斜角度。

其中，基于该接入终端的重力感应信息确定该接入终端相对于水平状态的倾斜方向和倾斜角度的实现过程可以参考步骤302的相关描述，本公开实施例在此不再赘述。

比如，以该接入终端的顶端竖直朝上为水平状态为例，当基于该重力感应信息确定该接入终端相对于水平状态向左倾斜了30度时，由于视频流中每一帧图像的显示方向都是固定的，因此该主播终端获取的第二直播画面将仍为竖直显示方向，如图3C中的左图所示时。由图3C中的左图可知，该第二直播画面的画面方向向右倾斜了30度，为了使得该第二直播画面的画面方向能够保持端正，则可以将该第二直播画面向左倾斜30度，得到图3C中的右图。

在上述第一种实现方式中，由于可以按照接入终端的倾斜方向和倾斜角度对该第二直播画面的画面方向进行调整，因此相对于下述第二种实现方式来说调整精度较高。

第二种实现方式：基于该接入终端的重力感应信息确定该接入终端相对于本端在水平状态时的倾斜方向和倾斜角度；基于该倾斜方向和倾斜角度确定该接入终端的直播姿势，该直播姿势包括左横屏、右横屏、第一竖屏和第二竖屏中的至少一种，该第一竖屏是指该接入终端的顶端朝上时的竖屏状态，该第二竖屏是指该接入终端的顶端朝下时的竖屏状态；基于该直播姿势对该第二直播画面的画面方向进行调整。

实际应用中，可以预先设置倾斜方向和倾斜角度与直播姿势之间的对应关系，则在基于该重力感应信息确定该接入终端相对于本端在水平状态时的倾斜方向和倾斜角度之后，即可基于该对应关系，确定该倾斜方向和倾斜角度对应的直播姿势。

以该接入终端的顶端竖直朝上为水平状态为例，在一种可能的实现方式中，可以预先将该接入终端相对于本端在水平状态时向左或向右倾斜且倾斜角度在[0°，45°]区间范围内时对应的直播姿势设置为第一竖屏；将该接入终端相对于本端在水平状态时向右倾斜且倾斜角度在(45°，135°)区间范围内时对应的直播姿势设置为右横屏；将该接入终端相对于本端在水平状态时向左倾斜且倾斜角度在(45°，135°)区间范围内时对应的直播姿势设置为左横屏；将该接入终端相对于本端在水平状态时向左或向右倾斜且倾斜角度在[135°，180°]区间范围内时对应的直播姿势设置为第二竖屏。

则根据上述所设置的对应关系，若该接入终端相对于本端在水平状态时向左倾斜了15度，即可确定该接入终端的直播姿势为第一竖屏；若该接入终端相对于本端在水平状态时向左倾斜了55度，即可确定该接入终端的直播姿势为左横屏。

其中，基于该直播姿势对该第二直播画面的画面方向进行调整可以包括以下方式中的至少一种：

1)当基于该接入终端的重力感应信息确定该接入终端的直播姿势为左横屏时，将该第二直播画面向左翻转90度。

其中，左横屏是指该接入终端的顶端朝左时的横屏状态。若该接入终端的直播姿势为左横屏，表示该接入终端此时为横屏模式，但是由于视频流中每一帧图像的显示方向都是固定的，因此该主播终端获取的第二直播画面将仍为竖直显示方向，如图3D中的左图所示。由图3D中的左图可知，该第二直播画面的画面方向向右翻转了90度，为了使得该第二直播画面的画面方向能够保持端正，则可以将该第二直播画面向左翻转90度，得到图3D中的右图。

2)当基于该接入终端的重力感应信息确定该接入终端的直播姿势为右横屏时，将该第二直播画面向右翻转90度。

其中，右横屏是指该接入终端的顶端朝左时的横屏状态。而且方式2)与方式1)同理，此处不再举例说明。

3)当基于该接入终端的重力方向信息确定该接入终端的直播姿势为第二竖屏时，将该第二直播画面翻转180度。

其中，可以将该第二直播画面向左翻转180度，也可以将该第二直播画面向右翻转180度，本公开实施例对此不做限定。

若该接入终端的直播姿势为第二竖屏，表示该接入终端虽然为竖屏模式，但顶端却是朝下的，该主播终端获取的第二直播画面将如图3E中的左图所示。由图3E中的左图可知，该第二直播画面的画面方向出现了倒置，为了使得该第二直播画面的画面方向能够保持端正，则可以将该第二直播画面向左或向右翻转180度，得到图3E中的右图。

另外，当基于该接入终端的重力方向信息确定该接入终端的直播姿势为第一竖屏时，表示该第二直播画面的画面方向是端正的，未发生翻转和倒置，则此时无需对将该第二直播画面的画面方向进行调整。

由上述第二种实现方式可知，相对于上述第一种实现方式需要进行角度调整，第二种实现方式仅需进行方向调整，因此相对于上述第一种实现方式来说调整效率较高。

在步骤305中，该主播终端根据该第一直播画面和调整后的第二直播画面获取合成直播画面。

其中，该合成直播画面用于进行直播。该主播终端根据该第一直播画面和调整后的第二直播画面获取合成直播画面包括：将该第一直播画面和调整后的第二直播画面进行合成，得到该合成直播画面。

通过将第一直播画面和调整后的第二直播画面进行合成，得到合成直播画面，可以保证该主播终端所直播的画面一直是端正的，不会出现画面翻转或倒置，优化了直播效果，提高了用户体验。

其中，将该第一直播画面和调整后的第二直播画面进行合成的实现方式有多种，包括但不限于以下两种：

第一种实现方式，将该第一直播画面和调整后的第二直播画面进行拼接，得到该合成直播画面。例如，若图3F中的a图为第一直播画面，图3F中的b图为调整后的第二直播画面，则将a图和b图进行拼接后，可以得到图3F中的c图。

第二种实现方式，将调整后的第二直播画面按照预设比例缩小，得到缩小的直播画面，将该缩小的直播画面嵌入该第一直播画面，得到该合成直播画面。例如，将图3E中的b图缩小并嵌入图3E中的a图后，可以得到图3E中的d图，其中该d图中的e图即为缩小后的b图。

当然，对于接入终端来说，该接入终端也可以获取本端的第二直播画面和主播终端的第一直播画面，并对该第一直播画面和该第二直播画面进行合成，得到合成直播画面。在进行画面合成时，该接入终端可以将该第一直播画面和该第二直播画面进行拼接，得到该合成直播画面，也可以将该第一直播画面缩小后嵌入该第二直播画面，得到该合成直播画面，本公开实施例对此不做限定。

在另一种实现方式中，该主播终端还可以获取本端的重力感应信息，并按照基于该接入终端的重力感应信息对该第二直播画面的画面方向进行调整的方式，基于本端的重力感应信息对该第一直播画面的画面方向进行调整，以将该第一直播画面的画面方向调整端正。相应地，根据该第一直播画面和调整后的第二直播画面获取合成直播画面还包括：将调整后的第一直播画面和调整后的第二直播画面进行合成，得到该合成直播画面。

其中，基于本端的重力感应信息对该第一直播画面的画面方向进行调整的方式，与步骤304中主播终端基于该接入终端的重力感应信息对该第二直播画面的画面方向进行调整的方式同理，具体实现方式可以参考步骤304的相关描述，此处不再赘述。而将调整后的第一直播画面和调整后的第二直播画面进行合成的具体实现方式，与上述将第一直播画面和调整后的第二直播画面进行合成的方式同理，具体实现方式可以参考相关描述，此处也不再赘述。

在步骤306中，该主播终端基于该合成直播画面进行直播。

其中，基于该合成直播画面进行直播的过程可以包括：将该合成直播画面进行编码，得到压缩码流；对该压缩码流进行封装，得到第三视频流；将该第三视频流发送给该直播服务器，由该直播服务器将该第三视频流转发给该主播终端的观众终端。

另外，除了对该压缩码流进行封装之外，该主播终端还可以将该主播终端的音频、接入终端的音频、结构化描述符(如字幕)等不同属性的信息与该压缩码流封装到一起，得到该第三视频流，本公开实施例对此不做限定。

本公开实施例中，主播终端在获取接入终端的第二直播画面之外，还可以获取该接入终端的重力感应信息，并可以根据该接入终端的重力感应信息对该第二直播画面的画面方向进行调整，以将该第二直播画面的画面方向调整端正，之后再根据本端的第一直播画面和调整后的第二直播画面获取合成直播画面，基于该合成直播画面进行直播。由于该第二直播画面的画面方向在调整后可以保持端正，因此根据调整后的第二直播画面和第一直播画面获取得到的合成直播画面也可以保持端正，从而解决了基于直播连麦进行直播的过程中主播终端所直播的合成直播画面无法维持端正的问题，优化了直播效果。

需要说明的是，图3A实施例仅是以由主播终端获取接入终端的第二直播画面和重力感应信息，并基于该接入终端的重力感应信息对第二直播画面进行调整，再根据调整后的第二直播画面和本端的第一直播画面获取合成直播画面为例进行说明，而在另一实施例中，也可以由直播服务器分别获取主播终端的第一直播画面以及接入终端的第二直播画面和重力感应信息，并由该直播服务器直接基于该接入终端的重力感应信息对该第二直播画面进行调整，再根据调整后的第二直播画面和该主播终端的第一直播画面获取合成直播画面。图4是根据一示例性实施例示出的另一种基于直播连麦的直播方法的流程图，该方法的交互主体为主播终端、接入终端和直播服务器。参见图4，该方法包括以下步骤：

在步骤401中，主播终端在与接入终端进行直播连麦的过程中，获取采集的第一直播画面，并将该第一直播画面发送给直播服务器。

其中，主播终端获取采集的第一直播画面的具体实现过程可以参考上述步骤303的相关描述，本公开实施例在此不再赘述。

在步骤402中，该接入终端获取采集的第二直播画面和重力感应信息，并将该第二直播画面和重力感应信息发送给该直播服务器，该重力感应信息用于指示该接入终端在采集该第二直播画面时相对于本端在水平状态时的倾斜方向和倾斜角度。

其中，接入终端获取采集的第二直播画面和重力感应信息的具体实现过程可以参考上述步骤302的相关描述，本公开实施例在此不再赘述。

在步骤403中，该直播服务器接收该主播终端发送的第一直播画面，并接收该接入终端发送的第二直播画面和该接入终端的重力感应信息。

在步骤404中，该直播服务器基于该接入终端的重力感应信息对该第二直播画面的画面方向进行调整，以将该第二直播画面的画面方向调整端正。

其中，该直播服务器基于接入终端的重力感应信息对该第二直播画面的画面方向进行调整的方式，与上述步骤304中主播终端基于接入终端的重力感应信息对第二直播画面的画面方向进行调整的方式相同，具体实现过程可以参考步骤304的相关描述，本公开实施例在此不再赘述。

在步骤405中，该直播服务器根据该第一直播画面和调整后的第二直播画面获取合成直播画面，该合成直播画面用于进行直播。

其中，该直播服务器根据该第一直播画面和调整后的第二直播画面获取合成直播画面包括：将该第一直播画面和调整后的第二直播画面进行合成，得到该合成直播画面。

实际应用中，将该第一直播画面和调整后的第二直播画面进行合成的实现方式有多种，包括但不限于以下三种：

第一种实现方式，将该第一直播画面和调整后的第二直播画面进行拼接，得到该合成直播画面。

第二种实现方式，将调整后的第二直播画面按照预设比例缩小，得到缩小的直播画面，将该缩小的直播画面嵌入该第一直播画面，得到该合成直播画面。

第三种实现方式，将该第一直播画面按照预设比例缩小，得到缩小的直播画面，将该缩小的直播画面嵌入该调整后的第二直播画面，得到该合成直播画面。

在另一实施例中，该直播服务器还可以获取主播终端的重力感应信息；按照基于该接入终端的重力感应信息对该第二直播画面的画面方向进行调整的方式，基于该主播终端的重力感应信息对该第一直播画面的画面方向进行调整，以将该第一直播画面的画面方向调整端正。相应地，所述根据该第一直播画面和调整后的第二直播画面获取合成直播画面包括：将调整后的第一直播画面和调整后的第二直播画面进行合成，得到该合成直播画面。

比如，当该主播终端也为移动终端时，为了保证该主播终端的第一直播画面的画面方向也是端正的，则可以令该主播终端在获取第一直播画面的同时，还可以获取本端的重力感应信息，并将本端的重力感应信息与该第一直播画面一起发送给主播服务器。而该直播服务器即能够分别获取到主播终端的第一直播画面和重力感应信息，以及接入终端的第二直播画面和重力感应信息，之后分别基于主播终端的重力感应信息对该第一直播画面的画面方向进行调整，并基于接入终端的重力感应信息对该接入终端的画面方向进行调整，将调整后的第一直播画面和调整后的第二直播画面进行合成，得到该合成直播画面。

其中，基于主播终端的重力感应信息对该第一直播画面的画面方向进行调整的方式，与基于接入终端的重力感应信息对该接入终端的画面方向进行调整的方式同理，具体实现过程可以参数步骤304的相关描述，此处不再赘述。而将调整后的第一直播画面和调整后的第二直播画面进行合成的具体实现方式，也与上述将第一直播画面和调整后的第二直播画面进行合成的方式同理，具体实现方式可以参考相关描述，此处也不再赘述。

在步骤406中，该直播服务器将该合成直播画面发送给该主播终端，以便该主播终端基于该合成直播画面进行直播。

除将该合成直播画面发送给该主播终端之外，该直播服务器还可以将该合成直播画面发送给观众终端和接入终端，以便该主播的观众和该直播连麦者也可以基于播放的合成直播画面观看到该主播与该直播连麦者的互动。

进一步地，为了提高主播和直播连麦者的观看效果，对于发送给主播终端的合成直播画面，可以采用步骤405中的第一种实现方式或第二种实现方式进行合成；对于发送给接入终端的合成直播画面，可以采用步骤405中的第一种实现方式或第三种实现方式进行合成；而对于发送给观众终端的合成直播画面，则可以采用步骤405中的任一种实现方式进行合成。

本公开实施例中，直播服务器除获取接入终端的第二直播画面之外，还可以获取该接入终端的重力感应信息，并可以根据该接入终端的重力感应信息对该第二直播画面的画面方向进行调整，以将该第二直播画面的画面方向调整端正，之后再根据主播终端的第一直播画面和调整后的第二直播画面获取合成直播画面，将该合成直播画面发送给该主播终端，以便该主播终端基于该合成直播画面进行直播。由于该第二直播画面的画面方向在调整后可以保持端正，因此根据调整后的第二直播画面和主播终端的第一直播画面获取得到的合成直播画面也可以保持端正，从而解决了基于直播连麦进行直播的过程中主播终端所直播的合成直播画面无法维持端正的问题，优化了直播效果。

图5A是根据一示例性实施例示出的一种基于直播连麦的直播装置的框图，该直播装置可以为主播终端或直播服务器，该主播终端可以为手机、平板电脑、计算机等终端。参见图5A，该直播装置包括：

第一获取模块510，用于获取主播终端采集的第一直播画面，并获取接入终端采集的第二直播画面和该接入终端的重力感应信息，该接入终端为与该主播终端进行直播连麦的直播终端，该接入终端的重力感应信息用于指示该接入终端在采集该第二直播画面时相对于本端在水平状态时的倾斜方向和倾斜角度；

第一调整模块520，用于基于该接入终端的重力感应信息对该第二直播画面的画面方向进行调整，以将所述第二直播画面的画面方向调整端正；

第二获取模块530，用于根据该第一直播画面和调整后的第二直播画面获取合成直播画面，该合成直播画面用于进行直播。

可选地，参见图5B，所述装置还包括：

第三获取模块540，用于获取该主播终端的重力感应信息；

第二调整模块550，用于按照基于该接入终端的重力感应信息对该第二直播画面的画面方向进行调整的方式，基于该主播终端的重力感应信息对该第一直播画面的画面方向进行调整，以将该第一直播画面的画面方向调整端正；

该第二获取模块530，用于将调整后的第一直播画面和调整后的第二直播画面进行合成，得到该合成直播画面。

可选地，参见图5C，该第一调整模块520包括：

第一确定子模块521，用于基于该接入终端的重力感应信息确定该接入终端相对于本端在水平状态时的倾斜方向和倾斜角度；

第一调整子模块522，用于将该第二直播画面按照该倾斜方向翻转该倾斜角度。

可选地，参见图5D，该第一调整模块520包括：

第二确定子模块523，用于基于该接入终端的重力感应信息确定该接入终端相对于本端在水平状态时的倾斜方向和倾斜角度；

第三确定子模块524，用于基于该倾斜方向和倾斜角度确定该接入终端的直播姿势，该直播姿势包括左横屏、右横屏、第一竖屏和第二竖屏中的至少一种，该第一竖屏是指该接入终端的顶端朝上时的竖屏状态，该第二竖屏是指该接入终端的顶端朝下时的竖屏状态；

第二调整子模块524，用于基于该直播姿势对该第二直播画面的画面方向进行调整。

可选地，该第二调整子模块524用于执行以下方式中的至少一种：

当基于该接入终端的重力感应信息确定该接入终端的直播姿势为左横屏时，将该第二直播画面向左翻转90度；

当基于该接入终端的重力感应信息确定该接入终端的直播姿势为右横屏时，将该第二直播画面向右翻转90度；

当基于该接入终端的重力方向信息确定该接入终端的直播姿势为第二竖屏时，将该第二直播画面翻转180度。

本公开实施例中，除获取接入终端的第二直播画面之外，还可以获取该接入终端的重力感应信息，并可以根据该接入终端的重力感应信息对该第二直播画面的画面方向进行调整，使得该第二直播画面的画面方向保持端正。由于该第二直播画面的画面方向在调整后可以保持端正，因此根据调整后的第二直播画面和主播终端的第一直播画面获取得到的合成直播画面也可以保持端正，从而解决了基于直播连麦进行直播的过程中主播终端所直播的合成直播画面无法维持端正的问题，优化了直播效果。

图6是根据一示例性实施例示出的一种基于直播连麦的直播装置600的硬件结构示意图。其中，装置600可以被提供为一主播终端或者接入终端。例如，装置600可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。

参照图6，装置600可以包括以下一个或多个组件：处理组件602，存储器604，电源组件606，多媒体组件608，音频组件610，输入/输出(I/O)的接口612，传感器组件614，以及通信组件616。

处理组件602通常控制装置600的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件602可以包括一个或多个处理器620来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件602可以包括一个或多个模块，便于处理组件602和其他组件之间的交互。例如，处理组件602可以包括多媒体模块，以方便多媒体组件608和处理组件602之间的交互。

存储器604被配置为存储各种类型的数据以支持在装置600的操作。这些数据的示例包括用于在装置600上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器604可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。

电源组件606为装置600的各种组件提供电源。电源组件606可以包括电源管理系统，一个或多个电源，及其他与为装置600生成、管理和分配电源相关联的组件。

多媒体组件608包括在所述装置600和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件608包括一个前置摄像头和/或后置摄像头。当装置600处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。

音频组件610被配置为输出和/或输入音频信号。例如，音频组件610包括一个麦克风(MIC)，当装置600处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器604或经由通信组件616发送。在一些实施例中，音频组件610还包括一个扬声器，用于输出音频信号。

I/O接口612为处理组件602和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。

传感器组件614包括一个或多个传感器，用于为装置600提供各个方面的状态评估。例如，传感器组件614可以检测到装置600的打开/关闭状态，组件的相对定位，例如所述组件为装置600的显示器和小键盘，传感器组件614还可以检测装置600或装置600一个组件的位置改变，用户与装置600接触的存在或不存在，装置600方位或加速/减速和装置600的温度变化。传感器组件614可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件614还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件614还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。

通信组件616被配置为便于装置600和其他设备之间有线或无线方式的通信。装置600可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件616经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件616还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。

在示例性实施例中，装置600可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。

一种非临时性计算机可读存储介质，当所述存储介质中的指令由装置600的处理器执行时，使得该装置600能够执行上述图1D、图2、图3A或图4实施例所述的方法。

图7是根据一示例性实施例示出的一种基于直播连麦的直播装置700的硬件结构示意图。例如，装置700可以被提供为一直播服务器。参照图7，装置700包括处理组件722，其进一步包括一个或多个处理器，以及由存储器732所代表的存储器资源，用于存储可由处理组件722的执行的指令，例如应用程序。存储器732中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外，处理组件722被配置为执行指令，以执行上述方法基于直播连麦的直播方法。

装置700还可以包括一个电源组件726被配置为执行装置700的电源管理，一个有线或无线网络接口750被配置为将装置700连接到网络，和一个输入输出(I/O)接口758。装置700可以操作基于存储在存储器732的操作系统，例如Windows ServerTM，Mac OS XTM，UnixTM,LinuxTM，FreeBSDTM或类似。

在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，当所述存储介质中的指令由装置700的处理器执行时，使得装置700能够执行使得该装置700能够执行上述图1D、图3A或图4实施例所述的方法。

本领域技术人员在考虑说明书及实践这里公开的方案后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由上面的权利要求指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims

1.一种基于直播连麦的直播方法，其特征在于，应用于主播终端中，所述方法包括：

接收接入终端发送的直播连麦请求，并基于所述直播连麦请求建立与所述接入终端的连麦会话连接，以与所述接入终端进行直播连麦；

获取主播终端采集的第一直播画面，所述第一直播画面为通过所述主播终端的重力感应信息对摄像头采集的画面进行调整后得到的直播画面；

获取所述接入终端发送的第一视频流，所述第一视频流为所述接入终端将采集的第二直播画面进行编码，得到压缩码流，并对所述压缩码流和所述接入终端的重力感应信息进行封装得到的，所述接入终端的重力感应信息为所述接入终端的重力加速度在预设坐标轴上的分量；

对所述第一视频流进行解封装，得到所述压缩码流和所述接入终端的重力感应信息，对所述压缩码流进行解码，得到所述第二直播画面；

按照预设算法将所述重力加速度在所述预设坐标轴上的分量进行转换，得到所述接入终端相对于本端在水平状态的倾斜方向和倾斜角度，所述水平状态为所述接入终端的顶端竖直朝上时的状态；

基于预先设置的倾斜方向和倾斜角度与直播姿势之间的对应关系，确定所述接入终端的倾斜方向和倾斜角度对应的直播姿势，所述对应关系中的倾斜方向和倾斜角度包括向左倾斜[0°，180°]和向右倾斜[0°，180°]；

基于所述直播姿势对所述第二直播画面的画面方向进行调整，以将所述第二直播画面的画面方向调整端正；

将调整后的第二直播画面按照预设比例缩小，得到缩小的直播画面，将所述缩小的直播画面嵌入所述第一直播画面中，得到所述主播终端上显示的合成直播画面，所述合成直播画面用于进行直播，所述接入终端用于将所述第一直播画面缩小后嵌入所述调整后的第二直播画面，得到所述接入终端上显示的合成直播画面；

基于所述主播终端上显示的合成直播画面进行直播。

2.如权利要求1所述的方法，其特征在于，所述方法还包括：

获取所述主播终端的重力感应信息；

所述得到所述主播终端上显示的合成直播画面，包括：

3.如权利要求1或2所述的方法，其特征在于，所述直播姿势包括左横屏、右横屏、第一竖屏和第二竖屏中的至少一种，所述第一竖屏是指所述接入终端的顶端朝上时的竖屏状态，所述第二竖屏是指所述接入终端的顶端朝下时的竖屏状态。

4.如权利要求1所述的方法，其特征在于，所述基于所述直播姿势对所述第二直播画面的画面方向进行调整，包括以下方式中的至少一种：

5.一种基于直播连麦的直播装置，其特征在于，应用于主播终端中，所述直播装置包括：

第一获取模块，用于获取主播终端采集的第一直播画面，所述第一直播画面为通过所述主播终端的重力感应信息对摄像头采集的画面进行调整后得到的直播画面；并获取接入终端发送的第一视频流，所述第一视频流为所述接入终端将采集的第二直播画面进行编码，得到压缩码流，并对所述压缩码流和所述接入终端的重力感应信息进行封装得到的，所述接入终端的重力感应信息为所述接入终端的重力加速度在预设坐标轴上的分量；

所述第一获取模块，还用于对所述第一视频流进行解封装，得到所述压缩码流和所述接入终端的重力感应信息，对所述压缩码流进行解码，得到所述第二直播画面；按照预设算法将所述重力加速度在所述预设坐标轴上的分量进行转换，得到所述接入终端相对于本端在水平状态的倾斜方向和倾斜角度，所述水平状态为所述接入终端的顶端竖直朝上时的状态；

第一调整模块，包括第二确定子模块、第三确定子模块和第二调整子模块，所述第二确定子模块用于基于所述接入终端的重力感应信息确定所述接入终端相对于本端在水平状态时的倾斜方向和倾斜角度；所述第三确定子模块用于基于预先设置的倾斜方向和倾斜角度与直播姿势之间的对应关系，确定所述接入终端的倾斜方向和倾斜角度对应的直播姿势，所述对应关系中的倾斜方向和倾斜角度包括向左倾斜[0°，180°]和向右倾斜[0°，180°]；所述第二调整子模块用于基于所述直播姿势对所述第二直播画面的画面方向进行调整，以将所述第二直播画面的画面方向调整端正；

第二获取模块，用于将调整后的第二直播画面按照预设比例缩小，得到缩小的直播画面，将所述缩小的直播画面嵌入所述第一直播画面中，得到所述主播终端上显示的合成直播画面，所述合成直播画面用于进行直播，所述接入终端用于将所述第一直播画面缩小后嵌入所述调整后的第二直播画面，得到所述接入终端上显示的合成直播画面；

所述直播装置还用于接收所述接入终端发送的直播连麦请求，并基于所述直播连麦请求建立与所述接入终端的连麦会话连接，以与所述接入终端进行直播连麦；

所述直播装置还用于基于所述主播终端上显示的合成直播画面进行直播。

6.如权利要求5所述的装置，其特征在于，所述装置还包括：

第三获取模块，用于获取所述主播终端的重力感应信息；

7.如权利要求5或6所述的直播装置，其特征在于，所述直播姿势包括左横屏、右横屏、第一竖屏和第二竖屏中的至少一种，所述第一竖屏是指所述接入终端的顶端朝上时的竖屏状态，所述第二竖屏是指所述接入终端的顶端朝下时的竖屏状态。

8.如权利要求5所述的直播装置，其特征在于，所述第二调整子模块用于执行以下方式中的至少一种：

9.一种基于直播连麦的直播装置，其特征在于，应用于主播终端中，所述直播装置包括：

处理器；

用于存储所述处理器可执行指令的存储器；

其中，所述处理器用于：

获取主播终端采集的第一直播画面，

所述第一直播画面为通过所述主播终端的重力感应信息对摄像头采集的画面进行调整后得到的直播画面；

基于所述主播终端上显示的合成直播画面进行直播。

10.一种计算机可读存储介质，所述计算机可读存储介质上存储有指令，其特征在于，所述指令被处理器执行时实现权利要求1-4任一项所述的方法的步骤。