CN116264598A - 一种多屏协同的通话方法、系统、终端及存储介质 - Google Patents

Abstract

本申请实施例涉及终端技术领域，提供一种多屏协同的通话方法、系统、终端及存储介质，在第一终端与第二终端多屏协同时，如果用户操作第二终端显示的第一终端界面接听来电，则可以将通话声音从第一终端切换到第二终端，即，通过第二终端播放通话另一方的声音，同时，第二终端采集用户的声音通过第一终端发给通话对端设备，使得用户通过第二终端与通话另一方通话。此时，如果用户开启录音功能，则录音文件包括通话对端设备发送的通话另一方的声音和第二终端采集的用户的声音。

Description

一种多屏协同的通话方法、系统、终端及存储介质

本申请是分案申请，母案申请号：202111519288X，母案名称：一种多屏协同的通话方法、系统、终端及存储介质，母案申请日：2021年12月14日。

技术领域

本申请实施例涉及终端领域，具体而言，涉及一种多屏协同的通话方法、系统、终端及存储介质。

背景技术

随着电子技术和移动互联网的发展，一个用户或家庭中会同时拥有多个终端，例如，手机、笔记本电脑、平板电脑、智能家居设备等。现有技术中，多个终端之间可相互配合实现跨设备的多屏协同，从而给用户提供连续的服务体验。

现有技术中，多个终端之间多屏协同时，只有装有SIM卡的终端才能用来打电话，例如，手机和平板电脑多屏协同时，如果SIM卡装在手机中，那么用户只能用手机打电话，用平板电脑无法听到通话另一方的声音。

发明内容

本申请实施例的目的在于提供一种多屏协同的通话方法、系统、终端及存储介质，用以解决如何在多屏协同状态下进行运营商通话时，如何将通话声音从手机切换到平板/电脑的问题。

第一方面，本申请实施例提供一种多屏协同的通话方法，所述方法包括：在第一终端与第二终端连接且所述第二终端显示第一终端界面的情况下，所述第一终端接收通话对端设备的来电；响应于用户在所述第二终端中对所述第一终端界面的接听来电操作，所述第一终端接收通话对端设备发送的通话下行数据并发送至所述第二终端，所述第二终端播放所述通话下行数据；所述第二终端采集第一通话上行数据，并通过所述第一终端将所述第一通话上行数据发送至所述通话对端设备；响应于用户的开启录音操作，所述第一终端获得录音数据，其中，所述录音数据包括所述通话下行数据和所述第一通话上行数据。

本申请实施例提供的多屏协同的通话方法，在第一终端与第二终端多屏协同时，如果用户操作第二终端显示的第一终端界面接听来电，则可以将通话声音从第一终端切换到第二终端，即，通过第二终端播放通话另一方的声音，同时，第二终端采集用户的声音通过第一终端发给通话对端设备，使得用户通过第二终端与通话另一方通话。此时，如果用户开启录音功能，则录音文件包括通话对端设备发送的通话另一方的声音和第二终端采集的用户的声音。

可选地，所述方法还包括：在第一终端与第二终端连接且所述第二终端显示第一终端界面的情况下，响应于用户在所述第二终端中对所述第一终端界面的拨打电话操作，所述第一终端呼叫所述通话对端设备；在所述通话对端设备接通后，所述第一终端接收通话对端设备发送的通话下行数据并发送至所述第二终端，所述第二终端播放所述通话下行数据；所述第二终端采集第一通话上行数据，并通过所述第一终端将所述第一通话上行数据发送至所述通话对端设备。

本申请实施例中，在第一终端与第二终端多屏协同时，如果用户操作第二终端显示的第一终端界面拨打电话，则可以将通话声音从第一终端切换到第二终端，使得用户通过第二终端与通话另一方通话。

可选地，所述方法还包括：在所述第一终端与所述通话对端设备进行通话的情况下，所述第一终端显示弹框，其中，所述弹框用于提示用户将所述第一终端和所述第二终端多屏协同；响应于用户对所述弹框中连接图标的操作，所述第一终端与所述第二终端连接且所述第二终端显示第一终端界面，所述第一终端接收通话对端设备发送的通话下行数据并发送至所述第二终端，所述第二终端播放所述通话下行数据；所述第二终端采集第一通话上行数据，并通过所述第一终端将所述第一通话上行数据发送至所述通话对端设备。

本申请实施例中，在用户通过第一终端与通话另一方通话时，如果用户连接第一终端和第二终端，开启多屏协同，则可以将通话声音从第一终端切换到第二终端，使得用户通过第二终端与通话另一方通话。

可选地，所述方法还包括：在所述第一终端与所述通话对端设备进行通话、以及所述第一终端与所述第二终端连接且所述第二终端显示第一终端界面的情况下，所述第一终端显示第一通知面板；响应于用户在所述第一终端中对所述第一通知面板中音视频切换图标的操作，所述第一终端接收通话对端设备发送的通话下行数据并发送至所述第二终端，所述第二终端播放所述通话下行数据；所述第二终端采集第一通话上行数据，并通过所述第一终端将所述第一通话上行数据发送至所述通话对端设备。

本申请实施例中，在用户通过第一终端与通话另一方通话且第一终端与第二终端多屏协同时，如果用户操作第一终端进行音视频切换，则可以将通话声音从第一终端切换到第二终端，使得用户通过第二终端与通话另一方通话。

可选地，所述方法还包括：在所述第一终端与所述通话对端设备进行通话、以及所述第一终端与所述第二终端连接且所述第二终端显示第一终端界面的情况下，所述第二终端显示第一通知面板；响应于用户在所述第二终端中对所述第一通知面板中音视频切换图标的操作，所述第一终端接收通话对端设备发送的通话下行数据并发送至所述第二终端，所述第二终端播放所述通话下行数据；所述第二终端采集第一通话上行数据，并通过所述第一终端将所述第一通话上行数据发送至所述通话对端设备。

本申请实施例中，在用户通过第一终端与通话另一方通话且第一终端与第二终端多屏协同时，如果用户操作第二终端进行音视频切换，则可以将通话声音从第一终端切换到第二终端，使得用户通过第二终端与通话另一方通话。

可选地，所述第一终端包括：通话应用程序、协同模块、虚拟通话硬件管理模块、传输模块、第一PCM设备、第二PCM设备、音频处理器和音频设备；所述第二终端包括：传输模块和音频设备；

所述第一终端接收通话对端设备发送的通话下行数据并发送至所述第二终端，所述第二终端播放所述通话下行数据的步骤，包括：所述通话应用程序响应于用户的操作，向所述协同模块发送开启虚拟通话指令；所述协同模块将所述开启虚拟通话指令发送至所述虚拟通话硬件管理模块；响应于接收所述开启虚拟通话指令，所述虚拟通话硬件管理模块禁用所述第一终端的音频设备、打开所述第一PCM设备并禁止所述第一PCM设备获取上行数据；所述音频处理器接收所述通话对端设备发送的所述通话下行数据；所述第一PCM设备从所述音频处理器获取所述通话下行数据；所述虚拟通话硬件管理模块从所述第一PCM设备读取所述通话下行数据，并将所述通话下行数据发送至所述第一终端的传输模块；所述第一终端的传输模块将所述通话下行数据发送至所述第二终端的传输模块，所述第二终端的音频设备播放所述通话下行数据；

所述第二终端采集第一通话上行数据，并通过所述第一终端将所述第一通话上行数据发送至所述通话对端设备的步骤，包括：所述第二终端的音频设备采集所述第一通话上行数据，所述第二终端的传输模块将所述第一通话上行数据发送至所述第一终端的传输模块；所述第一终端的传输模块将所述第一通话上行数据发送至所述虚拟通话硬件管理模块；所述虚拟通话硬件管理模块将所述第一通话上行数据写入所述第二PCM设备；所述音频处理器从所述第二PCM设备中读取所述第一通话上行数据并发送至所述通话对端设备。

本申请实施例中，通过在第一终端增加协同模块、虚拟通话硬件管理模块和传输模块，在第二终端增加传输模块，实现将通话声音从第一终端切换到第二终端，使得用户通过第二终端与通话另一方通话。

可选地，所述第一终端还包括：音频服务类、音频硬件管理模块和虚拟通话缓存区；所述响应于用户的开启录音操作，所述第一终端获得录音数据的步骤，包括：所述通话应用程序响应于所述开启录音操作，向所述音频服务类发送开启录音指令；所述音频服务类将所述开启录音指令发送至所述音频硬件管理模块；响应于接收所述开启录音指令，所述音频硬件管理模块从所述虚拟通话缓存区获取所述录音数据，其中，所述录音数据是所述虚拟通话硬件管理模块将所述通话下行数据和所述第一通话上行数据进行混音后存储的。

本申请实施例中，通过虚拟通话硬件管理模块将通话另一方的声音和第二终端采集的用户的声音进行混音后存储至虚拟通话缓存区，音频硬件管理模块从虚拟通话缓存区中读取通话双方的声音，从而实现在用户通过第二终端与通话另一方通话时，第一终端能够将通话双方的声音进行录音。

可选地，所述方法还包括：在第一终端与第二终端连接且所述第二终端显示第一终端界面、以及用户通过所述第二终端与所述通话对端设备进行通话的情况下，响应于用户在所述第二终端中对所述第一终端界面的关闭操作，所述第一终端播放所述通话下行数据，并采集第二通话上行数据发送至所述通话对端设备；所述第一终端获得录音数据，其中，所述录音数据包括所述通话下行数据和所述第二通话上行数据。

本申请实施例中，在用户通过第二终端与通话另一方通话且第一终端与第二终端多屏协同时，如果用户操作第二终端断开与第一终端的连接，则可以将通话声音从第二终端切换回第一终端，使得用户通过第一终端与通话另一方通话。

可选地，所述方法还包括：在第一终端与第二终端连接且所述第二终端显示第一终端界面、以及用户通过所述第二终端与所述通话对端设备进行通话的情况下，所述第一终端显示第二通知面板；响应于用户在所述第一终端中对所述第二通知面板中断开图标的操作，所述第一终端播放所述通话下行数据，并采集第二通话上行数据发送至所述通话对端设备。

本申请实施例中，在用户通过第二终端与通话另一方通话且第一终端与第二终端多屏协同时，如果用户操作第一终端断开与第二终端的连接，则可以将通话声音从第二终端切换回第一终端，使得用户通过第一终端与通话另一方通话。

可选地，所述方法还包括：在第一终端与第二终端连接且所述第二终端显示第一终端界面、以及用户通过所述第二终端与所述通话对端设备进行通话的情况下，所述第一终端显示第二通知面板；响应于用户在所述第一终端中对所述第二通知面板中音视频切换图标的操作，所述第一终端播放所述通话下行数据，并采集第二通话上行数据发送至所述通话对端设备。

本申请实施例中，在用户通过第二终端与通话另一方通话且第一终端与第二终端多屏协同时，如果用户操作第一终端进行音视频切换，则可以将通话声音从第二终端切换回第一终端，使得用户通过第一终端与通话另一方通话。

可选地，所述方法还包括：在第一终端与第二终端连接且所述第二终端显示第一终端界面、以及用户通过所述第二终端与所述通话对端设备进行通话的情况下，所述第二终端显示第二通知面板；响应于用户在所述第二终端中对所述第二通知面板中音视频切换图标的操作，所述第一终端播放所述通话下行数据，并采集第二通话上行数据发送至所述通话对端设备。

本申请实施例中，在用户通过第二终端与通话另一方通话且第一终端与第二终端多屏协同时，如果用户操作第二终端进行音视频切换，则可以将通话声音从第二终端切换回第一终端，使得用户通过第一终端与通话另一方通话。

可选地，所述第一终端包括：通话应用程序、协同模块、虚拟通话硬件管理模块、传输模块、第一PCM设备、音频处理器和音频设备；

所述第一终端播放所述通话下行数据，并采集第二通话上行数据发送至所述通话对端设备的步骤，包括：所述通话应用程序响应于用户的操作，向所述协同模块发送关闭虚拟通话指令；所述协同模块将所述关闭虚拟通话指令发送至所述虚拟通话硬件管理模块；响应于接收所述关闭虚拟通话指令，所述虚拟通话硬件管理模块解除所述第一终端的音频设备的禁用，并取消禁止所述第一PCM设备获取上行数据；所述音频处理器接收所述通话下行数据并通过所述第一终端的音频设备进行播放，以及，获取所述第一终端的音频设备采集的所述第二通话上行数据并发送至所述通话对端设备。

本申请实施例中，通过第一终端中增加的协同模块和虚拟通话硬件管理模块，实现将通话声音从第二终端切换回第一终端，使得用户通过第一终端与通话另一方通话。可选地，所述第一终端还包括音频硬件管理模块；所述第一终端获得录音数据的步骤，包括：所述音频硬件管理模块从所述第一PCM设备读取所述录音数据，其中，所述录音数据是所述第一PCM设备从所述音频处理器获取所述通话下行数据和所述第二通话上行数据并进行混音得到的。

本申请实施例中，将通话声音从第二终端切换回第一终端后，通过第一PCM设备从音频处理器中获取通话另一方的声音和第一终端采集的用户的声音，音频硬件管理模块从第一PCM设备中读取通话双方的声音，实现通话录音。

可选地，所述第一终端包括：通话应用程序、音频服务类、音频硬件管理模块、虚拟通话缓存区、虚拟通话硬件管理模块、第一PCM设备和音频处理器；

所述响应于用户的开启录音操作，所述第一终端获得录音数据的步骤，包括：所述通话应用程序响应于所述开启录音操作，向所述音频服务类发送开启录音指令；所述音频服务类将所述开启录音指令发送至所述音频硬件管理模块；响应于接收所述开启录音指令，所述音频硬件管理模块判断所述第一终端当前是否进行虚拟通话；若所述第一终端当前进行虚拟通话，所述音频硬件管理模块从所述虚拟通话缓存区获取所述录音数据，其中，所述录音数据是所述虚拟通话硬件管理模块将所述通话下行数据和所述第一通话上行数据进行混音后存储的；若所述第二终端当前未进行虚拟通话，所述音频硬件管理模块打开所述第一PCM设备，并从所述第一PCM设备读取所述录音数据，其中，所述录音数据是所述第一PCM设备从所述音频处理器获取所述通话下行数据和所述第二通话上行数据并进行混音得到的。

本申请实施例中，在第一终端开启录音时，如果用户正在通过第二终端与通话另一方通话，则录音为通话另一方的声音和第二终端采集的用户声音；如果用户正在通过第一终端与通话另一方通话，则录音为通话另一方的声音和第一终端采集的用户声音；从而保证对通话双方的声音进行正常录音。

可选地，所述方法还包括：所述通话应用程序响应于用户的关闭录音操作，向所述音频服务类发送关闭录音指令；所述音频服务类将所述关闭录音指令发送至所述音频硬件管理模块；响应于接收所述关闭录音指令，所述音频硬件管理模块判断所述第一终端当前是否进行虚拟通话；若所述第一终端当前进行虚拟通话，所述音频硬件管理模块不关闭所述第一PCM设备，并停止从所述虚拟通话缓存区获取所述录音数据；若所述第一终端当前未进行虚拟通话，所述音频硬件管理模块关闭所述第一PCM设备读取所述录音数据，停止从所述第一PCM设备中获取所述录音数据。

本申请实施例中，在第一终端关闭录音时，如果用户正在通过第二终端与通话另一方通话，则不关闭第一PCM设备；如果用户正在通过第一终端与通话另一方通话，则关闭第一PCM设备；从而保证用户与通话另一方的正常通话。

可选地，所述虚拟通话硬件管理模块维护有虚拟通话标记位，虚拟通话标记位具有第一状态和第二状态，所述第一状态表征所述第一终端当前进行虚拟通话，所述第二状态表征所述第一终端当前未进行虚拟通话；所述音频硬件管理模块判断所述第一终端当前是否进行虚拟通话的步骤，包括：所述音频硬件管理模块检测所述虚拟通话标记位；若所述虚拟通话标记位处于所述第一状态，则所述第一终端当前进行虚拟通话；若所述虚拟通话标记位处于所述第二状态，则所述第一终端当前未进行虚拟通话。

本申请实施例中，在第一终端开启或关闭录音时，音频硬件管理模块通过检测虚拟通话标记位，来确定用户正在通过第一终端还是第二终端与通话另一方通话，从而保证对通话双方的声音进行正常录音。

可选地，所述音频硬件管理模块维护有录音标记位；所述方法还包括：响应于接收所述开启录音指令，所述音频硬件管理模块将所述录音标记位置为第一标识，所述第一标识表征所述第一终端当前进行通话录音；响应于接收所述关闭录音指令，所述音频硬件管理模块将所述录音标记位置为第二标识，其中，所述第二标识表征所述第一终端当前未进行通话录音。

本申请实施例中，在第一终端开启或关闭录音时，音频硬件管理模块重置录音标记位，从而保证在将通话声音从第一终端切换到第二终端或者将通话声音从第二终端切换回第一终端时，虚拟通话硬件管理模块能够准确判断出用户是否在录音，从而保证对通话双方的声音进行正常录音。

可选地，所述第一终端包括：通话应用程序、协同模块、虚拟通话硬件管理模块、传输模块、第一PCM设备、第二PCM设备、虚拟通话缓存区和音频设备；

所述第一终端接收通话对端设备发送的通话下行数据并发送至所述第二终端，所述第二终端播放所述通话下行数据，以及，所述第二终端采集第一通话上行数据，并通过所述第一终端将所述第一通话上行数据发送至所述通话对端设备的步骤，包括：

所述通话应用程序响应于用户的操作，向所述协同模块发送开启虚拟通话指令；

所述协同模块将所述开启虚拟通话指令发送至所述虚拟通话硬件管理模块；

响应于接收所述开启虚拟通话指令，所述虚拟通话硬件管理模块判断所述第一终端当前是否进行通话录音；

若所述第一终端当前进行通话录音，所述虚拟通话硬件管理模块禁用所述第一终端的音频设备，以及，打开所述第一PCM设备并禁止所述第一PCM设备获取上行数据，以及，从第一PCM设备读取所述通话下行数据发送至所述第一终端的传输模块，以及，接收所述第一终端的传输模块发送的所述第一通话上行数据并写入所述第二PCM设备，以及，将所述通话下行数据和所述第一通话上行数据进行混音得到所述录音数据并存储至所述虚拟通话缓存区；

若所述第一终端当前未进行通话录音，所述虚拟通话硬件管理模块禁用所述第一终端的音频设备，以及，打开所述第一PCM设备并禁止所述第一PCM设备获取上行数据，以及，从第一PCM设备读取所述通话下行数据发送至所述第一终端的传输模块，以及，接收所述第一终端的传输模块发送的所述第一通话上行数据并写入所述第二PCM设备。

本申请实施例中，在将通话声音从第一终端切换到第二终端时，如果用户正在与通话另一方通话并录音，则通过虚拟通话硬件管理模块通话另一方的声音和第二终端采集的用户的声音进行混音后存储至虚拟通话缓存区，使得音频硬件管理模块从虚拟通话缓存区中读取通话双方的声音，从而实现在用户通过第二终端与通话另一方通话的同时，第一终端能够继续进行录音。

可选地，所述第一终端播放所述通话下行数据，并采集第二通话上行数据发送至所述通话对端设备的步骤，包括：所述通话应用程序响应于用户的操作，向所述协同模块发送关闭虚拟通话指令；所述协同模块将所述关闭虚拟通话指令发送至所述虚拟通话硬件管理模块；响应于接收所述关闭虚拟通话指令，所述虚拟通话硬件管理模块判断所述第一终端当前是否进行通话录音；若所述第一终端当前进行通话录音，所述虚拟通话硬件管理模块解除所述第一终端的音频设备的禁用，并取消禁止所述第一PCM设备获取上行数据；若所述第一终端当前未进行通话录音，所述虚拟通话硬件管理模块解除所述第一终端的音频设备的禁用，并关闭所述第一PCM设备。

本申请实施例中，在将通话声音从第二终端切换回第一终端时，如果用户正在与通话另一方通话并录音，则虚拟通话硬件管理模块取消禁止第一PCM设备获取上行数据，使得第一PCM设备能够从音频处理器中获取通话另一方的声音和第一终端采集的用户的声音，进而音频硬件管理模块能够从第一PCM设备中读取通话双方的声音，从而实现在用户通过第一终端与通话另一方通话的同时，第一终端能够继续进行录音。

可选地，所述第一终端还包括音频硬件管理模块，所述音频硬件管理模块维护有录音标记位，所述录音标记位具有第一标识和第二标识，所述第一标识表征所述第一终端当前进行通话录音，所述第二标识表征所述第一终端当前未进行通话录音；所述虚拟通话硬件管理模块判断所述第一终端当前是否进行通话录音的步骤，包括：所述虚拟通话硬件管理模块检测所述录音标记位；若所述录音标记位处于所述第一标识，则所述第一终端当前进行通话录音；若所述录音标记位处于所述第二标识，则所述第一终端当前未进行通话录音。

本申请实施例中，在将通话声音从第一终端切换到第二终端或者将通话声音从第二终端切换回第一终端时，虚拟通话硬件管理模块通过检测录音标记位，来确定用户是否在录音，从而保证切换终端后，能够继续对通话双方的声音进行录音。

可选地，所述虚拟通话硬件管理模块维护有虚拟通话标记位，所述方法还包括：响应于接收所述开启虚拟通话指令，所述虚拟通话硬件管理模块将所述虚拟通话标记位置为第一状态，所述第一状态表征所述第一终端当前进行虚拟通话；响应于接收所述关闭虚拟通话指令，所述虚拟通话硬件管理模块将所述虚拟通话标记位置为第二状态，所述第二状态表征所述第一终端当前未进行虚拟通话。

本申请实施例中，在将通话声音从第一终端切换到第二终端或者将通话声音从第二终端切换回第一终端时，虚拟通话硬件管理模块重置虚拟通话标记位，从而保证在第一终端开启或关闭录音时，音频硬件管理模块能够准确判断出用户正在通过第一终端还是第二终端与通话另一方通话，从而保证对通话双方的声音进行正常录音。

第二方面，本申请实施例还提供一种多屏协同的通话方法，应用于第一终端，所述方法包括：所述第一终端接收通话对端设备的来电，其中，所述第一终端与第二终端连接且所述第二终端显示第一终端界面；响应于用户在所述第二终端中对所述第一终端界面的接听来电操作，接收通话对端设备发送的通话下行数据并发送至所述第二终端，以使所述第二终端播放所述通话下行数据；接收所述第二终端采集的第一通话上行数据，并将所述第一通话上行数据发送至所述通话对端设备；响应于用户的开启录音操作，获得录音数据，其中，所述录音数据包括所述通话下行数据和所述第一通话上行数据。

第三方面，本申请实施例还提供一种多屏协同的通话方法，应用于第二终端，所述方法包括：接收第一终端发送的通话下行数据并进行播放，其中，所述通话下行数据是在所述第一终端与所述第二终端连接且所述第二终端显示第一终端界面的情况下，所述第一终端接收通话对端设备的来电并响应于用户在所述第二终端中对所述第一终端界面的接听来电操作后，通话对端设备发送至所述第一终端的；所述第二终端采集第一通话上行数据，并通过所述第一终端将所述第一通话上行数据发送至所述通话对端设备，以使所述第一终端响应于用户的开启录音操作，获得录音数据，其中，所述录音数据包括所述通话下行数据和所述第一通话上行数据。

第四方面，本申请实施例还提供一种终端，所述终端包括：一个或多个处理器；存储器；音频设备；显示屏；其中，所述存储器用于存储计算机程序代码，该计算机程序代码包括计算机指令；当所述处理器执行所述计算机指令时，所述终端执行上述第一方面中第一终端执行的所述多屏协同的通话方法，或者，所述终端执行上述第一方面中第二终端执行的所述多屏协同的通话方法。

第五方面，本申请实施例还提供一种多屏协同的通话系统，所述系统包括第一终端和第二终端，所述第一终端执行上述第一方面中第一终端执行的所述多屏协同的通话方法，所述第二终端执行上述第一方面中第二终端执行的所述多屏协同的通话方法。

第六方面，本申请实施例还提供一种计算机可读存储介质，包括计算机程序，当所述计算机程序在终端上运行时，使得所述终端执行上述第一方面中第一终端执行的所述多屏协同的通话方法，或者，所述终端执行上述第一方面中第二终端执行的所述多屏协同的通话方法。

上述第二方面至第六方面及其实现方式的有益效果可以参考对第一方面的方法及其实现方式的有益效果的描述。

附图说明

图1为本申请实施例提供的一种多屏协同的通话系统的架构示意图；

图2为本申请实施例提供的一种终端的结构示意图一；

图3为本申请实施例提供的一种终端的软件结构框图；

图4为现有技术提供的终端的电话功能示意图；

图5为本申请实施例提供的一种多屏协同的通话方法的流程示意图一；

图6为本申请实施例提供的一种多屏协同的通话方法的应用场景示意图一；

图7为本申请实施例提供的一种多屏协同的通话方法的应用场景示意图二；

图8为本申请实施例提供的一种多屏协同的通话方法的应用场景示意图三；

图9为本申请实施例提供的一种多屏协同的通话方法的应用场景示意图四；

图10为本申请实施例提供的一种多屏协同的通话方法的应用场景示意图五；

图11为本申请实施例提供的一种多屏协同的通话方法的数据流向图一；

图12为本申请实施例提供的一种多屏协同的通话方法的交互示意图一；

图13为本申请实施例提供的一种多屏协同的通话方法的流程示意图二；

图14为本申请实施例提供的一种多屏协同的通话方法的应用场景示意图六；

图15为本申请实施例提供的一种多屏协同的通话方法的应用场景示意图七；

图16为本申请实施例提供的一种多屏协同的通话方法的应用场景示意图八；

图17为本申请实施例提供的一种多屏协同的通话方法的应用场景示意图九；

图18为本申请实施例提供的一种多屏协同的通话方法的交互示意图二；

图19为本申请实施例提供的一种多屏协同的通话方法的数据流向图二；

图20为本申请实施例提供的一种多屏协同的通话方法的数据流向图三；

图21为本申请实施例提供的一种多屏协同的通话方法的数据流向图四；

图22为本申请实施例提供的一种多屏协同的通话方法的交互示意图三；

图23为本申请实施例提供的一种多屏协同的通话方法的交互示意图四；

图24为本申请实施例提供的一种终端的结构示意图二。

具体实施方式

多屏协同是一种分布式技术，多个终端之间可以互相配合实现跨设备、跨系统的多屏协同。手机与平板/电脑多屏协同时，用户可以通过操作平板/电脑来控制手机，例如，回邮件、接听/拨打电话等。

目前，手机与平板/电脑多屏协同时，如果手机与通话对端设备进行运营商通话，由于运营商通话需要依赖手机上的SIM卡，所以通话过程中，通话另一方的声音只能通过移动网络发送到用户的手机，用户的声音也只能通过手机发送到通话另一方。也就是说，用户虽然可以通过操作平板/电脑来完成接听/拨打电话这一动作，却无法通过平板/电脑听到通话另一方的声音。

因此，在多屏协同状态下进行运营商通话时，如何将通话声音从手机切换到平板/电脑，是本申请实施例需要解决的技术问题。

为了解决上述技术问题，本申请实施例提供一种多屏协同的通话方法，手机能够将通话另一方的声音发给平板/电脑进行播放，同时，平板/电脑能够采集用户的声音，并通过手机发给通话对端设备，从而将通话声音从手机切换到平板/电脑。

下面将结合附图对本申请实施例的实施方式进行详细描述。

本申请实施例提供的一种多屏协同的通话方法，可以应用于图1所示的多屏协同的通话系统100。如图1所示，多屏协同的通话系统100可以包括第一终端101和第二终端102。

第一终端101可以是具有显示功能和电话功能的设备，例如，手机、平板电脑、可穿戴电子设备、笔记本电脑、智能电视等，本申请实施例对此不做任何限制。

第二终端102可以是具有显示功能和收音放音功能的设备，例如，手机、平板电脑、智能电视、笔记本电脑、超级移动个人计算机(Ultra-mobile Personal Computer，UMPC)、手持计算机、上网本、个人数字助理(Personal Digital Assistant，PDA)、可穿戴电子设备、车载设备、虚拟现实设备等，本申请实施例对此不做任何限制。

第一终端101可以与第二终端102进行多屏协同，且第一终端101可以与通话对端设备进行通话。在第一终端101与第二终端102进行多屏协同时，如果第一终端101与通话对端设备进行通话，第一终端101可以将通话声音从第一终端101切换到第二终端102，使得通话声音从平板/电脑发出。

例如，第一终端101可以为手机、第二终端102可以为平板电脑或笔记本电脑，或者，第一终端101可以为平板电脑、第二终端102可以为笔记本电脑或智能电视，或者，第一终端101和第二终端102可以均为手机，或者，第一终端101和第二终端102可以均为平板电脑等。

以第一终端101为手机、第二终端102为平板电脑进行举例，在一些场景下，可以将通话声音从手机切换到平板电脑，使得通话另一方的声音从平板电脑发出。

通话对端设备是通话另一方的设备，且通话对端设备可以是手机、平板电脑、可穿戴电子设备、笔记本电脑、智能电视等具有电话功能的设备，本申请实施例对此不做任何限制。

请参照图2，为本申请实施例提供的一种终端200的结构示意图，终端200可以是上述多屏协同的通话系统100中的第一终端101，例如手机；也可以是上述多屏协同的通话系统100中的第二终端102，例如平板电脑。下面以手机为例说明终端200的硬件结构。

如图2所示，终端200可以包括处理器210，外部存储器接口220，内部存储器221，通用串行总线(universal serial bus，USB)接口230，充电管理模块240，电源管理模块241，电池242，天线1，天线2，移动通信模块250，无线通信模块260，音频模块270，扬声器270A，受话器270B，麦克风270C，耳机接口270D，传感器模块280，按键290，马达291，指示器292，摄像头293，显示屏294，以及SIM卡接口295等。其中，传感器模块280可以包括压力传感器280A，陀螺仪传感器280B，气压传感器280C，磁传感器280D，加速度传感器280E，距离传感器280F，接近光传感器280G，指纹传感器280H，温度传感器280J，触摸传感器280K，环境光传感器280L，骨传导传感器280M和转轴传感器280N等。

可以理解的是，本实施例示意的结构并不构成对终端200的具体限定。在另一些实施例中，终端200可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件，软件或软件和硬件的组合实现。

处理器210可以包括一个或多个处理单元，例如：处理器210可以包括应用处理器(application processor，AP)，调制解调处理器，图形处理器(graphics processingunit，GPU)，图像信号处理器(image signal processor，ISP)，控制器，存储器，视频编解码器，数字信号处理器(digital signal processor，DSP)，基带处理器，和/或神经网络处理器(neural-network processing unit，NPU)等。其中，不同的处理单元可以是独立的器件，也可以集成在一个或多个处理器中。

处理器210中还可以设置存储器，用于存储指令和数据。在一些实施例中，处理器210中的存储器为高速缓冲存储器。该存储器可以保存处理器210刚用过或循环使用的指令或数据。如果处理器210需要再次使用该指令或数据，可从所述存储器中直接调用。避免了重复存取，减少了处理器210的等待时间，因而提高了系统的效率。

充电管理模块240用于从充电器接收充电输入。电源管理模块241用于连接电池242，充电管理模块240与处理器210。电源管理模块241接收电池242和/或充电管理模块240的输入，为处理器210，内部存储器221，外部存储器，显示屏294，摄像头293，和无线通信模块260等供电。

终端200的无线通信功能可以通过天线1，天线2，移动通信模块250，无线通信模块260，调制解调处理器以及基带处理器等实现。

天线1和天线2用于发射和接收电磁波信号。终端200中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用，以提高天线的利用率。例如：可以将天线1复用为无线局域网的分集天线。在另外一些实施例中，天线可以和调谐开关结合使用。

移动通信模块250可以提供应用在终端200上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块250可以包括至少一个滤波器，开关，功率放大器，低噪声放大器(lownoise amplifier，LNA)等。移动通信模块250可以由天线1接收电磁波，并对接收的电磁波进行滤波，放大等处理，传送至调制解调处理器进行解调。移动通信模块250还可以对经调制解调处理器调制后的信号放大，经天线1转为电磁波辐射出去。在一些实施例中，移动通信模块250的至少部分功能模块可以被设置于处理器210中。在一些实施例中，移动通信模块250的至少部分功能模块可以与处理器210的至少部分模块被设置在同一个器件中。

无线通信模块260可以提供应用在终端200上的包括无线局域网(wireless-localarea networks，WLAN)(如无线保真(wireless fidelity，Wi-Fi)网络)，蓝牙(bluetooth，BT)，全球导航卫星系统(global navigation satellite system，GNSS)，调频(frequencymodulation，FM)，近距离无线通信技术(near field communication，NFC)，红外技术(infrared，IR)等无线通信的解决方案。无线通信模块260可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块260经由天线2接收电磁波，将电磁波信号调频以及滤波处理，将处理后的信号发送到处理器210。无线通信模块260还可以从处理器210接收待发送的信号，对其进行调频，放大，经天线2转为电磁波辐射出去。

在一些实施例中，终端200的天线1和移动通信模块250耦合，天线2和无线通信模块260耦合，使得终端200可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications，GSM)，通用分组无线服务(general packet radio service，GPRS)，码分多址接入(code divisionmultiple access，CDMA)，宽带码分多址(wideband code division multiple access，WCDMA)，时分码分多址(time-division code division multiple access，TD-SCDMA)，长期演进(long term evolution，LTE)，BT，GNSS，WLAN，NFC，FM，和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system，GPS)，全球导航卫星系统(globalnavigation satellite system，GLONASS)，北斗卫星导航系统(beidou navigationsatellite system，BDS)，准天顶卫星系统(quasi-zenith satellite system，QZSS)和/或星基增强系统(satellite based augmentation systems，SBAS)。

终端200通过GPU，显示屏294，以及应用处理器等实现显示功能。GPU为图像处理的微处理器，连接显示屏294和应用处理器。GPU用于执行数学和几何计算，用于图形渲染。处理器210可包括一个或多个GPU，其执行程序指令以生成或改变显示信息。

显示屏294用于显示图像，视频等。例如，在本申请实施例中，该显示屏294用于显示应用图标、快捷菜单选项以及延时设置窗口等内容，以引导用户设置延时时长。显示屏294包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display，LCD)，有机发光二极管(organic light-emitting diode，OLED)，有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrix organic light emitting diode，AMOLED)，柔性发光二极管(flex light-emitting diode，FLED)，Miniled，MicroLed，Micro-oLed，量子点发光二极管(quantum dot light emitting diodes，QLED)等。在一些实施例中，终端200可以包括1个或N个显示屏294，N为大于1的正整数。

终端200可以通过ISP，摄像头293，视频编解码器，GPU，显示屏294以及应用处理器等实现拍摄功能。

ISP用于处理摄像头293反馈的数据。例如，拍照时，打开快门，光线通过镜头被传递到摄像头感光元件上，光信号转换为电信号，摄像头感光元件将所述电信号传递给ISP处理，转化为肉眼可见的图像。ISP还可以对图像的噪点，亮度，肤色进行算法优化。ISP还可以对拍摄场景的曝光，色温等参数优化。在一些实施例中，ISP可以设置在摄像头293中。

摄像头293用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device，CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor，CMOS)光电晶体管。感光元件把光信号转换成电信号，之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB，YUV等格式的图像信号。在一些实施例中，终端200可以包括1个或N个摄像头293，N为大于1的正整数。

外部存储器接口220可以用于连接外部存储卡，例如Micro SD卡，实现扩展终端200的存储能力。外部存储卡通过外部存储器接口220与处理器210通信，实现数据存储功能。例如将音乐，视频等文件保存在外部存储卡中。

内部存储器221可以用于存储计算机可执行程序代码，所述可执行程序代码包括指令。处理器210通过运行存储在内部存储器221的指令，从而执行终端200的各种功能应用以及数据处理。内部存储器221可以包括存储程序区和存储数据区。其中，存储程序区可存储操作系统，至少一个功能所需的应用程序(比如声音播放功能，图像播放功能等)等。存储数据区可存储终端200使用过程中所创建的数据(比如音频数据，电话本等)等。此外，内部存储器221可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件，闪存器件，通用闪存存储器(universal flash storage，UFS)等。

终端200可以通过音频模块270，扬声器270A，受话器270B，麦克风270C，耳机接口270D，以及应用处理器等实现音频功能。例如音乐播放，录音等。

音频模块270用于将数字音频信息转换成模拟音频信号输出，也用于将模拟音频输入转换为数字音频信号。音频模块270还可以用于对音频信号编码和解码。在一些实施例中，音频模块270可以设置于处理器210中，或将音频模块270的部分功能模块设置于处理器210中。

扬声器270A，也称“喇叭”，用于将音频电信号转换为声音信号。终端200可以通过扬声器270A收听音乐，或收听免提通话。

受话器270B，也称“听筒”，用于将音频电信号转换成声音信号。当终端200接听电话或语音信息时，可以通过将受话器270B靠近人耳接听语音。

麦克风270C，也称“话筒”，“传声器”，用于将声音信号转换为电信号。当拨打电话或发送语音信息时，用户可以通过人嘴靠近麦克风270C发声，将声音信号输入到麦克风170C。终端200可以设置至少一个麦克风270C。在另一些实施例中，终端200可以设置两个麦克风270C，除了采集声音信号，还可以实现降噪功能。在另一些实施例中，终端200还可以设置三个，四个或更多麦克风270C，实现采集声音信号，降噪，还可以识别声音来源，实现定向录音功能等。

耳机接口270D用于连接有线耳机。耳机接口270D可以是USB接口230，也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform，OMTP)标准接口，美国蜂窝电信工业协会(cellular telecommunications industry association of the USA，CTIA)标准接口。

SIM卡接口295用于连接SIM卡。SIM卡可以通过插入SIM卡接口295，或从SIM卡接口295拔出，实现和终端200的接触和分离。终端200可以支持1个或N个SIM卡接口，N为大于1的正整数。SIM卡接口295可以支持Nano SIM卡，Micro SIM卡，SIM卡等。同一个SIM卡接口295可以同时插入多张卡。所述多张卡的类型可以相同，也可以不同。SIM卡接口295也可以兼容不同类型的SIM卡。SIM卡接口295也可以兼容外部存储卡。终端200通过SIM卡和网络交互，实现通话以及数据通信等功能。在一些实施例中，终端200采用eSIM，即：嵌入式SIM卡。eSIM卡可以嵌在终端200中，不能和终端200分离。

需要说明的是，上述终端200的硬件结构是以手机为例进行说明的，本领域技术人员应当理解，在实际应用中，第一终端101和第二终端102的硬件结构，可以在上述硬件结构的基础上进行适当增减，本申请实施例对此不做任何限制。

上述终端200的软件系统可以采用分层架构，事件驱动架构，微核架构，微服务架构，或云架构。本申请实施例以分层架构的Android系统为例，示例性说明终端200的软件结构。图3是本发明实施例的终端200的软件结构框图。

分层架构将软件分成若干个层，每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中，将Android系统分为四层，从上至下分别为应用程序层，应用程序框架层，安卓运行时(Android runtime)和系统库，以及内核层。

应用程序层可以包括一系列应用程序包。

如图3所示，应用程序包可以包括相机，图库，日历，通话，地图，导航，WLAN，蓝牙，音乐，视频，短信息等应用程序(application，APP)。应用程序框架层为应用程序层的应用程序提供应用编程接口(application programming interface，API)和编程框架。应用程序框架层包括一些预先定义的函数。

其中，通话应用程序具有：响应于用户的拨打电话操作或接听电话操作(例如，点击来电显示界面的接听键)进行通话的功能，以及，响应于用户的开启录音操作(例如，点击通话界面的录音键)进行通话录音的功能，以及，响应于用户的拨打紧急呼叫电话操作(例如，在紧急呼叫界面选择紧急联系人拨号)进行紧急呼叫的功能。

当用户操作终端200进行接听电话、或者拨打电话、或者通话录音、或者拨打紧急电话时，通话应用程序响应于用户的操作，产生对应的指令发送至应用程序框架层。

如图3所示，应用程序框架层可以包括窗口管理器，内容提供器，视图系统，电话管理器，资源管理器，通知管理器等。

窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小，判断是否有状态栏，锁定屏幕，截取屏幕等。

内容提供器用来存放和获取数据，并使这些数据可以被应用程序访问。所述数据可以包括视频，图像，音频，拨打和接听的电话，浏览历史和书签，电话簿等。

视图系统包括可视控件，例如显示文字的控件，显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成。例如，包括短信通知图标的显示界面，可以包括显示文字的视图以及显示图片的视图。

电话管理器用于提供终端200的通信功能。例如通话状态的管理(包括接通，挂断等)。

其中，电话管理器提供与通话有关的类，例如，音频服务类(Audio Service)。当用户操作终端200进行接听电话、或者拨打电话、或者通话录音、或者拨打紧急电话时，通话应用程序响应于用户的操作，产生对应的指令发送至应用程序框架层的音频服务类。资源管理器为应用程序提供各种资源，比如本地化字符串，图标，图片，布局文件，视频文件等等。

通知管理器使应用程序可以在状态栏中显示通知信息，可以用于传达告知类型的消息，可以短暂停留后自动消失，无需用户交互。比如通知管理器被用于告知下载完成，消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知，例如后台运行的应用程序的通知，还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息，发出提示音，设备振动，指示灯闪烁等。

Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。

核心库包含两部分：一部分是java语言需要调用的功能函数，另一部分是安卓的核心库。

应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理，堆栈管理，线程管理，安全和异常的管理，以及垃圾回收等功能。

系统库可以包括多个功能模块。例如：表面管理器(surface manager)，媒体库(Media Libraries)，三维图形处理库(例如：OpenGL ES)，音频库(Audio Libraries)等。

表面管理器用于对显示子系统进行管理，并且为多个应用程序提供了2D和3D图层的融合。

媒体库支持多种常用的音频，视频格式回放和录制，以及静态图像文件等。媒体库可以支持多种音视频编码格式，例如:MPEG4，H.264，MP3，AAC，AMR，JPG，PNG等。

三维图形处理库用于实现三维图形绘图，图像渲染，合成，和图层处理等。

电话管理器只是向通话应用程序提供访问核心库的桥梁，具体的功能实现放在音频库中完成。例如，音频库中具有与应用程序框架层的音频服务类相对应的音频服务类(Audio Service)。

HAL层是对Linux内核驱动程序的封装，向上提供接口，屏蔽底层硬件的实现细节。

HAL层中可以包括Wi-Fi HAL，音频HAL(Audio HAL)和相机HAL(Camera HAL)等。

其中，音频HAL定义了由音频服务调用手机必须实现以确保音频硬件功能正常运行的标准接口，负责将Audio Flinger/Audio Policy Service真正地与硬件设备关联起来。

内核层是硬件和软件之间的层。内核层至少包含显示驱动，摄像头驱动，音频驱动，传感器驱动。

其中，音频驱动主要负责和硬件的交互，硬件包括音频设备，例如，扬声器、麦克风等。

为便于人们更清楚的理解本申请实施例，在介绍本申请实施例中的多屏协同的通话方法之前，先基于上述图3介绍的Android系统，以第一终端101是手机为例，对现有技术中第一终端101的电话功能进行介绍。

第一终端101的电话功能包括通话、通话录音和紧急呼叫，下面结合图4，示例性说明第一终端101实现电话功能的流程。

在一种实现方式中，如图4所示，第一终端101与通话对端设备进行通话的流程如下：

当用户接听来电时，通话应用程序响应用户对第一终端101的接听来电操作(例如，点击来电显示界面的接听键等)，生成开启通话指令，并调用电话管理器的音频服务类和音频库的音频服务类，将该开启通话指令下发至音频HAL的音频硬件管理模块，再由音频硬件管理模块下发至音频处理器。音频处理器收到该开启通话指令后，接收通话对端设备发送的通话下行数据，并发送至扬声器进行播放；以及，获取麦克风采集的通话上行数据，并发送至通话对端设备。

当用户拨打电话时，通话应用程序响应用户对第一终端101的拨打电话操作(例如，进入主界面的电话，选择相关联系人，点击进行拨号等)，并在通话对端设备接通后生成开启通话指令。之后，通话应用程序调用电话管理器的音频服务类和音频库的音频服务类，将该开启通话指令下发至音频HAL的音频硬件管理模块，再由音频硬件管理模块下发至音频处理器。音频处理器收到该开启通话指令后，接收通话对端设备发送的通话下行数据，并发送至扬声器进行播放；以及，获取麦克风采集的通话上行数据，并发送至通话对端设备。

需要说明的是，在一些场景下，音频处理器还可以将通话下行数据发送至受话器进行播放，或者，经耳机接口发送至有线耳机进行播放，或者，经蓝牙发送至无线耳机进行播放。同时，音频处理器获取的通话上行数据还可以是与终端200连接的无线耳机或者有线耳机采集的。本申请实施例对此不做任何限制。

音频处理器，即为Audio DSP，是一个处理音频的数字信号处理器(DigitalSignal Process，DSP)。Audio DSP负责对音频信号进行处理、以及与通话对端设备的AudioDSP进行交互。

在另一种实现方式中，如图4所示，第一终端101进行通话录音的流程如下：

在第一终端101与通话对端设备进行通话的过程中，当用户进行通话录音时，通话应用程序响应用户的开启录音操作(例如，点击通话界面的录音键)，生成开启录音指令，并调用电话管理器中的音频服务类和音频库中的音频服务类，将该开启录音指令下发至音频HAL的音频硬件管理模块。

音频硬件管理模块接收到开启录音指令后，打开第一PCM设备，并指定音频场景为上行通路和下行通路。之后，第一PCM设备从音频处理器中获取通话上行数据和通话下行数据，并对通话上行数据和通话下行数据进行混音得到录音数据。音频硬件管理模块再从第一PCM设备中读取录音数据，并将该录音数据经音频硬件管理模块和音频服务类发送至通话应用程序，由通话应用程序进行存储。

PCM设备即为PCM设备文件，在Linux系统中，所有的设备最终都是抽象成一个或者多个用户空间可以访问的设备文件，用户空间的进程通过这些设备文件的读写来达到控制硬件的目的。对于播放声音或者录制声音来说，音频HAL是通过对PCM设备文件的读写来实现的。

Android系统中实现通话录音需要从指定的PCM设备中获取录音数据，录音数据包括通话双方的声音，PCM设备可以通过选择音频场景(即usecase)来指定，且一个PCM设备可以对应多个usecase。

第一PCM设备，即为incall record PCM，也就是用于实现通话录音的PCM设备。incall record PCM对应三个usecase，分别为：上行通路(usecase_incall_rec_downlink)，下行通路(usecase_incall_rec_uplink)，上行通路和下行通路(usecase_incall_rec_uplink_and_downlink)。选择上述三个usecase，第一PCM设备分别可以获取通话下行数据，通话上行数据，通话上行数据和通话下行数据。

由于实现通话录音需要通话上行数据和通话下行数据，因此，通话录音场景需要选择usecase_incall_rec_uplink_and_downlink来获取通话上行数据和通话下行数据。也就是说，通过选择usecase_incall_rec_uplink_and_downlink指定第一PCM设备，从而实现通话录音。

在又一种实现方式中，如图4所示，第一终端101进行紧急呼叫的流程如下：

当用户拨打紧急呼叫时，通话应用程序响应用户的拨打紧急呼叫操作(例如，在锁屏界面点击紧急呼叫，点击个人紧急信息，选择紧急联系人拨号等)，将紧急呼叫数据写入电话管理器的音频服务类，紧急呼叫数据为一段固定音频数据，再由电话管理器的音频服务类写入音频库的音频服务类，再由音频库的音频服务类写入音频HAL的音频硬件管理模块。之后，音频硬件管理模块将紧急呼叫数据写入第二PCM设备，音频处理器从第二PCM设备中读取紧急呼叫数据并发送至通话对端设备。

如果用户的拨打紧急呼叫操作为：在锁屏界面点击紧急呼叫，点击个人紧急信息，选择紧急联系人拨号，则通话对端设备为紧急联系人的设备。通话对端设备接收到紧急呼叫数据后，播放紧急呼叫数据，使得紧急联系人通过自己的设备帮用户拨打求救电话。

第二PCM设备，即为incall music PCM，也就是用于实现紧急呼叫功能的PCM设备。incall music PCM也有对应的usecase，并且与incall record PCM对应的usecase不同。例如，incall music PCM对应的usecase可以是USECASE_INCALL_MUSIC_UPLINK。

从上述内容可知，现有的通话流程中，音频处理器接收通话下行数据并发送至扬声器进行播放，Android系统没有提供直接获取通话下行数据的接口，音频系统无法直接从音频处理器中获取通话下行数据。但是，现有的通话录音流程中，第一PCM设备可以从音频处理器中获取通话上行数据和通话下行数据。

因此，本申请实施例提供的多屏协同的通话方法，对现有技术中第一终端101的电话功能进行改进，使得第一终端101接收通话对端设备的通话下行数据，并发送给第二终端102进行播放，以及，接收第二终端102采集的第一通话上行数据，并发送至通话对端设备。下面进行详细介绍。

下面将以第一终端101是手机、第二终端102是平板电脑为例，对本申请实施例的多屏协同的通话方法进行详细描述。

请参照图5，为本申请实施例提供的一种多屏协同的通话方法的流程示意图。该多屏协同的通话方法应用于图1所示的多屏协同的通话系统100，该多屏协同的通话方法可以包括S301～S304。

S301，在第一终端与第二终端连接且第二终端显示第一终端界面的情况下，第一终端接收通话对端设备的来电。

S302，响应于用户在第二终端中对第一终端界面的接听来电操作，第一终端接收通话对端设备发送的通话下行数据并发送至第二终端，第二终端播放通话下行数据。

S303，第二终端采集第一通话上行数据，并通过第一终端将第一通话上行数据发送至通话对端设备。

第一终端101与第二终端102连接且第二终端102显示第一终端界面，也就是第一终端101与第二终端102正在多屏协同。第一终端界面是指第二终端102镜像同屏显示的第一终端101的窗口。

在第一终端101与第二终端102多屏协同时，如果通话对端设备来电，第一终端101显示来电显示界面，同时，第二终端102中的第一终端界面同步显示来电显示界面。

此时，如果用户操作第二终端102显示的来电显示界面接听来电，则可以认为用户倾向于通过第二终端102与通话另一方进行通话，所以将通话声音从第一终端101切换到第二终端102。

即，第一终端101接收通话对端设备发送的通话下行数据发送至第二终端102，同时，第一终端101接收第二终端102采集的第一通话上行数据并发送至通话对端设备。通话下行数据是指通话另一方的声音。第一通话上行数据是指第二终端102的收音设备(例如，麦克风)采集的用户声音。

也就是，第一终端101接收通话对端设备发送的通话另一方的声音发送至第二终端102，第二终端102的放音设备(例如，扬声器)播放通话另一方的声音。同时，第二终端102的收音设备(例如，麦克风)采集用户的声音，并通过第一终端101发送至通话对端设备。

例如，请参照图6，手机与平板电脑正在多屏协同，即，手机与平板电脑连接，且平板电脑显示手机界面401。手机有来电，平板电脑中的手机界面1021显示来电显示界面，如果用户点击平板电脑的来电显示界面中的接听键进行接听，则通话另一方的声音从平板电脑发出，同时，平板电脑采集用户的声音，通过手机发给通话另一方。

S304，响应于用户的开启录音操作，第一终端获得录音数据，其中，录音数据包括通话下行数据和第一通话上行数据。

开启录音操作，可以是用户点击第一终端101的通话界面中的录音图标，也可以是用户点击第二终端102的第一终端界面同步显示的通话界面中的录音图标。

也就是，在第一终端101与第二终端102多屏协同的情况下，如果第一终端101开启虚拟通话后进行录音，则录音数据包括通话下行数据和第一通话上行数据。虚拟通话，是指第一终端101与通话对端设备处于通话状态，但通话声音从第二终端102发出，即，用户通过第二终端102与通话另一方进行对话。开启虚拟通话，即为将通话声音从第一终端101切换到第二终端102。

上述介绍了第一终端101开启虚拟通话的一种应用场景，除了上述应用场景外，在其它一些场景下，第一终端101也可以开启虚拟通话，下面结合举例进行描述。

在一种可能的实现方式中，在图3的基础上，本申请实施例提供的一种多屏协同的通话方法还可以包括S301-1、S302-1、S303和S304。

S301-1，在第一终端与第二终端连接且第二终端显示第一终端界面的情况下，响应于用户在第二终端中对第一终端界面的拨打电话操作，第一终端呼叫通话对端设备。

S302-1，在通话对端设备接通后，第一终端接收通话对端设备发送的通话下行数据并发送至第二终端，第二终端播放通话下行数据。

S303，第二终端采集第一通话上行数据，并通过第一终端将第一通话上行数据发送至通话对端设备。

S304，响应于用户的开启录音操作，第一终端获得录音数据，其中，录音数据包括通话下行数据和第一通话上行数据。

在第一终端101与第二终端102多屏协同时，如果用户操作第二终端102显示的第一终端界面拨打电话，则可以认为用户倾向于通过第二终端102与通话另一方进行通话，所以第一终端101开启虚拟通话，将通话声音从第一终端101切换到第二终端102。

例如，请参照图7，手机与平板电脑正在多屏协同，即，手机与平板电脑连接，且平板电脑显示手机界面401。如果用户操作平板电脑显示的手机界面401拨打电话，例如，点击手机界面401中的电话图标，进入电话后，选择相关联系人，点击拨号键进行拨号，以呼叫通话另一方。在通话另一方接通后，通话另一方的声音从平板电脑发出，同时，平板电脑采集用户的声音，通过手机发给通话另一方。

在另一种可能的实现方式中，在图3的基础上，本申请实施例提供的一种多屏协同的通话方法还可以包括S301-2、S302-2、S303和S304。

S301-2，在第一终端与通话对端设备进行通话的情况下，第一终端显示弹框，其中，弹框用于提示用户将第一终端和第二终端多屏协同。

S302-2，响应于用户对弹框中连接图标的操作，第一终端与第二终端连接且第二终端显示第一终端界面，第一终端接收通话对端设备发送的通话下行数据并发送至第二终端，第二终端播放通话下行数据。

S303，第二终端采集第一通话上行数据，并通过第一终端将第一通话上行数据发送至通话对端设备。

S304，响应于用户的开启录音操作，第一终端获得录音数据，其中，录音数据包括通话下行数据和第一通话上行数据。

在用户通过第一终端101与通话对端设备进行通话时，如果用户操作第一终端101和第二终端102，使得第一终端101和第二终端102多屏协同，则可以认为用户倾向于通过第二终端102与通话另一方进行通话，所以第一终端101开启虚拟通话，将通话声音从第一终端101切换到第二终端102。

例如，请参照图8，用户正在通过手机与通话另一方进行通话，手机中显示提示用户将手机与平板电脑连接的弹框402，如果用户点击弹框402中的连接图标，则第一终端与第二终端连接且第二终端显示第一终端界面，即，手机与平板电脑连接，开启多屏协同。此时，通话另一方的声音从平板电脑发出，同时，平板电脑采集用户的声音，通过手机发给通话另一方，用户即可通过平板电脑与通话另一方通话。在又一种可能的实现方式中，在图3的基础上，本申请实施例提供的一种多屏协同的通话方法还可以包括S301-3、S302-3、S303和S304。

S301-3，在第一终端与通话对端设备进行通话、以及第一终端与第二终端连接且第二终端显示第一终端界面的情况下，第一终端显示第一通知面板。

S302-3，响应于用户在第一终端中对第一通知面板中音视频切换图标的操作，第一终端与第二终端连接且第二终端显示第一终端界面，第一终端接收通话对端设备发送的通话下行数据并发送至第二终端，第二终端播放通话下行数据。

S303，第二终端采集第一通话上行数据，并通过第一终端将第一通话上行数据发送至通话对端设备。

S304，响应于用户的开启录音操作，第一终端获得录音数据，其中，录音数据包括通话下行数据和第一通话上行数据。

在用户通过第一终端101与通话对端设备进行通话、以及第一终端101与第二终端102多屏协同时，如果用户操作第一终端101将音视频切换至第二终端，则第一终端101开启虚拟通话，将通话声音从第一终端101切换到第二终端102。

例如，请参照图9，用户正在通过手机与通话另一方进行通话，并且手机与平板电脑正在多屏协同，用户将手机的状态栏向下滑动，打开第一通知面板403，如果用户点击第一通知面板403中的“音视频切换到平板”图标，通话声音会从手机切换到平板电脑，即，通话另一方的声音从平板电脑发出，同时，平板电脑采集用户的声音，通过手机发给通话另一方，用户通过平板电脑与通话另一方通话。

在又一种可能的实现方式中，在图3的基础上，本申请实施例提供的一种多屏协同的通话方法还可以包括S301-4、S302-4、S303和S304。

S301-4，在第一终端与通话对端设备进行通话、以及第一终端与第二终端连接且第二终端显示第一终端界面的情况下，第二终端显示第一通知面板。

S302-4，响应于用户在第二终端中对第一通知面板中音视频切换图标的操作，第一终端与第二终端连接且第二终端显示第一终端界面，第一终端接收通话对端设备发送的通话下行数据并发送至第二终端，第二终端播放通话下行数据。

S303，第二终端采集第一通话上行数据，并通过第一终端将第一通话上行数据发送至通话对端设备。

S304，响应于用户的开启录音操作，第一终端获得录音数据，其中，录音数据包括通话下行数据和第一通话上行数据。

在用户通过第一终端101与通话对端设备进行通话、以及第一终端101与第二终端102多屏协同时，如果用户操作第二终端102将音视频切换至第二终端102，则第一终端101开启虚拟通话，将通话声音从第一终端101切换到第二终端102。

例如，请参照图10，用户正在通过手机与通话另一方进行通话，并且手机与平板电脑正在多屏协同，用户将平板电脑的状态栏向下滑动，打开第一通知面板403，如果用户点击第一通知面板403中的“音视频切换到平板”图标，通话声音会从手机切换到平板电脑，即，通话另一方的声音从平板电脑发出，同时，平板电脑采集用户的声音，通过手机发给通话另一方，用户通过平板电脑与通话另一方通话。

当然，除了上述介绍的可能的实现方式外，本领域技术人员还可以设计其他实现方式开启虚拟通话，本申请实施例对此不做任何限制。

以上介绍了虚拟通话场景下的完整通话过程。但是，从图4介绍的现有电话功能的实现可知，Android系统没有提供直接获取通话下行数据的接口，同时，音频处理器是直接获取第一终端101的麦克风采集的通话上行数据发送给通话对端设备。但是，第一PCM设备可以从音频处理器中获取通话上行数据和通话下行数据，音频处理器可以从第二PCM设备中读取紧急呼叫数据。

因此，要实现本申请实施例中的虚拟通话功能，即，第一终端101接收通话对端设备的通话下行数据，并发送给第二终端102进行播放，以及，接收第二终端102采集的第一通话上行数据，并发送至通话对端设备，可以考虑借用第一PCM设备和第二PCM设备的功能。

从图4介绍的内容可知，在通话录音场景下，第一PCM设备可以从音频处理器中获取通话上行数据和通话下行数据，因此，在虚拟通话场景下，可以通过第一PCM设备从音频处理器中获取通话下行数据。

同时，由于虚拟通话场景下也可能需要进行通话录音，所以，设置第一PCM设备包括上行通路和下行通路，即，选择usecase_incall_rec_uplink_and_downlink来获取通话上行数据和通话下行数据。

另外，从图4介绍的内容可知，在紧急呼叫场景下，音频硬件管理模块可以将紧急呼叫数据写入第二PCM设备，音频处理器从第二PCM设备中读取紧急呼叫数据发送至通话对端设备。因此，可以将第二终端102发送的第一通话上行数据写入第二PCM设备，进而，音频处理器从第二PCM设备中读取第一通话上行数据并发送至通话对端设备。

因此，音频处理器中既有通话对端设备发送的通话下行数据，也有从第二PCM设备读取的第一通话上行数据。

但是，由于虚拟通话场景下，设置第一PCM设备包括上行通路和下行通路，所以，第一PCM设备可以从音频处理器中获取到通话下行数据和第一通话上行数据，这必然会导致第二终端102播放时出现回声。因此，需要关闭第一PCM设备的上行通路，以禁止第一PCM设备从音频处理器中获取第一通话上行数据。

同时，由于虚拟通话场景下，用户通过第二终端102与通话另一方通话，因此，为了避免出现回声，第一终端101在开启虚拟通话时，还需要禁用自身的音频设备。音频设备可以包括放音设备和收音设备，放音设备可以是扬声器、受话器、有线耳机、无线耳机等，收音设备可以是麦克风、有线耳机、无线耳机等。本申请实施例对此不做任何限制，下述实施例以扬声器和麦克风为例进行介绍。

在上述分析的基础上，相较于图4，如图11所示，为了实现虚拟通话，可以在第一终端101中增加协同模块、虚拟通话硬件管理模块、传输模块和虚拟通话缓存区，相应地，可以在第二终端102中增加传输模块，其中，虚拟通话硬件管理模块在图3所示的音频HAL中。

其中，协同模块在第一终端101和第二终端102进行多屏协同连接时启动，主要负责通话状态的监听和通话逻辑的控制，例如，当监听到开启虚拟通话时，发送开启虚拟通话指令给虚拟通话硬件管理模块；当监听到关闭虚拟通话时，发送关闭虚拟通话指令给虚拟通话硬件管理模块。

需要指出的是，第二终端102中也有对应的协同模块(图11中未示出)，第二终端102中的协同模块可以监听用户对平板电脑的操作，并产生相应的指令。例如，监听到图6或图7所示的用户操作，则产生通话请求发送至第一终端101的协同模块。又如，监听图10所示的用户操作，则产生通话切换请求发送至第一终端101的协同模块。

传输模块可以表示为virModem transmisson，主要负责第一终端101和第二终端102之间的音频数据传输。

虚拟通话硬件管理模块可以表示为virModem hal，主要用于：在收到协同模块发送的开启虚拟通话指令或关闭虚拟通话指令时，控制PCM设备的打开与关闭、音频场景的设置、音频数据读写以及通话下行数据和第一通话上行数据进行混音等。

虚拟通话缓存区用于：存储虚拟通话硬件管理模块将通话下行数据和第一通话上行数据混音后的数据。

下面结合图11和图12，对虚拟通话场景下通话和通话录音的详细实现进行介绍。

请参照图12，上述介绍的S302、S302-1、S302-2、S302-3和S302-3中第一终端接收通话对端设备发送的通话下行数据并发送至第二终端，第二终端播放通话下行数据的过程，以及S303中第二终端采集第一通话上行数据，并通过第一终端将第一通话上行数据发送至通话对端设备的过程，可以包括：

S11，通话应用程序响应于用户的开启虚拟通话操作，向协同模块发送开启虚拟通话指令。其中，开启虚拟通话操作，可以是图6～图10中的任一种，用于将通话声音从手机切换到平板电脑。

S12，协同模块将开启虚拟通话指令发送至虚拟通话硬件管理模块。

S13，响应于接收开启虚拟通话指令，虚拟通话硬件管理模块禁用第一终端的音频设备、打开第一PCM设备并禁止第一PCM设备获取上行数据。

其中，将通话声音从手机切换到平板电脑时，为了保证通话声音不从手机的扬声器和麦克风进行放音和收音，虚拟通话硬件管理模块需要将手机的扬声器和麦克风禁用，从而使得手机的扬声器不播放通话另一方的声音，以及，手机的麦克风不采集用户的声音。

S15-1，音频处理器接收通话对端设备发送的通话下行数据；

S15-2，第一PCM设备从音频处理器获取通话下行数据；

S15-3，虚拟通话硬件管理模块从第一PCM设备读取通话下行数据，并将通话下行数据发送至第一终端的传输模块；

S15-4，第一终端的传输模块将通话下行数据发送至第二终端的传输模块；

S15-5，第二终端的传输模块将通话下行数据发给第二终端的音频设备；

S15-6，第二终端的音频设备播放通话下行数据。

其中，S15-1～S15-6，即为平板电脑播放通话另一方的声音的实现流程。

S16-1，第二终端的音频设备采集第一通话上行数据，并将第一通话上行数据传输至第二终端的传输模块；

S16-2，第二终端的传输模块将第一通话上行数据发送至第一终端的传输模块；

S16-3，第一终端的传输模块将第一通话上行数据发送至虚拟通话硬件管理模块；

S16-4，虚拟通话硬件管理模块将第一通话上行数据写入第二PCM设备；

S16-5，音频处理器从第二PCM设备中读取第一通话上行数据并发送至通话对端设备。

其中，S16-1～S16-5，即为平板电脑采集用户的声音，并通过手机发送至通话对端设备的实现流程。

上述各个模块之间的交互过程，即为虚拟通话场景下的通话流程。由于虚拟通话场景下的通话流程需要使用第一PCM设备，并且虚拟通话硬件管理模块禁止第一PCM设备从音频处理器中获取上行数据，故音频硬件管理模块将无法从第一PCM设备中读取到录音数据。因此，为了实现虚拟通话场景下的通话录音，上述通话流程还需要包括：

S17-1，虚拟通话硬件管理模块将通话下行数据和第一通话上行数据进行混音；

S17-2，虚拟通话硬件管理模块将混音后的数据存储至虚拟通话缓存区。

如图11所示，虚拟通话硬件管理模块将通话下行数据和第一通话上行数据进行混音，并将混音后的数据，即录音数据，存储到虚拟通话缓存区中，音频硬件管理模块即可从虚拟通话缓存区中读取录音数据，实现虚拟通话场景下的通话录音。

因此，请继续参照图12，前述S304中响应于用户的开启录音操作，第一终端获得录音数据的过程，可以包括：

S21，通话应用程序响应于开启录音操作，向音频服务类发送开启录音指令；

S22，音频服务类将开启录音指令发送至音频硬件管理模块；

S17-3，响应于接收开启录音指令，音频硬件管理模块从虚拟通话缓存区获取录音数据；

S17-4，音频硬件管理模块将录音数据发送至音频服务类；

S17-5，音频服务类将录音数据发送至通信应用程序。

S17-6，通信应用程序对录音数据进行存储。

在一些场景下，第一终端101还可以关闭虚拟通话，以将通话声音从第二终端102切换回第一终端101。

因此，在图5的基础上，请参照图13，在S304之后，本申请实施例提供的多屏协同的通话方法还可以包括S305～S306。

S305，在第一终端与第二终端连接且第二终端显示第一终端界面、以及用户通过第二终端与通话对端设备进行通话的情况下，响应于用户在第二终端中对第一终端界面的关闭操作，第一终端播放通话下行数据，并采集第二通话上行数据发送至通话对端设备。

在第一终端101与第二终端102多屏协同、且用户通过第二终端102与通话对端设备进行通话时，如果用户操作第二终端102断开与第一终端101的连接，则第一终端101关闭虚拟通话，将通话声音从第二终端102切换回第一终端101。

即，第一终端101接收通话对端设备发送的通话下行数据并进行播放，以及，采集第二通话上行数据发送至通话对端设备。第二通话上行数据是指第一终端101的收音设备(例如，麦克风)采集的用户声音。

也就是，第一终端101接收通话对端设备发送的通话另一方的声音，并通过放音设备(例如，扬声器)播放，同时，通过收音设备(例如，麦克风)采集用户的声音并发送至通话对端设备。

例如，请参照图14，用户正在通过平板电脑与通话另一方进行通话，并且手机与平板电脑正在多屏协同，即，手机与平板电脑连接且平板电脑显示手机界面401。用户先点击平板电脑的手机界面401中的多屏协同断开图标，平板电脑显示弹框404以提示用户确认是否断开手机与平板电脑的连接，用户再点击弹框404中的断开图标，则第一终端与第二终端断开连接，停止多屏协同。此时，通话另一方的声音从手机发出，同时，手机采集用户的声音发给通话另一方，用户通过手机与通话另一方通话。

S306，第一终端获得录音数据，其中，录音数据包括通话下行数据和第二通话上行数据。

第一终端101关闭虚拟通话后，通话声音从第二终端102切换回第一终端101，用户通过第二终端102与通话另一方进行对话，此时即为现有技术中第一终端101的通话流程。这种情形下，如果第一终端101仍然在通话录音，则录音数据包括通话下行数据和第二通话上行数据。

在第一终端101与第二终端102多屏协同、且用户通过第二终端102与通话对端设备进行通话时，如果用户操作第二终端102断开与第一终端101的连接，则第一终端101关闭虚拟通话，将通话声音从第二终端102切换回第一终端101。

上述介绍了第一终端101关闭虚拟通话的一种应用场景，除了上述应用场景外，在其它一些场景下，第一终端101也可以关闭虚拟通话，下面结合举例进行描述。

在一种可能的实现方式中，在图13的基础上，在S304之后，本申请实施例提供的一种多屏协同的通话方法还可以包括S305-1～S306。

S305-1，在第一终端与第二终端连接且第二终端显示第一终端界面、以及用户通过第二终端与通话对端设备进行通话的情况下，第一终端显示第二通知面板；

响应于用户在第一终端中对第二通知面板中断开图标的操作，第一终端播放通话下行数据，并采集第二通话上行数据发送至通话对端设备。

S306，第一终端获得录音数据，其中，录音数据包括通话下行数据和第二通话上行数据。

在第一终端101与第二终端102多屏协同、且用户通过第二终端102与通话对端设备进行通话时，如果用户操作第一终端101断开与第二终端102的连接，则第一终端101关闭虚拟通话，将通话声音从第二终端102切换回第一终端101。

例如，请参照图15，用户正在通过平板电脑与通话另一方进行通话，并且手机与平板电脑正在多屏协同，用户将手机的状态栏向下滑动，打开第二通知面板405，如果用户点击第二通知面板405中的“断开”图标，通话声音会从平板切换回手机，即，通话另一方的声音从手机发出，同时，手机采集用户的声音发给通话另一方，用户通过手机与通话另一方通话。

在另一种可能的实现方式中，在图13的基础上，在S304之后，本申请实施例提供的一种多屏协同的通话方法还可以包括S305-2～S306。

S305-2，在第一终端与第二终端连接且第二终端显示第一终端界面、以及用户通过第二终端与通话对端设备进行通话的情况下，第一终端显示第二通知面板；

响应于用户在第一终端中对第二通知面板中音视频切换图标的操作，第一终端播放通话下行数据，并采集第二通话上行数据发送至通话对端设备。

S306，第一终端获得录音数据，其中，录音数据包括通话下行数据和第二通话上行数据。

在第一终端101与第二终端102多屏协同、且用户通过第二终端102与通话对端设备进行通话时，如果用户操作第一终端101将音视频切换回第一终端101，则第一终端101关闭虚拟通话，将通话声音从第二终端102切换回第一终端101。

例如，请参照图16，用户正在通过平板电脑与通话另一方进行通话，并且手机与平板电脑正在多屏协同，用户将手机的状态栏向下滑动，打开第二通知面板405，如果用户点击第二通知面板405中的“音视频切换到手机”图标，通话声音会从平板切换回手机，即，通话另一方的声音从手机发出，同时，手机采集用户的声音发给通话另一方，用户通过手机与通话另一方通话。

在又一种可能的实现方式中，在图13的基础上，在S304之后，本申请实施例提供的一种多屏协同的通话方法还可以包括S305-3～S306。

S305-3，在第一终端与第二终端连接且第二终端显示第一终端界面、以及用户通过第二终端与通话对端设备进行通话的情况下，第二终端显示第二通知面板；

响应于用户在第二终端中对第二通知面板中音视频切换图标的操作，第一终端播放通话下行数据，并采集第二通话上行数据发送至通话对端设备。

S306，第一终端获得录音数据，其中，录音数据包括通话下行数据和第二通话上行数据。

在第一终端101与第二终端102多屏协同、且用户通过第二终端102与通话对端设备进行通话时，如果用户操作第二终端102将音视频切换回第一终端101，则第一终端101关闭虚拟通话，将通话声音从第二终端102切换回第一终端101。

例如，请参照图17，用户正在通过平板电脑与通话另一方进行通话，并且手机与平板电脑正在多屏协同，用户将平板电脑的状态栏向下滑动，打开第二通知面板405，如果用户点击第二通知面板405中的“音视频切换到手机”图标，通话声音会从平板切换回手机，即，通话另一方的声音从手机发出，同时，手机采集用户的声音发给通话另一方，用户通过手机与通话另一方通话。

当然，除了上述介绍的可能的实现方式外，本领域技术人员还可以设计其他实现方式关闭虚拟通话，例如，若第一终端101通过内置的接近度传感器检测到第一终端101靠近人耳，则关闭虚拟通话，本申请实施例对此不做任何限制。需要指出的是，上述在图5的基础上，对第一终端101关闭虚拟通话的应用场景进行介绍。本领域技术人员应当理解，上述的S305～S306、或者S305-1～S306、或者S305-2～S306、或者S305-3～S306，还能应用在前述介绍的S301-1～S304、或者S301-2～S304、或者S301-3～S304、或者S304-4～S304、或者S301-4～S304中的S304之后，本申请实施例对此不做任何限制。

第一终端101关闭虚拟通话后，需要使通话声音从第一终端101的扬声器和麦克风进行放音和收音，因此，虚拟通话硬件管理模块要解除第一终端101的扬声器和麦克风的禁用。同时，由于虚拟通话场景下，虚拟通话硬件管理模块禁止第一PCM设备从音频处理器中获取上行数据，所以，第一终端101关闭虚拟通话后，虚拟通话硬件管理模块还要取消禁止第一PCM设备从音频处理器中获取上行数据。

下面结合图18和图19，对第一终端101关闭虚拟通话、以及关闭虚拟通话后的通话和通话录音的详细实现进行介绍。

请参照图18，上述介绍的S305、S305-1、S302-2、S302-3和S302-3中第一终端播放通话下行数据，并采集第二通话上行数据发送至通话对端设备的过程，可以包括：

S31，通话应用程序响应于用户的关闭虚拟通话操作，向协同模块发送关闭虚拟通话指令。

其中，关闭虚拟通话操作，可以是图14～图17中的任一种，用于将通话声音从平板电脑切换回手机。

S32，协同模块将关闭虚拟通话指令发送至虚拟通话硬件管理模块。

S33，响应于接收关闭虚拟通话指令，虚拟通话硬件管理模块解除第一终端的音频设备的禁用，并取消禁止第一PCM设备获取上行数据。

S35-1，第一终端的音频设备采集第二通话上行数据，并将第二通话上行数据传输至音频处理器；

S35-2，音频处理器将第二通话上行数据发送至通话对端设备。

S36-1，音频处理器接收通话对端设备发送的通话下行数据，并传输至第一终端的音频设备；

S36-2，第一终端的音频设备播放通话下行数据。

请参照图19，第一终端101的扬声器播放通话另一方的声音，即，通话对端设备发送的通话下行数据，以及，第一终端101的麦克风采集用户的声音，即，第二通话上行数据。

上述各个模块之间的交互过程，即为第一终端101关闭虚拟通话后的通话流程。第一终端101关闭虚拟通话后的通话录音流程，在上述通话流程的基础上，还包括：

S37-1，第一PCM设备从音频处理器获取通话下行数据和第二通话上行数据，并进行混音。

如图19所示，音频硬件管理模块从第一PCM设备中读取通话下行数据和第二通话上行数据混音后的数据，即，录音数据，即可实现关闭虚拟通话后的通话录音。

因此，请继续参照图18，前述S306中第一终端获得录音数据的过程，可以包括：

S37-2，音频硬件管理模块从第一PCM设备读取录音数据；

S37-3，音频硬件管理模块将录音数据发送至音频服务类；

S37-4，音频服务类将录音数据发送至通信应用程序。

S37-5，通信应用程序对录音数据进行存储。

从图4介绍的现有电话功能的实现可知，第一终端101进行通话录音时，音频硬件管理模块需要打开第一PCM设备，并从第一PCM设备中读取通话上行数据和通话下行数据。从图11可知，虚拟通话场景下，虚拟通话硬件管理模块禁止第一PCM设备从音频处理器中获取上行数据，且虚拟通话硬件管理模块从第一PCM设备读取通话下行数据。显然，通话录音和虚拟通话都需要使用第一PCM设备，并且需要获取的数据不一样，所以可能会存在冲突。因此，在上述内容的基础上，下面对第一终端101开启或关闭录音的流程、以及第一终端101开启或关闭虚拟通话的流程进行介绍。

先介绍第一终端101开启录音的流程，前述S304中响应于用户的开启录音操作，第一终端获得录音数据的过程，可以包括S3041～S3045。

S3041，通话应用程序响应于开启录音操作，向音频服务类发送开启录音指令。

S3042，音频服务类将开启录音指令发送至音频硬件管理模块。

在本实施例中，音频硬件管理模块可以维护有录音标记位，录音标记位具有第一标识(例如，true)和第二标识(例如，false)，其中，第一标识表征第一终端101当前进行通话录音，第二标识表征第一终端101当前未进行通话录音。

例如，在第一终端101开启时，音频硬件管理模块可以对录音标记位进行初始化，将录音标记位置为第二状态。同时，在第一终端101开启通话录音时，音频硬件管理模块可以将录音标记位置为第一状态；以及，在第一终端101关闭通话录音时，音频硬件管理模块可以将录音标记位重新置为第二状态。

S3043，响应于接收开启录音指令，音频硬件管理模块判断第一终端当前是否进行虚拟通话。

音频硬件管理模块响应开启录音指令，首先判断第一终端101当前是否进行虚拟通话。例如，音频硬件管理模块判断第一终端101的音频设备是否禁用，如果禁用，则说明第一终端101当前进行虚拟通话；如果未禁用，则说明第一终端101当前未进行虚拟通话。又如，音频硬件管理模块判断第二PCM设备是否开启，如果开启，则说明第一终端101当前进行虚拟通话；如果未开启，则说明第一终端101当前未进行虚拟通话。本申请实施例对此不做任何限制。

音频硬件管理模块还可以通过检测虚拟通话标记位来判断第一终端101当前是否进行虚拟通话。在本实施例中，虚拟通话硬件管理模块维护有虚拟通话标记位，虚拟通话标记位具有第一状态(例如，true)和第二状态(例如，false)，其中，第一状态表征第一终端101当前进行虚拟通话，第二状态表征第一终端101当前未进行虚拟通话。

例如，在第一终端101开启多屏协同时，虚拟通话硬件管理模块可以对虚拟通话标记位进行初始化，将虚拟通话标记位置为第二状态。同时，在第一终端101开启虚拟通话时，虚拟通话硬件管理模块可以将虚拟通话标记位置为第一状态；以及，在第一终端101关闭虚拟通话时，虚拟通话硬件管理模块可以将虚拟通话标记位重新置为第二状态。

因此，S3043中音频硬件管理模块判断第一终端当前是否进行虚拟通话的过程，可以包括：

音频硬件管理模块检测所述虚拟通话标记位；若虚拟通话标记位处于第一状态，则第一终端当前进行虚拟通话；若虚拟通话标记位处于第二状态，则第一终端当前未进行虚拟通话。

S3044，若第一终端当前进行虚拟通话，音频硬件管理模块从虚拟通话缓存区获取录音数据，其中，录音数据是虚拟通话硬件管理模块将通话下行数据和第一通话上行数据进行混音后存储的。

如果用户开启通话录音时，第一终端101正在进行虚拟通话，即，如图20所示，第一PCM设备从音频处理器中获取通话下行数据、以及音频处理器从第二PCM设备中读取第一通话上行数据。由于第一PCM设备正在使用，并且虚拟通话硬件管理模块禁止第一PCM设备从音频处理器中获取上行数据，故音频硬件管理模块将无法从第一PCM设备中读取到录音数据。因此，如图11所示，虚拟通话硬件管理模块还需要将通话下行数据和第一通话上行数据进行混音，并将混音后的数据，即录音数据，存储到虚拟通话缓存区中，音频硬件管理模块即可从虚拟通话缓存区中读取录音数据。

S3045，若第二终端当前未进行虚拟通话，音频硬件管理模块打开第一PCM设备，并从第一PCM设备读取录音数据，其中，录音数据是第一PCM设备从音频处理器获取通话下行数据和第二通话上行数据并进行混音得到的。

如果用户开启通话录音时，第一终端101正在进行通话，即，如图21所示，音频处理器接收通话对端设备发送的通话下行数据并发送至扬声器进行播放，以及，音频处理器获取麦克风采集的第二通话上行数据并发送至通话对端设备。由于第一PCM设备未使用，故如图19所示，音频硬件管理模块需要打开第一PCM设备，并设置第一PCM设备从音频处理器中获取通话下行数据和第二通话上行数据并进行混音，音频硬件管理模块再从第一PCM设备中读取录音数据。

为了更好的对上述S3041～S3045的过程进行说明，下面通过图22所示的交互示意图进行描述，如图22所示，第一终端101开启录音的过程，可以包括：

S21，当用户执行开启录音操作时，例如，用户点击通话界面中的“录音”图标，通话应用程序响应开启录音操作产生开启录音指令，并将开启录音指令下发至音频服务类；

S22，音频服务类将开启录音指令下发至音频硬件管理模块；

S23，音频硬件管理模块打开第一PCM设备，其中，音频硬件管理模块可以选择usecase_incall_rec_uplink_and_downlink指定第一PCM设备；

S24，音频硬件管理模块将录音标记位置为true；

S25，音频硬件管理模块检测虚拟通话标记位；

S26，如果音频硬件管理模块检测到虚拟通话标记位为true，则音频硬件管理模块从虚拟通话缓存区中获取录音数据，并将录音数据发送至音频服务类，再由音频服务类发送至通话应用程序，由通话应用程序进行存储；

其中，虚拟通话缓存区中的音频数据，是虚拟通话硬件管理模块将通话下行数据和第一通话上行数据进行混音后存储的，详细实现可以参见图12，在此不再赘述。

S27，如果音频硬件管理模块检测到虚拟通话标记位为false，则音频硬件管理模块从第一PCM设备中读取录音数据，并将录音数据发送至音频服务类，再由音频服务类发送至通话应用程序，由通话应用程序进行存储。

其中，第一PCM设备中的音频数据，是第一PCM设备将通话下行数据和第二通话上行数据进行混音后得到的，详细实现可以参见图18，在此不再赘述。

再介绍第一终端101关闭录音的流程，在上述S3041～S3045之后，本申请实施例提供的多屏协同的通话方法还可以包括S304a～S304e。

S304a，通话应用程序响应于用户的关闭录音操作，向音频服务类发送关闭录音指令。

在第一终端101进行通话录音的过程中，如果用户再次点击通话界面中的“录音”图标，则触发关闭通话录音的流程。

S304b，音频服务类将关闭录音指令发送至音频硬件管理模块。

S304c，响应于接收关闭录音指令，音频硬件管理模块判断第一终端当前是否进行虚拟通话。

在本实施例中，S304c中音频硬件管理模块判断第一终端当前是否进行虚拟通话的过程，与上述S3043中的类似，在此不再赘述。

S304d，若第一终端当前进行虚拟通话，音频硬件管理模块不关闭第一PCM设备，并停止从虚拟通话缓存区获取所述录音数据。

如果用户关闭通话录音时，第一终端101正在进行虚拟通话，由于虚拟通话需要使用第一PCM设备，故音频硬件管理模块不关闭第一PCM设备，并停止从虚拟通话缓存区读取录音数据，即从图11所示的数据流向图切换为图20所示的数据流向图。

S304e，若第一终端当前未进行虚拟通话，音频硬件管理模块关闭第一PCM设备，并停止从第一PCM设备中获取录音数据。

如果用户关闭通话录音时，第一终端101正在进行通话，由于通话无需使用第一PCM设备，故音频硬件管理模块关闭第一PCM设备，并停止从第一PCM设备读取录音数据，即从图19所示的数据流向图切换为图21所示的数据流向图。

为了更好的对上述S304a～S304e的过程进行说明，请继续参照图22，第一终端101关闭录音的过程，可以包括：

S41，当用户执行关闭录音操作时，例如，用户再次点击通话界面中的“录音”图标，通话应用程序响应该操作产生关闭录音指令，并将该关闭录音指令下发至音频服务类；

S42，音频服务类将关闭录音指令下发至音频硬件管理模块；

S43，音频硬件管理模块检测虚拟通话标记位；

S44，如果音频硬件管理模块检测到虚拟通话标记位为true，则音频硬件管理模块将录音标记位置为false；

S45，如果音频硬件管理模块检测到虚拟通话标记位为false，则音频硬件管理模块关闭第一PCM设备，再将录音标记位置为false。

上述图22介绍的内容，涉及到第一终端101开启通话录音时，可能已经处于虚拟通话中的场景；以及，第一终端101关闭通话录音时，可能仍处于虚拟通话中的场景。

而本领域技术人员应当理解，在一些场景下，第一终端101在开启虚拟通话时，可能已经处于通话录音中；或者，第一终端101在关闭虚拟通话时，可能仍然已经处于通话录音中。例如，结合到图8，用户正在通过手机与通话另一方通话，并且手机正在录音，用户点击手机上显示的“连接”图标进行多屏协同连接，手机开启虚拟通话。又如，结合到图15，手机与平板电脑正在进行多屏协同，并且用户正在通过手机与通话另一方通话，同时手机正在录音，用户点击手机上显示的“断开”图标，手机关闭虚拟通话。

因此，还需要考虑第一终端101开启或关闭虚拟通话的流程。

先介绍第一终端101开启虚拟通话的流程，S302、S302-1、S302-2、S302-3和S302-3中第一终端接收通话对端设备发送的通话下行数据并发送至第二终端，第二终端播放通话下行数据的过程，以及S303中第二终端采集第一通话上行数据，并通过第一终端将第一通话上行数据发送至通话对端设备的过程，可以包括S3021～S3025。

S3021，通话应用程序响应于用户的操作，向协同模块发送开启虚拟通话指令。

S3022，协同模块将所述开启虚拟通话指令发送至虚拟通话硬件管理模块。S3023，响应于接收开启虚拟通话指令，虚拟通话硬件管理模块判断第一终端当前是否进行通话录音。

虚拟通话硬件管理模块可以通过S3042中介绍的录音标记位来判断第一终端101当前是否进行通话录音，即，S3023中虚拟通话硬件管理模块判断第一终端当前是否进行通话录音的过程，可以包括：

虚拟通话硬件管理模块检测录音标记位；若录音标记位处于第一标识，则第一终端当前进行通话录音；若录音标记位处于第二标识，则第一终端当前未进行通话录音。

S3024，若第一终端当前进行通话录音，虚拟通话硬件管理模块禁用第一终端的音频设备，以及，打开第一PCM设备并禁止第一PCM设备获取上行数据，以及，从第一PCM设备读取通话下行数据发送至第一终端的传输模块，以及，接收第一终端的传输模块发送的第一通话上行数据并写入第二PCM设备，以及，将通话下行数据和第一通话上行数据进行混音得到录音数据并存储至虚拟通话缓存区。

如果用户开启虚拟通话时，第一终端101正在进行通话录音，即，如图19所示，音频处理器接收通话对端设备发送的通话下行数据并发送至扬声器进行播放，以及，音频处理器获取麦克风采集的第二通话上行数据并发送至通话对端设备，第一PCM设备从音频处理器中获取通话下行数据和第二通话上行数据。

由于虚拟通话需要将通话声音从第一终端101切换到第二终端102，通话录音需要音频硬件管理模块获取录音数据，即，如图11所示，虚拟通话硬件管理模块需要禁用本地的音频设备、以及禁止第一PCM设备从音频处理器中获取上行数据，之后，虚拟通话硬件管理模块从第一PCM设备中读取通话下行数据，以及，将第一通话上行数据写入第二PCM设备，以及，将通话下行数据和第一通话上行数据进行混音得到录音数据并存储至虚拟通话缓存区。

S3025，若第一终端当前未进行通话录音，虚拟通话硬件管理模块禁用第一终端的音频设备，以及，打开第一PCM设备并禁止第一PCM设备获取上行数据，以及，从第一PCM设备读取通话下行数据发送至第一终端的传输模块，以及，接收第一终端的传输模块发送的第一通话上行数据并写入第二PCM设备。

如果用户开启虚拟通话时，第一终端101正在进行通话，即，如图21所示，音频处理器接收通话对端设备发送的通话下行数据并发送至扬声器进行播放，以及，音频处理器获取麦克风采集的第二通话上行数据并发送至通话对端设备。

由于虚拟通话需要将通话声音从第一终端101切换到第二终端102，即，如图20所示，虚拟通话硬件管理模块需要禁用本地的音频设备、以及禁止第一PCM设备从音频处理器中获取上行数据，之后，虚拟通话硬件管理模块从第一PCM设备中读取通话下行数据，以及，将第一通话上行数据写入第二PCM设备。

为了更好的对上述S3021～S3025的过程进行说明，下面通过图23所示的交互示意图进行描述，如图23所示，第一终端101开启虚拟通话的过程，可以包括：

S11，当用户执行开启虚拟通话操作时，例如，用户执行图6～10中的任一种操作，通话应用程序响应开启虚拟通话操作产生开启虚拟通话指令，并将开启虚拟通话指令下发至协同模块；

S12，协同模块将开启虚拟通话指令下发至虚拟通话硬件管理模块；

S1a，虚拟通话硬件管理模块将虚拟通话标记位置为true；

S13，虚拟通话硬件管理模块禁用第一终端的音频设备、打开第一PCM设备并禁止第一PCM设备获取上行数据；其中，虚拟通话硬件管理模块可以选择usecase_incall_rec_uplink_and_downlink指定第一PCM设备，并禁止第一PCM设备获取上行数据；

S15-1～S15-3，音频处理器接收通话对端设备发送的通话下行数据，第一PCM设备从音频处理器获取通话下行数据，虚拟通话硬件管理模块从第一PCM设备读取通话下行数据；

S16-1～S16-3，第二终端的音频设备采集第一通话上行数据，并将第一通话上行数据传输至第二终端的传输模块，第二终端的传输模块将第一通话上行数据发送至第一终端的传输模块，第一终端的传输模块将第一通话上行数据发送至虚拟通话硬件管理模块；

S1b，虚拟通话硬件管理模块检测录音标记位；

S1c，如果虚拟通话硬件管理模块检测到录音标记位为true，则执行：

S17-1～S17-2，虚拟通话硬件管理模块将第一通话上行数据和通话下行数据混音，并将混音后的数据存储至虚拟通话缓存区；以及，S15-4～S15-6，第一终端的传输模块将通话下行数据发送至第二终端的传输模块，第二终端的传输模块将通话下行数据发给第二终端的音频设备，第二终端的音频设备播放通话下行数据；以及，S16-4～S16-5，虚拟通话硬件管理模块将第一通话上行数据写入第二PCM设备，音频处理器从第二PCM设备中读取第一通话上行数据并发送至通话对端设备。

S1d，如果虚拟通话硬件管理模块检测到录音标记位为false，则执行：

S15-4～S15-6，第一终端的传输模块将通话下行数据发送至第二终端的传输模块，第二终端的传输模块将通话下行数据发给第二终端的音频设备，第二终端的音频设备播放通话下行数据；以及，S16-4～S16-5，虚拟通话硬件管理模块将第一通话上行数据写入第二PCM设备，音频处理器从第二PCM设备中读取第一通话上行数据并发送至通话对端设备。

可选地，虚拟通话硬件管理模块可以将通话下行数据和第一通话上行数据分别写入两个缓存区中，再按顺序依次从该两个缓存区中读取第i个通话下行数据和第i个第一通话上行数据进行相加，即可完成混音。

再介绍第一终端101关闭虚拟通话的流程，在上述S3021～S3025之后，本申请实施例提供的多屏协同的通话方法还可以包括S302a～S302e。

S302a，通话应用程序响应于用户的操作，向协同模块发送关闭虚拟通话指令。

S302b，协同模块将关闭虚拟通话指令发送至虚拟通话硬件管理模块。

S302c，响应于接收关闭虚拟通话指令，虚拟通话硬件管理模块判断第一终端当前是否进行通话录音。

在本实施例中，S302c中虚拟通话硬件管理模块判断第一终端当前是否进行通话录音的过程，与上述S3023中的类似，在此不再赘述。

S302d，若第一终端当前进行通话录音，虚拟通话硬件管理模块解除第一终端的音频设备的禁用，并取消禁止第一PCM设备获取上行数据。

如果用户关闭虚拟通话时，第一终端101正在进行通话录音，由于通话录音需要使用第一PCM设备，并且第一PCM设备需要获取上行数据和下行数据，故虚拟通话硬件管理模块解除本地音频设备的禁用、以及取消禁止第一PCM设备从音频处理器中获取上行数据，即从图11所示的数据流向图切换为图19所示的数据流向图。

S302e，若第一终端当前未进行通话录音，虚拟通话硬件管理模块解除第一终端的音频设备的禁用，并关闭第一PCM设备。

如果用户关闭虚拟通话时，第一终端101正在进行通话，由于通话不需要使用第一PCM设备，故虚拟通话硬件管理模块解除本地音频设备的禁用、以及关闭第一PCM设备，即从图20所示的数据流向图切换为图21所示的数据流向图。

为了更好的对上述S302a～S302e的过程进行说明，请继续参照图23，第一终端101关闭虚拟通话的过程，可以包括：

S31，当用户执行关闭虚拟通话操作时，例如，用户执行图14～图17中的任一种操作，通话应用程序响应该操作产生关闭虚拟通话指令，并将该关闭虚拟通话指令下发至协同模块；

S32，协同模块将关闭虚拟通话指令下发至虚拟通话硬件管理模块；

S3a，虚拟通话硬件管理模块检测录音标记位；

S3b，如果虚拟通话硬件管理模块检测到录音标记位为true，则执行：

S33，虚拟通话硬件管理模块取消禁止第一PCM设备获取上行数据，并解除禁用第一终端的音频设备；以及，S35-1～S35-2，第一终端的音频设备采集第二通话上行数据，并将第二通话上行数据传输至音频处理器，音频处理器将第二通话上行数据发送至通话对端设备；以及，S36-1～S36-2，音频处理器接收通话对端设备发送的通话下行数据，并传输至第一终端的音频设备进行播放；以及，S37-1～S37-2，第一PCM设备从音频处理器获取通话下行数据和第二通话上行数据，并进行混音；以及，S3c，虚拟通话硬件管理模块将虚拟通话标记位置为false。

S3d，如果虚拟通话硬件管理模块检测到录音标记位为false，则执行：

S3e，虚拟通话硬件管理模块关闭第一PCM设备；以及，S33，虚拟通话硬件管理模块解除禁用麦克风和扬声器，S35-1～S35-2，第一终端的音频设备采集第二通话上行数据，并将第二通话上行数据传输至音频处理器，音频处理器将第二通话上行数据发送至通话对端设备；以及，S36-1～S36-2，音频处理器接收通话对端设备发送的通话下行数据，并传输至第一终端的音频设备进行播放；S3f，虚拟通话硬件管理模块将虚拟通话标记位置为false。

以上介绍了本申请实施例中应用于多屏协同的通话系统100的多屏协同的通话方法，下面再对应用于第一终端101和第二终端102的多屏协同的通话方法分别进行介绍。

本申请实施例还提供一种多屏协同的通话方法，该多屏协同的通话方法应用于第一终端101，例如手机，该多屏协同的通话方法可以包括：

S401，第一终端接收通话对端设备的来电，其中，第一终端与第二终端连接且第二终端显示第一终端界面；

S402，响应于用户在第二终端中对第一终端界面的接听来电操作，接收通话对端设备发送的通话下行数据并发送至第二终端，以使第二终端播放通话下行数据；

S403，接收第二终端采集的第一通话上行数据，并将第一通话上行数据发送至通话对端设备；

S404，响应于用户的开启录音操作，获得录音数据，其中，录音数据包括通话下行数据和所述第一通话上行数据。

上述S401～S404的详细实现可以参见前文实施例的描述，在此不再赘述。

本申请实施例还提供一种多屏协同的通话方法，该多屏协同的通话方法应用于第二终端102，例如平板电脑，该多屏协同的通话方法可以包括：

S501，接收第一终端发送的通话下行数据并进行播放，其中，通话下行数据是在第一终端与第二终端连接且第二终端显示第一终端界面的情况下，第一终端接收通话对端设备的来电并响应于用户在第二终端中对第一终端界面的接听来电操作后，通话对端设备发送至第一终端的；

S502，第二终端采集第一通话上行数据，并通过第一终端将第一通话上行数据发送至通话对端设备，以使第一终端响应于用户的开启录音操作，获得录音数据，其中，录音数据包括通话下行数据和第一通话上行数据。

上述S501～S502的详细实现可以参见前文实施例的描述，在此不再赘述。

本申请实施例还提供了一种终端，如图24所示，该终端600可以包括：一个或多个处理器601、存储器602、音频设备603和显示屏604，处理器601、存储器602、音频设备603和显示屏604耦合。其中，终端600包括第一终端101或第二终端102，存储器602用于存储计算机程序代码，该计算机程序代码包括计算机指令。当处理器执行计算机指令时，终端600可执行上述方法实施例中第一终端101执行的各个功能或者步骤，或者，上述方法实施例中第二终端102执行的各个功能或者步骤。

存储器602可能包括高速随机存取存储器(Random Access Memory，RAM)，也可能还包括非易失存储器(non-volatile memory，NVM)。

处理器601可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法实施例的各步骤可以通过处理器601中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器601可以是通用处理器，包括中央处理器(Central Processing Unit，简称CPU)、微控制单元(Microcontroller Unit，MCU)、复杂可编程逻辑器件(ComplexProgrammable Logic Device，CPLD)、现场可编程门阵列(Field－Programmable GateArray，FPGA)、嵌入式ARM等芯片。

本申请实施例还提供一种芯片系统，该芯片系统括至少一个处理器和至少一个接口电路。处理器和接口电路可通过线路互联。例如，接口电路可用于从其它装置(例如终端的存储器)接收信号。又例如，接口电路可用于向其它装置(例如处理器)发送信号。示例性的，接口电路可读取存储器中存储的指令，并将该指令发送给处理器。当所述指令被处理器执行时，可使得终端执行上述实施例中的各个步骤。当然，该芯片系统还可以包含其他分立器件，本申请实施例对此不作具体限定。

本申请实施例还提供一种计算机存储介质，该计算机存储介质包括计算机指令，当所述计算机指令在上述终端上运行时，使得该终端执行上述方法实施例中第一终端101执行的各个功能或者步骤，或者，上述方法实施例中第二终端102执行的各个功能或者步骤。

本申请实施例还提供一种计算机程序产品，当所述计算机程序产品在计算机上运行时，使得所述计算机执行上述方法实施例中第一终端101执行的各个功能或者步骤，或者，上述方法实施例中第二终端102执行的各个功能或者步骤。

在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个可读取存储介质中。基于这样的理解，本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该软件产品存储在一个存储介质中，包括若干指令用以使得一个设备(可以是单片机，芯片等)或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(read only memory，ROM)、随机存取存储器(random access memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，仅为本申请实施例的具体实施方式，但本申请实施例的保护范围并不局限于此，任何在本申请实施例揭露的技术范围内的变化或替换，都应涵盖在本申请实施例的保护范围之内。因此，本申请实施例的保护范围应以所述权利要求的保护范围为准。

Claims (28)

1.一种多屏协同的通话方法，其特征在于，所述方法包括：

在第一终端与第二终端连接且所述第二终端显示第一终端界面的情况下，所述第一终端接收通话对端设备的来电；

响应于用户在所述第二终端中对所述第一终端界面的接听来电操作，所述第一终端接收通话对端设备发送的通话下行数据并发送至所述第二终端，所述第二终端播放所述通话下行数据；

所述第二终端采集第一通话上行数据，并通过所述第一终端将所述第一通话上行数据发送至所述通话对端设备；

响应于用户的开启录音操作，所述第一终端获得录音数据，其中，所述录音数据包括所述通话下行数据和所述第一通话上行数据。

2.如权利要求1所述的方法，其特征在于，所述方法还包括：

在第一终端与第二终端连接且所述第二终端显示第一终端界面的情况下，响应于用户在所述第二终端中对所述第一终端界面的拨打电话操作，所述第一终端呼叫所述通话对端设备；

在所述通话对端设备接通后，所述第一终端接收通话对端设备发送的通话下行数据并发送至所述第二终端，所述第二终端播放所述通话下行数据；

所述第二终端采集第一通话上行数据，并通过所述第一终端将所述第一通话上行数据发送至所述通话对端设备。

3.如权利要求1所述的方法，其特征在于，所述方法还包括：

在所述第一终端与所述通话对端设备进行通话的情况下，所述第一终端显示弹框，其中，所述弹框用于提示用户将所述第一终端和所述第二终端多屏协同；

响应于用户对所述弹框中连接图标的操作，所述第一终端与所述第二终端连接且所述第二终端显示第一终端界面，所述第一终端接收通话对端设备发送的通话下行数据并发送至所述第二终端，所述第二终端播放所述通话下行数据；

所述第二终端采集第一通话上行数据，并通过所述第一终端将所述第一通话上行数据发送至所述通话对端设备。

4.如权利要求1所述的方法，其特征在于，所述方法还包括：

在所述第一终端与所述通话对端设备进行通话、以及所述第一终端与所述第二终端连接且所述第二终端显示第一终端界面的情况下，所述第一终端显示第一通知面板；

响应于用户在所述第一终端中对所述第一通知面板中音视频切换图标的操作，所述第一终端接收通话对端设备发送的通话下行数据并发送至所述第二终端，所述第二终端播放所述通话下行数据；

所述第二终端采集第一通话上行数据，并通过所述第一终端将所述第一通话上行数据发送至所述通话对端设备。

5.如权利要求1所述的方法，其特征在于，所述方法还包括：

在所述第一终端与所述通话对端设备进行通话、以及所述第一终端与所述第二终端连接且所述第二终端显示第一终端界面的情况下，所述第二终端显示第一通知面板；

响应于用户在所述第二终端中对所述第一通知面板中音视频切换图标的操作，所述第一终端接收通话对端设备发送的通话下行数据并发送至所述第二终端，所述第二终端播放所述通话下行数据；

所述第二终端采集第一通话上行数据，并通过所述第一终端将所述第一通话上行数据发送至所述通话对端设备。

6.如权利要求1-5任一项所述的方法，其特征在于，所述第一终端包括：音频处理器、第一PCM设备和虚拟通话硬件管理模块；

所述第一终端接收通话对端设备发送的通话下行数据并发送至所述第二终端，所述第二终端播放所述通话下行数据的步骤，包括：

所述音频处理器接收所述通话对端设备发送的所述通话下行数据；

所述第一PCM设备从所述音频处理器中获取所述通话下行数据；

所述虚拟通话硬件管理模块将所述通话下行数据发送至所述第二终端，所述第二终端播放所述通话下行数据。

7.如权利要求6所述的方法，其特征在于，所述第一终端还包括：第二PCM设备；

所述第二终端采集第一通话上行数据，并通过所述第一终端将所述第一通话上行数据发送至所述通话对端设备的步骤，包括：

所述第二终端采集第一通话上行数据，并将所述第一通话上行数据发送至所述虚拟通话硬件管理模块；

所述虚拟通话硬件管理模块将所述第一通话上行数据写入所述第二PCM设备；

所述音频处理器从所述第二PCM设备中读取所述第一通话上行数据并发送至所述通话对端设备。

8.如权利要求7所述的方法，其特征在于，所述第一终端还包括：虚拟通话缓存区和音频硬件管理模块；

所述第一终端接收通话对端设备发送的通话下行数据并发送至所述第二终端，所述第二终端播放所述通话下行数据的步骤，还包括：

所述虚拟通话硬件管理模块禁止所述第一PCM设备从所述音频处理器中获取所述第一通话上行数据；

所述响应于用户的开启录音操作，所述第一终端获得录音数据的步骤，包括：

响应于用户的开启录音操作，所述音频硬件管理模块从所述虚拟通话缓存区获取所述录音数据，其中，所述录音数据是所述虚拟通话硬件管理模块将所述通话下行数据和所述第一通话上行数据进行混音后存储的。

9.如权利要求1-5任一项所述的方法，其特征在于，所述方法还包括：

在第一终端与第二终端连接且所述第二终端显示第一终端界面、以及用户通过所述第二终端与所述通话对端设备进行通话的情况下，响应于用户在所述第二终端中对所述第一终端界面的关闭操作，所述第一终端播放所述通话下行数据，并采集第二通话上行数据发送至所述通话对端设备；

所述第一终端获得录音数据，其中，所述录音数据包括所述通话下行数据和所述第二通话上行数据。

10.如权利要求9所述的方法，其特征在于，所述方法还包括：

在第一终端与第二终端连接且所述第二终端显示第一终端界面、以及用户通过所述第二终端与所述通话对端设备进行通话的情况下，所述第一终端显示第二通知面板；

响应于用户在所述第一终端中对所述第二通知面板中断开图标的操作，所述第一终端播放所述通话下行数据，并采集第二通话上行数据发送至所述通话对端设备。

11.如权利要求9所述的方法，其特征在于，所述方法还包括：

在第一终端与第二终端连接且所述第二终端显示第一终端界面、以及用户通过所述第二终端与所述通话对端设备进行通话的情况下，所述第一终端显示第二通知面板；

响应于用户在所述第一终端中对所述第二通知面板中音视频切换图标的操作，所述第一终端播放所述通话下行数据，并采集第二通话上行数据发送至所述通话对端设备。

12.如权利要求9所述的方法，其特征在于，所述方法还包括：

在第一终端与第二终端连接且所述第二终端显示第一终端界面、以及用户通过所述第二终端与所述通话对端设备进行通话的情况下，所述第二终端显示第二通知面板；

响应于用户在所述第二终端中对所述第二通知面板中音视频切换图标的操作，所述第一终端播放所述通话下行数据，并采集第二通话上行数据发送至所述通话对端设备。

13.如权利要求9所述的方法，其特征在于，所述方法还包括：

在第一终端与第二终端连接且所述第二终端显示第一终端界面、以及用户通过所述第二终端与所述通话对端设备进行通话的情况下，若所述第一终端检测到自身靠近人耳，则所述第一终端播放所述通话下行数据，并采集第二通话上行数据发送至所述通话对端设备。

14.如权利要求10-13任一项所述的方法，其特征在于，所述第一终端包括：音频设备和音频处理器；

所述第一终端播放所述通话下行数据，并采集第二通话上行数据发送至所述通话对端设备的步骤，包括：

所述音频处理器接收所述通话下行数据并通过所述第一终端的音频设备进行播放，以及，获取所述第一终端的音频设备采集的所述第二通话上行数据并发送至所述通话对端设备。

15.如权利要求14所述的方法，其特征在于，所述第一终端还包括：虚拟通话硬件管理模块、第一PCM设备和音频硬件管理模块；

所述第一终端播放所述通话下行数据，并采集第二通话上行数据发送至所述通话对端设备的步骤，还包括：

所述虚拟通话硬件管理模块取消禁止所述第一PCM设备获取上行数据；

所述第一终端获得录音数据的步骤，包括：

所述音频硬件管理模块从所述第一PCM设备读取所述录音数据，其中，所述录音数据是所述第一PCM设备从所述音频处理器获取所述通话下行数据和所述第二通话上行数据并进行混音得到的。

16.如权利要求10-13任一项所述的方法，其特征在于，所述第一终端包括：音频硬件管理模块、虚拟通话缓存区、虚拟通话硬件管理模块、第一PCM设备和音频处理器；

所述响应于用户的开启录音操作，所述第一终端获得录音数据的步骤，包括：

响应于用户的开启录音操作，所述音频硬件管理模块判断所述第一终端当前是否进行虚拟通话；

若所述第一终端当前进行虚拟通话，所述音频硬件管理模块从所述虚拟通话缓存区获取所述录音数据，其中，所述录音数据是所述虚拟通话硬件管理模块将所述通话下行数据和所述第一通话上行数据进行混音后存储的；

若所述第二终端当前未进行虚拟通话，所述音频硬件管理模块打开所述第一PCM设备，并从所述第一PCM设备读取所述录音数据，其中，所述录音数据是所述第一PCM设备从所述音频处理器获取所述通话下行数据和所述第二通话上行数据并进行混音得到的。

17.如权利要求16所述的方法，其特征在于，所述方法还包括：

响应于用户的关闭录音操作，所述音频硬件管理模块判断所述第一终端当前是否进行虚拟通话；

若所述第一终端当前进行虚拟通话，所述音频硬件管理模块不关闭所述第一PCM设备，并停止从所述虚拟通话缓存区获取所述录音数据；

若所述第一终端当前未进行虚拟通话，所述音频硬件管理模块关闭所述第一PCM设备，并停止从所述第一PCM设备中获取所述录音数据。

18.如权利要求17所述的方法，其特征在于，所述虚拟通话硬件管理模块维护有虚拟通话标记位，虚拟通话标记位具有第一状态和第二状态，所述第一状态表征所述第一终端当前进行虚拟通话，所述第二状态表征所述第一终端当前未进行虚拟通话；

所述音频硬件管理模块判断所述第一终端当前是否进行虚拟通话的步骤，包括：

所述音频硬件管理模块检测所述虚拟通话标记位；

若所述虚拟通话标记位处于所述第一状态，则所述第一终端当前进行虚拟通话；

若所述虚拟通话标记位处于所述第二状态，则所述第一终端当前未进行虚拟通话。

19.如权利要求18所述的方法，其特征在于，所述音频硬件管理模块维护有录音标记位；

所述方法还包括：

响应于用户的开启录音操作，所述音频硬件管理模块将所述录音标记位置为第一标识，所述第一标识表征所述第一终端当前进行通话录音；

响应于用户的关闭录音操作，所述音频硬件管理模块将所述录音标记位置为第二标识，其中，所述第二标识表征所述第一终端当前未进行通话录音。

20.如权利要求10-13任一项所述的方法，其特征在于，所述第一终端包括：虚拟通话硬件管理模块、第一PCM设备、第二PCM设备、虚拟通话缓存区和音频设备；

所述第一终端接收通话对端设备发送的通话下行数据并发送至所述第二终端，所述第二终端播放所述通话下行数据，以及，所述第二终端采集第一通话上行数据，并通过所述第一终端将所述第一通话上行数据发送至所述通话对端设备的步骤，包括：

响应于用户的开启虚拟通话操作，所述虚拟通话硬件管理模块判断所述第一终端当前是否进行通话录音；

若所述第一终端当前进行通话录音，所述虚拟通话硬件管理模块禁用所述第一终端的音频设备，以及，打开所述第一PCM设备并禁止所述第一PCM设备获取上行数据，以及，从第一PCM设备读取所述通话下行数据发送至所述第二终端，以及，接收所述第二终端发送的所述第一通话上行数据并写入所述第二PCM设备，以及，将所述通话下行数据和所述第一通话上行数据进行混音得到所述录音数据并存储至所述虚拟通话缓存区；

若所述第一终端当前未进行通话录音，所述虚拟通话硬件管理模块禁用所述第一终端的音频设备，以及，打开所述第一PCM设备并禁止所述第一PCM设备获取上行数据，以及，从第一PCM设备读取所述通话下行数据发送至所述第二终端，以及，接收所述第二终端发送的所述第一通话上行数据并写入所述第二PCM设备。

21.如权利要求20所述的方法，其特征在于，所述第一终端播放所述通话下行数据，并采集第二通话上行数据发送至所述通话对端设备的步骤，包括：

响应于用户的关闭虚拟通话操作，所述虚拟通话硬件管理模块判断所述第一终端当前是否进行通话录音；

若所述第一终端当前进行通话录音，所述虚拟通话硬件管理模块解除所述第一终端的音频设备的禁用，并取消禁止所述第一PCM设备获取上行数据；

若所述第一终端当前未进行通话录音，所述虚拟通话硬件管理模块解除所述第一终端的音频设备的禁用，并关闭所述第一PCM设备。

22.如权利要求20所述的方法，其特征在于，所述第一终端还包括音频硬件管理模块，所述音频硬件管理模块维护有录音标记位，所述录音标记位具有第一标识和第二标识，所述第一标识表征所述第一终端当前进行通话录音，所述第二标识表征所述第一终端当前未进行通话录音；

所述虚拟通话硬件管理模块判断所述第一终端当前是否进行通话录音的步骤，包括：

所述虚拟通话硬件管理模块检测所述录音标记位；

若所述录音标记位处于所述第一标识，则所述第一终端当前进行通话录音；

若所述录音标记位处于所述第二标识，则所述第一终端当前未进行通话录音。

23.如权利要求22所述的方法，其特征在于，所述虚拟通话硬件管理模块维护有虚拟通话标记位，所述方法还包括：

响应于用户的开启虚拟通话操作，所述虚拟通话硬件管理模块将所述虚拟通话标记位置为第一状态，所述第一状态表征所述第一终端当前进行虚拟通话；

响应于用户的关闭虚拟通话操作，所述虚拟通话硬件管理模块将所述虚拟通话标记位置为第二状态，所述第二状态表征所述第一终端当前未进行虚拟通话。

24.一种多屏协同的通话方法，其特征在于，应用于第一终端，所述方法包括：

所述第一终端接收通话对端设备的来电，其中，所述第一终端与第二终端连接且所述第二终端显示第一终端界面；

响应于用户在所述第二终端中对所述第一终端界面的接听来电操作，接收通话对端设备发送的通话下行数据并发送至所述第二终端，以使所述第二终端播放所述通话下行数据；

接收所述第二终端采集的第一通话上行数据，并将所述第一通话上行数据发送至所述通话对端设备；

响应于用户的开启录音操作，获得录音数据，其中，所述录音数据包括所述通话下行数据和所述第一通话上行数据。

25.一种多屏协同的通话方法，其特征在于，应用于第二终端，所述方法包括：

接收第一终端发送的通话下行数据并进行播放，其中，所述通话下行数据是在所述第一终端与所述第二终端连接且所述第二终端显示第一终端界面的情况下，所述第一终端接收通话对端设备的来电并响应于用户在所述第二终端中对所述第一终端界面的接听来电操作后，通话对端设备发送至所述第一终端的；

所述第二终端采集第一通话上行数据，并通过所述第一终端将所述第一通话上行数据发送至所述通话对端设备，以使所述第一终端响应于用户的开启录音操作，获得录音数据，其中，所述录音数据包括所述通话下行数据和所述第一通话上行数据。

26.一种终端，其特征在于，所述终端包括：

一个或多个处理器；

存储器；

音频设备；

显示屏；

其中，所述存储器用于存储计算机程序代码，该计算机程序代码包括计算机指令；当所述处理器执行所述计算机指令时，所述终端执行权利要求1-23任一项中第一终端执行的所述多屏协同的通话方法，或者，所述终端执行权利要求1-23任一项中第二终端执行的所述多屏协同的通话方法。

27.一种多屏协同的通话系统，其特征在于，所述系统包括第一终端和第二终端，所述第一终端执行权利要求1-23任一项中第一终端执行的所述多屏协同的通话方法，所述第二终端执行权利要求1-23任一项中第二终端执行的所述多屏协同的通话方法。

28.一种计算机可读存储介质，其特征在于，包括计算机程序，当所述计算机程序在终端上运行时，使得所述终端执行权利要求1-23任一项中第一终端执行的所述多屏协同的通话方法，或者，所述终端执行权利要求1-23任一项中第二终端执行的所述多屏协同的通话方法。

Images