CN111356024A - 网页端和微信小程序端的在线视频通信方法及存储介质 - Google Patents

Abstract

本发明公开了一种网页端和微信小程序端的在线视频通信方法及存储介质，方法包括：信令服务接收用户微信小程序端发送的客服请求，并生成用户流名称；若信令服务查找到一空闲客服，则生成客服流名称，并发送呼入请求至一空闲客服；若一空闲客服接受呼入请求，则信令服务返回客服流名称至用户微信小程序端，并发送用户流名称至一空闲客服对应的客服网页端；用户微信小程序端和一空闲客服对应的客服网页端分别发送拉取请求至视频服务，并分别将用户音视频流和客服音视频流推送至视频服务；视频服务对客服音视频流进行转码，并推送至用户微信小程序端；视频服务将用户音视频流推送至一空闲客服对应的客服网页端。本发明可提高业务办理效率。

Description

网页端和微信小程序端的在线视频通信方法及存储介质

技术领域

本发明涉及视频通信技术领域，尤其涉及一种网页端和微信小程序端的在线视频通信方法及存储介质。

背景技术

目前，用电客户在办理供电业务申请时，仍是到营业网点进行办理，对于小微企业的小容量用电申请，办理报装手续等程序较为繁琐，无法满足大量小微企业快捷办电的需求，也增加了营业网点的相关工作量。同时，用户在进行停电、故障报修时，一般通过95598电话申诉，对于现场问题仅能通过描述设想，无法直观查看，而用户比较难以将业务需求或发生的故障描述清楚。

随着互联网移动技术的逐渐发展，智能终端的普及、微信的广泛应用，也开始与人们的工作、生活相结合起来。目前电网企业结合微信的应用已较为成熟，均推出了相关微信公众号，提供用户缴交电费等业务，但在办电业务尤其是视频在线沟通方面，仍有较大的空缺。

随着微信小程序的应用普及，电力公司也推出了越来越多的应用小程序，对用户来说，使用小程序直接和客服视频通话时比较方便的形式。但是，微信小程序的视频流编码和常用的WebRTC框架的视频流编码不是同一种编码，无法很好地实现微信小程序与网页端之间的视频通话。

发明内容

本发明所要解决的技术问题是：提供一种网页端和微信小程序端的在线视频通信方法及存储介质，可简化业务办理手续，提高业务办理效率。

为了解决上述技术问题，本发明采用的技术方案为：一种网页端和微信小程序端的在线视频通信方法，包括：

管理服务接收客服网页端的登录请求，并当客服网页端登录成功后，将所述客服网页端对应的客服的状态更改为在线状态；

信令服务接收用户微信小程序端发送的客服请求，并根据所述客服请求，生成所述用户微信小程序端的用户流名称，所述客服请求包括用户标识；

信令服务通过调用管理服务，根据客服的状态，查找空闲客服，所述空闲客服为状态为在线状态的客服；

若查找到一空闲客服，则生成所述一空闲客服的客服流名称，并发送呼入请求至所述一空闲客服对应的客服网页端；

若所述一空闲客服对应的客服网页端接受所述呼入请求，则信令服务返回已有客服接听消息以及所述一空闲客服的客服流名称至所述用户微信小程序端，并发送所述用户微信小程序端的用户流名称至所述一空闲客服对应的客服网页端；

所述用户微信小程序端发送第一拉取请求至视频服务，并将用户音视频流推送至视频服务，所述第一拉取请求包括所述一空闲客服的客服流名称；

所述一空闲客服对应的客服网页端发送第二拉取请求至视频服务，并将客服音视频流推送至视频服务，所述第二拉取请求包括所述用户微信小程序端的用户流名称；

视频服务接收到第一拉取请求后，若检测到存在所述第一拉取请求中的客服流名称对应的客服音视频流，则对所述客服音视频流进行转码，并将转码后的客服音视频流推送至所述用户微信小程序端；

视频服务接收到第二拉取请求后，若检测到存在所述第二拉取请求中的用户流名称对应的用户音视频流，则将所述用户音视频流推送至所述一空闲客服对应的客服网页端。

本发明还涉及一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现如上所述的步骤。

本发明的有益效果在于：基于微信小程序成熟的框架和API，集成实时音视频组件接口，实现微信端的实时音视频功能；基于Flash技术收集音视频，实现音视频的推送和播放，构建Web端的实时音视频功能，免插件安装。通过实现网页端和微信小程序端的视频互通，使得用户可在线视频电，简化了办电手续，大幅提升供电业务办理的效率；同时，通过实时音视频办理业务，使得客服人员可以直观地了解用户的业务需求或发生的故障，为业务办理提供准确数据依据，减轻客服人员的工作量和工作难度。本发明扩展了在线视频服务方法，可提升企业和群众办事便利性、满意度和获得感。

附图说明

图1为本发明的一种网页端和微信小程序端的在线视频通信方法的流程图；

图2为本发明实施例一的方法流程图。

具体实施方式

为详细说明本发明的技术内容、所实现目的及效果，以下结合实施方式并配合附图详予说明。

本发明最关键的构思在于：基于编码转换，实现网页端和微信小程序端的视频互通。

请参阅图1，一种网页端和微信小程序端的在线视频通信方法，包括：

管理服务接收客服网页端的登录请求，并当客服网页端登录成功后，将所述客服网页端对应的客服的状态更改为在线状态；

信令服务接收用户微信小程序端发送的客服请求，并根据所述客服请求，生成所述用户微信小程序端的用户流名称，所述客服请求包括用户标识；

信令服务通过调用管理服务，根据客服的状态，查找空闲客服，所述空闲客服为状态为在线状态的客服；

若查找到一空闲客服，则生成所述一空闲客服的客服流名称，并发送呼入请求至所述一空闲客服对应的客服网页端；

若所述一空闲客服对应的客服网页端接受所述呼入请求，则信令服务返回已有客服接听消息以及所述一空闲客服的客服流名称至所述用户微信小程序端，并发送所述用户微信小程序端的用户流名称至所述一空闲客服对应的客服网页端；

所述用户微信小程序端发送第一拉取请求至视频服务，并将用户音视频流推送至视频服务，所述第一拉取请求包括所述一空闲客服的客服流名称；

所述一空闲客服对应的客服网页端发送第二拉取请求至视频服务，并将客服音视频流推送至视频服务，所述第二拉取请求包括所述用户微信小程序端的用户流名称；

视频服务接收到第一拉取请求后，若检测到存在所述第一拉取请求中的客服流名称对应的客服音视频流，则对所述客服音视频流进行转码，并将转码后的客服音视频流推送至所述用户微信小程序端；

视频服务接收到第二拉取请求后，若检测到存在所述第二拉取请求中的用户流名称对应的用户音视频流，则将所述用户音视频流推送至所述一空闲客服对应的客服网页端。

从上述描述可知，本发明的有益效果在于：可简化业务办理手续，提高业务办理效率。

进一步地，所述信令服务接收用户微信小程序端发送的客服请求，并根据所述客服请求，生成所述用户微信小程序端的用户流名称之后，进一步包括：

将所述用户流名称返回至所述用户微信小程序端。

进一步地，所述信令服务通过调用管理服务，根据客服的状态，查找空闲客服之后，进一步包括：

若未查找到空闲客服，则返回客服繁忙消息至所述用户微信小程序端。

由上述描述可知，

进一步地，所述若查找到一空闲客服，则生成所述一空闲客服的客服流名称，并发送呼入请求至所述一空闲客服对应的客服网页端之后，进一步包括：

当所述一空闲客服对应的客服网页端接受所述呼入请求时，管理服务将所述一空闲客服的状态更改为通话状态。

由上述描述可知，当客服接受呼入请求时，通过更改客服的状态，避免在通话过程中被认为是空闲客服，从而避免通过过程中接入其他用户。

进一步地，所述对所述客服音视频流进行转码具体为：

获取所述客服音视频流中的客服音频流和客服视频流；

根据speex格式，对所述客服音频流进行解码，得到第一音频流；

根据aac格式，对所述第一音频流进行编码，得到第二音频流；

将所述第二音频流和客服视频流进行打包，得到转码后的客服音视频流。

由上述描述可知，通过对客服音视频流进行转码，解决微信小程序的频流编码和常用的WebRTC框架的视频流编码不同的问题，使得微信小程序端可准确完整地接收到客服音视频流。

本发明还涉及一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现如上所述的步骤。

实施例一

请参照图2，本发明的实施例一为：一种网页端和微信小程序端的在线视频通信方法，可应用于电网在线业务办理应用系统，包括如下步骤：

S1：客服网页端和用户微信小程序端分别登录至管理服务。即管理服务分别接收客服网页端和用户微信小程序端的登录请求，并对登录请求进行验证。并且，当客服网页端登录成功后，将所述客服网页端对应的客服的状态更改为在线状态。进一步地，客服的状态还包括“离线”、“暂离”、“通话”等。

S2：用户微信小程序端发送客服请求至信令服务，所述客服请求包括用户标识(如用户账号)和请求时间。即用户通过微信小程序拨打视频，向信令服务请求客服。

S3：信令服务根据所述客服请求，生成所述用户微信小程序端的用户流名称，并将所述用户流名称返回至所述用户微信小程序端。

S4：信令服务调用管理服务，根据客服的状态，判断是否能查找到一空闲客服，即判断是否存在状态为在线状态的客服，若是，则执行步骤S5，若否，则执行步骤S6。

S5：生成所述一空闲客服的客服流名称，并发送呼入请求至所述一空闲客服对应的客服网页端。其中，客服流名称根据所述一空闲客服的相关信息(如客服标识)生成。客服网页端接收到呼入请求后，客服可通过点击接听按钮进行接听，然后执行步骤S7。

进一步地，当所述一空闲客服对应的客服网页端接受所述呼入请求时，管理服务将所述一空闲客服的状态更改为通话状态。

S6：返回客服繁忙消息至所述用户微信小程序端。

S7：信令服务返回已有客服接听消息以及所述一空闲客服的客服流名称至所述用户微信小程序端，并发送所述用户微信小程序端的用户流名称至所述一空闲客服对应的客服网页端。

经过上述步骤，所述用户微信小程序端和所述一空闲客服对应的客服网页端已成功对接，并互相得知对应的流名称。

S8：所述用户微信小程序端和所述一空闲客服对应的客服网页端分别发送拉取请求至视频服务，并将自端的音视频流推送至视频服务。

具体地，所述用户微信小程序端发送第一拉取请求至视频服务，并将用户音视频流推送至视频服务，所述第一拉取请求包括所述一空闲客服的客服流名称。所述一空闲客服对应的客服网页端发送第二拉取请求至视频服务，并将客服音视频流推送至视频服务，所述第二拉取请求包括所述用户微信小程序端的用户流名称。

其中，两端的可同时发送拉取请求，发送拉取请求后，即相当于与视频服务建立了TCP连接。

进一步地，视频服务接收到用户音视频流和客服音视频流后，会自动保存。

S9：视频服务判断是否存在所述第一拉取请求中的客服流名称对应的客服音视频流，即判断是否有接收到第一拉取请求中的客服流名称对应的客服网页端发送的客服音视频流，若是，则执行步骤S10。

S10：对所述客服音视频流进行转码，并将转码后的客服音视频流推送至所述用户微信小程序端。

具体地，获取所述客服音视频流中的客服音频流和客服视频流；根据speex格式，对所述客服音频流进行解码，得到第一音频流；根据aac格式，对所述第一音频流进行编码，得到第二音频流；将所述第二音频流和客服视频流进行打包，得到转码后的客服音视频流；最后将转码后的客服音视频流推送至所述用户微信小程序端。

S11：视频服务判断是否存在所述第二拉取请求中的用户流名称对应的用户音视频流，即判断是否有接收到第二拉取请求中的用户流名称对应的用户微信小程序端发送的用户音视频流，若是，则执行步骤S12。

S12：将所述用户音视频流推送至所述一空闲客服对应的客服网页端。

其中，步骤S9和S11可同时进行。

进一步地，客服网页端在进行视频通话时，可随时一键自动截取视频画面，保存为图片作为业务凭证(如用户证件)。视频服务自动保存视频文件作为留存凭证。

本实施例通过在线视频办电，简化了办电手续，大幅提升供电业务办理的效率；实现Web端和微信小程序的视频互通，扩展了在线视频服务方法；办电过程无需到现场，业务凭证和信息实现全程在线获取，达到小微企业客户办电“一次都不跑”的目标，实现客户零上门、零审批的服务，提升企业和群众办事便利性、满意度和获得感。

实施例二

本实施例是实施例一的具体实现场景。

1、构建后台管理服务，对接客户和客服。后台管理服务管理相关账户信息，客服登录后自动注册至后台管理服务，同时可切换“在线”、“离线”、“暂离”、“通话”的状态，管理服务通过状态判断客服是否可以接通用户；用户登录后自动注册至后台管理服务，由后台服务自动路由对接的客服。

2、构建信令服务，管理视频通话信令通道。信令服务负责接收客服端和用户端的视频命令，并接通客服端和用户端的视频通话信道。信令服务接收用户端视频请求(客服请求)并生成流名称，同时调用后台管理服务查找客服端，推送客服端视频请求并生成流名称。

3、构建视频服务，进行编码转换及流接收和推送。视频服务接收Web端的推流和拉流，接收Web端的音视频流；同时接收微信小程序的推流和拉流，接收微信小程序的音视频流。

同时，由于Web端采用Flash技术，产生的音频编码格式为speex，而微信小程序采用的aac编码格式，所以视频服务需要进行编码转换。将音视频流中的音频流取出，将流按照speex格式进行解码，然后按照aac格式进行编码，形成aac格式的音频流流；然后将aac音频流与视频流打包，形成新的音视频流。该过程在接收Web端流时同步进行。

同时，视频服务将一次完整的音视频通话自动保存，成为留存的视频文件。

4、构建客服Web端视频页面和用户微信小程序视频页面。

首先，构建Web端的客服视频页面，采用Flash的音视频采集技术，获取客服的speex编码的音频流和h264编码的视频流，基于RTMP协议将音视频流推送至视频服务，同时从视频服务拉取用户微信小程序的音视频流。

然后，构建微信小程序端的用户视频页面，通过小程序获取用户的aac编码的音频流和h264编码的视频流，通过小程序的LivePusher将音视频流推送至视频服务，同时通过小程序的LivePlayer拉取客服Web端的音视频流。

5、接通在线视频，进行音视频交流。客服Web端、用户微信小程序端、管理服务、信令服务和视频服务之间的交互过程如实施例一所述。

本实施例依托于电力公司微信小程序，采用在线音视频通话方式，用电客户在小程序中进行业务申请或诉求反馈，使得客户服务进一步在移动终端上得到延伸，提升供电服务能力，提高服务效率，提升服务品质。

实施例三

本实施例为对应上述实施例的一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现如下步骤：

管理服务接收客服网页端的登录请求，并当客服网页端登录成功后，将所述客服网页端对应的客服的状态更改为在线状态；

信令服务接收用户微信小程序端发送的客服请求，并根据所述客服请求，生成所述用户微信小程序端的用户流名称，所述客服请求包括用户标识；

信令服务通过调用管理服务，根据客服的状态，查找空闲客服，所述空闲客服为状态为在线状态的客服；

若查找到一空闲客服，则生成所述一空闲客服的客服流名称，并发送呼入请求至所述一空闲客服对应的客服网页端；

若所述一空闲客服对应的客服网页端接受所述呼入请求，则信令服务返回已有客服接听消息以及所述一空闲客服的客服流名称至所述用户微信小程序端，并发送所述用户微信小程序端的用户流名称至所述一空闲客服对应的客服网页端；

所述用户微信小程序端发送第一拉取请求至视频服务，并将用户音视频流推送至视频服务，所述第一拉取请求包括所述一空闲客服的客服流名称；

所述一空闲客服对应的客服网页端发送第二拉取请求至视频服务，并将客服音视频流推送至视频服务，所述第二拉取请求包括所述用户微信小程序端的用户流名称；

视频服务接收到第一拉取请求后，若检测到存在所述第一拉取请求中的客服流名称对应的客服音视频流，则对所述客服音视频流进行转码，并将转码后的客服音视频流推送至所述用户微信小程序端；

视频服务接收到第二拉取请求后，若检测到存在所述第二拉取请求中的用户流名称对应的用户音视频流，则将所述用户音视频流推送至所述一空闲客服对应的客服网页端。

进一步地，所述信令服务接收用户微信小程序端发送的客服请求，并根据所述客服请求，生成所述用户微信小程序端的用户流名称之后，进一步包括：

将所述用户流名称返回至所述用户微信小程序端。

进一步地，所述信令服务通过调用管理服务，根据客服的状态，查找空闲客服之后，进一步包括：

若未查找到空闲客服，则返回客服繁忙消息至所述用户微信小程序端。

进一步地，所述若查找到一空闲客服，则生成所述一空闲客服的客服流名称，并发送呼入请求至所述一空闲客服对应的客服网页端之后，进一步包括：

当所述一空闲客服对应的客服网页端接受所述呼入请求时，管理服务将所述一空闲客服的状态更改为通话状态。

进一步地，所述对所述客服音视频流进行转码具体为：

获取所述客服音视频流中的客服音频流和客服视频流；

根据speex格式，对所述客服音频流进行解码，得到第一音频流；

根据aac格式，对所述第一音频流进行编码，得到第二音频流；

将所述第二音频流和客服视频流进行打包，得到转码后的客服音视频流。

综上所述，本发明提供的一种网页端和微信小程序端的在线视频通信方法及存储介质，基于微信小程序成熟的框架和API，集成实时音视频组件接口，实现微信端的实时音视频功能；基于Flash技术收集音视频，实现音视频的推送和播放，构建Web端的实时音视频功能，免插件安装。通过实现网页端和微信小程序端的视频互通，使得用户可在线视频电，简化了办电手续，大幅提升供电业务办理的效率；同时，通过实时音视频办理业务，使得客服人员可以直观地了解用户的业务需求或发生的故障，为业务办理提供准确数据依据，减轻客服人员的工作量和工作难度。

本发明通过线上办电简化办电手续，大幅提升供电业务办理的效率，达到小微企业客户办电“一次都不跑”的目标，推广低压小微企业客户零上门、零审批的服务，提升企业和群众办事便利性、满意度和获得感。

以上所述仅为本发明的实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等同变换，或直接或间接运用在相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种网页端和微信小程序端的在线视频通信方法，其特征在于，包括：

管理服务接收客服网页端的登录请求，并当客服网页端登录成功后，将所述客服网页端对应的客服的状态更改为在线状态；

信令服务接收用户微信小程序端发送的客服请求，并根据所述客服请求，生成所述用户微信小程序端的用户流名称，所述客服请求包括用户标识；

信令服务通过调用管理服务，根据客服的状态，查找空闲客服，所述空闲客服为状态为在线状态的客服；

若查找到一空闲客服，则生成所述一空闲客服的客服流名称，并发送呼入请求至所述一空闲客服对应的客服网页端；

若所述一空闲客服对应的客服网页端接受所述呼入请求，则信令服务返回已有客服接听消息以及所述一空闲客服的客服流名称至所述用户微信小程序端，并发送所述用户微信小程序端的用户流名称至所述一空闲客服对应的客服网页端；

所述用户微信小程序端发送第一拉取请求至视频服务，并将用户音视频流推送至视频服务，所述第一拉取请求包括所述一空闲客服的客服流名称；

所述一空闲客服对应的客服网页端发送第二拉取请求至视频服务，并将客服音视频流推送至视频服务，所述第二拉取请求包括所述用户微信小程序端的用户流名称；

视频服务接收到第一拉取请求后，若检测到存在所述第一拉取请求中的客服流名称对应的客服音视频流，则对所述客服音视频流进行转码，并将转码后的客服音视频流推送至所述用户微信小程序端；

视频服务接收到第二拉取请求后，若检测到存在所述第二拉取请求中的用户流名称对应的用户音视频流，则将所述用户音视频流推送至所述一空闲客服对应的客服网页端。

2.根据权利要求1所述的网页端和微信小程序端的在线视频通信方法，其特征在于，所述信令服务接收用户微信小程序端发送的客服请求，并根据所述客服请求，生成所述用户微信小程序端的用户流名称之后，进一步包括：

将所述用户流名称返回至所述用户微信小程序端。

3.根据权利要求1所述的网页端和微信小程序端的在线视频通信方法，其特征在于，所述信令服务通过调用管理服务，根据客服的状态，查找空闲客服之后，进一步包括：

若未查找到空闲客服，则返回客服繁忙消息至所述用户微信小程序端。

4.根据权利要求1所述的网页端和微信小程序端的在线视频通信方法，其特征在于，所述若查找到一空闲客服，则生成所述一空闲客服的客服流名称，并发送呼入请求至所述一空闲客服对应的客服网页端之后，进一步包括：

当所述一空闲客服对应的客服网页端接受所述呼入请求时，管理服务将所述一空闲客服的状态更改为通话状态。

5.根据权利要求1所述的网页端和微信小程序端的在线视频通信方法，其特征在于，所述对所述客服音视频流进行转码具体为：

获取所述客服音视频流中的客服音频流和客服视频流；

根据speex格式，对所述客服音频流进行解码，得到第一音频流；

根据aac格式，对所述第一音频流进行编码，得到第二音频流；

将所述第二音频流和客服视频流进行打包，得到转码后的客服音视频流。

6.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现如下步骤：

管理服务接收客服网页端的登录请求，并当客服网页端登录成功后，将所述客服网页端对应的客服的状态更改为在线状态；

信令服务接收用户微信小程序端发送的客服请求，并根据所述客服请求，生成所述用户微信小程序端的用户流名称，所述客服请求包括用户标识；

信令服务通过调用管理服务，根据客服的状态，查找空闲客服，所述空闲客服为状态为在线状态的客服；

若查找到一空闲客服，则生成所述一空闲客服的客服流名称，并发送呼入请求至所述一空闲客服对应的客服网页端；

若所述一空闲客服对应的客服网页端接受所述呼入请求，则信令服务返回已有客服接听消息以及所述一空闲客服的客服流名称至所述用户微信小程序端，并发送所述用户微信小程序端的用户流名称至所述一空闲客服对应的客服网页端；

所述用户微信小程序端发送第一拉取请求至视频服务，并将用户音视频流推送至视频服务，所述第一拉取请求包括所述一空闲客服的客服流名称；

所述一空闲客服对应的客服网页端发送第二拉取请求至视频服务，并将客服音视频流推送至视频服务，所述第二拉取请求包括所述用户微信小程序端的用户流名称；

视频服务接收到第一拉取请求后，若检测到存在所述第一拉取请求中的客服流名称对应的客服音视频流，则对所述客服音视频流进行转码，并将转码后的客服音视频流推送至所述用户微信小程序端；

视频服务接收到第二拉取请求后，若检测到存在所述第二拉取请求中的用户流名称对应的用户音视频流，则将所述用户音视频流推送至所述一空闲客服对应的客服网页端。

7.根据权利要求6所述的计算机可读存储介质，其特征在于，所述信令服务接收用户微信小程序端发送的客服请求，并根据所述客服请求，生成所述用户微信小程序端的用户流名称之后，进一步包括：

将所述用户流名称返回至所述用户微信小程序端。

8.根据权利要求6所述的计算机可读存储介质，其特征在于，所述信令服务通过调用管理服务，根据客服的状态，查找空闲客服之后，进一步包括：

若未查找到空闲客服，则返回客服繁忙消息至所述用户微信小程序端。

9.根据权利要求6所述的计算机可读存储介质，其特征在于，所述若查找到一空闲客服，则生成所述一空闲客服的客服流名称，并发送呼入请求至所述一空闲客服对应的客服网页端之后，进一步包括：

当所述一空闲客服对应的客服网页端接受所述呼入请求时，管理服务将所述一空闲客服的状态更改为通话状态。

10.根据权利要求6所述的计算机可读存储介质，其特征在于，所述对所述客服音视频流进行转码具体为：

获取所述客服音视频流中的客服音频流和客服视频流；

根据speex格式，对所述客服音频流进行解码，得到第一音频流；

根据aac格式，对所述第一音频流进行编码，得到第二音频流；

将所述第二音频流和客服视频流进行打包，得到转码后的客服音视频流。

Images