CN112995674A - 一种媒体信息传输方法、系统及存储介质 - Google Patents

一种媒体信息传输方法、系统及存储介质 Download PDF

Info

Publication number
CN112995674A
CN112995674A CN202110550974.7A CN202110550974A CN112995674A CN 112995674 A CN112995674 A CN 112995674A CN 202110550974 A CN202110550974 A CN 202110550974A CN 112995674 A CN112995674 A CN 112995674A
Authority
CN
China
Prior art keywords
media
information
transcoding
target
receiving
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110550974.7A
Other languages
English (en)
Other versions
CN112995674B (zh
Inventor
张凯
刘勋
谭军胜
赵雪冰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Zhongke Tongda High New Technology Co Ltd
Original Assignee
Wuhan Zhongke Tongda High New Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Zhongke Tongda High New Technology Co Ltd filed Critical Wuhan Zhongke Tongda High New Technology Co Ltd
Priority to CN202110550974.7A priority Critical patent/CN112995674B/zh
Publication of CN112995674A publication Critical patent/CN112995674A/zh
Application granted granted Critical
Publication of CN112995674B publication Critical patent/CN112995674B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1101—Session protocols
    • H04L65/1104—Session initiation protocol [SIP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/14—Session management
    • H04L67/141—Setup of application sessions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H04L69/161—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields
    • H04L69/162—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields involving adaptations of sockets based mechanisms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H04L69/163—In-band adaptation of TCP data exchange; In-band control procedures

Abstract

本申请实施例提供一种媒体信息传输方法、系统及存储介质；该方法通过调度装置将转码装置转发的来自媒体采集终端的通知消息发送至目标媒体设备，以使目标媒体设备基于通知消息向媒体采集终端发送通知确认消息；调度装置接收目标媒体设备发送的媒体邀请请求，并接收媒体装置根据媒体邀请请求中携带的媒体接收信息确定的媒体接收端口和媒体转发端口，调度装置将媒体接收端口发送至目标媒体设备，并接收目标媒体设备发送的媒体邀请确认消息，以使转码装置根据媒体邀请确认消息接收媒体采集终端采集的媒体信息，并将媒体信息进行转码，以发送至媒体接收端口，媒体装置根据媒体接收信息通过媒体转发端口将媒体信息发送至目标媒体设备。

Description

一种媒体信息传输方法、系统及存储介质
技术领域
本申请涉及智慧城市技术领域，具体涉及一种媒体信息传输方法、系统及存储介质。
背景技术
GB/T28181国标协议一般运用于智慧交通领域，如在现有的安防监控系统中，将连接到该安防监控系统中的国标设备使用GB/T28181国标协议中的SIP协议（SessionInitiation Protocol，会话发起协议）来进行相互通信。安防监控系统中的国标设备包括上下级联平台设备（包括SIP服务器）、各种相机和媒体设备（如语音对讲设备等）等，即现有的安防监控系统中上下级联平台设备之间的通信、上下级联平台设备与媒体设备之间的通信等都使用了SIP协议来进行SIP通信。因此，在对应设备中需要安装SIP协议支持的SIP客户端（也可称为软件开发工具包（Software Development Kit，SDK）），以达到通过SIP客户端来进行SIP通信的目的。例如，当有终端需要向媒体设备的发送媒体信息时，需要在对应终端上安装SIP客户端，才能向媒体设备发送媒体信息。如此，造成诸多不便。
发明内容
本申请实施例提供一种媒体信息传输方法、系统及存储介质，可简化媒体采集终端与国标设备如媒体设备等的通讯方式。
本申请实施例提供了一种媒体信息传输方法，包括：
调度装置将转码装置转发的来自媒体采集终端的通知消息发送至目标媒体设备，以使所述目标媒体设备基于所述通知消息向所述媒体采集终端发送通知确认消息；
所述调度装置接收所述目标媒体设备发送的媒体邀请请求，并根据所述媒体邀请请求将所述目标媒体设备的媒体接收信息发送至媒体装置；
所述媒体装置根据所述媒体接收信息确定媒体接收端口和媒体转发端口，并发送至所述调度装置；
所述调度装置将所述媒体转发端口发送至所述目标媒体设备，以使所述目标媒体设备发送媒体邀请确认消息，并将所述媒体接收端口发送至所述转码装置；
所述调度装置接收所述目标媒体设备发送的媒体邀请确认消息，并将所述媒体邀请确认消息发送至所述转码装置；
所述转码装置根据所述媒体邀请确认消息接收所述媒体采集终端采集的媒体信息，并将所述媒体信息转码为预设媒体格式的媒体信息，以发送至媒体装置的所述媒体接收端口，所述预设媒体格式为目标媒体设备所支持播放的媒体格式；
所述媒体装置根据所述媒体接收信息通过媒体转发端口将所述媒体信息发送至所述目标媒体设备。
本申请实施例还提供了一种媒体信息传输系统，包括：
调度装置，用于将转码装置转发的来自媒体采集终端的通知消息发送至目标媒体设备，以使所述目标媒体设备基于所述通知消息向所述媒体采集终端发送通知确认消息；
所述调度装置，还用于接收所述目标媒体设备发送的媒体邀请请求，并根据所述媒体邀请请求将所述目标媒体设备的媒体接收信息发送至媒体装置；
所述媒体装置，用于根据所述媒体接收信息确定媒体接收端口和媒体转发端口，并发送至所述调度装置；
所述调度装置，还用于将所述媒体转发端口发送至所述目标媒体设备，以使所述目标媒体设备发送媒体邀请确认消息，并将所述媒体接收端口发送至所述转码装置；
所述调度装置，还用于接收所述目标媒体设备发送的媒体邀请确认消息，并将所述媒体邀请确认消息发送至所述转码装置；
所述转码装置，还用于根据所述媒体邀请确认消息接收所述媒体采集终端采集的媒体信息，并将所述媒体信息转码为预设媒体格式的媒体信息，以发送至媒体装置的所述媒体接收端口，所述预设媒体格式为目标媒体设备所支持播放的媒体格式；
所述媒体装置，还用于根据所述媒体接收信息通过媒体转发端口将所述媒体信息发送至所述目标媒体设备。
本申请实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时，实现上述任一种媒体信息传输方法中的步骤。
本申请实施例通过调度装置、转码装置和媒体装置实现媒体采集终端与目标媒体设备之间的媒体通信。其中，一方面，本申请实施例实现了媒体邀请请求由目标媒体设备发送，且媒体邀请确认消息也由目标媒体设备发送，打破了现有技术中的媒体邀请请求和媒体邀请确认消息由调度装置（SIP服务器）发送的局面，实现了另一种与目标媒体设备之间的媒体通信方式；而且，媒体采集终端经过转码装置、调度装置向目标媒体设备发送通知消息，以使目标媒体设备基于通知消息向媒体采集终端发送通知确认消息，完成媒体采集终端与目标媒体设备之间的通知协商，之后调度装置再接收目标媒体设备发送的媒体邀请请求，以最终实现媒体传输，可以理解地，本申请实施例先进行媒体采集终端与目标媒体设备之间的通知协商，在通知协商成功后，再实现媒体采集终端与目标媒体设备之间的媒体传输，避免直接建立媒体传输通道而又无法进行媒体信息的传输导致的资源浪费；此外，本申请实施例通过转码装置将媒体采集终端采集的媒体信息进行转码，以得到预设媒体格式的媒体信息，该预设媒体格式为目标媒体设备所支持播放的媒体格式，如此，无论是怎样的语音采集设备，发送的什么格式的媒体信息，只要将采集的媒体信息发送至转码装置进行转码，就可以实现和国标媒体设备（目标媒体设备）互相通讯；如可通过网页等方式将媒体信息发送至转码装置，无需在媒体采集终端中安装SIP服务器，即可实现与国标媒体设备之间的通讯，摆脱对第三方平台SIP客户端的依赖，简化了与国标设备如媒体设备等的通讯方式，极大的实现了业务的扩展性。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的媒体信息传输系统的结构示意图。
图2是本申请实施例提供的媒体信息传输系统进行文本通信的示意图。
图3是本申请实施例提供的媒体信息传输系统进行语音通信的示意图。
图4是本申请实施例提供的媒体信息传输方法的流程示意图。
图5是本申请实施例提供的语音通信的部分示意图。
图6是本申请实施例提供的语音通信的部分示意图。
图7是本申请实施例提供的媒体信息传输系统的结构示意图。
图8是本申请实施例提供的调度服务器的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
本申请实施例中的媒体信息可以指语音信息、视频信息等。本申请实施例中以媒体信息为语音信息为例进行说明。
请参阅图1，是本申请实施例提供的媒体信息传输系统的结构示意图。该媒体信息传输系统包括调度装置、转码装置和媒体装置。其中，调度装置与目标媒体设备（A）利用国标协议通过SIP链路（SIP双通链路）进行相互通信，调度装置与转码装置通过TCP链路（TCP双通链路）进行相互通信，调度装置与媒体装置通过TCP链路（TCP双通链路）进行相互通信，媒体采集终端（B）与转码装置通过互联网协议支持的互联网链路（例如Websocket链路，下文中简称为WS链路）进行通信。
其中，本申请实施例中的媒体采集终端（B）包括交警终端、开发人员所在的终端等，媒体采集终端经注册并授权的、对智慧交通领域中如媒体信息传输系统内的数据和设备有操作需求的终端设备。媒体采集终端包括但不限于智能手机、平板电脑、笔记本电脑、智能电视、智能机器人、个人计算机（PC，Personal Computer）等终端设备。
其中，本申请实施例中的转码装置、媒体装置和调度装置可以集成在服务器中，该服务器可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云服务、云数据库、云计算、云函数、云存储等基础云计算服务的云服务器。
其中，转码装置、媒体装置和调度装置可以分别集成在独立的服务器中，例如，转码装置集成在转码装置中、媒体装置集成在媒体装置中、调度装置集成在调度装置中。其中，也可以是多个物理服务器都实现对应的装置所实现的功能，例如，多个转码装置都可实现转码装置所对应的功能、多个媒体装置都可实现媒体装置所对应的功能、多个调度装置都可实现调度装置所对应的功能。其中，还可以是转码装置、媒体装置和调度装置继承在一个服务器中，可以理解地，该服务器实现转码装置、媒体装置和调度装置所实现的功能。本申请实施例中以转码装置、媒体装置和调度装置可以分别集成在独立的服务器中为例进行说明。
其中，媒体采集终端通过互联网协议与转码装置进行通信。首先，媒体采集终端通过互联网协议支持的文本传输链路与转码装置进行文本通信，以使得媒体采集终端与目标媒体设备进行通知协商。通知协商完成后，该文本传输链路结束。接着就是媒体采集终端通过转码装置与目标媒体设备之间的媒体通信流程。其中，媒体采集终端通过互联网协议支持的媒体传输链路与转码装置进行媒体通信，以使得转码装置将媒体采集终端采集的媒体信息经过媒体装置发送至目标媒体设备。
其中，互联网协议可以是Websocket协议，或者其他的互联网协议。下文中将以互联网协议为Websocket协议为例进行说明。目标媒体设备可以是语音对讲设备或者其他的媒体设备。下文中以目标媒体设备为语音对讲设备为例进行说明。对应地，媒体信息理解为语音信息，例如媒体采集终端向目标媒体设备发送语音信息，以实现现场指挥调度等功能。
本申请实施例实现利用互联网协议的媒体采集终端，来访问利用国标协议如SIP协议进行通信的SIP国标设备，如目标媒体设备等，使得媒体采集终端无需安装SIP客户端（SIP客户端即为第三方平台提供的SDK，安装SIP客户端之后需要通过SIP协议来进行通信），直接利用互联网协议通过网页等形式来进行通信；实现互联网协议和国标协议之间的互通；且简化通讯方式，摆脱对SIP客户端的依赖，无需去理解复杂的国标协议，如若通过SIP客户端的方式进行通信，则首先需要安装SIP客户端，且需要理解复杂的国标协议，本申请实施例中的方式无需理解复杂的国标协议；而且通过互联网协议的方式来进行通信，可以跨平台实现，如安卓系统、苹果系统等都支持同一互联网协议。
由于媒体采集终端向目标媒体设备发送语音消息的过程涉及到两个通讯阶段（文本通信和语音通信），因此，下文中将分别对这两个阶段的通讯进行详细的说明。在其他实施例中，媒体采集终端也可称为语音采集终端，目标媒体设备，也可称为目标语音设备。
如图2所示，为本申请实施例提供的媒体信息传输系统中文本通信的示意图。
媒体采集终端可以是任一终端设备，在媒体采集终端中无需安装SIP客户端，直接在网页上，基于WebSocket协议，通过WS链路（长连接的双向传输链路，生命周期由媒体采集终端控制，转码装置不会主动关闭该链路）向转码装置发送通知消息，该通知消息告诉目标媒体设备（A）：媒体采集终端要发送语音信息了，且媒体采集终端的设备为：B。其中，该通知消息以JSON（JavaScript Object Notation，JS对象简谱）格式的文本数据（文本消息）为例进行说明，还可以是其他格式的文本数据，还可以是其他格式的其他类型的数据。
转码装置接收到媒体采集终端基于WebSocket协议发送的通知消息时，将基于WebSocket协议的发送JSON格式的通知消息转码为二进制格式的通知消息，并通过TCP双通链路将二进制格式的通知消息发送至调度装置，以使调度装置接收该通知消息。
调度装置通过TCP双通链路接收二进制格式的通知消息，将二进制格式的通知消息转换为SIP协议格式的通知消息，并通过SIP双通链路发送该SIP协议格式的通知消息，以使得目标媒体设备根据SIP协议格式的通知消息进行响应。
目标媒体设备接收到SIP协议格式的通知消息后，会发送一个SIP协议格式的通知确认消息至调度装置，该通知确认消息用于告知媒体采集终端：我已经收到你（媒体采集终端B）的媒体通知了，等会给你发媒体邀请请求（即语音邀请请求），你就可以开始发媒体信息（即语音信息）了。
调度装置接收到SIP协议格式的通知确认消息后，将SIP协议格式的通知确认消息转换为二进制格式的通知确认消息，并通过TCP双通链路向转码装置发送对应的二进制格式的通知确认消息。
转码装置接收二进制格式的通知确认消息，将二进制格式的通知确认消息转换为JSON格式的通知确认消息（文本消息），并通过WS链路向对应的媒体采集终端发送通知确认消息，以响应对应的通知消息。
本实施例中当通知确认消息传输结束后，结束媒体采集终端与目标媒体设备之间的文本通信的流程，接着开始媒体采集终端与目标媒体设备之间的语音通信的流程，语音通信的流程可参看图3所示的实施例中的描述。可以理解地，本申请实施例先通过文本通信的流程实现媒体采集终端与目标媒体设备之间的通知协商，在通知协商成功后，再进行媒体采集终端与目标媒体设备之间的媒体传输（语音传输），避免直接建立媒体传输通道而又无法进行媒体信息的传输导致的资源浪费。
如图3所示，为本申请实施例提供的媒体信息传输系统中语音通信的示意图。
语音通信由目标媒体设备发起。目标媒体设备是在发送通知确认消息之后，才会发起语音通信，开始语音通信的流程。
目标媒体设备发送通知确认消息后，就会为接收媒体信息做准备。其中，因为媒体采集终端要给目标媒体设备发送媒体信息，因此，需要目标媒体设备做好接收媒体信息的准备，才可以成功接收媒体信息。
在目标媒体设备做好接收媒体信息的准备之后，会向媒体采集终端发送SIP协议格式的媒体邀请请求（Invite请求），该媒体邀请请求中包括媒体收包地址（例如目标媒体设备的IP地址等）、媒体收包端口、所支持播放的媒体格式等媒体接收信息。该媒体邀请请求通过SIP双通链路发送至调度装置，调度装置根据媒体邀请请求建立目标媒体设备的会话配置模块；并将目标媒体设备的媒体接收信息添加至会话配置模块中；调度装置将媒体接收信息通过TCP双通链路发送至媒体装置。
媒体装置接收到目标媒体设备的媒体接收信息后，媒体装置根据媒体接收信息建立目标媒体设备的媒体会话模块，该媒体会话模块包括媒体接收模块、媒体转发模块和保活检测模块。其中，建立保活检测模块后，保活检测模块处于挂起状态，并没有立即启用；媒体接收模块包括媒体接收端口；媒体转发模块包括媒体转发端口。媒体装置通过TCP双通链路将媒体转发端口和媒体接收端口返回至调度装置。
调度装置接收到媒体转发端口和媒体接收端口时，将媒体转发端口和媒体接收端口添加至会话配置模块中；另外，调度装置将媒体转发端口通过SIP双通链路发送至目标媒体设备，以使得目标媒体设备在接收到媒体转发端口后通过SIP双通链路向调度装置发送媒体邀请确认消息（ACK消息），其中，将媒体转发端口发送至目标媒体设备，使得目标媒体设备只接收媒体装置通过媒体转发端口发送的媒体信息；此外，调度装置将媒体接收端口通过TCP双通链路发送至转码装置，以使得转码装置建立转码会话模块。其中，转码会话模块中包括用于接收媒体采集终端采集的媒体信息的转码接收端口以及转码装置用于转发媒体信息的转码转发端口。
调度装置通过SIP双通链路接收目标媒体设备发送的媒体邀请确认消息，并将媒体邀请确认消息通过TCP双通链路发送至转码装置，以使得转码装置将转码会话模块中的转码接收端口发送至媒体采集终端，使得媒体采集终端将采集的媒体信息通过转码接收端口发送至转码装置。此外，调度装置将媒体邀请确认信息通过TCP双通链路发送至媒体装置，以使得媒体装置启用转码会话模块中目标采集设备对应的保活检测模块。通过保活检测模块检测是否接收到转码装置发送的来自于媒体采集终端的媒体消息，以及在未接收到媒体消息的时间达到预设时间时，终止转码装置与媒体采集终端的第一连接链路、转码装置和媒体装置之间的第二连接链路以及调度装置和目标媒体设备之间的第三连接链路等。
在其他实施例中，调度装置在接收到媒体转发端口和媒体接收端口时，并不向转码装置发送媒体接收端口，而是在调度装置向转码装置发送媒体邀请确认消息时，向转码装置发送媒体接收端口，使得转码装置根据媒体邀请确认消息和媒体接收端口建立转码会话模块，并启用该转码会话模块。
其中，媒体采集终端通过WS链路将语音信息发送至转码接收端口，以使得转码装置接收该语音信息。媒体采集终端通过互联网协议（例如Websocket协议）与转码装置进行通信，如此，媒体采集终端可发送任意格式的语音信息，如发送最原始的PCM(Pulse CodeModulation,脉冲编码调制)音频信息等，就可实现与国标设备（目标媒体设备）之间的互相通信，简化了媒体采集终端与国标设备之间的通讯方式，摆脱媒体采集终端对SIP客户端的依赖，可跨平台实现，极大的实现了业务的扩展性。
转码装置通过转码接收端口接收到语音信息后，将语音信息转码为预设媒体格式的媒体信息，将转码后的媒体信息进行压缩，并通过转码转发端口发送至媒体装置。其中，预设媒体格式为目标媒体设备所支持播放的媒体格式。
媒体装置通过媒体接收模块的媒体接收端口接收媒体信息，并将媒体信息通过媒体转发模块的媒体转发端口发送媒体信息至目标媒体设备。
该实施例实现了媒体邀请请求由目标媒体设备发送，且媒体邀请确认消息也由目标媒体设备发送，打破了现有技术中的媒体邀请请求和媒体邀请确认消息由调度装置（SIP服务器）发送的局面，实现了另一种与目标媒体设备之间的媒体通信方式；另外，媒体采集终端可通过网页等方式将媒体信息发送至转码装置，无需在媒体采集终端中安装SIP服务器，即可实现与国标媒体设备之间的通讯，摆脱对第三方平台SIP客户端的依赖，简化了与国标设备如媒体设备等的通讯方式，极大的实现了业务的扩展性。
下面将上文中描述的结合媒体信息传输系统，来介绍本申请实施例提供的媒体信息传输方法。
图4是本申请实施例提供的媒体信息传输方法的流程示意图。该媒体信息传输方法包括如下步骤。
101，调度装置将转码装置转发的来自媒体采集终端的通知消息发送至目标媒体设备，以使目标媒体设备基于通知消息向媒体采集终端发送通知确认消息。
步骤101对应文本通信的流程。
转码装置接收来自媒体采集终端发送的通知消息，该通知消息可为文本格式的通知消息；生成通知消息的通知描述信息；将通知消息转码为二进制格式的通知消息，并通过TCP双通链路将二进制格式的通知消息发送至调度装置，以使调度装置接收该通知消息。
通知描述信息可以看做是对通知消息的一个抽象描述，该通知描述信息包括通知消息的来源信息和通知消息的应答相关信息，该通知描述信息用于在转码装置接收到基于通知消息的通知确认消息时，根据通知描述信息向媒体采集终端发送通知确认消息，以响应通知消息。即在转码装置中，通过通知描述信息建立通知消息与通知确认消息之间的相互映射关系。
在一实施例中，生成通知消息的通知描述信息的步骤，包括：获取媒体采集终端与转码装置之间建立的WS链路，将该WS链路作为通知消息的链路句柄，也可称为WS句柄；获取通知消息的通知标识；设置通知消息的消息结束标记，并对消息结束标记进行初始化，如初始化为一个消息初始值；将WS句柄、通知消息的通知标识、消息结束标记作为通知消息的通知描述信息。其中，对于每个通知消息，在网页端发送时都会生成通知消息的通知标识，即该通知标识由媒体采集终端生成，该通知标识唯一，该通知标识用于确定媒体采集终端发送的哪个通知消息。
其中，通知描述信息中的通知消息的来源信息包括WS句柄和通知消息的通知标识，通知消息的应答相关信息包括消息结束标记。转码装置中的消息结束标记是否设置为预设结束标记，由调度装置来确定。即调度装置将消息结束标记设置为预设结束标记之后，会告知转码装置，转码装置同样将消息结束标记设置为预设结束标记。
调度装置通过TCP双通链路接收通知消息；生成通知消息的通知消息索引；并生成通知消息的抽象描述信息；将二进制格式的通知消息转换为SIP协议格式的通知消息，并通过SIP双通链路发送该SIP协议格式的通知消息，以使得目标媒体设备根据SIP协议格式的通知消息进行响应。
其中，抽象描述信息包括通知消息的来源信息和通知消息的应答相关信息，该抽象描述信息被配置为在调度装置接收到基于通知消息的SIP协议格式的通知确认消息时，根据SIP格式的通知确认消息转换的二进制格式的通知确认消息对相应的抽象描述信息进行修改，并基于修改后的抽象描述信息，向媒体采集终端发送通知确认消息，以响应通知消息。该抽象描述信息可以看做是对通知消息的一个抽象描述。
通知消息索引用于标识该通知消息，以在对应的通知消息发送出去后，接收到对应的通知确认消息时，通过通知消息索引找到对应的通知消息，并把该通知消息的通知确认消息通过转码装置返回给媒体采集终端。
在调度装置中，通过通知消息索引和通知描述信息，建立通知消息与通知确认消息之间的相互映射关系。
在一实施例中，上述所述的生成通知消息的通知消息索引的步骤，包括：生成一个唯一的编号，将该编号直接作为通知消息的通知消息索引。
在一实施例中，上述所述的生成通知消息的通知消息索引的步骤，包括：获取通知消息所对应的消息类型；获取调度装置中该消息类型所发送的通知消息的通知次数；根据消息类型和通知次数生成通知消息的通知消息索引。例如，可将通知次数增加1，根据增加后的通知次数和消息类型生成通知消息的通知消息索引。如此，确保通知消息的通知消息索引唯一。该种方案可扩展多种不同类型的消息，提高业务的扩展性。
在一实施例中，上述所述的生成通知消息的抽象描述信息的步骤，包括：获取根据通知消息建立的调度装置与转码装置之间的TCP双通链路，将TCP双通链路作为通知消息的连接句柄；设置目标媒体设备的消息结束标记、目标媒体设备的状态码和通知消息对应的超时事件，并对消息结束标记、状态码和超时事件进行初始化；将连接句柄、通知消息中的通知标识、消息结束标记、状态码和超时事件作为通知消息的抽象描述信息。其中，对消息结束标记、状态码和超时事件进行初始化，可理解为将消息结束标记设置为一个标记初始值、状态码设置为一个状态初始值、启动超时事件以记录时间等。
其中，通过通知消息的连接句柄可知道该通知消息是从哪个转码装置发送的，以及接收到通知确认消息后，将该通知确认消息返回至哪个转码装置。状态码用于表示目标媒体设备的状态。调度装置接收到通知确认消息后，解析得到通知确认消息中目标媒体设备返回的状态码，根据状态码来更新对应的抽象描述信息中的状态码，并重置超时事件，另外，将状态码所对应的原因返回，以使得媒体采集终端了解目标媒体设备的状态。如目标媒体设备是否在线。消息结束标记用于表示该次文本通信是否结束，可由国标协议的协议栈来确定该次文本通信是否结束。
对于超时事件，可以理解地，调度装置通过SIP协议与目标媒体设备进行消息传输，会存在目标媒体设备掉线的情况，那么会导致该条通知消息永远得不到应答，从而导致该通知消息所对应的通知消息索引和抽象描述信息一直都在调度装置，多个通知消息索引和抽象描述信息最终导致内存泄露，因此设置超时事件，在预设时间内未收到目标媒体设备的应答，确定超时，从而进行其他处理，以避免造成内存泄露。
在得到通知消息的通知消息索引和抽象描述信息后，将二进制格式的通知消息转换为SIP协议格式的通知消息，并通过SIP双通链路发送该SIP协议格式的通知消息，以使得目标媒体设备根据SIP协议格式的通知消息进行响应。
目标媒体设备响应SIP协议格式的通知消息，通过SIP双通链路向调度装置发送SIP协议格式的通知确认消息。调度装置通过SIP双通链路接收通知确认消息；将通知确认消息转换为二进制格式的通知确认消息；获取通知确认消息中的确认消息索引（该确认消息索引和通知消息索引相同）；根据确认消息索引确定所对应的通知消息的抽象描述信息；根据通知确认消息来修改抽象描述信息中的消息结束标记、超时事件、状态码中的一个或者多个，如通过协议栈确定文本通信结束，将消息结束标记修改为预设结束标记（将预设结束标记会发送至转码装置）；并根据抽象描述信息中将通知确认消息通过TCP双通链路发送至转码装置。
转码装置接收二进制格式的通知确认消息，将该二进制格式的通知确认消息转码为JSON格式的通知确认消息（文本消息），并根据通知描述信息将转码后的通知确认消息通过WS链路返回至媒体采集终端。
上述文本通信的流程针对目标媒体设备在线，且向媒体采集终端发送通知确认消息的情况，即文本通信成功的情况。
在一些实施例中，还存在异常情况。例如，目标媒体设备不在线，调度装置将SIP协议格式的通知消息发送至目标媒体设备时，启动超时事件以记录时间，通过超时事件记录的时间来确定目标媒体设备的状态。如若超时事件记录的时间超过预设时间，则确定目标媒体设备不在线，更改抽象描述信息中的状态码和消息结束标记，并根据修改后的抽象描述信息向媒体采集终端发送相应的提示信息，以使得媒体采集终端了解当前目标媒体设备的状态。如提示：目标媒体设备出现故障，请过段时间重试等。其中，可将状态码修改为不在线所对应的状态码，将消息结束标记设置为预设结束标记。在异常情况下，将不会进行后续的语音通信的流程。
102，调度装置接收目标媒体设备发送的媒体邀请请求，并根据媒体邀请请求将目标媒体设备的媒体接收信息发送至媒体装置。
在文本通信成功的情况下，目标媒体设备成功发送通知确认消息，由于该通知确认消息用于告知媒体采集终端：我已经收到你的媒体通知了，等会给你发媒体邀请请求，你就可以开始发媒体信息了。目标媒体设备发送通知确认消息后，就会为接收媒体信息做准备；另一方面，由于目标媒体设备是用来播放媒体信息的，因此，目标媒体设备做好接收媒体信息的准备，才可以成功接收媒体信息，以进行播放。
在目标媒体设备做好接收媒体信息的准备之后，会通过SIP双通链路向调度装置发送SIP协议格式的媒体邀请请求（Invite请求）。需要说明的是，本申请实施例通过目标媒体设备生成并发送媒体邀请请求，而不是由调度中心生成并发送媒体邀请请求。即在语音通信的流程中，由目标媒体设备来发送媒体邀请请求。该媒体邀请请求中包括媒体收包地址（例如目标媒体设备的IP地址等）、媒体收包端口、所支持播放的媒体格式等媒体接收信息。
调度装置接收目标媒体设备发送的媒体邀请请求，并根据媒体邀请请求将目标媒体设备的媒体接收信息发送至媒体装置，即调度装置将媒体邀请请求中的媒体接收信息通过TCP双通链路发送至媒体装置。
在一实施例中，在调度装置接收到目标媒体设备发送的媒体邀请请求时，所述媒体信息传输方法，还包括：调度装置根据媒体邀请请求建立目标媒体设备的会话配置模块；将目标媒体设备的媒体接收信息添加至会话配置模块中。其中，目标媒体设备的会话配置模块是为目标媒体设备配置的以用于保存目标媒体设备的媒体接收信息以及媒体接收端口和媒体转发端口等信息的一个会话配置对象。通过会话配置对象来保存媒体接收信息。
如图5所示，目标媒体设备通过SIP链路向调度装置发送媒体邀请请求（Invite请求），调度装置根据媒体邀请请求建立目标媒体设备的会话配置模块。调度装置通过TCP双通链路将向媒体接收信息发送至媒体装置。
103，媒体装置根据媒体接收信息确定媒体接收端口和媒体转发端口，并发送至调度装置。
媒体装置通过TCP双通链路接收到媒体接收信息后，根据媒体接收信息确定媒体接收端口和媒体转发端口，并通过TCP双通链路发送至调度装置。
在一实施例中，步骤103，包括：媒体装置根据媒体接收信息，从媒体装置的空闲端口中确定两个端口，分别作为媒体接收端口和媒体转发端口，并将媒体接收端口和媒体转发端口通过TCP双通链路发送至调度装置。
在一实施例中，在确定媒体接收端口和媒体转发端口之后，所述媒体信息传输方法，还包括：根据媒体接收端口建立媒体接收模块，根据媒体转发端口建立媒体转发模块，将所述媒体接收模块和媒体转发模块作为目标媒体设备的媒体会话模块。其中，使用媒体接收模块来实现接收媒体信息的功能，使用媒体转发模块来实现转发媒体信息的功能，以便于对接收媒体信息的功能和转发媒体信息的功能进行扩展。例如，可通过媒体接收模块的媒体接收端口接收多个媒体采集终端发送的媒体信息，可通过媒体发送模块的媒体发送端口转发多个媒体信息等；还可在媒体接收模块和媒体转发模块中设置对应的缓存，以用来缓存媒体信息等。
在一实施例中，所述媒体信息传输方法，还包括：建立保活检测模块，将该保活检测模块作为目标媒体设备的媒体会话模块中的一个模块，通过保活检测模块提供保活检测服务，即通过保活检测模块检测是否接收到转码装置发送的来自于媒体采集终端的媒体消息，以及在未接收到媒体消息的时间达到预设时间时，终止转码装置与媒体采集终端的第一连接链路（语音链路）、转码装置和媒体装置之间的第二连接链路以及调度装置和目标媒体设备之间的第三连接链路（SIP双通链路），以及删除转码装置中与媒体采集终端对应的转码会话模块、媒体装置中与目标媒体设备对应的媒体会话模块和调度装置中与目标媒体设备对应的会话配置模块，以释放媒体采集终端与目标媒体设备之间进行媒体通信所占用的资源。
在一实施例中，媒体装置在建立保活检测模块后，且在接收到媒体邀请确认消息之前，所述媒体信息传输方法，还包括：设置保活检测模块为挂起状态，即创建了保活检测服务，但并未启用保活检测服务。由于此时并未建立媒体采集终端与转码服务器之间的通信链路，因此，不可能会接收到媒体采集终端发送的媒体信息，无需启用保活检测服务。该实施例通过在建立保活检测模块后，且在接收到媒体邀请确认消息之前的时间段内设置保活检测模块为挂起状态，不启用对应的保活检测服务，避免该时间段内保活检测服务的启用占用处理资源，造成处理资源的浪费。
如图5所示，媒体装置通过TCP双通链路接收媒体接收信息，并根据媒体接收信息建立媒体会话模块，该媒体会话模块中包括保活检测模块、媒体接收模块和媒体转发模块。其中，保活检测模块处于挂起状态，媒体接收模块包括媒体接收端口，媒体转发模块中包括媒体转发端口。媒体装置通过TCP双通链路将媒体接收端口和媒体转发端口发送至调度装置。
从图5中看出，当调度装置接收到目标媒体设备发送的媒体邀请请求后，跟媒体装置进行通信，实现了在调度装置中建立目标媒体设备的会话配置模块，在媒体装置中建立目标媒体设备的媒体会话模块。
104，调度装置将媒体转发端口发送至目标媒体设备，以使目标媒体设备发送媒体邀请确认消息，调度装置将媒体接收端口发送至转码装置。
在媒体装置的媒体会话模块创建成功后，媒体装置将媒体接收端口和媒体转发端口发送至调度装置，调度装置接收媒体装置发送的媒体接收端口和媒体转发端口。
在一实施例中，调度装置在接收到媒体装置发送的媒体接收端口和媒体转发端口时，所述媒体信息传输方法，还包括：将媒体接收端口和媒体转发端口添加至目标媒体设备的会话配置模块中。将媒体接收端口和媒体转发端口等信息保存至调度装置的会话配置模块中，以使得通过调度装置来管理媒体接收端口和媒体转发端口，如此，媒体装置可专注于接收媒体信息和转发媒体信息的业务逻辑，而无需管其他的业务逻辑。
调度装置接收到媒体接收端口和媒体转发端口时，将媒体转发端口发送至目标媒体设备，以使目标媒体设备发送媒体邀请确认消息；另外，将媒体接收端口发送至转码装置，以使得转码装置建立目标媒体设备的转码会话模块。对应地，转码装置在接收到媒体接收端口时，建立目标媒体设备的转码会话模块。
在一实施例中，所述建立转码会话模块的步骤，包括：从转码装置的空闲端口中确认两个端口，分别作为转码接收端口和转码转发端口，通过该转码接收端口接收媒体采集终端发送的媒体信息，通过转码转发端口将媒体信息发送至媒体装置；根据转码接收端口建立转码接收模块，根据转码转发端口建立转码转发模块，将转码接收模块和转码转发模块作为目标媒体设备的转码会话模块。其中，使用转码接收模块来实现接收媒体信息的功能，使用转码转发模块来实现转发媒体信息的功能，通过模块的方式以便于对接收媒体信息的功能和转发媒体信息的功能进行扩展。例如，可在媒体接收模块和媒体转发模块中设置对应的缓存，以用来缓存媒体信息等。
该实施例中，在调度装置接收到媒体接收端口和媒体转发端口时，将媒体接收端口发送至转码装置，以使得转码装置建立转码会话模块，如此，提前建立转码会话模块，以在转码装置接收到媒体邀请确认消息时，直接启用转码会话模块（而不是在转码装置接收到媒体邀请确认消息时，建立转码会话模块，再启用转码会话模块），以使得转码会话模块可快速提供对应的服务，为接收媒体采集终端采集的媒体信息做准备。
在一实施例中，调度装置接收到媒体接收端口和媒体转发端口时，只将媒体转发端口发送至目标媒体设备，以使目标媒体设备发送媒体邀请确认消息，而不将媒体接收端口发送至转码装置，媒体接收端口是在调度装置接收到媒体邀请确认信息时，将媒体接收端口和媒体邀请确认消息一起发送至转码装置，以使转码装置建立转码会话模块。下文中也会对此进行描述。
如图6所示，目标语音设备向调度装置发送媒体邀请确认消息。
105，调度装置接收目标媒体设备发送的媒体邀请确认消息，并将媒体邀请确认消息发送至转码装置。
调度装置将媒体转发端口发送至目标媒体设备的目的至少有两个：一，目标媒体设备接收该媒体转发端口，并向调度装置发送媒体邀请确认消息（ACK消息）；二，目标媒体设备只接收媒体装置的媒体转发端口发送的媒体信息，当目标媒体设备接收到其他端口发送的信息后，直接丢弃。
在一实施例中，若调度装置在接收到媒体接收端口和媒体转发端口时，已经将媒体接收端口发送至转码装置，则当调度装置接收目标媒体设备发送的媒体邀请确认消息时，将媒体邀请确认消息发送至转码装置。
在一实施例中，若调度装置接收到媒体接收端口和媒体转发端口时，并没有将媒体接收端口发送至转码装置，则在调度装置接收到媒体邀请确认消息时，将媒体接收端口和媒体邀请确认消息一起发送至转码装置，以使得转码装置建立目标媒体设备的转码会话模块。该实施例中在调度装置接收到媒体邀请确认消息时，才将媒体接收端口和媒体邀请确认消息一起发送至转码装置，以使得转码装置建立转码会话模块。该实施例可减少异常情况下提前建立转码会话模块而导致资源浪费的可能性。例如，目标媒体设备在发送媒体邀请请求后，目标媒体设备出现掉线等异常情况，该中情况下，不会发送媒体邀请确认消息，也没必要建立转码会话模块。
在一实施例中，调度装置接收目标媒体设备发送的媒体邀请确认消息时，除了将媒体邀请确认消息发送至转码装置之外，还将媒体邀请确认消息发送至媒体装置，以使得媒体装置启动目标媒体设备对应的保活检测模块。
如图6所示，当调度装置接收到目标语音设备发送的媒体邀请确认消息时，通过与转码装置的TCP双通链路将媒体邀请确认消息发送至转码装置，通过与媒体装置的TCP双通链路将媒体邀请确认消息发送至媒体装置。
106，转码装置根据媒体邀请确认消息接收媒体采集终端采集的媒体信息，并将媒体信息转码为预设媒体格式的媒体信息，以发送至媒体装置的媒体接收端口，该预设媒体格式为目标媒体设备所支持播放的媒体格式。
转码装置接收媒体邀请确认信息。
若转码装置在接收到媒体邀请确认消息时，转码装置已建立了目标媒体设备的转码会话模块，则所述转码装置根据媒体邀请确认消息接收媒体采集终端采集的媒体信息，并将媒体信息转码为预设媒体格式的媒体信息的步骤，包括：转码装置根据邀请确认消息启用转码会话模块；转码装置将转码接收端口和转码转发端口发送至媒体采集终端，以使得媒体采集终端将采集的媒体信息发送至转码装置的转码接收端口；转码装置将媒体信息转码为预设媒体格式的媒体信息，以将转码后的媒体信息通过转码转发端口发送至媒体装置的媒体接收端口。
若转码装置在接收到媒体要请求确认消息时，转码装置还未建立目标媒体设备的转码会话模块，则所述转码装置根据媒体邀请确认消息接收媒体采集终端采集的媒体信息，并将媒体信息转码为预设媒体格式的媒体信息的步骤，包括：转码装置根据媒体邀请确认消息建立转码会话模块并启用转码会话模块，转码会话模块中包括用于接收媒体采集终端采集的媒体信息的转码接收端口和用于转发媒体信息的转码转发端口；转码装置将转码接收端口发送至媒体采集终端，以使得媒体采集终端将采集的媒体信息发送至转码装置的转码接收端口；转码装置将媒体信息转码为预设媒体格式的媒体信息，以将转码后的媒体信息通过转码转发端口发送至媒体装置的媒体接收端口。
其中，预设媒体格式为目标媒体设备所支持播放的媒体格式。
上述实施例在调度装置接收到目标媒体设备发送的媒体邀请请求后，并没有使得转码装置可实现接收媒体采集终端采集的媒体信息，而是在接收到目标媒体设备发送的媒体邀请确认消息后，再使得转码装置实现接收媒体采集终端采集的媒体信息，如此，避免先实现转码装置接收媒体采集终端采集的媒体信息的对应功能，而又未接收到目标媒体设备发送的媒体邀请确认消息造成的资源（处理资源、链路资源、端口资源等）浪费。
在一实施例中，转码装置将媒体信息转码为预设媒体格式的媒体信息之后，还将预设媒体格式的媒体信息进行压缩，再通过转码转发端口发送至媒体装置的媒体接收端口，以减少传输的数据量。
其中，媒体采集终端采集的媒体信息通过媒体数据包（语音数据包）的方式发送至转码装置，该媒体数据包可以是RTP（Real-time Transport Protocol，实时传输协议）数据包。
如图6所示，转码装置创建了目标媒体设备的转码会话模块，转码会话模块中包括转码接收端口和转码转发端口。转码装置通过语音链路将转码接收端口发送至媒体采集终端，媒体采集终端将采集的媒体信息（RTP数据包）通过语音链路发送至转码接收端口。转码装置接收该媒体信息，并将媒体信息转码为预设媒体格式的媒体信息，将预设媒体格式的媒体信息通过转码转发端口发送至媒体装置。
107，媒体装置根据媒体接收信息通过媒体转发端口将媒体信息发送至目标媒体设备。
媒体装置通过媒体接收模块的媒体接收端口接收媒体信息，将接收到的媒体信息发送至媒体转发模块；媒体转发模块根据媒体接收信息通过媒体转发端口将媒体信息发送至目标媒体设备。
在一实施例中，媒体装置根据媒体接收信息通过媒体转发端口将媒体信息发送至目标媒体设备的步骤，包括：媒体装置的媒体接收模块接收到媒体信息时，将媒体信息发送至媒体转发模块；检测媒体转发模块中是否存在媒体接收信息对应的媒体转发单元；若不存在，则根据媒体接收信息创建对应的媒体转发单元；利用媒体转发单元通过媒体转发端口将媒体信息发送至媒体接收信息所对应的目标媒体设备。
其中，媒体转发单元是与目标媒体设备对应的媒体转发单元，媒体转发单元被配置为用于当接收到媒体信息时，通过与媒体转发单元对应的目标媒体设备的媒体接收信息，来确定将媒体信息通过媒体转发端口发送至哪个目标媒体设备，以进行播放。一个媒体转发单元对应一个目标媒体设备，如此设置可方便对媒体转发模块进行扩展。例如，当媒体转发模块需要将媒体信息通过媒体转发端口发送至多个不同的目标媒体设备时，则可通过创建多个不同的媒体转发单元分别对应多个不同的目标媒体设备，以实现将媒体信息通过媒体转发单元发送至多个不同的目标媒体设备。
至此实现了将媒体采集终端采集的媒体信息发送至目标媒体设备。
如图6所示，媒体装置的媒体转发模块建立了媒体转发单元1，利用媒体转发单元1将媒体信息通过媒体转发端口发送至目标媒体设备。
在图6中，媒体采集终端与转码装置之间有两条链路，一条是WS链路，用于文本数据的传输，是传输控制链路；还有一条是语音链路，用于传输语音信息，即RTP数据包。
上述实施例中的媒体信息传输方法中，实现了媒体邀请请求由目标媒体设备发送，且媒体邀请确认消息也由目标媒体设备发送，打破了现有技术中的媒体邀请请求和媒体邀请确认消息由调度装置（SIP服务器）发送的局面，实现了另一种与目标媒体设备之间的媒体通信方式；而且，本申请实施例先通过文本传输链路进行媒体采集终端与目标媒体设备之间的通知协商，在通知协商成功后，再实现媒体采集终端与目标媒体设备之间的媒体传输，避免直接建立媒体传输通道而又无法进行媒体信息的传输导致的资源浪费；此外，当调度装置接收到媒体邀请请求（Invite请求）时，并没有立即通知转码装置和媒体装置去建立对应的媒体传输（例如音频传输）的传输链路（如转码装置与媒体采集终端之间的语音链路等），而是将所有的配置信息保存起来，如将媒体转发端口、媒体接收端口、媒体接收信息等保存至调度装置的调度会话模块中；在接收到媒体邀请确认消息（ACK消息）后，才建立对应的传输链路；避免了在调度装置接收到媒体邀请请求之后，目标媒体设备出现异常导致无需进行媒体传输，但又提前建立对应的媒体传输的传输链路造成的资源浪费的问题。
如图7所示，本申请实施例还提供了一种媒体信息传输系统，该媒体信息传输系统中包括媒体装置、转码装置和调度装置，该媒体装置、转码装置和调度装置一起实现前述所述的任一种媒体信息传输方法中的步骤。
本申请实施例还提供了一种媒体信息传输系统，该媒体信息传输系统中包括媒体装置、转码装置和调度装置，其中，媒体装置集成在媒体服务器中、转码装置集成在转码服务器中、调度装置集成在调度服务器中。
其中，本申请实施例还提供了一种调度服务器，如图8所示。可以理解地，媒体服务器和转码服务器也具有和图8一样的结构，后面将不再对媒体服务器和转码服务器的结构进行描述，具体请参看调度服务器所示的结构。
图8所示的调度服务器的可以包括一个或者一个以上处理核心的处理器901、一个或一个以上计算机可读存储介质的存储器902、射频（Radio Frequency，RF）电路903、电源904、输入单元905、以及显示单元906等部件。本领域技术人员可以理解，图中示出的调度服务器结构并不构成对调度服务器的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。其中：
处理器901是该调度服务器的控制中心，包括中央处理器和图形处理器，中央处理器和图形处理器相连接。其中，中央处理器利用各种接口和线路连接整个调度服务器的各个部分，通过运行或执行存储在存储器902内的软件程序和/或模块，以及调用存储在存储器902内的数据，执行调度服务器的各种功能和处理数据，从而对调度服务器进行整体监控。可选的，中央处理器可包括一个或多个处理核心；优选的，中央处理器可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解地是，上述调制解调处理器也可以不集成到中央处理器中。图形处理器，主要实现对中央处理器传递过来的数据进行处理，如渲染等。
存储器902可用于存储软件程序（计算机程序）以及模块，处理器901通过运行存储在存储器902的软件程序以及模块，从而执行各种功能应用以及数据处理。存储器902可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序（比如声音播放功能、图像播放功能等）等；存储数据区可存储根据调度服务器的使用所创建的数据等。此外，存储器902可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器902还可以包括存储器控制器，以提供处理器901对存储器902的访问。
RF电路903可用于收发信息过程中，信号的接收和发送，特别地，将基站的下行信息接收后，交由一个或者一个以上处理器901处理；另外，将涉及上行的数据发送给基站。通常，RF电路903包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块（SIM）卡、收发信机、耦合器、低噪声放大器（LNA，Low Noise Amplifier）、双工器等。此外，RF电路903还可以通过无线通信与网络和其他设备通信。所述无线通信可以使用任一通信标准或协议，包括但不限于全球移动通讯系统（GSM，Global System of Mobilecommunication）、通用分组无线服务（GPRS，General Packet Radio Service）、码分多址（CDMA，Code Division Multiple Access）、宽带码分多址（WCDMA，Wideband CodeDivision Multiple Access）、长期演进（LTE，Long Term Evolution）、电子邮件、短消息服务（SMS，Short Messaging Service）等。
调度服务器还包括给各个部件供电的电源904（比如电池），优选的，电源904可以通过电源管理系统与处理器901逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源904还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
该调度服务器还可包括输入单元905，该输入单元905可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地，在一个具体地实施例中，输入单元905可包括触敏表面以及其他输入设备。触敏表面，也称为触摸显示屏或者触控板，可收集用户在其上或附近的触摸操作（比如用户使用手指、触笔等任何适合的物体或附件在触敏表面上或在触敏表面附近的操作），并根据预先设定的程式驱动相应的连接装置。可选的，触敏表面可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器901，并能接收处理器901发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触敏表面。除了触敏表面，输入单元905还可以包括其他输入设备。具体地，其他输入设备可以包括但不限于物理键盘、功能键（比如音量控制按键、开关按键等）、轨迹球、鼠标、操作杆等中的一种或多种。
该调度服务器还可包括显示单元906，该显示单元906可用于显示由用户输入的信息或提供给用户的信息以及调度服务器的各种图形用户接口，这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元906可包括显示面板，可选的，可以采用液晶显示器（LCD，Liquid Crystal Display）、有机发光二极管（OLED，Organic Light-Emitting Diode）等形式来配置显示面板。进一步的，触敏表面可覆盖显示面板，当触敏表面检测到在其上或附近的触摸操作后，传送给处理器901以确定触摸事件的类型，随后处理器901根据触摸事件的类型在显示面板上提供相应的视觉输出。虽然在图中，触敏表面与显示面板是作为两个独立的部件来实现输入和输入功能，但是在某些实施例中，可以将触敏表面与显示面板集成而实现输入和输出功能。
尽管未示出，调度服务器还可以包括摄像头（需要注意的是，该处的摄像头与上述所述的虚拟相机不同，该处的摄像头指的是硬件）、蓝牙模块等，在此不再赘述。具体在本实施例中，调度服务器中的处理器901会按照如下的指令，将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器902中，并由处理器901来运行存储在存储器902中的应用程序，从而实现上述媒体信息传输方法中调度服务器实现的步骤。
本领域普通技术人员可以理解，上述实施例的各种方法中的全部或部分步骤可以通过指令（计算机程序）来完成，或通过指令（计算机程序）控制相关的硬件来完成，该指令可以存储于一计算机可读存储介质中，并由处理器进行加载和执行。为此，本发明实施例提供一种存储介质，其中存储有多条指令，该指令能够被处理器进行加载，以执行本发明实施例所提供的媒体信息传输方法中任一实施例的步骤。
其中，该存储介质可以包括：只读存储器（ROM，Read Only Memory）、随机存取记忆体（RAM，Random Access Memory）、磁盘或光盘等。
由于该存储介质中所存储的指令，可以执行本发明实施例所提供的任一媒体信息传输方法实施例中的步骤，因此，可以实现本发明实施例所提供的任一媒体信息传输方法所能实现的有益效果，详见前面的实施例，在此不再赘述。
以上对本申请实施例所提供的一种媒体信息传输方法、系统以及存储介质进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种媒体信息传输方法，其特征在于，包括：
调度装置将转码装置转发的来自媒体采集终端的通知消息发送至目标媒体设备，以使所述目标媒体设备基于所述通知消息向所述媒体采集终端发送通知确认消息；
所述调度装置接收所述目标媒体设备发送的媒体邀请请求，并根据所述媒体邀请请求将所述目标媒体设备的媒体接收信息发送至媒体装置；
所述媒体装置根据所述媒体接收信息确定媒体接收端口和媒体转发端口，并发送至所述调度装置；
所述调度装置将所述媒体转发端口发送至所述目标媒体设备，以使所述目标媒体设备发送媒体邀请确认消息，并将所述媒体接收端口发送至所述转码装置；
所述调度装置接收所述目标媒体设备发送的媒体邀请确认消息，并将所述媒体邀请确认消息发送至所述转码装置；
所述转码装置根据所述媒体邀请确认消息接收所述媒体采集终端采集的媒体信息，并将所述媒体信息转码为预设媒体格式的媒体信息，以发送至媒体装置的所述媒体接收端口，所述预设媒体格式为目标媒体设备所支持播放的媒体格式；
所述媒体装置根据所述媒体接收信息通过媒体转发端口将所述媒体信息发送至所述目标媒体设备。
2.根据权利要求1所述的媒体信息传输方法，其特征在于，所述媒体装置根据所述媒体接收信息确定媒体接收端口和媒体转发端口的步骤，包括：
所述媒体装置根据所述媒体接收信息，从所述媒体装置的空闲端口中确定两个端口，分别作为媒体接收端口和媒体转发端口；
所述媒体信息传输方法，还包括：根据所述媒体接收端口建立媒体接收模块，根据所述媒体转发端口建立媒体转发模块。
3.根据权利要求2所述的媒体信息传输方法，其特征在于，还包括：
建立保活检测模块；
在调度装置接收到所述目标媒体设备发送的媒体邀请确认消息时，将所述媒体邀请确认信息发送至所述媒体装置；
所述媒体装置根据接收到的所述媒体邀请确认信息，启用所述保活检测模块，以通过所述保活检测模块检测是否接收到所述转码装置发送的来自于所述媒体采集终端的媒体消息，以及在未接收到所述媒体消息的时间达到预设时间时，终止所述转码装置与所述媒体采集终端的第一连接链路、所述转码装置和所述媒体装置之间的第二连接链路以及所述调度装置和所述目标媒体设备之间的第三连接链路。
4.根据权利要求2所述的媒体信息传输方法，其特征在于，所述媒体装置根据所述媒体接收信息通过媒体转发端口将所述媒体信息发送至所述目标媒体设备的步骤，包括：
所述媒体装置的媒体接收模块接收到媒体信息时，将所述媒体信息发送至所述媒体转发模块；
检测媒体转发模块中是否存在所述媒体接收信息对应的媒体转发单元；
若不存在，则根据所述媒体接收信息创建对应的媒体转发单元；
利用所述媒体转发单元通过所述媒体转发端口将所述媒体信息发送至所述媒体接收信息所对应的目标媒体设备。
5.根据权利要求1所述的媒体信息传输方法，其特征在于，还包括：
所述转码装置接收到所述媒体接收端口时，建立转码会话模块，所述转码会话模块中包括用于接收所述媒体采集终端采集的媒体信息的转码接收端口和用于转发所述媒体信息的转码转发端口；
所述转码装置根据所述媒体邀请确认消息接收所述媒体采集终端采集的媒体信息，并将所述媒体信息转码为预设媒体格式的媒体信息，以发送至媒体装置的所述媒体接收端口的步骤，包括：
所述转码装置根据邀请确认消息启用所述转码会话模块；
所述转码装置将所述转码接收端口和所述转码转发端口发送至所述媒体采集终端，以使得所述媒体采集终端将采集的媒体信息发送至所述转码装置的转码接收端口；
所述转码装置将所述媒体信息转码为预设媒体格式的媒体信息，以将转码后的所述媒体信息通过所述转码转发端口发送至媒体装置的所述媒体接收端口。
6.根据权利要求1所述的媒体信息传输方法，其特征在于，所述转码装置根据所述媒体邀请确认消息接收所述媒体采集终端采集的媒体信息，并将所述媒体信息转码为预设媒体格式的媒体信息，以发送至媒体装置的所述媒体接收端口的步骤，包括：
所述转码装置根据媒体邀请确认消息建立转码会话模块并启用所述转码会话模块，所述转码会话模块中包括用于接收所述媒体采集终端采集的媒体信息的转码接收端口和用于转发所述媒体信息的转码转发端口；
所述转码装置将所述转码接收端口发送至所述媒体采集终端，以使得所述媒体采集终端将采集的媒体信息发送至所述转码装置的转码接收端口；
所述转码装置将所述媒体信息转码为预设媒体格式的媒体信息，以将转码后的所述媒体信息通过所述转码转发端口发送至媒体装置的所述媒体接收端口。
7.根据权利要求1所述的媒体信息传输方法，其特征在于，在所述调度装置接收所述目标媒体设备发送的媒体邀请请求的步骤之后，还包括：
根据所述媒体邀请请求建立所述目标媒体设备的会话配置模块；
将所述目标媒体设备的媒体接收信息添加至所述会话配置模块；
在接收到所述媒体装置发送的媒体接收端口和媒体转发端口时，将所述媒体接收端口和所述媒体转发端口添加至所述会话配置模块。
8.根据权利要求1所述的媒体信息传输方法，其特征在于，所述调度装置将转码装置转发的来自媒体采集终端的通知消息发送至目标媒体设备，以使所述目标媒体设备基于所述通知消息向所述媒体采集终端发送通知确认消息的步骤，包括：
所述转码装置接收媒体采集终端发送的通知消息，将所述通知消息进行转码，以得到二进制格式的通知消息，并发送至所述调度装置；
所述调度装置接收所述通知消息，生成所述通知消息的抽象描述信息和通知消息索引，并将所述通知消息发送至所述目标媒体设备；
所述调度装置接收到所述目标媒体设备基于所述通知消息返回的通知确认消息时，根据所述抽象描述信息和通知消息索引来将所述通知确认信息返回至所述转码装置，以使所述转码装置将所述通知确认信息返回至所述媒体采集终端。
9.一种媒体信息传输系统，其特征在于，所述媒体信息传输系统包括转码装置、调度装置和媒体装置，所述转码装置、所述调度装置、所述媒体装置共同实现上述权利要求1至8任一项所述的媒体信息传输方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时，实现上述权利要求1至8任一项所述的媒体信息传输方法。
CN202110550974.7A 2021-05-20 2021-05-20 一种媒体信息传输方法、系统及存储介质 Active CN112995674B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110550974.7A CN112995674B (zh) 2021-05-20 2021-05-20 一种媒体信息传输方法、系统及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110550974.7A CN112995674B (zh) 2021-05-20 2021-05-20 一种媒体信息传输方法、系统及存储介质

Publications (2)

Publication Number Publication Date
CN112995674A true CN112995674A (zh) 2021-06-18
CN112995674B CN112995674B (zh) 2021-08-03

Family

ID=76337716

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110550974.7A Active CN112995674B (zh) 2021-05-20 2021-05-20 一种媒体信息传输方法、系统及存储介质

Country Status (1)

Country Link
CN (1) CN112995674B (zh)

Citations (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003003653A2 (en) * 2001-06-26 2003-01-09 Versada Networks, Inc. Transcoding sms-based streamed messages to sip-based ip signals in wireless and wireline networks
CN1538696A (zh) * 2003-10-24 2004-10-20 清华大学 一种支持大容量用户的多路实时视频网关及其应用方法
US20080195761A1 (en) * 2007-02-09 2008-08-14 Dilithium Holdings, Inc. Method and apparatus for the adaptation of multimedia content in telecommunications networks
CN101909046A (zh) * 2009-11-17 2010-12-08 新奥特（北京）视频技术有限公司 一种多媒体转码服务器及一种多媒体转码系统
CN103227788A (zh) * 2013-04-17 2013-07-31 广州市和声信息技术有限公司 实现网页应用程序与sip设备进行通信的方法和系统
CN103297445A (zh) * 2012-02-22 2013-09-11 中国移动通信集团公司 一种基于IP多媒体网络的Web终端通信方法和系统
CN104954764A (zh) * 2015-07-21 2015-09-30 上海远哲电子技术有限公司 基于视频资源安全网关的视频监控系统
US20160127421A1 (en) * 2013-06-17 2016-05-05 Selex Es S.P.A. Sip extension for dmr networks matching pmr features
CN107396049A (zh) * 2017-07-28 2017-11-24 武汉烽火众智数字技术有限责任公司 一种兼容多协议的设备接入系统及其方法
CN108391082A (zh) * 2017-12-18 2018-08-10 武汉烽火众智数字技术有限责任公司 一种基于gb28181协议的目标结构化服务接入方法、装置和系统
CN208299822U (zh) * 2018-06-20 2018-12-28 福建省应急通信运营有限公司 一种宽带集群系统与视频监控系统的融合系统
CN110830777A (zh) * 2019-11-29 2020-02-21 公安部第一研究所 基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的方法
US10587449B2 (en) * 2016-07-18 2020-03-10 Avaya Inc. System and method to use location-aware DNS responses as input to media relay selection for WebRTC
US10637912B2 (en) * 2012-05-09 2020-04-28 Twilio Inc. System and method for managing media in a distributed communication network
US10693952B2 (en) * 2017-10-23 2020-06-23 Salesforce.Com, Inc. Technologies for low latency messaging
CN112135104A (zh) * 2020-09-24 2020-12-25 智洋创新科技股份有限公司 基于多场景融合的视频综合监控系统及方法
CN112312072A (zh) * 2019-07-31 2021-02-02 广州弘度信息科技有限公司 一种基于java-sip的使用websocket网络通信协议的视频播放方法
CN112422583A (zh) * 2020-12-01 2021-02-26 广州德亨信息技术有限公司 多协议视频应用融合互通的方法和系统

Patent Citations (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003003653A2 (en) * 2001-06-26 2003-01-09 Versada Networks, Inc. Transcoding sms-based streamed messages to sip-based ip signals in wireless and wireline networks
CN1538696A (zh) * 2003-10-24 2004-10-20 清华大学 一种支持大容量用户的多路实时视频网关及其应用方法
US20080195761A1 (en) * 2007-02-09 2008-08-14 Dilithium Holdings, Inc. Method and apparatus for the adaptation of multimedia content in telecommunications networks
CN101909046A (zh) * 2009-11-17 2010-12-08 新奥特（北京）视频技术有限公司 一种多媒体转码服务器及一种多媒体转码系统
CN103297445A (zh) * 2012-02-22 2013-09-11 中国移动通信集团公司 一种基于IP多媒体网络的Web终端通信方法和系统
US10637912B2 (en) * 2012-05-09 2020-04-28 Twilio Inc. System and method for managing media in a distributed communication network
CN103227788A (zh) * 2013-04-17 2013-07-31 广州市和声信息技术有限公司 实现网页应用程序与sip设备进行通信的方法和系统
US20160127421A1 (en) * 2013-06-17 2016-05-05 Selex Es S.P.A. Sip extension for dmr networks matching pmr features
CN104954764A (zh) * 2015-07-21 2015-09-30 上海远哲电子技术有限公司 基于视频资源安全网关的视频监控系统
US10587449B2 (en) * 2016-07-18 2020-03-10 Avaya Inc. System and method to use location-aware DNS responses as input to media relay selection for WebRTC
CN107396049A (zh) * 2017-07-28 2017-11-24 武汉烽火众智数字技术有限责任公司 一种兼容多协议的设备接入系统及其方法
US10693952B2 (en) * 2017-10-23 2020-06-23 Salesforce.Com, Inc. Technologies for low latency messaging
CN108391082A (zh) * 2017-12-18 2018-08-10 武汉烽火众智数字技术有限责任公司 一种基于gb28181协议的目标结构化服务接入方法、装置和系统
CN208299822U (zh) * 2018-06-20 2018-12-28 福建省应急通信运营有限公司 一种宽带集群系统与视频监控系统的融合系统
CN112312072A (zh) * 2019-07-31 2021-02-02 广州弘度信息科技有限公司 一种基于java-sip的使用websocket网络通信协议的视频播放方法
CN110830777A (zh) * 2019-11-29 2020-02-21 公安部第一研究所 基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的方法
CN112135104A (zh) * 2020-09-24 2020-12-25 智洋创新科技股份有限公司 基于多场景融合的视频综合监控系统及方法
CN112422583A (zh) * 2020-12-01 2021-02-26 广州德亨信息技术有限公司 多协议视频应用融合互通的方法和系统

Also Published As

Publication number Publication date
CN112995674B (zh) 2021-08-03

Similar Documents

Publication Publication Date Title
US10764074B2 (en) Method, apparatus, and system for providing specified communications service, and terminal
CN109921976B (zh) 一种基于群组的通信控制方法、装置及存储介质
WO2016150270A1 (zh) 群组会话消息处理方法和装置
WO2016150331A1 (zh) 一种运行游戏客户端的方法和装置
WO2015090248A1 (zh) 服务器的过载保护方法及装置
CN107332976B (zh) K歌方法、装置、设备及系统
CN108040091B (zh) 数据处理方法、装置及存储介质
WO2016127795A1 (zh) 业务处理方法、服务器及终端
CN111478849B (zh) 业务访问方法、装置和存储介质
CN113038090B (zh) 一种传输链路管理方法和系统
WO2017096909A1 (zh) 建立数据连接的方法及装置
WO2021078215A1 (zh) 一种云游戏跨终端切换的方法和相关装置
WO2014166263A1 (en) Communication method, system, server and client device for user-interactive system
CN109495769B (zh) 视频通信方法、终端、智能电视、服务器及存储介质
CN108809799B (zh) 信息发送方法、信息显示方法、装置及系统
CN108270764B (zh) 一种应用登陆方法、服务器及移动端
CN107317828B (zh) 文件下载方法及装置
WO2017000495A1 (zh) 一种添加联系人的方法及设备
CN107172719B (zh) 建立通信连接的方法
US9965341B2 (en) Method and device for exchanging data between processes
US20140309030A1 (en) Communication method, system, server and client device for user-interactive system
CN112995674B (zh) 一种媒体信息传输方法、系统及存储介质
CN104378339B (zh) 一种使用代理协议的通信方法和装置
CN106878294B (zh) 一种对讲机录制语音信息的方法和装置
CN106330875B (zh) 消息显示方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant