CN115174964A - 一种多媒体渲染系统的预览和控制方法 - Google Patents

一种多媒体渲染系统的预览和控制方法 Download PDF

Info

Publication number
CN115174964A
CN115174964A CN202210766006.4A CN202210766006A CN115174964A CN 115174964 A CN115174964 A CN 115174964A CN 202210766006 A CN202210766006 A CN 202210766006A CN 115174964 A CN115174964 A CN 115174964A
Authority
CN
China
Prior art keywords
mode
preview
multimedia
webpage
control end
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210766006.4A
Other languages
English (en)
Other versions
CN115174964B (zh
Inventor
刘永建
李厚鹏
周劲羽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Bird Information Technology Co ltd
Original Assignee
Zhengzhou Bird Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Bird Information Technology Co ltd filed Critical Zhengzhou Bird Information Technology Co ltd
Priority to CN202210766006.4A priority Critical patent/CN115174964B/zh
Publication of CN115174964A publication Critical patent/CN115174964A/zh
Application granted granted Critical
Publication of CN115174964B publication Critical patent/CN115174964B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234309—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4782—Web browsing, e.g. WebTV
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种多媒体渲染系统的预览和控制方法，涉及网络技术领域，解决基于PC架构的控制端不能高效地对媒体素材进行显示控制的技术问题，方法包括分别设置MQTTBroker通讯节点、嵌入式Http服务器、预览画面编码服务模块；多媒体播控系统通过预览画面编码服务模块将输出画面发送给网页控制端；同时，多媒体播控系统通过嵌入式Http服务器对网页控制端提供操作接口，用于网页控制端选择输出画面的预览模式；多媒体播控系统通过MQTTBroker通讯节点接收网页控制端发送的控制指令，根据控制指令进行输出画面调整，并将调整后的输出画面发送给网页控制端。本发明可以优化播控系统的预览和控制，提高预览的画面清晰度和操作的灵敏度。

Description

一种多媒体渲染系统的预览和控制方法
技术领域
本发明涉及网络技术领域，更具体地说，它涉及一种多媒体渲染系统的预览和控制方法。
背景技术
多媒体播控系统的内容远程控制，通常包含画面内容的预览和输入反控，通常的系统架构为C/S模式，控制端基于PC架构进行设计开发，而且会有超大分辨率的多媒体系统预览问题，比如控制端的系统分辨率过低，满足不了对播控设备点对点的预览和控制，这些问题导致用户在高分辨率播控系统下的操作失误问题，不能高效的对媒体素材进行显示控制。
发明内容
本发明要解决的技术问题是针对现有技术的上述不足，本发明的目的是提供一种多媒体渲染系统的预览和控制方法，可以提升画面预览的清晰度和操控的准确度。
本发明的技术方案是：一种多媒体渲染系统的预览和控制方法，包括分别设置MQTTBroker通讯节点、嵌入式Http服务器、预览画面编码服务模块；
多媒体播控系统通过所述预览画面编码服务模块将输出画面发送给网页控制端；同时，所述多媒体播控系统通过所述嵌入式Http服务器对所述网页控制端提供操作接口，用于所述网页控制端选择所述输出画面的预览模式；
所述多媒体播控系统通过所述嵌入式Http服务器接收所述网页控制端发送的控制指令，根据所述Restful接口进行输出画面调整，并将调整后的输出画面发送给所述网页控制端。
作为进一步地改进，所述网页控制端为基于B/S模式设计开发的。
进一步地，所述预览模式包括全局模式、放大镜模式、清晰度模式，所述操作接口包括与所述全局模式对应的全局模式接口、与所述放大镜模式对应的放大镜模式接口、与所述清晰度模式对应的清晰度模式接口。
进一步地，所述嵌入式Http服务器的工作包括：
查询所述多媒体播控系统的操作Restful接口；
根据所述Restful通知所述多媒体播控系统进行调整预览画面视口。
进一步地，调整预览画面视口包括预览模式调整、视口位置调整。
进一步地，所述预览画面编码服务模块的工作包括：
通过TCP的SOCKET服务接收所述网页控制端发起的连接请求；
对所述多媒体播控系统的输出画面进行MJPEG编码；
将编码后的数据通过Http连接传输通道发送给所述网页控制端。
进一步地，还包括设置输入注入服务模块，所述多媒体播控系统通过所述输入注入服务模块接收所述网页控制端发送的操作坐标，并将操作坐标转换为本地的坐标点，所述多媒体播控系统根据本地的坐标点,将鼠标点发送给操作系统，让操作系统执行用户的鼠标操作动作。
进一步地，还包括设置MQTT客户端，MQTT客户端用于提供MQTT消息服务，所述多媒体播控系统通过所述MQTT客户端连接各个网页控制端对应的MQTTBroker通讯节点。
有益效果
本发明与现有技术相比，具有的优点为：
本发明可以优化播控系统的预览和控制，提高预览的画面清晰度和操作的灵敏度，操作端通过B/S架构，从而实现跨平台的预览和操作，既可以减少软件在扩展、维护的成本，又可以保证系统的画面清晰度和操控的精准度。
附图说明
图1为本发明的框架图。
具体实施方式
下面结合附图中的具体实施例对本发明做进一步的说明。
参阅图1，一种多媒体渲染系统的预览和控制方法，包括分别设置MQTTBroker通讯节点、嵌入式Http服务器、预览画面编码服务模块；
多媒体播控系统通过预览画面编码服务模块将输出画面发送给网页控制端；同时，多媒体播控系统通过嵌入式Http服务器对网页控制端提供操作接口，用于网页控制端选择输出画面的预览模式；
多媒体播控系统通过嵌入式Http服务器接收网页控制端发送的控制指令，根据Restful接口进行输出画面调整，并将调整后的输出画面发送给网页控制端；当然，多媒体播控系统的控制指令也是通过MQTTBroker通讯节点发送给网页控制端，与Http协议相比，MQTTBroker协议传输速度更快，可以高效地对媒体素材进行显示控制。MQTT Broker通讯主要是用来传输控制指令，是对内容的反向输入控制，不是对画面尺寸或者清晰度的调整，比如多媒体播控主机打开了一个本地的程序，在网页控制端就可以把鼠标或者键盘的数据通过MQTTBroker发送给播控主机，这样就可以远程的方式操作应用程序。
网页控制端为基于B/S模式设计开发的，负责展示预览画面和操作输入采集，如触摸输入采集或鼠标输入采集，B/S模式的网页控制端可以实现跨平台的预览和操作，可以增加系统部署和打开的灵活性，既可以减少软件在扩展、维护的成本，又可以保证系统的画面清晰度和操控的精准度。
预览模式包括全局模式、放大镜模式、清晰度模式，全局模式为完整的输出画面，即在网页控制端的界面显示完整的输出画面，放大镜模式为局部的输出画面，通过放大局部的输出画面并在网页控制端的界面显示，可以看到局部细节，清晰度模式为根据网页控制端的分辨率来调节输出画面的清晰度并在网页控制端的界面显示。操作接口包括与全局模式对应的全局模式接口、与放大镜模式对应的放大镜模式接口、与清晰度模式对应的清晰度模式接口，操作接口可以是按键的形式或选择框的形式。当用户想在网页控制端观看不同的预览模式，或发现分辨率过低，或分辨率不合适时，用户在网页控制端界面上的相应的操作接口进行操作，网页控制端生成控制指令，并通过MQTTBroker通讯节点发送给多媒体播控系统。
嵌入式Http服务器的工作包括：
查询多媒体播控系统的操作Restful接口，即循环接收网页控制端发送的控制指令；
根据Restful通知多媒体播控系统进行调整预览画面视口，调整预览画面视口包括预览模式调整、视口位置调整，如全局模式、放大镜模式或清晰度模式，放大镜模式显示的视口位置。
预览画面编码服务模块的工作包括：
通过TCP的SOCKET服务接收网页控制端发起的连接请求；
对多媒体播控系统的输出画面进行MJPEG编码，可以根据不同的清晰度模式进行编码；
将编码后的数据按照Http协议通过长连接传输通道发送给网页控制端，即是通过Http长连接传输通道进行数据的发送。
本方法还包括设置输入注入服务模块，多媒体播控系统通过输入注入服务模块接收网页控制端发送的操作坐标，操作坐标为放大镜模式对应的区域坐标，如触摸操作的坐标或鼠标操作的坐标，并将操作坐标转换为本地的坐标点，多媒体播控系统根据本地的坐标点,将鼠标点发送给操作系统，让操作系统执行用户的鼠标操作动作。可以根据网页控制端视口区域动态调整的设计，来提升画面预览的清晰度和操控的准确度。
本方法还包括设置MQTT客户端，MQTT客户端用于提供MQTT消息服务，多媒体播控系统通过MQTT客户端连接各个网页控制端对应的MQTTBroker通讯节点，即存在多个网页控制端时，设置与网页控制端数量相同的MQTT客户端，可以实现多媒体播控系统同时与多个网页控制端互发控制指令。
本发明中上的关键术语的解释：
MQTTBroker通讯节点:基于网络的信息转发服务器。
内嵌Http服务器:集成到软件内的服务组件，非独立运行的Http请求服务器。
Restful接口:基于Http协议的请求路径地址。
以上仅是本发明的优选实施方式，应当指出对于本领域的技术人员来说，在不脱离本发明结构的前提下，还可以作出若干变形和改进，这些都不会影响本发明实施的效果和专利的实用性。

Claims (8)

1.一种多媒体渲染系统的预览和控制方法，其特征在于，包括分别设置MQTTBroker通讯节点、嵌入式Http服务器、预览画面编码服务模块；
多媒体播控系统通过所述预览画面编码服务模块将输出画面发送给网页控制端；同时，所述多媒体播控系统通过所述嵌入式Http服务器对所述网页控制端提供操作接口，用于所述网页控制端选择所述输出画面的预览模式；
所述多媒体播控系统通过所述嵌入式Http服务器接收所述网页控制端发送的控制指令，根据所述Restful接口进行输出画面调整，并将调整后的输出画面发送给所述网页控制端。
2.根据权利要求1所述的一种多媒体渲染系统的预览和控制方法，其特征在于，所述网页控制端为基于B/S模式设计开发的。
3.根据权利要求1所述的一种多媒体渲染系统的预览和控制方法，其特征在于，所述预览模式包括全局模式、放大镜模式、清晰度模式，所述操作接口包括与所述全局模式对应的全局模式接口、与所述放大镜模式对应的放大镜模式接口、与所述清晰度模式对应的清晰度模式接口。
4.根据权利要求1所述的一种多媒体渲染系统的预览和控制方法，其特征在于，所述嵌入式Http服务器的工作包括：
查询所述多媒体播控系统的操作Restful接口；
根据所述Restful通知所述多媒体播控系统进行调整预览画面视口。
5.根据权利要求4所述的一种多媒体渲染系统的预览和控制方法，其特征在于，调整预览画面视口包括预览模式调整、视口位置调整。
6.根据权利要求1所述的一种多媒体渲染系统的预览和控制方法，其特征在于，所述预览画面编码服务模块的工作包括：
通过TCP的SOCKET服务接收所述网页控制端发起的连接请求；
对所述多媒体播控系统的输出画面进行MJPEG编码；
将编码后的数据通过Http长连接传输通道发送给所述网页控制端。
7.根据权利要求1所述的一种多媒体渲染系统的预览和控制方法，其特征在于，还包括设置输入注入服务模块，所述多媒体播控系统通过所述输入注入服务模块接收所述网页控制端发送的操作坐标，并将操作坐标转换为本地的坐标点，所述多媒体播控系统根据本地的坐标点,将鼠标点发送给操作系统，让操作系统执行用户的鼠标操作动作。
8.根据权利要求1所述的一种多媒体渲染系统的预览和控制方法，其特征在于，还包括设置MQTT客户端，MQTT客户端用于提供MQTT消息服务，所述多媒体播控系统通过所述MQTT客户端连接各个网页控制端对应的MQTTBroker通讯节点。
CN202210766006.4A 2022-06-30 2022-06-30 一种多媒体渲染系统的预览和控制方法 Active CN115174964B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210766006.4A CN115174964B (zh) 2022-06-30 2022-06-30 一种多媒体渲染系统的预览和控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210766006.4A CN115174964B (zh) 2022-06-30 2022-06-30 一种多媒体渲染系统的预览和控制方法

Publications (2)

Publication Number Publication Date
CN115174964A true CN115174964A (zh) 2022-10-11
CN115174964B CN115174964B (zh) 2024-03-26

Family

ID=83489269

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210766006.4A Active CN115174964B (zh) 2022-06-30 2022-06-30 一种多媒体渲染系统的预览和控制方法

Country Status (1)

Country Link
CN (1) CN115174964B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104918095A (zh) * 2015-05-19 2015-09-16 乐视致新电子科技（天津）有限公司 多媒体流数据预览展示方法及装置
CN108628870A (zh) * 2017-03-16 2018-10-09 北京搜狗科技发展有限公司 一种网页预览方法和装置
CN108881962A (zh) * 2017-12-20 2018-11-23 北京视联动力国际信息技术有限公司 一种预览画面的生成方法、视联网终端和视联网服务器
CN112437342A (zh) * 2020-05-14 2021-03-02 上海哔哩哔哩科技有限公司 一种视频编辑的方法及设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104918095A (zh) * 2015-05-19 2015-09-16 乐视致新电子科技（天津）有限公司 多媒体流数据预览展示方法及装置
US20160342319A1 (en) * 2015-05-19 2016-11-24 Lemobile Information Technology (Beijing) Co., Ltd. Method and device for previewing and displaying multimedia streaming data
CN108628870A (zh) * 2017-03-16 2018-10-09 北京搜狗科技发展有限公司 一种网页预览方法和装置
CN108881962A (zh) * 2017-12-20 2018-11-23 北京视联动力国际信息技术有限公司 一种预览画面的生成方法、视联网终端和视联网服务器
CN112437342A (zh) * 2020-05-14 2021-03-02 上海哔哩哔哩科技有限公司 一种视频编辑的方法及设备

Also Published As

Publication number Publication date
CN115174964B (zh) 2024-03-26

Similar Documents

Publication Publication Date Title
US11120677B2 (en) Transcoding mixing and distribution system and method for a video security system
US9769423B2 (en) System and method for point to point integration of personal computers with videoconferencing systems
CN101268674B (zh) 提供远程用户界面的设备和方法
CN101345865B (zh) 图像发送装置、图像发送方法、接收装置及图像发送系统
US9161063B2 (en) System and method for low bandwidth display information transport
US20130050271A1 (en) Mobile terminal, image display device mounted on vehicle and data processing method using the same
CN102883135A (zh) 屏幕共享及控制方法
CN102308551A (zh) 虚拟用户端设备
US20030177445A1 (en) System for describing markup language for mobile use, and information processing apparatus and program for generating display content
JP2004348380A (ja) シンクライアントシステム、シンクライアント端末機、中継装置、サーバ装置及びシンクライアント端末画面表示方法
KR20070056442A (ko) 웹 브라우저가 없는 장치를 위한 웹 서비스 제공 시스템 및방법
JP2014049865A (ja) 監視カメラシステム
Jadhav et al. Vnc architecture based remote desktop access through android mobile phones
CN115174964B (zh) 一种多媒体渲染系统的预览和控制方法
JP5869109B2 (ja) 中継装置
TWI649655B (zh) 遠端管理方法
JP2010193257A (ja) サーバ、リモート操作システム、伝送方式選択方法、プログラム及び記録媒体
JP4374013B2 (ja) 中継装置、並びに中継方法
Sazawa et al. RVEC: Efficient remote desktop for the engineering CLOUD
CN112714185B (zh) 一种接入坐席系统
JP4463282B2 (ja) 情報管理装置および方法
CN113497965B (zh) 旋转动画的配置方法及显示设备
EP2849453A1 (en) Distribution management apparatus, distribution system, and distribution management method
KR100735971B1 (ko) 홈 네트워크에서의 원격 화면 제어 방법
KR100860026B1 (ko) 인터넷 티브이

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant