CN116634177B - 一种基于hdmi通信设备的视频通信解码处理方法 - Google Patents

一种基于hdmi通信设备的视频通信解码处理方法 Download PDF

Info

Publication number
CN116634177B
CN116634177B CN202310715993.XA CN202310715993A CN116634177B CN 116634177 B CN116634177 B CN 116634177B CN 202310715993 A CN202310715993 A CN 202310715993A CN 116634177 B CN116634177 B CN 116634177B
Authority
CN
China
Prior art keywords
video
channel
resolution
resolution channel
decoding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202310715993.XA
Other languages
English (en)
Other versions
CN116634177A (zh
Inventor
姜公略
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xingzhe Wujiang Technology Co ltd
Original Assignee
Beijing Xingzhe Wujiang Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xingzhe Wujiang Technology Co ltd filed Critical Beijing Xingzhe Wujiang Technology Co ltd
Priority to CN202310715993.XA priority Critical patent/CN116634177B/zh
Publication of CN116634177A publication Critical patent/CN116634177A/zh
Application granted granted Critical
Publication of CN116634177B publication Critical patent/CN116634177B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4053—Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution
    • G06T3/4076—Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution using the original low-resolution images to iteratively correct the high-resolution images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43632—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • H04N21/43635—HDMI
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4781—Games
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了一种基于HDMI通信设备的视频通信解码处理系统及方法，首先通过信息传输盒实现AR眼镜与PS游戏设备的连接，通过对PS游戏设备进行录屏，将录屏数据传输至信息传输盒后，在信息传输盒上使用H.265协议对录屏数据进行编码，然后将编码后的数据发送至AR眼镜上的双分辨率解码通道，分别进行解码后，最终通过对高分辨率通道的带宽剩余量、网络波动频率等级、高分辨率通道解码视频数量决定视频实际输出通道并进行播放相应的分辨率视频。

Description

一种基于HDMI通信设备的视频通信解码处理方法
技术领域
本发明涉及视频通信领域，尤其涉及一种基于HDMI通信设备的视频通信解码处理方法。
背景技术
在传统方案中，PS游戏设备与AR眼镜之间的视频传输，首先对PS游戏设备的视频进行录屏，然后实现录屏数据的软件编码得到软编码后的视频(软编码的时间比较长，通常使用H.263或H.262协议进行编码，得到的编码视频清晰度低(即为分辨率低))；然后将软编码后的视频发送至AR眼镜；通过AR眼镜进行解码然后在AR眼镜上显示；这种通信场景以及通信方式将会导致视频在AR眼镜上显示延迟60-100毫秒，显示延迟时间长降低了AR眼镜视频显示的用户体验；
并且，传统技术常常会因为PS游戏设备与AR眼镜之间的网络波动，导致AR眼镜解码速度慢，AR眼镜在播放解码后的视频时卡顿，影响用户的操作及判断。
发明内容
本发明的目的在于提供一种基于HDMI通信设备的视频通信解码处理系统及方法，解决了现有技术中指出的上述技术问题。
本发明提供了一种基于HDMI通信设备的视频通信解码处理系统，包括信息传输盒、PS游戏设备、AR眼镜；
所述PS游戏设备通过所述信息传输盒与所述AR眼镜实现连接；
其中，所述信息传输盒包括板卡；
所述PS游戏设备包括录屏模块；
所述AR眼镜包括高分辨率通道模块、低分辨率通道模块、中央处理器、监测模块；
其中，所述录屏模块，用于对所述PS游戏设备进行录屏，获取录屏信息，并将所述录屏信息发送至所述信息传输盒；
所述板卡，用于获取所述录屏模块发送的录屏信息，并将所述录屏信息通过H.265协议进行编码得到编码后的视频；并将所述编码后的视频发送至所述AR眼镜；
所述高分辨率通道模块，用于获取所述板卡发送的所述编码后的视频，并将所述编码后的视频进行解码得到高分辨率视频；
所述低分辨率通道模块，用于获取所述板卡发送的所述编码后的视频，并将所述编码后的视频进行解码得到低分辨率视频；
所述监测模块，用于获取高分辨率通道的初始状态的属性信息、当前高分辨率通道带宽剩余量、当前网络波动频率等级、当前高分辨率通道解码视频帧数量；
所述中央处理器，用于根据所述高分辨率通道的带宽剩余量，优化调整所述高分辨率通道解码所述编码后的视频得到高分辨率视频；
所述中央处理器，还用于根据所述高分辨率通道的初始状态的属性信息及当前高分辨率通道带宽剩余量、当前网络波动频率等级、当前高分辨率通道解码视频帧数量确定视频实际输出通道；所述网络为AR眼镜与所述信息传输盒的板卡之间的通信网络；
所述中央处理器，还用于在初始状态下优先调用使用高分辨率通道；根据所述高分辨率通道的初始状态的属性信息判定是否选用高分辨率通道作为视频实际输出通道；通过所述视频实际输出通道播放对应的所述解码后的视频。
较佳地，所述高分辨率通道模块，还用于获取连续的视频帧，并在连续的视频帧中各个区域中则确定视频帧区域的次重要特征区域以及重要特征区域；获取连续的视频帧中第一帧中的次重要特征区域，将第一帧中的次重要特征区域进行复制，得到后续帧的次重要特征区域；并同时真实解码完成后续帧的重要特征区域；将所述后续帧的次重要特征区域与所述后续帧的真实解码的重要特征区域组合，获取新的视频帧；将所述新的视频帧进行组合，得到新的高分辨率视频；确定所述新的高分辨率视频为解码后的高分辨率视频。
较佳地，所述中央处理器包括初始化模块、计算处理模块、通道切换处理模块：
所述初始化模块，用于获取初始化状态下高分辨率通道最大带宽、最大网络波动频率等级、高分辨率通道最大解码视频帧数量；
所述计算处理模块，用于获取当前高分辨率通道带宽剩余量、当前网络波动频率等级、当前高分辨率通道解码视频帧数量；计算切换通道比值△T；
所述通道切换处理模块，用于若所述切换通道比值△T小于所述切换通道比值阈值，则控制低分辨率通道作为视频实际输出通道；同时，实时检测低分辨率通道输出视频进度，并释放低分辨率通道输出的视频对应的高分辨率通道中的视频所占的空间。
相应地，本发明还提出了一种基于HDMI通信设备的视频通信解码处理方法，包括如下操作步骤：
通过信息传输盒建立PS游戏设备和AR眼镜之间的连接；
信息传输盒获取所述PS游戏设备的录屏信息，所述录屏信息包括视频源信息；
获取所述录屏模块发送的录屏信息，并将所述录屏信息通过H.265协议进行编码得到编码后的视频；并将所述编码后的视频发送至所述AR眼镜；
AR眼镜获取所述编码后的视频，并将所述编码后的视频输入低分辨率通道进行解码，得到解码后的低分辨率视频；
AR眼镜获取所述编码后的视频，并将所述编码后的视频输入高分辨率通道进行解码，得到解码后的高分辨率视频；
在初始状态下优先调用使用高分辨率通道；根据所述高分辨率通道的初始状态的属性信息判定是否选用高分辨率通道作为视频实际输出通道；通过所述视频实际输出通道播放对应的所述解码后的视频。
较佳地，所述AR眼镜获取所述编码后的视频，并将所述编码后的视频输入高分辨率通道进行解码，得到解码后的高分辨率视频，包括如下操作步骤：
预设高分辨率通道带宽剩余量阈值a；实时检测当前当前高分辨率通道带宽剩余量；
获取连续的视频帧，判断连续的视频帧中各个区域中有区域纹理特征的变化量是否大于视频帧区域纹理特征变化量阈值J，若连续的视频帧中各个区域中有区域纹理特征的变化量大于视频帧区域纹理特征变化量阈值J，则确定当前视频帧区域为重要特征区域；
若连续的视频帧中各个区域中的区域纹理特征的变化量小于视频帧区域纹理特征变化量阈值J，则确定当前视频帧区域为次重要特征区域；
获取连续的视频帧中第一帧中的次重要特征区域，将第一帧中的次重要特征区域进行复制，得到后续帧的次重要特征区域；并解码完成后续帧的重要特征区域；
将所述后续帧的次重要特征区域与所述后续帧的重要特征区域组合，获取新的视频帧；将所述新的视频帧进行组合，得到新的高分辨率视频；确定所述新的高分辨率视频为解码后的高分辨率视频。
较佳地，所述在初始状态下优先调用使用高分辨率通道；根据所述高分辨率通道的初始状态的属性信息判定是否选用高分辨率通道作为视频实际输出通道；通过所述视频实际输出通道播放对应的所述解码后的视频，包括如下操作步骤：
获取初始化状态下高分辨率通道最大带宽、最大网络波动频率等级、高分辨率通道最大解码视频帧数量；
获取当前高分辨率通道带宽剩余量、当前网络波动频率等级、当前高分辨率通道解码视频帧数量；计算切换通道比值△T；
若所述切换通道比值△T小于所述切换通道比值阈值，则控制低分辨率通道作为视频实际输出通道；同时，实时检测低分辨率通道输出视频进度，并释放低分辨率通道输出的视频对应的高分辨率通道中的视频所占的空间。
较佳地，所述高分辨率通道的初始状态的属性信息包括高分辨率通道最大带宽、最大网络波动频率等级、高分辨率通道最大解码视频帧数量。
较佳地，所述切换通道比值△T，计算方式为：
式中，X为当前高分辨率通道带宽剩余量；
Y为当前网络波动频率等级；
Z为当前高分辨率通道解码视频帧数量；
Xmax为高分辨率通道最大带宽；
Ymax为最大网络波动频率等级；且高分辨率通道的初始状态下的最大网络波动频率等级就是N；
Zmax为高分辨率通道最大解码视频帧数量。
较佳地，所述网络波动频率等级为将网络波动频率分为1-N级；其中，所述网络波动频率等级的N级为最大网络波动频率等级，判定当前网络无波动；网络波动频率等级的1级为最小网络波动频率等级，判定当前网络波动最大；所述网络为AR眼镜与所述信息传输盒的板卡之间的通信网络。
较佳地，所述实时检测低分辨率通道输出视频进度，并释放低分辨率通道输出的视频对应的高分辨率通道中的视频所占的空间，包括如下操作步骤：
获取当前低分辨率通道输出的视频进度；
获取当前高分辨率通道中解码后的高分辨率视频段；并与所述低分辨率通道输出的视频进度进行对比，获取当前高分辨率通道的已播放视频段与当前高分辨率通道的未播放视频段；
释放所述当前高分辨率通道的已播放视频段所占的AR眼镜的高分辨率通道使用的内存空间。
与现有技术相比，本发明实施例至少存在如下方面的技术优势：
分析本发明提供的上述一种基于HDMI通信设备的视频通信解码处理系统及方法可知；
在具体应用时，首先通过所述信息传输盒实现AR眼镜与PS游戏设备之间的连接；通过录屏模块获取PS游戏设备的录屏信息，将录屏信息发送至信息传输盒进行编码得到编码后的视频；将所述编码后的视频发送至AR眼镜中的高分辨率通道与低分辨率通的进行解码得到双通道解码后的高分辨率视频与低分辨率视频，并且，在高分辨率通道中解码得到高分辨率视频时，考虑当前高分辨率通道的带宽剩余量，在当前高分辨率通道带宽剩余量小于预设的高分辨率通道带宽剩余量阈值时，进行优化调节输出的高分辨率视频，改善高分辨率通道的解码过程，提升了解码的速度；
最后，通过监测模块获取高分辨率通道初始状态的属性信息及当前状态的属性信息确定视频实际输出通道，通过确定当前高分辨率通道的带宽剩余量、当前网络波动频率等级、当前高分辨率通道解码视频帧数量及高分辨率通道初始状态的属性信息计算切换通道比值△T；通过对上述当前高分辨率通道的带宽剩余量、当前网络波动频率等级、当前高分辨率通道解码视频帧数量及高分辨率通道初始状态的属性信息的综合考虑，实现了对切换通道比值的量化计算；并且以此切换通道比值作为双通道的切换标准，即在切换通道比值△T小于预设的切换通道比值阈值时，将当前的视频实际输出通道高分辨率通道切换为低分辨率通道，保障视频输出稳定；并在所述AR眼镜进行播放视频实际输出通道对应的解码后的视频。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例一提供的一种基于HDMI通信设备的视频通信解码处理系统整体架构示意图；
图2为本发明实施例二提供的一种基于HDMI通信设备的视频通信解码处理方法流程示意图；
图3为本发明实施例二提供的一种基于HDMI通信设备的视频通信解码处理方法流程示意图；
图4为本发明实施例二提供的一种基于HDMI通信设备的视频通信解码处理方法中高分辨率通道优化调整输出解码后的高分辨率视频流程示意图；
图5为本发明实施例二提供的一种基于HDMI通信设备的视频通信解码处理方法中切换视频实际输出通道的流程示意图；
图6为本发明实施例二提供的一种基于HDMI通信设备的视频通信解码处理方法中切换视频实际输出通道后另一通道操作流程示意图。
标号：信息传输盒10、PS游戏设备20、AR眼镜30；板卡11；21；高分辨率通道模块31；低分辨率通道模块32；中央处理器33；监测模块34。
具体实施方式
下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
下面通过具体的实施例并结合附图对本发明做进一步的详细描述。
实施例一
如图1所示，本发明实施例一提出了一种基于HDMI通信设备的视频通信解码处理系统，包括信息传输盒10、PS游戏设备20、AR眼镜30；
所述PS游戏设备20通过所述信息传输盒10与所述AR眼镜30实现连接；
其中，所述信息传输盒10包括板卡11；
所述PS游戏设备20包括录屏模块21；
所述AR眼镜30包括高分辨率通道模块31、低分辨率通道模块32、中央处理器33、监测模块34；
其中，所述录屏模块21，用于对所述PS游戏设备进行录屏，获取录屏信息，并将所述录屏信息发送至所述信息传输盒；
所述板卡11，用于获取所述录屏模块21发送的录屏信息，并将所述录屏信息通过H.265协议进行编码得到编码后的视频；并将所述编码后的视频发送至所述AR眼镜30；
所述高分辨率通道模块31，用于获取所述板卡11发送的所述编码后的视频，并将所述编码后的视频进行解码得到高分辨率视频；
所述低分辨率通道模块32，用于获取所述板卡11发送的所述编码后的视频，并将所述编码后的视频进行解码得到低分辨率视频；
所述监测模块34，用于获取高分辨率通道31的初始状态的属性信息、当前高分辨率通道带宽剩余量、当前网络波动频率等级、当前高分辨率通道解码视频帧数量；
所述中央处理器33，用于根据所述高分辨率通道31的带宽剩余量，优化调整所述高分辨率通道解码所述编码后的视频得到高分辨率视频；
所述中央处理器33，还用于根据所述高分辨率通道的初始状态的属性信息及当前高分辨率通道带宽剩余量、当前网络波动频率等级、当前高分辨率通道解码视频帧数量确定视频实际输出通道；
综上，本发明提供的上述一种基于HDMI通信设备的视频通信解码处理系统，首先通过所述信息传输盒实现AR眼镜与PS游戏设备之间的连接；通过录屏模块获取PS游戏设备的录屏信息，将录屏信息发送至信息传输盒进行编码得到编码后的视频；
将所述编码后的视频发送至AR眼镜中的高分辨率通道与低分辨率通的进行解码得到双通道解码后的高分辨率视频与低分辨率视频，最后通过监测模块获取高分辨率通道初始状态的属性信息及当前状态的属性信息确定视频实际输出通道，并在所述AR眼镜进行播放视频实际输出通道对应的解码后的视频。
较佳地，所述高分辨率通道模块，还用于获取连续的视频帧，并在连续的视频帧中各个区域中则确定视频帧区域的次重要特征区域以及重要特征区域；获取连续的视频帧中第一帧中的次重要特征区域，将第一帧中的次重要特征区域进行复制，得到后续帧的次重要特征区域；并同时真实解码完成后续帧的重要特征区域；将所述后续帧的次重要特征区域与所述后续帧的真实解码的重要特征区域组合，获取新的视频帧；将所述新的视频帧进行组合，得到新的高分辨率视频；确定所述新的高分辨率视频为解码后的高分辨率视频。
较佳地，所述中央处理器包括初始化模块、计算处理模块、通道切换处理模块：
所述初始化模块，用于获取初始化状态下高分辨率通道最大带宽、最大网络波动频率等级、高分辨率通道最大解码视频帧数量；
所述计算处理模块，用于获取当前高分辨率通道带宽剩余量、当前网络波动频率等级、当前高分辨率通道解码视频帧数量；计算切换通道比值△T；
所述通道切换处理模块，用于若所述切换通道比值△T小于所述切换通道比值阈值，则控制低分辨率通道作为视频实际输出通道；同时，实时检测低分辨率通道输出视频进度，并释放低分辨率通道输出的视频对应的高分辨率通道中的视频所占的空间。
实施例二
如图2及图3所示，相应地，本发明还提出了一种基于HDMI通信设备的视频通信解码处理方法(或称基于HDMI通信设备的视频适应AR眼镜分辨率的通信解码处理方法)，包括如下操作步骤：
步骤S10：通过信息传输盒(即HDMI通信设备)建立PS游戏设备和AR眼镜之间的连接；
在本发明实施例中，通过信息传输盒建立PS游戏设备和AR眼镜之间的连接可以是无线连接或HDMI有线连接，如果是无线连接，PS游戏设备和AR眼镜通过信息传输盒传输视频数据，如果是HDMI有线连接，PS游戏设备和AR眼镜直接进行数据的相互传输，本发明在此不作限定。
示例性的，一种PS游戏设备和AR眼镜建立连接的过程如下：PS游戏设备可以通过搜索信息传输盒的IP地址，AR眼镜设备搜索信息传输盒的IP地址，PS游戏设备搜索到信息传输盒的IP地址后，向信息传输盒发起IP连接；AR眼镜搜索到信息传输盒的IP地址后，向信息传输盒发起IP连接；信息传输盒开启IP端口并周期性或持续监听是否有连接请求；当信息传输盒接收到PS游戏设备与AR眼镜的IP连接请求时，接收并响应IP连接请求，建立信息传输盒与PS游戏设备的IP连接，建立信息传输盒与AR眼镜的IP连接；AR眼镜与PS游戏设备在信息传输盒内建立IP连接。
步骤S20：信息传输盒获取所述PS游戏设备的录屏信息，所述录屏信息包括视频源信息；
在本发明实施例中，录屏，也称为屏幕录像或屏幕录制，是指采集屏幕的整个区域或部分指定区域的图像数据，将图像数据编码得到视频文件的技术，用户可以通过点击、滑动等触摸操作对PS游戏设备的显示界面进行操作，在录屏过程中，PS游戏设备按照预设采样频率采集录制区域所显示的屏幕画面，预设采样频率可以由PS游戏设备默认设置，也可以由用户自定义设置，本发明对此不作限定，比如，预设采样频率为25帧每秒、30帧每秒或者60帧每秒。
步骤S30：对所述视频源信息进行编码，得到编码后的视频；
在本发明实施例中，视频源信息编码可以通过信息传输盒(HDMI通信设备)内置的板卡采用H264协议或者H265协议进行编码，H264标准和H265标准与其它现有的视频编码标准相比，在相同的带宽下提供更加优秀的图像质量，具有码率低，传输图像质量高和网络适应性强的特点。
步骤S40：AR眼镜获取所述编码后的视频，并将所述编码后的视频输入低分辨率通道进行解码，得到解码后的低分辨率视频；
步骤S50：AR眼镜获取所述编码后的视频，并将所述编码后的视频输入高分辨率通道进行解码，得到解码后的高分辨率视频；
步骤S60：在初始状态下优先调用使用高分辨率通道；根据所述高分辨率通道的初始状态的属性信息判定是否选用高分辨率通道作为视频实际输出通道；通过所述视频实际输出通道播放对应的所述解码后的视频。
需要说明的是，解码后的低分辨率视频与解码后的高分辨率视频是基于同一编码后的视频，解码出不同分辨率的视频，因此，解码后的低分辨率视频与解码后的高分辨率视频内容是相同的，不同的点在于，高分辨率通道相比较低分辨率通道解码出的视频分辨率高、解码速度慢、使用带宽多。
在本发明实施例中，AR眼镜获取所述编码后的视频，是信息传输盒将编码后的视频通过UDP协议传输给AR眼镜，UDP协议是一个无连接协议，传输数据之前源端和终端不建立连接，当它想传送时就简单地去抓取来自应用程序的数据，并尽可能快地把它扔到网络上，UDP具有较好的实时性，且UDP协议的段结构简单，占用网络带宽小。
在本发明实施例中，可根据高分辨率通道的初始状态的属性信息及当前状态的属性信息进行确定视频实际输出通道，保障视频输出稳定。
具体地，如图4所示，在步骤S50中，AR眼镜获取所述编码后的视频，并将所述编码后的视频输入高分辨率通道进行解码，得到解码后的高分辨率视频，包括如下操作步骤：
步骤S51：预设高分辨率通道带宽剩余量阈值a；实时检测当前当前高分辨率通道带宽剩余量；
步骤S52：获取连续的视频帧，判断连续的视频帧中各个区域中有区域纹理特征的变化量是否大于视频帧区域纹理特征变化量阈值J，若连续的视频帧中各个区域中有区域纹理特征的变化量大于视频帧区域纹理特征变化量阈值J，则确定当前视频帧区域为重要特征区域；
若连续的视频帧中各个区域中的区域纹理特征的变化量小于视频帧区域纹理特征变化量阈值J，则确定当前视频帧区域为次重要特征区域；
需要说明的是，区域纹理特征的变化量指的是在PS游戏中，录取到的视频中，每一帧都会有固定的区域为重要特征区域，如游戏角色、角色释放的技能，重要特征区域的像素移动或变动大，作为主要显示区域；相应的，视频中的背景通常作为次重要特征区域，像素移动或变动较小；同时，可使用视频结构化技术区分视频帧中的重要特征区域及次重要特征区域，视频结构化技术指的是视频结构化分析服务器对于视频图像中尤其关注的人、车、非机动车类别的目标提供更深层次的结构化解析，视频结构化技术为现有技术，不再赘述。
上述区域纹理特征分析是隶属于局部特征处理的操作；局部特征就是对图像的某一区域进行特征提取，最后将多个局部特征融合起来作为最终特征；利用纹理特征分析可以实现区域纹理特征的变化量获取，从而识别判断次重要特征区域或者重要特征区域。
步骤S53：获取连续的视频帧中第一帧中的次重要特征区域(连续帧中，第一帧即为已经解码完成的视频帧，后续视频帧的次重要特征区域即可使用第一帧中的次重要特征区域)，将第一帧中的次重要特征区域进行复制，得到后续帧的次重要特征区域；并解码完成后续帧的重要特征区域(所述解码完成指的是对后续帧的重要特征区域进行解码输出)；
需要说明的是，所述连续的视频帧包括第一帧、后续帧；其中，第一帧为解码完成的视频帧；后续帧为待解码视频帧；
步骤S54：将所述后续帧的次重要特征区域与所述后续帧的重要特征区域组合，获取新的视频帧；将所述新的视频帧进行组合，得到新的高分辨率视频；确定所述新的高分辨率视频为解码后的高分辨率视频。
需要说明的是，所述重要特征区域指的是在所述视频帧组中连续位移变动超过视频帧区域纹理特征变化量阈值J的区域(也就是在视频帧组中，连续多个帧，当前区域变动较大)；
所述次重要特征区域指的是在所述视频帧组中连续位移变动小于视频帧区域纹理特征变化量阈值J的区域(也就是在视频帧组中，连续多个帧，当前区域变动较小或无变动)；
若当前高分辨率通道带宽剩余量大于高分辨率通道带宽剩余量阈值，则说明当前高分辨率通道对编码后的视频解码的速度正常，则利用高分辨率通道对编码后的视频解码得到解码后的高分辨率视频的解码速度不会影响后续操作；
若当前高分辨率通道带宽剩余量小于高分辨率通道带宽剩余量阈值，则说明当前高分辨率通道对解码视频的速度变慢，如果需要对相同的编码后的视频进行解码所用的时间更长，因此，需对编码后的视频进行解码时优化调整；调整为对重要特征区域正常解码，对次重要特征区域的解码只需要复制连续视频帧中的第一帧中的次重要特征区域，可以使对相同的编码后的视频解码速度更快；
而对于低分辨率通道中，低分辨率通道解码相同的编码后的视频得到解码后的视频的分辨率低，因此解码速度很快，不需要进行优化调整；上述解码过程改善了高分辨率通道的解码过程，提升了解码速度。
因此本申请实施例主要侧重两个技术方向的优化，其中一个方向为通道解码输出的视频的优化调整，还包括另一个方向在于通道切换的优化处理；
关于步骤S60，在初始状态下优先调用使用高分辨率通道；根据所述高分辨率通道的初始状态的属性信息判定是否选用高分辨率通道作为视频实际输出通道；通过所述视频实际输出通道播放对应的所述解码后的视频。
解释说明：所述初始状态的属性信息包括高分辨率通道最大带宽、最大网络波动频率等级、高分辨率通道最大解码视频帧数量；所述网络为AR眼镜与所述信息传输盒的板卡之间的通信网络。
所述视频实际输出通道指的是在高分辨率通道与低分辨率通道中选择一个通道作为视频实际输出通道，另一通道隐藏输出视频作为视频备用输出通道。
所述高分辨率通道带宽剩余量指的是高分辨率通道中解码视频的空闲带宽，举例说明：当前高分辨率通道最高带宽为100M，解码一段视频需要10M，则同时可解码十段视频，若当前有一段视频解码，则高分辨率通道带宽剩余量为90M。
所述网络波动频率等级指的是，将网络波动频率分为1-N级；其中，网络波动频率等级中的N级为最大网络波动频率等级，判定当前网络无波动；网络波动频率网络波动频率等级中的1级为最小网络波动频率等级，判定当前网络波动最大；所述网络为AR眼镜与所述信息传输盒的板卡之间的通信网络。
具体地，如图5所示，在步骤S60中，在初始状态下优先调用使用高分辨率通道；根据所述高分辨率通道的初始状态的属性信息判定是否选用高分辨率通道作为视频实际输出通道，包括如下操作步骤：
步骤S61：获取初始化状态下高分辨率通道最大带宽、最大网络波动频率等级、高分辨率通道最大解码视频帧数量；
步骤S62：获取当前高分辨率通道带宽剩余量、当前网络波动频率等级、当前高分辨率通道解码视频帧数量；计算切换通道比值△T，计算方式为：
式中，X为当前高分辨率通道带宽剩余量；
Y为当前网络波动频率等级；
Z为当前高分辨率通道解码视频帧数量；
Xmax为高分辨率通道最大带宽；
Ymax为最大网络波动频率等级；；且高分辨率通道的初始状态下的最大网络波动频率等级就是N；
Zmax为高分辨率通道最大解码视频帧数量；
步骤S63：若所述切换通道比值△T小于所述切换通道比值阈值，则控制低分辨率通道作为视频实际输出通道；同时，实时检测低分辨率通道输出视频进度，并释放低分辨率通道输出的视频对应的高分辨率通道中的视频所占的空间；
需要说明的是，若所述切换通道比值△T小于所述切换通道比值阈值，则证明以当前高分辨率通道作为视频实际输出通道无法达到视频输出稳定且分辨率高，因此需要对视频输出通道进行切换，切换为低分辨率通道作为视频实际输出通道，保障视频输出稳定；
步骤S64：若所述切换通道比值△T大于(或等于)所述切换通道比值阈值，则控制当前高分辨率通道作为视频实际输出通道(则证明以当前高分辨率通道作为视频实际输出通道完全可以保障视频输出稳定同时保障输出视频分辨率高，则不需要进行通道切换，即当前高分辨率通道继续作为视频实际输出通道)；同时，实时检测高分辨率通道输出视频进度，并释放高分辨率通道输出的视频对应的低分辨率通道中的视频所占的空间；
举例说明：切换通道比值阈值为0.8；高分辨率通道最大带宽为512，高分辨率通道最大解码视频帧数量为80，最大网络波动频率等级为10；当前当前高分辨率通道带宽剩余量为300、当前网络波动频率等级为4、当前高分辨率通道解码视频帧数量20；则此时△T为(300*50％+4*30％+20*20％)/(512*50％+10*30％+80*20％)＝0.56，△T小于切换通道比值阈值0.8，则此时需切换高分辨率通道输出视频为低分辨率通道输出视频。
具体地，如图6所示，在步骤S63中，实时检测低分辨率通道输出视频进度，并释放低分辨率通道输出的视频对应的高分辨率通道中的视频所占的空间，包括如下操作步骤：
步骤S631：获取当前低分辨率通道输出的视频进度；
步骤S632：获取当前高分辨率通道中解码后的高分辨率视频段；并与所述低分辨率通道输出的视频进度进行对比，获取当前高分辨率通道的已播放视频段与当前高分辨率通道的未播放视频段；
步骤S633：释放所述当前高分辨率通道的已播放视频段所占的AR眼镜的高分辨率通道使用的内存空间。
需要说明的是，所述“实时检测低分辨率通道输出视频进度，并释放低分辨率通道输出的视频对应的高分辨率通道中的视频所占的空间”指的是，当前低分辨率通道为视频实际输出通道，在低分辨通道输出视频同时，高分辨率通道隐藏输出视频，根据低分辨率通道输出视频的进度，释放高分辨率通道中低分辨率已经输出的视频对应的高分辨率视频段；
举例说明：当前低分辨率通道作为视频实际输出通道，输出视频段为1、2、3、4；同时，高分辨率通道隐藏(“隐藏”或称在后台)输出视频段为I、II、III、IV，并将已经输出的视频段I、II、III、IV所占的空间进行释放，保障足够的空间获取新的解码后的高分辨率视频。
综上所述，本发明实例提出的一种基于HDMI通信设备的视频通信解码处理系统及方法，在具体应用时，首先通过所述信息传输盒实现AR眼镜与PS游戏设备之间的连接；通过录屏模块获取PS游戏设备的录屏信息，将录屏信息发送至信息传输盒进行编码得到编码后的视频；将所述编码后的视频发送至AR眼镜中的高分辨率通道与低分辨率通的进行解码得到双通道解码后的高分辨率视频与低分辨率视频，并且，在高分辨率通道中解码得到高分辨率视频时，考虑当前高分辨率通道的带宽剩余量，在当前高分辨率通道带宽剩余量小于预设的高分辨率通道带宽剩余量阈值时，进行优化调节输出的高分辨率视频，改善高分辨率通道的解码过程，提升了解码的速度；
最后，通过监测模块获取高分辨率通道初始状态的属性信息及当前状态的属性信息确定视频实际输出通道，通过确定当前高分辨率通道的带宽剩余量、当前网络波动频率等级、当前高分辨率通道解码视频帧数量及高分辨率通道初始状态的属性信息计算切换通道比值△T；通过对上述当前高分辨率通道的带宽剩余量、当前网络波动频率等级、当前高分辨率通道解码视频帧数量及高分辨率通道初始状态的属性信息的综合考虑，实现了对切换通道比值的量化计算；并且以此切换通道比值作为双通道的切换标准，即在切换通道比值△T小于预设的切换通道比值阈值时，将当前的视频实际输出通道高分辨率通道切换为低分辨率通道，保障视频输出稳定；并在所述AR眼镜进行播放视频实际输出通道对应的解码后的视频。
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；本领域的普通技术人员可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (9)

1.一种基于HDMI通信设备的视频通信解码处理系统，其特征在于，包括信息传输盒、PS游戏设备、AR眼镜；
所述PS游戏设备通过所述信息传输盒与所述AR眼镜实现连接；
其中，所述信息传输盒包括板卡；
所述PS游戏设备包括录屏模块；
所述AR眼镜包括高分辨率通道模块、低分辨率通道模块、中央处理器、监测模块；
其中，所述录屏模块，用于对所述PS游戏设备进行录屏，获取录屏信息，并将所述录屏信息发送至所述信息传输盒；
所述板卡，用于获取所述录屏模块发送的录屏信息，并将所述录屏信息通过H.265协议进行编码得到编码后的视频；并将所述编码后的视频发送至所述AR眼镜；
所述高分辨率通道模块，用于获取所述板卡发送的所述编码后的视频，并将所述编码后的视频进行解码得到高分辨率视频；
所述低分辨率通道模块，用于获取所述板卡发送的所述编码后的视频，并将所述编码后的视频进行解码得到低分辨率视频；
所述监测模块，用于获取高分辨率通道的初始状态的属性信息、当前高分辨率通道带宽剩余量、当前网络波动频率等级、当前高分辨率通道解码视频帧数量；
所述中央处理器，用于根据所述高分辨率通道带宽剩余量，优化调整所述高分辨率通道解码所述编码后的视频得到高分辨率视频；所述高分辨率通道带宽剩余量指的是高分辨率通道中解码视频的空闲带宽；
所述中央处理器，还用于根据所述高分辨率通道的初始状态的属性信息及当前高分辨率通道带宽剩余量、当前网络波动频率等级、当前高分辨率通道解码视频帧数量确定视频实际输出通道；所述网络为AR眼镜与所述信息传输盒的板卡之间的通信网络；
所述中央处理器，还用于在初始状态下优先调用使用高分辨率通道；根据所述高分辨率通道的初始状态的属性信息判定是否选用高分辨率通道作为视频实际输出通道；通过所述视频实际输出通道播放对应的所述解码后的视频；
所述高分辨率通道模块，还用于获取连续的视频帧，并在连续的视频帧中各个区域中则确定视频帧区域的次重要特征区域以及重要特征区域；获取连续的视频帧中第一帧中的次重要特征区域，将第一帧中的次重要特征区域进行复制，得到后续帧的次重要特征区域；并同时真实解码完成后续帧的重要特征区域；将所述后续帧的次重要特征区域与所述后续帧的真实解码的重要特征区域组合，获取新的视频帧；将所述新的视频帧进行组合，得到新的高分辨率视频；确定所述新的高分辨率视频为解码后的高分辨率视频；
所述重要特征区域指的是在所述视频帧组中连续位移变动超过视频帧区域纹理特征变化量阈值J的区域；
所述次重要特征区域指的是在所述视频帧组中连续位移变动小于视频帧区域纹理特征变化量阈值J的区域；
若当前高分辨率通道带宽剩余量小于高分辨率通道带宽剩余量阈值，需对编码后的视频进行解码时优化调整；调整为对重要特征区域正常解码，对次重要特征区域的解码只需要复制连续视频帧中的第一帧中的次重要特征区域，用以使对相同的编码后的视频解码速度更快。
2.根据权利要求1所述的一种基于HDMI通信设备的视频通信解码处理系统，其特征在于，所述中央处理器包括初始化模块、计算处理模块、通道切换处理模块：
所述初始化模块，用于获取初始化状态下高分辨率通道最大带宽、最大网络波动频率等级、高分辨率通道最大解码视频帧数量；
所述计算处理模块，用于获取当前高分辨率通道带宽剩余量、当前网络波动频率等级、当前高分辨率通道解码视频帧数量；计算切换通道比值；所述通道切换处理模块，用于若所述切换通道比值/>小于所述切换通道比值阈值，则控制低分辨率通道作为视频实际输出通道；同时，实时检测低分辨率通道输出视频进度，并释放低分辨率通道输出的视频对应的高分辨率通道中的视频所占的空间。
3.一种基于HDMI通信设备的视频通信解码处理方法，其利用如权利要求1-2任一项所述的基于HDMI通信设备的视频通信解码处理系统实施处理，其特征在于，包括如下操作步骤：
通过信息传输盒建立PS游戏设备和AR眼镜之间的连接；
信息传输盒获取所述PS游戏设备的录屏信息，所述录屏信息包括视频源信息；
获取所述录屏模块发送的录屏信息，并将所述录屏信息通过H.265协议进行编码得到编码后的视频；并将所述编码后的视频发送至所述AR眼镜；
AR眼镜获取所述编码后的视频，并将所述编码后的视频输入低分辨率通道进行解码，得到解码后的低分辨率视频；
AR眼镜获取所述编码后的视频，并将所述编码后的视频输入高分辨率通道进行解码，得到解码后的高分辨率视频；
在初始状态下优先调用使用高分辨率通道；根据所述高分辨率通道的初始状态的属性信息判定是否选用高分辨率通道作为视频实际输出通道；通过所述视频实际输出通道播放对应的所述解码后的视频。
4.根据权利要求3所述的一种基于HDMI通信设备的视频通信解码处理方法，其特征在于，所述AR眼镜获取所述编码后的视频，并将所述编码后的视频输入高分辨率通道进行解码，得到解码后的高分辨率视频，包括如下操作步骤：
预设高分辨率通道带宽剩余量阈值a；实时检测当前当前高分辨率通道带宽剩余量；
获取连续的视频帧，判断连续的视频帧中各个区域中有区域纹理特征的变化量是否大于视频帧区域纹理特征变化量阈值J，若连续的视频帧中各个区域中有区域纹理特征的变化量大于视频帧区域纹理特征变化量阈值J，则确定当前视频帧区域为重要特征区域；
若连续的视频帧中各个区域中的区域纹理特征的变化量小于视频帧区域纹理特征变化量阈值J，则确定当前视频帧区域为次重要特征区域；
获取连续的视频帧中第一帧中的次重要特征区域，将第一帧中的次重要特征区域进行复制，得到后续帧的次重要特征区域；并解码完成后续帧的重要特征区域；
将所述后续帧的次重要特征区域与所述后续帧的重要特征区域组合，获取新的视频帧；将所述新的视频帧进行组合，得到新的高分辨率视频；确定所述新的高分辨率视频为解码后的高分辨率视频。
5.根据权利要求4所述的一种基于HDMI通信设备的视频通信解码处理方法，其特征在于，所述在初始状态下优先调用使用高分辨率通道；根据所述高分辨率通道的初始状态的属性信息判定是否选用高分辨率通道作为视频实际输出通道；通过所述视频实际输出通道播放对应的所述解码后的视频，包括如下操作步骤：
获取初始化状态下高分辨率通道最大带宽、最大网络波动频率等级、高分辨率通道最大解码视频帧数量；
获取当前高分辨率通道带宽剩余量、当前网络波动频率等级、当前高分辨率通道解码视频帧数量；计算切换通道比值；
若所述切换通道比值小于所述切换通道比值阈值，则控制低分辨率通道作为视频实际输出通道；同时，实时检测低分辨率通道输出视频进度，并释放低分辨率通道输出的视频对应的高分辨率通道中的视频所占的空间。
6.根据权利要求5所述的一种基于HDMI通信设备的视频通信解码处理方法，其特征在于，所述高分辨率通道的初始状态的属性信息包括高分辨率通道最大带宽、最大网络波动频率等级、高分辨率通道最大解码视频帧数量。
7.根据权利要求6所述的一种基于HDMI通信设备的视频通信解码处理方法，其特征在于，所述切换通道比值，计算方式为：/>；式中，X为当前高分辨率通道带宽剩余量；
Y为当前网络波动频率等级；
Z为当前高分辨率通道解码视频帧数量；
Xmax为高分辨率通道最大带宽；
Ymax为最大网络波动频率等级；
Zmax为高分辨率通道最大解码视频帧数量。
8.根据权利要求7所述的一种基于HDMI通信设备的视频通信解码处理方法，其特征在于，所述网络波动频率等级为将网络波动频率分为1-N级；其中，所述网络波动频率等级的N级为最大网络波动频率等级，判定当前网络无波动；网络波动频率等级的1级为最小网络波动频率等级，判定当前网络波动最大；所述网络为AR眼镜与所述信息传输盒的板卡之间的通信网络。
9.根据权利要求8所述的一种基于HDMI通信设备的视频通信解码处理方法，其特征在于，所述实时检测低分辨率通道输出视频进度，并释放低分辨率通道输出的视频对应的高分辨率通道中的视频所占的空间，包括如下操作步骤：
获取当前低分辨率通道输出的视频进度；
获取当前高分辨率通道中解码后的高分辨率视频段；并与所述低分辨率通道输出的视频进度进行对比，获取当前高分辨率通道的已播放视频段与当前高分辨率通道的未播放视频段；
释放所述当前高分辨率通道的已播放视频段所占的AR眼镜的高分辨率通道使用的内存空间。
CN202310715993.XA 2023-06-16 2023-06-16 一种基于hdmi通信设备的视频通信解码处理方法 Active CN116634177B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310715993.XA CN116634177B (zh) 2023-06-16 2023-06-16 一种基于hdmi通信设备的视频通信解码处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310715993.XA CN116634177B (zh) 2023-06-16 2023-06-16 一种基于hdmi通信设备的视频通信解码处理方法

Publications (2)

Publication Number Publication Date
CN116634177A CN116634177A (zh) 2023-08-22
CN116634177B true CN116634177B (zh) 2024-02-20

Family

ID=87602604

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310715993.XA Active CN116634177B (zh) 2023-06-16 2023-06-16 一种基于hdmi通信设备的视频通信解码处理方法

Country Status (1)

Country Link
CN (1) CN116634177B (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0623149A (ja) * 1992-07-08 1994-02-01 Sekisui Chem Co Ltd ワイヤレスコントローラ
CN101577816A (zh) * 2009-06-09 2009-11-11 深圳中兴力维技术有限公司 一种支持多通道高清视频解码的装置和方法
KR20130087980A (ko) * 2012-01-30 2013-08-07 광운대학교 산학협력단 스케일러블 다시점 영상 복호화 장치 및 방법
CN106027870A (zh) * 2016-07-15 2016-10-12 深圳市卡卓无线信息技术有限公司 一种分体式智能眼镜
WO2018120894A1 (zh) * 2016-12-30 2018-07-05 联想新视界（北京）科技有限公司 一种数据流处理方法和智能眼镜系统
WO2019077303A1 (en) * 2017-10-16 2019-04-25 Displaylink (Uk) Limited CODING AND TRANSMISSION OF DISPLAY DATA
WO2020189817A1 (ko) * 2019-03-19 2020-09-24 전자부품연구원 타일 기반 스트리밍을 위한 분할영상 분산 디코딩 방법 및 시스템
WO2022144262A1 (en) * 2020-12-29 2022-07-07 Koninklijke Kpn N.V. Adaptive resolution coding for video coding
KR20220126105A (ko) * 2021-03-08 2022-09-15 한국전자통신연구원 스마트 안경 및 관리 서버를 포함하는 스마트 안경 시스템 및 그 동작 방법
CN115150367A (zh) * 2021-03-31 2022-10-04 华为技术有限公司 一种数据分层传输方法、装置及系统
JP2022174907A (ja) * 2021-05-12 2022-11-25 Kddi株式会社 画像符号化装置、画像復号装置、画像処理システム及びプログラム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8249142B2 (en) * 2008-04-24 2012-08-21 Motorola Mobility Llc Method and apparatus for encoding and decoding video using redundant encoding and decoding techniques
TWI574547B (zh) * 2015-11-18 2017-03-11 緯創資通股份有限公司 立體影像的無線傳輸系統、方法及其裝置
US9992502B2 (en) * 2016-01-29 2018-06-05 Gopro, Inc. Apparatus and methods for video compression using multi-resolution scalable coding
JP2020507221A (ja) * 2017-02-03 2020-03-05 ベステル エレクトロニク サナイー ベ ティカレト エー．エス． Ｈｍｄを用いたビデオ会議の改良された方法およびシステム
US10887600B2 (en) * 2017-03-17 2021-01-05 Samsung Electronics Co., Ltd. Method and apparatus for packaging and streaming of virtual reality (VR) media content
US11290734B2 (en) * 2019-01-02 2022-03-29 Tencent America LLC Adaptive picture resolution rescaling for inter-prediction and display
CN112118454B (zh) * 2019-06-20 2023-02-24 腾讯美国有限责任公司 视频解码方法、设备和计算机可读存储介质
CN112104879B (zh) * 2020-11-13 2021-03-23 腾讯科技（深圳）有限公司 一种视频编码方法、装置、电子设备及存储介质
JP7104844B1 (ja) * 2021-09-10 2022-07-21 グリー株式会社 情報処理システム、情報処理方法およびコンピュータプログラム

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0623149A (ja) * 1992-07-08 1994-02-01 Sekisui Chem Co Ltd ワイヤレスコントローラ
CN101577816A (zh) * 2009-06-09 2009-11-11 深圳中兴力维技术有限公司 一种支持多通道高清视频解码的装置和方法
KR20130087980A (ko) * 2012-01-30 2013-08-07 광운대학교 산학협력단 스케일러블 다시점 영상 복호화 장치 및 방법
CN106027870A (zh) * 2016-07-15 2016-10-12 深圳市卡卓无线信息技术有限公司 一种分体式智能眼镜
WO2018120894A1 (zh) * 2016-12-30 2018-07-05 联想新视界（北京）科技有限公司 一种数据流处理方法和智能眼镜系统
WO2019077303A1 (en) * 2017-10-16 2019-04-25 Displaylink (Uk) Limited CODING AND TRANSMISSION OF DISPLAY DATA
WO2020189817A1 (ko) * 2019-03-19 2020-09-24 전자부품연구원 타일 기반 스트리밍을 위한 분할영상 분산 디코딩 방법 및 시스템
WO2022144262A1 (en) * 2020-12-29 2022-07-07 Koninklijke Kpn N.V. Adaptive resolution coding for video coding
KR20220126105A (ko) * 2021-03-08 2022-09-15 한국전자통신연구원 스마트 안경 및 관리 서버를 포함하는 스마트 안경 시스템 및 그 동작 방법
CN115150367A (zh) * 2021-03-31 2022-10-04 华为技术有限公司 一种数据分层传输方法、装置及系统
JP2022174907A (ja) * 2021-05-12 2022-11-25 Kddi株式会社 画像符号化装置、画像復号装置、画像処理システム及びプログラム

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Predictive Adaptive Streaming to Enable Mobile 360-Degree and VR Experiences;Xueshi Hou, et al.;《 IEEE Transactions on Multimedia ( Volume: 23)》;20200416;全文 *
沈礼权 ; 张兆扬 ; 张文军 ; .基于H.264/AVC的空域可分级SNR-FGS编码新方案.光电子.激光.2006,(08),全文. *

Also Published As

Publication number Publication date
CN116634177A (zh) 2023-08-22

Similar Documents

Publication Publication Date Title
US20180220170A1 (en) Method and apparatus for transmitting data of mobile terminal
WO2021244341A1 (zh) 图像编码方法及装置、电子设备及计算机可读存储介质
JP4414345B2 (ja) ビデオストリーミング
US20110026591A1 (en) System and method of compressing video content
CN111510782A (zh) 视频播放方法、虚拟现实设备、服务器及计算机存储介质
US20090234919A1 (en) Method of Transmitting Data in a Communication System
CN110149555B (zh) 视频处理方法和视频接收装置
KR101282955B1 (ko) 실시간 고해상도 파노라마 영상 스트리밍 시스템 및 방법
US20210360224A1 (en) Method and apparatus for transmission parameter distribution of video resource
CN110662114B (zh) 视频处理方法、装置、电子设备及存储介质
CN109168041B (zh) 一种移动终端监控方法及系统
CN111182352A (zh) 一种视频播放的自适应码流控制装置及方法
EP2272237A1 (en) Method of transmitting data in a communication system
US9226003B2 (en) Method for transmitting video signals from an application on a server over an IP network to a client device
KR100511034B1 (ko) 화상전송장치및화상전송방법
JP7334470B2 (ja) 映像処理装置、ビデオ会議システム、映像処理方法、およびプログラム
US10015395B2 (en) Communication system, communication apparatus, communication method and program
WO2017150792A1 (en) Apparatus and method for providing contents using web-based virtual desktop protocol
CN108810468B (zh) 一种优化显示效果的视频传输装置及方法
JP2003163914A (ja) 監視システム及び画像伝送ユニット
CN116634177B (zh) 一种基于hdmi通信设备的视频通信解码处理方法
CN114125448B (zh) 视频编码方法、解码方法及相关装置
JP4586328B2 (ja) 情報処理システム、情報処理装置および方法、記録媒体、並びにプログラム
US20200106821A1 (en) Video processing apparatus, video conference system, and video processing method
TWI430663B (zh) 多串流視訊系統、視訊監控裝置以及多串流視訊傳輸方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant