CN117880593A - 基于rk3588处理芯片的网络视频流实时显示系统及显示方法 - Google Patents
基于rk3588处理芯片的网络视频流实时显示系统及显示方法 Download PDFInfo
- Publication number
- CN117880593A CN117880593A CN202311726104.6A CN202311726104A CN117880593A CN 117880593 A CN117880593 A CN 117880593A CN 202311726104 A CN202311726104 A CN 202311726104A CN 117880593 A CN117880593 A CN 117880593A
- Authority
- CN
- China
- Prior art keywords
- video stream
- network video
- stream data
- real
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 33
- 238000006243 chemical reaction Methods 0.000 claims description 10
- 230000008569 process Effects 0.000 claims description 5
- 238000004458 analytical method Methods 0.000 claims description 4
- 230000000903 blocking effect Effects 0.000 claims description 2
- 230000006835 compression Effects 0.000 claims description 2
- 238000007906 compression Methods 0.000 claims description 2
- 230000006870 function Effects 0.000 abstract description 7
- 230000005540 biological transmission Effects 0.000 description 7
- 238000004590 computer program Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 230000004075 alteration Effects 0.000 description 2
- 230000008094 contradictory effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明提供一种基于RK3588处理芯片的网络视频流实时显示系统及显示方法，所述RK3588处理芯片包括流媒体协议单元、解码单元和显示单元；所述流媒体协议单元，用于接收基于流媒体协议传输的网络视频流数据，并从中解析得到编码压缩的网络视频流数据；所述解码单元，用于对编码压缩的网络视频流数据进行高速解码，得到实时的网络视频流数据；所述显示单元，用于依据不同场景下需求，对解码得到的实时的网络视频流数据进行逐帧的格式转换，并进行实时显示。本发明通过网口采集网络视频流数据后，由RK3588处理芯片完成解码与显示功能，具备耗时少、实时性良好、功耗小等优点。
Description
技术领域
本发明涉及网络视频流显示领域，更具体地，涉及一种基于RK3588处理芯片的网络视频流实时显示系统及显示方法。
背景技术
随着互联网技术的高速发展，网络视频传输需求也日益增多。由于视频传输数据量巨大，为缓解数据传输过程中的网络带宽压力，传输过程前通常会将视频数据进行压缩编码，接收端收到数据后需要先进行解码才能得到视频数据。
目前，大部分网络视频流显示方法运行在PC的CPU上，该种方式存在解码耗时长、视频流显示实时性差的问题；部分网络视频流显示方法运行在PC的GPU上，该种方式存在功耗大、便携性差的问题。
发明内容
本发明针对现有技术中存在的技术问题，提供一种基于RK3588处理芯片的网络视频流实时显示系统及显示方法。
根据本发明的第一方面，提供了一种基于RK3588处理芯片的网络视频流实时显示系统，所述RK3588处理芯片包括流媒体协议单元、解码单元和显示单元；
所述流媒体协议单元，用于接收基于流媒体协议传输的网络视频流数据，并从中解析得到编码压缩的网络视频流数据；
所述解码单元，用于对编码压缩的网络视频流数据进行高速解码，得到实时的网络视频流数据；
所述显示单元，用于依据不同场景下需求，对解码得到的实时的网络视频流数据进行逐帧的格式转换，并进行实时显示。
根据本发明的第二方面，提供一种基于RK3588处理芯片的网络视频流实时显示方法，包括：
所述RK3588处理芯片包括流媒体协议单元、解码单元和显示单元，所述方法包括：
读取配置脚本，根据配置参数对流媒体协议单元、解码单元和显示单元进行初始化；
基于所述流媒体协议单元接收基于流媒体协议传输的网络视频流数据，并从中解析得到编码压缩的网络视频流数据；
基于所述解码单元对编码压缩的网络视频流数据进行高速解码，得到实时的网络视频流数据；
通过显示单元对解码得到的实时的网络视频流数据进行逐帧的格式转换，并进行实时显示。
本发明提供的一种基于RK3588处理芯片的网络视频流实时显示系统及显示方法，通过网口采集网络视频流数据后，由RK3588处理芯片完成解码与显示功能，具备耗时少、实时性良好、功耗小等优点。
附图说明
图1为本发明提供的一种基于RK3588处理芯片的网络视频流实时显示系统的结构示意图；
图2为本发明提供的一种基于RK3588处理芯片的网络视频流实时显示方法的流程示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。另外，本发明提供的各个实施例或单个实施例中的技术特征可以相互任意结合，以形成可行的技术方案，这种结合不受步骤先后次序和/或结构组成模式的约束，但是必须是以本领域普通技术人员能够实现为基础，当技术方案的结合出现相互矛盾或无法实现时，应当认为这种技术方案的结合不存在，也不在本发明要求的保护范围之内。
图1为本发明提供的一种基于RK3588处理芯片的网络视频流实时实时显示系统，如图1所示，该系统的硬件为基于瑞芯微RK3588的开发平台，该开发板的处理器为搭载四核A76+四核A55的八核CPU和ARM G610MP4 GPU，内置6TOPs算力的NPU。其中，所述RK3588处理芯片包括流媒体协议单元、解码单元和显示单元。
所述流媒体协议单元，用于接收基于流媒体协议传输的网络视频流数据，并从中解析得到编码压缩的网络视频流数据。
其中，流媒体协议单元上配置有不同协议的网口，不同的网口对应不同的流媒体协议，所述流媒体协议单元，用于接收基于流媒体协议传输的网络视频流数据，包括：所述流媒体协议单元根据预设协议参数从相应的网口接收基于流媒体协议传输的网络视频流数据，即根据网络视频流数据的传输协议，流媒体协议单元采用相应的网口接收网络视频流数据。
接收到网络视频流数据后，流媒体协议单元根据预设协议参数，从接收的网络视频流数据中完成流媒体协议解析，获取编码压缩的网络视频流数据，所述流媒体协议包括实时流传输协议rtsp(Real Time Streaming Protocol)和/或实时传输协议rtp(Real-time Transport Protocol)标准公用的流媒体协议。
所述解码单元，用于对编码压缩的网络视频流数据进行高速解码，得到实时的网络视频流数据。
可理解的是，解码单元通过RK3588平台提供的mpp_packet_init接口将单帧编码压缩的网络视频流数据送入硬件解码器，调用decode_get_frame接口阻塞式等待返回，当decode_get_frame接口返回并且显示处理结果正常，即完成了单帧硬件解码。
所述显示单元，用于依据不同场景下需求，对解码得到的实时的网络视频流数据进行逐帧的格式转换，并进行实时显示。
可理解的是，显示单元根据预设参数，调用RK3588平台提供的RGA硬件图像图像处理模块对解码后的网络视频流数据进行处理，其中包括但不限于调用imcvtcolor接口对图像数据进行分辨率缩放、图像转换等操作。以及显示单元利用QT框架中的QImage结构获取图形图像处理后的图像数据，并完成最终显示。
参见图2，本发明提供一种基于RK3588处理芯片的网络视频流实时显示方法，所述RK3588处理芯片包括流媒体协议单元、解码单元和显示单元，该方法包括：
读取配置脚本，根据配置参数对流媒体协议单元、解码单元和显示单元进行初始化；
基于所述流媒体协议单元接收基于流媒体协议传输的网络视频流数据，并从中解析得到编码压缩的网络视频流数据；
基于所述解码单元对编码压缩的网络视频流数据进行高速解码，得到实时的网络视频流数据；
通过显示单元对解码得到的实时的网络视频流数据进行逐帧的格式转换，并进行实时显示。
其中，基于所述流媒体协议单元接收基于流媒体协议传输的网络视频流数据，并从中解析得到编码压缩的网络视频流数据，包括：
为所述流媒体协议单元上配置不同协议的网口；
根据预设协议参数从相应的网口接收基于流媒体协议传输的网络视频流数据；
根据预设协议参数，从接收的网络视频流数据中完成流媒体协议解析，获取编码压缩的网络视频流数据，所述流媒体协议包括实时流传输协议rtsp(Real Time StreamingProtocol)和/或实时传输协议rtp(Real-time Transport Protocol)标准公用的流媒体协议。
其中，基于所述解码单元对编码压缩的网络视频流数据进行高速解码，得到实时的网络视频流数据，包括：
通过RK3588平台提供的mpp_packet_init接口将单帧编码压缩的网络视频流数据送入硬件解码器，并调用decode_get_frame接口阻塞式等待返回，当通过decode_get_frame接口返回并且显示处理结果正常时，即完成了单帧硬件解码。
其中，根据所述显示单元，对解码得到的实时的网络视频流数据进行逐帧的格式转换，并进行实时显示，包括：
根据预设协议参数，调用RK3588平台提供的RGA硬件图形图像处理模块对解码后的网络视频流数据进行处理，所述处理包括调用imcvtcolor接口对图像数据进行分辨率缩放和/或图像转换；
利用QT框架中的QImage结构获取图形图像处理后的图像数据，并完成最终显示。
本发明实施例提供的一种基于RK3588处理芯片的网络视频流实时显示系统及显示方法，通过网口采集网络视频流数据后，由RK3588处理芯片完成解码与显示功能，具备耗时少、实时性良好、功耗小等优点。
需要说明的是，在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详细描述的部分，可以参见其它实施例的相关描述。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式计算机或者其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包括这些改动和变型在内。
Claims (10)
1.一种基于RK3588处理芯片的网络视频流实时显示系统，其特征在于，所述RK3588处理芯片包括流媒体协议单元、解码单元和显示单元；
所述流媒体协议单元，用于接收基于流媒体协议传输的网络视频流数据，并从中解析得到编码压缩的网络视频流数据；
所述解码单元，用于对编码压缩的网络视频流数据进行高速解码，得到实时的网络视频流数据；
所述显示单元，用于依据不同场景下需求，对解码得到的实时的网络视频流数据进行逐帧的格式转换，并进行实时显示。
2.根据权利要求1所述的网络视频流实时显示系统，其特征在于，所述流媒体协议单元上配置有不同协议的网口，所述流媒体协议单元，用于接收基于流媒体协议传输的网络视频流数据，包括：
所述流媒体协议单元根据预设协议参数从相应的网口接收基于流媒体协议传输的网络视频流数据。
3.根据权利要求2所述的网络视频流实时显示系统，其特征在于，所述从中解析得到编码压缩的网络视频流数据，包括：
所述流媒体协议单元根据预设协议参数，从接收的网络视频流数据中完成流媒体协议解析，获取编码压缩的网络视频流数据，所述流媒体协议包括实时流传输协议rtsp和/或实时传输协议rtp标准公用的流媒体协议。
4.根据权利要求3所述的网络视频流实时显示系统，其特征在于，所述解码单元，用于对编码压缩的网络视频流数据进行高速解码，得到实时的网络视频流数据，包括：
所述解码单元通过RK3588平台提供的mpp_packet_init接口将单帧编码压缩的网络视频流数据送入硬件解码器，并调用decode_get_frame接口阻塞式等待返回，当通过decode_get_frame接口返回并且显示处理结果正常时，即完成了单帧硬件解码。
5.根据权利要求1所述的网络视频流实时显示系统，其特征在于，所述显示单元，用于依据不同场景下需求，对解码得到的实时的网络视频流数据进行逐帧的格式转换，并进行实时显示，包括：
所述显示单元根据预设协议参数，调用RK3588平台提供的RGA硬件图形图像处理模块对解码后的网络视频流数据进行处理，所述处理包括调用imcvtcolor接口对图像数据进行分辨率缩放和/或图像转换。
6.根据权利要求5所述的网络视频流实时显示系统，其特征在于，所述显示单元还用于利用QT框架中的QImage结构获取图形图像处理后的图像数据，并完成最终显示。
7.一种基于RK3588处理芯片的网络视频流实时显示方法，其特征在于，所述RK3588处理芯片包括流媒体协议单元、解码单元和显示单元，所述方法包括：
读取配置脚本，根据配置参数对流媒体协议单元、解码单元和显示单元进行初始化；
基于所述流媒体协议单元接收基于流媒体协议传输的网络视频流数据，并从中解析得到编码压缩的网络视频流数据；
基于所述解码单元对编码压缩的网络视频流数据进行高速解码，得到实时的网络视频流数据；
通过显示单元对解码得到的实时的网络视频流数据进行逐帧的格式转换，并进行实时显示。
8.根据权利要求7所述的网络视频流实时显示方法，其特征在于，所述基于所述流媒体协议单元接收基于流媒体协议传输的网络视频流数据，并从中解析得到编码压缩的网络视频流数据，包括：
为所述流媒体协议单元上配置不同协议的网口；
根据预设协议参数从相应的网口接收基于流媒体协议传输的网络视频流数据；
根据预设协议参数，从接收的网络视频流数据中完成流媒体协议解析，获取编码压缩的网络视频流数据，所述流媒体协议包括实时流传输协议rtsp和/或实时传输协议rtp标准公用的流媒体协议。
9.根据权利要求7所述的网络视频流实时显示方法，其特征在于，基于所述解码单元对编码压缩的网络视频流数据进行高速解码，得到实时的网络视频流数据，包括：
通过RK3588平台提供的mpp_packet_init接口将单帧编码压缩的网络视频流数据送入硬件解码器，并调用decode_get_frame接口阻塞式等待返回，当通过decode_get_frame接口返回并且显示处理结果正常时，即完成了单帧硬件解码。
10.根据权利要求7所述的网络视频流实时显示方法，其特征在于，根据所述显示单元，对解码得到的实时的网络视频流数据进行逐帧的格式转换，并进行实时显示，包括：
根据预设协议参数，调用RK3588平台提供的RGA硬件图形图像处理模块对解码后的网络视频流数据进行处理，所述处理包括调用imcvtcolor接口对图像数据进行分辨率缩放和/或图像转换；
利用QT框架中的QImage结构获取图形图像处理后的图像数据，并完成最终显示。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311726104.6A CN117880593A (zh) | 2023-12-14 | 2023-12-14 | 基于rk3588处理芯片的网络视频流实时显示系统及显示方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311726104.6A CN117880593A (zh) | 2023-12-14 | 2023-12-14 | 基于rk3588处理芯片的网络视频流实时显示系统及显示方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN117880593A true CN117880593A (zh) | 2024-04-12 |
Family
ID=90593735
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202311726104.6A Pending CN117880593A (zh) | 2023-12-14 | 2023-12-14 | 基于rk3588处理芯片的网络视频流实时显示系统及显示方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN117880593A (zh) |
-
2023
- 2023-12-14 CN CN202311726104.6A patent/CN117880593A/zh active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110430441B (zh) | 一种云手机视频采集方法、系统、装置及存储介质 | |
| CN111885346B (zh) | 一种画面码流合成方法、终端、电子设备和存储介质 | |
| CN112261377B (zh) | web版监控视频播放方法、电子设备及存储介质 | |
| CN112843676B (zh) | 数据处理方法、装置、终端、服务器及存储介质 | |
| CN105828182A (zh) | 一种基于OpenGL渲染实时视频的方法及系统 | |
| CN115134629B (zh) | 视频传输方法、系统、设备及存储介质 | |
| CN115767181A (zh) | 直播视频流渲染方法、装置、设备、存储介质及产品 | |
| CN110049347B (zh) | 在直播界面配置图像的方法、系统、终端和装置 | |
| CN111263164A (zh) | 一种高帧频视频并行编码及重组方法 | |
| US11051080B2 (en) | Method for improving video resolution and video quality, encoder, and decoder | |
| CN113055681B (zh) | 视频解码显示方法，装置，电子设备及存储介质 | |
| US20240040147A1 (en) | Data processing method and apparatus, computer device, and storage medium | |
| CN116668691A (zh) | 一种图片压缩传输方法、装置及终端设备 | |
| WO2023142715A1 (zh) | 视频编码方法、实时通信方法、装置、设备及存储介质 | |
| US20140327698A1 (en) | System and method for hybrid graphics and text rendering and client computer and graphics processing unit incorporating the same | |
| CN117130749A (zh) | 一种基于WebGPU提升Web播放器硬件解码能力的方法 | |
| CN115225615B (zh) | 虚幻引擎像素流送方法及装置 | |
| CN117880593A (zh) | 基于rk3588处理芯片的网络视频流实时显示系统及显示方法 | |
| CN113784094B (zh) | 视频数据处理方法、网关、终端设备及存储介质 | |
| CN116456149A (zh) | 基于ue引擎分布式渲染视频同步系统和方法 | |
| CN116193160A (zh) | 一种数字水印嵌入方法、装置、设备和介质 | |
| CN110868610B (zh) | 流媒体传输方法、装置、服务器及存储介质 | |
| CN115802054A (zh) | 视频对齐方法及装置 | |
| CN114938408A (zh) | 一种云手机的数据传输方法、系统、设备及介质 | |
| CN114079823A (zh) | 基于Flutter的视频渲染方法、装置、设备及介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |