CN113507628A - 视频数据处理方法和相关设备 - Google Patents

视频数据处理方法和相关设备 Download PDF

Info

Publication number
CN113507628A
CN113507628A CN202110735102.8A CN202110735102A CN113507628A CN 113507628 A CN113507628 A CN 113507628A CN 202110735102 A CN202110735102 A CN 202110735102A CN 113507628 A CN113507628 A CN 113507628A
Authority
CN
China
Prior art keywords
target
data
unit
video
nal unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110735102.8A
Other languages
English (en)
Inventor
陈思询
周建
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Pisofttech Technology Co ltd
Original Assignee
Shenzhen Pisofttech Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Pisofttech Technology Co ltd filed Critical Shenzhen Pisofttech Technology Co ltd
Priority to CN202110735102.8A priority Critical patent/CN113507628A/zh
Publication of CN113507628A publication Critical patent/CN113507628A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23424—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明实施例公开了一种视频数据处理方法、视频数据处理设备和播放设备，用于丰富视频数据的内容。本发明实施例的视频数据处理方法包括：获取图像数据；获取目标数据；将所述图像数据编码为NAL单元；将所述目标数据拼接到所述NAL单元的末尾，得到目标视频单元；向目标设备发送所述目标视频单元。因目标视频单元既包括图像数据，也包括目标数据，从而可通过目标数据携带更多类型的数据。而在目标视频单元中，目标数据拼接于NAL单元的末尾，这样，可避免目标数据被过滤掉，或者避免阻碍对NAL单元的解码，从而有效实现了丰富视频数据的内容，以满足用户的多样化需求。

Description

视频数据处理方法和相关设备
技术领域
本发明涉及视频数据领域，尤其涉及一种视频数据处理方法、视频数据处理设备和播放设备。
背景技术
视频数据用于播放视频，一般来说，视频数据包括头信息和画面数据。
随着各种电子设备的增多，视频数据需要在不同的设备间传输，为了能让视频数据能被不同的设备读取以及传输，视频数据的格式往往需要遵循标准协议的定义。
这样，视频数据在传输或读取时，如果视频数据增加了额外数据，因没符合标准协议，视频数据容易被设备过滤掉，或者影响视频数据的解码。这导致目前的视频数据包括的内容较为单一，不能满足用户的多样化需求。
发明内容
本发明实施例提供了一种视频数据处理方法、视频数据处理设备和播放设备，用于丰富视频数据的内容。
为达此目的，本发明实施例采用以下技术方案：
一种视频数据处理方法，包括：
获取图像数据；
获取目标数据；
将所述图像数据编码为NAL单元；
将所述目标数据拼接到所述NAL单元的末尾，得到目标视频单元；
向目标设备发送所述目标视频单元。
可选地，所述NAL单元为携带帧内编码帧的信息的NAL单元。
可选地，所述视频数据处理方法应用于摄像机上；
所述目标数据为所述摄像机采集的空间数据。
可选地，所述向目标设备发送所述目标视频单元，包括：
将所述目标视频单元封装为RTMP包；
向目标设备发送所述RTMP包。
为达此目的，本发明实施例还采用以下技术方案：
一种视频数据处理方法，包括：
获取目标视频单元，所述目标视频单元包括目标数据和NAL单元，所述目标数据拼接于所述NAL单元的末尾；
解析所述目标视频单元，得到所述目标数据和所述NAL单元；
解码所述NAL单元，得到画面数据；
播放所述画面数据。
可选地，所述播放所述画面数据，包括：
播放所述画面数据的同时，展示所述目标数据。
可选地，所述目标数据为摄像机采集的空间数据；
所述获取目标视频单元，包括：
获取所述摄像机发送的目标视频单元。
可选地，所述NAL单元为携带帧内编码帧的信息的NAL单元；
所述获取目标视频单元，包括：
获取RTMP包；
解码所述RTMP包，得到目标视频单元。
为达此目的，本发明实施例还采用以下技术方案：
一种视频数据处理设备，包括：
第一获取模块，用于获取图像数据；
第二获取模块，用于获取目标数据；
编码模块，用于将所述图像数据编码为NAL单元；
拼接模块，用于将所述目标数据拼接到所述NAL单元的末尾，得到目标视频单元；
发送模块，用于向目标设备发送所述目标视频单元。
可选地，所述NAL单元为携带帧内编码帧的信息的NAL单元。
可选地，所述视频数据处理设备为摄像机；
所述目标数据为所述摄像机采集的空间数据。
可选地，所述发送模块包括封装单元和发送单元；
所述封装单元，用于将所述目标视频单元封装为RTMP包；
所述发送单元，用于向目标设备发送所述RTMP包。
为达此目的，本发明实施例还采用以下技术方案：
一种播放设备，包括：
第三获取模块，用于获取目标视频单元，所述目标视频单元包括目标数据和NAL单元，所述目标数据拼接于所述NAL单元的末尾；
解析模块，用于解析所述目标视频单元，得到所述目标数据和所述NAL单元；
解码模块，用于解码所述NAL单元，得到画面数据；
播放模块，用于播放所述画面数据。
可选地，所述播放模块，还用于播放所述画面数据的同时，展示所述目标数据。
可选地，所述目标数据为摄像机采集的空间数据；
所述第三获取模块，还用于获取所述摄像机发送的目标视频单元。
可选地，所述NAL单元为携带帧内编码帧的信息的NAL单元；
所述第三获取模块包括获取单元和解码单元；
所述获取单元，用于获取RTMP包；
所述解码单元，用于解码所述RTMP包，得到目标视频单元。
从以上技术方案可以看出，本发明实施例具有以下优点：
在本发明实施例的视频数据处理方法中，获取图像数据和获取目标数据，将图像数据编码为NAL单元。然后，将目标数据拼接到NAL单元的末尾，得到目标视频单元。向目标设备发送目标视频单元，以供目标设备处理目标视频单元。因目标视频单元既包括图像数据，也包括目标数据，从而可通过目标数据携带更多类型的数据。而在目标视频单元中，目标数据拼接于NAL单元的末尾，这样，可避免目标数据被过滤掉，或者避免阻碍对NAL单元的解码，从而有效实现了丰富视频数据的内容，以满足用户的多样化需求。
附图说明
图1为本发明实施例提供的一种视频数据处理方法的流程图；
图2为本发明实施例提供的一种目标视频单元的结构示意图；
图3为本发明实施例提供的一种视频数据处理方法的流程图；
图4为本发明实施例提供的一种视频数据处理方法的流程图；
图5为本发明实施例提供的一种视频数据处理设备的结构示意图；
图6为本发明实施例提供的一种播放设备的结构示意图。
具体实施方式
本发明实施例提供了一种视频数据处理方法、视频数据处理设备和播放设备，用于丰富视频数据的内容。
图1为本发明实施例提供的一种视频数据处理方法的流程图。该方法可应用于多种视频数据处理设备上，例如应用于摄像机上。
参阅图1，本发明实施例的视频数据处理方法，包括：
步骤101：获取图像数据。
处理设备获取图像数据，该图像数据用于记录画面内容。例如，摄像机通过摄像头采集得到图像数据。
步骤102：获取目标数据。
处理设备获取目标数据。目标数据可以为多种类型的数据，本发明实施例对此不作限定。
处理设备获取目标数据的方式有多种，例如通过传感器采集、用户输入、从网络获取等，本发明实施例对此不作具体限定。
步骤103：将图像数据编码为NAL单元。
处理设备可通过编码器对图像数据进行编码，具体可以使用H.264或H.265协议对图像数据进行编码，以得到网络抽象层(Network Abstract Layer，NAL)单元。
其中，NAL单元是NAL的基本语法结构，它包含头信息和一系列称为原始字节序列载荷(RBSP)的字节流。
步骤104：将目标数据拼接到NAL单元的末尾，得到目标视频单元。
得到NAL单元后，处理设备将目标数据拼接到NAL单元的末尾，得到目标视频单元。换言之，如图2所示，目标视频单元包括NAL单元和目标数据，其中，NAL单元的末尾和目标数据连接。
步骤105：向目标设备发送目标视频单元。
处理设备得到目标视频单元后，可向目标设备发送目标视频单元。
在目标设备上，目标设备可以对目标视频单元进行解码、转发或存储等，本发明实施例对此不作具体限定。
在对目标视频单元进行处理时，因目标数据拼接于NAL单元的末尾，在一些场景中，例如对目标视频单元进行检测时，设备会将目标数据视为NAL单元的一部分，从而避免过滤掉目标数据或目标视频单元。在另一些场景中，例如对目标视频单元进行解码时，会分离出目标数据和NAL单元，从而可顺利对NAL单元解码，以得到视频帧进行播放，避免了目标数据和NAL单元的混淆，还能利用目标数据进行更多的操作，以满足用户的多样化需求。这样，本发明实施例的方法有效丰富了视频数据的内容，且不影响视频的播放。
综上所述，在本发明实施例的视频数据处理方法中，获取图像数据和获取目标数据，将图像数据编码为NAL单元。然后，将目标数据拼接到NAL单元的末尾，得到目标视频单元。向目标设备发送目标视频单元，以供目标设备处理目标视频单元。因目标视频单元既包括图像数据，也包括目标数据，从而可通过目标数据携带更多类型的数据。而在目标视频单元中，目标数据拼接于NAL单元的末尾，这样，可避免目标数据被过滤掉，或者避免阻碍对NAL单元的解码，从而有效实现了丰富视频数据的内容，以满足用户的多样化需求。
图3为本发明实施例提供的一种视频数据处理方法的流程图。图3所示实施例的视频数据处理方法可应用于多种处理设备上，例如应用于计算机、平板电脑或手机上等，本发明实施例对此不作具体限定。
参阅图3，本发明实施例的视频数据处理方法，包括：
步骤301：获取目标视频单元。
其中，目标视频单元包括目标数据和NAL单元，目标数据拼接于NAL单元的末尾。
处理设备获取目标视频单元，例如，通过网络从服务器获取目标视频单元。
步骤302：解析目标视频单元，得到目标数据和NAL单元。
处理设备获取目标视频单元后，对目标视频单元进行解析，分离目标数据和NAL单元。其中，NAL单元上包括用于视频播放的数据。
步骤303：解码NAL单元，得到画面数据。
处理设备解码NAL单元，可得到画面数据。其中，画面数据用于进行视频播放。
步骤304：播放画面数据。
画面数据可用于播放，处理设备通过播放器播放画面数据，实现了视频的播放。
综上所述，在本发明实施例的视频数据处理方法中，获取目标视频单元，其中，目标视频单元包括目标数据和NAL单元，目标数据拼接于NAL单元的末尾。解析目标视频单元，得到目标数据和NAL单元。以及，解码NAL单元，得到画面数据。从而可以播放画面数据，以及使用目标数据。这样，通过目标数据的使用，可丰富视频数据的内容，满足了用户更多样化的需求。
图4为本发明实施例提供的一种视频数据处理方法的流程图。图4所示实施例的视频数据处理方法可基于图1所示实施例和图3所示实施例的视频数据处理方法实现。
图4所示实施例的视频数据处理方法可应用于多种处理设备上，为了便于理解，下文以处理设备为摄像机和计算机为例，进行说明。
参阅图4，本发明实施例的视频数据处理方法，包括：
步骤401：获取图像数据。
摄像机获取图像数据。其中，图像数据用于记录画面内容。
具体来说，摄像机通过摄像头采集图像，得到图像数据。通过连续的图像数据的采集，摄像机可采集到视频流需用的视频信息。
在本发明实施例中，摄像机有多种类型，例如为数据相机，或者为全景相机等，本发明实施例对此不作具体限定。
步骤402：获取目标数据。
摄像机还可获取目标数据。目标数据可以为多种类型的数据，用于记录多种信息。
可选地，本发明实施例的视频数据处理方法应用于摄像机上。目标数据为摄像机采集的空间数据。例如，目标数据为摄像机所处位置的经纬度、或者海拔高度等，目标数据还可以为摄像机的镜头的朝向信息。
摄像机获取目标数据的方式有多种，例如通过摄像机上安装的传感器获取目标数据，或者通过外部输入等方式，本发明实施例对此不作具体限定。
步骤403：将图像数据编码为NAL单元。
摄像机获取了图像数据后，可通过编码器将图像数据编码为NAL单元。
具体可以为，按照H.264或H.265视频编码标准，通过编码器将图像数据编码为NAL单元。
其中，在H.264或者H.265视频编码标准中，整个编码系统框架被分为两个层面：视频编码层(VCL)和网络抽象层(NAL)。其中，VCL负责有效表示视频数据的内容，而NAL负责格式化数据并提供头信息，以保证数据适合各种信道和存储介质上的传输。
步骤404：将目标数据拼接到NAL单元的末尾，得到目标视频单元。
摄像机将目标数据拼接到NAL单元的末尾，得到目标视频单元。如图2所示，目标视频单元包括NAL单元和目标数据，其中，NAL单元的末尾和目标数据拼接。NAL单元和目标数据的编码规则不同。
可选地，NAL单元为携带帧内编码帧的信息的NAL单元。
在H.264或者H.265视频编码标准中，图像数据被分组，每组有多帧图像数据。在每组内，各帧图像数据被定义为三种类型，即帧内编码帧(Intra Picture，I帧)、前向预测编码帧(predictive-frame，P帧)和双向预测内插编码帧(bi-directionalinterpolatedprediction frame，B帧)。其中，I帧俗称关键帧。然后，对I帧、P帧和B帧进行编码压缩，并将压缩后的数据编码为NAL单元进行存储和传输。得到的NAL单元可以为多种类型，不同类型的NAL单元可携带不同帧类型的数据，例如携带帧内编码帧的信息的NAL单元，携带前向预测编码帧的信息的NAL单元，携带双向预测内插编码帧的信息的NAL单元。因携带帧内编码帧的信息的NAL单元的数据量较大，从而，将目标数据拼接到携带帧内编码帧的信息的NAL单元的末尾后，得到的目标视频单元的数据量和NAL单元的数据量差距不大，方便传输和存储。
可选地，本发明实施例的方法可应用于视频流的传输，上述步骤402和步骤404可周期性地执行，使得目标数据可以在部分视频流数据中传输，减小了传输压力。
步骤405：将目标视频单元封装为RTMP包。
为了方便视频流的传输，摄像机将目标视频单元封装为实时消息传输协议(RealTime Messaging Protocol，RTMP)包。
步骤406：向目标设备发送RTMP包。
得到了RTMP包后，摄像机可通过RTMP协议向目标设备发送RTMP包。
其中，目标设备可以为多种不同类型的设备，例如为服务器。
通过步骤405和步骤406的执行，可实现向目标设备发送目标视频单元。
摄像机向服务器发送RTMP包，服务器可分发RTMP包到不同的设备，实现流媒体的传输。例如，服务器将RTMP包发送到计算机上，供计算机解码，以播放视频。具体如下步骤所示。
在本发明实施例中，因为目标数据拼接到NAL单元的末尾，从而一些设备对目标视频单元或者由目标视频单元封装得到的RTMP包进行检测时，会将目标数据视为NAL单元的一部分，从而避免了过滤掉目标数据或者目标视频单元，保证了目标视频单元的传输。例如，服务器会将目标数据视为NAL单元的数据，从而对本发明实施例的RTMP包进行顺利分发。
步骤407：获取RTMP包。
计算机获取RTMP包。
具体来说，计算机可依据RTMP协议通过网络从服务器或者摄像机获取RTMP包。当然，本步骤也可以通过其它的获取方式实现。
应该理解，在本发明实施例中，计算机可以是台式电脑、平板电脑或者笔记本电脑等，本发明实施例对此不作具体限定。
步骤408：解码RTMP包，得到目标视频单元。
获取了RTMP包后，计算机可解码RTMP包，得到目标视频单元。
这样，通过步骤407和步骤408的执行，计算机获取了目标视频单元。当然，计算机也可以通过其它的方式获取目标视频单元。
在一些实施例中，获取目标视频单元的步骤，还可以为具体包括：获取摄像机发送的目标视频单元。例如通过有线或无线通讯，计算机从摄像机获取目标视频单元。
在本发明实施例中，目标视频单元包括目标数据和NAL单元，目标数据拼接于NAL单元的末尾。如上文描述，可选地，NAL单元为携带帧内编码帧的信息的NAL单元。
步骤409：解析目标视频单元，得到目标数据和NAL单元。
计算机获取了目标视频单元，因目标视频单元包括目标数据和NAL单元，从而，计算机解析目标视频单元，可得到目标数据和NAL单元。
步骤410：解码NAL单元，得到画面数据。
因NAL单元通过编码得到，从而，计算机对NAL单元进行解码，可得到画面数据。其中，画面数据用于播放。
具体来说，计算机按照H.264或H.265视频解码标准，通过解码器将NAL单元解码为画面数据。
步骤411：播放画面数据的同时，展示目标数据。
获取了画面数据，计算机可以在播放画面数据的同时，展示目标数据。
在本发明的一些实施例中，如上文描述，目标数据为摄像机采集的空间数据。例如，目标数据为摄像机所处位置的经纬度、或者海拔高度等，目标数据还可以为摄像机的镜头的朝向信息。此时，计算机可对目标数据进行可视化处理，以便于展示。例如，将摄像机所处位置的经纬度或者海拔高度叠加到画面数据上进行展示。或者，将摄像机的镜头的朝向信息以向量图标或者罗盘指针的形式进行展示。
通过步骤411的执行，实现了播放画面数据。
在有的实施例中，处理设备可根据预定的解码规则，直接解码目标视频单元。例如按照H.264或H.265视频解码标准，解码目标视频单元。因NAL单元为按照H.264或H.265视频编码标准编码得到，从而可顺利解码目标视频单元，获取到NAL单元上的信息。当对目标视频单元进行解码，解码到NAL单元的末尾时，因目标数据的编码规则和NAL单元不同，从而处理设备不能识别出目标数据，导致放弃目标数据。这该实施例中，本发明实施例的方法不影响只需要获取视频帧的场景的实现。从而本发明实施例的方法有更灵活多样的使用场景。
这样，本发明实施例的视频数据处理方法不改变现有传输协议，可使得摄像机通过RTMP协议，周期性地将目标数据传递到处理设备的播放器上，使得播放器可以实现更加丰富的内容展示。例如，目标数据可以为摄像机所处位置的经纬度、或者海拔高度等，目标数据还可以为摄像机的镜头的朝向信息。这些数据皆可在播放器上展示，并且，对于其它不支持展示目标数据的播放器，也可以正常解码和播放本发明实施例的NAL单元携带的视频数据。
综上所述，在本发明实施例的视频数据处理方法中，获取目标视频单元，其中，目标视频单元包括目标数据和NAL单元，目标数据拼接于NAL单元的末尾。解析目标视频单元，得到目标数据和NAL单元。以及，解码NAL单元，得到画面数据。从而可以播放画面数据，以及使用目标数据。这样，通过目标数据的使用，丰富了视频数据的内容，满足了用户更多样化的需求。
图5为本发明实施例提供的一种视频数据处理设备的结构示意图。该视频数据处理设备可用于执行上述图1和图4所示实施例的视频数据处理方法。
参阅图5，本发明实施例的视频数据处理设备，包括：
第一获取模块501，用于获取图像数据；
第二获取模块502，用于获取目标数据；
编码模块503，用于将图像数据编码为NAL单元；
拼接模块504，用于将目标数据拼接到NAL单元的末尾，得到目标视频单元；
发送模块505，用于向目标设备发送目标视频单元。
可选地，NAL单元为携带帧内编码帧的信息的NAL单元。
可选地，视频数据处理设备为摄像机；
目标数据为摄像机采集的空间数据。
可选地，发送模块505包括封装单元506和发送单元507；
封装单元506，用于将目标视频单元封装为RTMP包；
发送单元507，用于向目标设备发送RTMP包。
综上所述，在本发明实施例的视频数据处理设备中，第一获取模块501获取图像数据，第二获取模块502获取目标数据。然后，编码模块503将图像数据编码为NAL单元。拼接模块504将目标数据拼接到NAL单元的末尾，得到目标视频单元。发送模块505向目标设备发送目标视频单元，以供目标设备处理目标视频单元。因目标视频单元既包括图像数据，也包括目标数据，从而可通过目标数据携带更多类型的数据。而在目标视频单元中，目标数据拼接于NAL单元的末尾，这样，可避免目标数据被过滤掉，或者避免阻碍对NAL单元的解码，从而有效实现了丰富视频数据的内容，以满足用户的多样化需求。
图6为本发明实施例提供的一种播放设备的结构示意图。图6所示的播放设备可用于执行上述图3和图4所示实施例的视频数据处理方法。
参阅图6，本发明实施例的播放设备，包括：
第三获取模块601，用于获取目标视频单元，目标视频单元包括目标数据和NAL单元，目标数据拼接于NAL单元的末尾；
解析模块602，用于解析目标视频单元，得到目标数据和NAL单元；
解码模块603，用于解码NAL单元，得到画面数据；
播放模块604，用于播放画面数据。
可选地，播放模块604，还用于播放画面数据的同时，展示目标数据。
可选地，目标数据为摄像机采集的空间数据；
第三获取模块601，还用于获取摄像机发送的目标视频单元。
可选地，NAL单元为携带帧内编码帧的信息的NAL单元；
第三获取模块601包括获取单元605和解码单元606；
获取单元605，用于获取RTMP包；
解码单元606，用于解码RTMP包，得到目标视频单元。
综上所述，在本发明实施例的播放设备中，第三获取模块601获取目标视频单元，其中，目标视频单元包括目标数据和NAL单元，目标数据拼接于NAL单元的末尾。解析模块602解析目标视频单元，得到目标数据和NAL单元。解码模块603解码NAL单元，得到画面数据。播放模块604播放画面数据。这样，通过目标数据的使用，可丰富视频数据的内容，满足了用户更多样化的需求。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种视频数据处理方法，其特征在于，包括：
获取图像数据；
获取目标数据；
将所述图像数据编码为网络抽象层NAL单元；
将所述目标数据拼接到所述NAL单元的末尾，得到目标视频单元；
向目标设备发送所述目标视频单元。
2.根据权利要求1所述的方法，其特征在于，
所述NAL单元为携带帧内编码帧的信息的NAL单元。
3.根据权利要求1所述的方法，其特征在于，
所述视频数据处理方法应用于摄像机上；
所述目标数据为所述摄像机采集的空间数据。
4.根据权利要求1所述的方法，其特征在于，
所述向目标设备发送所述目标视频单元，包括：
将所述目标视频单元封装为实时消息传输协议RTMP包；
向目标设备发送所述RTMP包。
5.一种视频数据处理方法，其特征在于，包括：
获取目标视频单元，所述目标视频单元包括目标数据和NAL单元，所述目标数据拼接于所述NAL单元的末尾；
解析所述目标视频单元，得到所述目标数据和所述NAL单元；
解码所述NAL单元，得到画面数据；
播放所述画面数据。
6.根据权利要求5所述的方法，其特征在于，
所述播放所述画面数据，包括：
播放所述画面数据的同时，展示所述目标数据。
7.根据权利要求5所述的方法，其特征在于，
所述目标数据为摄像机采集的空间数据；
所述获取目标视频单元，包括：
获取所述摄像机发送的目标视频单元。
8.根据权利要求5所述的方法，其特征在于，
所述NAL单元为携带帧内编码帧的信息的NAL单元；
所述获取目标视频单元，包括：
获取RTMP包；
解码所述RTMP包，得到目标视频单元。
9.一种视频数据处理设备，其特征在于，包括：
第一获取模块，用于获取图像数据；
第二获取模块，用于获取目标数据；
编码模块，用于将所述图像数据编码为NAL单元；
拼接模块，用于将所述目标数据拼接到所述NAL单元的末尾，得到目标视频单元；
发送模块，用于向目标设备发送所述目标视频单元。
10.一种播放设备，其特征在于，包括：
第三获取模块，用于获取目标视频单元，所述目标视频单元包括目标数据和NAL单元，所述目标数据拼接于所述NAL单元的末尾；
解析模块，用于解析所述目标视频单元，得到所述目标数据和所述NAL单元；
解码模块，用于解码所述NAL单元，得到画面数据；
播放模块，用于播放所述画面数据。
CN202110735102.8A 2021-06-30 2021-06-30 视频数据处理方法和相关设备 Pending CN113507628A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110735102.8A CN113507628A (zh) 2021-06-30 2021-06-30 视频数据处理方法和相关设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110735102.8A CN113507628A (zh) 2021-06-30 2021-06-30 视频数据处理方法和相关设备

Publications (1)

Publication Number Publication Date
CN113507628A true CN113507628A (zh) 2021-10-15

Family

ID=78009417

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110735102.8A Pending CN113507628A (zh) 2021-06-30 2021-06-30 视频数据处理方法和相关设备

Country Status (1)

Country Link
CN (1) CN113507628A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103947189A (zh) * 2012-11-01 2014-07-23 华为技术有限公司 处理视频数据的方法、服务器、终端和视频监控系统
CN104363430A (zh) * 2014-12-04 2015-02-18 高新兴科技集团股份有限公司 一种增强现实摄像机监控方法及其系统
CN106162193A (zh) * 2015-04-08 2016-11-23 广东中星电子有限公司 一种视频数据和传感器数据的编码方法和装置
CN106416259A (zh) * 2014-06-20 2017-02-15 高通股份有限公司 嵌套式辅助增强信息(sei)消息的可扩展设计
CN108200447A (zh) * 2018-01-15 2018-06-22 北京金山云网络技术有限公司 直播数据传输方法、装置、电子设备、服务器及存储介质
CN111954032A (zh) * 2019-05-17 2020-11-17 阿里巴巴集团控股有限公司 视频处理方法、装置、电子设备及存储介质
CN112954433A (zh) * 2021-02-01 2021-06-11 游密科技(深圳)有限公司 视频处理方法、装置、电子设备及存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103947189A (zh) * 2012-11-01 2014-07-23 华为技术有限公司 处理视频数据的方法、服务器、终端和视频监控系统
CN106416259A (zh) * 2014-06-20 2017-02-15 高通股份有限公司 嵌套式辅助增强信息(sei)消息的可扩展设计
CN104363430A (zh) * 2014-12-04 2015-02-18 高新兴科技集团股份有限公司 一种增强现实摄像机监控方法及其系统
CN106162193A (zh) * 2015-04-08 2016-11-23 广东中星电子有限公司 一种视频数据和传感器数据的编码方法和装置
CN108200447A (zh) * 2018-01-15 2018-06-22 北京金山云网络技术有限公司 直播数据传输方法、装置、电子设备、服务器及存储介质
CN111954032A (zh) * 2019-05-17 2020-11-17 阿里巴巴集团控股有限公司 视频处理方法、装置、电子设备及存储介质
CN112954433A (zh) * 2021-02-01 2021-06-11 游密科技(深圳)有限公司 视频处理方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
US7725593B2 (en) Scalable video coding (SVC) file format
US11638066B2 (en) Method, device and computer program for encapsulating media data into a media file
CN110809758A (zh) 容器文件及视频位流中关注区域的增强信令发射
CN104756500B (zh) 向经编码视频的子层提供共同参数集
JP2005229587A (ja) 多重化方式変換装置
CN110996122B (zh) 视频帧传输方法、装置、计算机设备及存储介质
CN112087642B (zh) 云导播播放方法、云导播服务器及远程管理终端
CN109040818B (zh) 直播时的音视频同步方法、存储介质、电子设备及系统
US20240080487A1 (en) Method, apparatus for processing media data, computer device and storage medium
CN114363648A (zh) 直播系统混流过程中音视频对齐的方法、设备及存储介质
JP2005123907A (ja) データ再構成装置
JP2001204032A (ja) Ｍｐｅｇ復号装置
CN106303673B (zh) 码流对齐、同步处理方法及发送、接收终端和通信系统
WO2024109317A1 (zh) 一种传输视频帧及摄像参数信息的方法与设备
US20230025664A1 (en) Data processing method and apparatus for immersive media, and computer-readable storage medium
CN113507628A (zh) 视频数据处理方法和相关设备
KR20080064399A (ko) Ｍｐ4 역다중화 장치 및 그의 동작 방법
US20220166997A1 (en) Method and apparatus for encapsulating video data into a file
CN104796765A (zh) 一种h264帧中提取sps和pps的方法及装置
CN112135163A (zh) 视频起播的方法以及装置
JP6641344B2 (ja) 符号化装置
US7423652B2 (en) Apparatus and method for digital video decoding
WO2021114305A1 (zh) 视频处理方法、装置及计算机可读存储介质
US11758108B2 (en) Image transmission method, image display device, image processing device, image transmission system, and image transmission system with high-transmission efficiency
WO2024114519A1 (zh) 点云封装与解封装方法、装置、介质及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Building 4D, Gongyanhui Science and Technology Industrial Park, No. 160, Xihu West Road, Wujin National High and New Technology Industrial Development Zone, Changzhou City, Jiangsu Province, 213166

Applicant after: Pi Technology (Changzhou) Co.,Ltd.

Address before: 518109 1221, 12 / F, book building, Shenzhen newspaper group, Qinghu community, Longhua street, Longhua District, Shenzhen City, Guangdong Province

Applicant before: SHENZHEN PISOFTTECH TECHNOLOGY Co.,Ltd.

RJ01 Rejection of invention patent application after publication

Application publication date: 20211015