CN112822562B - 一种视频传输方法、装置、终端及可读存储介质 - Google Patents

一种视频传输方法、装置、终端及可读存储介质 Download PDF

Info

Publication number
CN112822562B
CN112822562B CN202011254229.XA CN202011254229A CN112822562B CN 112822562 B CN112822562 B CN 112822562B CN 202011254229 A CN202011254229 A CN 202011254229A CN 112822562 B CN112822562 B CN 112822562B
Authority
CN
China
Prior art keywords
sub
video
video stream
terminal
terminals
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011254229.XA
Other languages
English (en)
Other versions
CN112822562A (zh
Inventor
施玉海
张帆
李继龙
尹亚光
张翀
王晓光
陈哲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Research Institute Of Radio And Television Science State Administration Of Radio And Television
Original Assignee
Research Institute Of Radio And Television Science State Administration Of Radio And Television
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Research Institute Of Radio And Television Science State Administration Of Radio And Television filed Critical Research Institute Of Radio And Television Science State Administration Of Radio And Television
Priority to CN202011254229.XA priority Critical patent/CN112822562B/zh
Publication of CN112822562A publication Critical patent/CN112822562A/zh
Application granted granted Critical
Publication of CN112822562B publication Critical patent/CN112822562B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6156—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
    • H04N21/6181—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network involving transmission via a mobile phone network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2407—Monitoring of transmitted content, e.g. distribution time, number of downloads
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06—Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/70—Services for machine-to-machine communication [M2M] or machine type communication [MTC]

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本发明公开了一种视频传输方法、装置、终端及可读存储介质，其中方法包括：在接收子视频流后，通过对应的子终端在所述子视频流中添加安全指示帧；向基站发送添加所述安全指示帧后的所述子视频流；所述安全指示帧，用于在服务器收到所述基站发送的视频流后，基于所述安全指示帧判定所述视频流是否包含非法内容，其中，所述视频流由基站将多个所述子视频流汇流后获得。本发明方法能够实现对不同的子视频流通过对应的子终端进行内容检测，实现降低单个视频采集终端与单个基站的单连接对传输速率压力。

Description

一种视频传输方法、装置、终端及可读存储介质
技术领域
本发明涉及通信技术领域，尤其涉及一种视频传输方法、装置、终端及可读存储介质。
背景技术
目前在播出质量实时监测方面，随着有线电视4K乃至8K高清电视节目、地面数字电视高清节目的播出普及，对4K、8K高清现场直播流的实时监测需求等，高带宽的数据传输网络保障显得特别重要，新型监测内容、数据的出现，亦对现有监测系统数据采集方式提出了挑战。
现有基于云计算架构的实时视频转播内容检测技术，是将视频内容传输和视频内容检测作为割裂的两个系统，实时视频内容通过空口和核心网传输至视频流CDN服务器，在CDN服务器端缓存后进行视频内容安全监测，最后再进行播放，但是这会导致大概30s的视频转播延时。
现有基于移动边缘计算架构的实时视频转播内容监测技术，通过将视频流CDN服务器下沉部署在更加靠近转播现场地区就近进行内容监测，相比云计算架构，基于移动边缘计算架构缩短视频转播延时。但是，本质上仍然是将内容传输和安全检测单独进行处理。
发明内容
本发明实施例提供一种视频传输方法、装置、终端及可读存储介质，实现对不同的子视频流通过对应的子终端进行内容检测，降低单个视频采集终端与单个基站的单连接对传输速率压力。
第一方面，本发明实施例提供一种视频传输方法，应用于终端侧，所述终端包括多个子终端，包括：
在接收子视频流后，通过对应的所述子终端在所述子视频流中添加安全指示帧；
向基站发送添加所述安全指示帧后的所述子视频流；
所述安全指示帧，用于在服务器收到所述基站发送的视频流后，基于所述安全指示帧判定所述视频流是否包含非法内容，其中，所述视频流由基站将多个所述子视频流汇流后获得。
可选的，接收子视频帧之前，所述方法还包括：
获取采集终端发送的众包任务请求，并向所述采集终端发送对应的众包任务消息；
其中，所述众包任务消息中包含所述子终端当前的负载能力，所述众包任务消息用于所述采集终端按照设定规则选取子终端。
可选的，根据当前所述子终端自身负载能力向所述采集终端发送众包任务消息之后，所述方法还包括：
通过被选中的子终端根据配对信息与所述采集终端进行配对，通过配对成功的子终端组成单播组；或者，
获取所述采集终端发送的分组信息，并根据所述分组信息将对应的子终端组成对应的组播组，每个组播组包括至少一个所述子终端；或者，
根据被选中的子终端组成广播组。
可选的，接收子视频流，包括：
若所述子终端组成单播组，则通过子终端接收对应的子视频流，其中所述子视频流的数量与所述子终端的数量相匹配；
若所述子终端组成组播组，则通过组播组内的子终端接收对应的子视频流，其中所述子视频流的数量与所述组播组的数量相匹配；
若所述子终端组成广播组，则通过所述广播组内的所有所述子终端接收所述采集终端发送的所有所述子视频流。
可选的，向基站发送添加所述安全指示帧后的所述子视频流，包括：
若所述子终端组成单播组，通过对应的子终端向基站发送添加所述安全指示帧后的所述子视频流；
若所述子终端组成组播组，对于任意子视频流，根据所述组播组中所述子终端的信道质量选取目标子终端，通过所述目标子终端将添加所述安全指示帧后的所述子视频流发送给基站，并通过组播组内其余所述子终端将对应的安全指示帧发送给基站；
若所述子终端组成广播组，对于任意子视频流，根据所述广播组中所述子终端的信道质量选取目标子终端，通过所述目标子终端将添加所述安全指示帧后的所述子视频流发送给基站，并通过广播组内其余所述子终端将对应的安全指示帧发送给基站。
可选的，通过对应的所述子终端所述子视频流中添加安全指示帧，包括:
以画面组为单位，对所述子视频流中的图像内容进行安全检测；
根据安全检测的结果，在所述画面组中添加对应的所述安全指示帧。
第二方面，本发明实施例提供一种视频传输装置，包括：
接收单元，用于接收子视频流；
视频处理单元，用于在所述子视频流中添加安全指示帧；
发送单元，用于向基站发送添加所述安全指示帧后的所述子视频流；
所述安全指示帧，用于在服务器收到所述基站发送的视频流后，基于所述安全指示帧判定所述视频流是否包含非法内容，其中，所述视频流由基站将多个所述子视频流汇流后获得。
第三方面，本发明实施例提供一种终端，包括前述的视频传输装置。
第四方面，本发明实施例提供一种计算机可读存储介质，所述计算机可读存储介质存储有一个或者多个计算机程序，所述一个或者多个计算机程序可被一个或者多个处理器执行，以实现前述的视频传输方法的步骤。
本发明实施例通过对应的所述子终端在所述子视频流中添加安全指示帧；向基站发送添加所述安全指示帧后的所述子视频流。实现对不同的子视频流通过对应的子终端进行内容检测，实现降低单个视频采集终端与单个基站的单连接对传输速率压力。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1为本发明第一实施例基本流程图；
图2为本发明第二实施例基本流程图；
图3为本发明第二实施例单播传输示意图；
图4为本发明第三实施例基本流程图；
图5为本发明第三实施例组播传输示意图；
图6为本发明第四实施例基本流程图；
图7为本发明第四实施例广播传输示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
实施例一
本发明第一实施例提供一种视频传输方法，应用于终端侧，所述终端包括多个子终端，包括：
S101、接收子视频流；
S102、通过对应的所述子终端在所述子视频流中添加安全指示帧；
S103、向基站发送添加所述安全指示帧后的所述子视频流；
所述安全指示帧，用于在服务器收到所述基站发送的视频流后，基于所述安全指示帧判定所述视频流是否包含非法内容，其中，所述视频流由基站将多个所述子视频流汇流后获得。
具体的说，本实施例方法可以应用于终端侧，终端包括多个子终端，子终端可以接收采集终端发送的子视频流，然后通过对应的子终端在子视频流中添加安全指示帧,再通过子终端向基站发送添加所述安全指示帧后的所述子视频流。本发明方法能够实现对不同的子视频流通过对应的子终端进行内容检测，从而降低单个视频采集终端与单个基站的单连接对传输速率压力。
可选的，接收子视频帧之前，所述方法还包括：
获取采集终端发送的众包任务请求，并向所述采集终端发送对应的众包任务消息；
其中，所述众包任务消息中包含所述子终端当前的负载能力，所述众包任务消息用于所述采集终端按照设定规则选取子终端。
具体的说在本实施例中，在子终端接收子视频帧之前，采集终端可以选取执行视频处理流程的子终端。一种可选的流程包括：
采集终端发起向基站发起D2D通信请求，向基站申请专用频段进行D2D通信。
然后采集终端在基站分配的专用频段上，发起众包任务请求。
周围邻近子终端(手机、平板电脑、掌上电脑等)具有空闲计算资源和通信资源的终端在收到众包任务请求后，返回众包任务消息，该消息包含了该子终端具有的计算能力和通信能力。由此采集终端可以根据不同子终端具有的计算能力和通信能力，选取当前负载能力低的子终端执行视频处理流程，从而提高视频传输的效率。
可选的，根据当前所述子终端自身负载能力向所述采集终端发送众包任务消息之后，所述方法还包括：
通过被选中的子终端根据配对信息与所述采集终端进行配对，通过配对成功的子终端组成单播组；或者，
获取所述采集终端发送的分组信息，并根据所述分组信息将对应的子终端组成对应的组播组，每个组播组包括至少一个所述子终端；或者，
根据被选中的子终端组成广播组。
具体的说，本发明方法播组的划分可以分为三种情况，分别为单播、组播和广播的情形。
对应于单播的情况，本实施例中采集终端可以从待选的邻居子终端从选择合适的子终端发起D2D配对请求。终端侧通过被选中的子终端根据配对信息与所述采集终端进行配对，则配对成功的子终端组成单播组。
对应于组播的情况，本实施例中采集终端可以从待选的邻居子终端从选择合适的低成本子终端，将这些子终端发起划分成相应的组播组。终端侧获取所述采集终端发送的分组信息，并根据所述分组信息将对应的子终端组成对应的组播组，每个组播组包括至少一个所述子终端。
对应于广播的情况，采集终端可以从待选的邻居子终端从选择合适的多个低成本子终端，将所有选取的子终端发起组成广播组。终端侧根据被选中的子终端组成广播组。
可选的，接收子视频流，包括：
若所述子终端组成单播组，则通过子终端接收对应的子视频流，其中所述子视频流的数量与所述子终端的数量相匹配；
若所述子终端组成组播组，则通过组播组内的子终端接收对应的子视频流，其中所述子视频流的数量与所述组播组的数量相匹配；
若所述子终端组成广播组，则通过所述广播组内的所有所述子终端接收所述采集终端发送的所有所述子视频流。
具体的说，本发明方法对应于前述播组划分，处理子视频流也可以分为三种情况，分别为单播、组播和广播的情形。
对应于单播的情况，采集终端采集到的视频经过视频压缩编码(H.264协议、H.265协议)后形成码流，该码流由一系列画面组(Group of Picture,GOP)组成，一个画面组包含一个帧内编码帧(I帧)，若干个帧间预测编码帧(P帧)和若干双向预测编码帧(B帧)。采集终端以画面组为单位，按照参与众包任务的子终端的数目N，将自身采集的视频流分流成N个子视频流，并通过D2D单播模式将子视频流传输至各个子终端。然后通过子终端接收对应的子视频流，其中所述子视频流的数量与所述子终端的数量相匹配，由此通过不同的子终端处理对应的子视频流。
可选的，通过对应的所述子终端所述子视频流中添加安全指示帧，包括:
以画面组为单位，对所述子视频流中的图像内容进行安全检测；
根据安全检测的结果，在所述画面组中添加对应的所述安全指示帧。
具体的说，在本实施例中，子终端在接收子视频流的同时，以画面组为单位，对画面组内的I帧、P帧和B帧进行解码，并对图像内容进行安全检测(涉黄、涉政、涉恐)。例如检测到某一帧图像内容可能含有非法内容，则指示1；如果检测到某一帧图像内容不含有非法内容，则指示0。最终以特图的形式形成安全指示帧，然后在所述画面组中添加对应的所述安全指示帧，从而获得待发送的子视频流。
对应于组播的情况，采集终端采集到的视频经过视频压缩编码(H.264协议、H.265协议)后形成码流，该码流由一系列画面组(Group of Pi cture,GOP)组成，一个画面组包含一个帧内编码帧(I帧)，若干个帧间预测编码帧(P帧)和若干双向预测编码帧(B帧)。采集终端以画面组为单位，将自身采集的视频流分流成n个子视频流，其中n为对应划分的组播组数量，并通过D2D组播模式将子视频流传输至各个组播组，其中每个组播组中的子终端收到一条对应的子视频流。
可选的，通过对应的所述子终端所述子视频流中添加安全指示帧，包括:
以画面组为单位，对所述子视频流中的图像内容进行安全检测；
根据安全检测的结果，在所述画面组中添加对应的所述安全指示帧。
具体的说，在本实施例中，子终端在接收子视频流的同时，以画面组为单位，对画面组内的I帧、P帧和B帧进行解码，并对图像内容进行安全检测(涉黄、涉政、涉恐)。例如检测到某一帧图像内容可能含有非法内容，则指示1；如果检测到某一帧图像内容不含有非法内容，则指示0。最终以特图的形式形成安全指示帧，然后在所述画面组中添加对应的所述安全指示帧，从而获得待发送的子视频流。
对应于广播的情况，采集终端采集到的视频经过视频压缩编码(H.264协议、H.265协议)后形成码流，该码流由一系列画面组(Group of Pi cture,GOP)组成，一个画面组包含一个帧内编码帧(I帧)，若干个帧间预测编码帧(P帧)和若干双向预测编码帧(B帧)。采集终端以画面组为单位，将自身采集的视频流分流成M个子视频流，其中M为广播组内子终端的数量，通过D2D广播模式将子视频流广播至广播组内所有的子终端，其中每个广播组中的子终端都可以收到所有的子视频流。
可选的，通过对应的所述子终端所述子视频流中添加安全指示帧，包括:
以画面组为单位，对所述子视频流中的图像内容进行安全检测；
根据安全检测的结果，在所述画面组中添加对应的所述安全指示帧。
具体的说，在本实施例中，子终端在接收子视频流的同时，以画面组为单位，对画面组内的I帧、P帧和B帧进行解码，并对图像内容进行安全检测(涉黄、涉政、涉恐)。例如检测到某一帧图像内容可能含有非法内容，则指示1；如果检测到某一帧图像内容不含有非法内容，则指示0。最终以特图的形式形成安全指示帧，然后在所述画面组中添加对应的所述安全指示帧，从而获得待发送的子视频流。
可选的，向基站发送添加所述安全指示帧后的所述子视频流，包括：
若所述子终端组成单播组，通过对应的子终端向基站发送添加所述安全指示帧后的所述子视频流；
若所述子终端组成组播组，对于任意子视频流，根据所述组播组中所述子终端的信道质量选取目标子终端，通过所述目标子终端将添加所述安全指示帧后的所述子视频流发送给基站，并通过组播组内其余所述子终端将对应的安全指示帧发送给基站；
若所述子终端组成广播组，对于任意子视频流，根据所述广播组中所述子终端的信道质量选取目标子终端，通过所述目标子终端将添加所述安全指示帧后的所述子视频流发送给基站，并通过广播组内其余所述子终端将对应的安全指示帧发送给基站。
具体的说，本发明方法对应于前述播组划分，发送处理后的子视频流也可以分为三种情况，分别为单播、组播和广播的情形。
对应于单播的情况，子终端将画面组以及针对该画面组的安全指示帧，发送给基站。基站通过多个子终端的子视频流汇聚成完整的视频流，并将视频流发送给边缘计算服务器。边缘计算服务器一般下沉部署在接入网的集中式单元(Centralized Unite,CU)处。
边缘计算服务器将接收到N个子视频流汇聚后的视频流，以及针对视频流中每一个画面组的1个独立的安全检验帧。针对每一个画面组，边缘计算服务器对该独立的安全检验帧中指示的非法帧序号进行解码并重新检查内容安全。如果确认该非法帧含有非法内容，则截获该视频帧；如果确认该非法不含有非法内容(虚警)，则向核心网继续传送该视频帧。
核心网将通过边缘计算服务器的视频流通过因特网传送至视频转播服务器，完成高清视频流的采集过程。
对应于组播的情况，则可以针对每一个画面组，组播内信道质量最好的子终端将画面组以及针对该画面组的安全指示帧，发送给基站；组播内剩余子终端仅将针对该画面组的安全指示帧发送给基站。
基站通过多个组播的n个子终端的子视频流汇聚成完整的视频流，并将视频流发送给边缘计算服务器。边缘计算服务器一般下沉部署在接入网的集中式单元(CentralizedUnite,CU)处。
边缘计算服务器将接收到汇聚后的视频流，以及针对视频流中每一个画面组的n个独立的安全检验帧。针对每一个画面组，边缘计算服务器对n个独立的安全检验帧中指示的非法帧序号进行解码并重新检查内容安全。如果确认该非法帧含有非法内容，则截获该视频帧；如果确认该非法不含有非法内容(虚警)，则向核心网继续传送该视频帧。
核心网将通过边缘计算服务器的视频流通过因特网传送至视频转播服务器，完成高清视频流的采集过程。
对应于广播的情况，针对每一个画面组，广播组内信道质量最好的子终端将该画面组以及相应的安全指示帧，发送给基站；广播内剩余众包终端仅将针对该画面组的安全指示帧发送给基站。
基站通过个众包终端的子视频流汇聚成完整的视频流，并将视频流发送给边缘计算服务器。边缘计算服务器一般下沉部署在接入网的集中式单元(Centralized Unite,CU)处。
边缘计算服务器将接收到汇聚后的视频流，以及针对视频流中每一个画面组的M个独立的安全检验帧。针对每一个画面组，边缘计算服务器对M个独立的安全检验帧中指示的非法帧序号进行解码并重新检查内容安全。如果确认该非法帧含有非法内容，则截获该视频帧；如果确认该非法不含有非法内容(虚警)，则向核心网继续传送该视频帧。
核心网将通过边缘计算服务器的视频流通过因特网传送至视频转播服务器，完成高清视频流的采集过程。
综上，本发明方法一方面，聚合终端将单个视频采集终端产生的高速超高清视频业务流，通过聚合终端内子终端协作转化成多个并行传输的低速超高清视子业务流，进一步，聚合终端与多个密集小区基站进行多连接通信，降低了单个视频采集终端与单G基站的单连接对传输速率压力。
本发明方法另一方面，聚合终端内的子终端在传输低速超高清视频子业务流的同时，由于子业务流速率较低，有足够的时间进行业务内容涉黄、涉政、涉恐检测。
实施例二
本发明第二实施例提出一种视频传输方法的实施案例，对应于单播的情况，一种基于D2D单播方式实现“1+1”视频传输的方法，如图2、图3所示，具体包括如下步骤：
步骤201，视频采集终端(主终端)发起向5G基站发起D2D通信请求，向5G基站申请专用频段进行D2D通信。
步骤202，主终端在5G基站分配的专用频段上，发起众包任务请求。
步骤203，周围邻近低成本子终端(手机、平板电脑、掌上电脑等)具有空闲计算资源和通信资源的子终端在收到众包任务请求后，返回众包任务消息，该消息包含了该子终端具有的计算能力和通信能力。
步骤204，主终端从待选的邻居子终端从选择合适的终端发起D2D配对请求。
步骤205，主终端将采集到的视频经过视频压缩编码(H.264协议、H.265协议)后形成码流。所述码流由一系列画面组(Group of Picture,GOP)组成，一个画面组包含一个帧内编码帧(I帧)，若干个帧间预测编码帧(P帧)和若干双向预测编码帧(B帧)。主终端以画面组为单位，按照参与众包任务的低成本终端的数目N，将自身采集的视频流分流成N个子视频流，并通过D2D单播模式将子流传输至各个子终端。
步骤206，对应的子终端在接收子视频流的同时，以画面组为单位，对画面组内的I帧、P帧和B帧进行解码，并对图像内容进行安全检测(涉黄、涉政、涉恐)。如果检测到某一帧图像内容可能含有非法内容，则指示1；如果检测到某一帧图像内容不含有非法内容，则指示0。最终以特图的形式形成安全指示帧。
步骤207，针对每一个画面组，各个子终端将对应的画面组以及针对该画面组的安全指示帧，发送给5G基站。
步骤208，基站通过各个子终端的子视频流汇聚成完整的视频流，并将视频流发送给边缘计算服务器。边缘计算服务器一般下沉部署在5G接入网的集中式单元(CentralizedUnite,CU)处。
步骤209，边缘计算服务器将接收到汇聚后的视频流，以及针对视频流中每一个画面组的1个独立的安全检验帧。针对每一个画面组，边缘计算服务器对该独立的安全检验帧中指示的非法帧序号进行解码并重新检查内容安全。如果确认该非法帧含有非法内容，则截获该视频帧；如果确认该非法不含有非法内容(虚警)，则向5G核心网继续传送该视频帧。
步骤210，5G核心网将通过边缘计算服务器的视频流通过因特网传送至视频转播服务器，完成高清视频流的采集过程。
实施例三
本发明第三实施例提出一种视频传输方法的实施案例，对应于组播的情况，一种基于D2D组播方式实现“1+n”视频传输的方法，如图4、图5所示，具体包括如下步骤：
步骤401，视频采集终端(主终端)发起向5G基站发起D2D通信请求，向5G基站申请专用频段进行D2D通信。
步骤402，主终端在5G基站分配的专用频段上，发起众包任务请求。
步骤403，周围邻近低成本子终端(手机、平板电脑、掌上电脑等)具有空闲计算资源和通信资源的终端在收到众包任务请求后，返回众包任务消息，该消息包含了该终端具有的计算能力和通信能力。
步骤404，主终端从待选的邻居子终端从选择合适的低成本子终端，并将对应的子终端发起划分成相应的组播组。
步骤405，将主终端采集到的视频经过视频压缩编码(H.264协议、H.265协议)后形成码流。该码流由一系列画面组(Group of Picture,GOP)组成，一个画面组包含一个帧内编码帧(I帧)，若干个帧间预测编码帧(P帧)和若干双向预测编码帧(B帧)。高清视频采集终端(主终端)以画面组为单位，按照组播组数目n，将自身的视频流分流成n个子视频流，并通过D2D组播模式将子流传输至各个组播组，每个组播组中的字终端获得相同的视频流。
步骤406，组播内的所有子终端在接收子视频流的同时，以画面组为单位，对画面组内的I帧、P帧和B帧进行解码，并对图像内容进行安全检测(涉黄、涉政、涉恐)。如果检测到某一帧图像内容可能含有非法内容，则指示1；如果检测到某一帧图像内容不含有非法内容，则指示0,最终以特图的形式形成安全指示帧。
步骤407，针对每一个画面组，各个组播内信道质量最好的子终端将画面组以及针对该画面组的安全指示帧，发送给5G基站；各个组播内剩余子终端仅将针对该画面组的安全指示帧发送给5G基站。
步骤408，5G基站通过各个组播内的子终端的子视频流汇聚成完整的视频流，并将视频流发送给边缘计算服务器。边缘计算服务器一般下沉部署在5G接入网的集中式单元(Centralized Unite,CU)处。
步骤409，边缘计算服务器将接收到汇聚后的视频流，以及针对视频流中每一个画面组的n个独立的安全检验帧。针对每一个画面组，边缘计算服务器对n个独立的安全检验帧中指示的非法帧序号进行解码并重新检查内容安全。如果确认该非法帧含有非法内容，则截获该视频帧；如果确认该非法不含有非法内容(虚警)，则向5G核心网继续传送该视频帧。
步骤410，5G核心网将通过边缘计算服务器的视频流通过因特网传送至视频转播服务器，完成高清视频流的采集过程。
实施例四
本发明第四实施例提出一种视频传输方法的实施案例，对应于广播的情况，一种基于D2广播方式实现“1+M”视频传输的方法，如图6、图7所示，具体包括如下步骤：
步骤601，视频采集终端(主终端)发起向5G基站发起D2D通信请求，向5G基站申请专用频段进行D2D通信。
步骤602，高清视频采集终端在5G基站分配的专用频段上，发起众包任务请求。
步骤603，周围邻近低成本子终端(手机、平板电脑、掌上电脑等)具有空闲计算资源和通信资源的终端在收到众包任务请求后，返回众包任务消息，该消息包含了该终端具有的计算能力和通信能力。
步骤604，主终端从待选的邻居终端从选择合适的N个低成本终端，将这些终端发起组成广播组。
步骤605，主终端将采集到的视频经过视频压缩编码(H.264协议、H.265协议)后形成码流。该码流由一系列画面组(Group of Picture,GOP)组成，一个画面组包含一个帧内编码帧(I帧)，若干个帧间预测编码帧(P帧)和若干双向预测编码帧(B帧)。高清视频采集终端(主终端)通过D2D广播模式将视频流广播至M个子终端。
步骤606，广播组内的M子终端在接收子视频流的同时，以画面组为单位，对画面组内的I帧、P帧和B帧进行解码，并对图像内容进行安全检测(涉黄、涉政、涉恐)。如果检测到某一帧图像内容可能含有非法内容，则指示1；如果检测到某一帧图像内容不含有非法内容，则指示0,最终以特图的形式形成安全指示帧。
步骤607，针对每一个画面组，广播组内信道质量最好的子终端将该画面组以及相应的安全指示帧，发送给5G基站；广播内剩余众包终端仅将针对该画面组的安全指示帧发送给5G基站。
步骤608，5G基站通过M个子终端的子视频流汇聚成完整的视频流，并将视频流发送给边缘计算服务器。边缘计算服务器一般下沉部署在5G接入网的集中式单元(Centralized Unite,CU)处。
步骤609，边缘计算服务器将接收到汇聚后的视频流，以及针对视频流中每一个画面组的M个独立的安全检验帧。针对每一个画面组，边缘计算服务器对M个独立的安全检验帧中指示的非法帧序号进行解码并重新检查内容安全。如果确认该非法帧含有非法内容，则截获该视频帧；如果确认该非法不含有非法内容(虚警)，则向5G核心网继续传送该视频帧。
步骤610，5G核心网将通过边缘计算服务器的视频流通过因特网传送至视频转播服务器，完成高清视频流的采集过程。
实施例五
本发明第五实施例提供一种视频传输装置，包括：
接收单元，用于接收子视频流；
视频处理单元，用于在所述子视频流中添加安全指示帧；
发送单元，用于向基站发送添加所述安全指示帧后的所述子视频流；
所述安全指示帧，用于在服务器收到所述基站发送的视频流后，基于所述安全指示帧判定所述视频流是否包含非法内容，其中，所述视频流由基站将多个所述子视频流汇流后获得。
本发明实施例还提供一种终端，包括前述的视频传输装置。
本发明实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有一个或者多个计算机程序，所述一个或者多个计算机程序可被一个或者多个处理器执行，以实现第一至第四的视频传输方法的步骤。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，这些均属于本发明的保护之内。

Claims (9)

1.一种视频传输方法，其特征在于，应用于终端侧，所述终端包括多个子终端，包括：
在接收子视频流后，通过对应的所述子终端在所述子视频流中添加安全指示帧；
向基站发送添加所述安全指示帧后的所述子视频流；
所述安全指示帧，用于在服务器收到所述基站发送的视频流后，基于所述安全指示帧判定所述视频流是否包含非法内容，其中，所述视频流由基站将多个所述子视频流汇流后获得。
2.如权利要求1所述的视频传输方法，其特征在于，接收子视频帧之前，所述方法还包括：
获取采集终端发送的众包任务请求，并向所述采集终端发送对应的众包任务消息；
其中，所述众包任务消息中包含所述子终端当前的负载能力，所述众包任务消息用于所述采集终端按照设定规则选取子终端。
3.如权利要求2所述的视频传输方法，其特征在于，根据当前所述子终端自身负载能力向所述采集终端发送众包任务消息之后，所述方法还包括：
通过被选中的子终端根据配对信息与所述采集终端进行配对，通过配对成功的子终端组成单播组；或者，
获取所述采集终端发送的分组信息，并根据所述分组信息将对应的子终端组成对应的组播组，每个组播组包括至少一个所述子终端；或者，
根据被选中的子终端组成广播组。
4.如权利要求3所述的视频传输方法，其特征在于，接收子视频流，包括：
若所述子终端组成单播组，则通过子终端接收对应的子视频流，其中所述子视频流的数量与所述子终端的数量相匹配；
若所述子终端组成组播组，则通过组播组内的子终端接收对应的子视频流，其中所述子视频流的数量与所述组播组的数量相匹配；
若所述子终端组成广播组，则通过所述广播组内的所有所述子终端接收所述采集终端发送的所有所述子视频流。
5.如权利要求3或4所述的视频传输方法，其特征在于，向基站发送添加所述安全指示帧后的所述子视频流，包括：
若所述子终端组成单播组，通过对应的子终端向基站发送添加所述安全指示帧后的所述子视频流；
若所述子终端组成组播组，对于任意子视频流，根据所述组播组中所述子终端的信道质量选取目标子终端，通过所述目标子终端将添加所述安全指示帧后的所述子视频流发送给基站，并通过组播组内其余所述子终端将对应的安全指示帧发送给基站；
若所述子终端组成广播组，对于任意子视频流，根据所述广播组中所述子终端的信道质量选取目标子终端，通过所述目标子终端将添加所述安全指示帧后的所述子视频流发送给基站，并通过广播组内其余所述子终端将对应的安全指示帧发送给基站。
6.如权利要求1-5任一项所述的视频传输方法，其特征在于，通过对应的所述子终端所述子视频流中添加安全指示帧，包括:
以画面组为单位，对所述子视频流中的图像内容进行安全检测；
根据安全检测的结果，在所述画面组中添加对应的所述安全指示帧。
7.一种视频传输装置，其特征在于，包括：
接收单元，用于接收子视频流；
视频处理单元，用于在所述子视频流中添加安全指示帧；
发送单元，用于向基站发送添加所述安全指示帧后的所述子视频流；
所述安全指示帧，用于在服务器收到所述基站发送的视频流后，基于所述安全指示帧判定所述视频流是否包含非法内容，其中，所述视频流由基站将多个所述子视频流汇流后获得。
8.一种终端，其特征在于，包括如权利要求7所述的视频传输装置。
9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有一个或者多个计算机程序，所述一个或者多个计算机程序可被一个或者多个处理器执行，以实现如权利要求1至6中任一项所述的视频传输方法的步骤。
CN202011254229.XA 2020-11-11 2020-11-11 一种视频传输方法、装置、终端及可读存储介质 Active CN112822562B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011254229.XA CN112822562B (zh) 2020-11-11 2020-11-11 一种视频传输方法、装置、终端及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011254229.XA CN112822562B (zh) 2020-11-11 2020-11-11 一种视频传输方法、装置、终端及可读存储介质

Publications (2)

Publication Number Publication Date
CN112822562A CN112822562A (zh) 2021-05-18
CN112822562B true CN112822562B (zh) 2022-11-04

Family

ID=75853149

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011254229.XA Active CN112822562B (zh) 2020-11-11 2020-11-11 一种视频传输方法、装置、终端及可读存储介质

Country Status (1)

Country Link
CN (1) CN112822562B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012080354A (ja) * 2010-10-01 2012-04-19 Video Research:Kk 検出装置及び検出方法
CN105915953A (zh) * 2016-06-12 2016-08-31 腾讯科技（深圳）有限公司 直播视频鉴别的方法、装置和系统
CN106412801A (zh) * 2016-08-31 2017-02-15 西安电子科技大学 一种基于视频帧结构和d2d通信的视频多播方法
CN110309388A (zh) * 2018-03-09 2019-10-08 阿里巴巴集团控股有限公司 数据对象信息违法风险识别方法、装置以及计算机系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150035218A (ko) * 2013-09-27 2015-04-06 삼성전기주식회사 무선통신 단말기, 무선통신 시스템 및 무선통신 시스템의 데이터 송수신 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012080354A (ja) * 2010-10-01 2012-04-19 Video Research:Kk 検出装置及び検出方法
CN105915953A (zh) * 2016-06-12 2016-08-31 腾讯科技（深圳）有限公司 直播视频鉴别的方法、装置和系统
CN106412801A (zh) * 2016-08-31 2017-02-15 西安电子科技大学 一种基于视频帧结构和d2d通信的视频多播方法
CN110309388A (zh) * 2018-03-09 2019-10-08 阿里巴巴集团控股有限公司 数据对象信息违法风险识别方法、装置以及计算机系统

Also Published As

Publication number Publication date
CN112822562A (zh) 2021-05-18

Similar Documents

Publication Publication Date Title
CN100428796C (zh) 视频点播方法、系统、服务器和终端
CN101316357B (zh) 一种频道切换的方法和终端
CN108964963B (zh) 一种基于视联网的告警系统及实现告警的方法
US20070286121A1 (en) Systems and techniques for selective point-to-multipoint retransmission of multicast frames in a wireless network
US8571027B2 (en) System and method for multi-rate video delivery using multicast stream
US20120066730A1 (en) Method, terminal and server for allocating signal route resource in voice on demand service
KR101501189B1 (ko) 고속 채널 변경 방법 및 장치
CN110557230A (zh) 一种用于单向广播和双向网络的数据传输方法及系统
CN111866526B (zh) 一种直播业务处理方法和装置
CN110996035B (zh) 信息发送方法及装置
CN102333209A (zh) 应用于视频监控系统的数据传输方法及设备
CN112822562B (zh) 一种视频传输方法、装置、终端及可读存储介质
KR20130124348A (ko) 협업 미디어 시스템에서 다수의 단말 디바이스에 대한 콘텐트 분배를 관리하기 위한 방법 및 장치
KR100848309B1 (ko) 고속 버퍼링 스위치를 이용한 인터넷 방송 서비스 제공방법 및 그 장치
CN107682718A (zh) 多iptv平台下快速切换频道的方法及系统
CN113259729A (zh) 数据切换的方法、服务器、系统及存储介质
CN114760490A (zh) 视频流处理方法及装置
CN115334059A (zh) 一种音视频互通方法、装置、设备及存储介质
US20150271530A1 (en) Video quality enhancement method and apparatus
CN105491394B (zh) 发送mmt包的方法及装置、接收mmt包的方法
CN108134965B (zh) 一种点播业务的无线侧组播传输的方法
CN113676777B (zh) 数据处理方法及装置
WO2016101626A1 (zh) 一种频道码流处理方法、装置、终端及系统
KR20140050515A (ko) 멀티캐스트 및 유니캐스트 혼용 기반의 주문형 비디오 서비스 제공 장치 및 그 방법
CN114143567A (zh) 直播方法、装置、电子设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant