CN110418197B - 一种视频转码方法、装置和计算机可读存储介质 - Google Patents
一种视频转码方法、装置和计算机可读存储介质 Download PDFInfo
- Publication number
- CN110418197B CN110418197B CN201810447597.2A CN201810447597A CN110418197B CN 110418197 B CN110418197 B CN 110418197B CN 201810447597 A CN201810447597 A CN 201810447597A CN 110418197 B CN110418197 B CN 110418197B
- Authority
- CN
- China
- Prior art keywords
- video
- video source
- resolution
- transcoding
- super
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 52
- 238000012545 processing Methods 0.000 claims abstract description 114
- 239000012634 fragment Substances 0.000 claims description 48
- 238000004590 computer program Methods 0.000 claims description 22
- 230000008569 process Effects 0.000 abstract description 6
- 239000002699 waste material Substances 0.000 abstract description 5
- 238000010586 diagram Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000006073 displacement reaction Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明涉及视频处理领域,提供了一种视频转码方法、装置和计算机可读存储介质,以在进行视频转码时合理利用资源,减少资源的浪费。所述方法包括:获取视频源的原始分辨率和视频源的目标分辨率;若视频源的目标分辨率大于视频源的原始分辨率,则对视频源进行超分辨率处理得到分辨率为目标分辨率的视频源;对经过超分辨率处理后的视频源转码以得到码率优化的视频源。本发明提供的技术方案在对视频源转码过程中,节省了时间成本,同时也避免了对计算资源的浪费,使得资源的利用率更高。
Description
技术领域
本发明属于视频处理领域,尤其涉及一种视频转码方法、装置和计算机可读存储介质。
背景技术
考虑到清晰度、带宽等原因,一些视频内容并不适宜直接播放,而是在上线播放之前,需要对原始的视频源进行转码处理。转码处理后输出的多种清晰度视频源,可以更好地适应终端的播放情况并节省播放带宽。
现有的一种视频转码方法是将低分辨率的源视频转码直接拉伸至高分辨率的目标视频,例如,若源视频是1080p的片源,则可以对该片源进行超分辨率处理,直接将其拉伸为4k的分辨率,然后转码为4k格式。
然而,进行超分辨率处理和4k格式的转码过程都是极度耗时的工作,对于无需转码为4k格式的视频,对片源进行超分辨率处理就是一种资源的浪费。
发明内容
本发明提供一种视频转码方法、装置和计算机可读存储介质,以在进行视频转码时合理利用资源,减少资源的浪费。
本发明第一方面提供了一种视频转码方法,所述方法包括:
获取视频源的原始分辨率和所述视频源的目标分辨率;
若所述视频源的目标分辨率大于所述视频源的原始分辨率,则对所述视频源进行超分辨率处理得到分辨率为所述目标分辨率的视频源;
对经过所述超分辨率处理后的视频源转码以得到码率优化的视频源。
结合本发明第一方面,在本发明第一方面的第一种实施方式中,所述获取视频源的原始分辨率和所述视频源的目标分辨率之前,所述方法还包括:
将所述视频源切割为至少n个视频分片,所述n为大于1的自然数。
结合本发明第一方面的第一种实施方式,在本发明第一方面的第二种实施方式中,所述对所述视频源进行超分辨率处理得到分辨率为所述目标分辨率的视频源,包括:
为所述至少n个视频分片中的每一个视频分片分配相应的第一计算资源,采用所述第一计算资源分别对所述每一个视频分片进行超分辨率处理得到分辨率为所述目标分辨率的视频源。
结合本发明第一方面的第一种实施方式,在本发明第一方面的第三种实施方式中,所述对经过所述超分辨率处理后的视频源转码以得到码率优化的视频源,包括:
为所述至少n个视频分片中的每一个视频分片分配相应的第二计算资源,采用所述第二计算资源分别对所述每一个经过超分别率处理后的视频分片进行转码以得到码率优化的视频源。
结合本发明第一方面的第一种实施方式、第二种实施方式或第三种实施方式,在本发明第一方面的第四种实施方式中,所述对经过所述超分辨率处理后的视频源转码以得到码率优化的视频源之后,所述方法还包括:
将所述视频源经过转码后的至少n个视频分片进行合并。
本发明第二方面提供了一种视频转码装置,所述装置包括:
获取模块,用于获取视频源的原始分辨率和所述视频源的目标分辨率;
超分处理模块,用于若所述视频源的目标分辨率大于所述视频源的原始分辨率,则对所述视频源进行超分辨率处理得到分辨率为所述目标分辨率的视频源;
转码模块,用于对经过所述超分辨率处理后的视频源转码以得到码率优化的视频源。
结合本发明第二方面,在本发明第二方面的第一种实施方式中,所述装置还包括:
切分模块,用于所述获取模块获取视频源的原始分辨率和所述视频源的目标分辨率之前,将所述视频源切割为至少n个视频分片,所述n为大于1的自然数。
结合本发明第二方面的第一种实施方式,在本发明第二方面的第二种实施方式中,所述超分处理模块包括:
第一计算单元,用于为所述至少n个视频分片中的每一个视频分片分配相应的第一计算资源,采用所述第一计算资源分别对所述每一个视频分片进行超分辨率处理得到分辨率为所述目标分辨率的视频源。
结合本发明第二方面的第一种实施方式,在本发明第二方面的第三种实施方式中,所述转码模块包括:
第二计算单元,用于为所述至少n个视频分片中的每一个视频分片分配相应的第二计算资源,采用所述第二计算资源分别对所述每一个经过超分别率处理后的视频分片进行转码以得到码率优化的视频源。
结合本发明第二方面的第一种实施方式、第二种实施方式或第三种实施方式,在本发明第二方面的第四种实施方式中,所述装置还包括:
合并模块,用于所述转码模块对经过所述超分辨率处理后的视频源转码以得到码率优化的视频源之后,将所述视频源经过转码后的至少n个视频分片进行合并。
本发明第三方面提供了一种计算设备,包括存储器、处理器以及存储在存储器中并可在处理器上运行的计算机程序,处理器执行计算机程序时实现以下方法的步骤:
获取视频源的原始分辨率和所述视频源的目标分辨率;
若所述视频源的目标分辨率大于所述视频源的原始分辨率,则对所述视频源进行超分辨率处理得到分辨率为所述目标分辨率的视频源;
对经过所述超分辨率处理后的视频源转码以得到码率优化的视频源。
结合本发明第三方面,在本发明第三方面的第一种实施方式中,所述获取视频源的原始分辨率和所述视频源的目标分辨率之前,所述方法还包括:
将所述视频源切割为至少n个视频分片,所述n为大于1的自然数。
结合本发明第三方面的第一种实施方式,在本发明第三方面的第二种实施方式中,所述对所述视频源进行超分辨率处理得到分辨率为所述目标分辨率的视频源,包括:
为所述至少n个视频分片中的每一个视频分片分配相应的第一计算资源,采用所述第一计算资源分别对所述每一个视频分片进行超分辨率处理得到分辨率为所述目标分辨率的视频源。
结合本发明第三方面的第一种实施方式,在本发明第三方面的第三种实施方式中,所述对经过所述超分辨率处理后的视频源转码以得到码率优化的视频源,包括:
为所述至少n个视频分片中的每一个视频分片分配相应的第二计算资源,采用所述第二计算资源分别对所述每一个经过超分别率处理后的视频分片进行转码以得到码率优化的视频源。
结合本发明第三方面的第一种实施方式、第二种实施方式或第三种实施方式,在本发明第三方面的第四种实施方式中,所述对经过所述超分辨率处理后的视频源转码以得到码率优化的视频源之后,所述方法还包括:
将所述视频源经过转码后的至少n个视频分片进行合并。
本发明实施例的第四方面提供了一种计算机可读存储介质,计算机可读存储介质存储有计算机程序,计算机程序被处理器执行时实现以下方法的步骤:
获取视频源的原始分辨率和所述视频源的目标分辨率;
若所述视频源的目标分辨率大于所述视频源的原始分辨率,则对所述视频源进行超分辨率处理得到分辨率为所述目标分辨率的视频源;
对经过所述超分辨率处理后的视频源转码以得到码率优化的视频源。
结合本发明第四方面,在本发明第四方面的第一种实施方式中,所述获取视频源的原始分辨率和所述视频源的目标分辨率之前,所述方法还包括:
将所述视频源切割为至少n个视频分片,所述n为大于1的自然数。
结合本发明第四方面的第一种实施方式,在本发明第四方面的第二种实施方式中,所述对所述视频源进行超分辨率处理得到分辨率为所述目标分辨率的视频源,包括:
为所述至少n个视频分片中的每一个视频分片分配相应的第一计算资源,采用所述第一计算资源分别对所述每一个视频分片进行超分辨率处理得到分辨率为所述目标分辨率的视频源。
结合本发明第四方面的第一种实施方式,在本发明第四方面的第三种实施方式中,所述对经过所述超分辨率处理后的视频源转码以得到码率优化的视频源,包括:
为所述至少n个视频分片中的每一个视频分片分配相应的第二计算资源,采用所述第二计算资源分别对所述每一个经过超分别率处理后的视频分片进行转码以得到码率优化的视频源。
结合本发明第四方面的第一种实施方式、第二种实施方式或第三种实施方式,在本发明第四方面的第四种实施方式中,所述对经过所述超分辨率处理后的视频源转码以得到码率优化的视频源之后,所述方法还包括:
将所述视频源经过转码后的至少n个视频分片进行合并。
从上述本发明实施例提供的技术方案可知,与现有技术不加区分地对视频源进行分辨率的提升和转码相比,本发明提供的技术方案只是在视频源的目标分辨率大于其原始分辨率时才对所述视频源进行超分辨率处理,并对经过超分辨率处理后的视频源转码,因此,本发明提供的技术方案在对视频源转码过程中,节省了时间成本,同时也避免了对计算资源的浪费,使得资源的利用率更高。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的视频转码方法的实现流程示意图;
图2是本发明另一实施例提供的视频转码方法的实现流程示意图;
图3是本发明实施例提供的视频转码装置的结构示意图;
图4是本发明另一实施例提供的视频转码装置的结构示意图;
图5是本发明另一实施例提供的视频转码装置的结构示意图;
图6是本发明另一实施例提供的视频转码装置的结构示意图;
图7-a是本发明另一实施例提供的视频转码装置的结构示意图;
图7-b是本发明另一实施例提供的视频转码装置的结构示意图;
图7-c是本发明另一实施例提供的视频转码装置的结构示意图;
图8是本发明实施例提供的计算设备的结构示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本发明实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本发明的描述。
为了说明本发明的技术方案,下面通过具体实施例来进行说明。
附图1是本发明实施例提供的视频转码方法的实现流程示意图,其执行主体可以是视频转码系统所在的终端或服务器,例如,一台个人电脑、智能手机、服务器或具有上述产品功能的任何计算设备等。附图1示例的视频转码方法主要包括以下步骤S101至S103,以下详细说明:
S101,获取视频源的原始分辨率和所述视频源的目标分辨率。
在本发明实施例中,视频源是指任何可以播放的视频内容,其目标分辨率即视频源经过一系列处理后最终的分辨率在在视频源的上传者上传时已经指定,而视频源的原始分辨率即视频源在未进行任何处理前的分辨率;视频源的原始分辨率和目标分辨率可通过读取该视频源的配置参数获取。视频源的原始分辨率可能大于该视频源的目标分辨率,也可能小于该视频源的目标分辨率。
S102,若视频源的目标分辨率大于视频源的原始分辨率,则对视频源进行超分辨率处理得到分辨率为目标分辨率的视频源。
与现有技术不同,在本发明实施例中,只对目标分辨率大于原始分辨率的视频源才进行超分辨率处理,而对于目标分辨率不大于原始分辨率的视频源仅仅做转码处理。例如,对于原始分辨率是1080p的视频源,若目标分辨率是4k分辨率,则应该对该视频源进行超分辨率处理,反之,若目标分辨率并非4k,最终转码后的视频源非4k格式,则4k分辨率对转码就不是必须的,仍然对该视频源进行超分辨率处理获得4k分辨率对于转码到低清晰度的格式就不能获益。因此,本发明的技术方案中这种对视频源有差别的处理方式大大节省了时间和资源。
S103,对经过步骤S102的超分辨率处理后的视频源转码以得到码率优化的视频源。
需要说明的是,考虑到经过超分辨率处理后的视频源相比于超分辨率处理前有所增大(例如,一个大小为8G的视频源经超分辨率处理后会增大到20G甚至更大),为了节省网络资源,在本发明实施例中,对经过步骤S102的超分辨率处理后的视频源转码一般是调用转码组件在本机直接进行转码处理,而不再进一步上传到其他机器进行转码处理。至于转码的具体方案,可以是将经过步骤S102的超分辨率处理后的视频源的码率进行压缩,得到码率更低的视频源(当然,前提是不影响用户的观看体验),例如,将码率从10M/s压缩到2M/s,从而减少传输的带宽成本。
从上述附图1示例的视频转码方法可知,与现有技术不加区分地对视频源进行分辨率的提升和转码相比,本发明提供的技术方案只是在视频源的目标分辨率大于其原始分辨率时才对所述视频源进行超分辨率处理,并对经过超分辨率处理后的视频源转码,因此,附图1示例的视频转码方法在对视频源转码过程中,节省了时间成本,同时也避免了对计算资源的浪费,使得资源的利用率更高。
附图2是本发明实施例提供的视频转码方法的实现流程示意图,其执行主体可以是分布式转码系统所在的终端或服务器,例如,一台个人电脑、智能手机、服务器或具有上述产品功能的任何计算设备等。附图2示例的视频转码方法主要包括以下步骤S201至S204,以下详细说明:
S201,将视频源切割为至少n个视频分片。
考虑到对视频源直接进行超分辨率处理极大耗费资源,在本发明实施例中,可以将视频源切割为至少n个视频分片,其中,n是大于1的任何自然数。可以固定时间长度为单位,例如,2分钟为一个单位对视频源进行切割。需要说明的是,上述的固定时间长度是以是否有实际的视频内容为准的。例如,一段10分钟长度的视频源,从[0,2]分钟、(2,4]分钟有实际的视频内容,但(4,5]分钟没有实际视频内容,(5,7]分钟、(7,9]分钟有实际的视频内容,但(9,10]分钟没有实际视频内容,应当以[0,2]、(2,5]、(5,7]以及(7,10]分钟为长度单位切割该段视频源,得到4个视频分片,而不是从0时刻开始,机械地以每2分钟为时间长度为单位进行视频源的切割,得到5个视频分片。
S202,获取视频源的原始分辨率和所述视频源的目标分辨率。
尽管步骤S201对视频源进行了切割,得到了至少n个视频分片,但视频源的切割并不影响视频源的原始分辨率。因此,步骤S202与前述实施例的步骤S101的实施方式相同,此处不做赘述。
S203,若视频源的目标分辨率大于所述视频源的原始分辨率,则为经步骤S201切割得到的至少n个视频分片中的每一个视频分片分配相应的第一计算资源,采用第一计算资源分别对每一个视频分片进行超分辨率处理得到分辨率为目标分辨率的视频源。
在本发明实施例中,为至少n个视频分片中的每一个视频分片分配相应的第一计算资源,采用第一计算资源分别对每一个视频分片进行超分辨率处理实质是一种分布式处理方案,即,为每一个视频分片分配相应的第一计算资源,所分配的每个第一计算资源分别对每一个视频分片进行超分辨率处理,且可以是同时进行处理即并行处理,其中,第一计算资源可以是为完成超分辨率处理所需要的一切资源。需要说明的是,为至少n个视频分片中的每一个视频分片分配的第一计算资源,既可以是在同一物理的机器上,也可以是在不同的物理机器上,例如,分布式服务器或服务器集群。原则上,为至少n个视频分片中的每一个视频分片分配的第一计算资源进行超分辨率处理只要能够体现分布式处理的思想即可,而不拘泥于具体的表现形式。
S204,为经步骤S201切割得到的至少n个视频分片中的每一个视频分片分配相应的第二计算资源,采用第二计算资源分别对每一个经过超分别率处理后的视频分片进行转码以得到码率优化的视频源。
如前述步骤S203类似,此处为至少n个视频分片中的每一个视频分片分配的第二计算资源,既可以是在同一物理的机器上,也可以是在不同的物理机器上,例如,分布式服务器或服务器集群。原则上,为至少n个视频分片中的每一个视频分片分配的第二计算资源进行转码只要能够体现分布式处理的思想即可,而不拘泥于具体的表现形式。此处,第二计算资源是为完成对每一个视频分片进行转码所需的一切资源。
需要说明的是,在上述附图2的实施例中,若视频源的目标分辨率不大于视频源的原始分辨率,则对视频源不做超分辨率处理,但对视频源做转码处理时,仍然可以采用分布式思想进行,即,对于目标分辨率不大于原始分辨率的视频源,在切割为至少m个视频分片后(m为大于1的自然数),可以为这至少m个视频分片中的每一个视频分片分配相应的第三计算资源,采用第三计算资源分别对这至少m个视频分片中的每一个视频分片进行转码。类似地,此处为至少n个视频分片中的每一个视频分片分配的第三计算资源,既可以是在同一物理的机器上,也可以是在不同的物理机器上,例如,分布式服务器或服务器集群。原则上,为至少m个视频分片中的每一个视频分片分配的第三计算资源进行转码只要能够体现分布式处理的思想即可,而不拘泥于具体的表现形式。此处,第三计算资源是为完成对每一个视频分片进行转码所需的一切资源。
由于附图2是分布式处理的方案,因此,相对于附图1示例的技术方案,其处理速度大为提升,对资源的应用也得到更合理的优化。
在所有视频分片经过超分辨率处理和转码处理或者只经过转码处理之后,可以对将视频源经过转码后的至少n个视频分片进行合并操作,以组合成完整的视频源。
至于对视频源或者对切割所得的每一个视频分片进行超分辨率处理,其具体的超分辨率处理方案可以是VESPCN(Real-Time Video Super-Resolution with Spatio-Temporal Networks and Motion Compensation)算法,该算法提出使用视频中的时间序列图像进行高分辨率重建,并且能达到实时处理的效率要求,具体包括三个方面:一是纠正相邻帧的位移偏差,即,先通过运动估计(Motion Estimation)方法估计出位移,然后利用位移参数对相邻帧进行空间变换,将二者对齐;然后,将对齐后的相邻若干帧叠放在一起,当做一个三维数据,在低分辨率的三维数据上使用三维卷积得到的结果大小为r2×H×W;最后,利用ESPCN(Real-Time Single Image and Video Super-Resolution Using anEfficient Sub-Pixel Convolutional Neural Network)的思想将该三维卷积结果重新排列得到大小1×rH×rW为的高分辨率图像。
图3是本发明实施例提供的视频转码装置的示意图。为了便于说明书,仅示出了与本发明有关的部分。图3示例的视频转码装置主要包括获取模块301、超分处理模块302和转码模块303,详细说明如下:
比较模块301,用于获取视频源的原始分辨率和视频源的目标分辨率;
超分处理模块302,用于若视频源的目标分辨率大于视频源的原始分辨率,则对视频源进行超分辨率处理得到分辨率为目标分辨率的视频源;
转码模块303,用于对经过超分辨率处理后的视频源转码以得到码率优化的视频源。
需要说明的是,本发明实施例提供的装置,由于与本发明方法实施例基于同一构思,其带来的技术效果与本发明方法实施例相同,具体内容可参见本发明方法实施例中的叙述,此处不再赘述。
附图3示例的视频转码装置还可以包括切分模块401,如附图4示例的视频转码装置。切分模块401用于获取模块301获取视频源的原始分辨率和视频源的目标分辨率之前,将视频源切割为至少n个视频分片,其中,n为大于1的自然数。
附图4示例的超分处理模块302可以包括第一计算单元501,如附图5示例的视频转码装置。第一计算单元501用于为至少n个视频分片中的每一个视频分片分配相应的第一计算资源,采用第一计算资源分别对至少n个视频分片中的每一个视频分片进行超分辨率处理得到分辨率为目标分辨率的视频源。
附图4示例的转码模块303可以包括第二计算单元601,如附图6示例的视频转码装置。第二计算单元601用于为至少n个视频分片中的每一个视频分片分配相应的第二计算资源,采用第二计算资源分别对每一个经过超分别率处理后的视频分片进行转码以得到码率优化的视频源。
附图4至附图6任一示例的视频转码装置还可以包括合并模块701,如附图7-a至附图7-c任一示例的视频转码装置。合并模块701用于转码模块301对经过超分辨率处理后的视频源转码以得到码率优化的视频源之后,将视频源经过转码后的至少n个视频分片进行合并。
图8是本发明一实施例提供的计算设备的结构示意图。如图8所示,该实施例的计算设备8主要包括:处理器80、存储器81以及存储在存储器81中并可在处理器80上运行的计算机程序82,例如视频转码方法的程序。处理器80执行计算机程序82时实现上述视频转码方法实施例中的步骤,例如图1所示的步骤S101至S103。或者,处理器80执行计算机程序82时实现上述各装置实施例中各模块/单元的功能,例如图3所示获取模块301、超分处理模块302和转码模块303的功能。
示例性的,视频转码方法的计算机程序82主要包括:获取视频源的原始分辨率和视频源的目标分辨率;若视频源的目标分辨率大于视频源的原始分辨率,则对视频源进行超分辨率处理得到分辨率为目标分辨率的视频源;对经过超分辨率处理后的视频源转码以得到码率优化的视频源。计算机程序82可以被分割成一个或多个模块/单元,一个或者多个模块/单元被存储在存储器81中,并由处理器80执行,以完成本发明。一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述计算机程序82在计算设备8中的执行过程。例如,计算机程序82可以被分割成获取模块301、超分处理模块302和转码模块303的功能(虚拟装置中的模块),各模块具体功能如下:比较模块301,用于比较视频源的原始分辨率和视频源的目标分辨率;超分处理模块302,用于若视频源的目标分辨率大于视频源的原始分辨率,则对视频源进行超分辨率处理得到视频源的目标分辨率;转码模块303,用于对经过超分辨率处理后的视频源转码。
计算设备8可包括但不仅限于处理器80、存储器81。本领域技术人员可以理解,图8仅仅是计算设备8的示例,并不构成对计算设备8的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如计算设备还可以包括输入输出设备、网络接入设备、总线等。
所称处理器80可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
存储器81可以是计算设备8的内部存储单元,例如计算设备8的硬盘或内存。存储器81也可以是计算设备8的外部存储设备,例如计算设备8上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,存储器81还可以既包括计算设备8的内部存储单元也包括外部存储设备。存储器81用于存储计算机程序以及计算设备所需的其他程序和数据。存储器81还可以用于暂时地存储已经输出或者将要输出的数据。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
在本发明所提供的实施例中,应该理解到,所揭露的装置/计算设备和方法,可以通过其它的方式实现。例如,以上所描述的装置/计算设备实施例仅仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,视频转码方法的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤,即,获取视频源的原始分辨率和视频源的目标分辨率;若视频源的目标分辨率大于视频源的原始分辨率,则对视频源进行超分辨率处理得到分辨率为目标分辨率的视频源;对经过超分辨率处理后的视频源转码以得到码率优化的视频源。其中,计算机程序包括计算机程序代码,计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。计算机可读介质可以包括:能够携带计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。
Claims (6)
1.一种视频转码方法,其特征在于,所述方法包括:
按照视频源的内容,将所述视频源切割为至少n个视频分片,所述n为大于1的自然数;
获取视频源的原始分辨率和所述视频源的目标分辨率,其中,所述目标分辨率为所述视频源的上传者所指定的分辨率;
若所述视频源的目标分辨率大于所述视频源的原始分辨率,为所述至少n个视频分片中的每一个视频分片分配相应的第一计算资源,基于分布式处理方案采用所述第一计算资源分别对所述每一个视频分片进行超分辨率处理得到分辨率为所述目标分辨率的视频源,其中,一个视频分片对应一个第一计算资源,所述对所述每一个视频分片进行超分辨率处理,包括:采用VESPCN算法对所述每一个视频分片进行超分辨率处理;
若所述视频源的目标分辨率不大于所述视频源的原始分辨率,对所述视频源进行转码处理;
为所述至少n个视频分片中的每一个视频分片分配相应的第二计算资源,基于分布式处理方案采用所述第二计算资源分别对所述每一个经过超分辨率处理后的视频分片进行转码以得到码率优化的视频源。
2.如权利要求1所述视频转码方法,其特征在于,对经过所述超分辨率处理后的视频源转码以得到码率优化的视频源之后,所述方法还包括:
将所述视频源经过转码后的至少n个视频分片进行合并。
3.一种视频转码装置,其特征在于,所述装置包括:
切分模块,用于按照视频源的内容,将所述视频源切割为至少n个视频分片,所述n为大于1的自然数;
获取模块,用于获取视频源的原始分辨率和所述视频源的目标分辨率,其中,所述目标分辨率为所述视频源的上传者所指定的分辨率;
超分处理模块,用于若所述视频源的目标分辨率大于所述视频源的原始分辨率,为所述至少n个视频分片中的每一个视频分片分配相应的第一计算资源,基于分布式处理方案采用所述第一计算资源分别对所述每一个视频分片进行超分辨率处理得到分辨率为所述目标分辨率的视频源,其中,一个视频分片对应一个第一计算资源,所述对所述每一个视频分片进行超分辨率处理,包括:采用VESPCN算法对所述每一个视频分片进行超分辨率处理;
视频转码模块,用于若所述视频源的目标分辨率不大于所述视频源的原始分辨率,对所述视频源进行转码处理;
转码模块,用于为所述至少n个视频分片中的每一个视频分片分配相应的第二计算资源,基于分布式处理方案采用所述第二计算资源分别对所述每一个经过超分别率处理后的视频分片进行转码以得到码率优化的视频源。
4.如权利要求3所述视频转码装置,其特征在于,所述装置还包括:
合并模块,用于所述转码模块对经过所述超分辨率处理后的视频源转码以得到码率优化的视频源之后,将所述视频源经过转码后的至少n个视频分片进行合并。
5.一种计算设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至2任意一项所述方法的步骤。
6.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至2任意一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810447597.2A CN110418197B (zh) | 2018-05-11 | 2018-05-11 | 一种视频转码方法、装置和计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810447597.2A CN110418197B (zh) | 2018-05-11 | 2018-05-11 | 一种视频转码方法、装置和计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110418197A CN110418197A (zh) | 2019-11-05 |
CN110418197B true CN110418197B (zh) | 2022-03-08 |
Family
ID=68357973
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810447597.2A Active CN110418197B (zh) | 2018-05-11 | 2018-05-11 | 一种视频转码方法、装置和计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110418197B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112738565B (zh) * | 2020-12-22 | 2023-08-18 | 广州开得联智能科技有限公司 | 互动带宽优化方法、装置、计算机设备和存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102025999A (zh) * | 2010-12-31 | 2011-04-20 | 北京工业大学 | 基于支持向量机的视频转码快速帧内预测方法 |
CN102625147A (zh) * | 2012-02-29 | 2012-08-01 | 中山大学 | 一种移动可视设备自适应显示方法 |
CN105657449A (zh) * | 2014-12-03 | 2016-06-08 | 中国移动通信集团公司 | 一种视频转码分配方法、装置及视频转码系统 |
CN106254356A (zh) * | 2016-08-10 | 2016-12-21 | 上海港聚信息科技有限公司 | 移动高清/超清直播平台及其应用 |
CN106658059A (zh) * | 2016-12-05 | 2017-05-10 | 乐视控股(北京)有限公司 | 视频转码方法、装置及系统 |
CN106993199A (zh) * | 2017-04-28 | 2017-07-28 | 暴风集团股份有限公司 | 一种实时视频转码的方法及系统 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6898241B2 (en) * | 2001-05-11 | 2005-05-24 | Mitsubishi Electric Research Labs, Inc. | Video transcoder with up-sampling |
US7170932B2 (en) * | 2001-05-11 | 2007-01-30 | Mitsubishi Electric Research Laboratories, Inc. | Video transcoder with spatial resolution reduction and drift compensation |
US8467412B2 (en) * | 2010-04-14 | 2013-06-18 | Ericsson Television Inc. | Adaptive rate shifting for delivery of video services to service groups |
US8632409B2 (en) * | 2010-05-11 | 2014-01-21 | Bungie, Llc | Method and apparatus for online rendering of game files |
CN104937941B (zh) * | 2013-03-28 | 2019-04-26 | 华为技术有限公司 | 用于确定用于空间可缩放视频编解码器的预测块的方法 |
US9773364B2 (en) * | 2014-07-28 | 2017-09-26 | Dan Kerning | Security and public safety application for a mobile device with audio/video analytics and access control authentication |
US9509742B2 (en) * | 2014-10-29 | 2016-11-29 | DLVR, Inc. | Configuring manifest files referencing infrastructure service providers for adaptive streaming video |
US10482917B2 (en) * | 2016-02-16 | 2019-11-19 | Arris Enterprises Llc | Efficient just-in-time transcoding by parameter extraction |
-
2018
- 2018-05-11 CN CN201810447597.2A patent/CN110418197B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102025999A (zh) * | 2010-12-31 | 2011-04-20 | 北京工业大学 | 基于支持向量机的视频转码快速帧内预测方法 |
CN102625147A (zh) * | 2012-02-29 | 2012-08-01 | 中山大学 | 一种移动可视设备自适应显示方法 |
CN105657449A (zh) * | 2014-12-03 | 2016-06-08 | 中国移动通信集团公司 | 一种视频转码分配方法、装置及视频转码系统 |
CN106254356A (zh) * | 2016-08-10 | 2016-12-21 | 上海港聚信息科技有限公司 | 移动高清/超清直播平台及其应用 |
CN106658059A (zh) * | 2016-12-05 | 2017-05-10 | 乐视控股(北京)有限公司 | 视频转码方法、装置及系统 |
CN106993199A (zh) * | 2017-04-28 | 2017-07-28 | 暴风集团股份有限公司 | 一种实时视频转码的方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN110418197A (zh) | 2019-11-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111681167B (zh) | 画质调整方法和装置、存储介质及电子设备 | |
US10924783B2 (en) | Video coding method, system and server | |
CN111158619B (zh) | 一种图片处理方法及装置 | |
US9426476B2 (en) | Video stream | |
CN109640167B (zh) | 视频处理方法、装置、电子设备及存储介质 | |
CN110290398B (zh) | 视频下发方法、装置、存储介质及电子设备 | |
CN112614042B (zh) | 贴图延迟渲染的数据驱动方法及装置 | |
US11562772B2 (en) | Video processing method, electronic device, and storage medium | |
US20220264129A1 (en) | Video decoder chipset | |
CN110418197B (zh) | 一种视频转码方法、装置和计算机可读存储介质 | |
US20220007037A1 (en) | Point cloud encoding method and apparatus, point cloud decoding method and apparatus, and storage medium | |
CN108391142B (zh) | 一种视频增强的方法及相关设备 | |
DE112012006970T5 (de) | Verteilte Grafikverarbeitung | |
CN114205359A (zh) | 视频渲染协同方法、装置及设备 | |
CN116483587B (zh) | 一种基于图像分割的视频超分并行方法、服务器及介质 | |
US20200260075A1 (en) | Systems and methods for group of pictures encoding | |
WO2023142715A1 (zh) | 视频编码方法、实时通信方法、装置、设备及存储介质 | |
CN110677671A (zh) | 一种图像压缩方法、装置及终端设备 | |
CN110662071A (zh) | 视频解码方法和装置、存储介质及电子装置 | |
US20210092479A1 (en) | Video processing apparatus | |
CN116248889A (zh) | 图像编码及解码方法、装置和电子设备 | |
CN114697555A (zh) | 一种图像处理方法、装置、设备及存储介质 | |
CN110677690B (zh) | 视频处理方法和装置、存储介质 | |
CN108933945B (zh) | 一种gif图片的压缩方法、装置及存储介质 | |
US9361860B2 (en) | Display apparatus, image post-processing apparatus and method for image post-processing of contents |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |