CN105791952A - 流媒体视频数据的截图方法和装置以及电子设备 - Google Patents

流媒体视频数据的截图方法和装置以及电子设备 Download PDF

Info

Publication number
CN105791952A
CN105791952A CN201610118059.XA CN201610118059A CN105791952A CN 105791952 A CN105791952 A CN 105791952A CN 201610118059 A CN201610118059 A CN 201610118059A CN 105791952 A CN105791952 A CN 105791952A
Authority
CN
China
Prior art keywords
video
frame
data
information
temporal information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610118059.XA
Other languages
English (en)
Other versions
CN105791952B (zh
Inventor
卢昱泽
蔡亮
王涛
顾思斌
潘柏宇
王冀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba China Co Ltd
Original Assignee
Chuanxian Network Technology Shanghai Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chuanxian Network Technology Shanghai Co Ltd filed Critical Chuanxian Network Technology Shanghai Co Ltd
Priority to CN201610118059.XA priority Critical patent/CN105791952B/zh
Publication of CN105791952A publication Critical patent/CN105791952A/zh
Application granted granted Critical
Publication of CN105791952B publication Critical patent/CN105791952B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331—Caching operations, e.g. of an advertisement for later insertion during playback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明涉及流媒体视频数据的截图方法和装置以及电子设备。所述方法包括：获取流媒体视频数据的视频帧的时间信息；建立第一缓存区以缓存流媒体视频数据的视频帧；获取所缓存的视频帧的视频帧信息；基于所获取的时间信息和视频帧信息对所缓存的视频帧进行解码，并将解码后的视频帧数据保存在第二缓存区中；读取第二缓存区中的视频帧数据，并以所述时间信息作为索引从所述视频帧数据中截取图片；以及将截取的图片写入硬盘以供显示。该方法和其装置通过硬解码及截图方式实现了对流媒体视频数据的解码及截图，提高了解码及截图效率并降低了耗电量。

Description

流媒体视频数据的截图方法和装置以及电子设备
技术领域
本发明涉及视频技术领域，尤其涉及一种流媒体视频数据的截图方法和装置，以及一种电子设备。
背景技术
ios系统是由苹果公司开发的移动操作系统。ios系统播放器不支持某些格式的流媒体视频数据的解码及截图，例如基于H.264格式的流媒体视频数据(以下简称为H.264流媒体视频数据)。为解决这一问题，目前在ios系统环境下通常通过软解码及截图来实现这类流媒体视频数据的解码及截图。现在视频行业内的软解码及截图通常采用FFmpeg开源框架，FFmpeg是一套可以用来记录、转换数字音频、视频，并能将其转化为流的开源计算机程序。
然而，这种软解码及截图方式完全依赖于CPU来执行。由于CPU没有相关的集成指令，需要靠CPU的运算能力来解码及截图，所以对流媒体视频数据的软解码及截图会给CPU造成很大的负担，在移动终端表现为效率低，耗电严重。
发明内容
有鉴于此，本发明提出了一种流媒体视频数据的截图方法和装置，以及一种电子设备，其通过硬解码及截图方式实现了对流媒体视频数据的解码及截图，提高了解码及截图效率并降低了耗电量。
一方面，提出了一种流媒体视频数据的截图方法，该方法包括：获取流媒体视频数据的视频帧的时间信息；建立第一缓存区以缓存流媒体视频数据的视频帧；获取所缓存的视频帧的视频帧信息；基于所获取的时间信息和视频帧信息对所缓存的视频帧进行解码，并将解码后的视频帧数据保存在第二缓存区中；读取第二缓存区中的视频帧数据，并以所述时间信息作为索引从所述视频帧数据中截取图片；以及将截取的图片写入硬盘以供显示。
另一方面，提出了一种流媒体视频数据的截图装置，该装置包括：用于获取流媒体视频数据的视频帧的时间信息的部件；用于建立第一缓存区以缓存流媒体视频数据的视频帧的部件；用于获取所缓存的视频帧的视频帧信息的部件；用于基于所获取的时间信息和视频帧信息对所缓存的视频帧进行解码，并将解码后的视频帧数据保存在第二缓存区中的部件；用于读取第二缓存区中的视频帧数据，并以所述时间信息作为索引从所述视频帧数据中截取图片的部件；以及用于将截取的图片写入硬盘以供显示的部件。
另一方面，提出了一种电子设备，该电子设备包括：存储装置，用于存储供图形处理器执行的指令；图形处理器，所述图形处理器被配置为通过执行所述指令以进行以下处理：获取流媒体视频数据的视频帧的时间信息；建立第一缓存区以缓存流媒体视频数据的视频帧；获取所缓存的视频帧的视频帧信息；基于所获取的时间信息和视频帧信息对所缓存的视频帧进行解码，并将解码后的视频帧数据保存在第二缓存区中；读取第二缓存区中的视频帧数据，并以所述时间信息作为索引从所述视频帧数据中截取图片；以及将截取的图片写入硬盘以供显示。
根据下面参考附图对示例性实施例的详细说明，本发明的其它特征及方面将变得清楚。
附图说明
包含在说明书中并且构成说明书的一部分的附图与说明书一起示出了本发明的示例性实施例、特征和方面，并且用于解释本发明的原理。
图1示出根据本发明一实施例的一种流媒体视频数据的截图方法的流程图。
图2示出根据本发明一实施例的一种流媒体视频数据的截图装置的框图。
图3示出根据本发明一实施例的一种电子设备的框图。
具体实施方式
以下将参考附图详细说明本发明的各种示例性实施例、特征和方面。附图中相同的附图标记表示功能相同或相似的元件。尽管在附图中示出了实施例的各种方面，但是除非特别指出，不必按比例绘制附图。
在这里专用的词“示例性”意为“用作例子、实施例或说明性”。这里作为“示例性”所说明的任何实施例不必解释为优于或好于其它实施例。
另外，为了更好的说明本发明，在下文的具体实施方式中给出了众多的具体细节。本领域技术人员应当理解，没有某些具体细节，本发明同样可以实施。在一些实例中，对于本领域技术人员熟知的方法、手段、元件和电路未作详细描述，以便于凸显本发明的主旨。
实施例1
图1示出根据本发明一实施例的一种流媒体视频数据的截图方法的流程图。如图1所示，该方法主要包括：
步骤101：获取流媒体视频数据的视频帧的时间信息；
步骤102：建立第一缓存区以缓存流媒体视频数据的视频帧；
步骤103：获取所缓存的视频帧的视频帧信息；
步骤104：基于所获取的时间信息和视频帧信息对所缓存的视频帧进行解码，并将解码后的视频帧数据保存在第二缓存区中；
步骤105：读取第二缓存区中的视频帧数据，并以所述时间信息作为索引从所述视频帧数据中截取图片；以及
步骤106：将截取的图片写入硬盘以供显示。
本实施例的各步骤可借助于硬件(如GPU)的指令集来完成，从而实现硬解码及截图，降低解码及截图过程中CPU资源的使用，提高了解码及截图速度，降低了终端设备的耗电量。
以下以ios系统下的VideoToolBox框架及CoreImage框架为例，给出本实施例的一个非限制性的具体示例。本领域技术人员应理解，该示例仅为了说明本发明实施例以便于理解，而并非以任何方式限制本发明。
在一个示例中，该方法可包括获取流媒体视频数据，其中流媒体视频数据可以是基于H.264的HLS(HTTP流媒体直播)流媒体视频数据。ios系统提供的播放器(例如AVplayer，MPMoviePlayer，AVPlayerQueue等)是不支持H.264视频格式的解码的，所以要获取流媒体视频数据，可控制流媒体视频数据output(输出数据流)的流向，即截获output数据，并对所截获的数据进行本实施例的后续处理，以实现硬解码。
以AVplayer播放器为例，可以设置AVplayer播放器的输出函数AVPlayerItemVideoOutput的attribute(属性)的kCVPixelBufferPixelFormatTypeKey格式，即指定解码后的图像格式。例如，对于移动终端为苹果TM手机的情况，由于苹果的硬解码器只支持NV12，因此解码后的图像格式可指定成NV12格式。
可通过控制output流向来获取流媒体视频数据的视频帧的时间信息。时间信息可以通过参数CMTime表示，其指示视频帧是每秒中的第几帧，以及每秒有多少帧，利用该信息还可计算出每帧的起止时间等时间信息。可通过函数CACurrentMediaTime()来获取CMTime。
可通过函数CopyPixelBufferForItemTime()来获取pixelbuffer(像素缓存区)作为第一缓存区，以缓存流媒体视频数据的视频帧。可通过函数CVPixelBufferRef来获取所缓存的视频帧的视频帧信息，视频帧信息可包括用于显示该视频帧所需的信息，例如每个视频帧的纹理数据，用于绘制该视频帧的画面以供显示。
在一个示例中，基于所获取的时间信息和视频帧信息对所缓存的视频帧进行解码可包括：针对每个视频帧，将所获取的时间信息和视频帧信息进行合成得到合成后的视频帧信息，并对合成后的视频帧信息进行解码。
例如，可通过函数AVAssetWriter将第一缓存区中的视频帧的视频帧信息与其他信息(例如时间信息、音频信息等)进行合成。具体来说，可以通过函数AVAssetWirteInput控制AVAssetWriter内部的input(输入数据流)流向以截取input数据进行后续处理。可以将指示编解码格式的参数AVVideoCodecKey设置为针对H.264格式的AVVideoCodecH264。可根据上文所获得的时间信息来指定input中每帧的时间信息。可通过适配器inputPixelBufferAdaptor将input流向写入AVAssetWriter，将时间信息与视频帧信息合成，得到合成后的视频帧信息。
在一个示例中，可建立针对解码的session(会话)，利用该会话，对合成后的视频帧信息进行解码，并可将解码获得的视频数据保存在第二缓存区中。第二缓存区可保存针对多个第一缓存区的解码后的视频帧数据(例如是可以接纳针对多个pixelbuffer的解码数据的pixelbufferpool(像素缓存区池))。由此，即可获得解码后的NV12格式的YUV图像数据。这一过程将视频帧的时间信息与视频帧信息(例如视频帧的纹理数据)相结合，从而能够实现对包含时间信息的流媒体视频数据的硬解码，并使得解码后的视频帧数据中也包含帧的时间信息，从而能够基于该时间信息来合成用于播放的视频格式。
在一个示例中，在从第一缓存区中读取视频帧时，可检查视频帧是否处于Ready(有效)状态，如果处于Ready状态则可进行读取，反之，如处于sleep(无效)状态，则进行等待，直到变为Ready状态。
在一个示例中，可以例如通过以下指令，基于函数CVPixelBufferLockBaseAddress(buffer,0)获得帧指针baseAddress：
void*baseAddress＝CVPixelBufferGetBaseAddress(buffer))，
所获得的帧指针baseAddress即为视频帧在第二缓存区中的偏移地址。需要说明的是，baseAddress并不是指向YUV数据，而是指向一个CVPlanarPixelBufferInfo_YCbCrBiPlanar结构体。可基于上述偏移地址baseAddress读取第二缓存区中的解码后的视频帧数据，并且，还可从所述视频帧数据中获取上述时间信息，例如每一帧的开始的时间和结束的时间，每一秒的视频帧数等。
可以以所述时间信息作为索引从所读取的视频帧数据中截取图片。在一个示例中，首先，可以所述时间信息作为索引，获取所需时间点的视频帧对应的视频帧数据，作为截取的视频帧数据。例如，可以指定要截取哪个时间点的视频帧数据，该时间点可换算为上述时间信息，根据该时间信息即可找到所对应的视频帧数据。
接下来，可将所述截取的视频帧数据转换为图片对象，例如，可通过CoreImage框架中的CIImage实现将所截取的视频帧数据转换成图片对象，具体地可将所截取的视频帧数据中的PixelBuffer对象转化为新的CIImage图片对象。然后，可针对所述图片对象进行渲染，得到截取的图片，例如，可建立CIContext上下文以对图片对象进行渲染。最后，可将截取的图片写入硬盘以供显示，例如，可设置CGImageRef属性对象，将图片对象转化为所需要的格式的图片写入硬盘(例如ios系统目前支持的图片格式，如jpg、jpeg、gif等)以供显示。
实施例2
图2示出根据本发明一实施例的一种流媒体视频数据的截图装置的框图。如图2所示，该装置主要包括：
时间信息获取部件201，用于获取流媒体视频数据的视频帧的时间信息；
第一缓存区建立部件202，用于建立第一缓存区以缓存流媒体视频数据的视频帧；
视频帧信息获取部件203，用于获取所缓存的视频帧的视频帧信息；
解码部件204，用于基于所获取的时间信息和视频帧信息对所缓存的视频帧进行解码，并将解码后的视频帧数据保存在第二缓存区中；
截图部件205，用于读取第二缓存区中的视频帧数据，并以所述时间信息作为索引从所述视频帧数据中截取图片；以及
写入部件206，用于将截取的图片写入硬盘以供显示。
在一个示例中，基于所获取的时间信息和视频帧信息对所缓存的视频帧进行解码可包括：针对每个视频帧，将所获取的时间信息和视频帧信息进行合成得到合成后的视频帧信息，并对合成后的视频帧信息进行解码。
在一个示例中，时间信息可包括视频帧是每秒中的第几帧，以及每秒有多少帧。
在一个示例中，所述第二缓存区可保存针对多个第一缓存区的解码后的视频帧数据。
在一个示例中，以所述时间信息作为索引从所述视频帧数据中截取图片可包括：以所述时间信息作为索引，获取所需时间点的视频帧对应的视频帧数据，作为截取的视频帧数据；将所述截取的视频帧数据转换为图片对象；针对所述图片对象进行渲染，得到截取的图片。
实施例3
图3示出了根据本发明的一个实施例的一种电子设备的框图，该电子设备300包括：存储装置301，用于存储供图形处理器执行的指令；图形处理器(GPU)302，所述图形处理器被配置为通过执行所述指令以进行以下处理：获取流媒体视频数据的视频帧的时间信息；建立第一缓存区以缓存流媒体视频数据的视频帧；获取所缓存的视频帧的视频帧信息；基于所获取的时间信息和视频帧信息对所缓存的视频帧进行解码，并将解码后的视频帧数据保存在第二缓存区中；读取第二缓存区中的视频帧数据，并以所述时间信息作为索引从所述视频帧数据中截取图片；以及将截取的图片写入硬盘以供显示。
本实施例以GPU实现硬解码及截图，降低解码及截图过程中CPU资源的使用，提高了解码及截图速度，降低了终端设备的耗电量。
GPU302通过执行存储装置301中存储的指令，可进行实施例1中的各步骤所对应的处理。
在一个示例中，基于所获取的时间信息和视频帧信息对所缓存的视频帧进行解码可包括：针对每个视频帧，将所获取的时间信息和视频帧信息进行合成得到合成后的视频帧信息，并对合成后的视频帧信息进行解码。
在一个示例中，时间信息可包括视频帧是每秒中的第几帧，以及每秒有多少帧。
在一个示例中，所述第二缓存区可保存针对多个第一缓存区的解码后的视频帧数据。
在一个示例中，以所述时间信息作为索引从所述视频帧数据中截取图片可包括：以所述时间信息作为索引，获取所需时间点的视频帧对应的视频帧数据，作为截取的视频帧数据；将所述截取的视频帧数据转换为图片对象；针对所述图片对象进行渲染，得到截取的图片。
本领域普通技术人员可以意识到，本文所描述的实施例中的各示例性单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件形式来实现，取决于技术方案的特定应用和设计约束条件。专业技术人员可以针对特定的应用选择不同的方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
如果以计算机软件的形式来实现所述功能并作为独立的产品销售或使用时，则在一定程度上可认为本发明的技术方案的全部或部分(例如对现有技术做出贡献的部分)是以计算机软件产品的形式体现的。该计算机软件产品通常存储在计算机可读取的非易失性存储介质中，包括若干指令用以使得计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各实施例方法的全部或部分步骤。而前述的存储介质包括U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，RandomAccessMemory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (15)

1.一种流媒体视频数据的截图方法，该方法包括：
获取流媒体视频数据的视频帧的时间信息；
建立第一缓存区以缓存流媒体视频数据的视频帧；
获取所缓存的视频帧的视频帧信息；
基于所获取的时间信息和视频帧信息对所缓存的视频帧进行解码，并将解码后的视频帧数据保存在第二缓存区中；
读取第二缓存区中的视频帧数据，并以所述时间信息作为索引从所述视频帧数据中截取图片；以及
将截取的图片写入硬盘以供显示。
2.根据权利要求1所述的流媒体视频数据的截图方法，其中，基于所获取的时间信息和视频帧信息对所缓存的视频帧进行解码包括：
针对每个视频帧，将所获取的时间信息和视频帧信息进行合成得到合成后的视频帧信息，并对合成后的视频帧信息进行解码。
3.根据权利要求1所述的流媒体视频数据的截图方法，其中，时间信息包括视频帧是每秒中的第几帧，以及每秒有多少帧。
4.根据权利要求1所述的流媒体视频数据的截图方法，其中，所述第二缓存区保存针对多个第一缓存区的解码后的视频帧数据。
5.根据权利要求1所述的流媒体视频数据的截图方法，其中，以所述时间信息作为索引从所述视频帧数据中截取图片包括：
以所述时间信息作为索引，获取所需时间点的视频帧对应的视频帧数据，作为截取的视频帧数据；
将所述截取的视频帧数据转换为图片对象；
针对所述图片对象进行渲染，得到截取的图片。
6.一种流媒体视频数据的截图装置，该装置包括：
用于获取流媒体视频数据的视频帧的时间信息的部件；
用于建立第一缓存区以缓存流媒体视频数据的视频帧的部件；
用于获取所缓存的视频帧的视频帧信息的部件；
用于基于所获取的时间信息和视频帧信息对所缓存的视频帧进行解码，并将解码后的视频帧数据保存在第二缓存区中的部件；
用于读取第二缓存区中的视频帧数据，并以所述时间信息作为索引从所述视频帧数据中截取图片的部件；以及
用于将截取的图片写入硬盘以供显示的部件。
7.根据权利要求6所述的流媒体视频数据的截图装置，其中，基于所获取的时间信息和视频帧信息对所缓存的视频帧进行解码包括：
针对每个视频帧，将所获取的时间信息和视频帧信息进行合成得到合成后的视频帧信息，并对合成后的视频帧信息进行解码。
8.根据权利要求6所述的流媒体视频数据的截图装置，其中，时间信息包括视频帧是每秒中的第几帧，以及每秒有多少帧。
9.根据权利要求6所述的流媒体视频数据的截图装置，其中，所述第二缓存区保存针对多个第一缓存区的解码后的视频帧数据。
10.根据权利要求6所述的流媒体视频数据的截图装置，其中，以所述时间信息作为索引从所述视频帧数据中截取图片包括：
以所述时间信息作为索引，获取所需时间点的视频帧对应的视频帧数据，作为截取的视频帧数据；
将所述截取的视频帧数据转换为图片对象；
针对所述图片对象进行渲染，得到截取的图片。
11.一种电子设备，该电子设备包括：
存储装置，用于存储供图形处理器执行的指令；
图形处理器，所述图形处理器被配置为通过执行所述指令以进行以下处理：
获取流媒体视频数据的视频帧的时间信息；
建立第一缓存区以缓存流媒体视频数据的视频帧；
获取所缓存的视频帧的视频帧信息；
基于所获取的时间信息和视频帧信息对所缓存的视频帧进行解码，并将解码后的视频帧数据保存在第二缓存区中；
读取第二缓存区中的视频帧数据，并以所述时间信息作为索引从所述视频帧数据中截取图片；以及
将截取的图片写入硬盘以供显示。
12.根据权利要求11所述的电子设备，其中，基于所获取的时间信息和视频帧信息对所缓存的视频帧进行解码包括：
针对每个视频帧，将所获取的时间信息和视频帧信息进行合成得到合成后的视频帧信息，并对合成后的视频帧信息进行解码。
13.根据权利要求11所述的电子设备，其中，时间信息包括视频帧是每秒中的第几帧，以及每秒有多少帧。
14.根据权利要求11所述的电子设备，其中，所述第二缓存区保存针对多个第一缓存区的解码后的视频帧数据。
15.根据权利要求11所述的电子设备，其中，以所述时间信息作为索引从所述视频帧数据中截取图片包括：
以所述时间信息作为索引，获取所需时间点的视频帧对应的视频帧数据，作为截取的视频帧数据；
将所述截取的视频帧数据转换为图片对象；
针对所述图片对象进行渲染，得到截取的图片。
CN201610118059.XA 2016-03-02 2016-03-02 流媒体视频数据的截图方法和装置以及电子设备 Active CN105791952B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610118059.XA CN105791952B (zh) 2016-03-02 2016-03-02 流媒体视频数据的截图方法和装置以及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610118059.XA CN105791952B (zh) 2016-03-02 2016-03-02 流媒体视频数据的截图方法和装置以及电子设备

Publications (2)

Publication Number Publication Date
CN105791952A true CN105791952A (zh) 2016-07-20
CN105791952B CN105791952B (zh) 2019-03-12

Family

ID=56387727

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610118059.XA Active CN105791952B (zh) 2016-03-02 2016-03-02 流媒体视频数据的截图方法和装置以及电子设备

Country Status (1)

Country Link
CN (1) CN105791952B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108377429A (zh) * 2018-04-24 2018-08-07 中国广播电视网络有限公司 一种视频流的拆条和抽帧方法
CN109388301A (zh) * 2018-09-14 2019-02-26 Oppo（重庆）智能科技有限公司 截图方法及相关装置
CN110876069A (zh) * 2018-08-31 2020-03-10 广州虎牙信息科技有限公司 视频截图的获取方法、装置、设备及存储介质
CN110881140A (zh) * 2018-09-05 2020-03-13 北京高德云图科技有限公司 从视频中截取图片的方法、装置及嵌入式设备、存储介质
CN111835957A (zh) * 2019-04-16 2020-10-27 西安诺瓦电子科技有限公司 视频处理方法、视频处理装置和视频处理设备
CN112287263A (zh) * 2020-10-30 2021-01-29 安徽鸿程光电有限公司 网页显示方法、装置、系统及终端、计算机可读存储介质
CN113709574A (zh) * 2021-03-17 2021-11-26 腾讯科技（北京）有限公司 视频截图方法、装置、电子设备及计算机可读存储介质

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080037957A1 (en) * 2001-12-31 2008-02-14 Scientific-Atlanta, Inc. Decoding and output of frames for video trick modes
CN101370097A (zh) * 2008-09-05 2009-02-18 深圳创维数字技术股份有限公司 数字电视机顶盒、电视视频画面截取装置及方法
CN101815199A (zh) * 2010-04-07 2010-08-25 中兴通讯股份有限公司 一种视频处理方法及终端
US20120260200A1 (en) * 2011-04-11 2012-10-11 Data Systems International, Inc. Multi-view form design
CN102905102A (zh) * 2012-09-27 2013-01-30 安科智慧城市技术（中国）有限公司 一种抓图视频播放器及抓图方法
CN102957966A (zh) * 2011-08-19 2013-03-06 深圳市快播科技有限公司 一种播放器及用于播放器的视频帧内嵌时间的方法
US8886015B2 (en) * 2011-01-28 2014-11-11 Apple Inc. Efficient media import
CN104616241A (zh) * 2014-07-24 2015-05-13 腾讯科技（北京）有限公司 进行视频截图的方法和装置
CN105120321A (zh) * 2015-08-21 2015-12-02 北京佳讯飞鸿电气股份有限公司 一种视频搜索方法、视频存储方法和相关装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080037957A1 (en) * 2001-12-31 2008-02-14 Scientific-Atlanta, Inc. Decoding and output of frames for video trick modes
CN101370097A (zh) * 2008-09-05 2009-02-18 深圳创维数字技术股份有限公司 数字电视机顶盒、电视视频画面截取装置及方法
CN101815199A (zh) * 2010-04-07 2010-08-25 中兴通讯股份有限公司 一种视频处理方法及终端
US8886015B2 (en) * 2011-01-28 2014-11-11 Apple Inc. Efficient media import
US20120260200A1 (en) * 2011-04-11 2012-10-11 Data Systems International, Inc. Multi-view form design
CN102957966A (zh) * 2011-08-19 2013-03-06 深圳市快播科技有限公司 一种播放器及用于播放器的视频帧内嵌时间的方法
CN102905102A (zh) * 2012-09-27 2013-01-30 安科智慧城市技术（中国）有限公司 一种抓图视频播放器及抓图方法
CN104616241A (zh) * 2014-07-24 2015-05-13 腾讯科技（北京）有限公司 进行视频截图的方法和装置
CN105120321A (zh) * 2015-08-21 2015-12-02 北京佳讯飞鸿电气股份有限公司 一种视频搜索方法、视频存储方法和相关装置

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108377429A (zh) * 2018-04-24 2018-08-07 中国广播电视网络有限公司 一种视频流的拆条和抽帧方法
CN110876069A (zh) * 2018-08-31 2020-03-10 广州虎牙信息科技有限公司 视频截图的获取方法、装置、设备及存储介质
CN110881140A (zh) * 2018-09-05 2020-03-13 北京高德云图科技有限公司 从视频中截取图片的方法、装置及嵌入式设备、存储介质
CN110881140B (zh) * 2018-09-05 2022-01-21 北京高德云图科技有限公司 从视频中截取图片的方法、装置及嵌入式设备、存储介质
CN109388301A (zh) * 2018-09-14 2019-02-26 Oppo（重庆）智能科技有限公司 截图方法及相关装置
CN111835957A (zh) * 2019-04-16 2020-10-27 西安诺瓦电子科技有限公司 视频处理方法、视频处理装置和视频处理设备
CN111835957B (zh) * 2019-04-16 2021-07-06 西安诺瓦星云科技股份有限公司 视频处理方法、视频处理装置和视频处理设备
CN112287263A (zh) * 2020-10-30 2021-01-29 安徽鸿程光电有限公司 网页显示方法、装置、系统及终端、计算机可读存储介质
CN112287263B (zh) * 2020-10-30 2024-04-02 安徽鸿程光电有限公司 网页显示方法、装置、系统及终端、计算机可读存储介质
CN113709574A (zh) * 2021-03-17 2021-11-26 腾讯科技（北京）有限公司 视频截图方法、装置、电子设备及计算机可读存储介质
CN113709574B (zh) * 2021-03-17 2024-03-19 腾讯科技（北京）有限公司 视频截图方法、装置、电子设备及计算机可读存储介质

Also Published As

Publication number Publication date
CN105791952B (zh) 2019-03-12

Similar Documents

Publication Publication Date Title
CN105791952A (zh) 流媒体视频数据的截图方法和装置以及电子设备
US10891032B2 (en) Image reproduction apparatus and method for simultaneously displaying multiple moving-image thumbnails
CN108574806B (zh) 视频播放方法和装置
CN105681893A (zh) 流媒体视频数据的解码方法和装置
JP4919743B2 (ja) デジタルイメージでサムネイルを生成する方法及び装置
US8218616B2 (en) Method and system for addition of video thumbnail
SG173703A1 (en) Method for generating gif, and system and media player thereof
JP5969914B2 (ja) 動画像圧縮伸張装置
JP5156655B2 (ja) 画像処理装置
CN109327698B (zh) 动态预览图的生成方法、系统、介质和电子设备
CN113709554A (zh) 动画视频生成、直播间动画视频播放方法及装置
US20110316862A1 (en) Multi-Processor
CN103369301B (zh) 数据管理设备和数据管理方法
CN114598937B (zh) 动画视频生成、播放方法及装置
CN101677385B (zh) 运动图像再现设备和运动图像再现方法
CN105898320A (zh) 基于安卓平台的全景视频的解码方法、装置及终端设备
US8548275B2 (en) Image processing device and image processing method
US8005348B2 (en) Information processing apparatus
CN102169706B (zh) Yuv文件的存储、播放方法及其装置
US11044474B2 (en) Image compression method and image processing system
CN102768755A (zh) 获取图片的缩略图的方法和装置
CN114025162B (zh) 熵解码方法、介质、程序产品和电子设备
JP2018117308A (ja) 再生装置及びその制御方法
KR20110101530A (ko) 동영상 변환 장치
KR101343737B1 (ko) 비디오 썸네일 추가 방법 및 시스템

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20200511

Address after: 310052 room 508, floor 5, building 4, No. 699, Wangshang Road, Changhe street, Binjiang District, Hangzhou City, Zhejiang Province

Patentee after: Alibaba (China) Co.,Ltd.

Address before: 200241, room 2, floor 02, building 555, Dongchuan Road, Minhang District, Shanghai

Patentee before: Transmission network technology (Shanghai) Co., Ltd