CN106331786A - 图文模式显示播放列表的方法及系统 - Google Patents

图文模式显示播放列表的方法及系统 Download PDF

Info

Publication number
CN106331786A
CN106331786A CN201610702826.1A CN201610702826A CN106331786A CN 106331786 A CN106331786 A CN 106331786A CN 201610702826 A CN201610702826 A CN 201610702826A CN 106331786 A CN106331786 A CN 106331786A
Authority
CN
China
Prior art keywords
video
image
frame
source
video file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610702826.1A
Other languages
English (en)
Other versions
CN106331786B (zh
Inventor
高扬
朱春明
朱彦东
张鹏宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Storm Group Ltd By Share Ltd
Original Assignee
Storm Group Ltd By Share Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Storm Group Ltd By Share Ltd filed Critical Storm Group Ltd By Share Ltd
Priority to CN201610702826.1A priority Critical patent/CN106331786B/zh
Publication of CN106331786A publication Critical patent/CN106331786A/zh
Application granted granted Critical
Publication of CN106331786B publication Critical patent/CN106331786B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/432Query formulation
    • G06F16/434Query formulation using image data, e.g. images, photos, pictures taken by a user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/438Presentation of query results
    • G06F16/4387Presentation of query results by the use of playlists
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/44Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73Querying
    • G06F16/732Query formulation
    • G06F16/7328Query by example, e.g. a complete video frame or video sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73Querying
    • G06F16/738Presentation of query results
    • G06F16/739Presentation of query results in form of a video summary, e.g. the video summary being a video sequence, a composite still image or having synthesized frames
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4826End-user interface for program selection using recommendation lists, e.g. of programs or channels sorted out according to their score
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8549Creating video summaries, e.g. movie trailer

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Computer Security & Cryptography (AREA)
  • Software Systems (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本申请公开图文模式显示播放列表的方法及系统,方法包括:设置选择视频帧时的尝试选择时间间隔和最大尝试次数以及图像的亮度阈值范围;从源视频文件中选取选择视频帧的起始点,将视频数据跳转到起始点前的视频关键帧;将视频关键帧所对应的视频文件数据从源视频文件数据中分离出来,并将视频关键帧转换为预定大小及预定格式的图像;计算图像的平均亮度值,选择满足亮度阈值范围的图像或没有满足亮度阈值范围的图像是选择亮度最大的图像作为视频缩略图;将选中的源视频文件的视频缩略图所对应的视频帧转码为YUVJ420P格式并保存;根据视频帧的地址和对应的源视频文件ID,生成源视频文件对应的视频缩略图,并加载到播放列表进行显示。

Description

图文模式显示播放列表的方法及系统
技术领域
本申请涉及视频播放列表设置技术领域,具体地说,涉及一种图文模式显示播放列表的方法及系统。
背景技术
在视频播放过程中,都会从播放内容中截取一些内容信息形成播放列表以供用户选择播放内容,目前的播放列表都是以文字形式的播放列表,列表中保存的基本都是表中各个视频的名称。但是,只是从文字形式的播放列表中很难一目了然地了解到播放内容的情况,对用户来讲很不方便。而且,现有的文字形式的播放列表,展示起来较为死板,不够生动,也不能直观地体现出视频内容。
因此,如何方便地在播放列表位置显示视频的内容图片简介成为亟待解决的问题。
发明内容
有鉴于此,本申请所要解决的技术问题是提供了一种图文模式显示播放列表的方法及系统,选取视频帧画面中的一帧作为播放列表缩略图,并选择亮度鲜明的图像作为播放列表的视频缩略图,方便用户从播放列表中直观地查看到视频内容的简介。
为了解决上述技术问题,本申请有如下技术方案:
一种图文模式显示播放列表的方法,其特征在于,包括:
设置选择视频帧时的尝试选择时间间隔和最大尝试次数,以及图像的亮度阈值范围;
从源视频文件中选取选择所述视频帧的起始点,根据选取的选择所述视频帧的起始点,将视频数据跳转到所述起始点前的视频关键帧;
将所述视频关键帧所对应的视频文件数据从源视频文件数据中分离出来,并将所述视频关键帧转换为预定大小及预定格式的图像;
计算所述图像的平均亮度值,并判断所述图像的平均亮度值是否在所述亮度阈值范围内,若所述图像的平均亮度值处于所述亮度阈值范围内,则将所述图像作为所述源视频文件的视频缩略图,否则,比较查看当前亮度是否为目前最大亮度,若是,则记录亮度信息,并跳到下一个时间间隔进行进一步尝试,直至在达到所述最大尝试次数前,选择出平均亮度值在所述亮度阈值范围内的图像;若尝试次数已经达到所述最大尝试次数的上限,或跳转时间已经超过所述源视频文件的总长度时,仍未选择到满足所述亮度阈值范围的图像,则根据记录的亮度信息,选择尝试过的图像中亮度最大的图像,作为所述源视频文件的视频缩略图;
将选中的所述源视频文件的所述视频缩略图所对应的视频帧转码为YUVJ420P格式并保存,并将所述视频帧的地址和对应的源视频文件ID发送至控制模块;
根据所述视频帧的地址和对应的源视频文件ID,生成所述源视频文件对应的视频缩略图,并加载到播放列表进行显示。
优选地,其中:
从源视频文件中选取选择视频帧的起始点,进一步为:
判断所述源视频的长度是否大于等于完成最大尝试次数所需时间的2倍,若是,则将源视频文件的中间点作为选择视频帧的起始点,否则,则将源视频的起始时间点加上一个所述尝试选择时间间隔作为选择视频帧的起始点。
优选地,其中:
计算所述图像的平均亮度值,进一步为:
采用采样法,从该视频帧所对应的图像的第一行第一列开始,将每上下左右相邻的4个像素作为一个像素单元,选取所述像素单元左上角的像素点的亮度值作为该像素单元的亮度值,计算所述视频帧所对应的图像的所有像素单元的平均亮度值,作为所述视频帧对应的图像的平均亮度值。
优选地,其中:
进一步包括:
将所述视频关键帧所对应的视频文件数据从源视频文件数据中分离出来的过程中,若遇到视频数据包,则对所述视频数据包进行解码,得到对应的视频关键帧。
优选地,其中:
所述尝试选择时间间隔为1s,所述最大尝试次数为10,所述亮度阈值范围为[80,150]。
一种图文模式显示播放列表的系统,其特征在于,包括:参数设置模块、视频帧起始点选择模块、视频帧转换模块、图像亮度值计算模块、视频缩略图选择模块和控制模块,
所述参数设置模块,用于设置选择视频帧时的尝试选择时间间隔和最大尝试次数,以及图像的亮度阈值范围;
所述视频帧起始点选择模块,用于从源视频文件中选取选择所述视频帧的起始点,根据选取的选择所述视频帧的起始点,将视频数据跳转到所述起始点前的视频关键帧;
所述视频帧转换模块,用于将所述视频关键帧所对应的视频文件数据从源视频文件数据中分离出来,并将所述视频关键帧转换为预定大小及预定格式的图像;
所述图像亮度值计算模块,用于计算所述图像的平均亮度值,并判断所述图像的平均亮度值是否在所述亮度阈值范围内,若所述图像的平均亮度值处于所述亮度阈值范围内,则将所述图像作为所述源视频文件的视频缩略图,否则,比较查看当前亮度是否为目前最大亮度,若是,则记录亮度信息,并跳到下一个时间间隔进行进一步尝试,直至在达到所述最大尝试次数前,选择出平均亮度值在所述亮度阈值范围内的图像;若尝试次数已经达到所述最大尝试次数的上限,或跳转时间已经超过所述源视频文件的总长度时,仍未选择到满足所述亮度阈值范围的图像,则根据记录的亮度信息,选择尝试过的图像中亮度最大的图像,作为所述源视频文件的视频缩略图;
所述视频缩略图选择模块,用于将选中的所述源视频文件的所述视频缩略图所对应的视频帧进行转码为YUVJ420P格式并保存,并将所述视频帧的地址和对应的源视频文件ID发送至控制模块;
所述控制模块,用于根据所述视频帧的地址和对应的源视频文件ID,生成所述源视频文件对应的视频缩略图,并加载到播放列表进行显示。
优选地,其中:
所述视频帧起始点选择模块,进一步用于判断所述源视频的长度是否大于等于完成最大尝试次数所需时间的2倍,若是,则将源视频文件的中间点作为选择视频帧的起始点,否则,则将源视频的起始时间点加上一个所述尝试选择时间间隔作为选择视频帧的起始点。
优选地,其中:
所述图像亮度值计算模块,进一步用于采用采样法,从该视频帧所对应的图像的第一行第一列开始,将每上下左右相邻的4个像素作为一个像素单元,选取所述像素单元左上角的像素点的亮度值作为该像素单元的亮度值,计算所述视频帧所对应的图像的所有像素单元的平均亮度值,作为所述视频帧对应的图像的平均亮度值。
优选地,其中:
所述视频帧转换模块,进一步用于在将所述视频关键帧所对应的视频文件数据从源视频文件数据中分离出来的过程中,若遇到视频数据包,则对所述视频数据包进行解码,得到对应的视频关键帧。
优选地,其中:
所述尝试选择时间间隔为1s,所述最大尝试次数为10,所述亮度阈值范围为[80,150]。
与现有技术相比,本申请所述的方法及系统,达到了如下效果:
第一,本发明所提供的图文模式显示播放列表的方法及系统,直接从源视频文件中选取一个视频帧,将该视频帧画面根据UI层要求的大小进行转码,并直接选择平均亮度处于预定亮度阈值内的图像作为视频缩略图,节省资源,当没有符合预定亮度阈值范围的图像时,将亮度最大的图像作为视频缩略图,这样就能方便地选择出亮度鲜明的图像作为视频缩略图并加载到播放列表中,极大方便了用户从播放列表中直观地查看到视频内容的简介。
第二,本发明所提供的图文模式显示播放列表的方法及系统,根据源视频的长度与完成最大尝试次数所需时间之间的关系选择选帧的起始点,若源视频的长度大于等于完成最大尝试次数所需时间的2倍,则将源视频文件的中间点作为选帧的起始点,否则将源视频的起始时间点加上一个尝试选择时间间隔作为选帧的起始点。通过此种方式选择选帧的起始点,有利于快速地从源视频文件中选出符合要求的视频缩略图。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1为本发明的所述一种图文模式显示播放列表的方法的流程图;
图2为本发明的所述一种图文模式显示播放列表的系统的结构图。
具体实施方式
如在说明书及权利要求当中使用了某些词汇来指称特定组件。本领域技术人员应可理解,硬件制造商可能会用不同名词来称呼同一个组件。本说明书及权利要求并不以名称的差异来作为区分组件的方式,而是以组件在功能上的差异来作为区分的准则。如在通篇说明书及权利要求当中所提及的“包含”为一开放式用语,故应解释成“包含但不限定于”。“大致”是指在可接收的误差范围内,本领域技术人员能够在一定误差范围内解决所述技术问题,基本达到所述技术效果。此外,“耦接”一词在此包含任何直接及间接的电性耦接手段。因此,若文中描述一第一装置耦接于一第二装置,则代表所述第一装置可直接电性耦接于所述第二装置,或通过其他装置或耦接手段间接地电性耦接至所述第二装置。说明书后续描述为实施本申请的较佳实施方式,然所述描述乃以说明本申请的一般原则为目的,并非用以限定本申请的范围。本申请的保护范围当视所附权利要求所界定者为准。
实施例1
参见图1所示为本申请所述一种图文模式显示播放列表的方法的具体实施例,该方法包括:
步骤101、设置选择视频帧时的尝试选择时间间隔和最大尝试次数,以及图像的亮度阈值范围;
步骤102、从源视频文件中选取选择所述视频帧的起始点,根据选取的选择所述视频帧的起始点,将视频数据跳转到所述起始点前的视频关键帧;
步骤103、将所述视频关键帧所对应的视频文件数据从源视频文件数据中分离出来,并将所述视频关键帧转换为预定大小及预定格式的图像;
步骤104、计算所述图像的平均亮度值,并判断所述图像的平均亮度值是否在所述亮度阈值范围内,若所述图像的平均亮度值处于所述亮度阈值范围内,则将所述图像作为所述源视频文件的视频缩略图,否则,比较查看当前亮度是否为目前最大亮度,若是,则记录亮度信息,并跳到下一个时间间隔进行进一步尝试,直至在达到所述最大尝试次数前,选择出平均亮度值在所述亮度阈值范围内的图像;若尝试次数已经达到所述最大尝试次数的上限,或跳转时间已经超过所述源视频文件的总长度时,仍未选择到满足所述亮度阈值范围的图像,则根据记录的亮度信息,选择尝试过的图像中亮度最大的图像,作为所述源视频文件的视频缩略图;
步骤105、将选中的所述源视频文件的所述视频缩略图所对应的视频帧转码YUVJ420P格式并保存,并将所述视频帧的地址和对应的源视频文件ID发送至控制模块;
步骤106、根据所述视频帧的地址和对应的源视频文件ID,生成所述源视频文件对应的视频缩略图,并加载到播放列表进行显示。
上述步骤101中,将尝试选择时间间隔设置为1s,将最大尝试次数设为10,将亮度阈值范围设为[80,150]。当然,可根据实际情况调整上述参数,例如,可通过将亮度的阈值范围缩小来优化参数,比如可将亮度阈值范围设为[100,120],从而使得选中的图像的亮度更加符合图文模式中视频缩略图的要求。
上述步骤105中,将图片源格式转为YUV420P,此种格式的图片质量和大小都适中,也支持转为JPG格式。
上述步骤106中,生成的视频缩略图是将图像编码压缩成的JPG格式的图像。
上述步骤102中,从源视频文件中选取选择视频帧的起始点,进一步为:
判断所述源视频的长度是否大于等于完成最大尝试次数所需时间的2倍,若是,则将源视频文件的中间点作为选择视频帧的起始点,否则,则将源视频的起始时间点加上一个所述尝试选择时间间隔作为选择视频帧的起始点。
当然,也可通过其他适合的方法来选取选择视频帧的起始点,例如:可以直接从视频开端固定时间(比如1分钟)后作为起始点开始截取。
通过上述选择选帧起始点的方式,如果一个视频的长度在最大尝试次数所需时间的2倍以上,则选帧的起始点为该视频的中间点;若视频长度不够,则选帧的起始点为视频开头加上一个时间间隔,此种方式就能方便得从源视频文件中找出相应的位置进行选帧,简单方便。
上述步骤103中,预定的大小主要是指UI层要求的长和宽,预定格式主要是指满足UI层要求的YUVJ420P的格式,此种格式是YUV420P的一种图像格式。
上述步骤103中,将所述视频关键帧所对应的视频文件数据从源视频文件数据中分离出来的过程中,若遇到视频数据包,则对所述视频数据包进行解码,得到对应的视频关键帧。如此方式,考虑到了视频帧分离过程中的各种因素,保证能够从源视频文件中顺利得获取到视频关键帧。
上述步骤104中,计算所述图像的平均亮度值,进一步为:
采用采样法,从该视频帧所对应的图像的第一行第一列开始,将每上下左右相邻的4个像素作为一个像素单元,选取所述像素单元左上角的像素点的亮度值作为该像素单元的亮度值,计算所述视频帧所对应的图像的所有像素单元的平均亮度值,作为所述视频帧对应的图像的平均亮度值。
当然,除采用上述方法计算图像的平均亮值外,还可变换抽样的方法。例如:在每一行像素中,每隔一个像素就取一个亮度值,这样更精确,但是计算量更大。
由于一帧图像的像素较多,采用上述采样法计算该帧图像的平均亮度值,既容易操作,计算出的平均亮度值也较为准确。
上述步骤104中,能够使得亮度比较适中的图像能够被直接选出来而不必继续操作,节省资源,而如果没有这样的图像,也可以在尝试次数中的图像中选择亮度最大的图像,尽可能避免选择作为图文播放列表的图像过暗,而导致用户无法直观地从列表中看到视频的缩略图。
实施例2
参见图2所示为本申请所述一种图文模式显示播放列表的系统的具体实施例,该系统包括:参数设置模块10、视频帧起始点选择模块20、视频帧转换模块30、图像亮度值计算模块40、视频缩略图选择模块50和控制模块60,
所述参数设置模块10,用于设置选择视频帧时的尝试选择时间间隔和最大尝试次数,以及图像的亮度阈值范围;
所述视频帧起始点选择模块20,用于从源视频文件中选取选择所述视频帧的起始点,根据选取的选择所述视频帧的起始点,将视频数据跳转到所述起始点前的视频关键帧;
所述视频帧转换模块30,用于将所述视频关键帧所对应的视频文件数据从源视频文件数据中分离出来,并将所述视频关键帧转换为预定大小及预定格式的图像;
所述图像亮度值计算模块40,用于计算所述图像的平均亮度值,并判断所述图像的平均亮度值是否在所述亮度阈值范围内,若所述图像的平均亮度值处于所述亮度阈值范围内,则将所述图像作为所述源视频文件的视频缩略图,否则,比较查看当前亮度是否为目前最大亮度,若是,则记录亮度信息,并跳到下一个时间间隔进行进一步尝试,直至在达到所述最大尝试次数前,选择出平均亮度值在所述亮度阈值范围内的图像;若尝试次数已经达到所述最大尝试次数的上限,或跳转时间已经超过所述源视频文件的总长度时,仍未选择到满足所述亮度阈值范围的图像,则根据记录的亮度信息,选择尝试过的图像中亮度最大的图像,作为所述源视频文件的视频缩略图;
所述视频缩略图选择模块50,用于将选中的源视频文件的视频缩略图所对应的视频帧进行转码为YUVJ420P格式并保存,并将所述视频帧的地址和对应的源视频文件ID发送至控制模块60;
所述控制模块60,用于根据所述视频帧的地址和对应的源视频文件ID,生成所述源视频文件对应的视频缩略图,并加载到播放列表进行显示。
上述参数设置模块10,将尝试选择时间间隔设置为1s,将最大尝试次数设置为10,将亮度阈值范围设为[80,150]。
上述视频帧起始点选择模块20,进一步用于判断所述源视频的长度是否大于等于完成最大尝试次数所需时间的2倍,若是,则将源视频文件的中间点作为选择视频帧的起始点,否则,则将源视频的起始时间点加上一个所述尝试选择时间间隔作为选择视频帧的起始点。
上述图像亮度值计算模块40,进一步用于采用采样法,从该视频帧所对应的图像的第一行第一列开始,将每上下左右相邻的4个像素作为一个像素单元,选取所述像素单元左上角的像素点的亮度值作为该像素单元的亮度值,计算所述视频帧所对应的图像的所有像素单元的平均亮度值,作为所述视频帧对应的图像的平均亮度值。
上述视频帧转换模块30,进一步用于在将所述视频关键帧所对应的视频文件数据从源视频文件数据中分离出来的过程中,若遇到视频数据包,则对所述视频数据包进行解码,得到对应的视频关键帧。
上述视频帧转换模块30,将视频关键帧转换为预定的大小和预定格式的图像,此处的预定大小主要是指UI层要求的长和宽,预定格式主要是指满足UI层要求的YUVJ420P的格式,此种格式是YUV420P的一种图像格式。此种格式的图片质量和大小都适中,也支持转为JPG格式。
实施例3
以下提供一种本发明图文模式显示播放列表的方法的应用实施例。
本申请可将播放列表设置为可变模式切换的形式,既可以显示传统的文字播放列表,也可以换成图文模式列表。实现图文模式播放列表时,从源视频文件中有针对性地选取一帧图像作为视频缩略图,播放器UI在构建完成播放列表区域后,本方案根据UI提供的缩略图长、宽信息,以及源视频文件路径和缩略图保存路径,来生成与源视频对应的缩略图,加载到播放列表中进行显示。
上述缩略图其实为源视频文件中的某一帧,主要思路是选取某一帧,再将该帧画面根据UI层要求的长和宽进行转码,给播放列表显示。
选取这一帧的主要步骤为:
首先,设置一个尝试时间间隔,此处设为1秒,设置最大尝试次数,此处设为10次,同时设置一个选中图像亮度的阈值范围[80,150]。
其次,选取一个起始点。如果一个视频的长度在最大尝试次数所需时间的2倍以上(即20秒),则选帧的起始点为该视频的中间点;如果视频长度不够,则选帧的起始点为视频开头加上一个时间间隔(即1秒)。
接下来,根据选取的起始点,使用ffmpeg库,将数据跳转到时间点前的关键帧,然后开始分离视频文件数据,如果遇到视频数据包,则针对该数据包进行解码,解出该帧,将其转换为满足UI要求大小的YUVJ420P的格式(YUV420P的图像格式),计算该图像的平均Y值(在YUV图像中,Y即代表亮度)。由于一帧图像的像素较多,所以,采取采样法,从第一行第一列开始,每上下左右相邻的4个像素作为一个单元,选取该单元左上角的像素点的Y值作为这个单元的Y值,然后计算出该图像所有单元的平均Y值作为该图像的平均Y值。
接下来进行判断,如果该图像的阈值满足选中亮度的阈值,则直接将其作为该视频缩略图,不再继续操作。否则,比较查看当前亮度是否为目前最大亮度,如果是,则将其信息记录下来,并继续跳到下一个时间间隔,再进行一步尝试。如果尝试次数已经达到上限,或者跳转时间已经超过视频总长,仍旧没有遇到满足选中亮度阈值的图像,则选择之前试过的图像中,亮度最大的图像,作为该视频的缩略图。
然后,将之前选中的帧,也就是选中的视频缩略图对应的视频帧,转码为MJPEG格式,保存为JPG格式的视频缩略图,并将地址和对应视频ID通知给UI层,让UI层知道该图片对应的是哪个源视频文件。
最后,UI层将对应的视频缩略图加载到播放列表中进行显示。
本申请中的UI层,指用户接口层,即界面层。在播放器中,可以是控制界面逻辑的功能模块,通过该模块的调度,将本申请截取出的视频缩略图传递给播放列表进行显示。
通过上述图文模式显示播放列表的方法,使得亮度比较适中的图像可以直接被选出来而不必继续操作,节省资源,而如果没有这样的图像,也可以在尝试次数中的图像中选择亮度最大的,尽可能避免选择作为图文播放列表的图像过暗,使得用户无法直观地从列表中看到视频的缩略图。
通过以上各实施例可知,本申请存在的有益效果是:
第一,本发明所提供的图文模式显示播放列表的方法及系统,直接从源视频文件中选取一个视频帧,将该视频帧画面根据UI层要求的大小进行转码,并直接选择平均亮度处于预定亮度阈值内的图像作为视频缩略图,节省资源,当没有符合预定亮度阈值范围的图像时,将亮度最大的图像作为视频缩略图,这样就能方便地选择出亮度鲜明的图像作为视频缩略图并加载到播放列表中,极大方便了用户从播放列表中直观地查看到视频内容的简介。
第二,本发明所提供的图文模式显示播放列表的方法及系统,根据源视频的长度与完成最大尝试次数所需时间之间的关系选择选帧的起始点,若源视频的长度大于等于完成最大尝试次数所需时间的2倍,则将源视频文件的中间点作为选帧的起始点,否则将源视频的起始时间点加上一个尝试选择时间间隔作为选帧的起始点。通过此种方式选择选帧的起始点,有利于快速地从源视频文件中选出符合要求的视频缩略图。
本领域内的技术人员应明白,本申请的实施例可提供为方法、装置、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
上述说明示出并描述了本申请的若干优选实施例,但如前所述,应当理解本申请并非局限于本文所披露的形式,不应看作是对其他实施例的排除,而可用于各种其他组合、修改和环境,并能够在本文所述发明构想范围内,通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本申请的精神和范围,则都应在本申请所附权利要求的保护范围内。

Claims (10)

1.一种图文模式显示播放列表的方法,其特征在于,包括:
设置选择视频帧时的尝试选择时间间隔和最大尝试次数,以及图像的亮度阈值范围;
从源视频文件中选取选择所述视频帧的起始点,根据选取的选择所述视频帧的起始点,将视频数据跳转到所述起始点前的视频关键帧;
将所述视频关键帧所对应的视频文件数据从源视频文件数据中分离出来,并将所述视频关键帧转换为预定大小及预定格式的图像;
计算所述图像的平均亮度值,并判断所述图像的平均亮度值是否在所述亮度阈值范围内,若所述图像的平均亮度值处于所述亮度阈值范围内,则将所述图像作为所述源视频文件的视频缩略图,否则,比较查看当前亮度是否为目前最大亮度,若是,则记录亮度信息,并跳到下一个时间间隔进行进一步尝试,直至在达到所述最大尝试次数前,选择出平均亮度值在所述亮度阈值范围内的图像;若尝试次数已经达到所述最大尝试次数的上限,或跳转时间已经超过所述源视频文件的总长度时,仍未选择到满足所述亮度阈值范围的图像,则根据记录的亮度信息,选择尝试过的图像中亮度最大的图像,作为所述源视频文件的视频缩略图;
将选中的所述源视频文件的所述视频缩略图所对应的视频帧转码为YUVJ420P格式并保存,并将所述视频帧的地址和对应的源视频文件ID发送至控制模块;
根据所述视频帧的地址和对应的源视频文件ID,生成所述源视频文件对应的视频缩略图,并加载到播放列表进行显示。
2.根据权利要求1所述图文模式显示播放列表的方法,其特征在于,
从源视频文件中选取选择视频帧的起始点,进一步为:
判断所述源视频的长度是否大于等于完成最大尝试次数所需时间的2倍,若是,则将源视频文件的中间点作为选择视频帧的起始点,否则,则将源视频的起始时间点加上一个所述尝试选择时间间隔作为选择视频帧的起始点。
3.根据权利要求1所述图文模式显示播放列表的方法,其特征在于,
计算所述图像的平均亮度值,进一步为:
采用采样法,从该视频帧所对应的图像的第一行第一列开始,将每上下左右相邻的4个像素作为一个像素单元,选取所述像素单元左上角的像素点的亮度值作为该像素单元的亮度值,计算所述视频帧所对应的图像的所有像素单元的平均亮度值,作为所述视频帧对应的图像的平均亮度值。
4.根据权利要求1所述图文模式显示播放列表的方法,其特征在于,进一步包括:
将所述视频关键帧所对应的视频文件数据从源视频文件数据中分离出来的过程中,若遇到视频数据包,则对所述视频数据包进行解码,得到对应的视频关键帧。
5.根据权利要求1所述图文模式显示播放列表的方法,其特征在于,
所述尝试选择时间间隔为1s,所述最大尝试次数为10,所述亮度阈值范围为[80,150]。
6.一种图文模式显示播放列表的系统,其特征在于,包括:参数设置模块、视频帧起始点选择模块、视频帧转换模块、图像亮度值计算模块、视频缩略图选择模块和控制模块,
所述参数设置模块,用于设置选择视频帧时的尝试选择时间间隔和最大尝试次数,以及图像的亮度阈值范围;
所述视频帧起始点选择模块,用于从源视频文件中选取选择所述视频帧的起始点,根据选取的选择所述视频帧的起始点,将视频数据跳转到所述起始点前的视频关键帧;
所述视频帧转换模块,用于将所述视频关键帧所对应的视频文件数据从源视频文件数据中分离出来,并将所述视频关键帧转换为预定大小及预定格式的图像;
所述图像亮度值计算模块,用于计算所述图像的平均亮度值,并判断所述图像的平均亮度值是否在所述亮度阈值范围内,若所述图像的平均亮度值处于所述亮度阈值范围内,则将所述图像作为所述源视频文件的视频缩略图,否则,比较查看当前亮度是否为目前最大亮度,若是,则记录亮度信息,并跳到下一个时间间隔进行进一步尝试,直至在达到所述最大尝试次数前,选择出平均亮度值在所述亮度阈值范围内的图像;若尝试次数已经达到所述最大尝试次数的上限,或跳转时间已经超过所述源视频文件的总长度时,仍未选择到满足所述亮度阈值范围的图像,则根据记录的亮度信息,选择尝试过的图像中亮度最大的图像,作为所述源视频文件的视频缩略图;
所述视频缩略图选择模块,用于将选中的所述源视频文件的所述视频缩略图所对应的视频帧进行转码为YUVJ420P格式并保存,并将所述视频帧的地址和对应的源视频文件ID发送至控制模块;
所述控制模块,用于根据所述视频帧的地址和对应的源视频文件ID,生成所述源视频文件对应的视频缩略图,并加载到播放列表进行显示。
7.根据权利要求6所述图文模式显示播放列表的系统,其特征在于,
所述视频帧起始点选择模块,进一步用于判断所述源视频的长度是否大于等于完成最大尝试次数所需时间的2倍,若是,则将源视频文件的中间点作为选择视频帧的起始点,否则,则将源视频的起始时间点加上一个所述尝试选择时间间隔作为选择视频帧的起始点。
8.根据权利要求6所述图文模式显示播放列表的系统,其特征在于,
所述图像亮度值计算模块,进一步用于采用采样法,从该视频帧所对应的图像的第一行第一列开始,将每上下左右相邻的4个像素作为一个像素单元,选取所述像素单元左上角的像素点的亮度值作为该像素单元的亮度值,计算所述视频帧所对应的图像的所有像素单元的平均亮度值,作为所述视频帧对应的图像的平均亮度值。
9.根据权利要求6所述图文模式显示播放列表的系统,其特征在于,
所述视频帧转换模块,进一步用于在将所述视频关键帧所对应的视频文件数据从源视频文件数据中分离出来的过程中,若遇到视频数据包,则对所述视频数据包进行解码,得到对应的视频关键帧。
10.根据权利要求6所述图文模式显示播放列表的系统,其特征在于,
所述尝试选择时间间隔为1s,所述最大尝试次数为10,所述亮度阈值范围为[80,150]。
CN201610702826.1A 2016-08-22 2016-08-22 图文模式显示播放列表的方法及系统 Active CN106331786B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610702826.1A CN106331786B (zh) 2016-08-22 2016-08-22 图文模式显示播放列表的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610702826.1A CN106331786B (zh) 2016-08-22 2016-08-22 图文模式显示播放列表的方法及系统

Publications (2)

Publication Number Publication Date
CN106331786A true CN106331786A (zh) 2017-01-11
CN106331786B CN106331786B (zh) 2019-05-10

Family

ID=57742999

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610702826.1A Active CN106331786B (zh) 2016-08-22 2016-08-22 图文模式显示播放列表的方法及系统

Country Status (1)

Country Link
CN (1) CN106331786B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110392306A (zh) * 2019-07-29 2019-10-29 腾讯科技(深圳)有限公司 一种数据处理方法以及设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7853079B1 (en) * 2006-12-08 2010-12-14 Adobe Systems Incorporated Technique for automatic poster frame detection
CN103150373A (zh) * 2013-03-08 2013-06-12 北京理工大学 一种高满意度视频摘要生成方法
CN103455544A (zh) * 2012-05-31 2013-12-18 三星电子株式会社 创建视频的缩略图像的方法以及显示该图像的电子装置
CN104506968A (zh) * 2014-12-31 2015-04-08 北京奇艺世纪科技有限公司 一种视频摘要图确定方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7853079B1 (en) * 2006-12-08 2010-12-14 Adobe Systems Incorporated Technique for automatic poster frame detection
CN103455544A (zh) * 2012-05-31 2013-12-18 三星电子株式会社 创建视频的缩略图像的方法以及显示该图像的电子装置
CN103150373A (zh) * 2013-03-08 2013-06-12 北京理工大学 一种高满意度视频摘要生成方法
CN104506968A (zh) * 2014-12-31 2015-04-08 北京奇艺世纪科技有限公司 一种视频摘要图确定方法及装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110392306A (zh) * 2019-07-29 2019-10-29 腾讯科技(深圳)有限公司 一种数据处理方法以及设备
CN110392306B (zh) * 2019-07-29 2021-11-05 腾讯科技(深圳)有限公司 一种数据处理方法以及设备

Also Published As

Publication number Publication date
CN106331786B (zh) 2019-05-10

Similar Documents

Publication Publication Date Title
US20170111681A1 (en) Method And Device For Automatically Playing Video List
US11140462B2 (en) Method, apparatus, and device for generating an essence video and storage medium
US9431059B2 (en) Information processing method and electronic device thereof
US10448081B2 (en) Multimedia information processing method, terminal, and computer storage medium for interactive user screen
US20120229489A1 (en) Pillarboxing Correction
US20130325963A1 (en) Information processing device, information processing method, and program
US20160205427A1 (en) User terminal apparatus, system, and control method thereof
CN106331557B (zh) Arc控制方法、控制单元和显示设备
WO2017113721A1 (zh) 一种预览播放方法及装置
CN106162271A (zh) 处理服务的设备及其方法
WO2017101414A1 (zh) 基于安卓平台的多媒体播放方法、装置及移动终端设备
WO2019157965A1 (zh) 界面显示方法、装置、设备以及存储介质
US20160266726A1 (en) Display Control Method And Device
CN104202641B (zh) 快速查找定位多媒体节目资源的方法、多媒体设备及系统
CN107347149B (zh) 一种悬浮展示方法、虚拟现实设备及存储介质
CN106331786A (zh) 图文模式显示播放列表的方法及系统
US20200194036A1 (en) Information processing apparatus, information processing method, and non-transitory computer readable medium
CN108882004B (zh) 视频录制方法、装置、设备及存储介质
US11825170B2 (en) Apparatus and associated methods for presentation of comments
US9736544B2 (en) Media player in quick menu
CN103974142A (zh) 一种视频播放方法及系统
CN106371717A (zh) 一种缩略图焦点随原图切换的方法
US20170155943A1 (en) Method and electronic device for customizing and playing personalized programme
US10911803B2 (en) Content promotion through automated curation of content clips
CN106507183B (zh) 视频名称的获取方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
PP01 Preservation of patent right

Effective date of registration: 20190705

Granted publication date: 20190510

PP01 Preservation of patent right