CN105578258B - 一种视频预处理和视频回放的方法及装置 - Google Patents

一种视频预处理和视频回放的方法及装置 Download PDF

Info

Publication number
CN105578258B
CN105578258B CN201510923978.XA CN201510923978A CN105578258B CN 105578258 B CN105578258 B CN 105578258B CN 201510923978 A CN201510923978 A CN 201510923978A CN 105578258 B CN105578258 B CN 105578258B
Authority
CN
China
Prior art keywords
video
data fragment
data
weight
importance weight
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510923978.XA
Other languages
English (en)
Other versions
CN105578258A (zh
Inventor
史杭波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Dahua Technology Co Ltd
Original Assignee
Zhejiang Dahua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Dahua Technology Co Ltd filed Critical Zhejiang Dahua Technology Co Ltd
Priority to CN201510923978.XA priority Critical patent/CN105578258B/zh
Publication of CN105578258A publication Critical patent/CN105578258A/zh
Application granted granted Critical
Publication of CN105578258B publication Critical patent/CN105578258B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks

Abstract

本发明实施例公开了一种视频预处理和视频回放的方法及装置。该视频预处理方法包括：获取视频的所有视频数据段；其中，一个所述视频数据段是指对所述视频的数据按照预设时长划分得到的一段数据；根据用户设置的至少一个感兴趣条件及每个所述感兴趣条件的权重系数，计算所述视频数据段的重要性权值；根据视频数据段的重要性权值与回放倍速的对应关系，以及计算得到的所述视频数据段的重要性权值，为所述视频数据段确定回放倍速。这样对视频预处理后，对视频回放的过程中，提高了视频回放的效率和实用性。

Description

一种视频预处理和视频回放的方法及装置
技术领域
本发明涉及视频回放技术领域，尤其涉及一种视频预处理和视频回放的方法及装置。
背景技术
现有的监控技术方案一般都支持视频回放功能，并提供多种回放倍速，例如1/16、1/8、1/4、1/2、1、2、4、8、16倍速等。
在视频回放过程中，通常的方案中，用户在发现有价值的信息，通过手动回拉进度条，并选择低回放倍速；在发现当前回放的视频没有价值时，为了快速跳过这些片段，又需要手动选择高回放倍速或者拖拉进度条；整个视频回放过程中，需要频繁地手动切换回放倍速或者拖拉进度条，视频回放的效率较低。
为了提高视频回放的效率，在一篇中国专利文件(CN101808229A)提供的方案中，在编码阶段分析视频流是否是用户关心的行为或场景，如是，则加入标志位到特征标签，视频回放时采用固定的高回放倍速，一旦检测到标志位则采用正常回放倍速，一旦检测到标志位清除则重新回到固定的高回放倍速。但是该方案中，视频回放时采用的是固定的高回放倍速和1倍速，导致准确性和灵活性较差，并且在编码阶段进行回放倍速的设置，回放倍速的设置在完成后就是固定的了，这样，在解码阶段，只能按照该固定的回放倍速进行回放，而无法根据实际需要临时调整设置的回放倍速，更加导致灵活性较差。
发明内容
本发明实施例的目的是提供一种视频预处理和视频回放的方法及装置，用于解决视频回放的效率较低、灵活性较差的问题。
本发明实施例的目的是通过以下技术方案实现的：
一种视频预处理的方法，包括：
获取视频的所有视频数据段；其中，一个所述视频数据段是指对所述视频的数据按照预设时长划分得到的一段数据；
根据用户设置的至少一个感兴趣条件及每个所述感兴趣条件的权重系数，计算所述视频数据段的重要性权值；
根据视频数据段的重要性权值与回放倍速的对应关系，以及计算得到的所述视频数据段的重要性权值，为所述视频数据段确定回放倍速。
较佳地，计算所述视频数据段的重要性权值，包括：
根据所述视频数据段中，部分视场区域对应的视频数据，计算所述视频数据段的重要性权值。
较佳地，根据用户设置的至少一个感兴趣条件及每个所述感兴趣条件的权重系数，计算所述视频数据段的重要性权值之前，该方法还包括：
获取修改后的用户设置的至少一个感兴趣条件及每个所述感兴趣条件的权重系数。
较佳地，所述感兴趣的条件为以下至少一个条件：
所述视频数据段的目标物，所述目标物的运动程度，所述视频对应的视频通道的重要程度，和所述视频的记录时间的重要程度。
较佳地，计算所述视频数据段的重要性权值的公式如下：
其中，Q表示所述视频数据段的重要性权值；n表示所述目标物的个数；i表示n个所述目标物中的一个；mi表示所述目标物i的权值；yi表示所述目标物i的运动程度的权值；T表示所述视频对应的视频通道的重要程度的权值；S表示所述视频的记录时间的重要程度的权值；X、Y、Z分别为各个所述感兴趣条件的权重系数。
较佳地，视频数据段的重要性权值包含按照从小到大依次划分的A个重要性权值区间；所述视频数据段的重要性权值越大，表明所述视频数据段越重要；
视频数据段的重要性权值与回放倍速的对应关系为：第a个重要性权值区间对应的回放倍速大于或等于第a+1个重要性权值区间对应的回放倍速：
其中，A为正整数；a的取值范围为1、2、……、A-1。
较佳地，第A个重要性权值区间对应的回放倍速为暂停回放。
一种视频回放的方法，包括：
获取为视频的所有视频数据段一一确定的回放倍速；其中，一个所述视频数据段是指对视频的数据按照预设时长划分得到的一段数据；所述视频数据段的回放倍速是根据如下方式确定的：根据用户设置的至少一个感兴趣条件及每个所述感兴趣条件的权重系数，计算所述视频数据段的重要性权值，并根据视频数据段的重要性权值与回放倍速的对应关系，以及计算得到的所述视频数据段的重要性权值，为所述视频数据段确定回放倍速；
按照为每个所述视频数据段确定的回放倍速，对所述视频进行回放。
一种视频预处理的装置，包括：
视频数据获取模块，用于：获取视频的所有视频数据段；其中，一个所述视频数据段是指对所述视频的数据按照预设时长划分得到的一段数据；
重要性权值计算模块，用于：根据用户设置的至少一个感兴趣条件及每个所述感兴趣条件的权重系数，计算所述视频数据段的重要性权值；
回放倍速确定模块，用于：根据视频数据段的重要性权值与回放倍速的对应关系，以及计算得到的所述视频数据段的重要性权值，为所述视频数据段确定回放倍速。
较佳地，所述重要性权值计算模块，具体用于：
根据所述视频数据段中，部分视场区域对应的视频数据，计算所述视频数据段的重要性权值。
较佳地，所述重要性权值计算模块，还用于：根据用户设置的至少一个感兴趣条件及每个所述感兴趣条件的权重系数，计算所述视频数据段的重要性权值之前，获取修改后的用户设置的至少一个感兴趣条件及每个所述感兴趣条件的权重系数。
较佳地，所述感兴趣的条件为以下至少一个条件：
所述视频数据段的目标物，所述目标物的运动程度，所述视频对应的视频通道的重要程度，和所述视频的记录时间的重要程度。
较佳地，计算所述视频数据段的重要性权值的公式如下：
其中，Q表示所述视频数据段的重要性权值；n表示所述目标物的个数；i表示n个所述目标物中的一个；mi表示所述目标物i的权值；yi表示所述目标物i的运动程度的权值；T表示所述视频对应的视频通道的重要程度的权值；S表示所述视频的记录时间的重要程度的权值；X、Y、Z分别为各个所述感兴趣条件的权重系数。
较佳地，视频数据段的重要性权值包含按照从小到大依次划分的A个重要性权值区间；所述视频数据段的重要性权值越大，表明所述视频数据段越重要；
视频数据段的重要性权值与回放倍速的对应关系为：第a个重要性权值区间对应的回放倍速大于或等于第a+1个重要性权值区间对应的回放倍速：
其中，A为正整数；a的取值范围为1、2、……、A-1。
较佳地，第A个重要性权值区间对应的回放倍速为暂停回放。
一种视频回放的装置，包括：
回放倍速获取模块，用于：获取为视频的所有视频数据段一一确定的回放倍速；其中，一个所述视频数据段是指对视频的数据按照预设时长划分得到的一段数据；所述视频数据段的回放倍速是根据如下方式确定的：根据用户设置的至少一个感兴趣条件及每个所述感兴趣条件的权重系数，计算所述视频数据段的重要性权值，并根据视频数据段的重要性权值与回放倍速的对应关系，以及计算得到的所述视频数据段的重要性权值，为所述视频数据段确定回放倍速；
视频回放模块，用于：按照为每个所述视频数据段确定的回放倍速，对所述视频进行回放。
本发明实施例的有益效果如下：
由于整个视频中，不同时刻的视频数据段的重要程度不同，对于较重要的视频数据段，就需要较慢回放，对于不太重要的视频数据段，就可以较快回放，因此，对重要程度不同的视频数据段，采用不同的回放倍速，才能真正满足对视频回放的需求。本发明实施例提供的视频预处理和视频回放的方法及装置中，预先根据用户设置的感兴趣条件及感兴趣条件的权重系数，衡量视频中按预设时长划分的每个视频数据段的重要程度，根据每个视频数据段的重要程度，都为其确定了匹配的、具体的回放倍速。另外，由于衡量视频中每个视频数据段的重要程度的感兴趣条件及感兴趣条件的权重系数是在解码阶段由用户根据当前实际需要灵活设置的，设置的感兴趣条件及感兴趣条件的权重系数不同，那么，对于同一视频数据段，最终确定的视频数据段的回放倍速也不同，提高了灵活性。这样对视频进行预处理后，在对视频回放的过程中，可以保证视频中的每个视频数据段都能够在与其重要程度相匹配的回放倍速下进行回放，回放的快慢更加准确，使得回放倍速能够随着视频的场景而准确变化，即实现了回放倍速的自动、准确切换，避免了频繁地手动切换倍速或者拖拉进度条，提高了视频回放的效率和实用性。
附图说明
图1为本发明实施例提供的一种视频预处理的方法流程图；
图2为本发明实施例提供的一种视频回放的方法流程图；
图3为本发明实施例提供的一种回放界面的示意图；
图4为本发明实施例提供的一种视频预处理和视频回放的方法配合实施的流程图；
图5为本发明实施例提供的一种视频预处理的装置流程图；
图6为本发明实施例提供的一种视频回放的装置流程图。
具体实施方式
下面结合附图和实施例对本发明提供的一种视频预处理和视频回放的方法及装置进行更详细地说明。
如图1所示，本发明实施例提供一种视频预处理的方法，其具体实现方式如下：
步骤110、获取视频的所有视频数据段；其中，一个视频数据段是指对视频的数据按照预设时长划分得到的一段数据。
步骤120、根据用户设置的至少一个感兴趣条件及每个感兴趣条件的权重系数，计算视频数据段的重要性权值。
其中，感兴趣条件反映了用户对视频的关注点；一个感兴趣条件的权重系数反映了该感兴趣条件在所有的感兴趣条件中的重要程度。视频数据段的重要性权值反映了该视频数据段的重要程度。
步骤130、根据视频数据段的重要性权值与回放倍速的对应关系，确定计算得到的视频数据段的重要性权值所对应的回放倍速。
其中，为视频数据段确定的回放倍速可以写入视频数据段的特征标签，也可以写入指定的存储空间，还可以发送至视频的回放设备。
本发明实施例提供的视频预处理过程是在解码阶段进行的，可以是在接收到用户对视频的回放指令之前，可以是在接收到用户对视频的回放指令之后，再对该视频进行上述预处理过程，等等。
由于整个视频中，不同时刻的视频数据段的重要程度不同，对于较重要的视频数据段，就需要较慢回放，对于不太重要的视频数据段，就可以较快回放，因此，对重要程度不同的视频数据段，采用不同的回放倍速，才能真正满足对视频回放的需求。本发明实施例提供的技术方案中，预先根据用户设置的感兴趣条件及感兴趣条件的权重系数，衡量视频中按预设时长划分的每个视频数据段的重要程度，根据每个视频数据段的重要程度，都为其确定了匹配的、具体的回放倍速。另外，由于衡量视频中每个视频数据段的重要程度的感兴趣条件及感兴趣条件的权重系数是在解码阶段由用户根据当前实际需要灵活设置的，设置的感兴趣条件及感兴趣条件的权重系数不同，那么，对于同一视频数据段，最终确定的视频数据段的回放倍速也不同，提高了灵活性。这样对视频进行预处理后，在对视频回放的过程中，可以保证视频中的每个视频数据段都能够在与其重要程度相匹配的回放倍速下进行回放，回放的快慢更加准确，使得回放倍速能够随着视频的场景而准确变化，即实现了回放倍速的自动、准确切换，避免了频繁地手动切换倍速或者拖拉进度条，提高了视频回放的效率和实用性。
较佳地，在对视频数据段计算重要性权值时，为了减少计算量，提高处理效率，可以仅关注视频记录的整个视场区域中的某一部分区域的场景，如整个视场区域的正中央的区域或者右上角的区域的场景，就仅以整个视场区域的正中央的区域或者右上角的区域所对应的视频数据为基础，衡量视频数据段的重要性权值，因此，上述步骤120中计算视频数据段的重要性权值的方式可以是：根据视频数据段中，部分视场区域对应的视频数据，计算视频数据段的重要性权值。
其中，可以获取用户根据实际需要设置的上述部分视场区域，提高了用户针对性；也可以通过其它方式获取上述部分视场区域。
较佳地，上述各个实施例中，用户设置的至少一个感兴趣条件及每个感兴趣条件的权重系数是可以修改的，可以在每次预处理的过程中，检测用户是否对感兴趣条件及感兴趣条件的权重系数进行修改。
若无修改，获取上一次用户设置的至少一个感兴趣条件及每个感兴趣条件的权重系数，无需重新获取。
若有修改，根据用户设置的至少一个感兴趣条件及感兴趣条件的权重系数，计算视频数据段的重要性权值之前，还获取修改后的用户设置的至少一个感兴趣条件及每个感兴趣条件的权重系数。
其中，修改时，具体可以增加或删除感兴趣条件，以及修改感兴趣条件的权重系数。
这样，可以方便用户根据实际需要灵活的修改感兴趣条件及感兴趣条件的权重系数，提高了灵活性和用户针对性。
较佳地，上述各个实施例中，感兴趣的条件可以但是并不限于以下至少一个条件：
视频数据段的目标物，目标物的运动程度，视频对应的视频通道的重要程度，和视频的记录时间的重要程度。
其中，视频数据段的目标物可以包括成人、小孩、交通工具等等。
其中，目标物的运动程度可以包括强、中、弱三个等级。
其中，视频对应的视频通道的重要程度可以包括重点布防视频通道和非重点布防视频通道。
其中，视频的记录时间的重要程度可以包括重点布控时间(如8：00～16：00)和非重点布控时间。
若根据上述实施例所列举的所有感兴趣条件对视频数据段衡量重要性，相应的，计算视频数据段的重要性权值的公式如下：
其中，Q表示视频数据段的重要性权值；n表示目标物的个数；i表示n个目标物中的一个；mi表示目标物i的权值；yi表示目标物i的运动程度的权值；T表示视频对应的视频通道的重要程度的权值；S表示视频的记录时间的重要程度的权值；X、Y、Z分别为各个感兴趣条件的权重系数。
本实施例中，每个感兴趣条件可以由一定的权值表示。
例如，在目标物中，对于视频中的成人较为关注，目标物1为成人，则m1的取值为2，目标物2为小孩，则m2的取值为1。
又例如，在目标物的运动程度中，对于运动较剧烈的较为关注，目标物1的运动程度为强，则y1的取值为3，目标物2的运动程度为中，则y2的取值为2，目标物3的运动程度为中，则y3的取值为1。
再例如，视频对应的视频通道的重要程度中，对于重点布防视频通道较为关注，若是重点布防视频通道，则T的取值为2，若是非重点布防视频通道，则T的取值为1。
再例如，视频的记录时间的重要程度中，对于重点布控时间较为关注，若为重点布控时间，S的取值为2，若为非重点布控时间，S的取值0.5。
若在所有感兴趣条件中，关注程度由高到低的顺序为：视频数据段的目标物和目标物的运动程度，视频对应的视频通道的重要程度，视频的记录时间的重要程度。那么，相应的，在做权重分配时，可以设置X>Y>Z。
其中，X、Y、Z的取值精度根据实际需要确定，例如可以精确到小数点后2位。
较佳地，上述相关实施例中，视频数据段的重要性权值包含按照从小到大依次划分的A个重要性权值区间；视频数据段的重要性权值越大，表明视频数据段越重要；
视频数据段的重要性权值与回放倍速的对应关系为：第a个重要性权值区间对应的回放倍速大于或等于第a+1个重要性权值区间对应的回放倍速：
其中，A为正整数；a的取值范围为1、2、……、A-1。
其中，第A个重要性权值区间为最高的区间。
由于视频数据段的重要性权值若较大，表明其越重要，需要较慢的回放倍速，本实施例中，视频数据段的重要性权值与回放倍速成反向对应关系，可以满足这一需求。
较佳地，第A个重要性权值区间对应的回放倍速为暂停回放。
其中，暂停回放可以认为是0倍速。
这样，当视频数据段的重要性权值非常高时，还可以暂停回放，以便提醒用户对视频进行更仔细地观看，进一步提高了回放效率和实用性。
例如，视频数据段的重要性权值与回放倍速的对应关系，包括：
视频数据段的重要性权值不大于第一阈值，对应的回放倍速为第一倍速；
视频数据段的重要性权值大于第一阈值且不大于第二阈值，对应的回放倍速为第二倍速；
视频数据段的重要性权值大于第二阈值且不大于第三阈值，对应的回放倍速为第三倍速；
视频数据段的重要性权值大于第三阈值且不大于第四阈值，对应的回放倍速为第四倍速；
视频数据段的重要性权值大于第四阈值，对应的回放倍速为第五倍速；
其中，第一阈值小于第二阈值，第二阈值小于第三阈值，第三阈值小于第四阈值；
其中，第一倍速大于第二倍速，第二倍速大于第三倍速，第三倍速大于第四倍速，第四倍速大于第五倍速。
以上举例是将视频数据段的重要性权值按照从小到大依次分成了5个重要性权值区间。
其中，第一倍速、第二倍速、第三倍速、第四倍速和第五倍速的值可以根据实际情况设置。
例如，其中最小的第五倍速可以是1/4倍速、1/8倍速、1/16倍速等较慢的回放倍速，还可以是暂停回放。
基于同样的发明构思，本发明实施例还提供一种视频回放的方法，如图2所示，至少包括如下步骤：
步骤210、获取为视频的所有视频数据段一一确定的回放倍速；其中，一个视频数据段是指对视频的数据按照预设时长划分得到的一段数据；视频数据段的回放倍速是根据如下方式确定的：根据用户设置的至少一个感兴趣条件及每个感兴趣条件的权重系数，计算视频数据段的重要性权值，并根据视频数据段的重要性权值与回放倍速的对应关系，以及计算得到的视频数据段的重要性权值，为视频数据段确定回放倍速。
其中，感兴趣条件反映了用户对视频的关注点；一个感兴趣条件的权重系数反映了该感兴趣条件在所有的感兴趣条件中的重要程度。
其中，视频数据段的重要性权值反映了该视频数据段的重要程度。
其中，视频数据段的回放倍速的确定是在解码阶段对视频进行的预处理过程，可以是在接收到用户对视频的回放指令之前，就对该视频进行预处理，即对视频提前分析；也可以是在接收到用户对视频的回放指令之后，再对该视频进行预处理过程，即对视频实时分析，等等。具体的确定过程可以参照以上预处理过程的相关实施例，此处不再赘述。
步骤220、按照为每个视频数据段确定的回放倍速，对视频进行回放。
由于整个视频中，不同时刻的视频数据段的重要程度不同，对于较重要的视频数据段，就需要较慢回放，对于不太重要的视频数据段，就可以较快回放，因此，对重要程度不同的视频数据段，采用不同的回放倍速，才能真正满足对视频回放的需求。本发明实施例提供的技术方案中，预先根据用户设置的感兴趣条件及感兴趣条件的权重系数，衡量视频中按预设时长划分的每个视频数据段的重要程度，根据每个视频数据段的重要程度，都为其确定了匹配的、具体的回放倍速。另外，由于衡量视频中每个视频数据段的重要程度的感兴趣条件及感兴趣条件的权重系数是在解码阶段由用户根据当前实际需要灵活设置的，设置的感兴趣条件及感兴趣条件的权重系数不同，那么，对于同一视频数据段，最终确定的视频数据段的回放倍速也不同，提高了灵活性。这样对视频进行预处理后，在对视频回放的过程中，可以保证视频中的每个视频数据段都能够在与其重要程度相匹配的回放倍速下进行回放，回放的快慢更加准确，即实现了回放倍速的自动、准确切换，避免了频繁地手动切换倍速或者拖拉进度条，提高了视频回放的效率和实用性。
对同一视频，可以在每次回放时，都为每个视频数据段按照上述预处理过程确定一次回放倍速；也可以在一次回放之后再次回放时，先检测用户是否对设置的感兴趣条件及感兴趣条件的权重系数进行修改，若无修改，获取前一次回放时，视频数据段对应的回放倍速，若有修改，才为每个视频数据段按照上述预处理过程重新确定回放倍速，以提高回放效率。
较佳地，上述步骤210中获取为视频的所有视频数据段一一确定的回放倍速的方式可以是：从写入视频数据段的特征标签获取，也可以是：从指定的存储空间获取，或是可以是：从其它设备直接接收。
应当指出的是，对于多个视频通道的应用场景，在每个视频通道中，均按照以上视频预处理和视频回放的方法进行实施。
下面结合具体的应用场景，对本发明实施例提供的一种视频预处理和视频回放的方法进行更加详细地说明。
本实施例中提供的是视频预处理和视频回放配合实施的方案。该方案由监控设备(例如硬盘录像机(Digital Video Recorder，DVR)、网络硬盘录像机(Network VideoRecorder，NVR)等)的功能模块执行，监控设备包括回放数据模块，智能计算模块和显示模块。
如图3所示，显示模块的回放界面上有分别回放四个视频通道的视频的窗口；每个窗口下方有从属于该窗口的状态栏，该状态栏集成了当前窗口的播放控制按钮、回放倍速等信息。该回放界面上还有用户设置的区域，以供用户在此调整感兴趣条件、感兴趣条件的权值和感兴趣条件的权重系数等等。
在视频回放时，第一窗口中人流比较大，运动相对比较剧烈，需要采用低倍速回放；在一定条件下则需要暂停回放以提醒用户并标红第一窗口；第二窗口和第三窗口的目标物不多，需要采用中低倍速回放；第四窗口中没有感兴趣的目标物，需要采用高倍速回放。为满足这些视频回放的需求，针对每个视频通道对应的视频，如图4所示，在解码阶段，按照如下方式进行处理和回放：
步骤410、回放数据模块获取视频中的视频数据段。
例如，对视频的数据按照每10秒划分为一个视频数据段。步骤410中，可以是采用根据媒体流协议实时获取的方式，即每次从源数据处读取一个视频数据段。也可以是采用缓冲预取的方式，即每次从源数据处读取多个视频数据段并存入缓存中，步骤410中获取视频数据段时，直接从缓存中获取，缓存中的视频数据段处理完之后，再继续从源数据处读取，这样，可以保证后续的回放更加流畅。
步骤420、智能计算模块检测用户是否对感兴趣条件及感兴趣条件的权重系数进行修改，若是，执行步骤430，否则，执行步骤440。
步骤430、智能计算模块获取修改后的用户设置的至少一个感兴趣条件及每个感兴趣条件的权重系数，执行步骤450。
步骤440、智能计算模块获取上一次用户设置的至少一个感兴趣条件及每个感兴趣条件的权重系数，执行步骤450。
步骤450、智能计算模块根据用户设置的至少一个感兴趣条件及每个感兴趣条件的权重系数，计算视频数据段的重要性权值，执行步骤460。
其中，感兴趣条件包括：视频数据段的目标物，目标物的运动程度，视频对应的视频通道的重要程度，和视频的记录时间的重要程度。目标物的视频数据可以通过现有的移动侦测技术得到。
该步骤中，按照上述公式(1)相关的实施例，对视频数据段计算重要性权值，此处不再赘述。
步骤460、智能计算模块根据视频数据段的重要性权值与回放倍速的对应关系，以及计算得到的视频数据段的重要性权值，为视频数据段确定回放倍速，并发送至显示模块，执行步骤470。
例如，将视频数据段的重要性权值按照从小到大依次划分为5个重要性权值区间，视频数据段的重要性权值越大，表明视频数据段越重要，相应的，视频数据段的重要性权值与回放倍速的对应关系可以如表1所示。根据表1所示的对应关系及计算的视频数据段的重要性权值，为视频数据段确定回放倍速。
表1视频数据段的重要性权值与回放倍速的对应关系
重要性权值区间 回放倍速
0.00～0.15 4倍速
0.16～0.30 2倍速
0.31～0.45 1倍速
0.46～0.60 1/2倍速
>＝0.61 1/4倍速或暂停回放
步骤470、显示模块接收为视频数据段确定的回放倍速，执行步骤480。
步骤480、显示模块按照该回放倍速对该视频数据段进行回放。
按照步骤410～步骤480的流程对视频的剩余的视频数据段进行预处理和回放。
本实施例中，若需要对视场区域中的部分视场区域(如正中央的区域或者右上角的区域)进行重点关注，可以预先设置，那么在步骤450中，则仅利用现有的移动侦测技术获取该部分视场区域的目标物的视频数据，来衡量视频数据段的重要性权值。
基于同样的发明构思，如图5所示，本发明实施例还提供一种视频预处理的装置，包括视频数据获取模块501、重要性权值计算模块502和回放倍速确定模块503。
视频数据获取模块501，用于：获取视频的所有视频数据段；其中，一个视频数据段是指对视频的数据按照预设时长划分得到的一段数据；
重要性权值计算模块502，用于：根据用户设置的至少一个感兴趣条件及每个感兴趣条件的权重系数，计算视频数据段的重要性权值；
回放倍速确定模块503，用于：根据视频数据段的重要性权值与回放倍速的对应关系，以及计算得到的视频数据段的重要性权值，为视频数据段确定回放倍速。
较佳地，重要性权值计算模块502，具体用于：
根据视频数据段中，部分视场区域对应的视频数据，计算视频数据段的重要性权值。
较佳地，重要性权值计算模块502，还用于：根据用户设置的至少一个感兴趣条件及每个感兴趣条件的权重系数，计算视频数据段的重要性权值之前，获取修改后的用户设置的至少一个感兴趣条件及每个感兴趣条件的权重系数。
较佳地，感兴趣的条件为以下至少一个条件：
视频数据段的目标物，目标物的运动程度，视频对应的视频通道的重要程度，和视频的记录时间的重要程度。
较佳地，计算视频数据段的重要性权值的公式如下：
其中，Q表示视频数据段的重要性权值；n表示目标物的个数；i表示n个目标物中的一个；mi表示目标物i的权值；yi表示目标物i的运动程度的权值；T表示视频对应的视频通道的重要程度的权值；S表示视频的记录时间的重要程度的权值；X、Y、Z分别为各个感兴趣条件的权重系数。
较佳地，视频数据段的重要性权值包含按照从小到大依次划分的A个重要性权值区间；所述视频数据段的重要性权值越大，表明所述视频数据段越重要；
视频数据段的重要性权值与回放倍速的对应关系为：第a个重要性权值区间对应的回放倍速大于或等于第a+1个重要性权值区间对应的回放倍速：
其中，A为正整数；a的取值范围为1、2、……、A-1。
较佳地，第A个重要性权值区间对应的回放倍速为暂停回放。
基于同样的发明构思，如图6所示，本发明实施例还提供一种视频回放的装置，包括回放倍速获取模块601和视频回放模块602。
回放倍速获取模块601，用于：获取为视频的所有视频数据段一一确定的回放倍速；其中，一个视频数据段是指对视频的数据按照预设时长划分得到的一段数据；视频数据段的回放倍速是根据如下方式确定的：根据用户设置的至少一个感兴趣条件及每个感兴趣条件的权重系数，计算视频数据段的重要性权值，并根据视频数据段的重要性权值与回放倍速的对应关系，以及计算得到的视频数据段的重要性权值，为视频数据段确定回放倍速；
视频回放模块602，用于：按照为每个视频数据段确定的回放倍速，对视频进行回放。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (16)

1.一种视频预处理的方法，其特征在于，包括：
获取视频的所有视频数据段；其中，一个所述视频数据段是指对所述视频的数据按照预设时长划分得到的一段数据；
根据用户设置的至少一个感兴趣条件及每个所述感兴趣条件的权重系数，计算所述视频数据段的重要性权值；
根据视频数据段的重要性权值与回放倍速的对应关系，以及计算得到的所述视频数据段的重要性权值，为所述视频数据段确定回放倍速。
2.根据权利要求1所述的方法，其特征在于，计算所述视频数据段的重要性权值，包括：
根据所述视频数据段中，部分视场区域对应的视频数据，计算所述视频数据段的重要性权值。
3.根据权利要求1所述的方法，其特征在于，根据用户设置的至少一个感兴趣条件及每个所述感兴趣条件的权重系数，计算所述视频数据段的重要性权值之前，该方法还包括：
获取修改后的用户设置的至少一个感兴趣条件及每个所述感兴趣条件的权重系数。
4.根据权利要求1～3任一项所述的方法，其特征在于，所述感兴趣的条件为以下至少一个条件：
所述视频数据段的目标物，所述目标物的运动程度，所述视频对应的视频通道的重要程度，和所述视频的记录时间的重要程度。
5.根据权利要求4所述的方法，其特征在于，计算所述视频数据段的重要性权值的公式如下：
其中，Q表示所述视频数据段的重要性权值；n表示所述目标物的个数；i表示n个所述目标物中的一个；mi表示所述目标物i的权值；yi表示所述目标物i的运动程度的权值；T表示所述视频对应的视频通道的重要程度的权值；S表示所述视频的记录时间的重要程度的权值；X、Y、Z分别为各个所述感兴趣条件的权重系数。
6.根据权利要求5所述的方法，其特征在于，视频数据段的重要性权值包含按照从小到大依次划分的A个重要性权值区间；所述视频数据段的重要性权值越大，表明所述视频数据段越重要；
视频数据段的重要性权值与回放倍速的对应关系为：第a个重要性权值区间对应的回放倍速大于或等于第a+1个重要性权值区间对应的回放倍速：
其中，A为正整数；a的取值范围为1、2、……、A-1。
7.根据权利要求6所述的方法，其特征在于，第A个重要性权值区间对应的回放倍速为暂停回放。
8.一种视频回放的方法，其特征在于，包括：
获取为视频的所有视频数据段一一确定的回放倍速；其中，一个所述视频数据段是指对视频的数据按照预设时长划分得到的一段数据；所述视频数据段的回放倍速是根据如下方式确定的：根据用户设置的至少一个感兴趣条件及每个所述感兴趣条件的权重系数，计算所述视频数据段的重要性权值，并根据视频数据段的重要性权值与回放倍速的对应关系，以及计算得到的所述视频数据段的重要性权值，为所述视频数据段确定回放倍速；
按照为每个所述视频数据段确定的回放倍速，对所述视频进行回放。
9.一种视频预处理的装置，其特征在于，包括：
视频数据获取模块，用于：获取视频的所有视频数据段；其中，一个所述视频数据段是指对所述视频的数据按照预设时长划分得到的一段数据；
重要性权值计算模块，用于：根据用户设置的至少一个感兴趣条件及每个所述感兴趣条件的权重系数，计算所述视频数据段的重要性权值；
回放倍速确定模块，用于：根据视频数据段的重要性权值与回放倍速的对应关系，以及计算得到的所述视频数据段的重要性权值，为所述视频数据段确定回放倍速。
10.根据权利要求9所述的装置，其特征在于，所述重要性权值计算模块，具体用于：
根据所述视频数据段中，部分视场区域对应的视频数据，计算所述视频数据段的重要性权值。
11.根据权利要求9所述的装置，其特征在于，所述重要性权值计算模块，还用于：根据用户设置的至少一个感兴趣条件及每个所述感兴趣条件的权重系数，计算所述视频数据段的重要性权值之前，获取修改后的用户设置的至少一个感兴趣条件及每个所述感兴趣条件的权重系数。
12.根据权利要求9～11任一项所述的装置，其特征在于，所述感兴趣的条件为以下至少一个条件：
所述视频数据段的目标物，所述目标物的运动程度，所述视频对应的视频通道的重要程度，和所述视频的记录时间的重要程度。
13.根据权利要求12所述的装置，其特征在于，计算所述视频数据段的重要性权值的公式如下：
其中，Q表示所述视频数据段的重要性权值；n表示所述目标物的个数；i表示n个所述目标物中的一个；mi表示所述目标物i的权值；yi表示所述目标物i的运动程度的权值；T表示所述视频对应的视频通道的重要程度的权值；S表示所述视频的记录时间的重要程度的权值；X、Y、Z分别为各个所述感兴趣条件的权重系数。
14.根据权利要求13所述的装置，其特征在于，视频数据段的重要性权值包含按照从小到大依次划分的A个重要性权值区间；所述视频数据段的重要性权值越大，表明所述视频数据段越重要；
视频数据段的重要性权值与回放倍速的对应关系为：第a个重要性权值区间的回放倍速大于或等于第a+1个重要性权值区间的回放倍速：
其中，A为正整数；a的取值范围为1、2、……、A-1。
15.根据权利要求14所述的装置，其特征在于，第A个重要性权值区间对应的回放倍速为暂停回放。
16.一种视频回放的装置，其特征在于，包括：
回放倍速获取模块，用于：获取为视频的所有视频数据段一一确定的回放倍速；其中，一个所述视频数据段是指对视频的数据按照预设时长划分得到的一段数据；所述视频数据段的回放倍速是根据如下方式确定的：根据用户设置的至少一个感兴趣条件及每个所述感兴趣条件的权重系数，计算所述视频数据段的重要性权值，并根据视频数据段的重要性权值与回放倍速的对应关系，以及计算得到的所述视频数据段的重要性权值，为所述视频数据段确定回放倍速；
视频回放模块，用于：按照为每个所述视频数据段确定的回放倍速，对所述视频进行回放。
CN201510923978.XA 2015-12-11 2015-12-11 一种视频预处理和视频回放的方法及装置 Active CN105578258B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510923978.XA CN105578258B (zh) 2015-12-11 2015-12-11 一种视频预处理和视频回放的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510923978.XA CN105578258B (zh) 2015-12-11 2015-12-11 一种视频预处理和视频回放的方法及装置

Publications (2)

Publication Number Publication Date
CN105578258A CN105578258A (zh) 2016-05-11
CN105578258B true CN105578258B (zh) 2019-05-24

Family

ID=55887847

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510923978.XA Active CN105578258B (zh) 2015-12-11 2015-12-11 一种视频预处理和视频回放的方法及装置

Country Status (1)

Country Link
CN (1) CN105578258B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE112017002665T5 (de) * 2016-05-24 2019-03-14 Sony Corporation Wiedergabevorrichtung, Wiedergabeverfahren, Informationserzeugungsvorrichtung und Informationserzeugungsverfahren
CN106294005A (zh) * 2016-07-27 2017-01-04 浙江大华技术股份有限公司 一种图像备份的方法及系统
JP6776716B2 (ja) * 2016-08-10 2020-10-28 富士ゼロックス株式会社 情報処理装置、プログラム
US10319072B2 (en) * 2017-10-09 2019-06-11 Google Llc Adaptation of presentation speed
CN111327964B (zh) * 2018-12-17 2022-11-25 中国移动通信集团北京有限公司 一种定位视频播放卡顿的方法及设备
CN111491203B (zh) * 2020-03-16 2023-01-24 浙江大华技术股份有限公司 视频回放方法、装置、设备和计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1682532A (zh) * 2002-09-13 2005-10-12 皇家飞利浦电子股份有限公司 用于内容呈现的方法和设备
CN101909191A (zh) * 2009-06-04 2010-12-08 佳能株式会社 视频处理设备和视频处理方法
CN101951469A (zh) * 2009-07-09 2011-01-19 索尼公司 成像装置、图像处理方法及其程序
CN103491450A (zh) * 2013-09-25 2014-01-01 深圳市金立通信设备有限公司 一种媒体流回放片段的设置方法及终端
WO2014207417A1 (en) * 2013-06-27 2014-12-31 British Telecommunications Public Limited Company Provision of video data

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040131333A1 (en) * 2003-01-06 2004-07-08 Fung Kam Keung Playback device for audio and/or video content
WO2007055611A1 (en) * 2005-11-11 2007-05-18 Intel Corporation A method for filtering of hypotheses in software testing of graphical user interfaces
US8046453B2 (en) * 2007-09-20 2011-10-25 Qurio Holdings, Inc. Illustration supported P2P media content streaming
CN102802088B (zh) * 2012-08-29 2015-04-15 上海天跃科技股份有限公司 一种基于实时传输协议的数据传输方法
CN103957431B (zh) * 2014-04-30 2018-03-16 深圳创维数字技术有限公司 一种流媒体传输控制方法及流媒体服务器
CN104917534B (zh) * 2015-06-30 2018-09-21 京东方科技集团股份有限公司 压缩、解压缩数据信息的方法和装置、补偿驱动的方法和装置以及显示装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1682532A (zh) * 2002-09-13 2005-10-12 皇家飞利浦电子股份有限公司 用于内容呈现的方法和设备
CN101909191A (zh) * 2009-06-04 2010-12-08 佳能株式会社 视频处理设备和视频处理方法
CN101951469A (zh) * 2009-07-09 2011-01-19 索尼公司 成像装置、图像处理方法及其程序
WO2014207417A1 (en) * 2013-06-27 2014-12-31 British Telecommunications Public Limited Company Provision of video data
CN103491450A (zh) * 2013-09-25 2014-01-01 深圳市金立通信设备有限公司 一种媒体流回放片段的设置方法及终端

Also Published As

Publication number Publication date
CN105578258A (zh) 2016-05-11

Similar Documents

Publication Publication Date Title
CN105578258B (zh) 一种视频预处理和视频回放的方法及装置
CN104394422B (zh) 一种视频分割点获取方法及装置
US8654250B2 (en) Deriving visual rhythm from video signals
US9154761B2 (en) Content-based video segmentation
CN104091607B (zh) 一种基于ios设备的视频编辑方法及装置
CN110012302A (zh) 一种网络直播监测方法及装置、数据处理方法
CN103797783A (zh) 评论信息生成装置及评论信息生成方法
US8751933B2 (en) Video and audio waveform user interface
CN105847252B (zh) 一种多账户切换的方法及装置
US8885841B2 (en) Audio processing apparatus and method, and program
CN109035246A (zh) 一种人脸的图像选择方法及装置
CN103985137A (zh) 应用于人机交互的运动物体跟踪方法及系统
CN106686445A (zh) 对多媒体文件进行按需跳转的方法
CN107291222A (zh) 虚拟现实设备的交互处理方法、装置、系统及虚拟现实设备
US8494216B2 (en) Image processing device and image processing method and program
CN104317392B (zh) 一种信息控制方法及电子设备
CN104091608B (zh) 一种基于ios设备的视频编辑方法及装置
CN105657446B (zh) 一种视频中贴片广告的检测方法和装置
JP2019508722A (ja) オーディオデータ処理方法および端末
CN109286848A (zh) 一种终端视频信息的交互方法、装置及存储介质
CN106686371B (zh) 一种帧率测试方法、装置、设备及系统
CN110006445A (zh) 跑步距离计算方法及装置
CN106792109A (zh) 视频播放方法、装置及终端
CN104540044B (zh) 一种视频分段方法及装置
CN115988262A (zh) 用于视频处理的方法、装置、设备和介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant