CN103248705B - 服务器、客户端及视频处理方法 - Google Patents

服务器、客户端及视频处理方法 Download PDF

Info

Publication number
CN103248705B
CN103248705B CN201310186044.3A CN201310186044A CN103248705B CN 103248705 B CN103248705 B CN 103248705B CN 201310186044 A CN201310186044 A CN 201310186044A CN 103248705 B CN103248705 B CN 103248705B
Authority
CN
China
Prior art keywords
information
video
subregion
client
video analysis
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310186044.3A
Other languages
English (en)
Other versions
CN103248705A (zh
Inventor
潘磊
张宏江
于魁飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Zhigu Ruituo Technology Services Co Ltd
Original Assignee
Beijing Zhigu Ruituo Technology Services Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Zhigu Ruituo Technology Services Co Ltd filed Critical Beijing Zhigu Ruituo Technology Services Co Ltd
Priority to CN201310186044.3A priority Critical patent/CN103248705B/zh
Publication of CN103248705A publication Critical patent/CN103248705A/zh
Priority to PCT/CN2013/088931 priority patent/WO2014187108A1/zh
Priority to US14/892,194 priority patent/US10313746B2/en
Application granted granted Critical
Publication of CN103248705B publication Critical patent/CN103248705B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/762—Media network packet handling at the source 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/226—Characteristics of the server or Internal components of the server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot

Abstract

本发明公开了一种服务器、客户端以及视频处理方法，所述方法包括：服务器侧将视频相关信息向至少一个客户端传送，与所述视频相关信息对应的视频中帧的画面由多个子区域构成；客户端接收服务器侧传送的视频及视频相关信息；选择子区域；对所选的子区域进行视频分析，生成对应的视频分析信息；向服务器返回所述视频分析信息；所述服务器接收所述至少一个客户端返回的视频分析信息；根据所述视频分析信息对所述视频相关信息进行调整。所述服务器和客户端分别包括实现上述方法中功能的模块。本发明降低视频服务器处理成本并且提高视频分析的效率和准确度。

Description

服务器、客户端及视频处理方法
技术领域
本发明涉及信息处理技术领域，尤其涉及一种服务器、客户端及视频处理方法。
背景技术
在视频中标识出令人感兴趣的对象，可以广泛地用于广告、视频监控跟踪等应用。但是随着视频分辨率的不断增大，视频内容的海量增长，对于视频全幅内容的标识耗时长、效率低。
为了提升识别效率，可以只对关键帧（I幀）做处理以减少处理的信息量。但是这样的做法没有解决视频模式识别效能提升的关键问题。
此外，视频的模式识别等一般放在服务器侧进行，虽然这样做具有一旦标识完成就会被广泛地使用的优点；但是，对于互联网里面生成的海量视频内容，服务器侧的处理时间和成本非常高。
发明内容
本发明要解决的技术问题是：提供一种服务器、客户端及视频处理方法，以降低视频服务器处理成本、提高视频识别的效率。
为实现上述目的，第一方面，本发明提供了一种服务器侧视频处理方法，包括：
将视频以及视频相关信息向至少一个客户端传送，所述视频中帧的画面由多个子区域构成；
接收所述至少一个客户端返回的视频分析信息；
根据所述视频分析信息对所述视频相关信息进行调整。
结合第一方面，在第一种可能的实现方式中，所述多个子区域以网格状分布。
结合第一方面，在第二种可能的实现方式中，所述多个子区域的大小根据视频的画面特性设置。
结合第一方面的第三种可能的实现方式，在第四种可能的实现方式中，所述画面特性包括画面的分辨率和/或画面的场景信息。
结合第一方面的第一、第二或第三种可能的实现方式，在第四种可能的实现方式中，所述视频分析信息包括子区域中对象的标识信息。
结合第一方面的第四种可能的实现方式，在第五种可能的实现方式中，所述对象的标识信息包括已适配信息。
结合第一方面的第四种可能的实现方式，在第六种可能的实现方式中，所述根据所述视频分析信息对所述视频相关信息进行调整的步骤包括：在所述视频相关信息中添加和/或修改和/或删除所述对象的标识信息。
结合第一方面的第一至第六种中的任一种可能的实现方式，在第七种可能的实现方式中，所述视频分析信息还包括子区域中对象的超链接信息。
结合第一方面的第七种可能的实现方式，在第八种可能的实现方式中，所述根据所述视频分析信息对所述视频相关信息进行调整的步骤包括：在所述视频相关信息中添加和/或修改和/或删除对象的超链接信息。
结合第一方面的第一至第八种中的任一种可能的实现方式，在第九种可能的实现方式中，所述视频分析信息包括子区域设置优化信息。
结合第一方面的第九种可能的实现方式中，在第十种可能的实现方式中，所述根据所述视频分析信息对所述视频相关信息进行调整的步骤包括：根据所述子区域设置优化信息调整所述子区域的设置。
结合第一方面的第一至第十种中的任一种可能的实现方式，在第十一种可能的实现方式中，所述视频相关信息包括子区域完成度指标信息。
结合第一方面的第十一种可能的实现方式，在第十二种可能的实现方式中，所述根据所述视频分析信息对所述视频相关信息进行调整的步骤包括：根据所述视频分析信息更新所述子区域完成度指标信息。
结合第一方面的第一至第十二种中的任一种可能的实现方式，在第十三种可能的实现方式中，所述接收所述至少一个客户端返回的视频分析信息的步骤包括：接收多个客户端返回的视频分析信息；在所述根据所述视频分析信息对所述视频相关信息进行调整的步骤之前，所述方法还包括：将所述接收的多个客户端返回的视频分析信息进行整合的步骤。
结合第一方面的第一至第十三种中的任一种可能的实现方式，在第十四种可能的实现方式中，在所述根据所述视频分析信息对所述视频相关信息进行调整的步骤之前，所述方法还包括，在服务器侧：选择子区域；对所选的子区域进行视频分析，生成对应的视频分析信息。
结合第一方面的第十四种可能的实现方式，在第十五种可能的实现方式中，在所述根据所述视频分析信息对所述视频相关信息进行调整的步骤之前，所述方法还包括：将所述接收的至少一个客户端返回的视频分析信息以及服务器侧生成的视频分析信息进行整合的步骤。
第二方面，本发明提供了一种客户端视频处理方法，包括：
接收服务器侧传送的视频及视频相关信息，与所述视频相关信息对应的视频中帧的画面由多个子区域构成；
选择子区域；
对所选的子区域进行视频分析，生成对应的视频分析信息；
向服务器返回所述视频分析信息。
结合第二方面，在第一种可能的实现方式中，所述选择子区域的方式包括：根据用户的关注度来选择子区域。
结合第二方面，在第二种可能的实现方式中，所述选择子区域的方式包括：根据用户的特征信息来选择子区域。
结合第二方面，在第三种可能的实现方式中，所述选择子区域的方式包括：根据所述视频相关信息中的完成度指标信息选择子区域。
结合第二方面，在第四种可能的实现方式中，所述选择子区域的方式包括：根据视频中关联像素群的运动预测来选择子区域。
结合第二方面，在第五种可能的实现方式中，所述对所选的子区域进行视频分析，生成对应的视频分析信息的步骤包括：
对子区域进行对象识别，生成所述对象的标识信息。
结合第二方面的第五种可能的实现方式，在第六种可能的实现方式中，所述对象的标识信息包括已适配信息。
结合第二方面的第五种可能的实现方式，在第七种可能的实施方式中，所述视频相关信息包括已适配信息。
结合第二方面的第七种可能的实施方式，在第八种可能的实施方式中，所述对子区域进行对象识别，生成所述对象的标识信息的步骤包括：
根据所述已适配信息对子区域的对象进行模式适配，并更新所述已适配信息。
结合第二方面的第五种可能的实现方式，在第九种可能的实现方式中，所述方法还包括：生成与所述对象对应的超链接信息。
结合第二方面，在第十种可能的实现方式中，所述视频相关信息包括视频中对象的超链接信息。
结合第二方面的第九或第十种可能的实现方式，在第十一种可能的实现方式中，所述方法还包括存储所述超链接信息。
结合第二方面，在第十二种可能的实现方式中，所述对所选的子区域进行视频分析，生成对应的视频分析信息的步骤包括：
生成子区域设置优化信息。
结合第二方面的第十二种可能的实现方式，在第十三种可能的实现方式中，所述生成子区域设置优化信息的方式包括：根据与用户的交互生成所述子区域设置优化信息。
结合第二方面的第十二种可能的实现方式，在第十四种可能的实现方式中，所述生成子区域设置优化信息的方式包括：根据视频帧的画面中关联像素群的形状特征生成所述子区域设置优化信息。
结合第二方面的第十二种可能的实现方式，在第十五种可能的实现方式中，所述生成子区域设置优化信息的方式包括：根据视频的帧间联系生成所述子区域设置优化信息。
第三方面，本发明提供了一种服务器，包括：
服务器输入输出模块，用于将视频相关信息向至少一个客户端传送，与所述视频相关信息对应的视频中帧的画面由多个子区域构成；
所述服务器输入输出模块，还用于接收所述至少一个客户端返回的视频分析信息；
视频相关信息处理模块，用于根据所述视频分析信息对所述视频相关信息进行调整。
结合第三方面，在第一种可能的实施方式中，所述服务器还包括子区域设置模块，用于根据视频的画面特性设置所述多个子区域。
结合第三方面的第一种可能的实施方式，在第二种可能的实施方式中，所述视频分析信息包括子区域中对象的标识信息。
结合第三方面的第二种可能的实现方式，在第三种可能的实现方式中，所述对象的标识信息包括已适配信息。
结合第三方面的第二种可能的实施方式，在第四种可能的实施方式中，所述视频相关信息处理模块包括：标识信息处理单元，用于在所述视频相关信息中添加和/或修改和/或删除所述对象的标识信息。
结合第三方面的第二种可能的实施方式，在第五种可能的实施方式中，所述视频分析信息还包括子区域中对象的超链接信息。
结合第三方面的第五种可能的实施方式，在第六种可能的实施方式中，所述视频相关信息处理模块包括：超链接信息处理单元，用于在所述视频相关信息中添加和/或修改和/或删除对象的超链接信息。
结合第三方面，在第七种可能的实施方式中，所述视频分析信息包括子区域设置优化信息。
结合第三方面的第七种可能的实施方式，在第八种可能的实施方式，所述视频相关信息处理模块包括：子区域优化处理单元，根据所述子区域设置优化信息调整所述子区域的设置。
结合第三方面，在第九种可能的实施方式中，所述视频相关信息包括子区域完成度指标信息。
结合第三方面的第九种可能的实施方式，在第十种可能的实施方式中，所述视频相关信息处理模块包括：子区域完成度指标信息处理单元，用于根据所述视频分析信息更新所述子区域完成度指标信息。
结合第三方面的第一种至第十种可能的实施方式中的任一种，在第十一种可能的实施方式中，所述服务器输入输出模块，还用于接收多个客户端返回的视频分析信息；所述视频相关信息处理模块包括：整合处理单元，用于将所述接收的多个客户端返回的视频分析信息进行整合。
结合第三方面的第一种至第十种可能的实施方式中的任一种，在第十二种可能的实施方式中，所述服务器还包括：
服务器子区域选择模块，用于选择子区域；
服务器视频分析模块，用于对所选的子区域进行视频分析，生成对应的视频分析信息。
结合第三方面的第十二种可能的实施方式，在第十三种可能的实施方式中，所述视频相关信息处理模块包括：整合处理单元，用于将所述接收的至少一个客户端返回的视频分析信息以及服务器侧生成的视频分析信息进行整合。
第四方面，本发明提供了一种客户端，包括：
客户端输入输出模块，用于接收服务器侧传送的视频及视频相关信息，所述视频中帧的画面由多个子区域构成；
客户端子区域选择模块，用于选择子区域；
客户端视频分析模块，用于对所选的子区域进行视频分析，生成对应的视频分析信息；
所述客户端输入输出模块，还用于向服务器返回所述视频分析信息。
结合第四方面，在第一种可能的实施方式中，所述客户端子区域选择模块包括：
关注度选择单元，用于根据用户的关注度来选择所述子区域。
结合第四方面，在第二种可能的实施方式中，所述客户端子区域选择模块包括：
特征信息选择单元，用于根据用户的特征信息选择所述子区域。
结合第四方面，在第三种可能的实施方式中，所述客户端子区域选择模块包括：
运动预测选择单元，用于根据视频中关联像素群的运动预测来选择所述子区域。
结合第四方面，在第四种可能的实施方式中，所述客户端子区域选择模块包括：完成度选择单元，根据所述视频相关信息中的完成度指标信息来决定是否选择所述子区域。
结合第四方面，在第五种可能的实施方式中，所述客户端视频分析模块包括：
识别单元，用于对子区域进行对象识别，生成所述对象的标识信息。
结合第四方面的第五种可能的实现方式，在第六种可能的实现方式中，所述对象的标识信息包括已适配信息。
结合第四方面的第五种可能的实现方式，在第七种可能的实现方式中，所述视频相关信息包括已适配信息。
结合第四方面的第七种可能的实现方式，在第八种可能的实现方式中，所述识别单元根据所述已适配信息对子区域的对象进行模式适配，并更新所述已适配信息。
结合第四方面的第五种可能的实施方式，在第九种可能的实施方式中，所述客户端视频分析模块还包括：
超链接生成单元，用于生成与所述对象对应的超链接信息。
结合第四方面，在第十种可能的实施方式中，所述视频相关信息包括视频中对象的超链接信息。
结合第四方面的第九或第十种可能的实施方式，在第十一种可能的实施方式中，所述客户端还包括：
存储模块，用于存储所述超链接信息。
结合第四方面，在第十二种可能的实施方式中，所述客户端视频分析模块包括：
优化信息生成单元，用于生成子区域设置优化信息。
结合第四方面的第十二种可能的实施方式，在第十三种可能的实施方式中，所述优化信息生成单元根据与用户的交互生成所述子区域设置优化信息。
结合第四方面的第十二种可能的实施方式，在第十四种可能的实施方式中，所述优化信息生成单元根据视频帧的画面中关联像素群的形状特征生成所述子区域设置优化信息。
结合第四方面的第十二种可能的实施方式，在第十五种可能的实施方式中，所述优化信息生成单元根据视频的帧间联系生成所述子区域设置优化信息。
本发明实施例的方法及装置中，视频帧的画面由多个子区域构成，通过选择需要的子区域进行分析以获得视频分析信息，提高视频分析的效率和准确度；同时，本发明实施例的方法及装置通过客户端参与对视频的分析处理，在有海量视频需要处理时，通过这样的方法会大大降低视频服务器处理成本。
附图说明
图1为本发明实施例的一种服务器侧视频处理方法的流程示意图；
图2为本发明实施例视频中帧的画面由子区域构成的示意图；
图3为本发明实施例的一种客户端视频处理方法的流程示意图；
图4为本发明实施例视频、视频相关信息和视频分析信息在服务器和客户端之间传输的示意图；
图5为本发明实施例一种服务器的结构示意图；
图6为本发明实施例另一种服务器的结构示意图；
图7为本发明实施例又一种服务器的结构示意图；
图8为本发明实施例一种客户端的结构示意图；
图9为本发明实施例另一种客户端的结构示意图；
图10为本发明实施例又一种客户端的结构示意图；
图11为本发明实施例视频处理系统的结构示意图。
具体实施方式
本发明的方法及装置结合附图及实施例详细说明如下。
如图1所示，本发明实施例提供了一种服务器侧视频处理方法，包括：
S110：将视频以及视频相关信息向至少一个客户端传送，所述视频中帧的画面由多个子区域构成；
S120：接收所述至少一个客户端返回的视频分析信息；
S130：根据所述视频分析信息对所述视频相关信息进行调整。
这里的服务器可能是视频提供服务器，也可能是实现上述步骤的其它服务器，在一些实施方式中，该服务器也可以被看成是一个超级节点。视频和视频相关信息可能是由同一服务器向客户端传送的，也可能是分别由不同的服务器向客户端传送的。
这里对于所述多个子区域的设置可以是在服务器侧进行的，也可以是在客户端进行的。一种可能的实施方式中，在所述步骤S110之前还包括对视频进行子区域设置的步骤。
在本发明实施例的一种可能的实施方式中，所述多个子区域以网格状分布。如图2所示，较佳的，在一种实施方式中，视频中的帧画面由多个大小一致的方格状子区域101构成，即将画面划分为M行N列（M和N都为大于1的自然数，图2中为4行4列），获得M*N个子区域。在本发明实施例的其它可能的实施方式中，所述子区域还可以为其它多边形，例如正六边形等形状。对于视频不同帧的画面，所述子区域可以是相同的，也可以是不同的，例如在一帧中，构成的多个子区域为较大的方格；在另一帧中，其子区域为较小的方格。
在本发明实施例的一种可能的实施方式中，相邻的子区域之间还有可能有交叠的部分。
在本发明实施例的一种可能的实施方式中，所述多个子区域的大小根据视频的画面特性设置。
较佳的，在本发明的实施方式中，所述画面特性包括画面的分辨率和/或画面的场景信息。例如，在画面的分辨率较低，无法准确识别画面的细节时，可以将子区域的大小设置的大一些；而当画面的分辨率较高时，可以将子区域的大小设置的更小一些，对于子区域中的小细节也可以更加准确的分析识别。这里画面的场景信息包括识别出来的人头像尺寸信息或视频帧之间的运动联像素群的形状特征。例如，头像尺寸较大，对象一般较大，此时，子区域可以设置成较大。视频帧之间的运动联像素群的形状大，对象一般较大，此时，子区域可以设置成较大。在本发明实施例的一些可能的实施方式中，子区域的设置可以参考上述信息中的一种；在本发明实施例的其它可能的实施方式中，子区域的设置也可以参考上述信息中的多种。
较佳的，在本发明实施例的一种可能的实施方式中，所述视频分析信息包括子区域中对象的标识信息。这里，对象的标识信息可以是对象的标签，在显示时，用户可能通过所述标识信息获得对象的简要信息等。
较佳的，在本发明实施例的一种可能的实施方式中，所述对象的标识信息包括已适配信息。将所述已适配信息包含在所述视频相关信息中发送给客户端，以便客户端更好的对子区域的对象进行视频分析。
所述根据所述视频分析信息对所述视频相关信息进行调整的步骤包括：在所述视频相关信息中添加和/或修改和/或删除所述对象的标识信息。
这里，如果所述视频相关信息中还没有关于对象的标识信息，这里将客户端返回的对象的标识信息添加在所述视频相关信息中。在所述视频相关信息中已有所述对象的标识信息，并且客户端返回的对象的标识信息比已有的标识信息更准确或更详细时，则修改所述对象的标识信息。
较佳的，在本发明实施例的一种可能的实施方式中，所述视频分析信息还包括子区域中对象的超链接信息。该超链接可以是至对象的详细介绍等的内容链接或者是该对象的购买界面，用户可以通过所述对象的超链接信息进一步了解对象或直接购买对象。
所述根据所述视频分析信息对所述视频相关信息进行调整的步骤包括：在所述视频相关信息中添加和/或修改和/或删除对象的超链接信息。
这里，如果所述视频相关信息中还没有关于对象的超链接信息，这里将客户端返回的对象的超链接信息添加在所述视频相关信息中。在所述视频相关信息中已有所述对象的超链接信息，并且客户端返回的对象的超链接信息比已有的超链接信息更准确或更详细时，则修改所述对象的超链接信息。
较佳的，在本发明实施例的一个可能的实施方式中，所述视频分析信息包括子区域设置优化信息。
较佳的，所述根据所述视频分析信息对所述视频相关信息进行调整的步骤包括：根据所述子区域设置优化信息调整所述子区域的设置。
在对子区域进行设置之后，在客户端或服务器对视频进行分析的过程中，有可能会发现当前子区域的设置不够优化，影响了对象的识别等操作，此时可以产生子区域设置优化信息，以便完善对当前画面的子区域设置。
较佳的，在本发明实施例的一个可能的实施方式中，所述视频相关信息包括子区域完成度指标信息。为了节约视频分析资源，对于一些已经分析的比较完善的帧画面子区域，可以减少或对其的分析处理，例如，这里通过设置子区域完成度指标信息，子区域的完成度程度越高，其完成度指标越高，在对视频进行处理时，对于子区域完成度指标信息超过设定阈值的子区域，可以不再选择其进行处理。
在一些可能的实施方式中，所述子区域完成度指标信息还可以设置成随时间衰减，例如每过一段设定的时间，所述完成度指标下降一定值，当完成度指标下降至低于设定阈值时，就可以重新对对应的子区域进行分析处理，对子区域的信息进行更新。
较佳的，所述根据所述视频分析信息对所述视频相关信息进行调整的步骤包括：根据所述视频分析信息更新所述子区域完成度指标信息。
在本发明实施例的一种可能的实施方式中，服务器侧接收多个客户端返回的视频分析信息，因此，在所述根据所述视频分析信息对所述视频相关信息进行调整的步骤之前，还需要将所述接收的多个客户端返回的视频分析信息进行整合。这里的整合包括：对所述多个客户端返回的视频分析信息进行汇总，例如对同一子区域对象的多方面的识别信息进行汇总，对对象同一方面的不同信息进行分析，或进一步进行信息甄别。例如：对视频一个帧画面的一个子区域的对象，第一部分客户端返回的分析信息包括：该对象是包；第二部分客户端返回的分析信息包括：该对象是手包，并且为红色；第三部分客户端返回的信息包括：该对象是第一品牌的手包。这些信息进行汇总后，得到的分析信息可能为：该对象是第一品牌的手包，并且为红色。假设还有第四部分客户端返回的信息包括：该对象是第二品牌的手包，那么对信息的整合可能还包括，对该对象的品牌进行鉴别，得到正确的结果放在整合后的分析信息中；或者，将该不同的分析信息都放在所述整合后的分析信息中，例如：得到的整合后的分析信息可能为：该对象为红色的手包，认为其为第一品牌的比例占67%，认为其为第二品牌的比例占33%。
在本发明实施例一种可能的实施方式中，在服务器侧也可以对视频进行分析，即在所述根据所述视频分析信息对所述视频相关信息进行调整的步骤之前，所述方法还包括，在服务器侧：
选择子区域；
对所选的子区域进行视频分析，生成对应的视频分析信息。
对子区域的选择和进行视频分析的具体方法可以参考下文客户端对视频进行处理的过程。
上述对视频分析信息的整合还包括将所述接收的至少一个客户端返回的视频分析信息以及服务器侧生成的视频分析信息进行整合的步骤。
服务器根据整合后的视频分析信息对视频相关信息进行调整后，再共享给其它客户端。
如图3所示，本发明的实施例还提供了一种客户端视频处理方法，包括：
S310：接收服务器侧传送的视频及视频相关信息，所述视频中帧的画面由多个子区域构成；
S320：选择子区域；
S330：对所选的子区域进行视频分析，生成对应的视频分析信息；
S340：向服务器返回所述视频分析信息。
除了上文所述的在服务器侧对视频的子区域进行设置外，在本发明实施例的一种可能的实施方式中，在接收所述视频和视频相关信息后，还可以包括对视频进行子区域设置的步骤，具体的设置可以参考上文中相应的描述。
较佳的，在本发明实施例的一种可能的实施方式中，所述选择子区域的方式包括：根据用户的关注度来选择子区域。
这里对子区域的选择包括对帧画面的选择以及对所选帧画面上对应子区域的选择。用户的关注度可以通过主动检测用户的视觉焦点、用户在对应帧画面的停留时间来获得，或可以通过用户对相应视频主动的动作来获得，例如用户反复播放的帧画面部分、用户对帧画面上对应区域的操作等。例如：通过摄像头等传感器捕捉到用户的视觉焦点对应于当前帧画面的某一部分，则选择与该部分对应的子区域进行视频分析；例如检测到用户在当前帧画面上的某一个或多个部分用鼠标点击或划过，则选择该部分对应的子区域进行视频分析。
较佳的，在本发明实施例的一种可能的实施方式中，所述选择子区域的方式包括：根据用户的特征信息来选择子区域。
这里用户的特征信息可以包括：用户的年龄、性别、所处的位置、职业等等。例如，对于同一视频，不同年龄和性别的用户感兴趣的帧可能不一样；对于同一帧画面，不同年龄和性别的用户感兴趣的子区域也可能不一样。因此，还可以通过用户的特征信息来选择对应的子区域。
较佳的，在本发明实施例的一种可能的实施方式中，所述选择子区域的方式包括：根据所述视频相关信息中的完成度指标信息选择子区域。例如，在某个子区域的所述完成度指标信息超过某个设定阈值时，说明对该子区域的分析已经比较完备，因此无论用户是否高度关注对应的子区域，都不再选择该子区域进行视频分析，从而节约了计算资源和时间。
较佳的，在本发明实施例的一种可能的实施方式中，所述选择子区域的方式包括：
根据视频中关联像素群的运动预测来选择子区域。
这里的关联像素群为相邻并且相互关联的像素群，例如一个帧画面上的一个对象为红色的包时，在对该对象进行识别之前，已经可以知道该对象为一团具有一定形状和大小的红色像素群。假如该关联像素群在一帧画面中并不在一个子区域内（例如在两个或更多个子区域的相交的位置），那么通过在前后帧中该关联像素群的运动趋势，可以预测其在之后或之前的某一帧中可能会到达的位置，因此通过该运动预测，找到该关联像素群正好完整位于一个子区域的帧画面中的对应子区域进行视频分析，提高识别效率。
对于子区域的选择还可以参考以上方式各因素中的多种，或者还可以参考其它信息来选择合适的子区域。
较佳的，在本发明实施例的一个可能的实施方式中，所述对所选的子区域进行视频分析，生成对应的视频分析信息的步骤包括：
对子区域进行对象识别，生成所述对象的标识信息。
较佳的，在本发明实施例的一种可能的实施方式中，所述对象的标识信息包括已适配信息。即在对子区域进行对象识别时，通过对识别出的模糊的对象进行模式适配，来最终准确识别对象，在进行模式适配的过程中，可能通过很多模式来与模糊对象进行适配，对于已经与对象进行过适配的模式，生成所述已适配信息。客户端将已适配信息向服务器侧发送，为后继本客户端、其它客户端或服务器对相同对象进行的识别提供参考。
较佳的，在本发明实施例的一种可能的实施方式中，所述视频相关信息包括已适配信息。所述对子区域进行对象识别，生成所述对象的标识信息的步骤包括：
根据所述已适配信息对子区域的对象进行模式适配，并更新所述已适配信息。
客户端接收到的视频相关信息中已经包含已适配信息的情况下，根据已适配信息对子区域的对象进行模式适配，例如所述已适配信息包括已与对象适配失败的模式信息，在当前客户端对同一对象进行进一步识别的时候，可能跳过已适配识别的模式，而直接通过还未适配的模式来对对象进行适配，提高当前识别的效率；或者可能以已适配的模式信息作为参考，提高当前识别的准确度。
较佳的，在本发明实施例的一个可能的实施方式中，所述方法还包括：生成与所述对象对应的超链接信息。
较佳的，在本发明实施例的一个可能的实施方式中，所述视频相关信息包括视频中对象的超链接信息。
较佳的，在本发明实施例的一个可能的实施方式中，所述方法还包括存储所述超链接信息。无论是上面所述的在视频分析的过程中生成的超链接信息，还是服务器发送的视频相关信息中携带的对象的超链接信息，都可以再本地进行存储。这样，用户在观看了视频之后，可以通过本地存储的对象的超链接信息来进一步了解或直接购买与对象对应的商品。
为了对子区域的设置进行优化，更好的对子区域的视频进行分析处理，较佳的，在本发明实施例的一个可能的实施方式中，所述对所选的子区域进行视频分析，生成对应的视频分析信息的步骤包括：生成子区域设置优化信息。
较佳的，在本发明实施例的一个可能的实施方式中，所述生成子区域设置优化信息的方式包括：根据与用户的交互生成所述子区域设置优化信息。例如，检测到用户的视觉焦点总是在相邻多个子区域的交界处，则说明当前的子区域设置需要被优化；或者，用户在显示的画面上通过输入设备画出一片区域，该区域大于当前子区域，则都可以生成子区域设置优化信息，以优化当前的子区域设置。
较佳的，在本发明实施例的一个可能的实施方式中，所述生成子区域设置优化信息的方式包括：根据视频帧的画面中关联像素群的形状特征生成所述子区域设置优化信息。例如，检测到视频帧的画面中的多个关联像素群的大小远远小于当前设置的子区域，则当前子区域可能需要被设置成更小的区域；或者，在需要对人脸的细节进行识别时，由于对于对象是不是人脸的识别技术已经比较成熟，在识别到当前的关联像素群为人脸时，可以根据该像素群的大小来进一步对子区域的设置进行调整，以更加准确、有效地进行人脸细节的识别。
较佳的，在本发明实施例的一个可能的实施方式中，所述生成子区域设置优化信息的方式包括：根据视频的帧间联系生成所述子区域设置优化信息。这里的帧间联系为视频前后帧的关系，例如，根据视频前后帧中同一对象，可能会显示出由大到小的变化趋势，那么可以预测到其在前后的某一帧画面中的大小，根据预测的信息调整该帧画面的子区域设置。
当然，也可以同时参考上述因素中的多种来生成所述子区域设置优化信息，或者还可以参考其它因素来生成所述子区域设置优化信息。
对于一些接收的视频相关信息中已经有了子区域对应的信息，即已经有其它客户端或服务器对该子区域进行了分析，客户端还可以对子区域进行进一步的分析处理，以提升准确度和更新已有信息。
在本发明实施例的一种可能的实施方式中，结合图1和图3所述的方法，在服务器侧和客户端分别对视频进行处理的包括：
对视频进行子区域设置；
服务器将视频以及视频相关信息向至少一个客户端传送，所述视频中帧的画面由多个子区域构成；
客户端接收服务器侧传送的视频及视频相关信息；
选择子区域；
对所选的子区域进行视频分析，生成对应的视频分析信息；
向服务器返回所述视频分析信息；
服务器接收所述至少一个客户端返回的视频分析信息；
根据所述视频分析信息对所述视频相关信息进行调整。
其中，视频流和视频分析信息在服务器和客户端之间传输的方式如图4所示，所述视频流包括所述视频和视频相关信息。
如图5所示，本发明实施例提供了一种服务器500，包括：
服务器输入输出模块510，用于将视频相关信息向至少一个客户端传送，与所述视频相关信息对应的视频中帧的画面由多个子区域构成；
所述服务器输入输出模块510，还用于接收所述至少一个客户端返回的视频分析信息；
视频相关信息处理模块520，用于根据所述视频分析信息对所述视频相关信息进行调整。
在本发明实施例的一种可能的实施方式中，所述服务器500还向客户端传送与所述视频相关信息对应的视频。在本发明其它可能的实施方式中，与所述视频相关信息对应的视频还可能是由其它服务器向客户端发送的。
较佳的，如图6所示，在本发明一种可能的实施方式中，所述服务器500还包括子区域设置模块530，用于根据视频的画面特性设置所述多个子区域。
较佳的，在本发明一种可能的实施方式中，所述视频分析信息包括子区域中对象的标识信息。较佳的，在本发明实施例的一种可能的实施方式中，所述对象的标识信息包括已适配信息。
较佳的，在本发明一种可能的实施方式中，所述视频相关信息处理模块520包括标识信息处理单元521，其按照上述的方法实施例中的相应描述实施其功能，具体为：
所述标识信息处理单元521用于在所述视频相关信息中添加和/或修改和/或删除所述对象的标识信息。
较佳的，在本发明一种可能的实施方式中，所述视频分析信息还包括子区域中对象的超链接信息。
较佳的，在本发明一种可能的实施方式中，所述视频相关信息处理模块520包括超链接信息处理单元522，其按照上述的方法实施例中的相应描述实施其功能，具体为：
所述超链接信息处理单元522用于在所述视频相关信息中添加和/或修改和/或删除对象的超链接信息。
较佳的，在本发明一种可能的实施方式中，所述视频分析信息包括子区域设置优化信息。
较佳的，在本发明一种可能的实施方式中，所述视频相关信息处理模块520包括子区域优化处理单元523，其按照上述的方法实施例中的相应描述实施其功能，具体为：
所述子区域优化处理单元523根据所述子区域设置优化信息调整所述子区域的设置。
较佳的，在本发明一种可能的实施方式中，所述视频相关信息包括子区域完成度指标信息。
较佳的，在本发明一种可能的实施方式中，所述视频相关信息处理模块520包括子区域完成度指标信息处理单元524，其按照上述的方法实施例中的相应描述实施其功能，具体为：
所述子区域完成度指标信息处理单元524用于根据所述视频分析信息更新所述子区域完成度指标信息。
较佳的，在本发明一种可能的实施方式中，所述服务器输入输出模块510，还用于接收多个客户端返回的视频分析信息；
所述视频相关信息处理模块520包括整合处理单元525，其按照上述的方法实施例中的相应描述实施其功能，具体为：
所述整合处理单元525用于将所述接收的多个客户端返回的视频分析信息进行整合。
较佳的，在本发明一种可能的实施方式中，所述服务器500还包括服务器子区域选择模块540和服务器视频分析模块550，各单元按照上述的方法实施例中相应的描述实施其功能，具体为：
所述服务器子区域选择模块540用于选择子区域；
所述服务器视频分析模块550用于对所选的子区域进行视频分析，生成对应的视频分析信息。
较佳的，在本发明一种可能的实施方式中，所述整合处理单元525还用于将所述接收的至少一个客户端返回的视频分析信息以及服务器侧生成的视频分析信息进行整合，具体的实施方法见上述的方法实施例中的相应描述。
图7为本发明实施例提供的又一种服务器700的结构示意图，本发明具体实施例并不对服务器的具体实现做限定。如图7所示，该服务器700可以包括：
处理器(processor)710、通信接口(CommunicationsInterface)720、存储器(memory)730、以及通信总线740。其中：
处理器710、通信接口720、以及存储器730通过通信总线740完成相互间的通信。
通信接口720，用于与比如客户端等的网元通信。
处理器710，用于执行程序732，具体可以执行上述图1至图2所示的方法实施例中的相关步骤。
具体地，程序732可以包括程序代码，所述程序代码包括计算机操作指令。
处理器710可能是一个中央处理器CPU，或者是特定集成电路ASIC（ApplicationSpecificIntegratedCircuit），或者是被配置成实施本发明实施例的一个或多个集成电路。
存储器730，用于存放程序732。存储器730可能包含高速RAM存储器，也可能还包括非易失性存储器（non-volatilememory），例如至少一个磁盘存储器。程序732具体可以包括：
服务器输入输出模块，用于将视频相关信息向至少一个客户端传送，与所述视频相关信息对应的视频中帧的画面由多个子区域构成；
所述服务器输入输出模块，还用于接收所述至少一个客户端返回的视频分析信息；
视频相关信息处理模块，用于根据所述视频分析信息对所述视频相关信息进行调整。
程序732中各单元的具体实现可以参见图6所示实施例中的相应单元，在此不赘述。所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的设备和模块的具体工作过程，可以参考前述方法实施例中的对应过程描述，在此不再赘述。
如图8所示，本发明实施例提供了一种客户端800，包括：
客户端输入输出模块810，用于接收服务器侧传送的视频及视频相关信息，所述视频中帧的画面由多个子区域构成；
客户端子区域选择模块830，用于选择子区域；
客户端视频分析模块840，用于对所选的子区域进行视频分析，生成对应的视频分析信息；
所述客户端输入输出模块810，还用于向服务器返回所述视频分析信息。
如图9所示，较佳的，在本发明实施例的一种可能的实施方式中，所述客户端800还包括显示模块820，用于显示所述视频。
在本发明实施例的一种可能的实施方式中，所述客户端子区域选择模块830包括关注度选择单元831，其按照上文方法实施例中的相应描述实施其功能，具体为：
所述关注度选择单元831，用于根据用户的关注度来选择所述子区域。
较佳的，在本发明实施例的一种可能的实施方式中，所述客户端子区域选择模块830包括特征信息选择单元832，其按照上文方法实施例中的相应描述实施其功能，具体为：
所述特征信息选择单元832用于根据用户的特征信息选择所述子区域。
较佳的，在本发明实施例的一种可能的实施方式中，所述客户端子区域选择模块830包括运动预测选择单元833，其按照上文方法实施例中的相应描述实施其功能，具体为：
所述运动预测选择单元833用于根据视频中关联像素群的运动预测来选择所述子区域。
较佳的，在本发明实施例的一种可能的实施方式中，所述客户端子区域选择模块830包括完成度选择单元834，其按照上文方法实施例中的相应描述实施其功能，具体为：
完成度选择单元834，根据所述视频相关信息中的完成度指标信息来决定是否选择所述子区域。
较佳的，在本发明实施例的一种可能的实施方式中，所述客户端视频分析模块840包括识别单元841，其按照上文方法实施例中的相应描述实施其功能，具体为：
所述识别单元841，用于对子区域进行对象识别，生成所述对象的标识信息。
较佳的，在本发明实施例的一种可能的实施方式中，所述对象的标识信息包括已适配信息。
较佳的，在本发明实施例的一种可能的实施方式中，所述视频相关信息包括已适配信息。
较佳的，在本发明实施例的一种可能的实施方式中，所述识别单元841根据所述已适配信息对子区域的对象进行模式适配，并更新所述已适配信息。
较佳的，在本发明实施例的一种可能的实施方式中，所述客户端视频分析模块840还包括超链接生成单元842，其按照上文方法实施例中的相应描述实施其功能，具体为：
所述超链接生成单元842用于生成与所述对象对应的超链接信息。
较佳的，在本发明实施例的一种可能的实施方式中，所述视频相关信息包括视频中对象的超链接信息。
较佳的，在本发明实施例的一种可能的实施方式中，所述客户端800还包括存储模块850，其按照上文方法实施例中的相应描述实施其功能，具体为：
所述存储模块850用于存储所述超链接信息。
较佳的，在本发明实施例的一种可能的实施方式中，所述客户端视频分析模块840包括优化信息生成单元843，其按照上文方法实施例中的相应描述实施其功能，具体为：
所述优化信息生成单元843，用于生成子区域设置优化信息。
较佳的，在本发明实施例的一种可能的实施方式中，所述优化信息生成单元根据与用户的交互生成所述子区域设置优化信息。
较佳的，在本发明实施例的一种可能的实施方式中，所述优化信息生成单元根据视频帧的画面中关联像素群的形状特征生成所述子区域设置优化信息。
较佳的，在本发明实施例的一种可能的实施方式中，所述优化信息生成单元根据视频的帧间联系生成所述子区域设置优化信息。
本发明实施例的客户端视频分析模块840还有可能包括用于对子区域进行其他视频分析的其它分析单元。
所述客户端可以为电视、台式电脑、包括笔记本、平板电脑、手机、车载设备等在内的移动终端等具有显示装置和计算能力的设备。
图10为本发明实施例提供的又一种客户端900的结构示意图，本发明具体实施例并不对客户端的具体实现做限定。如图10所示，该客户端900可以包括：
处理器(processor)910、通信接口(CommunicationsInterface)920、存储器(memory)930、以及通信总线940。其中：
处理器910、通信接口920、以及存储器930通过通信总线940完成相互间的通信。
通信接口920，用于与比如客户端等的网元通信。
处理器910，用于执行程序932，具体可以执行上述图3所示的方法实施例中的相关步骤。
具体地，程序932可以包括程序代码，所述程序代码包括计算机操作指令。
处理器910可能是一个中央处理器CPU，或者是特定集成电路ASIC（ApplicationSpecificIntegratedCircuit），或者是被配置成实施本发明实施例的一个或多个集成电路。
存储器930，用于存放程序932。存储器930可能包含高速RAM存储器，也可能还包括非易失性存储器（non-volatilememory），例如至少一个磁盘存储器。程序932具体可以包括：
客户端输入输出模块，用于接收服务器侧传送的视频及视频相关信息，所述视频中帧的画面由多个子区域构成；
客户端子区域选择模块，用于选择子区域；
客户端视频分析模块，用于对所选的子区域进行视频分析，生成对应的视频分析信息；
所述客户端输入输出模块，还用于向服务器返回所述视频分析信息。
程序932中各单元的具体实现可以参见图9所示实施例中的相应单元，在此不赘述。所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的设备和模块的具体工作过程，可以参考前述方法实施例中的对应过程描述，在此不再赘述。
图11所示为由服务器1110和多个客户端1120构成的视频处理系统1100，这里的服务器1110可以为上文记载的服务器，客户端1120可以为上文记载的客户端。
通过上面的装置和方法，大大降低视频服务器处理成本，同时提高视频分析的效率和准确度。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及方法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器（ROM，Read-OnlyMemory）、随机存取存储器（RAM，RandomAccessMemory）、磁碟或者光盘等各种可以存储程序代码的介质。
以上实施方式仅用于说明本发明，而并非对本发明的限制，有关技术领域的普通技术人员，在不脱离本发明的精神和范围的情况下，还可以做出各种变化和变型，因此所有等同的技术方案也属于本发明的范畴，本发明的专利保护范围应由权利要求限定。

Claims (57)

1.一种服务器侧视频处理方法，其特征在于，包括：
将视频以及视频相关信息向至少一个客户端传送，所述视频中帧的画面由多个子区域构成；
接收所述至少一个客户端返回的视频分析信息；
根据所述视频分析信息对所述视频相关信息进行调整。
2.如权利要求1所述的方法，其特征在于，所述多个子区域以网格状分布。
3.如权利要求1所述的方法，其特征在于，所述多个子区域的大小根据视频的画面特性设置。
4.如权利要求3所述的方法，其特征在于，所述画面特性包括画面的分辨率和/或画面的场景信息。
5.如权利要求1所述的方法，其特征在于，所述视频分析信息包括子区域中对象的标识信息。
6.如权利要求5所述的方法，其特征在于，所述对象的标识信息包括已适配信息。
7.如权利要求5所述的方法，其特征在于，所述根据所述视频分析信息对所述视频相关信息进行调整的步骤包括：
在所述视频相关信息中添加和/或修改和/或删除所述对象的标识信息。
8.如权利要求5所述的方法，其特征在于，所述视频分析信息还包括子区域中对象的超链接信息。
9.如权利要求8所述的方法，其特征在于，所述根据所述视频分析信息对所述视频相关信息进行调整的步骤包括：
在所述视频相关信息中添加和/或修改和/或删除对象的超链接信息。
10.如权利要求1所述的方法，其特征在于，所述视频分析信息包括子区域设置优化信息。
11.如权利要求10所述的方法，其特征在于，所述根据所述视频分析信息对所述视频相关信息进行调整的步骤包括：
根据所述子区域设置优化信息调整所述子区域的设置。
12.如权利要求1所述的方法，其特征在于，所述视频相关信息包括子区域完成度指标信息。
13.如权利要求12所述的方法，其特征在于，所述根据所述视频分析信息对所述视频相关信息进行调整的步骤包括：
根据所述视频分析信息更新所述子区域完成度指标信息。
14.如权利要求1所述的方法，其特征在于，
所述接收所述至少一个客户端返回的视频分析信息的步骤包括：接收多个客户端返回的视频分析信息；
在所述根据所述视频分析信息对所述视频相关信息进行调整的步骤之前，所述方法还包括：将所述接收的多个客户端返回的视频分析信息进行整合的步骤。
15.如权利要求1至14中任一项所述的方法，其特征在于，
在所述根据所述视频分析信息对所述视频相关信息进行调整的步骤之前，所述方法还包括，在服务器侧：
选择子区域；
对所选的子区域进行视频分析，生成对应的视频分析信息。
16.如权利要求15所述的方法，其特征在于，
在所述根据所述视频分析信息对所述视频相关信息进行调整的步骤之前，所述方法还包括：
将所述接收的至少一个客户端返回的视频分析信息以及服务器侧生成的视频分析信息进行整合的步骤。
17.一种客户端视频处理方法，其特征在于，包括：
接收服务器侧传送的视频及视频相关信息，所述视频中帧的画面由多个子区域构成；
选择子区域；
对所选的子区域进行视频分析，生成对应的视频分析信息；
向服务器返回所述视频分析信息。
18.如权利要求17所述的方法，其特征在于，所述选择子区域的方式包括：
根据用户的关注度来选择子区域。
19.如权利要求17所述的方法，其特征在于，所述选择子区域的方式包括：
根据用户的特征信息来选择子区域。
20.如权利要求17所述的方法，其特征在于，所述选择子区域的方式包括：
根据所述视频相关信息中的完成度指标信息选择子区域。
21.如权利要求17所述的方法，其特征在于，所述选择子区域的方式包括：
根据视频中关联像素群的运动预测来选择子区域。
22.如权利要求17所述的方法，其特征在于，所述对所选的子区域进行视频分析，生成对应的视频分析信息的步骤包括：
对子区域进行对象识别，生成所述对象的标识信息。
23.如权利要求22所述的方法，其特征在于，所述对象的标识信息包括已适配信息。
24.如权利要求22所述的方法，其特征在于，所述视频相关信息包括已适配信息。
25.如权利要求24所述的方法，其特征在于，所述对子区域进行对象识别，生成所述对象的标识信息的步骤包括：
根据所述已适配信息对子区域的对象进行模式适配，并更新所述已适配信息。
26.如权利要求22所述的方法，其特征在于，所述方法还包括：生成与所述对象对应的超链接信息。
27.如权利要求17所述的方法，其特征在于，所述视频相关信息包括视频中对象的超链接信息。
28.如权利要求26或27所述的方法，其特征在于，所述方法还包括存储所述超链接信息。
29.如权利要求17所述的方法，其特征在于，所述对所选的子区域进行视频分析，生成对应的视频分析信息的步骤包括：
生成子区域设置优化信息。
30.如权利要求29所述的方法，其特征在于，所述生成子区域设置优化信息的方式包括：
根据与用户的交互生成所述子区域设置优化信息。
31.如权利要求29所述的方法，其特征在于，所述生成子区域设置优化信息的方式包括：
根据视频帧的画面中关联像素群的形状特征生成所述子区域设置优化信息。
32.如权利要求29所述的方法，其特征在于，所述生成子区域设置优化信息的方式包括：
根据视频的帧间联系生成所述子区域设置优化信息。
33.一种服务器，其特征在于，包括：
服务器输入输出模块，用于将视频相关信息向至少一个客户端传送，与所述视频相关信息对应的视频中帧的画面由多个子区域构成；
所述服务器输入输出模块，还用于接收所述至少一个客户端返回的视频分析信息；
视频相关信息处理模块，用于根据所述视频分析信息对所述视频相关信息进行调整。
34.如权利要求33所述的服务器，其特征在于，所述视频分析信息包括子区域中对象的标识信息。
35.如权利要求34所述的服务器，其特征在于，所述对象的标识信息包括已适配信息。
36.如权利要求34所述的服务器，其特征在于，所述视频分析信息还包括子区域中对象的超链接信息。
37.如权利要求33所述的服务器，其特征在于，所述视频分析信息包括子区域设置优化信息。
38.如权利要求33所述的服务器，其特征在于，所述视频相关信息包括子区域完成度指标信息。
39.如权利要求33至38中任一项所述的服务器，其特征在于，所述服务器输入输出模块，还用于接收多个客户端返回的视频分析信息；
所述视频相关信息处理模块包括：整合处理单元，用于将所述接收的多个客户端返回的视频分析信息进行整合。
40.如权利要求33至38中任一项所述的服务器，其特征在于，所述服务器还包括：
服务器子区域选择模块，用于选择子区域；
服务器视频分析模块，用于对所选的子区域进行视频分析，生成对应的视频分析信息。
41.如权利要求40所述的服务器，其特征在于，所述视频相关信息处理模块包括：整合处理单元，用于将所述接收的至少一个客户端返回的视频分析信息以及服务器侧生成的视频分析信息进行整合。
42.一种客户端，其特征在于，包括：
客户端输入输出模块，用于接收服务器侧传送的视频及视频相关信息，所述视频中帧的画面由多个子区域构成；
客户端子区域选择模块，用于选择子区域；
客户端视频分析模块，用于对所选的子区域进行视频分析，生成对应的视频分析信息；
所述客户端输入输出模块，还用于向服务器返回所述视频分析信息。
43.如权利要求42所述的客户端，其特征在于，所述客户端子区域选择模块包括：
关注度选择单元，用于根据用户的关注度来选择所述子区域。
44.如权利要求43所述的客户端，其特征在于，所述客户端子区域选择模块包括：
特征信息选择单元，用于根据用户的特征信息选择所述子区域。
45.如权利要44所述的客户端，其特征在于，所述客户端子区域选择模块包括：
运动预测选择单元，用于根据视频中关联像素群的运动预测来选择所述子区域。
46.如权利要求44所述的客户端，其特征在于，所述客户端子区域选择模块包括：
完成度选择单元，根据所述视频相关信息中的完成度指标信息来决定是否选择所述子区域。
47.如权利要求44所述的客户端，其特征在于，所述客户端视频分析模块包括：
识别单元，用于对子区域进行对象识别，生成所述对象的标识信息。
48.如权利要求47所述的客户端，其特征在于，所述对象的标识信息包括已适配信息。
49.如权利要求47所述的客户端，其特征在于，所述视频相关信息包括已适配信息。
50.如权利要求49所述的客户端，其特征在于，所述识别单元根据所述已适配信息对子区域的对象进行模式适配，并更新所述已适配信息。
51.如权利要求47所述的客户端，其特征在于，所述客户端视频分析模块还包括：
超链接生成单元，用于生成与所述对象对应的超链接信息。
52.如权利要求44所述的客户端，其特征在于，所述视频相关信息包括视频中对象的超链接信息。
53.如权利要求51或52所述的客户端，其特征在于，所述客户端还包括：
存储模块，用于存储所述超链接信息。
54.如权利要求44所述的客户端，其特征在于，所述客户端视频分析模块包括：
优化信息生成单元，用于生成子区域设置优化信息。
55.如权利要求54所述的客户端，其特征在于，所述优化信息生成单元根据与用户的交互生成所述子区域设置优化信息。
56.如权利要求54所述的客户端，其特征在于，所述优化信息生成单元根据视频帧的画面中关联像素群的形状特征生成所述子区域设置优化信息。
57.如权利要求54所述的客户端，其特征在于，所述优化信息生成单元根据视频的帧间联系生成所述子区域设置优化信息。
CN201310186044.3A 2013-05-20 2013-05-20 服务器、客户端及视频处理方法 Active CN103248705B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201310186044.3A CN103248705B (zh) 2013-05-20 2013-05-20 服务器、客户端及视频处理方法
PCT/CN2013/088931 WO2014187108A1 (zh) 2013-05-20 2013-12-10 服务器、客户端及视频处理方法
US14/892,194 US10313746B2 (en) 2013-05-20 2013-12-10 Server, client and video processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310186044.3A CN103248705B (zh) 2013-05-20 2013-05-20 服务器、客户端及视频处理方法

Publications (2)

Publication Number Publication Date
CN103248705A CN103248705A (zh) 2013-08-14
CN103248705B true CN103248705B (zh) 2016-03-23

Family

ID=48927926

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310186044.3A Active CN103248705B (zh) 2013-05-20 2013-05-20 服务器、客户端及视频处理方法

Country Status (3)

Country Link
US (1) US10313746B2 (zh)
CN (1) CN103248705B (zh)
WO (1) WO2014187108A1 (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103248705B (zh) 2013-05-20 2016-03-23 北京智谷睿拓技术服务有限公司 服务器、客户端及视频处理方法
CN103458235A (zh) * 2013-09-17 2013-12-18 无锡中科苏惠自动化技术有限公司 一种智能视频监控系统
CN103679197B (zh) * 2013-12-09 2018-04-27 华为技术有限公司 一种远程求助方法、终端设备及系统
US10157354B2 (en) * 2014-08-28 2018-12-18 Accenture Global Services Limited Location specific content delivery
CN106375364B (zh) * 2015-12-18 2019-09-20 北京智谷睿拓技术服务有限公司 监控采集方法与设备以及监控播放方法与设备
CN105603360B (zh) * 2016-02-02 2018-06-29 台州市百达电器有限公司 车辆制动卡钳活塞制作方法
JP6598741B2 (ja) * 2016-07-21 2019-10-30 三菱電機ビルテクノサービス株式会社 画像処理装置及びプログラム
TWI681343B (zh) * 2018-12-14 2020-01-01 瑞昱半導體股份有限公司 物件追蹤系統、物件追蹤方法與非暫態電腦可讀取媒體
GB2580625B (en) 2019-01-17 2023-04-19 Mo Sys Engineering Ltd Camera control
CN110134535B (zh) * 2019-05-27 2022-11-04 山东省农业机械科学研究院 一种基于物联网rpc通讯的数据协同与智能识别系统
CN110536154A (zh) * 2019-08-16 2019-12-03 北京达佳互联信息技术有限公司 视频码流分析方法、装置、电子设备及存储介质
CN111506769B (zh) * 2020-04-21 2023-08-29 浙江大华技术股份有限公司 视频文件的处理方法、装置、存储介质及电子装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101908142A (zh) * 2010-08-04 2010-12-08 丁天 一种基于特征分析的视频火焰检测方法
CN102646312A (zh) * 2012-05-11 2012-08-22 武汉大学 一种适于分布式并行处理的森林烟火监测识别方法
CN202404615U (zh) * 2011-11-16 2012-08-29 北京同步科技有限公司 分布式视频图像识别系统
CN102883145A (zh) * 2012-09-28 2013-01-16 安科智慧城市技术（中国）有限公司 一种动态对象识别方法及系统

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004114063A2 (en) * 2003-06-13 2004-12-29 Georgia Tech Research Corporation Data reconstruction using directional interpolation techniques
KR101380777B1 (ko) * 2008-08-22 2014-04-02 정태우 영상에 포함된 객체를 색인하는 방법
JP5458636B2 (ja) 2009-04-07 2014-04-02 ソニー株式会社 情報処理装置、情報処理方法、プログラム、情報提供装置、情報提供方法および情報処理システム
CN101764990A (zh) 2009-12-11 2010-06-30 圆展科技股份有限公司 识别标签呈现方法、呈现系统与视频提供装置、接收装置
US9313535B2 (en) * 2011-02-03 2016-04-12 Ericsson Ab Generating montages of video segments responsive to viewing preferences associated with a video terminal
CN102802138A (zh) * 2011-05-25 2012-11-28 腾讯科技（深圳）有限公司 一种视频文件的处理方法和系统、视频代理系统
JP2012248999A (ja) 2011-05-26 2012-12-13 Mitsubishi Electric Corp 視聴情報収集システムおよび視聴情報収集方法ならびにこれらに用いる視聴情報収集サーバおよびｉｐｔｖ端末
CN102915437A (zh) * 2011-08-02 2013-02-06 腾讯科技（深圳）有限公司 文本信息识别方法及系统
US8712126B2 (en) * 2012-03-12 2014-04-29 Xerox Corporation Web-based system and method for video analysis
CN102638456B (zh) * 2012-03-19 2015-09-23 杭州海康威视数字技术股份有限公司 基于云计算的海量实时视频码流智能分析方法及其系统
CN102693008B (zh) 2012-05-14 2015-11-25 华为终端有限公司 信息的识别方法、装置及终端
CN103248705B (zh) 2013-05-20 2016-03-23 北京智谷睿拓技术服务有限公司 服务器、客户端及视频处理方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101908142A (zh) * 2010-08-04 2010-12-08 丁天 一种基于特征分析的视频火焰检测方法
CN202404615U (zh) * 2011-11-16 2012-08-29 北京同步科技有限公司 分布式视频图像识别系统
CN102646312A (zh) * 2012-05-11 2012-08-22 武汉大学 一种适于分布式并行处理的森林烟火监测识别方法
CN102883145A (zh) * 2012-09-28 2013-01-16 安科智慧城市技术（中国）有限公司 一种动态对象识别方法及系统

Also Published As

Publication number Publication date
US10313746B2 (en) 2019-06-04
CN103248705A (zh) 2013-08-14
WO2014187108A1 (zh) 2014-11-27
US20160112757A1 (en) 2016-04-21

Similar Documents

Publication Publication Date Title
CN103248705B (zh) 服务器、客户端及视频处理方法
CN109783730A (zh) 产品推荐方法、装置、计算机设备和存储介质
CN110851699A (zh) 基于深度强化学习的信息流推荐方法、装置、设备及介质
CN105718184A (zh) 一种数据处理方法和装置
CN103942712A (zh) 基于产品相似度的电子商务推荐系统及其方法
CN109993627B (zh) 推荐方法、推荐模型的训练方法、装置和存储介质
CN104142999A (zh) 搜索结果展示方法及装置
US11748452B2 (en) Method for data processing by performing different non-linear combination processing
CN104615640A (zh) 一种用于提供搜索关键词及进行搜索的方法与装置
CN105989144A (zh) 通知消息管理方法、装置、系统及终端设备
CN104077415A (zh) 搜索方法及装置
CN105574089A (zh) 知识图谱的生成方法及装置、对象对比方法及装置
CN113239275B (zh) 信息推送方法、装置、电子设备和存储介质
CN112818230B (zh) 内容推荐方法、装置、电子设备和存储介质
CN106294564A (zh) 一种视频推荐方法及装置
CN111340240A (zh) 实现自动机器学习的方法及装置
CN112287238B (zh) 用户特征的确定方法和装置、存储介质及电子设备
CN115935185A (zh) 一种推荐模型的训练方法及装置
CN113378067B (zh) 基于用户挖掘的消息推荐方法、设备、介质
CN103744938A (zh) 一种用于生成与目标系统对应的用户页面方法和装置
CN113869377A (zh) 训练方法、装置及电子设备
CN112541806A (zh) 一种基于异质信息网络的推荐方法及装置
CN106570174A (zh) 运行于cmmb超级热点业务平台的大数据分析方法及系统
US20230115855A1 (en) Machine learning approaches for interface feature rollout across time zones or geographic regions
CN114820011A (zh) 用户群体聚类方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant