CN113508391A - 一种数据处理方法、装置和系统、介质和计算机设备 - Google Patents

一种数据处理方法、装置和系统、介质和计算机设备 Download PDF

Info

Publication number
CN113508391A
CN113508391A CN202180001758.5A CN202180001758A CN113508391A CN 113508391 A CN113508391 A CN 113508391A CN 202180001758 A CN202180001758 A CN 202180001758A CN 113508391 A CN113508391 A CN 113508391A
Authority
CN
China
Prior art keywords
video frame
video
analysis result
event
sequence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180001758.5A
Other languages
English (en)
Inventor
王欣鑫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sensetime International Pte Ltd
Original Assignee
Sensetime International Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sensetime International Pte Ltd filed Critical Sensetime International Pte Ltd
Priority claimed from PCT/IB2021/055659 external-priority patent/WO2022259031A1/en
Publication of CN113508391A publication Critical patent/CN113508391A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F17/00—Coin-freed apparatus for hiring articles; Coin-freed facilities or services
    • G07F17/32—Coin-freed apparatus for hiring articles; Coin-freed facilities or services for games, toys, sports, or amusements
    • G07F17/3241—Security aspects of a gaming system, e.g. detecting cheating, device integrity, surveillance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F1/00—Card games
    • A63F1/06—Card games appurtenances
    • A63F1/18—Score computers; Miscellaneous indicators
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/546—Message passing systems or structures, e.g. queues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/44—Event detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/02—Diagnosis, testing or measuring for television systems or their details for colour television signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00—Indexing scheme relating to G06F9/00
    • G06F2209/54—Indexing scheme relating to G06F9/54
    • G06F2209/548—Queue
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Image Analysis (AREA)

Abstract

本公开实施例提供一种数据处理方法、装置和系统、介质和计算机设备，基于预先存储的事件判断逻辑对视频帧序列中的视频帧的解析结果进行事件判断，以确定所述视频帧对应的第一事件，在获取第一事件为误判断的情况下获取所述视频帧在所述视频帧序列中的帧标识，从而能够从视频帧序列中准确地定位出导致误判事件的视频帧，进而基于所述帧标识从消息队列中读取所述视频帧的解析结果，并推送所述视频帧的解析结果，以便能够基于视频帧的解析结果准确地分析出导致误判事件的原因。

Description

一种数据处理方法、装置和系统、介质和计算机设备
相关申请的交叉引用
本专利申请要求于2021年6月11日提交的、申请号为10202106259P、发明名称为“数据处理方法、装置和系统、介质和计算机设备”的新加坡专利申请的优先权，该申请的全文以引用的方式并入本文中。
技术领域
本公开涉及计算机视觉技术领域，尤其涉及一种数据处理方法、装置和系统、介质和计算机设备。
背景技术
实际生产和生活中可能发生一些事件，这些事件往往与事件发生的条件相对应。例如，在游戏场景中，在游戏参与者操作游戏道具的事件中，游戏参与者需遵守游戏规则，例如操作特定的游戏道具的时机需符合游戏规则，当游戏参与者在不符合游戏规则的时机操作了特定的游戏道具，则认为发生了游戏参与者作弊或误操作的事件；在运动员运动的过程中，运动员执行的动作需要达到一定标准。如果运动员的动作未达到相应的标准则认为发生了运动不达标的事件。可以根据事件发生的条件、通过设计一些事件判断逻辑来对这些事件进行自动判断，然而，可能存在误判的情况，需要对误判的情况进行定位以便进一步分析。
发明内容
本公开提供一种数据处理方法、装置和系统、介质和计算机设备，以对误判事件进行定位。
根据本公开实施例的第一方面，提供一种数据处理方法，所述方法包括：获取对视频帧序列中的视频帧进行解析得到的解析结果；基于预先存储的事件判断逻辑对所述视频帧的解析结果进行事件判断，以确定所述视频帧对应的第一事件；在确定所述第一事件为误判断的情况下，将所述第一事件对应的视频帧标记为目标视频帧，并获取所述目标视频帧在所述视频帧序列中的帧标识；基于所述帧标识从消息队列中读取所述目标视频帧的解析结果，所述消息队列用于保存所述视频帧序列中的视频帧的解析结果；推送所述目标视频帧的解析结果。
在一些实施例中，所述方法还包括：向显示单元发送所述第一事件的信息，以使所述显示单元对所述第一事件的信息进行显示。
在一些实施例中，所述第一事件的信息包括所述第一事件对应的视频帧在所述视频帧序列中的帧标识。
在一些实施例中，所述获取对视频帧序列中的视频帧进行解析得到的解析结果，包括：获取远程端传回的视频帧序列；对所述视频帧序列中的视频帧进行解析，得到所述视频帧的解析结果。
在一些实施例中，所述获取远程端传回的所述视频帧序列，包括：将所述视频帧序列拷贝到本地测试环境中；将视频帧序列的输入源切换为拷贝到本地测试环境中的视频帧序列。
在一些实施例中，所述获取对视频帧序列中的视频帧进行解析得到的解析结果，包括：从远程端获取携带所述视频帧序列中的视频帧的解析结果的文本信息，所述文本信息通过所述远程端对所述视频帧序列中的视频帧进行解析后生成。
在一些实施例中，所述视频帧的解析结果以指定的主题在预设的消息队列中发布；所述获取对视频帧序列中的视频帧进行解析得到的解析结果，包括：通过订阅所述指定的主题的方式获取所述视频帧的解析结果。
在一些实施例中，所述第一事件的信息包括所述第一事件对应的视频帧在所述视频帧序列中的帧标识；所述通过订阅所述指定的主题的方式获取所述视频帧的解析结果，包括：在接收到调用所述目标视频帧的解析结果的指令的情况下，根据所述目标视频帧的所述帧标识，确定所述目标视频帧的解析结果对应的主题；根据所述目标视频帧的解析结果对应的主题，从所述消息队列中提取出所述目标视频帧的解析结果。
在一些实施例中，所述视频帧序列中的视频帧的数量大于1，所述视频帧序列中的至少两帧视频帧由目标区域周围的至少两个视角的至少两个视频采集装置分别采集得到；所述获取对视频帧序列中的视频帧进行解析得到的解析结果，包括：对所述至少两个视频采集装置分别采集的多帧单视角视频帧中的每一帧单视角视频帧进行同步处理；获取所述每一帧单视角视频帧的初始解析结果；对同步后的多帧单视角视频帧的初始解析结果进行融合，得到所述同步后的多帧单视角视频帧的解析结果。
在一些实施例中，所述视频帧序列通过对目标区域进行视频采集得到；所述获取对视频帧序列中的视频帧进行解析得到的解析结果，包括：在远程端确定所述目标区域内发生不符合预设条件的事件的情况下，获取对视频帧序列中的视频帧进行解析得到的解析结果。
在一些实施例中，所述目标视频帧还包括所述视频帧序列中与所述视频帧之间间隔小于预设帧数的其他视频帧。
在一些实施例中，在所述第一事件与用户基于所述视频帧确定的第二事件不一致的情况下，确定所述第一事件为误判断。
根据本公开实施例的第二方面，提供一种数据处理装置，所述装置包括：第一获取模块，用于获取对视频帧序列中的视频帧进行解析得到的解析结果；事件判断模块，用于基于预先存储的事件判断逻辑对所述视频帧的解析结果进行事件判断，以确定所述视频帧对应的第一事件；第二获取模块，用于在确定所述第一事件为误判断的情况下，将所述第一事件对应的视频帧标记为目标视频帧，并获取所述目标视频帧在所述视频帧序列中的帧标识；读取模块，用于基于所述帧标识从消息队列中读取所述目标视频帧的解析结果，所述消息队列用于保存所述视频帧序列中的视频帧的解析结果；推送模块，用于推送所述目标视频帧的解析结果。
在一些实施例中，所述装置还包括：发送模块，用于向显示单元发送所述第一事件的信息，以使所述显示单元对所述第一事件的信息进行显示。
在一些实施例中，所述第一事件的信息包括所述第一事件对应的视频帧在所述视频帧序列中的帧标识。
在一些实施例中，所述第一获取模块包括：第一获取单元，用于获取远程端传回的视频帧序列；解析单元，用于对所述视频帧序列中的视频帧进行解析，得到所述视频帧的解析结果。
在一些实施例中，所述第一获取单元包括：拷贝子单元，用于将所述视频帧序列拷贝到本地测试环境中；切换子单元，用于将视频帧序列的输入源切换为拷贝到本地测试环境中的视频帧序列。
在一些实施例中，所述第一获取模块包括：第二获取单元，用于从远程端获取携带所述视频帧序列中的视频帧的解析结果的文本信息，所述文本信息通过所述远程端对所述视频帧序列中的视频帧进行解析后生成。
在一些实施例中，所述视频帧的解析结果以指定的主题在预设的消息队列中发布；所述第一获取模块用于：通过订阅所述指定的主题的方式获取所述视频帧的解析结果。
在一些实施例中，所述第一事件的信息包括所述第一事件对应的视频帧在所述视频帧序列中的帧标识；所述第一获取模块包括：确定单元，用于在接收到调用所述目标视频帧的解析结果的指令的情况下，根据所述目标视频帧的所述帧标识，确定所述目标视频帧的解析结果对应的主题；提取单元，用于根据所述目标视频帧的解析结果对应的主题，从所述消息队列中提取出所述目标视频帧的解析结果。
在一些实施例中，所述视频帧序列中的视频帧的数量大于1，所述视频帧序列中的至少两帧视频帧由目标区域周围的至少两个视角的至少两个视频采集装置分别采集得到；所述第一获取模块包括：同步处理模块，用于对所述至少两个视频采集装置分别采集的多帧单视角视频帧中的每一帧单视角视频帧进行同步处理；初始解析结果获取模块，用于获取所述每一帧单视角视频帧的初始解析结果；融合模块，用于对同步后的多帧单视角视频帧的初始解析结果进行融合，得到所述同步后的多帧单视角视频帧的解析结果。
在一些实施例中，所述视频帧序列通过对目标区域进行视频采集得到；所述第一获取模块用于：在远程端确定所述目标区域内发生不符合预设条件的事件的情况下，获取对视频帧序列中的视频帧进行解析得到的解析结果。
在一些实施例中，所述目标视频帧还包括所述视频帧序列中与所述视频帧之间间隔小于预设帧数的其他视频帧。
在一些实施例中，在所述第一事件与用户基于所述视频帧确定的第二事件不一致的情况下，确定所述第一事件为误判断。
根据本公开实施例的第三方面，提供一种数据处理系统，所述系统包括：设于目标区域周围的视频采集装置，用于采集所述目标区域的视频帧序列；以及与所述视频采集装置通信连接的处理单元，用于执行本公开任一实施例所述的方法。
根据本公开实施例的第四方面，提供一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现任一实施例所述的方法。
根据本公开实施例的第五方面，提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现任一实施例所述的方法。
本公开实施例基于预先存储的事件判断逻辑对视频帧序列中的视频帧的解析结果进行事件判断，以确定所述视频帧对应的第一事件，在第一事件为误判断的情况下获取所述视频帧在所述视频帧序列中的帧标识，从而能够从视频帧序列中准确地定位出导致误判事件的视频帧，进而基于所述帧标识从消息队列中读取所述视频帧的解析结果，并推送所述视频帧的解析结果，以便能够基于视频帧的解析结果准确地分析出导致误判事件的原因。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，而非限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，这些附图示出了符合本公开的实施例，并与说明书一起用于说明本公开的技术方案。
图1是本公开实施例的数据处理方法的流程图。
图2A和图2B分别是本公开实施例的数据传输过程的示意图。
图3是本公开实施例的消息队列的示意图。
图4是本公开实施例的融合同步过程的示意图。
图5是本公开实施例的显示界面的示意图。
图6是本公开实施例的网络架构的示意图。
图7A和图7B是本公开实施例的数据处理的总体流程。
图8是本公开实施例的数据处理装置的框图。
图9是本公开实施例的数据处理系统的示意图。
图10是本公开实施例的计算机设备的结构示意图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
在本公开使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本公开。在本公开和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。另外，本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合。
应当理解，尽管在本公开可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本公开范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
为了使本技术领域的人员更好的理解本公开实施例中的技术方案，并使本公开实施例的上述目的、特征和优点能够更加明显易懂，下面结合附图对本公开实施例中的技术方案作进一步详细的说明。
如图1所示，本公开实施例提供一种数据处理方法，所述方法包括：
步骤101：获取对视频帧序列中的视频帧进行解析得到的解析结果；
步骤102：基于预先存储的事件判断逻辑对所述视频帧的解析结果进行事件判断，以确定所述视频帧对应的第一事件；
步骤103：在确定所述第一事件为误判断的情况下，将所述第一事件对应的视频帧标记为目标视频帧，并获取所述目标视频帧在所述视频帧序列中的帧标识；
步骤104：基于所述帧标识从消息队列中读取所述目标视频帧的目标解析结果，所述消息队列用于保存所述视频帧序列中的视频帧的解析结果；
步骤105：推送所述目标视频帧的所述目标解析结果。
在步骤101中，视频帧序列中可以包括一帧或多帧按照时间顺序排列的视频帧，所述时间可以是所述视频帧被采集的时间。所述视频帧序列可以包括一个视频中的部分视频帧或全部视频帧，可以通过设置在目标区域周围的视频采集装置(例如摄像头)对目标区域进行视频采集，得到所述视频，再按照一定的选帧策略从采集的视频中选取视频帧，构成所述视频帧序列。
一个视频帧的解析结果中可以包括对所述视频帧进行目标对象检测和/或识别得到的检测结果和/或识别结果，所述检测结果可以包括用于指示所述视频帧中是否包括目标对象的信息，例如所述目标对象的位置信息、尺寸信息、数量信息等，所述识别结果可以包括所述视频帧中目标对象的类别信息。或者，解析结果可以包括对视频帧中的目标对象之间的关联关系进行分析得到的关联结果。
可以获取远程端传回的所述目标区域的视频帧序列，在本地对所述视频帧序列中的视频帧进行解析，得到所述视频帧的解析结果。如图2A所示，在通过本地对所述视频帧序列中的视频帧进行解析的情况下，可以将视频帧序列从远程端拷贝到本地测试环境中，然后将视频帧序列的输入源从其他数据源(例如，摄像头输入源)切换为拷贝到本地测试环境中的视频帧序列，所述摄像头输入源用于获取本地摄像头采集的视频帧序列。其中，所述远程端可以是采集视频帧序列的一端，例如，设于目标区域周围的视频采集装置采集到视频帧序列之后，直接向本地传输视频帧序列。或者，所述远程端也可以是除采集视频帧序列的一端以外的其他终端，例如，设于目标区域周围的视频采集装置采集到视频帧序列之后，将视频帧序列先传输到其他终端，再由其他终端传输到本地。
如图2B所示，也可以通过远程端对所述视频帧序列中的视频帧进行解析，生成携带所述视频帧序列中的视频帧的解析结果的文本信息，并将所述文本信息回传到本地。通过这种方式，远程端和本地之间无需传输视频帧本身，只需要传输文本信息，有效减少了数据传输量，提高了数据传输效率。所述文本信息可以在远程端解析视频帧的过程中实时传输回本地，也可以由远程端先进行缓存，并在符合一定条件的情况下将缓存的文本信息传输回本地。所述文本信息可以是私有协议格式的文本，从而提高数据传输的安全性。
所述视频帧的解析结果可以存储在消息队列中，并在需要时从所述消息队列中读出。例如，所述视频帧的解析结果以指定的主题(topic)在预设的消息队列中发布，这样，订阅该主题的接收端可以从消息队列获取视频帧的解析结果。其中，为了提高所述解析结果的获取效率，每个主题可对应于一个或多个事件判断逻辑，如图3所示，主题1消息队列对应于事件判断逻辑1和事件判断逻辑2，从而事件判断逻辑1和事件判断逻辑2可以从主题1消息队列中获取视频帧的解析结果；主题2消息队列对应于事件判断逻辑3，从而事件判断逻辑3可以从主题2消息队列中获取视频帧的解析结果；主题3消息队列对应于事件判断逻辑4，从而事件判断逻辑4可以从主题3消息队列中获取视频帧的解析结果。
在一些实施例中，所述视频帧序列中的视频帧的数量大于1，所述视频帧序列中的至少两帧视频帧由目标区域周围的至少两个视角的至少两个视频采集装置分别采集得到。在这种情况下，可以对所述至少两个视频采集装置分别采集的多帧单视角视频帧中的每一帧单视角视频帧进行同步处理；获取所述每一帧单视角视频帧的初始解析结果；对同步后的多帧单视角视频帧的初始解析结果进行融合，得到所述同步后的多帧单视角视频帧的解析结果。
如图4所示，可以在目标区域的周围设置三个摄像头，各个摄像头分别设置在目标区域周围的不同位置处，并以不同的视角采集目标区域的视频帧。例如，摄像头1可以设置在目标区域正上方，通过俯视视角(bird view)采集目标区域的视频帧，摄像头2和摄像头3可以分别设置在目标区域的两侧，通过侧视视角(side view)采集目标区域的视频帧。可以对摄像头1采集的视频帧1、摄像头2采集的视频帧2、摄像头3采集的视频帧3进行帧同步，其中，视频帧1、视频帧2和视频帧3可以是同一时刻采集到的视频帧。还可以分别获取视频帧1的初始解析结果、视频帧2的初始解析结果和视频帧3的初始解析结果，并将视频帧2和视频帧3的初始解析结果融合到视频帧1的初始解析结果中，得到视频帧1的解析结果。其中，获取视频帧初始解析结果的步骤可以在帧同步之前或之后，也可以与帧同步过程同时进行，本公开对此不做限制。
例如，通过对目标区域上方的摄像头采集的t1时刻的视频帧进行解析，获取的初始解析结果中包括t1时刻目标区域内的堆叠物的位置，通过对目标区域侧方的摄像头采集的t1时刻的视频帧进行解析，获取的初始解析结果中包括t1时刻目标区域内的堆叠物的数量，对两个摄像头采集的t1时刻的视频帧的初始解析结果进行融合，可以得到t1时刻在所述位置处的堆叠物的数量。
在步骤102中，可以基于预先存储的事件判断逻辑对所述视频帧的解析结果进行事件判断。所述事件判断逻辑可以包括对视频帧中目标对象的放置位置的判断逻辑、放置顺序的判断逻辑、放置时间的判断逻辑、对目标对象的数量的判断逻辑等。例如，基于视频帧中目标对象的位置信息，判断所述视频帧中目标对象的放置位置是否符合第一预设条件；基于至少两帧视频帧中目标对象的位置信息，判断所述至少两帧视频帧中目标对象的放置顺序是否符合第二预设条件；基于所述视频帧的时间戳判断视频帧中目标对象的放置时间是否符合第三预设条件；判断检测到的所述视频帧中目标对象的数量是否符合第四预设条件。除了以上判断逻辑之外，本公开实施例中的事件判断逻辑还可以包括其他判断逻辑，且各判断逻辑对应的判断方式也可以采用其他判断方式，此处不再一一列举。
在步骤103中，如果所述第一事件为误判，则确定所述第一事件对应的视频帧为目标视频帧。可选地，确定所述第一事件是否为误判的过程可以由人工执行，例如，可以由用户观看所述视频帧并进行事件判断确定发生的事件为第二事件，对所述第一事件与第二事件进行对比，如果所述第一事件与所述第二事件不一致，则用户确定所述第一事件为误判。通过观看视频帧，用户能够直观且准确地基于视频帧确定真实发生的第二事件，并以该第二事件作为真值(ground truth)，来确定算法识别出的第一事件是否为误判，从而提高了确定事件是否误判的准确性。用户在对比过程中，可以逐帧地读取已缓存的视频帧，从而避免了因实时采集的视频帧的刷新频率过快导致难以及时地观察到视频帧中的第二事件的情况。
或者，可选地，确定目标视频帧的过程也可以是自动实现的。例如，可以获取其他终端基于所述视频帧确定的第二事件，如果所述其他终端所确定的第二事件与所述第一事件不一致，则在本地确定所述第一事件为误判。其中，所述其他终端基于预先存储的事件判断逻辑对参考视频帧进行解析得到的解析结果进行事件判断，以确定所述参考视频帧对应的第二事件，所述参考视频帧与所述视频帧同步，且所述参考视频帧满足以下至少任一条件：所述参考视频帧的分辨率高于所述视频帧；所述事件判断逻辑用于对所述视频帧和所述参考视频帧中的目标对象发生的事件进行判断，且所述参考视频帧中目标对象的完整度高于所述视频帧中目标对象的完整度；用于对所述参考视频帧进行解析的解析算法的准确度高于用于对所述视频帧进行解析的解析算法的准确度。
在所述视频帧为目标视频帧的情况下，可以获取所述目标视频帧的帧标识，所述帧标识可以是所述目标视频帧的帧号，也可以是所述目标视频帧的时间戳，或者是其他用于区分所述视频帧与所述视频帧序列中其他视频帧的信息。通过帧标识可以准确定位出事件判断有误的目标视频帧。
为了便于确定所述第一事件是否为误判，可以向显示单元发送所述第一事件的信息，以使所述显示单元对所述第一事件的信息进行显示，以便用户可以更直观地进行判断。如图5所示，基于预先存储的事件判断逻辑对视频帧N1的解析结果进行事件判断，确定的第一事件为在目标区域501的子区域501a中放置了游戏道具s1，进而可以在显示单元上将游戏道具s1放置在子区域501a内。进一步地，还可以确定游戏道具在子区域501a中的坐标，从而使显示单元显示的信息更加准确。同理，基于预先存储的事件判断逻辑对视频帧N2的解析结果进行事件判断，确定的第一事件为在目标区域501的子区域501b中放置了游戏道具s2；基于预先存储的事件判断逻辑对视频帧N3的解析结果进行事件判断，确定的第一事件为在目标区域501的子区域501a中放置了游戏道具s3。可以相应地在显示界面上显示视频帧N2对应的第一事件的信息以及视频帧N3对应的第一事件的信息。
进一步地，还可以基于多帧视频帧(例如图5中的视频帧N1、N2和N3)三者，共同确定第一事件，所述第一事件可以是在子区域501a和子区域501b中放置游戏道具的顺序。假设视频帧N1在视频帧N2之前采集到，视频帧N2在视频帧N3之前采集到，则可以确定放置游戏道具的顺序为先在子区域501a中放置游戏道具，再在子区域501b中放置游戏道具，最后在子区域501a中放置游戏道具。通过依次显示视频帧N1、N2和N3对应的第一事件的信息，可以确定放置游戏道具的顺序。
进一步地，所述第一事件的信息包括所述第一事件对应的视频帧在所述视频帧序列中的帧标识。例如，在图5所示的实施例中，可以在显示界面上显示视频帧的帧号N1、N2或N3。本领域技术人员可以理解，帧标识的显示位置除了图中所示的位置之外，还可以显示在显示界面的其他位置，本公开对此不作限制。
在步骤104中，可以基于所述帧标识从消息队列中读取所述目标视频帧的解析结果。在所述视频帧的解析结果以指定的主题在预设的消息队列中发布的情况下，可以通过订阅所述指定的主题的方式获取所述视频帧的解析结果。
在接收到调用所述目标视频帧的解析结果的指令的情况下，根据所述目标视频帧的所述帧标识，确定所述目标视频帧的解析结果对应的主题；根据所述目标视频帧的解析结果对应的主题，从所述消息队列中提取出所述目标视频帧的解析结果。调用所述目标视频帧的解析结果的指令可以由用户通过点击显示界面上的指定控件、输入所述目标视频帧的帧标识或者其他方式输入，所述指令可以包括所述视频帧的帧标识。视频帧的解析结果中也可以包括所述视频帧的帧标识，基于指令中的帧标识以及视频帧的解析结果中的帧标识，可以获取目标视频帧的解析结果。
在步骤105中，可以将所述目标视频帧的解析结果推送到所述显示界面，以供用户查看。用户通过分析解析结果，可以确定目标视频帧对应的第一事件的误判是由于对目标视频帧进行检测识别错误导致的，还是由于事件判断逻辑导致的。
在一些实施例中，所述视频帧序列通过对目标区域进行视频采集得到；可以在远程端对采集到的视频帧序列中的视频帧进行解析，得到解析结果，并基于视频帧的解析结果确定第三事件。在远程端确定所述目标区域内发生不符合预设条件的事件的情况下，获取对视频帧序列中的视频帧进行解析得到的解析结果。在实际应用中，往往只需要确定判定为不符合预设条件的事件的判断结果是否正确。例如，在判定游戏参与者在游戏过程中的操作违规的情况下，才需要去验证游戏参与者是否确实存在违规操作；又例如，在判定车辆存在违章行为的情况下，才需要去验证车辆是否确实存在违章行为。本实施例先通过远程端确定述目标区域内是否发生不符合预设条件的事件，从而能够筛选出需要对事件判断结果进行验证的情况，从而无需对所有的视频帧都进行解析。
其中，所述目标区域内发生不符合预设条件的事件，可以是所述远程端针对所述视频帧序列中任意一帧或多帧视频帧的解析结果确定的第三事件不符合预设条件。例如，远程端针对某一帧视频帧的解析结果确定的游戏道具的放置位置不在所述游戏道具的可放置区域内；又例如，远程端针对多帧视频帧的解析结果确定的游戏道具的放置顺序不符合预设顺序。在这种情况下，可以触发步骤101的操作，以便确定远程端确定所述目标区域内发生不符合预设条件的事件的确定结果是否正确。
在一些实施例中，所述目标视频帧还包括所述视频帧序列中与所述视频帧之间间隔小于预设帧数的其他视频帧。例如，所述目标视频帧为视频帧序列中的第i帧视频帧，则可以将视频帧序列中的第i-1帧，i-2帧，……，i-k帧视频帧和/或视频帧序列中的第i+1帧，i+2帧，……，i+k帧视频帧均确定为目标视频帧。其中，k为正整数。
本公开实施例的方法可用于图6所示的网络架构。该网络架构包括两层，即平台层和业务层。其中，平台层用于获取对视频帧序列中的视频帧进行解析得到的解析结果，以及以指定的主题将解析结果发布到消息队列中。平台层可包括检测算法和识别算法中的至少一种。业务层用于基于预先存储的事件判断逻辑对所述视频帧的解析结果进行事件判断。所述事件可以包括但不限于以下至少任一：游戏道具放置时间是否满足预设条件的事件、游戏道具放置位置是否满足预设条件的事件、游戏道具放置顺序是否满足预设条件的事件、游戏道具类型是否满足预设条件的事件等。
本公开实施例的方案可用于游戏场所场景。在该场景下，真实测试环境很难搭建，需要游戏桌、专有游戏币、专有扑克牌、新加坡币、标志物(marker)等。测试过程中如果发现系统表现和预期不符合，很难查找问题。为了解决这个难题，我们想出了两种方法来做问题定位(trouble shoot)。具体可采用以下任一方式：
如图7A所示，方式一包括以下步骤：
(1)在测试现场重复刚才出现问题那局游戏管理者和玩家的操作来复现问题，并通过平台层录制视频。
(2)将录制好的视频拷贝到开发或者测试环境上，在开发或者测试环境上通过平台层把数据输入源从摄像头改为本地视频。
(3)在读取视频后，算法将视频帧的解析结果给平台层，平台层将做过相机融合和帧同步的数据推送到消息队列(MQ)的指定主题(topic)。
(4)业务层从MQ拿到复现出问题的视频经平台层处理后的解析结果，进行事件判断，并且将事件判断后确定的第一事件的信息推送给显示单元(debug UI)。
(5)debug UI会将第一事件的信息用图形界面展示在web页面上，并且web页面上会显示当前处理的视频帧的帧号。
(6)开发人员可以通过观察debug UI找到出问题的是哪一帧或者哪几帧数据。
(7)然后根据帧号在MQ指定topic中找到对应的目标视频帧的解析结果。
(8)对照目标视频帧分析是算法检测识别关联的错误还是业务层处理的错误。
如图7B所示，方式二包括以下步骤：
(1)在测试现场重复刚才出现问题那局游戏管理者和玩家的操作来复现问题，并通过平台层将出问题那局游戏中平台层发给MQ特定topic让业务层消费的消息写为私有协议格式的文本。
(2)将这个私有协议格式的文本拷贝到开发或者测试环境上，在开发或者测试环境上通过启动一个解析程序读取文本数据并发送到本地MQ特定topic中让业务层消费。
(3)这样就跳过了算法和平台层，业务层可以从MQ拿到复现出问题的视频经平台层处理后的数据进行处理，并且将处理后的结果推送给debug UI。
(4)debug UI会将第一事件的信息用图形界面展示在web页面上，并且web页面上会显示当前处理的视频帧的帧号。
(5)开发人员可以通过观察debug UI找到出问题的是哪一帧或者哪几帧数据。
(6)然后根据帧号在MQ指定topic中找到对应的目标视频帧的解析结果。
(7)对照目标视频帧分析是算法检测识别关联的错误还是业务层处理的错误。
本领域技术人员可以理解，在具体实施方式的上述方法中，各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定，各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
如图8所示，本公开还提供一种数据处理装置，所述装置包括：
第一获取模块801，用于获取对视频帧序列中的视频帧进行解析得到的解析结果；
事件判断模块802，用于基于预先存储的事件判断逻辑对所述视频帧的解析结果进行事件判断，以确定所述视频帧对应的第一事件；
第二获取模块803，用于在确定所述第一事件为误判断的情况下，将所述第一事件对应的视频帧标记为目标视频帧，并获取所述目标视频帧在所述视频帧序列中的帧标识；
读取模块804，用于基于所述帧标识从消息队列中读取所述目标视频帧的解析结果，所述消息队列用于保存所述视频帧序列中的视频帧的解析结果；
推送模块805，用于推送所述目标视频帧的解析结果。
在一些实施例中，所述装置还包括：发送模块，用于向显示单元发送所述第一事件的信息，以使所述显示单元对所述第一事件的信息进行显示。
在一些实施例中，所述第一事件的信息包括所述第一事件对应的视频帧在所述视频帧序列中的帧标识。
在一些实施例中，所述第一获取模块包括：第一获取单元，用于获取远程端传回的视频帧序列；解析单元，用于对所述视频帧序列中的视频帧进行解析，得到所述视频帧的解析结果。
在一些实施例中，所述第一获取单元包括：拷贝子单元，用于将所述视频帧序列拷贝到本地测试环境中；切换子单元，用于将视频帧序列的输入源切换为拷贝到本地测试环境中的视频帧序列。
在一些实施例中，所述第一获取模块包括：第二获取单元，用于从远程端获取携带所述视频帧序列中的视频帧的解析结果的文本信息，所述文本信息通过所述远程端对所述视频帧序列中的视频帧进行解析后生成。
在一些实施例中，所述视频帧的解析结果以指定的主题在预设的消息队列中发布；所述第一获取模块用于：通过订阅所述指定的主题的方式获取所述视频帧的解析结果。
在一些实施例中，所述第一事件的信息包括所述第一事件对应的视频帧在所述视频帧序列中的帧标识；所述第一获取模块包括：确定单元，用于在接收到调用所述目标视频帧的解析结果的指令的情况下，根据所述目标视频帧的所述帧标识，确定所述目标视频帧的解析结果对应的主题；提取单元，用于根据所述目标视频帧的解析结果对应的主题，从所述消息队列中提取出所述目标视频帧的解析结果。
在一些实施例中，所述视频帧序列中的视频帧的数量大于1，所述视频帧序列中的至少两帧视频帧由目标区域周围的至少两个视角的至少两个视频采集装置分别采集得到；所述第一获取模块包括：同步处理模块，用于对所述至少两个视频采集装置分别采集的多帧单视角视频帧中的每一帧单视角视频帧进行同步处理；初始解析结果获取模块，用于获取所述每一帧单视角视频帧的初始解析结果；融合模块，用于对同步后的多帧单视角视频帧的初始解析结果进行融合，得到所述同步后的多帧单视角视频帧的解析结果。
在一些实施例中，所述视频帧序列通过对目标区域进行视频采集得到；所述第一获取模块用于：在远程端确定所述目标区域内发生不符合预设条件的事件的情况下，获取对视频帧序列中的视频帧进行解析得到的解析结果。
在一些实施例中，所述目标视频帧还包括所述视频帧序列中与所述视频帧之间间隔小于预设帧数的其他视频帧。
在一些实施例中，在所述第一事件与用户基于所述视频帧确定的第二事件不一致的情况下，确定所述第一事件为误判断。
在一些实施例中，本公开实施例提供的装置具有的功能或包含的模块可以用于执行上文方法实施例描述的方法，其具体实现可以参照上文方法实施例的描述，为了简洁，这里不再赘述。
如图9所示，本公开还提供一种数据处理系统，所述系统包括：
设于目标区域周围的视频采集装置901，用于采集所述目标区域的视频帧序列；以及
与所述视频采集装置通信连接的处理单元902，用于执行本公开任一实施例所述的方法。
本说明书实施例还提供一种计算机设备，其至少包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中，处理器执行所述程序时实现前述任一实施例所述的方法。
图10示出了本说明书实施例所提供的一种更为具体的计算设备硬件结构示意图，该设备可以包括：处理器1001、存储器1002、输入/输出接口1003、通信接口1004和总线1005。其中处理器1001、存储器1002、输入/输出接口1003和通信接口1004通过总线1005实现彼此之间在设备内部的通信连接。
处理器1001可以采用通用的CPU(Central Processing Unit，中央处理器)、微处理器、应用专用集成电路(Application Specific Integrated Circuit，ASIC)、或者一个或多个集成电路等方式实现，用于执行相关程序，以实现本说明书实施例所提供的技术方案。处理器1001还可以包括显卡，所述显卡可以是Nvidia titan X显卡或者1080Ti显卡等。
存储器1002可以采用ROM(Read Only Memory，只读存储器)、RAM(Random AccessMemory，随机存取存储器)、静态存储设备，动态存储设备等形式实现。存储器1002可以存储操作系统和其他应用程序，在通过软件或者固件来实现本说明书实施例所提供的技术方案时，相关的程序代码保存在存储器1002中，并由处理器1001来调用执行。
输入/输出接口1003用于连接输入/输出模块，以实现信息输入及输出。输入输出/模块可以作为组件配置在设备中(图中未示出)，也可以外接于设备以提供相应功能。其中输入设备可以包括键盘、鼠标、触摸屏、麦克风、各类传感器等，输出设备可以包括显示器、扬声器、振动器、指示灯等。
通信接口1004用于连接通信模块(图中未示出)，以实现本设备与其他设备的通信交互。其中通信模块可以通过有线方式(例如USB、网线等)实现通信，也可以通过无线方式(例如移动网络、WIFI、蓝牙等)实现通信。
总线1005包括一通路，在设备的各个组件(例如处理器1001、存储器1002、输入/输出接口1003和通信接口1004)之间传输信息。
需要说明的是，尽管上述设备仅示出了处理器1001、存储器1002、输入/输出接口1003、通信接口1004以及总线1005，但是在具体实施过程中，该设备还可以包括实现正常运行所必需的其他组件。此外，本领域的技术人员可以理解的是，上述设备中也可以仅包含实现本说明书实施例方案所必需的组件，而不必包含图中所示的全部组件。
本公开实施例还提供一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现前述任一实施例所述的方法。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
通过以上的实施方式的描述可知，本领域的技术人员可以清楚地了解到本说明书实施例可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本说明书实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本说明书实施例各个实施例或者实施例的某些部分所述的方法。
上述实施例阐明的系统、装置、模块或单元，具体可以由计算机芯片或实体实现，或者由具有某种功能的产品来实现。一种典型的实现设备为计算机，计算机的具体形式可以是个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件收发设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任意几种设备的组合。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的模块可以是或者也可以不是物理上分开的，在实施本说明书实施例方案时可以把各模块的功能在同一个或多个软件和/或硬件中实现。也可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
以上所述仅是本说明书实施例的具体实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本说明书实施例原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本说明书实施例的保护范围。

Claims (21)

1.一种数据处理方法，所述方法包括：
获取对视频帧序列中的视频帧进行解析得到的解析结果；
基于预先存储的事件判断逻辑对所述视频帧的解析结果进行事件判断，以确定所述视频帧对应的第一事件；
在确定所述第一事件为误判断的情况下，将所述第一事件对应的视频帧标记为目标视频帧，并获取所述目标视频帧在所述视频帧序列中的帧标识；
基于所述帧标识从消息队列中读取所述目标视频帧的解析结果，所述消息队列用于保存所述视频帧序列中的各视频帧的解析结果；
推送所述目标视频帧的解析结果。
2.根据权利要求1所述的方法，所述方法还包括：
向显示单元发送所述第一事件的信息，以使所述显示单元对所述第一事件的信息进行显示。
3.根据权利要求2所述的方法，所述第一事件的信息包括所述第一事件对应的视频帧在所述视频帧序列中的帧标识。
4.根据权利要求1-3任一所述的方法，获取对所述视频帧序列中的视频帧进行解析得到的解析结果，包括：
获取远程端传回的视频帧序列；
对所述视频帧序列中的视频帧进行解析，得到所述视频帧的解析结果。
5.根据权利要求4所述的方法，获取所述远程端传回的所述视频帧序列，包括：
将所述视频帧序列拷贝到本地测试环境中；
将视频帧序列的输入源切换为拷贝到本地测试环境中的视频帧序列。
6.根据权利要求1-3任一所述的方法，获取所述对视频帧序列中的视频帧进行解析得到的解析结果，包括：
从远程端获取携带所述视频帧序列中的视频帧的解析结果的文本信息，所述文本信息通过所述远程端对所述视频帧序列中的视频帧进行解析后生成。
7.根据权利要求1-6任一所述的方法，其中，所述视频帧的解析结果以指定的主题在预设的消息队列中发布；获取对所述视频帧序列中的视频帧进行解析得到的解析结果，包括：
通过订阅所述指定的主题的方式获取所述视频帧的解析结果。
8.根据权利要求7所述的方法，其中，所述第一事件的信息包括所述第一事件对应的视频帧在所述视频帧序列中的帧标识；通过订阅所述指定的主题的方式获取所述视频帧的解析结果，包括：
在接收到调用所述目标视频帧的解析结果的指令的情况下，根据所述目标视频帧的所述帧标识，确定所述目标视频帧的解析结果对应的主题；
根据所述目标视频帧的解析结果对应的主题，从所述消息队列中提取出所述目标视频帧的解析结果。
9.根据权利要求1-8任一所述的方法，其中，所述视频帧序列中的视频帧的数量大于1，所述视频帧序列中的视频帧由目标区域周围的视角不同的至少两个视频采集装置分别采集得到；获取对所述视频帧序列中的视频帧进行解析得到的解析结果，包括：
对所述至少两个视频采集装置分别采集的多帧单视角视频帧中的每一帧单视角视频帧进行同步处理；
获取所述每一帧单视角视频帧的初始解析结果；
对同步后的多帧单视角视频帧的初始解析结果进行融合，得到所述同步后的多帧单视角视频帧的解析结果。
10.根据权利要求1-9任一所述的方法，其中，所述视频帧序列通过对目标区域进行视频采集得到；获取对所述视频帧序列中的视频帧进行解析得到的解析结果，包括：
在远程端确定所述目标区域内发生不符合预设条件的事件的情况下，获取对视频帧序列中的视频帧进行解析得到的解析结果。
11.根据权利要求1-10任一所述的方法，其中，所述目标视频帧还包括所述视频帧序列中与所述第一事件对应的视频帧之间间隔小于预设帧数的其他视频帧。
12.根据权利要求1-11任一所述的方法，其中，在所述第一事件与用户基于所述视频帧确定的第二事件不一致的情况下，确定所述第一事件为误判断。
13.一种数据处理装置，所述装置包括：
第一获取模块，用于获取对视频帧序列中的视频帧进行解析得到的解析结果；
事件判断模块，用于基于预先存储的事件判断逻辑对所述视频帧的解析结果进行事件判断，以确定所述视频帧对应的第一事件；
第二获取模块，用于在确定所述第一事件为误判断的情况下，将所述第一事件对应的视频帧标记为目标视频帧，并获取所述目标视频帧在所述视频帧序列中的帧标识；
读取模块，用于基于所述帧标识从消息队列中读取所述目标视频帧的解析结果，所述消息队列用于保存所述视频帧序列中的各视频帧的解析结果；
推送模块，用于推送所述目标视频帧的解析结果。
14.根据权利要求13所述的装置，所述第一获取模块包括：
第一获取单元，用于获取远程端传回的视频帧序列；
解析单元，用于对所述视频帧序列中的视频帧进行解析，得到所述视频帧的解析结果。
15.根据权利要求13或14所述的装置，所述第一获取模块包括：
第二获取单元，用于从远程端获取携带所述视频帧序列中的视频帧的解析结果的文本信息，所述文本信息通过所述远程端对所述视频帧序列中的视频帧进行解析后生成。
16.根据权利要求13-15任一所述的装置，其中，所述视频帧的解析结果以指定的主题在预设的消息队列中发布；所述第一获取模块用于：
通过订阅所述指定的主题的方式获取所述视频帧的解析结果。
17.根据权利要求16所述的装置，其中，所述第一事件的信息包括所述第一事件对应的视频帧在所述视频帧序列中的帧标识；
所述第一获取模块包括：
确定单元，用于在接收到调用所述目标视频帧的解析结果的指令的情况下，根据所述目标视频帧的所述帧标识，确定所述目标视频帧的解析结果对应的主题；
提取单元，用于根据所述目标视频帧的解析结果对应的主题，从所述消息队列中提取出所述目标视频帧的解析结果。
18.一种数据处理系统，所述系统包括：
设于目标区域周围的视频采集装置，用于采集所述目标区域的视频帧序列；以及
与所述视频采集装置通信连接的处理单元，用于执行权利要求1-12任一所述的方法。
19.一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现权利要求1至12任意一项所述的方法。
20.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现权利要求1至12任意一项所述的方法。
21.一种计算机程序，包括计算机可读代码，其特征在于，当所述计算机可读代码在电子设备中的处理器上运行时，所述处理器执行用于实现权利要求1至12任一所述的方法。
CN202180001758.5A 2021-06-11 2021-06-25 一种数据处理方法、装置和系统、介质和计算机设备 Pending CN113508391A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
SG10202106259P 2021-06-11
SG10202106259P 2021-06-11
PCT/IB2021/055659 WO2022259031A1 (en) 2021-06-11 2021-06-25 Methods, apparatuses, systems, media, and computer devices for processing data

Publications (1)

Publication Number Publication Date
CN113508391A true CN113508391A (zh) 2021-10-15

Family

ID=78008211

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180001758.5A Pending CN113508391A (zh) 2021-06-11 2021-06-25 一种数据处理方法、装置和系统、介质和计算机设备

Country Status (4)

Country Link
US (1) US20220398895A1 (zh)
KR (1) KR20220167353A (zh)
CN (1) CN113508391A (zh)
AU (1) AU2021204545A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115379296A (zh) * 2022-08-17 2022-11-22 在线途游（北京）科技有限公司 一种基于帧同步的数据校验方法和装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180211110A1 (en) * 2017-01-24 2018-07-26 Angel Playing Cards Co., Ltd. Chip recognizing and learning system
CN109045702A (zh) * 2018-07-24 2018-12-21 网易（杭州）网络有限公司 一种外挂检测方法、系统、装置、计算设备和介质
CN109188932A (zh) * 2018-08-22 2019-01-11 吉林大学 一种面向智能驾驶的多摄像头在环仿真测试方法及系统
CN110084987A (zh) * 2019-04-29 2019-08-02 复钧智能科技(苏州)有限公司 一种面向轨道交通的异物检查系统及方法
CN111062932A (zh) * 2019-12-23 2020-04-24 扬州网桥软件技术有限公司 一种网络服务程序的监控方法
CN112487973A (zh) * 2020-11-30 2021-03-12 北京百度网讯科技有限公司 用户图像识别模型的更新方法和装置
CN112866808A (zh) * 2020-12-31 2021-05-28 北京市商汤科技开发有限公司 一种视频处理方法、装置、电子设备及存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180211110A1 (en) * 2017-01-24 2018-07-26 Angel Playing Cards Co., Ltd. Chip recognizing and learning system
CN109045702A (zh) * 2018-07-24 2018-12-21 网易（杭州）网络有限公司 一种外挂检测方法、系统、装置、计算设备和介质
CN109188932A (zh) * 2018-08-22 2019-01-11 吉林大学 一种面向智能驾驶的多摄像头在环仿真测试方法及系统
CN110084987A (zh) * 2019-04-29 2019-08-02 复钧智能科技(苏州)有限公司 一种面向轨道交通的异物检查系统及方法
CN111062932A (zh) * 2019-12-23 2020-04-24 扬州网桥软件技术有限公司 一种网络服务程序的监控方法
CN112487973A (zh) * 2020-11-30 2021-03-12 北京百度网讯科技有限公司 用户图像识别模型的更新方法和装置
CN112866808A (zh) * 2020-12-31 2021-05-28 北京市商汤科技开发有限公司 一种视频处理方法、装置、电子设备及存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115379296A (zh) * 2022-08-17 2022-11-22 在线途游（北京）科技有限公司 一种基于帧同步的数据校验方法和装置
CN115379296B (zh) * 2022-08-17 2024-03-19 在线途游（北京）科技有限公司 一种基于帧同步的数据校验方法和装置

Also Published As

Publication number Publication date
US20220398895A1 (en) 2022-12-15
AU2021204545A1 (en) 2023-01-05
KR20220167353A (ko) 2022-12-20

Similar Documents

Publication Publication Date Title
CN109766879A (zh) 字符检测模型的生成、字符检测方法、装置、设备及介质
US20160210516A1 (en) Method and apparatus for providing multi-video summary
CN111124567B (zh) 目标应用的操作录制方法和装置
TWI706332B (zh) 圖形編碼展示方法和裝置以及電腦設備
US20230316529A1 (en) Image processing method and apparatus, device and storage medium
WO2022105027A1 (zh) 图像识别方法、系统、电子设备及存储介质
CN110502591A (zh) 一种数据提取方法、装置及设备
CN113508391A (zh) 一种数据处理方法、装置和系统、介质和计算机设备
EP3007098A1 (en) Method, device and system for realizing visual identification
CN105893249A (zh) 一种软件测试方法及装置
CN110967036B (zh) 导航产品的测试方法和设备
US20170242647A1 (en) Information processing device, information processing method and non-transitory computer readable medium
CN110880023A (zh) 一种检测证件图片的方法及装置
JP2017046324A (ja) ユーザ端末、物体認識サーバ、通知方法及びユーザ端末用プログラム
CN111626369B (zh) 一种人脸识别算法效果评估方法、装置、机器可读介质及设备
AU2021240277A1 (en) Methods and apparatuses for classifying game props and training neural network
CN108875638B (zh) 人脸匹配测试方法和、装置和系统
WO2022259031A1 (en) Methods, apparatuses, systems, media, and computer devices for processing data
CN111599417A (zh) 溶解度预测模型的训练数据获取方法及装置
CN113971123A (zh) 应用程序测试方法、装置、测试终端和存储介质
CN110569184A (zh) 一种测试方法及终端设备
KR20160043581A (ko) 인기 메시지 추출 장치 및 방법
CN111309613A (zh) 应用测试方法、装置、设备及计算机可读存储介质
CN110287872A (zh) 一种基于移动终端的兴趣点视线方向识别方法及装置
CN117370602A (zh) 视频处理方法、装置、设备与计算机存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination