CN112468867A - 视频数据的处理方法、处理装置、电子设备和存储介质 - Google Patents

视频数据的处理方法、处理装置、电子设备和存储介质 Download PDF

Info

Publication number
CN112468867A
CN112468867A CN202011349811.4A CN202011349811A CN112468867A CN 112468867 A CN112468867 A CN 112468867A CN 202011349811 A CN202011349811 A CN 202011349811A CN 112468867 A CN112468867 A CN 112468867A
Authority
CN
China
Prior art keywords
video
user
information
video data
acquiring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011349811.4A
Other languages
English (en)
Inventor
于晶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd filed Critical BOE Technology Group Co Ltd
Priority to CN202011349811.4A priority Critical patent/CN112468867A/zh
Publication of CN112468867A publication Critical patent/CN112468867A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/441—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本申请公开了一种视频数据的处理方法，包括：获取用户状态信息，并在所述用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧；和根据所述视频关键帧生成对应的视频预览图像。本申请实施方式视频数据的处理方法中，通过获取用户状态信息，判断用户状态信息是否满足预设选取规则，并在用户状态信息满足规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧，根据视频关键帧生成视频预览图像，能够准确定位关键的视频帧，有的放矢地生成视频预览图像，丰富预览图像的信息，帮助用户了解或回忆视频的内容，优化用户体验。本申请还公开了一种处理装置、电子设备和可读存储介质。

Description

视频数据的处理方法、处理装置、电子设备和存储介质
技术领域
本申请涉及视频处理技术领域，特别涉及一种视频数据的处理方法、处理装置、电子设备和可读存储介质。
背景技术
随着视频处理技术的发展，各种视频文件播放应用程序不断出现在人们的生活中，成为人们娱乐休闲不可缺少的部分。相关技术中，视频文件播放应用程序中设有视频展示界面，以展示所存储的多个视频文件，针对某一个视频文件，往往会展示该视频文件的视频预览图像，以供用户查看。其中，视频预览图像一般是视频文件中的某一帧图像，或是一帧与视频文件内容相关的图像。然而，视频预览图像往往是一帧静态的图像，用户在观看视频预览图像时，可以获知的与视频文件内容相关的信息较少，用户体验较差。
发明内容
有鉴于此，本申请的实施例提供了一种视频数据的处理方法、处理装置、电子设备和可读存储介质。
本申请提供了一种视频数据的处理方法，所述处理方法包括：
获取用户状态信息，并在所述用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧；和
根据所述视频关键帧生成对应的视频预览图像。
在某些实施方式中，所述用户状态信息包括用户出入信息，所述多个摄像头包括房门摄像头，所述获取用户状态信息，并在所述用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧包括：
通过门铃、门锁和/或房门摄像头获取所述用户出入信息；和
在所述用户出入信息存在人员变动时，从所述房门摄像头采集的视频数据中获取所述视频关键帧。
在某些实施方式中，所述用户状态信息包括用户表情信息，所述获取用户状态信息，并在所述用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧包括：
对所述多个摄像头采集的视频数据进行人脸识别以获取所述用户表情信息；和
在检测到所述用户表情信息为预设表情时，从所述多个摄像头采集的视频数据中获取所述视频关键帧。
在某些实施方式中，所述用户状态信息包括用户体征信息，所述获取用户状态信息，并在所述用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧包括：
通过可穿戴设备获取所述用户体征信息；和
在所述用户体征信息异常时，从所述多个摄像头采集的视频数据中获取所述视频关键帧。
在某些实施方式中，所述用户状态信息包括环境音量信息，所述获取用户状态信息，并在所述用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧包括：
通过声音传感器采集所述环境音量信息；和
在所述环境音量信息超出预定阈值时，从所述多个摄像头采集的视频数据中获取所述视频关键帧。
在某些实施方式中，所述用户状态信息包括室内用户信息，所述多个摄像头包括室内摄像头，所述获取用户状态信息，并在所述用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧包括：
通过所述室内摄像头获取所述室内用户信息；和
在所述室内用户信息存在人员变动时，从所述室内摄像头采集的视频数据中获取所述视频关键帧。
在某些实施方式中，所述用户状态信息包括用户输入信息，所述获取用户状态信息，并在所述用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧包括：
在所述用户输入信息为视频关键帧选择信息时，确定所述用户输入信息选择的摄像头并从选择的所述摄像头采集的视频数据中获取所述视频关键帧，或确定所述用户输入信息选择的显示设备并根据所述显示设备显示的内容获取所述视频关键帧。
本申请提供了一种视频数据的处理装置，所述处理装置包括：
获取模块，所述获取模块用于获取用户状态信息，并在所述用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧；
生成模块，所述生成模块用于根据所述视频关键帧生成对应的视频预览图像。
本申请提供了一种电子设备，所述电子设备包括一个或多个处理器和存储器，所述存储器存储有计算机程序，当所述计算机程序在被所述处理器执行的情况下，实现上述任一实施方式的视频数据的处理方法的步骤。
本申请提供了一种存储有计算机程序的非易失性计算机可读存储介质，当所述计算机程序被一个或多个处理器执行的情况下，实现上述任一实施方式的视频数据的处理方法的步骤。
本申请实施方式视频数据的处理方法、处理装置、电子设备和可读存储介质中，通过获取用户状态信息，判断用户状态信息是否满足预设选取规则，并在用户状态信息满足规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧，根据视频关键帧生成视频预览图像，能够准确定位关键的视频帧，有的放矢地生成视频预览图像，丰富预览图像的信息，帮助用户了解或回忆视频的内容，优化用户体验。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
图1是本申请某些实施方式的视频数据的处理方法的流程示意图。
图2是本申请某些实施方式的电子设备的结构示意图。
图3是本申请某些实施方式的处理装置的模块示意图。
图4是本申请某些实施方式的视频数据的处理方法的流程示意图。
图5是本申请某些实施方式的视频预览图像的示意图。
图6是本申请某些实施方式的视频预览图像的示意图。
图7是本申请某些实施方式的视频数据的处理方法的流程示意图。
图8是本申请某些实施方式的视频数据的处理方法的流程示意图。
图9是本申请某些实施方式的视频数据的处理方法的流程示意图。
图10是本申请某些实施方式的视频数据的处理方法的流程示意图。
图11是本申请某些实施方式的视频数据的处理方法的流程示意图。
具体实施方式
下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本申请，而不能理解为对本申请的限制。
请参阅图1，本申请提供一种视频数据的处理方法，包括以下步骤：
S10：获取用户状态信息，并在用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧；和
S20：根据视频关键帧生成对应的视频预览图像。
请参阅图2，本申请实施方式提供了一种电子设备100。电子设备100包括处理器102和存储器104，存储器104存储有计算机程序106，计算机程序106被处理器102执行时实现：获取用户状态信息，并在用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧；根据视频关键帧生成对应的视频预览图像。其中，处理器104可以是电子设备100为实施视频数据的处理方法而单独设置的处理器，也可以是电子设备100自身的处理器，具体不做限定。
请参阅图3，本申请实施方式还提供了一种视频数据的处理装置110，本申请实施方式的视频数据的处理方法可以由处理装置110实现。处理装置110包括获取模块112和生成模块114。S10可以由获取模块112实现，S20可以由生成模块114实现。或者说，获取模块112用于获取用户状态信息，并在用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧，生成模块114用于根据视频关键帧生成对应的视频预览图像。
具体地，随着视频处理技术的发展，各种视频文件播放应用程序不断出现在人们的生活中，当用户在视频文件播放应用程序中浏览或查找某个视频文件时，可以通过视频展示界面查看视频文件的预览图，以确认该视频文件是否为需要查看的视频文件。相关技术中，视频文件播放应用程序通常是根据视频文件中的某一帧图像，或是一帧与视频文件内容相关的图像，生成视频预览图像，使得用户可以通过视频预览图像获取该视频的相关信息。然而，由于视频预览图像仅包含某一帧图像，用户无法获知更多关于该视频的信息，导致用户在进行视频文件浏览时体验较差。
本申请实施方式的视频数据的处理方法、处理装置110和电子设备100中，通过获取用户状态信息，判断用户状态信息是否满足预设选取规则，并在用户状态信息满足规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧，根据视频关键帧生成视频预览图像，能够准确定位关键的视频帧，有的放矢地生成视频预览图像，丰富预览图像的信息，帮助用户了解或回忆视频的内容，优化用户体验。
进一步地，视频关键帧的预设选取规则可以根据具体应用场景、用户需求、大数据统计结果、配套设备的性能和/或数量等设定，可以是用户手动设定的预设选取规则，也可以是出厂时默认设定的预设选取规则，具体不做限定。
可以理解地，视频数据可以是由摄像头采集的视频数据，也可以是经剪辑之后的视频数据，可以是电子设备本地存储的视频数据，也可以是从服务器端获取的视频数据，具体不做限定。
请参阅图4，在某些实施方式中，用户状态信息包括用户出入信息，多个摄像头包括房门摄像头，S10包括：
S101：通过门铃、门锁和/或房门摄像头获取用户出入信息；和
S102：在用户出入信息存在人员变动时，从房门摄像头采集的视频数据中获取视频关键帧。
在某些实施方式中，S101和S102可以由获取模块112实现。或者说，获取模块112用于通过门铃、门锁和/或房门摄像头获取用户出入信息，以及用于在用户出入信息存在人员变动时，从房门摄像头采集的视频数据中获取视频关键帧。
在某些实施方式中，处理器102用于通过门铃、门锁和/或房门摄像头获取用户出入信息，以及用于在用户出入信息存在人员变动时，从房门摄像头采集的视频数据中获取视频关键帧。
具体地，在用户进出室内时，将用户进出室内的视频帧选为视频关键帧，生成视频预览图像，能够方便用户快速了解视频的关键内容。
进一步地，用户状态信息包括用户出入信息，多个摄像头包括房门摄像头，摄像头与房间门铃、门锁等智能家居设备通信相连。在发生人员进出房门的情况下，可以通过房间门铃或门锁等智能家居设备检测用户出入信息，并将用户出入信息发送至电子设备，电子设备从房门摄像头采集的视频数据中获取对应的视频关键帧，并根据该视频关键帧生成相应的视频预览图像。
例如，用户张三在进入室内时，使用门铃对室内用户李四进行提醒，用户李四听到门铃响声后，打开房门，使得用户张三进入室内。在用户张三按门铃时，门铃将这一用户出入信息发送至电子设备，电子设备接收到用户出入信息，从房门摄像头采集的视频数据中获取到张三进入室内的视频关键帧，并根据该视频关键帧生成相应的视频预览图像。
又如，用户张三在进入室内时，径直解锁门锁从而打开房门，进入室内。在用户解锁门锁时，门锁将这一用户出入信息发送至电子设备，电子设备接收到用户出入信息，从房门摄像头采集的视频数据中获取到张三进入室内的视频关键帧，并根据该视频关键帧生成相应的视频预览图像。
如此，能够在用户进出室内时准确定位到关键的视频帧，生成视频预览图像，丰富预览图像的信息，帮助用户了解或回忆视频的内容，优化用户体验。
此外，在多次检测到用户出入信息存在人员变动时，将获取到多个视频关键帧。可以将视频关键帧加时间戳后存储至数据库，在视频处理完结后或视频录制结束后，将所获得的视频关键帧从数据库中调出，并组合成图像互换格式(Graphics InterchangeFormat，GIF)的图片，动态展示多个视频关键帧。对于同一时间段内录制的多个视频文件，可共用同一GIF图。如此，能够将多个视频关键帧一同展示，丰富预览图像的信息，且能够减少系统存储量和占用率，优化用户体验。
进一步地，视频预览图像的展示方式可以是单窗口展示的，也可以是多窗口展示的。请参阅图5，在一些实施例中，视频预览图像以单窗口的形式展示。请参阅图6，在另一些实施例中，视频预览图像以多窗口的形式展示。可以理解地，多窗口不限于图中示出的4窗口的形式，在某些实施例中，也可以是3窗口、5窗口、8窗口等。
如此，能够在用户进出室内时准确定位到关键的视频帧，生成视频预览图像，丰富预览图像的信息，帮助用户了解或回忆视频的内容，优化用户体验。
请参阅图7，在某些实施方式中，用户状态信息包括用户表情信息，S10包括：
S103：对多个摄像头采集的视频数据进行人脸识别以获取用户表情信息；和
S104：在检测到用户表情信息为预设表情时，从多个摄像头采集的视频数据中获取视频关键帧。
在某些实施方式中，S103和S104可以由获取模块112实现。或者说，获取模块112用于对多个摄像头采集的视频数据进行人脸识别以获取用户表情信息，以及用于在检测到用户表情信息为预设表情时，从多个摄像头采集的视频数据中获取视频关键帧。
在某些实施方式中，处理器102用于对多个摄像头采集的视频数据进行人脸识别以获取用户表情信息，以及用于在检测到用户表情信息为预设表情时，从多个摄像头采集的视频数据中获取视频关键帧。
具体地，在发生了重大事件时，用户表情变化较大，例如大笑或大哭等。将用户表情变化较大的视频帧选为视频关键帧，生成视频预览图像，能够方便用户快速了解视频的关键内容。
进一步地，用户状态信息包括用户表情信息。对多个摄像头采集的视频数据进行人脸识别，获取用户表情信息，在检测到用户表情信息为预设表情的情况下，从多个摄像头采集的视频数据中获取视频关键帧，并根据该视频关键帧生成相应的视频预览图像。其中，预设表情可以包括大哭、大笑、惊恐等。
例如，摄像头采集的视频画面中的人物为幼儿。对多个摄像头采集的视频数据进行人脸识别，获取幼儿的表情信息，在幼儿的面部表情为大哭的情况下，从多个摄像头采集的视频数据中获取视频关键帧，并根据该视频关键帧生成相应的视频预览图像。
又如，摄像头采集的视频画面中的人物为长者。对多个摄像头采集的视频数据进行人脸识别，获取长者的表情信息，在长者的面部表情为大笑的情况下，从多个摄像头采集的视频数据中获取视频关键帧，并根据该视频关键帧生成相应的视频预览图像。
如此，能够在识别到画面中人物的表情变化时准确定位到关键的视频帧，生成视频预览图像，丰富预览图像的信息，帮助用户了解或回忆视频的内容，优化用户体验。
此外，在多次检测到用户表情信息为预设表情时，将获取到多个视频关键帧。可以将视频关键帧加时间戳后存储至数据库，在视频处理完结后或视频录制结束后，将所获得的视频关键帧从数据库中调出，并组合成GIF图片，动态展示多个视频关键帧。对于同一时间段内录制的多个视频文件，可共用同一GIF图。如此，能够将多个视频关键帧一同展示，丰富预览图像的信息，且能够减少系统存储量和占用率，优化用户体验。
进一步地，视频预览图像的展示方式可以是单窗口展示的，也可以是多窗口展示的。具体展示方式如前所述，此处不再赘述。
请参阅图8，在某些实施方式中，用户状态信息包括用户体征信息，S10包括：
S105：通过可穿戴设备获取用户体征信息；和
S106：在用户体征信息异常时，从多个摄像头采集的视频数据中获取视频关键帧。
在某些实施方式中，S105和S106可以由获取模块112实现。或者说，获取模块112用于通过可穿戴设备获取用户体征信息，以及用于在用户体征信息异常时，从多个摄像头采集的视频数据中获取视频关键帧。
在某些实施方式中，处理器102用于通过可穿戴设备获取用户体征信息，以及用于在用户体征信息异常时，从多个摄像头采集的视频数据中获取视频关键帧。
具体地，用户状态信息包括用户体征信息，例如脉搏、血压、体温等信息。通过可穿戴设备获取用户体征信息，在检测到用户体征信息异常时，从多个摄像头采集的视频数据中获取视频关键帧，并根据该视频关键帧生成相应的视频预览图像。其中，可穿戴设备可以是智能手表、智能手环、智能眼镜等支持数据交互、云端交互等功能的设备，具体不做限定。
例如，通过智能手环获取用户的心率信息，在检测到用户的心率信息超出正常心率范围或低于正常心率范围时，从多个摄像头采集的视频数据中获取视频关键帧，并根据该视频关键帧生成相应的视频预览图像。
又如，通过智能手表获取用户的血压信息，在检测到用户的血压信息超出正常血压范围或低于正常血压范围时，从多个摄像头采集的视频数据中获取视频关键帧，并根据该视频关键帧生成相应的视频预览图像。
如此，能够在用户体征信息出现异常时准确定位到关键的视频帧，生成视频预览图像，丰富预览图像的信息，帮助用户了解或回忆视频的内容，优化用户体验。
此外，在多次检测到用户体征信息异常时，将获取到多个视频关键帧。可以将视频关键帧加时间戳后存储至数据库，在视频处理完结后或视频录制结束后，将所获得的视频关键帧从数据库中调出，并组合成GIF图片，动态展示多个视频关键帧。对于同一时间段内录制的多个视频文件，可共用同一GIF图。如此，能够将多个视频关键帧一同展示，丰富预览图像的信息，且能够减少系统存储量和占用率，优化用户体验。
进一步地，视频预览图像的展示方式可以是单窗口展示的，也可以是多窗口展示的。具体展示方式如前所述，此处不再赘述。
请参阅图9，在某些实施方式中，用户状态信息包括环境音量信息，S10包括：
S107：通过声音传感器采集环境音量信息；和
S108：在环境音量信息超出预定阈值时，从多个摄像头采集的视频数据中获取视频关键帧。
在某些实施方式中，S107和S108可以由获取模块112实现。或者说，获取模块112用于通过声音传感器采集环境音量信息，以及用于在环境音量信息超出预定阈值时，从多个摄像头采集的视频数据中获取视频关键帧。
在某些实施方式中，处理器102用于通过声音传感器采集环境音量信息，以及用于在环境音量信息超出预定阈值时，从多个摄像头采集的视频数据中获取视频关键帧。
具体地，用户状态信息包括环境音量信息。通过声音传感器采集环境音量信息，在环境音量信息超出预定阈值时，从多个摄像头采集的视频数据中获取视频关键帧，并根据该视频关键帧生成相应的视频预览图像。其中，音量的预定阈值可以根据用户设定或具体的应用场景设定，例如在检测户外的环境音量时，预定阈值可以适当调高，在检测户内的环境音量时，预定阈值可以适当调低。
例如，在某些安全防护的场合，可能发生爆炸或物体碰撞等事故，在发生爆炸或碰撞时，环境音量信息可能超出预定阈值。通过声音传感器采集环境音量信息，在环境音量信息超出预定阈值时，从多个摄像头采集的视频数据中获取视频关键帧，并根据该视频关键帧生成相应的视频预览图像。
如此，能够在检测到环境音量信息超出阈值时准确定位到关键的视频帧，生成视频预览图像，丰富预览图像的信息，帮助用户了解或回忆视频的内容，优化用户体验。
此外，在多次检测到环境音量信息超出阈值时，将获取到多个视频关键帧。可以将视频关键帧加时间戳后存储至数据库，在视频处理完结后或视频录制结束后，将所获得的视频关键帧从数据库中调出，并组合成GIF图片，动态展示多个视频关键帧。对于同一时间段内录制的多个视频文件，可共用同一GIF图。如此，能够将多个视频关键帧一同展示，丰富预览图像的信息，且能够减少系统存储量和占用率，优化用户体验。
进一步地，视频预览图像的展示方式可以是单窗口展示的，也可以是多窗口展示的。具体展示方式如前所述，此处不再赘述。
请参阅图10，在某些实施方式中，用户状态信息包括室内用户信息，多个摄像头包括室内摄像头，S10包括：
S109：通过室内摄像头获取室内用户信息；和
S110：在室内用户信息存在人员变动时，从室内摄像头采集的视频数据中获取视频关键帧。
在某些实施方式中，S109和S110可以由获取模块112实现。或者说，获取模块112用于通过室内摄像头获取室内用户信息，以及用于在室内用户信息存在人员变动时，从室内摄像头采集的视频数据中获取视频关键帧。
在某些实施方式中，处理器102用于通过室内摄像头获取室内用户信息，以及用于在室内用户信息存在人员变动时，从室内摄像头采集的视频数据中获取视频关键帧。
具体地，在用户进出室内时，将用户进出室内的视频帧选为视频关键帧，生成视频预览图像，能够方便用户快速了解视频的关键内容。
进一步地，用户状态信息包括室内用户信息，室内用户信息可以包括室内用户的人数信息等。通过室内摄像头获取室内用户信息，在室内用户信息存在人员变动时，从室内摄像头采集的视频数据中获取视频关键帧，并根据该视频关键帧生成相应的视频预览图像。
例如，通过室内摄像头获取的室内用户信息为当前室内用户3人，在当前室内用户变为4人时，从室内摄像头采集的视频数据中获取视频关键帧。
可以理解地，当检测到饲养动物进入室内摄像头画面中时，也可以认为是室内用户信息存在人员变动，并从室内摄像头采集的视频数据中获取视频关键帧。
如此，能够在用户进出室内时准确定位到关键的视频帧，生成视频预览图像，丰富预览图像的信息，帮助用户了解或回忆视频的内容，优化用户体验。
此外，在多次检测到室内用户信息存在人员变动时，将获取到多个视频关键帧。可以将视频关键帧加时间戳后存储至数据库，在视频处理完结后或视频录制结束后，将所获得的视频关键帧从数据库中调出，并组合成GIF图片，动态展示多个视频关键帧。对于同一时间段内录制的多个视频文件，可共用同一GIF图。如此，能够将多个视频关键帧一同展示，丰富预览图像的信息，且能够减少系统存储量和占用率，优化用户体验。
进一步地，视频预览图像的展示方式可以是单窗口展示的，也可以是多窗口展示的。具体展示方式如前所述，此处不再赘述。
请参阅图11，在某些实施方式中，用户状态信息包括用户输入信息，S10包括：
S111：在用户输入信息为视频关键帧选择信息时，确定用户输入信息选择的摄像头并从选择的摄像头采集的视频数据中获取视频关键帧，或确定用户输入信息选择的显示设备并根据显示设备显示的内容获取视频关键帧。
在某些实施方式中，S111可以由获取模块112实现。或者说，获取模块112用于在用户输入信息为视频关键帧选择信息时，确定用户输入信息选择的摄像头并从选择的摄像头采集的视频数据中获取视频关键帧，或确定用户输入信息选择的显示设备并根据显示设备显示的内容获取视频关键帧。
在某些实施方式中，处理器102用于在用户输入信息为视频关键帧选择信息时，确定用户输入信息选择的摄像头并从选择的摄像头采集的视频数据中获取视频关键帧，或确定用户输入信息选择的显示设备并根据显示设备显示的内容获取视频关键帧。
具体地，在观看视频时，用户看到想要记录的视频画面，可以手动输入视频关键帧的选择信息，以使得电子设备从视频数据中获取视频关键帧，并根据该视频关键帧生成相应的视频预览图像。
例如，在观看视频时，用户看到想要记录的视频画面，可以手动选择某一个摄像头在当前时刻的拍摄画面，以使得电子设备从该摄像头拍摄的视频数据中获取视频关键帧，并根据该视频关键帧生成相应的视频预览图像。
又如，在观看视频时，用户看到想要记录的视频画面，可以手动在某一个显示设备中进行视频关键帧选取操作，以使得电子设备从视频数据中获取视频关键帧，并根据该视频关键帧生成相应的视频预览图像。
如此，能够根据用户输入信息准确定位到关键的视频帧，生成视频预览图像，丰富预览图像的信息，帮助用户了解或回忆视频的内容，优化用户体验。
此外，在多次检测用户输入信息时，将获取到多个视频关键帧。可以将视频关键帧加时间戳后存储至数据库，在视频处理完结后或视频录制结束后，将所获得的视频关键帧从数据库中调出，并组合成GIF图片，动态展示多个视频关键帧。对于同一时间段内录制的多个视频文件，可共用同一GIF图。如此，能够将多个视频关键帧一同展示，丰富预览图像的信息，且能够减少系统存储量和占用率，优化用户体验。
进一步地，视频预览图像的展示方式可以是单窗口展示的，也可以是多窗口展示的。具体展示方式如前所述，此处不再赘述。
可以理解地，用户也可以手动设置预设选取规则，例如选取预定时间点采集视频帧、选取在预定地点采集的视频帧等，具体不做限定。
如此，可以根据用户实际需要设定视频关键帧的选取规则，优化用户体验。
本申请实施方式还提供了一种非易失性计算机可读存储介质，其上存储有计算机程序，当计算机程序被一个或多个处理器执行时，实现上述任一实施方式的视频数据的处理方法。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，程序可存储于一非易失性计算机可读存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)等。
以上实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种视频数据的处理方法，其特征在于，所述处理方法包括：
获取用户状态信息，并在所述用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧；和
根据所述视频关键帧生成对应的视频预览图像。
2.根据权利要求1所述的处理方法，其特征在于，所述用户状态信息包括用户出入信息，所述多个摄像头包括房门摄像头，所述获取用户状态信息，并在所述用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧包括：
通过门铃、门锁和/或房门摄像头获取所述用户出入信息；和
在所述用户出入信息存在人员变动时，从所述房门摄像头采集的视频数据中获取所述视频关键帧。
3.根据权利要求1所述的处理方法，其特征在于，所述用户状态信息包括用户表情信息，所述获取用户状态信息，并在所述用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧包括：
对所述多个摄像头采集的视频数据进行人脸识别以获取所述用户表情信息；和
在检测到所述用户表情信息为预设表情时，从所述多个摄像头采集的视频数据中获取所述视频关键帧。
4.根据权利要求1所述的处理方法，其特征在于，所述用户状态信息包括用户体征信息，所述获取用户状态信息，并在所述用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧包括：
通过可穿戴设备获取所述用户体征信息；和
在所述用户体征信息异常时，从所述多个摄像头采集的视频数据中获取所述视频关键帧。
5.根据权利要求1所述的处理方法，其特征在于，所述用户状态信息包括环境音量信息，所述获取用户状态信息，并在所述用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧包括：
通过声音传感器采集所述环境音量信息；和
在所述环境音量信息超出预定阈值时，从所述多个摄像头采集的视频数据中获取所述视频关键帧。
6.根据权利要求1所述的处理方法，其特征在于，所述用户状态信息包括室内用户信息，所述多个摄像头包括室内摄像头，所述获取用户状态信息，并在所述用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧包括：
通过所述室内摄像头获取所述室内用户信息；和
在所述室内用户信息存在人员变动时，从所述室内摄像头采集的视频数据中获取所述视频关键帧。
7.根据权利要求1所述的处理方法，其特征在于，所述用户状态信息包括用户输入信息，所述获取用户状态信息，并在所述用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧包括：
在所述用户输入信息为视频关键帧选择信息时，确定所述用户输入信息选择的摄像头并从选择的所述摄像头采集的视频数据中获取所述视频关键帧，或确定所述用户输入信息选择的显示设备并根据所述显示设备显示的内容获取所述视频关键帧。
8.一种视频数据的处理装置，其特征在于，所述处理装置包括：
获取模块，所述获取模块用于获取用户状态信息，并在所述用户状态信息满足预设选取规则时，从多个摄像头采集的视频数据中获取对应的视频关键帧；
生成模块，所述生成模块用于根据所述视频关键帧生成对应的视频预览图像。
9.一种电子设备，其特征在于，所述电子设备包括一个或多个处理器和存储器，所述存储器存储有计算机程序，当所述计算机程序被所述处理器执行的情况下，实现权利要求1-7中任意一项所述的视频数据的处理方法的步骤。
10.一种存储有计算机程序的非易失性计算机可读存储介质，其特征在于，当所述计算机程序被一个或多个处理器执行的情况下，实现权利要求1-7中任意一项所述的视频数据的处理方法的步骤。
CN202011349811.4A 2020-11-26 2020-11-26 视频数据的处理方法、处理装置、电子设备和存储介质 Pending CN112468867A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011349811.4A CN112468867A (zh) 2020-11-26 2020-11-26 视频数据的处理方法、处理装置、电子设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011349811.4A CN112468867A (zh) 2020-11-26 2020-11-26 视频数据的处理方法、处理装置、电子设备和存储介质

Publications (1)

Publication Number Publication Date
CN112468867A true CN112468867A (zh) 2021-03-09

Family

ID=74808745

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011349811.4A Pending CN112468867A (zh) 2020-11-26 2020-11-26 视频数据的处理方法、处理装置、电子设备和存储介质

Country Status (1)

Country Link
CN (1) CN112468867A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115393980A (zh) * 2022-08-25 2022-11-25 长城汽车股份有限公司 行车记录仪录制方法、装置、车辆及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130124471A1 (en) * 2008-08-29 2013-05-16 Simon Chen Metadata-Driven Method and Apparatus for Multi-Image Processing
CN105933647A (zh) * 2016-04-20 2016-09-07 武汉凯乐华芯集成电路有限公司 一种智能交互门禁控制方法及系统
CN106991362A (zh) * 2016-01-21 2017-07-28 腾讯科技（深圳）有限公司 一种针对视频的图片处理方法及装置
CN107026977A (zh) * 2017-03-31 2017-08-08 维沃移动通信有限公司 一种动态图像拍摄方法及移动终端
CN108419012A (zh) * 2018-03-18 2018-08-17 广东欧珀移动通信有限公司 拍照方法、装置、存储介质及电子设备
CN110851652A (zh) * 2019-11-29 2020-02-28 京东方科技集团股份有限公司 一种辅助查看行车记录视频的方法及装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130124471A1 (en) * 2008-08-29 2013-05-16 Simon Chen Metadata-Driven Method and Apparatus for Multi-Image Processing
CN106991362A (zh) * 2016-01-21 2017-07-28 腾讯科技（深圳）有限公司 一种针对视频的图片处理方法及装置
CN105933647A (zh) * 2016-04-20 2016-09-07 武汉凯乐华芯集成电路有限公司 一种智能交互门禁控制方法及系统
CN107026977A (zh) * 2017-03-31 2017-08-08 维沃移动通信有限公司 一种动态图像拍摄方法及移动终端
CN108419012A (zh) * 2018-03-18 2018-08-17 广东欧珀移动通信有限公司 拍照方法、装置、存储介质及电子设备
CN110851652A (zh) * 2019-11-29 2020-02-28 京东方科技集团股份有限公司 一种辅助查看行车记录视频的方法及装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115393980A (zh) * 2022-08-25 2022-11-25 长城汽车股份有限公司 行车记录仪录制方法、装置、车辆及存储介质

Similar Documents

Publication Publication Date Title
CN109040824B (zh) 视频处理方法、装置、电子设备和可读存储介质
US9323982B2 (en) Display apparatus for performing user certification and method thereof
CN100430934C (zh) 成像方法与系统
CN111539443B (zh) 一种图像识别模型训练方法及装置、存储介质
EP3407216B1 (en) Method and device for displaying information resource, and computer readable storage medium
US9953221B2 (en) Multimedia presentation method and apparatus
CN108961679A (zh) 一种注意力提醒方法、装置及电子设备
US10673788B2 (en) Information processing system and information processing method
CN101925915A (zh) 设备访问控制
CN103905904A (zh) 播放多媒体文件的方法及装置
CN110476141A (zh) 视线跟踪方法及用于执行该方法的用户终端
CN110286980A (zh) 一种日程创建方法及移动终端
US20190373318A1 (en) Method and device for adjusting an intelligent system, and a computer readable storage medium
CN107567636A (zh) 显示装置及其控制方法和计算机可读记录介质
CN111626229A (zh) 一种对象管理方法、装置、机器可读介质及设备
CN112468867A (zh) 视频数据的处理方法、处理装置、电子设备和存储介质
CN109670105B (zh) 搜索方法及移动终端
CN102568049B (zh) 一种学生刷卡数据的发送方法、装置及系统
CN106951857A (zh) 一种身份提醒方法、装置及系统
CN112333537B (zh) 视频整合方法、装置及计算机可读存储介质
US20200301398A1 (en) Information processing device, information processing method, and program
CN112580390B (zh) 基于智能音箱的安防监控方法、装置、音箱和介质
CN111741355B (zh) 用于推送信息的方法、装置和系统
CN115484474A (zh) 视频剪辑处理方法、装置、电子设备及存储介质
CN113483760A (zh) 巡更监测方法及装置、电子设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination