CN114117129A - 一种影像播放方法及其在影像投屏中的应用和系统 - Google Patents

一种影像播放方法及其在影像投屏中的应用和系统 Download PDF

Info

Publication number
CN114117129A
CN114117129A CN202111382281.8A CN202111382281A CN114117129A CN 114117129 A CN114117129 A CN 114117129A CN 202111382281 A CN202111382281 A CN 202111382281A CN 114117129 A CN114117129 A CN 114117129A
Authority
CN
China
Prior art keywords
image
image data
playing
auditing
audited
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111382281.8A
Other languages
English (en)
Inventor
林少鹏
黄超生
林源泽
柯江伟
林李凤
连善宇
黄增锦
徐启松
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ruishen Netan Fujian Information Technology Co ltd
Original Assignee
Ruishen Netan Fujian Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ruishen Netan Fujian Information Technology Co ltd filed Critical Ruishen Netan Fujian Information Technology Co ltd
Priority to CN202111382281.8A priority Critical patent/CN114117129A/zh
Publication of CN114117129A publication Critical patent/CN114117129A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/74Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/602Providing cryptographic facilities or services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G06F21/6227Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database where protection concerns the structure of data, e.g. records, types, queries
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2221/00Indexing scheme relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/21Indexing scheme relating to G06F21/00 and subgroups addressing additional information or applications relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/2107File encryption

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioethics (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Library & Information Science (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Software Systems (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明公开了一种影像播放方法及其在影像投屏中的应用和系统,方法其包括如下步骤:S01导入影像数据;S02获取影像数据,对影像数据进行播放;S03获取影像数据,对影像数据进行审核且输出审核结果;S04获取审核结果,当审核结果不符合预设条件时,对所播放的影像数据进行播放干预;本方案通过同步或异步的方式对影像数据进行审核,为观影人员提供了及时有效和可靠、高质量的影像数据播放体验,另外,通过对不符合条件的影像数据进行本地加密保存有助于后续进行追溯和排查,而借助神经网络模型进行辅助审核的形式不仅能够大大提高了审核效率,还能够节约大量的人力资源占用,提高了方案推广的可行性和市场价值。

Description

一种影像播放方法及其在影像投屏中的应用和系统
技术领域
本发明涉及影像播放技术领域,尤其涉及一种影像播放方法及其在影像投屏中的应用和系统。
背景技术
影像播放和观赏作为人们日常生活中的常见娱乐、休闲方式,随着播放素材的日益剧增,越来越多的影像播放素材被人们所知,而由于影像素材的内容直接影响到了观影者的视觉感官和心理活动,因此,对于不同尺度、内容的影像素材,对其进行审核后,再投放给不同年龄、性别或身份的人员是非常具有必要性的,而当前大多影像播放设备在进行播放影像内容时,多没有经过审核,使得一些不良画面在播放后才被人所知,因此,如何提高影像播放的可靠性和对不良播放内容进行及时干预是非常具有现实意义的研究课题。
发明内容
有鉴于此,本发明的目的在于提出一种实施可靠、响应迅速且对影像正常播放干扰小的影像播放方法及其在影像投屏中的应用和系统。
为了实现上述的技术目的,本发明所采用的技术方案为:
一种影像播放方法,其包括如下步骤:
S01、导入影像数据;
S02、获取影像数据,对影像数据进行播放;
S03、获取影像数据,对影像数据进行审核且输出审核结果;
S04、获取审核结果,当审核结果不符合预设条件时,对所播放的影像数据进行播放干预。
作为一种可能的实施方式,进一步,S03中进行审核的影像数据与进行播放的影像数据在数据内容时间上同步或进行审核的影像数据在内容时间上先于进行播放的影像数据。
作为一种可能的实施方式,进一步,S04还包括当审核结果不符合预设条件时,还将审核结果对应的影像数据进行加密存储。
作为一种可能的实施方式,进一步,S04中对影像数据进行审核且输出审核结果的方法为:
S041、按预设条件对影像数据进行图像提取,生成待审核图像;
S042、对待审核图像进行特征提取,生成待审核特征;
S043、将待审核特征导入到经神经网络训练获得的审核模型中,由审核模型输出审核结果。
作为一种较优的选择实施方式,优选的,S04中当审核结果不符合预设条件时,获取该待审核特征对应影像信息的影像内容时间节点或时间段,且通过播放内容替换、播放内容屏蔽、设备断电的方式对所播放的影像数据进行播放干预。
作为一种较优的选择实施方式,优选的,S041中通过高速截图的方式以预设频率对待审核的影像数据的影像内容进行图像提取,获得待审核图像;
在此基础上,对待审核图像进行图像特征提取和文字特征提取,获得图像特征和文字特征作为待审核特征。
作为一种较优的选择实施方式,优选的,S043中神经网络训练获得审核模型的方法为:
S0431、构建训练素材库,导入训练素材,对训练素材进行特征提取和标注;
S0432、将训练素材导入到神经网络中进行训练,直至训练达到预设要求后,模型收敛,获得审核模型。
作为一种较优的选择实施方式,优选的,S0431中所述训练素材库包括文字素材库和图片素材库,且所述文字素材库和图像素材库中均相应预先标注有分类信息,所述分类信息至少包括涉黄、涉暴恐、涉政治敏感、涉不良广告中的一项以上;其中,导入至审核模型中的待审核特征经审核模型处理后,获得该待审核特征符合对应分类信息的概率,且输出概率最大的分类信息及其概率作为审核结果。
基于上述的播放方法,本方案还提供一种影像投屏方法,其包括上述所述的一种影像播放方法。
基于上述的方法,本方案还提供一种影像播放系统,其包括:
影像播放模块,配置成用于获取影像数据,且对影像数据进行解析和播放;
显示模块,配置成用于接收影像播放模块所播放的影像数据且可视化输出;
存储模块,用于接收导入的影像数据和训练素材,还用于存储经审核不符合预设条件的影像数据;
审核模块,配置成用于对影像数据进行审核且输出审核结果;
判断模块,配置成用于获取审核模型输出的审核结果,将其与预设条件进行匹配,且根据匹配结果输出执行指令;
执行模块,配置成用于获取执行指令,且根据执行指令对影像播放模块进行干预。
采用上述的技术方案,本发明与现有技术相比,其具有的有益效果为:本方案通过同步或异步的方式对影像数据进行审核,使得影像数据在播放之前或播放的同时被审核处理,当播放的影像数据内容存在不良信息或预设需要屏蔽的信息时,能够通过及时生成审核结果对正在播放的影像数据进行干预,避免不良信号的传播和扩散,为观影人员提供了及时有效和可靠、高质量的影像数据播放体验,另外,通过对不符合条件的影像数据进行本地加密保存有助于后续进行追溯和排查,而借助神经网络模型进行辅助审核的形式不仅能够大大提高了审核效率,还能够节约大量的人力资源占用,提高了方案推广的可行性和市场价值。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明影像播放方法的简要流程示意图;
图2是本发明播放系统的简要连接示意图。
具体实施方式
下面结合附图和实施例,对本发明作进一步的详细描述。特别指出的是,以下实施例仅用于说明本发明,但不对本发明的范围进行限定。同样的,以下实施例仅为本发明的部分实施例而非全部实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
如图1所示,本发明一种影像播放方法,其包括如下步骤:
S01、导入影像数据;
S02、获取影像数据,对影像数据进行播放;
S03、获取影像数据,对影像数据进行审核且输出审核结果;
S04、获取审核结果,当审核结果不符合预设条件时,对所播放的影像数据进行播放干预。
本方案中,S02和S03可以为并行执行的步骤。
在实际应用中,为了方便对不符合预设条件的影像数据进行播放拦截,本方案进行审核的影像数据在内容时间上先于进行播放的影像数据;通过该形式,可以使得经可视化播放的影像数据保持较优的品质,避免出现一些不合规的内容进行对外播放;但本方案不局限于此,对于一些播放优先级较高或需要实时播放的影像数据,也可采用无需预先播放干预的方式进行,在此情况下,进行审核的影像数据与进行播放的影像数据在数据内容时间上同步。
而为了便于对不合规的内容进行溯源或排查,本方案中,当审核结果不符合预设条件时,还将审核结果对应的影像数据进行加密存储。
本方案中,对影像数据进行审核且输出审核结果的方法为:
S031、按预设条件对影像数据进行图像提取,生成待审核图像;
S032、对待审核图像进行特征提取,生成待审核特征;
S033、将待审核特征导入到经神经网络训练获得的审核模型中,由审核模型输出审核结果。
对于播放干预的措施上,本方案中,当审核结果不符合预设条件时,获取该待审核特征对应影像信息的影像内容时间节点或时间段,且通过播放内容替换、播放内容屏蔽、设备断电的方式对所播放的影像数据进行播放干预。
为了便于对待审核图像的内容信息进行较为全面地进行审核,S031中,通过高速截图的方式以预设频率对待审核的影像数据的影像内容进行图像提取,获得待审核图像;S032中,对待审核图像进行图像特征提取和文字特征提取,获得图像特征和文字特征作为待审核特征。
为了提高审核效率和节约人力,本方案采用神经网络进行训练获得审核模型,通过审核模型进行审核的方式能够减少人工进行审核的工作量,而人工只需对系统进行特殊情况的维护和抽检完善审核模型。
其中,神经网络训练获得审核模型的方法为:
(1)构建训练素材库,导入训练素材,对训练素材进行特征提取和标注;
(2)将训练素材导入到神经网络中进行训练,直至训练达到预设要求后,模型收敛,获得审核模型。
其中,所述训练素材库包括文字素材库和图片素材库,且所述文字素材库和图像素材库中均相应预先标注有分类信息,所述分类信息至少包括涉黄、涉暴恐、涉政治敏感、涉不良广告中的一项以上;另外,导入至审核模型中的待审核特征经审核模型处理后,获得该待审核特征符合对应分类信息的概率,且输出概率最大的分类信息及其概率作为审核结果。
基于上述的播放方法,本方案可以应用至影像投屏中,通过本方案的影像播放机制,提高了影像投屏播放的可靠性和内容健康度。
而对于一些需要进行穿插播放其他投影内容的情况下,例如:需要穿插广告、紧急插播视频、图像的情况下,在影像投屏中,所述影像数据被分割成多个视频流,且多个视频流之间根据时间进行依序播放,多个视频流之间设置有插播空档,当插播空档中安排有广告或紧急插播内容时,插播空档的插播时间为广告、紧急插播内容的播放时间,当无插播内容时,插播空档的时长为0,通过该方式,一方面将影像数据分割成视频流的方式能够有效帮助影像投屏设备及时进行播放投影内容,而无需在接收到所有影像数据后,才能进行正常读取和影像投屏播放,而影像投屏可以设定为接收到1个或2个以上视频流即进行播放的形式,该方式可以令影像投屏设备处于一边接收待投屏播放的视频流,一边正在播放已接收的视频流,提高了投屏的响应速度和播放效率,其中,视频流内的单个视频流的时长为1、3或5min。
如图2所示,基于上述的播放方法,本方案还提供一种影像播放系统,其包括:
影像播放模块,配置成用于获取影像数据,且对影像数据进行解析和播放;
显示模块,配置成用于接收影像播放模块所播放的影像数据且可视化输出;
存储模块,用于接收导入的影像数据和训练素材,还用于存储经审核不符合预设条件的影像数据;
审核模块,配置成用于对影像数据进行审核且输出审核结果;
判断模块,配置成用于获取审核模型输出的审核结果,将其与预设条件进行匹配,且根据匹配结果输出执行指令;
执行模块,配置成用于获取执行指令,且根据执行指令对影像播放单元进行干预。
另外,在本发明各个实施方式中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本发明各个实施方式方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的部分实施例,并非因此限制本发明的保护范围,凡是利用本发明说明书及附图内容所作的等效装置或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种影像播放方法,其特征在于:其包括如下步骤:
导入影像数据;
获取影像数据,对影像数据进行播放;
获取影像数据,对影像数据进行审核且输出审核结果;
获取审核结果,当审核结果不符合预设条件时,对所播放的影像数据进行播放干预。
2.根据权利要求1所述的一种影像播放方法,其特征在于:进行审核的影像数据与进行播放的影像数据在数据内容时间上同步或进行审核的影像数据在内容时间上先于进行播放的影像数据。
3.根据权利要求1所述的一种影像播放方法,其特征在于:当审核结果不符合预设条件时,还将审核结果对应的影像数据进行加密存储。
4.根据权利要求1所述的一种影像播放方法,其特征在于:对影像数据进行审核且输出审核结果的方法为:
按预设条件对影像数据进行图像提取,生成待审核图像;
对待审核图像进行特征提取,生成待审核特征;
将待审核特征导入到经神经网络训练获得的审核模型中,由审核模型输出审核结果。
5.根据权利要求4所述的一种影像播放方法,其特征在于:当审核结果不符合预设条件时,获取该待审核特征对应影像信息的影像内容时间节点或时间段,且通过播放内容替换、播放内容屏蔽、设备断电的方式对所播放的影像数据进行播放干预。
6.根据权利要求4所述的一种影像播放方法,其特征在于:通过高速截图的方式以预设频率对待审核的影像数据的影像内容进行图像提取,获得待审核图像;
对待审核图像进行图像特征提取和文字特征提取,获得图像特征和文字特征作为待审核特征。
7.根据权利要求4所述的一种影像播放方法,其特征在于:神经网络训练获得审核模型的方法为:
构建训练素材库,导入训练素材,对训练素材进行特征提取和标注;
将训练素材导入到神经网络中进行训练,直至训练达到预设要求后,模型收敛,获得审核模型。
8.根据权利要求7所述的一种影像播放方法,其特征在于:所述训练素材库包括文字素材库和图片素材库,且所述文字素材库和图像素材库中均相应预先标注有分类信息,所述分类信息至少包括涉黄、涉暴恐、涉政治敏感、涉不良广告中的一项以上;
导入至审核模型中的待审核特征经审核模型处理后,获得该待审核特征符合对应分类信息的概率,且输出概率最大的分类信息及其概率作为审核结果。
9.一种影像投屏方法,其特征在于:其包括权利要求1至8之一所述的一种影像播放方法。
10.一种影像播放系统,其特征在于:其包括:
影像播放模块,配置成用于获取影像数据,且对影像数据进行解析和播放;
显示模块,配置成用于接收影像播放模块所播放的影像数据且可视化输出;
存储模块,用于接收导入的影像数据和训练素材,还用于存储经审核不符合预设条件的影像数据;
审核模块,配置成用于对影像数据进行审核且输出审核结果;
判断模块,配置成用于获取审核模型输出的审核结果,将其与预设条件进行匹配,且根据匹配结果输出执行指令;
执行模块,配置成用于获取执行指令,且根据执行指令对影像播放模块进行干预。
CN202111382281.8A 2021-11-19 2021-11-19 一种影像播放方法及其在影像投屏中的应用和系统 Pending CN114117129A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111382281.8A CN114117129A (zh) 2021-11-19 2021-11-19 一种影像播放方法及其在影像投屏中的应用和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111382281.8A CN114117129A (zh) 2021-11-19 2021-11-19 一种影像播放方法及其在影像投屏中的应用和系统

Publications (1)

Publication Number Publication Date
CN114117129A true CN114117129A (zh) 2022-03-01

Family

ID=80438930

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111382281.8A Pending CN114117129A (zh) 2021-11-19 2021-11-19 一种影像播放方法及其在影像投屏中的应用和系统

Country Status (1)

Country Link
CN (1) CN114117129A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116419008A (zh) * 2023-03-15 2023-07-11 苏州匠数科技有限公司 运营播放视频的实时检测方法、系统和电子设备

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116419008A (zh) * 2023-03-15 2023-07-11 苏州匠数科技有限公司 运营播放视频的实时检测方法、系统和电子设备
CN116419008B (zh) * 2023-03-15 2024-05-10 苏州匠数科技有限公司 运营播放视频的实时检测方法、系统和电子设备

Similar Documents

Publication Publication Date Title
Min et al. Study of subjective and objective quality assessment of audio-visual signals
CN110020437B (zh) 一种视频和弹幕相结合的情感分析及可视化方法
CN111741356B (zh) 双录视频的质检方法、装置、设备及可读存储介质
CN109803180B (zh) 视频预览图生成方法、装置、计算机设备及存储介质
US10560749B2 (en) Video playing method, video playing device, video playing system, apparatus and computer-readable storage medium
US8510795B1 (en) Video-based CAPTCHA
CN108108996B (zh) 视频中的广告投放方法、装置、计算机设备及可读介质
CN108040285B (zh) 视频直播画面调整方法、计算机设备及存储介质
CN104486649B (zh) 视频内容评级方法及装置
CN110598008B (zh) 录制数据的数据质检方法及装置、存储介质
CN112272327B (zh) 数据处理方法、装置、存储介质及设备
CN109496295A (zh) 多媒体内容生成方法、装置和设备/终端/服务器
CN114117129A (zh) 一种影像播放方法及其在影像投屏中的应用和系统
CN108696713B (zh) 码流的安全测试方法、装置及测试设备
CN107454080A (zh) 一种基于互联网数据保全方法及系统
US20240073273A1 (en) Method and processing unit for creating and rendering synchronized content for content rendering environment
CN111260756B (zh) 用于发送信息的方法和装置
US11937016B2 (en) System and method for real-time, event-driven video conference analytics
CN110490101A (zh) 一种图片截取方法、装置及计算机存储介质
CN113672950B (zh) 一种电子文件流转防篡改方法及装置
KR102324352B1 (ko) Ai 기반 프로그램 자동 생성 시스템
CN114299089A (zh) 图像处理方法、装置、电子设备及存储介质
CN112347990A (zh) 基于多模态智能审稿系统及方法
Goh et al. Understanding Users’ Deepfake Video Verification Strategies
Kageyama et al. Analysis of lip motion change arising as a result of amusement feeling

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination