CN117426100A - 多媒体监播方法、系统及电子设备 - Google Patents

多媒体监播方法、系统及电子设备 Download PDF

Info

Publication number
CN117426100A
CN117426100A CN202280001247.8A CN202280001247A CN117426100A CN 117426100 A CN117426100 A CN 117426100A CN 202280001247 A CN202280001247 A CN 202280001247A CN 117426100 A CN117426100 A CN 117426100A
Authority
CN
China
Prior art keywords
image
display
identification image
data
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202280001247.8A
Other languages
English (en)
Inventor
吴艳红
房浩
高艳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd filed Critical BOE Technology Group Co Ltd
Publication of CN117426100A publication Critical patent/CN117426100A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content

Abstract

本公开提供一种多媒体监播方法,系统及电子设备,属于媒体传播技术领域,其包括根据预先生成的第一标识图像和显示终端的配置信息,并通过图像生成算法,生成播放计划的第一校验图像;第一标识图像用于表征第一身份认证信息;第一身份认证信息用于表征播放计划;根据接收到的播放计划、与播放计划对应的多媒体文件和第一校验图像,生成待显示数据,以使显示终端响应于待显示数据进行显示;接收显示终端发送的显示图像,对显示图像进行解析,并在解析出显示图像中的第二标识图像后,且判断出第二标识图像与第一标识图像一致,获取第二身份认证信息;将第二身份认证信息与第一身份认证信息进行比对,并根据比对结果判断显示终端的显示图像是否准确。

Description

多媒体监播方法、系统及电子设备 技术领域
本公开属于媒体传输技术领域,具体涉及一种多媒体监播方法、系统及电子设备。
背景技术
针对已经发布的多媒体内容,若需要监播终端显示屏上最终显示的多媒体内容的播放情况,例如多媒体内容是否按时显示或显示内容是否正确等,一种传统方案,可以利用人工巡点的方式进行远程监播,但是该方式人力成本高,检测效率低,检测准确率低,且在检测到显示内容有误的情况下,应对方案执行效率较低。另一种方案,可以通过显示屏外设摄像头进行光学监播,利用算法实现多媒体内容的分析检测,但是该方式需要为每块显示屏配套监播摄像头,需要遵循特定的高度角度等标准来安装摄像头,且安装过程中摄像头相关结构、布线等工程往往受限应用场景,在工程实施上难以落地。
发明内容
本发明旨在至少解决现有技术中存在的技术问题之一,提供一种多媒体监播方法、系统及电子设备。
第一方面,解决本公开技术问题所采用的技术方案是一种多媒体监播方法,包括:
根据预先生成的第一标识图像和显示终端的配置信息,并通过图像生成算法,生成播放计划的第一校验图像;所述第一标识图像用于表征第一身份认证信息;所述第一身份认证信息用于表征播放计划表中的播放计划;
根据接收到的播放计划、与所述播放计划对应的多媒体文件和所述第一校验图像,生成待显示数据,以使显示终端响应于待显示数据进行显示;
接收所述显示终端发送的显示图像,对所述显示图像进行解析,并在解析出所述显示图像中的第二标识图像后,且判断出所述第二标识图像与所述 第一标识图像一致,获取所述第二标识图像对应的第二身份认证信息;
将所述第二身份认证信息与所述第一身份认证信息进行比对,并根据比对结果判断所述显示终端的显示图像是否准确。
在一些示例中,所述根据预先生成的第一标识图像和所述显示终端的配置信息,并通过图像生成算法,生成播放计划的第一校验图像,包括:
根据所述第一身份信息生成第一标识图像;
根据预先生成的透明图的特定区域所对应的像素点数量,对第一标识图像进行处理,得到第一目标标识图像;
对所述第一目标标识图像的各像素点的显示信息进行编码,得到第一编码数据;
将所述第一编码数据替换所述透明图的特定区域内对应的像素点的显示数据,生成第一校验图像。
在一些示例中,在所述根据所述第一身份信息生成第一标识图像之后,还包括:
根据所述显示终端的分辨率信息生成所述透明图;所述透明图的分辨率与所述显示终端的分辨率一致。
在一些示例中,所述透明图具有中间区域和环绕所述中间区域的边缘区域;所述特定区域为所述边缘区域。
在一些示例中,当所述特定区域的像素点数量大于所述第一目标标识图像的像素点数量时,所述将所述第一编码数据替换所述透明图的特定区域内对应的像素点的显示数据,生成第一校验图像,包括:
在将所述第一编码数据替换所述透明图的特定区域内对应的像素点的显示数据的同时,将所述透明图的特定区域中,除与所述第一目标标识图像对应的像素点外的像素点的显示数据,替换为第二编码数据,得到所述第一校验图像。
在一些示例中,对所述显示图像进行解析,以判断所述显示终端的显示 图像是否准确的具体步骤包括:
对所述显示图像进行解析,得到所述显示终端实际显示的标识图像;
对所述实际显示的标识图像进行处理,并根据所述第一标识图像的分辨率信息,得到所述第二标识图像;
将所述第二标识图像与所述第一标识图像进行比对,若二者不一致则显示图像有误;
当所述第二标识图像与所述第一标识图像一致时,根据所述第二标识图像,获取第二身份认证信息;
将所述第二身份认证信息与所述第一身份认证信息进行比对,以确定所述显示图像是否准确。
在一些示例中,所述对所述实际显示的标识图像进行处理,并根据所述第一标识图像的分辨率信息,得到所述第二标识图像,包括:
根据所述透明图的特定区域所对应的像素点数量,对所述实际显示的标识图像进行处理,得到第二目标标识图像;
判断是否存在对所述第二目标标识图像中的各像素点的显示信息编码后的目标编码数据;
当判断出存在对所述第二目标标识图像中的各像素点的显示信息编码后的目标编码数据时,对所述目标编码数据进行解码,得到解码数据;
根据所述第一标识图像的分辨率信息和所述解码数据,生成第二标识图像。
在一些示例中,所述对所述第一目标标识图像的各像素点的显示信息进行编码,得到第一编码数据,包括:
按照第一预设次序依次对所述第一目标标识图像的各像素点的显示信息进行编码,得到第一编码数据;
所述根据所述透明图的特定区域所对应的像素点数量,对所述实际显示的标识图像进行处理,得到第二目标标识图像,包括:
根据所述透明图的特定区域所对应的像素点数量,将所述实际显示的标识图像中的各像素点的显示数据,按照所述第一预设次序依次进行组装,得到第二目标标识图像。
在一些示例中,所述将所述第一编码数据替换所述透明图的特定区域内对应的像素点的显示数据,生成第一校验图像,包括:
将所述第一编码数据按照预设次序依次替换所述透明图的特定区域内对应的像素点的显示数据,生成所述第一校验图像;
所述对所述显示图像进行解析,得到所述显示终端实际显示的标识图像,包括:
为按照所述预设次序,依次提取所述显示图像的特定区域内对应的像素点的显示数据,并根据提取到的显示数据,得到所述显示终端实际显示的标识图像。
在一些示例中,所述播放计划包括各个所述多媒体文件在所述显示终端中的播放窗口信息和播放顺序信息;
所述根据接收到的播放计划、与所述播放计划对应的多媒体文件和所述第一校验图像,生成待显示数据,包括:
根据各个所述多媒体文件在所述显示终端中的展示区域信息和展示顺序信息,以及与所述播放计划对应的多媒体文件和所述第一校验图像,生成所述待显示数据,以使所述显示终端响应于所述待显示数据,以按照各个所述多媒体文件在所述显示终端中的播放窗口信息和播放顺序信息进行显示。
在一些示例中,在对所述显示图像进行分析时,还包括:
当判断出所述显示图像不准确时,向所述显示终端发送取消显示的控制指令,以使所述显示终端取消对所述显示图像的显示,并生成报警信息。
在一些示例中,所述多媒体监播方法还包括:
对所述播放计划中的参数信息进行编码,生成所述第一身份认证信息。
第二方面,本公开实施例还提供了一种多媒体监播系统,其包括校验图 像生成模块、播放控制模块、分析模块和显示终端;其中,
所述校验图像生成模块,被配置为根据预先生成的第一标识图像和所述显示终端的配置信息,并通过图像生成算法,生成播放计划的第一校验图像;所述第一标识图像用于表征第一身份认证信息;所述第一身份认证信息用于表征播放计划表中的播放计划;
所述播放控制模块,被配置为根据接收到的播放计划、与所述播放计划对应的多媒体文件和所述第一校验图像,生成待显示数据;
所述显示终端,被配置为响应于所述待显示数据进行显示,并按照预设频次截取当前所显示的图像,作为显示图像;
所述分析模块,被配置为对所述显示图像进行解析,并在解析出所述显示图像中的第二标识图像后,且判断出所述第二标识图像与所述第一标识图像一致,获取所述第二标识图像对应的第二身份认证信息,并将所述第二身份认证信息与所述第一身份认证信息进行比对,并根据比对结果判断所述显示终端的显示图像是否准确。
第三方面,本公开实施例还提供一种计算机设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当计算机设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行上述第一方面,或第一方面中任一种可能的多媒体监播方法的步骤。
第四方面,本公开实施例还提供一种计算机非瞬态可读存储介质,该计算机非瞬态可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述第一方面,或第一方面中任一种可能的多媒体监播方法的步骤。
第五方面,本公开实施例还提供一种电子设备,包括第二方面所述的多媒体监播系统和显示终端。
附图说明
图1为本公开实施例所提供的一种多媒体监播系统的结构示意图;
图2为本公开实施例提供的校验图像生成模块的处理流程示意图;
图3为本公开实施例提供的第一目标标识图像编码次序的示意图;
图4为本公开实施例提供的第一编码数据替换透明图的替换顺序示意图;
图5为本公开实施例提供的第二标识图像解析单元的处理流程示意图;
图6为本公开实施例提供的显示图像的示意图;
图7为本公开实施例提供的一种多媒体监播方法的流程图;
图8为为本申请实施例提供的计算机设备的结构示意图。
具体实施方式
为使本领域技术人员更好地理解本发明/实用新型的技术方案,下面结合附图和具体实施方式对本发明/实用新型作进一步详细描述。
除非另外定义,本公开使用的技术术语或者科学术语应当为本公开所属领域内具有一般技能的人士所理解的通常意义。本公开中使用的“第一”、“第二”以及类似的词语并不表示任何顺序、数量或者重要性,而只是用来区分不同的组成部分。同样,“一个”、“一”或者“该”等类似词语也不表示数量限制,而是表示存在至少一个。“包括”或者“包含”等类似的词语意指出现该词前面的元件或者物件涵盖出现在该词后面列举的元件或者物件及其等同,而不排除其他元件或者物件。“连接”或者“相连”等类似的词语并非限定于物理的或者机械的连接,而是可以包括电性的连接,不管是直接的还是间接的。“上”、“下”、“左”、“右”等仅用于表示相对位置关系,当被描述对象的绝对位置改变后,则该相对位置关系也可能相应地改变。
第一方面,图1为本公开实施例所提供的一种多媒体监播系统的结构示意图,如图1所示,该多媒体监播系统100被配置为对显示终端101的显示内容进行监控,以提示用户显示终端101的当前显示情况。该多媒体监播系统100包括校验图像生成模块11、播放控制模块12和分析模块13。
校验图像生成模块11被配置为根据预先生成的第一标识图像和显示终 端101的配置信息,并通过图像生成算法,生成播放计划的第一校验图像。其中,第一标识图像是根据第一身份验证信息生成的,并用于表征第一身份认证信息;第一身份认证信息是信息管理模块14根据播放计划表中的播放计划生成的,用于表征播放计划表中的播放计划。播放计划表是根据信息管理模块14利用至少一个播放计划的参数信息生成的。
需要说明的是,一个播放计划对应一个第一身份认证信息,一个第一身份认证信息对应一个第一标识图像,在播放计划表包括多个播放计划的情况下,通过图像生成算法可以分别生成每个播放计划对应的第一校验图像。
在一些示例中,将第一身份认证信息和显示终端101的配置信息作为图像生成算法的输入数据,通过图像生成算法的处理,可以生成播放计划的第一校验图像。
在一些示例中,校验图像生成模块11被配置为将播放计划的第一校验图像发送至分发控制模块,以通过分发控制模块,根据播放计划表,将当前待播放的播放计划、该播放计划的第一校验图像、以及与该播放计划对应的多媒体文件同时发送至播放控制模块12。
播放控制模块12被配置为根据接收到的播放计划、与播放计划对应的多媒体文件和第一校验图像,生成待显示数据,以供显示终端101进行显示。待显示数据具体包括播放计划、与该播放计划对应的多媒体文件和第一校验图像。
播放控制模块12可以通过高清多媒体接口(High Definition Multimedia Interface,HDMI)将待显示数据发送至显示终端101进行显示。
分析模块13被配置为对显示终端101按照预设频次截取的显示图像进行解析,并在解析出第二标识图像后,且判断出第二标识图像与第一标识图像一致,获取第二标识图像对应的第二身份认证信息,并将第二身份认证信息与第一身份认证信息进行比对,并根据比对结果判断显示终端101的显示是否准确。
在本公开实施例中,在不影响多媒体文件的播放内容的情况下,对显示 终端101的播放内容进行及时监控,具体地,通过对显示终端101当前所显示的图像进行截图,并进一步解析显示图像,能够快速监测显示终端101的显示图像是否准确,极大提高了多媒体监播的安全性,相比于传统方案中人工巡点的方式,本公开实施例能够降低多媒体监播的成本,且实时性较高;相比于显示屏外设摄像头进行光学监播的方案,本公开实施例提供的多媒体监播系统100属于系统内置多媒体监播算法,利用后台数据处理,无需外设检测设备即可高效完成多媒体监播。
显示终端101响应于待显示数据进行显示,并按照预设频次截取当前的显示图像,并将显示图像发送至分析模块13。显示终端101可以包括显示屏,用于显示多媒体文件对应的画面。具体地,显示终端101响应于待显示数据,利用显示终端101中的播放卡控制多媒体文件播放,并按照预设频次截取当前显示屏所显示的图像,将该图像作为显示图像用于后续对显示终端101当前播放的多媒体内容的准确性进行及时监控。
图2为本公开实施例提供的校验图像生成模块11的处理流程示意图,如图2所示,校验图像生成模块11包括第一标识图像生成单元、图像处理单元、编码单元和第一校验图像生成单元。
第一标识图像生成单元被配置为根据第一身份认证信息生成第一标识图像。
具体地,第一标识图像生成单元被配置为利用标识生成函数将第一身份认证信息的标识按照特定规律进行排布,并按照特定几何图形生成第一标识图像。
示例性的,标识生成函数可以为二维码生成函数,第一标识图像生成单元被配置为调用二维码生成函数生成一个分辨率为L1*L1的身份信息二维码的图像,该身份信息二维码的图像即为第一标识图像。
本公开实施例中利用身份信息二维码表征第一身份认证信息能够实现对第一身份认证信息的编码保护,增强第一身份认证信息的鲁棒性,也即防止第一身份认证信息在存储和传输过程中被噪声污染而导致信息提取失败。
图像处理单元被配置为根据预先生成的透明图的特定区域所对应的像素点数量,对第一标识图像进行处理,得到第一目标标识图像。
透明图可以是校验图像生成模块11中的透明图生成单元预先生成的。透明图的特定区域可以是预先设置的区域,区域范围可以根据实际应用场景和经验进行限定。透明图具有中间区域和环绕中间区域的边缘区域,特定区域可以包括透明图的边缘区域、或者透明图的顶角区域、或者透明图的非规则形状的设定区域等。
具体地,图像处理单元被配置为根据预先生成的透明图的特定区域所对应的像素点数量,对第一标识图像进行处理,以使得到的第一目标标识图像中像素点的数量小于或等于透明图的特定区域所对应的像素点数量。
以第一标识图像为身份信息二维码对应的图像为例(下述简称为身份信息二维码),根据预先生成的透明图的特定区域所对应的像素点数量,对身份信息二维码进行缩放,得到具有缩放后身份信息二维码的第一目标标识图像。
例如,身份信息二维码的分辨率信息为L1*L1=N1个像素点,若身份信息二维码像素点的数量N1大于或等于透明图的特定区域所对应的像素点数量N′,则将该身份信息二维码的分辨率等比缩小为L2*L2,其中,L2*L2=N2≤N′,且L2为小于或等于 内的最大的正整数,得到分辨率为L2*L2的第一目标标识图像。若身份信息二维码像素点的数量N1小于或等于透明图的特定区域所对应的像素点数量,则将该身份信息二维码的分辨率等比放大为L2*L2,其中,L2*L2=N2≤N′,且L2为小于或等于 内的最大的正整数,得到分辨率为L2*L2的第一目标标识图像。
编码单元被配置为对第一目标标识图像的各像素点的显示信息进行编码,得到第一编码数据。
显示信息包括第一目标标识图像所显示出的颜色的信息,可以包括不同种颜色的信息,例如包括但不仅限于黑色和白色等。编码单元被配置为对第一目标标识图像的各像素点的显示信息进行编码,不同的显示信息可以编码 不同的第一编码数据,例如可以将黑色像素点编码为第一编码子数据(例如为0),将白色像素点编码为第二编码子数据(例如为1)等。
在一些示例中,编码单元被配置为按照第一预设次序依次对第一目标标识图像的各像素点的显示信息进行编码,得到按照预设顺序排列的第一编码数据。图3为本公开实施例提供的第一目标标识图像编码次序的示意图,如图3所示,第一预设次序可以为图3所示的从左至右,从上至下的顺序依次遍历第一目标标识图像的各像素点,并对各像素点进行编码,并按照预设顺序记录各像素点的第一编码数据。
第一校验图像生成单元被配置为将第一编码数据替换透明图的特定区域内对应的像素点的显示数据,生成第一校验图像。
透明图为单通道的图像,也即具有alpha通道的图像。透明图的特定区域内对应的像素点的显示数据可以是透明图alpha通道的数据。例如,第一校验图像生成单元被配置为将第一编码数据替换透明图的特定区域内对应的像素点的alpha通道的数据,生成具有缩放后身份信息二维码的透明图(也即第一校验图像)。
在一些示例中,第一校验图像生成子单元被配置为将第一编码数据按照第二预设次序依次替换透明图的特定区域内对应的像素点的显示数据,生成第一校验图像。
以透明图的特定区域为边缘区域为例,可以将第一目标标识图像中按照预设顺序记录的各像素点的第一编码数据,按照从左到右,从上到下,从右到左,从下到上的顺序依次替换透明图边缘区域的各像素点的显示数据,生成具有缩放后身份信息二维码的透明图(也即第一校验图像)。图4为本公开实施例提供的第一编码数据替换透明图的替换顺序示意图,如图4所示,按照透明图从上到下,从右到左,从下到上的顺序,将第一目标标识图像中从左到右、从上到下的第一编码数据依次替换为透明图从上到下、从右到左、从下到上、以及从下到上(箭头方向)的各像素点的显示数据。
需要说明的是,本示例中第二预设次序可以不限定为“从左到右,从上 到下,从右到左,从下到上”的顺序,可以根据经验和实际应用场景进行限定,不公开实施例不再一一列举。
为了能够使最终在显示终端101显示出较为规则的画面,当特定区域的像素点数量大于第一目标标识图像的像素点数量时,第一校验图像生成单元被配置为在将第一编码数据替换透明图的特定区域内对应的像素点的显示数据的同时,将透明图的特定区域中,除与第一目标标识图像对应的像素点外的像素点的显示数据,替换为第二编码数据,得到第一校验图像。在一些示例中,第一校验图像生成单元被配置为在将第一编码数据按照第二预设次序依次替换透明图的特定区域内对应的像素点的显示数据的同时,将透明图的特定区域中,除与第一目标标识图像对应的像素点外的像素点的显示数据,继续按照第二预设次序依次替换为第二编码数据,得到第一校验图像。
与第一目标标识图像对应的像素点外的像素点,也即特定区域内N′个像素点中,除了第一目标标识图像内N2的像素点之外的像素点。
由于该第二编码数据在后续不参与显示终端101所显示画面的准确性的判断,因此,第二编码数据可以是随机设置的编码数据,或者也可以是与第一编码数据或第二编码数据相同的数据,对此本公开实施例不进行限定。
在一些示例中,透明图的生成过程,具体地,校验图像生成模块11还包括透明图生成单元;透明图生成单元被配置为根据显示终端101的分辨率信息生成透明图;透明图的分辨率与显示终端101的分辨率一致。
需要说明的是,透明图的分辨率可以与显示终端101的分辨率不一致,例如,透明图的像素点所在位置位于显示终端101中部分像素点所在位置。
如图2所示,分析模块13包括图像解析单元、第二标识图像解析单元、第一比对单元、第二身份认证信息解析单元和第二比对单元。
图像解析单元被配置为对显示图像进行解析,得到显示终端101实际显示的标识图像。
具体地,图像解析单元被配置为按照预先生成的透明图的特定区域所对应的像素点位置范围,提取显示图像与该位置范围对应的各像素点的显示数 据,得到显示终端101实际显示的标识图像。
在一些示例中,在第一校验图像生成单元被配置为将第一编码数据按照第二预设次序依次替换透明图的特定区域内对应的像素点的显示数据,生成第一校验图像的情况下,图像解析单元被配置为按照第二预设次序,依次提取显示图像的特定区域(也即与透明图的特定区域像素点位置范围对应的区域)内对应的像素点的显示数据,并根据提取到的显示数据,得到显示终端101实际显示的标识图像。
在上述第一校验图像生成子单元生成第一校验图像时,以其中透明图的特定区域为边缘区域,且第二预设次序为从左到右,从上到下,从右到左,从下到上的顺序为例,在本示例中,可以按照从左到右,从上到下,从右到左,从下到上的顺序依次提取显示图像的边缘区域内对应的像素点的显示数据,并根据提取到的显示数据,得到显示终端101实际显示的标识图像。
需要说明的是,第一校验图像生成单元利用第一编码数据替换透明图的替换规则(也即按照第二预设次序依次替换的方式),与图像解析单元提取显示图像像素点的提取规则(也即按照第二预设次序提取的方式)相同。
第二标识图像解析单元被配置为对实际显示的标识图像进行处理,并根据第一标识图像的分辨率信息,得到第二标识图像。
图5为本公开实施例提供的第二标识图像解析单元的处理流程示意图,第二标识图像解析单元包括图像处理子单元、第一判断子单元、解码子单元和第二标识图像生成子单元,通过第二标识图像解析单元的各个子单元对实际显示的标识图像进行处理,具体过程如下:
图像处理子单元被配置为根据透明图的特定区域所对应的像素点数量,对实际显示的标识图像进行处理,得到第二目标标识图像。具体地,图像处理子单元被配置为将实际显示的标识图像中的各像素点的显示数据,按照透明图的特定区域所对应的像素点数量,组装成第二目标标识图像。
例如,实际显示的标识图像中的各像素点的显示数据的数量为N3,透明图的特定区域所对应的像素点数量为N′,且N3=N′。在组装显示数据的过 程中,满足第二目标标识图像的分辨率L3*L3=N4≤N′,且L3为小于或等于 的最大的正整数。
在一些示例中,编码单元被配置为按照第一预设次序依次对第一目标标识图像的各像素点的显示信息进行编码,得到按照预设顺序排列的第一编码数据。在上述图像处理子单元进行数据组装过程中,可以将实际显示的标识图像中的各像素点的显示数据,按照第一预设次序依次进行组装,若第二目标标识图像的分辨率L3*L3=N4<N′,将实际显示的标识图像中未被组装的其他像素点的显示数据删除,得到第二目标标识图像。
由于从显示终端101截取到的显示图像可能存在未编码的图像,出现此种情况的原因可能为当期播放的多媒体文件不属于播放计划中的多媒体文件,也即播放内容不准确。或者,也可能是显示终端101播放的多媒体文件为播放计划中的多媒体文件,由于显示终端101硬件问题,导致截取到的显示图像为不完整图像,进而截取到的显示图像可能不存在被编码后的那部分图像。因此,利用第二标识图像解析单元中的第一判断子单元初步校验第二目标标识图像。具体地,第一判断子单元被配置为判断是否存在对第二目标标识图像中的各像素点的显示信息编码后的目标编码数据。若判断出不存在对第二目标标识图像中的各像素点的显示信息编码后的目标编码数据,则显示图像不准确。
当特定区域的像素点数量等于第一目标标识图像的像素点数量时,目标编码数据为第一编码数据;当特定区域的像素点数量等于第一目标标识图像的像素点数量时,目标编码数据包括第一编码数据和第二编码数据。
解码子单元被配置为当判断出存在对第二目标标识图像中的各像素点的显示信息编码后的目标编码数据时,对目标编码数据进行解码,得到解码数据。
不同的目标编码数据可以解码为不同的显示信息(也即解码数据)。例如,将第一编码子数据解码为黑色,将第二编码子数据解码为白色(第一解码子数据),将第二编码数据解码为黑色(第二解码子数据)等。
第二标识图像生成子单元被配置为根据第一标识图像的分辨率信息和解码数据,生成第二标识图像。
具体地,第二标识图像生成子单元,具体被配置根据第一标识图像的分辨率信息,将解码后具有解码数据的第二目标标识图像进行缩放,以使缩放后的第二标识图像的分辨率L4*L4与第一标识图像的分辨率L1*L1相同。
在第一目标标识图像具有缩放后身份信息二维码、且播放计划正常的情况下,第二目标标识图像具有解码数据对应的二维码。第二标识图像生成子单元被配置为根据第一标识图像的分辨率信息,缩放具有解码数据对应的二维码得到第二标识图像。
这里的缩放方式与上述“对身份信息二维码进行缩放,得到具有缩放后身份信息二维码的第一目标标识图像”的缩放方式相同,若解码后具有解码数据的第二目标标识图像的分辨率L3*L3小于L1*L1,根据第一标识图像的分辨率L1*L1,对该第二目标标识图像进行放大,例如利用插值法填充像素,直到生成的第二标识图像分辨率与第一标识图像分辨率相同。若解码后具有解码数据的第二目标标识图像的分辨率L3*L3大于L1*L1,根据第一标识图像的分辨率L1*L1,对该第二目标标识图像进行缩小,例如剔除部分像素点,直到生成的第二标识图像分辨率与第一标识图像分辨率相同。
第一比对单元被配置为将第二标识图像的类型与第一标识图像的类型进行比对,若二者类型不一致则显示图像有误。
具体地,第一标识图像的类型为二维码,若第二标识图像的类型也为二维码,则确定第二标识图像的类型与第一标识图像的类型一致;若第二标识图像的类型并非为二维码形式的标识图像,则确定第二标识图像的类型与第一标识图像的类型不一致。具体地,第一比对单元被配置为利用二维码读取函数,读取第二标识图像的二维码信息,若读取成功,则表示该第二标识图像为二维码类型的图像,若读取失败,则表示该第二标识图像的类型并非为二维码类型,进而确定显示图像有误。
第二身份认证信息解析单元被配置为当第二标识图像与第一标识图像 一致时,根据第二标识图像,获取第二身份认证信息。
具体地,第二身份认证信息解析单元被配置为当第二标识图像与第一标识图像一致时,利用标识生成反函数将第二标识图像,按照特定规律排布反解析出第二身份认证信息。
标识生成反函数为上述标识生成函数的逆运算函数。以第二标识图像为二维码为例,标识生成函数可以为二维码生成函数,则标识生成反函数为二维码生成函数的逆运算过程,将二维码利用二维码生成函数的逆运算过程反解析为第二身份认证信息。
由于显示终端101当前播放的显示图像可能不是预先设置当前播放计划对应的多媒体内容,可能是此时播放计划的计划播放时间被打乱,显示终端101当前播放的显示图像为播放计划表中的其他播放计划对应的多媒体内容,因此,在分析模块13中设置第二比对单元,第二比对单元被配置为将第二身份认证信息与第一身份认证信息进行比对,以确定显示图像是否准确。
具体地,第二比对单元被配置将第二身份认证信息与第一身份认证信息进行比对,确定二者身份信息相似度,在身份信息相似度大于或等于预设相似度阈值时,确定显示图像是否准确。在身份信息相似度小于预设阈值时,确定显示图像有误。其中,预设相似度阈值可以根据实际应用场景和经验确定,本公开实施例不进行具体限定。
在一些示例中,分析模块13还被配置为当判断出显示图像不准确时,向显示终端101发送取消显示的控制指令,以使显示终端101取消对显示图像的显示,并生成报警信息。
当显示终端101接收到分析模块13发送的取消显示的控制指令时,可以利用播放卡关闭屏幕,并生成报警信息,报警信息可以是以文本的形式显示在屏幕上的;或者,报警信息也可以是以报警提示音进行播放的。
下面以透明图的特定区域为边缘区域、第一标识图像为身份信息二维码为例,对多媒体监播系统100中各个模块进行监播的过程进行详细说明。
第一标识图像生成单元被配置为根据第一身份认证信息生成身份信息二维码。
透明图生成单元被配置为根据显示终端101的分辨率信息生成透明图;透明图的分辨率与显示终端101的分辨率一致。
图像处理单元被配置为根据预先生成的透明图的边缘区域所对应的像素点数量,对身份信息二维码进行处理,得到具有缩放后身份信息二维码的第一目标标识图像。
编码单元被配置为按照从左到右、从上到下(也即第一预设次序)的顺序,依次对第一目标标识图像的各像素点的显示信息进行编码,例如将第一颜色像素(例如黑色)编码为第一编码子数据,将第二颜色像素(例如白色)编码为得到第二编码子数据。第一编码数据包括第一编码子数据和第二编码子数据。
第一校验图像生成单元被配置为将第一编码数据按照“从左至右、从上至下、从右至左、以及从下至上”顺序依次替换透明图的边缘区域内对应的像素点的显示数据,当边缘区域的像素点数量大于第一目标标识图像的像素点数量时,将透明图的边缘区域中,除与第一目标标识图像对应的像素点外的像素点的显示数据,继续按照“从左至右、从上至下、从右至左、以及从下至上”顺序,依次替换为第二编码数据,得到第一校验图像。
播放控制模块12被配置为根据接收到的播放计划、与播放计划对应的多媒体文件和第一校验图像,生成待显示数据。
具体地,显示终端101响应于待显示数据进行显示,并按照预设频次截取当前所显示的图像,作为显示图像。图6为本公开实施例提供的显示图像的示意图。如图6所示,其为按照播放计划正常播放下的显示终端101的显示图像,包括显示终端101的结构边框,显示终端101的屏幕黑边,显示终端101的画面区域,显示终端101中每个像素点和边缘区域。
以透明图的特定区域为边缘区域为例,图像解析单元具体被配置为按照“从左至右、从上至下、从右至左、以及从下至上”顺序,依次提取显示图 像的边缘区域内对应的像素点的显示数据,并根据提取到的显示数据,得到显示终端101实际显示的标识图像。
图像处理子单元被配置为根据透明图的边缘区域所对应的像素点数量,将实际显示的标识图像中的各像素点的显示数据,按照从左到右、从上到下(也即第一预设次序)的顺序依次进行组装,得到第二目标标识图像。
第一判断子单元被配置为判断是否存在对第二目标标识图像中的各像素点的颜色信息编码后的目标编码数据(包括第一编码数据和第二编码数据)。
解码子单元被配置为当判断出存在对第二目标标识图像中的各像素点的颜色信息编码后的目标编码数据时,对目标编码数据进行解码,例如将第一编码子数据解码为第一颜色信息,将第二编码子数据解码为第二颜色信息,将第二编码数据解码为第三颜色信息(第三颜色信息可以为第一颜色信息或第二颜色信息)。解码数据包括第一颜色信息、第二颜色信息和第三颜色信息。
第二标识图像生成子单元被配置为将解码后具有解码数据的第二目标标识图像进行缩放,生成第二标识图像。第二标识图像的分辨率信息与第一标识图像的分辨率信息相同。
第一比对单元被配置为调用二维码读取函数,判断是否能够读取第二标识图像,若读取失败则显示图像有误。
第二身份认证信息解析单元被配置为当第二标识图像读取成功时,根据第二标识图像,获取第二身份认证信息。
第二比对单元被配置为将第二身份认证信息与第一身份认证信息进行比对,以确定显示图像是否准确。
上述以透明图的特定区域为边缘区域、第一标识图像为身份信息二维码为例的示例,由于透明图的特定区域为边缘区域,因此不影响用户观看显示终端101显示的多媒体文件的播放内容,能够显示终端101的播放内容进行及时监控。具体监控过程:通过对显示终端101当前所显示的图像进行截图, 并进一步解析显示图像,能够及时发现播放内容是否按照播放顺序播放,播放内容是否准确的问题,极大提高了多媒体监播的安全性,相比于传统方案中人工巡点的方式,本公开实施例能够降低多媒体监播的成本,且及时性较高;相比于显示屏外设摄像头进行光学监播的方案,本公开实施例提供的多媒体监播系统100属于系统内置多媒体监播算法,利用后台数据处理,无需外设检测设备即可高效完成多媒体监播。
在一些示例中,信息管理模块14被配置为对播放计划中的参数信息进行编码,生成第一身份认证信息。
信息管理模块14可以为互联网web端。
参见表一,播放计划中的参数信息包括播放计划标识、多媒体文件的数量、显示终端101中的播放窗口的类型、播放窗口的数量、各个多媒体文件的标识、各个多媒体文件的类型、用于播放各个多媒体文件的播放窗口的标识、各个多媒体文件的播放顺序、各个多媒体文件循环播放的次数。
表一
信息管理模块14被配置为对播放计划表中的参数信息进行编码,参见表一,起始0~3个字节表示播放计划标识,4字节表示多媒体文件的数量,5字节表示显示终端101中的播放窗口的类型,6字节表示播放窗口的数量,7~10字节表示多媒体文件的标识,11字节表示多媒体文件的类型,12字节表示用于播放多媒体文件的播放窗口的标识,13表示多媒体文件的播放顺序,14表示多媒体文件循环播放的次数。如果一个播放计划包括多个待播放的多媒体文件,则继续用后8个字节编码第二个多媒体文件的参数信息,依次类推,一个包含M个多媒体文件的播放计划,共需要7+8M个字节数,其中,前7个字节数表示播放计划的属性,后8M个字节数表示一个多媒体文件的播放信息,M为正整数。
播放窗口的类型可以用数字表示,其中,1表示一个窗口;2表示两个窗口,且横向分布;3表示两个窗口,且纵向分布;4表示三个窗口,一行且横向分布;5表示三个窗口,两行,第一行两个窗口,第二行一个窗口;6表示三个窗口,两行,第一行一个窗口,第二行两个窗口。
多媒体文件的类型包括以下至少一项:视频类型、图像类型、文本类型和音频类型。多媒体文件的类型可以用数字表示,其中,1表示视频类型,即.mp4格式;2表示图像类型,即.JPG格式,.png格式;3表示文件类型,例如.pptx格式、.txt格式;4表示音频格式,即.mp3。
针对上述的播放控制模块12,在一些示例中,播放计划包括各个多媒体文件在显示终端101中的播放窗口信息和播放顺序信息。其中,播放窗口信息包括播放窗口的标识、播放窗口的数量和播放窗口的类型。播放顺序信息包括在一个播放计划中各个多媒体文件的播放顺序。
显示终端101可以包括至少一个播放窗口,每个播放窗口均可以独立执行播放计划,或者,多个播放窗口共同播放一个播放计划指示的多媒体文件。
播放控制模块12,具体被配置为根据各个多媒体文件在显示终端101中的展示区域信息和展示顺序信息,以及与播放计划对应的多媒体文件和第一校验图像,生成待显示数据。显示终端101,具体被配置为响应于待显示数据,以按照各个多媒体文件在显示终端101中的播放窗口信息和播放顺序信息进行显示。
多媒体监播系统100还包括文件分发模块15。分发控制模块被配置为将播放计划和与播放计划对应的多媒体文件发送至播放控制模块12。在一些示例中,分发控制模块被配置为接收信息管理模块14发送的播放计划表,根据播放计划表,按照播放计划中各多媒体文件的播放顺序,将当前待播放的播放计划和与该播放计划对应的多媒体文件同时发送至播放控制模块12。
播放控制模块12在接收到播放计划表和播放计划对应的多媒体文件之后,播放控制模块12被配置为根据播放计划表当前播放计划的参数信息,将播放计划对应的多媒体文件和第一校验图像进行匹配,生成待显示数据。
以参见表一中的播放计划2为例,播放控制模块12生成的待显示数据包括多媒体文件x1、多媒体文件x2、第一校验图像、多媒体文件x1的播放窗口、多媒体文件x2的播放窗口、多媒体文件x1的循环次数和多媒体文件x2的循环次数。显示终端101,具体被配置响应于待显示数据,将多媒体文 件x1(音频)投放到第一行播放窗口进行播放,将多媒体文件x2(视频)投放到第二行播放窗口进行播放。
基于同一发明构思,本公开实施例中还提供了与多媒体监播系统100对应的多媒体监播方法,由于本公开实施例中的多媒体监播方法解决问题的原理与本公开实施例上述多媒体监播系统100相似,因此多媒体监播方法的实施可以参见多媒体监播系统100的实施,重复之处不再赘述。
下面以执行主体为多媒体监播系统100所在平台为例对本公开实施例提供的多媒体监播方法加以说明。
第二方面,图7为本公开实施例提供的一种多媒体监播方法的流程图,如图7所示,该方法包括步骤S1~S4:
S1、根据预先生成的第一标识图像和显示终端101的配置信息,并通过图像生成算法,生成播放计划的第一校验图像;第一标识图像用于表征第一身份认证信息;第一身份认证信息用于表征播放计划表中的播放计划。
在一些示例中,S1可以采用上述实施例中多媒体监播系统100中的校验图像生成模块11实现。
S2、根据接收到的播放计划、与播放计划对应的多媒体文件和第一校验图像,生成待显示数据,以使显示终端101响应于待显示数据进行显示。
在一些示例中,S2可以采用上述实施例中多媒体监播系统100中的播放控制模块12实现。
S3、接收显示终端101发送的显示图像,对显示图像进行解析,并在解析出显示图像中的第二标识图像后,且判断出第二标识图像与第一标识图像一致,获取第二标识图像对应的第二身份认证信息。
S4、将第二身份认证信息与第一身份认证信息进行比对,并根据比对结果判断显示终端101的显示图像是否准确。
在一些示例中,S3和S4可以采用上述实施例中多媒体监播系统100中的分析模块13实现。
本公开实施例,在不影响多媒体文件的播放内容的情况下,对显示终端101的播放内容进行及时监控,具体地,通过对显示终端101当前所显示的图像进行截图,并进一步解析显示图像,能够快速监测显示终端101的显示图像是否准确,极大提高了多媒体监播的安全性,相比于传统方案中人工巡点的方式,本公开实施例能够降低多媒体监播的成本,且及时性较高;相比于显示屏外设摄像头进行光学监播的方案,本公开实施例提供的多媒体监播系统100属于系统内置多媒体监播算法,利用后台数据处理,无需外设检测设备即可高效完成多媒体监播。
为了更清楚本公开实施例的多媒体监播方法,以下给出一种示例性的监播方法。其中,当上述的监播系统中校验图像生成模块11包括第一标识图像生成单元、图像处理单元、透明图生成单元、编码单元和第一校验图像生成单元;分析模块13包括图像解析单元、第二标识图像解析单元、第一比对单元、第二身份认证信息解析单元和第二比对单元时,该方法可以采用多媒体监播系统100实现,下面以透明图的特定区域为边缘区域、第一标识图像为身份信息二维码为例进行说明。该方法具体包括如下步骤:
S101、根据第一身份认证信息生成第一标识图像。
在一些示例中,S101可以采用第一标识图像生成单元实现。具体地,利用标识生成函数将第一身份认证信息的标识按照特定规律进行排布,并按照特定几何图形生成第一标识图像。
示例性的,标识生成函数可以为二维码生成函数,具体地,可以调用二维码生成函数生成一个分辨率为L1*L1的身份信息二维码的图像,该身份信息二维码的图像即为第一标识图像。
本公开实施例中利用身份信息二维码表征第一身份认证信息能够实现对第一身份认证信息的编码保护,增强第一身份认证信息的鲁棒性,也即防止第一身份认证信息在存储和传输过程中被噪声污染而导致信息提取失败。
多媒体监播系统100还包括信息管理模块14。第一身份认证信息可以采用信息管理模块14生成,具体地,对播放计划中的参数信息进行编码, 生成第一身份认证信息。
S102、根据显示终端101的分辨率信息生成透明图;透明图的分辨率与显示终端101的分辨率一致。
在一些示例中,S102可以采用透明图生成单元实现。
透明图具有中间区域和环绕中间区域的边缘区域,特定区域可以包括透明图的边缘区域、或者透明图的顶角区域、或者透明图的非规则形状的设定区域等。
S103、根据预先生成的透明图的特定区域所对应的像素点数量,对第一标识图像进行处理,得到第一目标标识图像。
在一些示例中,该S103可以采用图像处理单元实现。具体地,根据预先生成的透明图的边缘区域所对应的像素点数量,对身份信息二维码进行处理,得到具有缩放后身份信息二维码的第一目标标识图像。
这里,缩放方式可以参照上述图像处理单元的缩放处理过程。例如,身份信息二维码的分辨率信息为L1*L1=N1个像素点,若身份信息二维码像素点的数量N1大于或等于透明图的特定区域所对应的像素点数量N′,则将该身份信息二维码的分辨率等比缩小为L2*L2,其中,L2*L2=N2≤N′,且L2为小于或等于 内的最大的正整数,得到分辨率为L2*L2的第一目标标识图像。若身份信息二维码像素点的数量N1小于或等于透明图的特定区域所对应的像素点数量,则将该身份信息二维码的分辨率等比放大为L2*L2,其中,L2*L2=N2≤N′,且L2为小于或等于 内的最大的正整数,得到分辨率为L2*L2的第一目标标识图像。
S104、对第一目标标识图像的各像素点的显示信息进行编码,得到第一编码数据。
显示信息包括第一目标标识图像所显示出的颜色的信息,可以包括不同种颜色的信息,例如包括但不仅限于黑色和白色等。
在一些示例中,该S104可以采用编码单元实现。具体地,对第一目标标识图像的各像素点的显示信息进行编码,不同的显示信息可以编码不同的 第一编码数据,例如可以将黑色像素点编码为第一编码子数据(例如为0),将白色像素点编码为第二编码子数据(例如为1)等。
在一些示例中,按照从左到右、从上到下(也即第一预设次序)的顺序,依次对第一目标标识图像的各像素点的显示信息进行编码,例如将第一颜色像素(例如黑色)编码为第一编码子数据,将第二颜色像素(例如白色)编码为得到第二编码子数据。第一编码数据包括第一编码子数据和第二编码子数据。
S105、将第一编码数据替换透明图的特定区域内对应的像素点的显示数据,生成第一校验图像。
透明图为单通道的图像,也即具有alpha通道的图像。透明图的特定区域内对应的像素点的显示数据可以是透明图alpha通道的数据。例如,将第一编码数据替换透明图的特定区域内对应的像素点的alpha通道的数据,生成具有缩放后身份信息二维码的透明图(也即第一校验图像)。
在一些示例中,该S105可以采用第一校验图像生成单元实现。
具体实施时,将第一编码数据按照第二预设次序依次替换透明图的特定区域内对应的像素点的显示数据,生成第一校验图像。为了能够使最终在显示终端101显示出较为规则的画面,当特定区域的像素点数量大于第一目标标识图像的像素点数量时,在将第一编码数据替换透明图的特定区域内对应的像素点的显示数据的同时,将透明图的特定区域中,除与第一目标标识图像对应的像素点外的像素点的显示数据,替换为第二编码数据,得到第一校验图像。
与第一目标标识图像对应的像素点外的像素点,也即特定区域内N′个像素点中,除了第一目标标识图像内N2的像素点之外的像素点。
以透明图的特定区域为边缘区域为例,可以将第一目标标识图像中按照预设顺序记录的各像素点的第一编码数据按照“从左至右、从上至下、从右至左、以及从下至上”顺序,依次替换透明图的边缘区域内对应的像素点的显示数据,当边缘区域的像素点数量大于第一目标标识图像的像素点数量 时,将透明图的边缘区域中,除与第一目标标识图像对应的像素点外的像素点的显示数据,继续按照“从左至右、从上至下、从右至左、以及从下至上”顺序,依次替换为第二编码数据,得到第一校验图像。
需要说明的是,本示例中第二预设次序可以不限定为“从左到右,从上到下,从右到左,从下到上”的顺序,可以根据经验和实际应用场景进行限定,不公开实施例不再一一列举。
由于该第二编码数据在后续不参与显示终端101所显示画面的准确性的判断,因此,第二编码数据可以是随机设置的编码数据,或者也可以是与第一编码数据或第二编码数据相同的数据,对此本公开实施例不进行限定。
多媒体监播系统100还包括文件分发模块15,将当前待播放的播放计划和与该播放计划对应的多媒体文件同时发送至播放控制模块12的步骤可以通过文件分发模块15实现。
S106、根据接收到的播放计划、与播放计划对应的多媒体文件和第一校验图像,生成待显示数据。
在一些示例中,该S106可以采用播放控制模块12实现。具体地,根据各个多媒体文件在显示终端101中的展示区域信息和展示顺序信息,以及与播放计划对应的多媒体文件和第一校验图像,生成待显示数据,以使显示终端101按照各个多媒体文件在显示终端101中的播放窗口信息和播放顺序信息进行显示。
显示终端101响应于待显示数据进行显示,并按照预设频次截取当前的显示图像,并将显示图像发送至分析模块13。显示终端101可以包括显示屏,用于显示多媒体文件对应的画面。具体地,显示终端101响应于待显示数据,利用显示终端101中的播放卡控制多媒体文件播放,并按照预设频次截取当前显示屏所显示的图像,将该图像作为显示图像用于后续对显示终端101当前播放的多媒体内容的准确性进行及时监控。
S107、对显示图像进行解析,得到显示终端101实际显示的标识图像。
在一些示例中,该S107可以采用图像解析单元实现。以透明图的特定 区域为边缘区域为例,为按照“从左至右、从上至下、从右至左、以及从下至上”顺序,依次提取显示图像的边缘区域内对应的像素点的显示数据,并根据提取到的显示数据,得到显示终端101实际显示的标识图像。
S108、对实际显示的标识图像进行处理,并根据第一标识图像的分辨率信息,得到第二标识图像。
在一些示例中,该S108可以采用第二标识图像解析单元实现。第二标识图像解析单元包括图像处理子单元、第一判断子单元、解码子单元和第二标识图像生成子单元。S108具体包括如下步骤(S108-1~S108-4):
S108-1、根据透明图的特定区域所对应的像素点数量,对实际显示的标识图像进行处理,得到第二目标标识图像。
在一些示例中,该S108-1可以采用图像处理子单元实现。具体地,将实际显示的标识图像中的各像素点的显示数据,按照透明图的特定区域所对应的像素点数量,组装成第二目标标识图像。
以透明图的特定区域为边缘区域为例,根据透明图的边缘区域所对应的像素点数量,将实际显示的标识图像中的各像素点的显示数据,按照从左到右、从上到下(也即第一预设次序)的顺序依次进行组装,得到第二目标标识图像。
实际显示的标识图像中的各像素点的显示数据的数量为N3,透明图的特定区域所对应的像素点数量为N′,且N3=N′。在组装显示数据的过程中,满足第二目标标识图像的分辨率L3*L3=N4≤N′,且L3为小于或等于 的最大的正整数。
在一些示例中,按照第一预设次序依次对第一目标标识图像的各像素点的显示信息进行编码,得到按照预设顺序排列的第一编码数据。在上述图像处理子单元进行数据组装过程中,可以将实际显示的标识图像中的各像素点的显示数据,按照第一预设次序依次进行组装,若第二目标标识图像的分辨率L3*L3=N4<N′,将实际显示的标识图像中未被组装的其他像素点的显示数据删除,得到第二目标标识图像。
S108-2、判断是否存在对第二目标标识图像中的各像素点的显示信息编码后的目标编码数据。
在一些示例中,该S108-2可以采用第一判断子单元实现。具体地,判断是否存在对第二目标标识图像中的各像素点的颜色信息编码后的目标编码数据(包括第一编码数据和第二编码数据)。若判断出不存在对第二目标标识图像中的各像素点的显示信息编码后的目标编码数据,则显示图像不准确。
S108-3、当判断出存在对第二目标标识图像中的各像素点的显示信息编码后的目标编码数据时,对目标编码数据进行解码,得到解码数据。
在一些示例中,该S108-3可以采用解码子单元实现。
当特定区域的像素点数量等于第一目标标识图像的像素点数量时,目标编码数据为第一编码数据;当特定区域的像素点数量等于第一目标标识图像的像素点数量时,目标编码数据包括第一编码数据和第二编码数据。
具体地,当判断出存在对第二目标标识图像中的各像素点的颜色信息编码后的目标编码数据时,对目标编码数据进行解码,例如将第一编码子数据解码为第一颜色信息,将第二编码子数据解码为第二颜色信息,将第二编码数据解码为第三颜色信息(第三颜色信息可以为第一颜色信息或第二颜色信息)。解码数据包括第一颜色信息、第二颜色信息和第三颜色信息。
S108-4、根据第一标识图像的分辨率信息和解码数据,生成第二标识图像。
在一些示例中,该S108-4可以采用第二标识图像生成子单元实现。具体地,根据第一标识图像的分辨率信息,将解码后具有解码数据的第二目标标识图像进行缩放,以使缩放后的第二标识图像的分辨率L4*L4与第一标识图像的分辨率L1*L1相同。
在第一目标标识图像具有缩放后身份信息二维码、且播放计划正常的情况下,第二目标标识图像具有解码数据对应的二维码。具体地,根据第一标识图像的分辨率信息,缩放具有解码数据对应的二维码得到第二标识图像。
这里的缩放方式与上述“对身份信息二维码进行缩放,得到具有缩放后身份信息二维码的第一目标标识图像”的缩放方式相同,若解码后具有解码数据的第二目标标识图像的分辨率L3*L3小于L1*L1,根据第一标识图像的分辨率L1*L1,对该第二目标标识图像进行放大,例如利用插值法填充像素,直到生成的第二标识图像分辨率与第一标识图像分辨率相同。若解码后具有解码数据的第二目标标识图像的分辨率L3*L3大于L1*L1,根据第一标识图像的分辨率L1*L1,对该第二目标标识图像进行缩小,例如剔除部分像素点,直到生成的第二标识图像分辨率与第一标识图像分辨率相同。
S109、将第二标识图像的类型与第一标识图像的类型进行比对,若二者类型不一致则显示图像有误。
在一些示例中,该S109可以采用第一对比单元实现。具体地,第一标识图像的类型为二维码,若第二标识图像的类型也为二维码,则确定第二标识图像的类型与第一标识图像的类型一致;若第二标识图像的类型并非为二维码形式的标识图像,则确定第二标识图像的类型与第一标识图像的类型不一致。具体地,利用二维码读取函数,读取第二标识图像的二维码信息,若读取成功,则表示该第二标识图像为二维码类型的图像,若读取失败,则表示该第二标识图像的类型并非为二维码类型,进而确定显示图像有误。
S110、当第二标识图像的类型与第一标识图像的类型一致时,根据第二标识图像,获取第二身份认证信息。
在一些示例中,该S110可以采用第二身份认证信息解析单元实现。
具体地,当第二标识图像与第一标识图像一致时,利用标识生成反函数将第二标识图像,按照特定规律排布反解析出第二身份认证信息。
标识生成反函数为上述标识生成函数的逆运算函数。以第二标识图像为二维码为例,标识生成函数可以为二维码生成函数,则标识生成反函数为二维码生成函数的逆运算过程,将二维码利用二维码生成函数的逆运算过程反解析为第二身份认证信息。
S111、将第二身份认证信息与第一身份认证信息进行比对,以确定显示 图像是否准确,若判断显示图像准确,则流程结束;若判断显示图像有误,则执行S112。
在一些示例中,该S111可以采用第二比对单元实现。
具体地,将第二身份认证信息与第一身份认证信息进行比对,确定二者身份信息相似度,在身份信息相似度大于或等于预设相似度阈值时,确定显示图像是否准确。在身份信息相似度小于预设阈值时,确定显示图像有误。其中,预设相似度阈值可以根据实际应用场景和经验确定,本公开实施例不进行具体限定。
S112、当判断出显示图像不准确时,向显示终端101发送取消显示的控制指令,以使显示终端101取消对显示图像的显示,并生成报警信息。
在一些示例中,该S112可以采用第二比对单元实现。
当显示终端101接收到分析模块13发送的取消显示的控制指令时,可以利用播放卡关闭屏幕,并生成报警信息,报警信息可以是以文本的形式显示在屏幕上的;或者,报警信息也可以是以报警提示音进行播放的。
基于同一技术构思,本申请实施例还提供了一种计算机设备。参照图8所示,为本申请实施例提供的计算机设备的结构示意图,包括:
处理器81、存储器82和总线83。其中,存储器82存储有处理器81可执行的机器可读指令,处理器81用于执行存储器82中存储的机器可读指令,所述机器可读指令被处理器81执行时,处理器81执行下述步骤:S1、根据预先生成的第一标识图像和显示终端101的配置信息,并通过图像生成算法,生成播放计划的第一校验图像;第一标识图像用于表征第一身份认证信息;第一身份认证信息用于表征播放计划表中的播放计划。S2、根据接收到的播放计划、与播放计划对应的多媒体文件和第一校验图像,生成待显示数据,以使显示终端101响应于待显示数据进行显示。S3、接收显示终端101发送的显示图像,对显示图像进行解析,并在解析出显示图像中的第二标识图像后,且判断出第二标识图像与第一标识图像一致,获取第二标识图像对应的第二身份认证信息。S4、将第二身份认证信息与第一身份认证信息进行 比对,并根据比对结果判断显示终端101的显示图像是否准确。
上述存储器82包括内存821和外部存储器822;这里的内存821也称内存储器,用于暂时存放处理器81中的运算数据,以及与硬盘等外部存储器822交换的数据,处理器81通过内存821与外部存储器822进行数据交换,当计算机设备运行时,处理器81与存储器82之间通过总线83通信,使得处理器81在执行上述方法实施例中所提及的执行指令。
本公开实施例还提供一种计算机非瞬态可读存储介质,该计算机非瞬态可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述方法实施例中所述的多媒体监播方法的步骤。其中,该存储介质可以是易失性或非易失的计算机非瞬态可读取存储介质。
本公开实施例还提供了一种电子设备,包括上述公开实施例中的多媒体监播系统100和显示终端101。
可以理解的是,以上实施方式仅仅是为了说明本发明/实用新型的原理而采用的示例性实施方式,然而本发明/实用新型并不局限于此。对于本领域内的普通技术人员而言,在不脱离本发明/实用新型的精神和实质的情况下,可以做出各种变型和改进,这些变型和改进也视为本发明/实用新型的保护范围。

Claims (16)

  1. 一种多媒体监播方法,其中,包括:
    根据预先生成的第一标识图像和显示终端的配置信息,并通过图像生成算法,生成播放计划的第一校验图像;所述第一标识图像用于表征第一身份认证信息;所述第一身份认证信息用于表征播放计划表中的播放计划;
    根据接收到的播放计划、与所述播放计划对应的多媒体文件和所述第一校验图像,生成待显示数据,以使显示终端响应于待显示数据进行显示;
    接收所述显示终端发送的显示图像,对所述显示图像进行解析,并在解析出所述显示图像中的第二标识图像后,且判断出所述第二标识图像与所述第一标识图像一致,获取所述第二标识图像对应的第二身份认证信息;
    将所述第二身份认证信息与所述第一身份认证信息进行比对,并根据比对结果判断所述显示终端的显示图像是否准确。
  2. 根据权利要求1所述的多媒体监播方法,其中,所述根据预先生成的第一标识图像和所述显示终端的配置信息,并通过图像生成算法,生成播放计划的第一校验图像,包括:
    根据所述第一身份信息生成第一标识图像;
    根据预先生成的透明图的特定区域所对应的像素点数量,对第一标识图像进行处理,得到第一目标标识图像;
    对所述第一目标标识图像的各像素点的显示信息进行编码,得到第一编码数据;
    将所述第一编码数据替换所述透明图的特定区域内对应的像素点的显示数据,生成第一校验图像。
  3. 根据权利要求2所述的多媒体监播方法,其中,在所述根据所述第一身份信息生成第一标识图像之后,还包括:
    根据所述显示终端的分辨率信息生成所述透明图;所述透明图的分辨率与所述显示终端的分辨率一致。
  4. 根据权利要求2所述的多媒体监播方法,其中,所述透明图具有中间区域和环绕所述中间区域的边缘区域;所述特定区域为所述边缘区域。
  5. 根据权利要求2所述的多媒体监播方法,其中,当所述特定区域的像素点数量大于所述第一目标标识图像的像素点数量时,所述将所述第一编码数据替换所述透明图的特定区域内对应的像素点的显示数据,生成第一校验图像,包括:
    在将所述第一编码数据替换所述透明图的特定区域内对应的像素点的显示数据的同时,将所述透明图的特定区域中,除与所述第一目标标识图像对应的像素点外的像素点的显示数据,替换为第二编码数据,得到所述第一校验图像。
  6. 根据权利要求2所述的多媒体监播方法,其中,对所述显示图像进行解析,以判断所述显示终端的显示图像是否准确的具体步骤包括:
    对所述显示图像进行解析,得到所述显示终端实际显示的标识图像;
    对所述实际显示的标识图像进行处理,并根据所述第一标识图像的分辨率信息,得到所述第二标识图像;
    将所述第二标识图像与所述第一标识图像进行比对,若二者不一致则显示图像有误;
    当所述第二标识图像与所述第一标识图像一致时,根据所述第二标识图像,获取第二身份认证信息;
    将所述第二身份认证信息与所述第一身份认证信息进行比对,以确定所述显示图像是否准确。
  7. 根据权利要求6所述的多媒体监播方法,其中,所述对所述实际显示的标识图像进行处理,并根据所述第一标识图像的分辨率信息,得到所述第二标识图像,包括:
    根据所述透明图的特定区域所对应的像素点数量,对所述实际显示的标识图像进行处理,得到第二目标标识图像;
    判断是否存在对所述第二目标标识图像中的各像素点的显示信息编码后的目标编码数据;
    当判断出存在对所述第二目标标识图像中的各像素点的显示信息编码后的目标编码数据时,对所述目标编码数据进行解码,得到解码数据;
    根据所述第一标识图像的分辨率信息和所述解码数据,生成第二标识图像。
  8. 根据权利要求7所述的多媒体监播方法,其中,所述对所述第一目标标识图像的各像素点的显示信息进行编码,得到第一编码数据,包括:
    按照第一预设次序依次对所述第一目标标识图像的各像素点的显示信息进行编码,得到第一编码数据;
    所述根据所述透明图的特定区域所对应的像素点数量,对所述实际显示的标识图像进行处理,得到第二目标标识图像,包括:
    根据所述透明图的特定区域所对应的像素点数量,将所述实际显示的标识图像中的各像素点的显示数据,按照所述第一预设次序依次进行组装,得到第二目标标识图像。
  9. 根据权利要求6所述的多媒体监播方法,其中,所述将所述第一编码数据替换所述透明图的特定区域内对应的像素点的显示数据,生成第一校验图像,包括:
    将所述第一编码数据按照预设次序依次替换所述透明图的特定区域内对应的像素点的显示数据,生成所述第一校验图像;
    所述对所述显示图像进行解析,得到所述显示终端实际显示的标识图像,包括:
    为按照所述预设次序,依次提取所述显示图像的特定区域内对应的像素点的显示数据,并根据提取到的显示数据,得到所述显示终端实际显示的标识图像。
  10. 根据权利要求1所述的多媒体监播方法,其中,所述播放计划包括 各个所述多媒体文件在所述显示终端中的播放窗口信息和播放顺序信息;
    所述根据接收到的播放计划、与所述播放计划对应的多媒体文件和所述第一校验图像,生成待显示数据,包括:
    根据各个所述多媒体文件在所述显示终端中的展示区域信息和展示顺序信息,以及与所述播放计划对应的多媒体文件和所述第一校验图像,生成所述待显示数据,以使所述显示终端响应于所述待显示数据,以按照各个所述多媒体文件在所述显示终端中的播放窗口信息和播放顺序信息进行显示。
  11. 根据权利要求1所述的多媒体监播方法,其中,在对所述显示图像进行分析时,还包括:
    当判断出所述显示图像不准确时,向所述显示终端发送取消显示的控制指令,以使所述显示终端取消对所述显示图像的显示,并生成报警信息。
  12. 根据权利要求1所述的多媒体监播方法,其中,还包括:
    对所述播放计划中的参数信息进行编码,生成所述第一身份认证信息。
  13. 一种多媒体监播系统,其包括校验图像生成模块、播放控制模块和分析模块,其中,
    所述校验图像生成模块,被配置为根据预先生成的第一标识图像和显示终端的配置信息,并通过图像生成算法,生成播放计划的第一校验图像;所述第一标识图像用于表征第一身份认证信息;所述第一身份认证信息用于表征播放计划表中的播放计划;
    所述播放控制模块,被配置为根据接收到的播放计划、与所述播放计划对应的多媒体文件和所述第一校验图像,生成待显示数据,以供所述显示终端进行显示;
    所述分析模块,被配置为对所述显示终端按照预设频次截取的显示图像进行解析,并在解析出第二标识图像后,且判断出所述第二标识图像与所述第一标识图像一致,获取所述第二标识图像对应的第二身份认证信息,并将所述第二身份认证信息与所述第一身份认证信息进行比对,并根据比对结果判断所述显示终端的显示是否准确。
  14. 一种计算机设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当计算机设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至12中任一项所述的多媒体监播方法的步骤。
  15. 一种计算机非瞬态可读存储介质,其特征在于,该计算机非瞬态可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如权利要求1至12中任一项所述的多媒体监播方法的步骤。
  16. 一种电子设备,其中,包括权利要求13所述的多媒体监播系统和显示终端。
CN202280001247.8A 2022-05-18 2022-05-18 多媒体监播方法、系统及电子设备 Pending CN117426100A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2022/093467 WO2023220956A1 (zh) 2022-05-18 2022-05-18 多媒体监播方法、系统及电子设备

Publications (1)

Publication Number Publication Date
CN117426100A true CN117426100A (zh) 2024-01-19

Family

ID=88834465

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202280001247.8A Pending CN117426100A (zh) 2022-05-18 2022-05-18 多媒体监播方法、系统及电子设备

Country Status (2)

Country Link
CN (1) CN117426100A (zh)
WO (1) WO2023220956A1 (zh)

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103002338A (zh) * 2012-08-09 2013-03-27 杨世忠 视频智能监播识别系统
CN103731634B (zh) * 2013-12-04 2017-02-15 西安诺瓦电子科技有限公司 媒体监播方法和媒体监播系统
CN103763624B (zh) * 2014-01-27 2017-02-15 北京宽广融合传媒科技有限公司 一种电视频道节目互动的方法与装置
CN108012189B (zh) * 2017-04-13 2020-07-24 广州欢网科技有限责任公司 一种智能电视的直播频道识别方法与系统
CN107993087A (zh) * 2017-11-15 2018-05-04 深圳市金立通信设备有限公司 一种数据处理方法、服务器及计算机可读介质
CN112148896A (zh) * 2020-09-10 2020-12-29 京东数字科技控股股份有限公司 一种用于终端媒体监播的数据处理方法及装置

Also Published As

Publication number Publication date
WO2023220956A1 (zh) 2023-11-23

Similar Documents

Publication Publication Date Title
CN109960957B (zh) 残缺二维码及其生成、修复和识别方法、装置及系统
CN111178523B (zh) 一种行为检测方法、装置、电子设备及存储介质
CN108665041B (zh) 二维码生成及识别方法、装置、计算机设备及存储介质
JP5989004B2 (ja) ロゴ認証
CN110633675A (zh) 一种基于卷积神经网络的视频中火灾识别系统及方法
CN108399327B (zh) 电子装置、基于动态图片的用户验证方法及存储介质
TW201631964A (zh) 使用嵌入於視訊串流中之快速回應碼之自動化視訊測試
CN104992117A (zh) Html5移动应用程序的异常行为检测方法和行为模型建立方法
CN110765795A (zh) 二维码识别方法、装置及电子设备
CN117426100A (zh) 多媒体监播方法、系统及电子设备
CN104463156B (zh) 数字式钢琴编码解码方法
CN107465940B (zh) 视频对准方法、电子设备及存储介质
CN115761567A (zh) 视频处理方法、装置、电子设备及计算机可读存储介质
CN110490079A (zh) 巡检数据处理方法、装置、计算机设备和存储介质
CN112135123B (zh) 视频质量检测方法及装置
US20220201362A1 (en) Artificial intelligence and machine learning evaluation of elements in rendered video
CN113613015A (zh) 防篡改视频生成方法、装置、电子设备及可读介质
CN112381058A (zh) 基于行人重识别的黑白名单管控方法及设备
CN113034430B (zh) 基于时间水印变化分析的视频真伪检验鉴定方法和系统
CN113568840B (zh) 一种识别过渡绘制的方法和系统
CN110222753A (zh) 字符识别验证方法、系统、计算机设备、存储介质和芯片
US20240095479A1 (en) Dynamic two-dimensional code group generation method and system
CN112312119A (zh) 一种视频播放测试方法、装置、智能终端及存储介质
CN115665478A (zh) 非可信环境下摄像头视频流真实性的校验系统和方法
WO2024045064A1 (zh) 播放内容的监测方法、主机、系统、装置、介质及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination