CN111324271B - 一种多媒体信息处理方法、装置、电子设备及存储介质 - Google Patents

一种多媒体信息处理方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN111324271B
CN111324271B CN201911394912.0A CN201911394912A CN111324271B CN 111324271 B CN111324271 B CN 111324271B CN 201911394912 A CN201911394912 A CN 201911394912A CN 111324271 B CN111324271 B CN 111324271B
Authority
CN
China
Prior art keywords
multimedia information
matched
information
display interface
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911394912.0A
Other languages
English (en)
Other versions
CN111324271A (zh
Inventor
任春剑
杨晓星
卞景浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201911394912.0A priority Critical patent/CN111324271B/zh
Priority to CN202111101782.4A priority patent/CN113741774A/zh
Publication of CN111324271A publication Critical patent/CN111324271A/zh
Application granted granted Critical
Publication of CN111324271B publication Critical patent/CN111324271B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements

Abstract

本发明提供了一种多媒体信息处理方法、装置、电子设备及存储介质,方法包括:确定与终端显示界面中所展示的信息流相匹配的操作参数,其中,所述操作参数用于表征与终端显示界面所展示的信息流进行交互过程中不同操作所产生的参数;根据所述操作参数,确定与所述操作参数相匹配的状态特征;响应于所述状态特征,触发与所述状态特征相对应的控制组件,并通过所述控制组件确定与所述状态特征相匹配的多媒体信息。本发明能够实现通过终端显示界面呈现与操作参数相匹配的多媒体信息,同时确定多媒体信息的过程复杂程度低于传统的框架结构,内存占用低,效率比原生开发高,减轻了多媒体信息确定过程中的学习成本。

Description

一种多媒体信息处理方法、装置、电子设备及存储介质
技术领域
本发明涉及基于多媒体信息生成技术,尤其涉及多媒体信息处理方法、装置、电子设备及存储介质。
背景技术
现有技术中,动态布局可以实现信息的交互,这一过程中,信息流广告因为内嵌在信息流中、随内容无限刷等优势,已经成为了移动端广告的主流形式,但是在广告的投放过程中,目前除了静态UI布局有变化外,形式还比较单一,都是局限在通过静态布局进行调整。当然也有视频信息流广告和内嵌H5广告,不再局限于静态图,但相对来说制作成本要高,而且也没有丰富的原生互动能力。同时框架比较复杂,内存占用高,效率比原生开发低,而且对客户端开发来说,有一定的学习成本,不利于推广使用。
发明内容
有鉴于此,本发明实施例提供一种多媒体信息处理方法、装置、电子设备及存储介质,能够实现通过所述终端显示界面呈现所述目标用户的操作参数相匹配的多媒体信息,同时结构复杂程度低于框架结构,内存占用低,效率比原生开发高,减轻了多媒体信息确定过程中的学习成本。
本发明实施例的技术方案是这样实现的:
本发明实施例提供了一种多媒体信息处理方法,所述方法包括:
确定与终端显示界面中所展示的信息流相匹配的操作参数,其中,所述操作参数用于表征与终端显示界面所展示的信息流进行交互过程中不同操作所产生的参数;
根据所述操作参数,确定与所述操作参数相匹配的状态特征;
响应于所述状态特征,触发与所述状态特征相对应的控制组件,并通过所述控制组件确定与所述状态特征相匹配的多媒体信息;
通过所述终端显示界面呈现相应的多媒体信息。
本发明实施例还提供了一种多媒体信息处理方法,包括:
在终端的显示界面中,通过信息流呈现多条媒体信息;
接收到基于所述显示界面触发的对应所述信息流的交互操作;
跟随所述交互操作,滑动所述显示界面中所呈现的信息流,更新通过所述信息流呈现的所述多条媒体信息,并
以内嵌于所述信息流或覆盖所述信息流的形式,采用与所述互动操作相适配的播放方式,同步与所呈现的信息流对应的多媒体信息。
本发明实施例还提供了一种多媒体信息处理装置,所述装置包括:
信息传输模块,用于确定与终端显示界面中所展示的信息流相匹配的操作参数,其中,所述操作参数用于表征与终端显示界面所展示的信息流进行交互过程中不同操作所产生的参数;
信息处理模块,用于根据所述操作参数,确定与所述操作参数相匹配的状态特征;
所述信息处理模块,用于响应于所述状态特征,触发与所述状态特征相对应的控制组件,并通过所述控制组件确定与所述状态特征相匹配的多媒体信息;
所述信息传输模块,用于通过所述终端显示界面呈现相应的多媒体信息。
上述方案中,
所述信息处理模块,用于在所述终端显示界面中触发所述目标用户所对应的跟踪标识;
所述信息处理模块,用于在所述终端显示界面中加载与所述显示界面相匹配的互动元素集合;
所述信息处理模块,用于侦测所述互动元素集合的触发状态和所述跟踪标识的位置变化,确定与所述信息流相匹配的操作参数。
上述方案中,
所述信息处理模块,用于根据所述操作参数中的位移量参数,确定与所述位移量参数相匹配的第一状态特征,以实现所述第一状态特征与与所述交互操作相匹配;
所述信息处理模块,用于根据所述操作参数中的等待时长参数,确定与所述等待时长参数相匹配的第二状态特征,以实现所述第二状态特征与所述终端显示界面的等待模式相匹配;
所述信息处理模块,用于根据所述操作参数中的条件判断参数,确定与所述条件判断参数相匹配的第三状态特征,以实现所述第三状态特征与所述终端显示界面的观察模式相匹配。
上述方案中,
所述信息处理模块,用于根据所述第一状态特征,触发与所述第一状态特征相对应的风格特征组件,并通过所述风格特征组件确定与所述第一状态特征相匹配的多媒体信息,以实现所述多媒体信息与所述操作参数中的位移量参数相匹配。
上述方案中,
所述信息处理模块,用于根据所述第二状态特征,触发与所述第二状态特征相对应的风格特征组件,并通过所述风格特征组件确定与所述第二状态特征相匹配的多媒体信息,以实现所述多媒体信息的显示时间与所述等待时长参数相匹配。
上述方案中,
所述信息处理模块,用于根据所述第三状态特征,触发与所述第三状态特征相对应的风格特征组件,并通过所述风格特征组件确定与所述第三状态特征相匹配的多媒体信息,以实现所述多媒体信息的显示方式与所述条件判断参数相匹配。
上述方案中,
所述信息处理模块,用于确定与所述状态特征相对应的过渡多媒体信息;
所述信息传输模块,用于当与所述操作参数相匹配的状态特征发生调整时,通过所述终端显示界面呈现所述过渡多媒体信息。
上述方案中,
所述信息处理模块,用于确定所述终端显示界面的使用环境;
所述信息处理模块,用于根据所述终端显示界面的使用环境,确定不同的状态特征集合;
所述信息处理模块,用于响应于所述不同的状态特征集合,将相应的控制组件进行封装为控制组件集合,以实现所述控制组件集合与所述使用环境相匹配,并能够确定与所述状态特征相匹配的多媒体信息。
上述方案中,
所述信息处理模块,用于将标识信息、所述控制组件信息和所述多媒体信息发送至区块链网络,以使
所述区块链网络的节点将标识信息、所述控制组件信息和所述多媒体信息填充至新区块,且当对所述新区块共识一致时,将所述新区块追加至区块链的尾部,以实现同一用户的不同使用环境中所述终端均能够获取所述区块中的信息。
本发明实施例还提供了一种多媒体信息处理装置,所述装置包括:
第一呈现模块,用于在终端的显示界面中,通过信息流呈现多条媒体信息;
第二呈现模块,用于接收到基于所述显示界面触发的对应所述信息流的交互操作;
所述第二呈现模块,用于跟随所述交互操作,滑动所述显示界面中所呈现的信息流,更新通过所述信息流呈现的所述多条媒体信息;
所述第二呈现模块,用于以内嵌于所述信息流或覆盖所述信息流的形式,采用与所述互动操作相适配的播放方式,同步与所呈现的信息流对应的多媒体信息。
本发明实施例还提供了一种电子设备,所述电子设备包括:
存储器,用于存储可执行指令;
处理器,用于运行所述存储器存储的可执行指令时,实现前序的多媒体信息处理方法。
本发明实施例还提供了一种计算机可读存储介质,存储有可执行指令,所述可执行指令被处理器执行时实现前序的多媒体信息处理方法。
本发明实施例具有以下有益效果:
本发明通过确定与终端显示界面中所展示的信息流相匹配的操作参数,其中,所述操作参数用于表征与终端显示界面所展示的信息流进行交互过程中不同操作所产生的参数;根据所述操作参数,确定与所述操作参数相匹配的状态特征;响应于所述状态特征,触发与所述状态特征相对应的控制组件,并通过所述控制组件确定与所述状态特征相匹配的多媒体信息;通过所述终端显示界面呈现相应的多媒体信息,由此,不但实现了通过终端显示界面呈现与操作参数相匹配的多媒体信息,同时确定多媒体信息的过程复杂程度低于传统的框架结构,内存占用低,效率比原生开发高,减轻了广告主的学习成本。
附图说明
图1为本发明实施例提供的多媒体信息处理方法的使用场景示意图;
图2为本发明实施例提供的多媒体信息处理装置的组成结构示意图;
图3为本发明实施例提供的多媒体信息处理方法一个可选的流程示意图;
图4为本发明实施例的多媒体信息处理方法的前端显示示意图;
图5为本发明实施例提供的多媒体信息处理方法一个可选的流程示意图;
图6为本发明实施例提供的多媒体信息处理装置的组成结构示意图;
图7为本发明实施例提供的多媒体信息处理方法一个可选的流程示意图;
图8A为本发明实施例的多媒体信息处理方法的前端显示示意图;
图8B为本发明实施例的多媒体信息处理方法的前端显示示意图;
图8C为本发明实施例的多媒体信息处理方法的前端显示示意图;
图9是本发明实施例提供的多媒体信息处理装置100的架构示意图;
图10是本发明实施例提供的区块链网络200中区块链的结构示意图;
图11是本发明实施例提供的区块链网络200的功能架构示意图;
图12为本发明实施例的多媒体信息处理方法的使用环境示意图;
图13为本发明实施例的多媒体信息处理方法的前端显示示意图;
图14为本发明实施例提供的多媒体信息处理方法一个可选的流程示意图;
图15为本发明实施例提供的多媒体信息处理方法一个可选的数据结构示意图;
图16为本发明实施例提供的多媒体信息处理方法一个可选的组件结构示意图;
图17为本发明实施例提供的多媒体信息处理方法中封装组件示意图;
图18为本发明实施例提供的多媒体信息处理方法中通信状态示意图;
图19为本发明实施例提供的多媒体信息处理方法中渲染过程示意图;
图20A为本发明实施例中采用多媒体信息处理方法的效果对比图;
图20B为本发明实施例中多媒体信息的热力示意图;
图20C为本发明实施例中采用多媒体信息处理方法的效果对比图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述,所描述的实施例不应视为对本发明的限制,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
在以下的描述中,涉及到“一些实施例”,其描述了所有可能实施例的子集,但是可以理解,“一些实施例”可以是所有可能实施例的相同子集或不同子集,并且可以在不冲突的情况下相互结合。
对本发明实施例进行进一步详细说明之前,对本发明实施例中涉及的名词和术语进行说明,本发明实施例中涉及的名词和术语适用于如下的解释。
1)响应于,用于表示所执行的操作所依赖的条件或者状态,当满足所依赖的条件或状态时,所执行的一个或多个操作可以是实时的,也可以具有设定的延迟;在没有特别说明的情况下,所执行的多个操作不存在执行先后顺序的限制。
2)终端,包括但不限于:普通终端、专用终端,其中所述普通终端与发送通道保持长连接和/或短连接,所述专用终端与所述发送通道保持长连接。
3)客户端,终端中实现特定功能的载体,例如移动客户端(APP)是移动终端中特定功能的载体,例如执行线上直播的功能或者是在线视频的播放功能。
4)API:全称Application Programming Interface,可语义理解成应用程序接口,是一些预先定义的函数,或指软件系统不同组成部分衔接的约定。目的是提供应用程序与开发人员基于某软件或硬件得以访问一组例程的能力,而又无需访问原码,或理解内部工作机制的细节。
5)交易(Transaction),等同于计算机术语“事务”,交易包括了需要提交到区块链网络执行的操作,并非单指商业语境中的交易,鉴于在区块链技术中约定俗成地使用了“交易”这一术语,本发明实施例遵循了这一习惯。
6)区块链(Blockchain),是由区块(Block)形成的加密的、链式的交易的存储结构。
7)区块链网络(Blockchain Network),通过共识的方式将新区块纳入区块链的一系列的节点的集合。
8)账本(Ledger),是区块链(也称为账本数据)和与区块链同步的状态数据库的统称。
9)智能合约(Smart Contracts),也称为链码(Chaincode)或应用代码,部署在区块链网络的节点中的程序,节点执行接收的交易中所调用的智能合约,来对状态数据库的键值对数据进行更新或查询的操作。
10)共识(Consensus),是区块链网络中的一个过程,用于在涉及的多个节点之间对区块中的交易达成一致,达成一致的区块将被追加到区块链的尾部,实现共识的机制包括工作量证明(PoW,Proof of Work)、权益证明(PoS,Proof of Stake)、股份授权证明(DPoS,Delegated Proof-of-Stake)、消逝时间量证明(PoET,Proof of Elapsed Time)等。
图1为本发明实施例提供的多媒体信息处理方法的使用场景示意图,参见图1,终端(包括终端10-1和终端10-2)上设置有多媒体信息展示功能软件的客户端,其中,本申请中,多媒体信息的定义包括但不限于:音乐、视频、文章、商品,例如视频播放的客户端或插件,或者购物功能的客户端,用户通过相应的客户端可以获得目标视频,也可以浏览不同的商品信息;终端通过网络300连接服务器200,网络300可以是广域网或者局域网,又或者是二者的组合,使用无线链路实现数据传输。
作为一个示例,服务器200用于布设所述多媒体信息并通过所述多媒体信息生成与所述使用环境中相匹配的新的多媒体信息,并通过终端(终端10-1和/或终端10-2)展示多媒体信息所生成与所述使用环境中相匹配的新的多媒体信息。
具体的,多媒体信息处理方法过程包括:确定与终端显示界面中所展示的信息流相匹配的操作参数,其中,所述操作参数用于表征与终端显示界面所展示的信息流进行交互过程中不同操作所产生的参数;根据所述操作参数,确定与所述操作参数相匹配的状态特征;响应于所述状态特征,触发与所述状态特征相对应的控制组件,并通过所述控制组件确定与所述状态特征相匹配的多媒体信息;通过所述终端显示界面呈现相应的多媒体信息。
下面对本发明实施例的多媒体信息处理装置的结构做详细说明,多媒体信息处理装置可以各种形式来实施,如带有多媒体信息处理功能的专用终端,也可以为设置有多媒体信息处理功能的服务器,例如前序图1中的服务器200。图2为本发明实施例提供的多媒体信息处理装置的组成结构示意图,可以理解,图2仅仅示出了多媒体信息处理装置的示例性结构而非全部结构,根据需要可以实施图2示出的部分结构或全部结构。
本发明实施例提供的多媒体信息处理装置包括:至少一个处理器201、存储器202、用户接口203和至少一个网络接口204。多媒体信息处理装置中的各个组件通过总线系统205耦合在一起。可以理解,总线系统205用于实现这些组件之间的连接通信。总线系统205除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图2中将各种总线都标为总线系统205。
其中,用户接口203可以包括显示器、键盘、鼠标、轨迹球、点击轮、按键、按钮、触感板或者触摸屏等。
可以理解,存储器202可以是易失性存储器或非易失性存储器,也可包括易失性和非易失性存储器两者。本发明实施例中的存储器202能够存储数据以支持终端(如10-1)的操作。这些数据的示例包括:用于在终端(如10-1)上操作的任何计算机程序,如操作系统和应用程序。其中,操作系统包含各种系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务。应用程序可以包含各种应用程序。
在一些实施例中,本发明实施例提供的多媒体信息处理装置可以采用软硬件结合的方式实现,作为示例,本发明实施例提供的多媒体信息处理方法装置可以是采用硬件译码处理器形式的处理器,其被编程以执行本发明实施例提供的多媒体信息处理方法。例如,硬件译码处理器形式的处理器可以采用一个或多个应用专用集成电路(ASIC,ApplicationSpecific Integrated Circuit)、DSP、可编程逻辑器件(PLD,Programmable LogicDevice)、复杂可编程逻辑器件(CPLD,Complex Programmable Logic Device)、现场可编程门阵列(FPGA,Field-Programmable Gate Array)或其他电子元件。
作为本发明实施例提供的多媒体信息处理装置采用软硬件结合实施的示例,本发明实施例所提供的多媒体信息处理装置可以直接体现为由处理器201执行的软件模块组合,软件模块可以位于存储介质中,存储介质位于存储器202,处理器201读取存储器202中软件模块包括的可执行指令,结合必要的硬件(例如,包括处理器201以及连接到总线205的其他组件)完成本发明实施例提供的多媒体信息处理方法。
作为示例,处理器201可以是一种集成电路芯片,具有信号的处理能力,例如通用处理器、数字信号处理器(DSP,Digital Signal Processor),或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等,其中,通用处理器可以是微处理器或者任何常规的处理器等。
作为本发明实施例提供的多媒体信息处理装置采用硬件实施的示例,本发明实施例所提供的装置可以直接采用硬件译码处理器形式的处理器201来执行完成,例如,被一个或多个应用专用集成电路(ASIC,Application Specific Integrated Circuit)、DSP、可编程逻辑器件(PLD,Programmable Logic Device)、复杂可编程逻辑器件(CPLD,ComplexProgrammable Logic Device)、现场可编程门阵列(FPGA,Field-Programmable GateArray)或其他电子元件执行实现本发明实施例提供的多媒体信息处理方法。
本发明实施例中的存储器202用于存储各种类型的数据以支持多媒体信息处理装置的操作。这些数据的示例包括:用于在多媒体信息处理装置上操作的任何可执行指令,如可执行指令,实现本发明实施例的从多媒体信息处理方法的程序可以包含在可执行指令中。
在另一些实施例中,本发明实施例提供的多媒体信息处理装置可以采用软件方式实现,图2示出了存储在存储器202中的多媒体信息处理装置,其可以是程序和插件等形式的软件,并包括一系列的模块,作为存储器202中存储的程序的示例,可以包括多媒体信息处理装置,多媒体信息处理装置中包括以下的软件模块:信息传输模块2081和信息处理模块2082。当多媒体信息处理装置中的软件模块被处理器201读取到RAM中并执行时,将实现本发明实施例提供的多媒体信息处理方法,下面继续说明多媒体信息处理装置中各个软件模块的功能,其中,
信息传输模块2081,用于确定与终端显示界面中所展示的信息流相匹配的操作参数,其中,所述操作参数用于表征与终端显示界面所展示的信息流进行交互过程中不同操作所产生的参数;
信息处理模块2082,用于根据所述操作参数,确定与所述操作参数相匹配的状态特征;
所述信息处理模块2082,用于响应于所述状态特征,触发与所述状态特征相对应的控制组件,并通过所述控制组件确定与所述状态特征相匹配的多媒体信息;
所述信息传输模块2081,用于通过所述终端显示界面呈现相应的多媒体信息。
结合图2示出的多媒体信息处理装置说明本发明实施例提供的多媒体信息处理方法,参见图3,图3为本发明实施例提供的多媒体信息处理方法一个可选的流程示意图,可以理解地,图3所示的步骤可以由运行多媒体信息处理装置的各种服务器执行,例如可以是如带有多媒体信息处理功能的专用终端、服务器、云服务器或者服务器集群。下面针对图3示出的步骤进行说明。
步骤301:多媒体信息处理装置确定与终端显示界面中所展示的信息流相匹配的操作参数。
其中,所述操作参数用于表征与终端显示界面所展示的信息流进行交互过程中不同操作所产生的参数。具体的,参考图4,图4为本发明实施例的多媒体信息处理方法的前端显示示意图,通过步骤301,当用户对图4所示的显示界面中的信息进行交互时(例如选取操作、分享操作或者保存操作),可以获取用户的操作参数。
在本发明的一些实施例中,确定与终端显示界面中所展示的信息流相匹配的操作参数,可以通过以下方式实现:
在所述终端显示界面中触发所述目标用户所对应的跟踪标识,以及,在所述终端显示界面中加载与所述显示界面相匹配的互动元素集合;侦测所述互动元素集合的触发状态和所述跟踪标识的位置变化,确定与所述信息流相匹配的操作参数。其中,由于用户操作的不确定性通过侦测互动元素集合的触发状态和跟踪标识的位置变化,能够更加准确地并且及时地识别用户的操作参数,避免对用户操作的遗漏。
步骤302:多媒体信息处理装置根据所述操作参数,确定与所述操作参数相匹配的状态特征。
步骤303:多媒体信息处理装置响应于所述状态特征,触发与所述状态特征相对应的控制组件,并通过所述控制组件确定与所述状态特征相匹配的多媒体信息。
在本发明的一些实施例中,根据所述操作参数,确定与所述操作参数相匹配的状态特征,可以通过以下方式实现:
根据所述操作参数中的位移量参数,确定与所述位移量参数相匹配的第一状态特征,以实现所述第一状态特征与与所述交互操作相匹配;
根据所述操作参数中的等待时长参数,确定与所述等待时长参数相匹配的第二状态特征,以实现所述第二状态特征与所述终端显示界面的等待模式相匹配;
根据所述操作参数中的条件判断参数,确定与所述条件判断参数相匹配的第三状态特征,以实现所述第三状态特征与所述终端显示界面的观察模式相匹配。
继续参考图5,参见图5,图5为本发明实施例提供的多媒体信息处理方法一个可选的流程示意图,可以理解地,图5示的步骤可以由运行多媒体信息处理装置的各种服务器执行,例如可以是如带有多媒体信息处理功能的专用终端、服务器、云服务器或者服务器集群。下面针对图5示出的步骤进行说明。
步骤501:多媒体信息处理装置根据所述第一状态特征,触发与所述第一状态特征相对应的风格特征组件,并通过所述风格特征组件确定与所述第一状态特征相匹配的多媒体信息。
由此,可以实现所述多媒体信息与所述操作参数中的位移量参数相匹配。
下面对本发明实施例的多媒体信息处理装置的结构做详细说明,多媒体信息处理装置可以各种形式来实施,如带有多媒体信息处理功能的专用终端,也可以为设置有多媒体信息处理功能的服务器,例如前序图1中的终端10-1或者终端10-2。图6为本发明实施例提供的多媒体信息处理装置的组成结构示意图,可以理解,图6仅仅示出了多媒体信息处理装置的示例性结构而非全部结构,根据需要可以实施图6示出的部分结构或全部结构。
本发明实施例提供的多媒体信息处理装置包括:至少一个处理器601、存储器602、用户接口603和至少一个网络接口604。多媒体信息处理装置中的各个组件通过总线系统605耦合在一起。可以理解,总线系统605用于实现这些组件之间的连接通信。总线系统605除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图6中将各种总线都标为总线系统605。
其中,用户接口603可以包括显示器、键盘、鼠标、轨迹球、点击轮、按键、按钮、触感板或者触摸屏等。
可以理解,存储器602可以是易失性存储器或非易失性存储器,也可包括易失性和非易失性存储器两者。本发明实施例中的存储器602能够存储数据以支持终端(如10-1)的操作。这些数据的示例包括:用于在终端(如10-1)上操作的任何计算机程序,如操作系统和应用程序。其中,操作系统包含各种系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务。应用程序可以包含各种应用程序。
在一些实施例中,本发明实施例提供的多媒体信息处理装置可以采用软硬件结合的方式实现,作为示例,本发明实施例提供的多媒体信息处理方法装置可以是采用硬件译码处理器形式的处理器,其被编程以执行本发明实施例提供的多媒体信息处理方法。例如,硬件译码处理器形式的处理器可以采用一个或多个应用专用集成电路(ASIC,ApplicationSpecific Integrated Circuit)、DSP、可编程逻辑器件(PLD,Programmable LogicDevice)、复杂可编程逻辑器件(CPLD,Complex Programmable Logic Device)、现场可编程门阵列(FPGA,Field-Programmable Gate Array)或其他电子元件。
作为本发明实施例提供的多媒体信息处理装置采用软硬件结合实施的示例,本发明实施例所提供的多媒体信息处理装置可以直接体现为由处理器601执行的软件模块组合,软件模块可以位于存储介质中,存储介质位于存储器602,处理器601读取存储器602中软件模块包括的可执行指令,结合必要的硬件(例如,包括处理器601以及连接到总线605的其他组件)完成本发明实施例提供的多媒体信息处理方法。
作为示例,处理器601可以是一种集成电路芯片,具有信号的处理能力,例如通用处理器、数字信号处理器(DSP,Digital Signal Processor),或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等,其中,通用处理器可以是微处理器或者任何常规的处理器等。
作为本发明实施例提供的多媒体信息处理装置采用硬件实施的示例,本发明实施例所提供的装置可以直接采用硬件译码处理器形式的处理器601来执行完成,例如,被一个或多个应用专用集成电路(ASIC,Application Specific Integrated Circuit)、DSP、可编程逻辑器件(PLD,Programmable Logic Device)、复杂可编程逻辑器件(CPLD,ComplexProgrammable Logic Device)、现场可编程门阵列(FPGA,Field-Programmable GateArray)或其他电子元件执行实现本发明实施例提供的多媒体信息处理方法。
本发明实施例中的存储器602用于存储各种类型的数据以支持多媒体信息处理装置的操作。这些数据的示例包括:用于在多媒体信息处理装置上操作的任何可执行指令,如可执行指令,实现本发明实施例的从多媒体信息处理方法的程序可以包含在可执行指令中。
在另一些实施例中,本发明实施例提供的多媒体信息处理装置可以采用软件方式实现,图6示出了存储在存储器602中的多媒体信息处理装置,其可以是程序和插件等形式的软件,并包括一系列的模块,作为存储器602中存储的程序的示例,可以包括多媒体信息处理装置,多媒体信息处理装置中包括以下的软件模块:第一呈现模块6081和第二呈现模块6082。当多媒体信息处理装置中的软件模块被处理器601读取到RAM中并执行时,将实现本发明实施例提供的多媒体信息处理方法,下面继续说明多媒体信息处理装置中各个软件模块的功能,其中,
第一呈现模块6081,用于在终端的显示界面中,通过信息流呈现多条媒体信息;
第二呈现模块6082,用于接收到基于所述显示界面触发的对应所述信息流的交互操作;
所述第二呈现模块6082,用于跟随所述交互操作,滑动所述显示界面中所呈现的信息流,更新通过所述信息流呈现的所述多条媒体信息;
所述第二呈现模块6082,用于以内嵌于所述信息流或覆盖所述信息流的形式,采用与所述互动操作相适配的播放方式,同步与所呈现的信息流对应的多媒体信息。
继续参考图7,参见图7,图7为本发明实施例提供的多媒体信息处理方法一个可选的流程示意图,可以理解地,图7示的步骤可以由运行多媒体信息处理装置的各种终端执行,例如可以是如带有多媒体信息处理功能的专用终端、电子设备(手机或者平板电脑)。下面针对图7示出的步骤进行说明。
步骤701:在终端的显示界面中,通过信息流呈现多条媒体信息。
步骤702:接收到基于所述显示界面触发的对应所述信息流的交互操作。
步骤703:跟随所述交互操作,滑动所述显示界面中所呈现的信息流,更新通过所述信息流呈现的所述多条媒体信息。
步骤704:以内嵌于所述信息流或覆盖所述信息流的形式,采用与所述互动操作相适配的播放方式,同步与所呈现的信息流对应的多媒体信息。
继续参考图8A,图8A为本发明实施例的多媒体信息处理方法的前端显示示意图,通过步骤501,当用户对图8A所示的显示界面中的信息进行交互时,随着用户操作的位移量的变化,可以实现与位移量参数相匹配的多媒体信息(广告信息),随着用户滑动而播放,广告信息滑得快播放得快,滑得慢播放得慢,以与用户的阅读速度相匹配,增强互动性。
步骤502:多媒体信息处理装置根据所述第二状态特征,触发与所述第二状态特征相对应的风格特征组件,并通过所述风格特征组件确定与所述第二状态特征相匹配的多媒体信息。
由此,可以以实现所述多媒体信息的显示时间与所述等待时长参数相匹配。其中,参考图8B,图8B为本发明实施例的多媒体信息处理方法的前端显示示意图,通过步骤502,当用户对图8B所示的显示界面中的信息进行交互时,终端显示界面可以进入等待模式,随着用户操作,当用户的在当前终端的显示页面停留一段时间后,可以通过所述风格特征组件确定与所述第二状态特征相匹配的多媒体信息,以实现所述多媒体信息的显示时间与所述等待时长参数相匹配,实现通过固定的显示形式向显示界面定时推送相应的多媒体信息。
步骤503:多媒体信息处理装置根据所述第三状态特征,触发与所述第三状态特征相对应的风格特征组件,并通过所述风格特征组件确定与所述第三状态特征相匹配的多媒体信息。
由此,可以实现所述多媒体信息的显示方式与所述条件判断参数相匹配。其中,参考图8C,图8C为本发明实施例的多媒体信息处理方法的前端显示示意图,通过步骤503,当用户对图8C所示的显示界面中的信息进行交互时,终端显示界面处于观察模式,随着用户操作当达到与相应的条件判断参数相匹配时,通过所述风格特征组件确定与第三状态特征相匹配的多媒体信息,实现所述多媒体信息的显示方式(包括但不限于:显示位置、显示时长)与所述条件判断参数相匹配。
步骤304:通过所述终端显示界面呈现相应的的多媒体信息。
在本发明的一些实施例中,所述方法还包括:
确定与所述状态特征相对应的过渡多媒体信息;当与所述操作参数相匹配的状态特征发生调整时,通过所述终端显示界面呈现所述过渡多媒体信息。其中,过渡多媒体信息可以为关键帧动画、lottie动画,由此,用户在对终端显示界面中的信息操作的同时可以互动的同时辅以动画形式展现,以增强趣味性。
在本发明的一些实施例中,多媒体信息处理方法还包括:
将标识信息、所述控制组件信息和所述多媒体信息发送至区块链网络,以使
所述区块链网络的节点将标识信息、所述控制组件信息和所述多媒体信息填充至新区块,且当对所述新区块共识一致时,将所述新区块追加至区块链的尾部,以实现同一用户的不同使用环境中所述终端均能够获取所述区块中的信息,其中,所述标识信息用于表征观看相应多媒体信息的用户。
参见图9,图9是本发明实施例提供的多媒体信息处理装置100的架构示意图,包括区块链网络200(示例性示出了共识节点210-1至共识节点210-3)、认证中心300、业务主体400和业务主体500,下面分别进行说明。
区块链网络200的类型是灵活多样的,例如可以为公有链、私有链或联盟链中的任意一种。以公有链为例,任何业务主体的电子设备例如用户终端和服务器,都可以在不需要授权的情况下接入区块链网络200;以联盟链为例,业务主体在获得授权后其下辖的电子设备(例如终端/服务器)可以接入区块链网络200,此时,成为区块链网络200中的客户端节点。
在一些实施例中,客户端节点可以只作为区块链网络200的观察者,即提供支持业务主体发起交易(例如,用于上链存储数据或查询链上数据)功能,对于区块链网络200的共识节点210的功能,例如排序功能、共识服务和账本功能等,客户端节点可以缺省或者有选择性(例如,取决于业务主体的具体业务需求)地实施。从而,可以将业务主体的数据和业务处理逻辑最大程度迁移到区块链网络200中,通过区块链网络200实现数据和业务处理过程的可信和可追溯。
区块链网络200中的共识节点接收来自不同业务主体(例如图9中示出的业务主体400和业务主体500)的客户端节点(例如,图9中示出的归属于业务主体400的客户端节点410、以及归属于服务器500的客户端节点510)提交的交易,执行交易以更新账本或者查询账本,执行交易的各种中间结果或最终结果可以返回业务主体的客户端节点中显示。
例如,客户端节点410/510可以订阅区块链网络200中感兴趣的事件,例如区块链网络200中特定的组织/通道中发生的交易,由共识节点210推送相应的交易通知到客户端节点410/510,从而触发客户端节点410/510中相应的业务逻辑。
下面以多个业务主体接入区块链网络以实现多媒体信息的管理与处理为例,说明区块链网络的示例性应用。
参见图9,管理环节涉及的多个业务主体,如业务主体400可以是承载有的多媒体信息处理装置,业务主体500可以是带有多媒体信息显示(操作)功能的显示系统,从认证中心300进行登记注册获得各自的数字证书,数字证书中包括业务主体的公钥、以及认证中心300对业务主体的公钥和身份信息签署的数字签名,用来与业务主体针对交易的数字签名一起附加到交易中,并被发送到区块链网络,以供区块链网络从交易中取出数字证书和签名,验证消息的可靠性(即是否未经篡改)和发送消息的业务主体的身份信息,区块链网络会根据身份进行验证,例如是否具有发起交易的权限。业务主体下辖的电子设备(例如终端或者服务器)运行的客户端都可以向区块链网络200请求接入而成为客户端节点。
业务主体400的客户端节点410用于确定与终端显示界面中所展示的信息流相匹配的操作参数,其中,所述操作参数用于表征与终端显示界面所展示的信息流进行交互过程中不同操作所产生的参数;根据所述操作参数,确定与所述操作参数相匹配的状态特征;响应于所述状态特征,触发与所述状态特征相对应的控制组件,过所述控制组件确定与所述状态特征相匹配的多媒体信息;通过所述终端显示界面呈现相应的多媒体信息,将标识信息、所述控制组件信息和所述多媒体信息发送至区块链网络200。
其中,将标识信息、所述控制组件信息和所述多媒体信息发送至区块链网络200,可以预先在客户端节点410设置业务逻辑,当形成相应的多媒体信息时,客户端节点410将将标识信息、所述控制组件信息和所述多媒体信息自动发送至区块链网络200,也可以由业务主体400的业务人员在客户端节点410中登录,手动打包目与所述使用环境中相匹配的新的多媒体信息,并将其发送至区块链网络200。在发送时,客户端节点410根据与所述使用环境中相匹配的新的多媒体信息生成对应更新操作的交易,在交易中指定了实现更新操作需要调用的智能合约、以及向智能合约传递的参数,交易还携带了客户端节点410的数字证书、签署的数字签名(例如,使用客户端节点410的数字证书中的私钥,对交易的摘要进行加密得到),并将交易广播到区块链网络200中的共识节点210。
区块链网络200中的共识节点210中接收到交易时,对交易携带的数字证书和数字签名进行验证,验证成功后,根据交易中携带的业务主体400的身份,确认业务主体400是否是具有交易权限,数字签名和权限验证中的任何一个验证判断都将导致交易失败。验证成功后签署节点210自己的数字签名(例如,使用节点210-1的私钥对交易的摘要进行加密得到),并继续在区块链网络200中广播。
区块链网络200中的共识节点210接收到验证成功的交易后,将交易填充到新的区块中,并进行广播。区块链网络200中的共识节点210广播的新区块时,会对新区块进行共识过程,如果共识成功,则将新区块追加到自身所存储的区块链的尾部,并根据交易的结果更新状态数据库,执行新区块中的交易:对于提交更新多媒体信息、将所述目标用户的标识信息、所述控制组件信息的交易,在状态数据库中添加包括将标识信息、所述控制组件信息和所述多媒体信息的键值对。
业务主体500的业务人员在客户端节点510中登录,输入多媒体信息或者多媒体信息查询请求,客户端节点510根据多媒体信息或者多媒体信息查询请求生成对应更新操作/查询操作的交易,在交易中指定了实现更新操作/查询操作需要调用的智能合约、以及向智能合约传递的参数,交易还携带了客户端节点510的数字证书、签署的数字签名(例如,使用客户端节点510的数字证书中的私钥,对交易的摘要进行加密得到),并将交易广播到区块链网络200中的共识节点210。
区块链网络200中的共识节点210中接收到交易,对交易进行验证、区块填充及共识一致后,将填充的新区块追加到自身所存储的区块链的尾部,并根据交易的结果更新状态数据库,执行新区块中的交易:对于提交的更新某一多媒体信息对应的人工识别结果的交易,根据人工识别结果更新状态数据库中该多媒体信息对应的键值对;对于提交的查询某个多媒体信息的交易,从状态数据库中查询多媒体信息对应的键值对,并返回交易结果。
值得说明的是,在图9中示例性地示出了将标识信息、所述控制组件信息和所述多媒体信息接上链的过程,但在另一些实施例中,对于多媒体信息的数据量较大的情况,客户端节点410可将多媒体信息的哈希以及相应的多媒体信息的哈希成对上链,将原始的多媒体信息以及相应的多媒体信息存储于分布式文件系统或数据库。客户端节点510从分布式文件系统或数据库获取到多媒体信息以及相应的多媒体信息后,可结合区块链网络200中对应的哈希进行校验,从而减少上链操作的工作量。
作为区块链的示例,参见图10,图10是本发明实施例提供的区块链网络200中区块链的结构示意图,每个区块的头部既可以包括区块中所有交易的哈希值,同时也包含前一个区块中所有交易的哈希值,新产生的交易的记录被填充到区块并经过区块链网络中节点的共识后,会被追加到区块链的尾部从而形成链式的增长,区块之间基于哈希值的链式结构保证了区块中交易的防篡改和防伪造。其中,存储在区块链网络中的多媒体信息可以是某一广告主所投放的单一多媒体信息(例如广告主投放的一张图片或者一张海报、或者一段视频),通过存储在区块链网络中可以实现不同的节点之间共享这些多媒体信息。
下面说明本发明实施例提供的区块链网络的示例性的功能架构,参见图11,图11是本发明实施例提供的区块链网络200的功能架构示意图,包括应用层201、共识层202、网络层203、数据层204和资源层205,下面分别进行说明。
资源层205封装了实现区块链网路200中的各个节点210的计算资源、存储资源和通信资源。
数据层204封装了实现账本的各种数据结构,包括以文件系统中的文件实现的区块链,键值型的状态数据库和存在性证明(例如区块中交易的哈希树)。
网络层203封装了点对点(P2P,Point to Point)网络协议、数据传播机制和数据验证机制、接入认证机制和业务主体身份管理的功能。
其中,P2P网络协议实现区块链网络200中节点210之间的通信,数据传播机制保证了交易在区块链网络200中的传播,数据验证机制用于基于加密学方法(例如数字证书、数字签名、公/私钥对)实现节点210之间传输数据的可靠性;接入认证机制用于根据实际的业务场景对加入区块链网络200的业务主体的身份进行认证,并在认证通过时赋予业务主体接入区块链网络200的权限;业务主体身份管理用于存储允许接入区块链网络200的业务主体的身份、以及权限(例如能够发起的交易的类型)。
共识层202封装了区块链网络200中的节点210对区块达成一致性的机制(即共识机制)、交易管理和账本管理的功能。共识机制包括POS、POW和DPOS等共识算法,支持共识算法的可插拔。
交易管理用于验证节点210接收到的交易中携带的数字签名,验证业务主体的身份信息,并根据身份信息判断确认其是否具有权限进行交易(从业务主体身份管理读取相关信息);对于获得接入区块链网络200的授权的业务主体而言,均拥有认证中心颁发的数字证书,业务主体利用自己的数字证书中的私钥对提交的交易进行签名,从而声明自己的合法身份。
账本管理用于维护区块链和状态数据库。对于取得共识的区块,追加到区块链的尾部;执行取得共识的区块中的交易,当交易包括更新操作时更新状态数据库中的键值对,当交易包括查询操作时查询状态数据库中的键值对并向业务主体的客户端节点返回查询结果。支持对状态数据库的多种维度的查询操作,包括:根据区块向量号(例如交易的哈希值)查询区块;根据区块哈希值查询区块;根据交易向量号查询区块;根据交易向量号查询交易;根据业务主体的账号(向量号)查询业务主体的账号数据;根据通道名称查询通道中的区块链。
应用层201封装了区块链网络能够实现的各种业务,包括交易的溯源、存证和验证等。
下面以多媒体信息为用户投放的广告为例对本发明所提供的多媒体信息处理方法进行说明,其中,图12为本发明实施例的多媒体信息处理方法的使用环境示意图;图13为本发明实施例的多媒体信息处理方法的前端显示示意图,通过图13所示的显示界面能够向用户展示不同的广告信息。其中,参见图12,终端(包括终端10-1和终端10-2)上设置有能够执行不同功能相应客户端其中,所属客户端为终端(包括终端10-1和终端10-2)通过网络300从相应的服务器200中获取不同的多媒体信息进行浏览,终端通过网络300连接服务器200,网络300可以是广域网或者局域网,又或者是二者的组合,使用无线链路实现数据传输,其中,终端(包括终端10-1和终端10-2)通过网络300从相应的服务器200中所获取的多媒体信息类型既可以相同也可以不相同,例如:终端(包括终端10-1和终端10-2)既可以通过网络300从相应的服务器200中获取广告主所投放的视频广告,也可以通过网络300从相应的服务器200中获取广告主所投放的图像广告,具体类型本申请不做限制,服务器200中可以保存有不同的多媒体信息。
服务器200通过网络300向终端(终端10-1和/或终端10-2)发送相应广告信息以实现终端(终端10-1和/或终端10-2)的用户浏览这些广告信息。这一过程中,信息流广告因为内嵌在信息流中、随内容无限刷等优势,已经成为了移动端广告的主流形式,但是在广告的投放过程中,目前除了静态UI布局有变化外,形式还比较单一,都是局限在通过静态布局进行调整。当然也有视频信息流广告和内嵌H5广告,不再局限于静态图,但相对来说制作成本要高,而且也没有丰富的原生互动能力。进一步地,目前RN可以通过下发js脚本控制应用软件的原生页面的样式和交互。在描述样式方面,理论上可以达到与应用软件原生开发一样的效果,但是在描述交互方式方面还是有一定局限性,因为其需要在应用软件内提前将能力暴露给RN,然后RN框架才能借助这些能力完成用户的点击交互。而Weex方案与RN类似,均是采用下发js脚本控制应用软件的原生页面,只是前端方面的框架由React换成了Vue,原理是相似的。上述两种方案都很灵活,满足多数的动态布局需求。但框架比较复杂,内存占用高,效率比原生开发低,而且对客户端开发来说,有一定的学习成本。而许多业务中,需要动态改变其特定页面的样式或者交互行为
图14为本发明实施例提供的多媒体信息处理方法一个可选的流程示意图,其中目标用户为当前终端的操作用户,具体包括以下步骤:
步骤1401:获取目标用户在当前终端中的操作参数。
其中,所述操作参数用于表征与终端显示界面所展示的信息流进行交互过程中不同操作所产生的参数;
步骤1402:根据用户当前的操作参数,确定与操作参数相匹配的状态特征。
步骤1403:响应于所述状态特征,触发与所述状态特征相对应的控制组件,并通过所述控制组件确定与所述状态特征相匹配的广告信息,以及广告信息的显示方式。
步骤1404:向所述终端显示界面推送所述广告信息,并监听广告信息的触发参数。
由此,可以实现通过所述终端显示界面呈现所述目标用户的操作参数相匹配的广告信息。
图15为本发明实施例提供的多媒体信息处理方法一个可选的数据结构示意图,其中,JS对象简谱(Json JavaScript Object Notation)作为统一的协议描述内容,形式简单而且通用,无需像RN和Weex那样需要前端开发才能实现跨平台的效果。图16为本发明实施例提供的多媒体信息处理方法一个可选的组件结构示意图,其中,为了实现将互动逻辑用Json描述的问题,即要能呈现一定的逻辑,能够响应变化,能够灵活的展现。可以通过图16所示的交互(action)用来控制状态特征(state)的切换。
其中,action通常是由用户触发,比如可以通过监听信息流滑动事件,根据滑动的偏移量,控制状态的变化。另外,还可以增加若干action,如wait模式的action可以在若干时间后触发,观察模式(observer模式)的action可以在组件的属性值到达指定值时触发。
进一步地,state又由若干风格特征(style)组成,style控制了具体组件view的布局和展示风格,于是不同的state在用户界面上得以展现不同的形态。当然,state、action、style等都是在Json中定义,无数量限制,为了实现一定的平滑效果,state和state之间的切换可以通过属性动画来过渡。
继续参考图17,图17为本发明实施例提供的多媒体信息处理方法中封装组件示意图,其中,为了实现本申请所提供的多媒体信息的跨平台应用可以在IOS、Android平台上需要分别封装组件(component),其可以指定多种不同的状态,状态中可以组合多个style,并且不同的state都可以触发不同的action,如此达到灵活组合的目的。
继续参考图18,图18为本发明实施例提供的多媒体信息处理方法中通信状态示意图,其中,本发明实施例提供的多媒体信息处理方法可以采用总线通信机制,所有的交互事件、状态变换、监听回调都通过事件总线传递,避免组件间的相互耦合,并且可以实现一次状态通知让不同层次上的组件同时产生状态改变。
继续参考图19,图19为本发明实施例提供的多媒体信息处理方法中渲染过程示意图,其中,实现动态更新的能力,可以将Json描述文件置于服务端,可以实时下发给客户端。不同的描述文件可以引用不同的素材,并且可以指定不同的交互形态,于是就为AB测试(ABTest)等提供可能。进一步地,为了实现原生预加载等能力,对于视频资源,可以预加载即将可见的素材,实现更为流畅的体验。
进一步的,参考图20A,图20A为本发明实施例中采用多媒体信息处理方法的效果对比图,本申请所提供的多媒体信息处理方法所向终端推送的广告信息的被触发次数如20A所示,其唯一点击率从传统技术中的1.173%上升至3.938%和2.065%,同时,参考图20B,图20B为本发明实施例中多媒体信息的热力示意图,通过监听广告信息的触发参数,可以形成图20B所示的热力图,以直观地展示本申请所提供的多媒体信息处理方法所向终端推送的广告信息点击区域、互动效果、互动时长等参数。
参考图20C,图20C为本发明实施例中采用多媒体信息处理方法的效果对比图,对于H5方案,本申请所提供的多媒体信息处理方法具有原生体验,并且在广告应用上,通过Json模版化的实现,大大降低了广告主的素材制作成本,只需几张图片即可实现互动效果,无需第三方开发公司制作H5;另外,所有上报都可在Json模版中指定,不再是黑盒;同时,相对React Native、Weex和Flutter来说,本申请所提供的多媒体信息处理方法的二次开发复杂度大大降低,只需写Json,无需JS等Web开发。
本发明具有以下有益技术效果:
本发明通过确定与终端显示界面中所展示的信息流相匹配的操作参数,其中,所述操作参数用于表征与终端显示界面所展示的信息流进行交互过程中不同操作所产生的参数;根据所述操作参数,确定与所述操作参数相匹配的状态特征;响应于所述状态特征,触发与所述状态特征相对应的控制组件,并通过所述控制组件确定与所述状态特征相匹配的多媒体信息;通过所述终端显示界面呈现相应的多媒体信息,由此,不但实现了实现通过所述终端显示界面呈现所述目标用户的操作参数相匹配的多媒体信息,同时结构复杂程度低于框架结构,内存占用低,效率比原生开发高,减轻了多媒体信息确定过程中的学习成本。
以上所述,仅为本发明的实施例而已,并非用于限定本发明的保护范围,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (13)

1.一种多媒体信息处理方法,其特征在于,所述方法包括:
在终端显示界面中触发目标用户所对应的跟踪标识,以及,
在所述终端显示界面中加载与所述显示界面相匹配的互动元素集合;
基于所述互动元素集合的触发状态和所述跟踪标识的位置变化,确定与信息流相匹配的操作参数,其中,所述操作参数用于表征与终端显示界面所展示的信息流进行交互过程中不同操作所产生的参数;
根据所述操作参数,确定与所述操作参数相匹配的状态特征,其中,所述状态特征包括至少以下之一:
与位移量参数相匹配的第一状态特征、与等待时长参数相匹配的第二状态特征以及与条件判断参数相匹配的第三状态特征;
响应于所述状态特征,触发与所述状态特征相对应的控制组件,并通过所述控制组件确定与所述状态特征相匹配的多媒体信息;
通过所述终端显示界面呈现相应的多媒体信息。
2.根据权利要求1所述的方法,其特征在于,所述根据所述操作参数,确定与所述操作参数相匹配的状态特征,包括:
根据所述操作参数中的位移量参数,确定与所述位移量参数相匹配的第一状态特征,以实现所述第一状态特征与交互操作相匹配;
根据所述操作参数中的等待时长参数,确定与所述等待时长参数相匹配的第二状态特征,以实现所述第二状态特征与所述终端显示界面的等待模式相匹配;
根据所述操作参数中的条件判断参数,确定与所述条件判断参数相匹配的第三状态特征,以实现所述第三状态特征与所述终端显示界面的观察模式相匹配。
3.根据权利要求2所述的方法,其特征在于,所述响应于所述状态特征,触发与所述状态特征相对应的控制组件,并通过所述控制组件确定与所述状态特征相匹配的多媒体信息,包括:
根据所述第一状态特征,触发与所述第一状态特征相对应的风格特征组件,并通过所述风格特征组件确定与所述第一状态特征相匹配的多媒体信息,以实现所述多媒体信息与所述操作参数中的位移量参数相匹配。
4.根据权利要求2所述的方法,其特征在于,所述响应于所述状态特征,触发与所述状态特征相对应的控制组件,并通过所述控制组件确定与所述状态特征相匹配的多媒体信息,包括:
根据所述第二状态特征,触发与所述第二状态特征相对应的风格特征组件,并通过所述风格特征组件确定与所述第二状态特征相匹配的多媒体信息,以实现所述多媒体信息的显示时间与所述等待时长参数相匹配。
5.根据权利要求2所述的方法,其特征在于,所述响应于所述状态特征,触发与所述状态特征相对应的控制组件,并通过所述控制组件确定与所述状态特征相匹配的多媒体信息,包括:
根据所述第三状态特征,触发与所述第三状态特征相对应的风格特征组件,并通过所述风格特征组件确定与所述第三状态特征相匹配的多媒体信息,以实现所述多媒体信息的显示方式与所述条件判断参数相匹配。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
确定与所述状态特征相对应的过渡多媒体信息;
当与所述操作参数相匹配的状态特征发生调整时,通过所述终端显示界面呈现所述过渡多媒体信息。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
确定所述终端显示界面的使用环境;
根据所述终端显示界面的使用环境,确定不同的状态特征集合;
响应于所述不同的状态特征集合,将相应的控制组件进行封装为控制组件集合,以实现所述控制组件集合与所述使用环境相匹配,并能够确定与所述状态特征相匹配的多媒体信息。
8.根据权利要求1-7任一所述的方法,其特征在于,所述方法还包括:
将标识信息、所述控制组件信息和所述多媒体信息发送至区块链网络,以使
所述区块链网络的节点将标识信息、所述控制组件信息和所述多媒体信息填充至新区块,且当对所述新区块共识一致时,将所述新区块追加至区块链的尾部,以实现同一用户的不同使用环境中所述终端均能够获取所述区块中的信息。
9.一种多媒体信息处理方法,其特征在于,所述方法包括:
在终端的显示界面中,通过信息流呈现多条多 媒体信息;
接收到基于所述显示界面触发的对应所述信息流的交互操作;
跟随所述交互操作,滑动所述显示界面中所呈现的信息流,更新通过所述信息流呈现的所述多条多 媒体信息,并
以内嵌于所述信息流或覆盖所述信息流的形式,采用与所述交互 操作相适配的播放方式,同步与所呈现的信息流对应的多媒体信息,其中,所述多媒体信息基于权利要求1-8任意一项,利用操作参数相匹配的状态特征所获得。
10.一种多媒体信息处理装置,其特征在于,所述装置包括:
信息传输模块,用于在终端显示界面中触发目标用户所对应的跟踪标识,以及在所述终端显示界面中加载与所述显示界面相匹配的互动元素集合;
信息处理模块,用于基于所述互动元素集合的触发状态和所述跟踪标识的位置变化,确定与信息流相匹配的操作参数,其中,所述操作参数用于表征与终端显示界面所展示的信息流进行交互过程中不同操作所产生的参数;
所述信息处理模块,用于根据所述操作参数,确定与所述操作参数相匹配的状态特征,其中,所述状态特征包括至少以下之一:
与位移量参数相匹配的第一状态特征、与等待时长参数相匹配的第二状态特征以及与条件判断参数相匹配的第三状态特征;
所述信息处理模块,用于响应于所述状态特征,触发与所述状态特征相对应的控制组件,并通过所述控制组件确定与所述状态特征相匹配的多媒体信息;
所述信息传输模块,用于通过所述终端显示界面呈现相应的多媒体信息。
11.一种多媒体信息处理装置,其特征在于,所述装置包括:
第一呈现模块,用于在终端的显示界面中,通过信息流呈现多条多 媒体信息;
第二呈现模块,用于接收到基于所述显示界面触发的对应所述信息流的交互操作;
所述第二呈现模块,用于跟随所述交互操作,滑动所述显示界面中所呈现的信息流,更新通过所述信息流呈现的所述多条多 媒体信息;
所述第二呈现模块,用于以内嵌于所述信息流或覆盖所述信息流的形式,采用与所述交互 操作相适配的播放方式,同步与所呈现的信息流对应的多媒体信息,其中,所述多媒体信息基于权利要求1-8任意一项,利用操作参数相匹配的状态特征所获得。
12.一种电子设备,其特征在于,所述电子设备包括:
存储器,用于存储可执行指令;
处理器,用于运行所述存储器存储的可执行指令时,实现权利要求1至8任一项所述的多媒体信息处理方法,或者权利要求9所述的多媒体信息处理方法。
13.一种计算机可读存储介质,存储有可执行指令,其特征在于,所述可执行指令被处理器执行时实现权利要求1至8任一项所述的多媒体信息处理方法,或者权利要求9所述的多媒体信息处理方法。
CN201911394912.0A 2019-12-30 2019-12-30 一种多媒体信息处理方法、装置、电子设备及存储介质 Active CN111324271B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201911394912.0A CN111324271B (zh) 2019-12-30 2019-12-30 一种多媒体信息处理方法、装置、电子设备及存储介质
CN202111101782.4A CN113741774A (zh) 2019-12-30 2019-12-30 一种多媒体信息处理方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911394912.0A CN111324271B (zh) 2019-12-30 2019-12-30 一种多媒体信息处理方法、装置、电子设备及存储介质

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202111101782.4A Division CN113741774A (zh) 2019-12-30 2019-12-30 一种多媒体信息处理方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN111324271A CN111324271A (zh) 2020-06-23
CN111324271B true CN111324271B (zh) 2021-09-07

Family

ID=71168717

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202111101782.4A Pending CN113741774A (zh) 2019-12-30 2019-12-30 一种多媒体信息处理方法、装置、电子设备及存储介质
CN201911394912.0A Active CN111324271B (zh) 2019-12-30 2019-12-30 一种多媒体信息处理方法、装置、电子设备及存储介质

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202111101782.4A Pending CN113741774A (zh) 2019-12-30 2019-12-30 一种多媒体信息处理方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (2) CN113741774A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114630172A (zh) * 2020-12-11 2022-06-14 腾讯科技(深圳)有限公司 基于多媒体信息处理方法、装置、电子设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107657470A (zh) * 2016-08-25 2018-02-02 腾讯科技(北京)有限公司 信息处理方法及信息处理装置
CN108805409A (zh) * 2018-05-08 2018-11-13 武汉大学 一种基于区块链的关键基础设备信息管理方法
CN108920146A (zh) * 2018-06-05 2018-11-30 广州衡昊数据科技有限公司 页面控制组件和可视化模拟操作系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9348512B2 (en) * 2012-08-08 2016-05-24 Nuance Communications, Inc. Methods for facilitating text entry
CN103942316A (zh) * 2014-04-24 2014-07-23 江西迈思科技有限公司 一种信息处理方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107657470A (zh) * 2016-08-25 2018-02-02 腾讯科技(北京)有限公司 信息处理方法及信息处理装置
CN108805409A (zh) * 2018-05-08 2018-11-13 武汉大学 一种基于区块链的关键基础设备信息管理方法
CN108920146A (zh) * 2018-06-05 2018-11-30 广州衡昊数据科技有限公司 页面控制组件和可视化模拟操作系统

Also Published As

Publication number Publication date
CN113741774A (zh) 2021-12-03
CN111324271A (zh) 2020-06-23

Similar Documents

Publication Publication Date Title
CN113711536B (zh) 从区块链网络中提取数据
US11386050B2 (en) Activity verification using a distributed database
WO2022037343A1 (zh) 一种视频信息处理方法、装置、电子设备及存储介质
CN108574618B (zh) 基于社交关系链的推送信息展示方法及装置
CN109521956B (zh) 一种基于区块链的云存储方法、装置、设备及存储介质
CN113011906B (zh) 基于多媒体信息处理方法、装置、电子设备及存储介质
US20240054173A1 (en) Tamper-proof interaction data
CN111814083B (zh) 展示结果生成方法、系统、装置、可读存储介质及设备
US11218315B2 (en) System and method establishing a trust model for shared content on the internet
CN103841154A (zh) 网络媒介信息发布方法、系统和客户端
CN112766998A (zh) 业务活动的数据处理方法及装置
CN107181969B (zh) 一种第三方信息的推广方法及装置
CN113746719A (zh) 一种任务信息处理方法、装置、电子设备及存储介质
CN113688173A (zh) 一种报表信息处理方法、装置、电子设备及存储介质
CN111324271B (zh) 一种多媒体信息处理方法、装置、电子设备及存储介质
CN112995014B (zh) 消息群发的方法及装置
CN112600830A (zh) 业务数据处理方法、装置、电子设备及存储介质
CN111932317A (zh) 基于区块链的广告播放方法、装置、介质及电子设备
CN113569166A (zh) 一种数据处理方法、装置、电子设备及存储介质
CN112836186A (zh) 一种页面控制方法及装置
US20230055835A1 (en) Systems and Methods for Using a Non-Fungible Digital Asset to Facilitate Accessing an Access-Restricted Resource
US20220122121A1 (en) Combating false information with crowdsourcing
CN114677138A (zh) 一种数据处理方法、设备以及计算机可读存储介质
US20240039992A1 (en) Blockchain-based data processing method and device and readable storage medium
CN110781523B (zh) 用于处理信息的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40024853

Country of ref document: HK

SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant