CN111046198B - 一种信息处理方法、装置、设备及存储介质 - Google Patents

一种信息处理方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN111046198B
CN111046198B CN201911197126.1A CN201911197126A CN111046198B CN 111046198 B CN111046198 B CN 111046198B CN 201911197126 A CN201911197126 A CN 201911197126A CN 111046198 B CN111046198 B CN 111046198B
Authority
CN
China
Prior art keywords
target
information
animation
multimedia information
model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911197126.1A
Other languages
English (en)
Other versions
CN111046198A (zh
Inventor
罗飞虎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201911197126.1A priority Critical patent/CN111046198B/zh
Publication of CN111046198A publication Critical patent/CN111046198A/zh
Application granted granted Critical
Publication of CN111046198B publication Critical patent/CN111046198B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/44—Browsing; Visualisation therefor
    • G06F16/447—Temporal browsing, e.g. timeline
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/435—Filtering based on additional data, e.g. user or group profiles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/20—3D [Three Dimensional] animation
    • G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明提供了一种信息处理方法、装置、设备及存储介质，该方法包括：响应于在显示界面的属性信息选取操作，得到目标属性信息；获取所述目标属性信息对应的目标多媒体信息；获取所述目标多媒体信息对应的目标动画模型，所述目标动画模型包括至少一个动画信息，所述至少一个动画信息与所述目标多媒体信息的不同时间段相对应；对所述目标多媒体信息进行播放，当所述目标多媒体信息播放到目标时间段时，在所述目标多媒体信息中渲染所述目标动画模型中与所述目标时间段对应的目标动画信息。本发明涉及人工智能的计算机视觉技术，能够在多媒体信息中植入用户属性，与用户产生直接的交流互动，提高用户体验，降低资源占用率。

Description

一种信息处理方法、装置、设备及存储介质
技术领域
本发明属于互联网技术领域，具体涉及一种信息处理方法、装置、设备及存储介质。
背景技术
随着数据处理技术的不断发展，观看多媒体信息(比如视频)已经成为常见的娱乐方式。为了使多媒体信息的播放效果更加丰富，经常会对多媒体信息进行处理，得到带有特殊互动效果的多媒体信息，其中，对多媒体信息进行处理涉及人工智能的计算机视觉技术。
现有技术中，一般采用在播放固定多媒体信息的基础上与用户进行互动或采用3D模型场景在浏览器上运行的方式与用户进行互动，但在播放固定多媒体信息的基础上与用户进行互动时，由于多媒体信息内容固定，在多媒体信息的元素中无法植入用户的属性，导致无法和用户产生直接的交流互动，而全部采用3D模型场景在浏览器上运行的方式，需要制作大量的3D模型场景，模型制作复杂，且占用资源较多，导致无法与用户进行流畅的互动。
发明内容
为了在多媒体信息中植入用户属性，与用户产生直接的且流畅交流互动，提高用户体验，降低资源占用率，本发明提出一种信息处理方法、装置、设备及存储介质。
一方面，本发明提出了一种信息处理方法，所述方法包括：
响应于在显示界面的属性信息选取操作，得到目标属性信息；
获取所述目标属性信息对应的目标多媒体信息；
获取所述目标多媒体信息对应的目标动画模型，所述目标动画模型包括至少一个动画信息，所述至少一个动画信息与所述目标多媒体信息的不同时间段相对应；
对所述目标多媒体信息进行播放，当所述目标多媒体信息播放到目标时间段时，在所述目标多媒体信息中渲染所述目标动画模型中与所述目标时间段对应的目标动画信息。
另一方面，本发明提出了一种信息处理装置，所述装置包括：
响应模块，用于响应于在显示界面的属性信息选取操作，得到目标属性信息；
目标多媒体信息获取模块，用于获取所述目标属性信息对应的目标多媒体信息；
目标动画模型获取模块，用于获取所述目标多媒体信息对应的目标动画模型，所述目标动画模型包括至少一个动画信息，所述至少一个动画信息与所述目标多媒体信息的不同时间段相对应；
渲染模块，用于对所述目标多媒体信息进行播放，当所述目标多媒体信息播放到目标时间段时，在所述目标多媒体信息中渲染所述目标动画模型中与所述目标时间段对应的目标动画信息。
另一方面，本发明提出了一种设备，所述设备包括处理器和存储器，所述存储器中存储有至少一条指令或至少一段程序，所述至少一条指令或所述至少一段程序由所述处理器加载并执行以实现如上述所述的信息处理方法。
另一方面，本发明提出了一种计算机可读存储介质，所述计算机可读存储介质中存储有至少一条指令或至少一段程序，所述至少一条指令或所述至少一段程序由所述处理器加载并执行以实现如上述所述的信息处理方法。
本发明提出的一种信息处理方法、装置、设备及存储介质，根据用户在显示界面所选择的目标属性信息，确定目标多媒体信息以及目标动画模型，在目标多媒体信息播放到目标时间段时，渲染显示该目标动画模型，并播放该目标动画模型中与该目标时间段对应的目标动画信息，使目标动画信息与目标多媒信息在该目标时间段融合一体，从而实现在多媒体信息中植入用户的喜好等属性，使用户与多媒体信息产生直接的交流互动，达到丰富代入感的互动体验，可以广泛应用于娱乐视频互动中；此外，由于仅在目标时间段出现目标动画模型并播放相应的目标动画，避免大规模的3D模型场景的运行，有效降低资源占用率，确保与用户之间交流互动的流畅性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案和优点，下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它附图。
图1是本发明实施例提供的一种信息处理方法的实施环境示意图。
图2是本发明实施例提供的一种信息处理方法的流程示意图。
图3是本发明实施例提供的一种显示界面的结构示意图。
图4是本发明实施例提供的另一种信息处理方法的流程示意图。
图5是本发明实施例提供的另一种信息处理方法的流程示意图。
图6是本发明实施例提供的对所述目标多媒体信息进行播放，当所述目标多媒体信息播放到目标时间段时，在所述目标多媒体信息中渲染所述目标动画模型中与所述目标时间段对应的目标动画信息的原理示意图。
图7是本发明实施例提供的目标动画模型与目标多媒体信息同步展示的结构示意图。
图8是本发明实施例提供的区块链系统的一个可选的结构示意图。
图9是本发明实施例提供的区块结构的一个可选的示意图。
图10是本发明实施例提供的由目标动画模型与平面图合成的宣传图片示意图。
图11是本发明实施例提供的另一种信息处理方法的流程示意图。
图12是本发明实施例提供的另一种显示界面的结构示意图。
图13是本发明实施例提供的一种信息处理装置的结构示意图。
图14是本发明实施例提供的服务器结构示意图。
具体实施方式
人工智能(Artificial Intelligence,AI)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能，感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。AI是一门综合学科，涉及领域广泛，既有硬件层面的技术也有软件层面的技术。人工智能基础技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理技术、操作/交互系统、机电一体化等技术。人工智能软件技术主要包括计算机视觉技术、语音处理技术、自然语言处理技术以及机器学习/深度学习等几大方向。
计算机视觉技术(Computer Vision,CV)计算机视觉是一门研究如何使机器“看”的科学，更进一步的说，其是指用摄影机和电脑代替人眼对目标进行识别、跟踪和测量等机器视觉，并进一步做图形处理，使电脑处理成为更适合人眼观察或传送给仪器检测的图像。CV通常包括图像处理、图像识别、图像语义理解、图像检索、OCR、视频处理、视频语义理解、视频内容/行为识别、三维物体重建、3D技术、虚拟现实、增强现实、同步定位与地图构建等技术，还包括常见的人脸识别、指纹识别等生物特征识别技术。
具体地，本发明实施例提供的方案涉及CV中的视频处理、视频语义理解、三维物体重建、人脸识别等技术。
具体地，对多媒体信息进行分析涉及视频处理技术，获取所述目标多媒体信息中的目标对象的目标位置涉及视频语义理解中的目标检测与定位技术，绘制多媒体信息对应的动画模型涉及三维物体重建技术，采集人脸图像涉及人脸识别中的人脸检测技术等。
具体地，本发明实施例提供的技术方案通过如下实施例进行说明。
为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或服务器不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
图1是本发明实施例提供的一种信息处理方法的实施环境示意图。如图1所示，该实施环境至少可以包括终端01和服务器02，所述终端01通过有线或无线方式与所述服务器02建立连接，以通过此网络实现与所述服务器02之间的数据传输。例如，服务器02可以响应终端01的用户属性信息选取操作，获取相应的动画模型，并将该动画模型，通过此网络发送至终端01，由终端01进行渲染显示。
具体地，所述服务器02可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器。
具体地，终端01可以是智能手机、平板电脑、笔记本电脑、台式计算机、智能音箱、智能手表等，但并不局限于此。终端01以及服务器02可以通过有线或无线通信方式进行直接或间接地连接，本发明在此不做限制。
需要说明的是，图1仅仅是一种示例。
图2是本发明实施例提供的一种信息处理方法的流程示意图，本说明书提供了如实施例或流程图所述的方法操作步骤，但基于常规或者无创造性的劳动可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式，不代表唯一的执行顺序。在实际中的系统或服务器产品执行时，可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境)。具体的如图2所示，所述方法可以包括：
S101.响应于在显示界面的属性信息选取操作，得到目标属性信息。
本发明实施例中，当用户需要体验在多媒体信息上植入与用户属性信息对应的动画模型时，可以通过点击相应的网址或扫描相应的二维码的方式进入如图3所示的显示界面，该显示界面可以提供丰富多样的用户体验。
在一个可行的实施例中，该显示界面中显示的内容可以包括用户本身固有属性信息的选取部分和用户感兴趣的属性信息(即图3中的参赛项目)选取部分等。
具体地，用户本身固有属性信息可以包括用户姓名、性别、年龄、生日、职业等。其中，用户固有属性信息优选以选择框的形式展示给用户，以供用户选择，对于无法以选择框的形式展示给用户的属性信息可以提示用户进行填写。
具体地，用户感兴趣的属性信息(如图3中的参赛项目)可以包括体育、新闻、娱乐、科技、时政、游戏等。以用户感兴趣的属性信息为体育为例，则在该显示界面上可以显示与体育相关的选取图标，包括但不限于乒乓球、网球、百米短跑、跳水、羽毛球、举重等图标。其中，用户感兴趣的属性信息优选以“图标+文字”的形式展示给用户，以供用户点击图标或文字从而选择相应的属性信息，当然也可以以其他形式展示给用户，本发明实施例对此不做限定。
需要说明的是，图3仅仅是一种示例。
本发明实施例中，如图4所示，在所述响应于在显示界面的属性信息选取操作，得到目标属性信息之前，所述方法还可以包括：
S100.建立动画模型。
具体地，S100可以包括以下步骤：
S10001.获取至少一个多媒体信息。
S10003.绘制所述至少一个多媒体信息对应的动画模型，得到至少一个动画模型。
S10005.对所述至少一个多媒体信息进行分析，得到所述至少一个多媒体信息对应的至少一个关键时间段。
S10007.将所述至少一个多媒体信息中的对象在对应的至少一个关键时间段内的动作信息，作为所述至少一个多媒体信息对应的动画模型的动画信息。
S10009.将所述至少一个多媒体信息、所述至少一个动画模型以及所述至少一个多媒体信息与对应的动画模型之间的映射关系存储在预设信息模型库中；其中，所述至少一个多媒体信息包括所述目标多媒体信息，所述至少一个动画模型包括所述目标动画模型，所述至少一个关键时间段包括所述目标时间段。
本发明实施例中，可以预先建立动画模型，并对建立好的动画模型进行存储。在建立动画模型的时候，可以根据已经设计好的需要展示给用户的显示界面(比如，如图3所示的界面)确定模型的数量和种类。
在实际应用中，假设显示界面中的展示的用户感兴趣的属性信息为乒乓球、网球、百米短跑、跳水等相关信息，则该多媒体信息可以为相关的体育比赛视频，当然，如果用户感兴趣的属性信息为电子竞技等游戏的相关信息，则该多媒体信息可以为游戏的相关视频。比如，服务器在S10001中可以预先获取与乒乓球相关的乒乓球比赛视频、与网球相关的网球比赛视频、与百米短跑相关的百米短跑比赛视频、与跳水相关的跳水比赛视频、与电子竞技相关的电子竞技比赛视频。并在S10003中根据不同比赛视频中的对象(即运动员)的特征绘制与不同的比赛视频相关的动画模型，从而得到至少一个动画模型。
在模型绘制完成之后，可以在S10005中对每一个比赛视频进行分析，以多媒体信息为跳水比赛视频为例，服务器可以对该跳水比赛视频进行分析，得到第几分钟第几秒运动员登上跳水台准备跳水、第几分钟第几秒运动员开始跳水、第几分钟第几秒运动员登上领奖台等，并记录运动员登上跳水台准备跳水的关键时间点以及准备跳水过程所对应的关键时间段、开始跳水的关键时间点以及跳水过程所对应的关键时间段、登上领奖台的关键时间点以及领奖过程所对应的关键时间段等，由此得到与跳水比赛视频对应的至少一个关键时间点以及至少一个关键时间段。其他比赛视频的关键时间点和关键时间段的获取与跳水比赛视频类似，在此不再赘述。
在获取关键时间点和关键时间段之后，可以在S10007中获取每个比赛视频中的运动员在每一个关键时间段内的动作信息，并将该动作信息作为该比赛视频对应的动画模型的动画信息，由于每个比赛视频至少一个关键时间段，相应的每个比赛视频会得到至少一个动画信息。以多媒体信息为跳水比赛视频为例，假设S10005获取到该跳水比赛视频有三个关键时间段，则分别获取该三个时间段内运动员的肢体动作信息和面部表情等信息，从而得到三个动画信息。
在得到多媒体信息、动画模型及其对应的动画信息之后，可以在S10009中将每个多媒体信息、每个动画信息以及每个多媒体信息与各自对应的动画信息之间的映射关系存储在预设信息模型库中，以便后续后台服务跟根据用户选择的属性信息对应的多媒体信息，从该预设信息模型库中查找并调用相应的动画模型及其对应的动画信息。
在一个可行的实施例中，当显示界面中的用户固有属性信息中存在“性别”选择框时，以多媒体信息为跳水比赛视频为例，则该多媒体信息可以包括女子跳水比赛视频和男子跳水比赛视频，相应地，S10003中的绘制的动画模型可以包括与女子跳水比赛视频对应的动画模型以及与男子跳水比赛视频对应的动画模型。
在一个可行的实施例中，该动画模型可以为2D模型、3D模型或其他维度的模型。
在实际应用中，当该动画模型为3D动画模型时，可以通过模型制作软件制作相应的动画模型，比如3D绘图协议(Web Graphics Library，WebGL)等。比如，可以根据已有的3D资源文件中的素材(音乐、动画、图像、文字等)制作3D动画模型，并为该3D动画模型配置贴图、材质和3D动画骨骼等。
在一个可行的实施例中，绘制得到的动画模型及其对应的动画信息可以运行在HTML5 Canvas标签上，以供后续渲染显示。其中，HTML为HypertextMarked Language的缩写，即超文本标记语言，canvas元素是HTML5的一部分，允许脚本语言动态渲染位图像。当动画模型及其对应的动画信息运行在HTML5Canvas标签上时，终端01可以为支持HTML5的终端。
S103.获取所述目标属性信息对应的目标多媒体信息。
如图4所示，本发明实施例中，由于用户在显示界面上会对感兴趣的属性信息进行选取，在服务器接收到用户所选择的目标属性信息之后，可以分析该目标属性信息中包含的用户感兴趣的属性信息，接着服务器可以从所述至少一个多媒体信息中获取所述目标属性信息对应的目标多媒体信息。比如，用户选取的感兴趣的属性信息为跳水，则服务器可以从预设信息模型库中存储的至少一个多媒体信息中获取到跳水相关的比赛视频。再比如，用户选取的感兴趣的属性信息为跳水，选取的性别为男性，则服务器可以从预设信息模型库中获取男子跳水比赛视频。
S105.获取所述目标多媒体信息对应的目标动画模型，所述目标动画模型包括至少一个动画信息，所述至少一个动画信息与所述目标多媒体信息的不同时间段相对应。
如图4所示，本发明实施例中，在确定用户选择的目标属性信息对应的目标多媒体信息之后，服务器可以根据预设信息模型库中存储的多媒体信息与动画模型之间的映射关系，查找与该目标多媒体信息对应的目标动画模型。
S107.对所述目标多媒体信息进行播放，当所述目标多媒体信息播放到目标时间段时，在所述目标多媒体信息中渲染所述目标动画模型中与所述目标时间段对应的目标动画信息。
具体的，如图5所示，S107可以包括：
S10701.对所述目标多媒体信息进行播放，当所述目标多媒体信息播放到所述目标时间段的起始时间点时，获取所述目标多媒体信息中的目标对象的目标位置。
S10703.对所述目标对象进行隐藏，得到对象隐藏后的目标多媒体信息。
S10705.在所述目标位置对所述目标动画模型进行渲染显示，并将所述目标动画模型中与所述目标时间段对应的动画信息作为所述目标动画信息。
S10707.根据所述目标动画信息的第一时间戳信息和对象隐藏后的目标多媒体信息的第二时间戳信息，对所述目标动画信息和对象隐藏后的目标多媒体信息进行对齐处理。
S10709.在同一播放频率下，对对齐处理后的目标多媒体信息和目标动画信息进行同步播放。
图6为S107的原理示意图，图7是目标动画模型与目标多媒体信息同步展示的结构示意图，以下以目标多媒体信息为跳水比赛视频为例，介绍S107的具体过程：
在从预设信息模型库中查找到跳水比赛视频对应的目标动画模型之后，可以在终端的视频播放接口播放该跳水比赛视频，并在同频率时序下侦听该跳水比赛视频的currentTime属性，获取该跳水比赛视频的目标时间点和目标时间段，其中，currentTime属性为视频对象属性，用于设置或返回视频中的当前播放位置。当侦听到该跳水比赛视频播放到运动员登上跳水台准备跳水的目标时间点(比如，图6中的01:10)时(如图7中的A所示)，获取视频中的目标对象(即运动员)的目标位置并对运动员进行隐藏，同时根据该目标位置确定x坐标和y坐标，在canvas标签上通过WebGL在x坐标和y坐标上渲染显示该目标动画模型1(如图7中的B所示)，将目标动画模型叠加在跳水比赛视频上，同时播放与该目标时间段(比如，图6中的01:10-01:20)对应的目标动画信息1，并调整目标动画信息和视频的播放时间，使目标动画信息1和视频同步播放，融合一体(如图7中的C所示)。
本发明实施例中，在所述对所述目标多媒体信息进行播放，当所述目标多媒体信息播放到目标时间段时，在所述目标多媒体信息中渲染所述目标动画模型中与所述目标时间段对应的目标动画信息之后，所述方法还可以包括：
S109.在所述目标时间段之后，隐藏所述目标动画模型。
S1011.对所述目标对象进行显示。
S1013.对显示有目标对象的目标多媒体信息进行播放。
本发明实施例中，以目标多媒体信息为跳水比赛视频为例，当某一个目标时间段对应的目标动画信息播放完成之后(即在目标时间段之后)，隐藏该目标动画模型，并对运动员进行显示(如图7中的D所示)，并继续对显示有运动员的跳水比赛视频进行播放，等待下一个目标时间点。比如，当侦听到该跳水比赛视频播放到运动员准备登上领奖台的进行领奖的目标时间点(比如，图6中的02:15)时(如图7中的E所示)，可以获取相应的目标动画信息2，并在目标时间段(比如，图6中的02:15-02:20)对该目标动画信息2进行播放，使目标动画信息2和视频同步播放，融合一体(如图7中的F所示)。
在一个可行的实施例中，S10009中的所述至少一个多媒体信息、所述至少一个动画模型以及所述至少一个多媒体信息与对应的动画模型之间的映射关系还可以存储在区块链系统中。参见图8，图8所示是本发明实施例提供的区块链系统的一个可选的结构示意图，多个节点之间形成组成的点对点(P2P，Peer ToPeer)网络，P2P协议是一个运行在传输控制协议(TCP，Transmission ControlProtocol)协议之上的应用层协议。在区块链系统中，任何机器如服务器、终端都可以加入而成为节点，节点包括硬件层、中间层、操作系统层和应用层。
参见图8示出的区块链系统中各节点的功能，涉及的功能包括：
1)路由，节点具有的基本功能，用于支持节点之间的通信。
节点除具有路由功能外，还可以具有以下功能：
2)应用，用于部署在区块链中，根据实际业务需求而实现特定业务，记录实现功能相关的数据形成记录数据，在记录数据中携带数字签名以表示任务数据的来源，将记录数据发送到区块链系统中的其他节点，供其他节点在验证记录数据来源以及完整性成功时，将记录数据添加到临时区块中。
3)区块链，包括一系列按照产生的先后时间顺序相互接续的区块(Block)，新区块一旦加入到区块链中就不会再被移除，区块中记录了区块链系统中节点提交的记录数据。
参见图9，图9为本发明实施例提供的区块结构(Block Structure)一个可选的示意图，每个区块中包括本区块存储交易记录的哈希值(本区块的哈希值)、以及前一区块的哈希值，各区块通过哈希值连接形成区块链。另外，区块中还可以包括有区块生成时的时间戳等信息。区块链(Blockchain)，本质上是一个去中心化的数据库，是一串使用密码学方法相关联产生的数据块，每一个数据块中包含了相关的信息，用于验证其信息的有效性(防伪)和生成下一个区块。
在一个可行的实施例中，为了丰富用户体验，实现与用户产生更加直接的互动和交流，可以在目标多媒体信息播放完成之后，生成宣传图片。以目标多媒体信息为跳水比赛视频为例，可以将目标动画模型与平面图合成，生成如图10所示的合成宣传图片。
在一个可行的实施例中，为了实现更加丰富代入感的互动体验，如图11所示，在所述获取所述目标属性信息对应的目标多媒体信息之前，所述方法还可以包括：
S102.采集人脸图像信息。
相应地，在所述获取所述目标多媒体信息对应的目标动画模型之后，所述方法还可以包括：
S106.响应于脸部替换请求，获取所述目标动画模型对应的模型脸部信息，使用所述人脸图像信息替换所述模型脸部信息，得到替换后的目标动画型模型，替换后的目标动画型模型包括所述至少一个动画信息。
相应地，S107还可以包括：
对所述目标多媒体信息进行播放，当所述目标多媒体信息播放到目标时间段时，在所述目标多媒体信息中渲染替换后的目标动画型模型中与所述目标时间段对应的目标动画信息。
在实际应用中，如图12中的A所示，显示界面中显示的内容除了包括用户本身固有属性信息的选取部分和用户感兴趣的属性信息选取部分之外，还可以包括人脸信息采集部分，该人脸信息采集部分可以通过用户上传照片或拍照等形式对人脸进行采集。在用户点击图12中的A中的“点击上传/拍照”图标上传图片或拍照后，服务器可以对采集到的人脸进行识别，如图12中的B所示，当人脸采集成功可以点击“确定”进行下一步，不成功，则可以点击“重新上传”，重新上传图片或拍照。服务器在检测到有人脸图像信息存在时，可以主动响应脸部替换请求，获取所述目标动画模型对应的模型脸部信息，并使用人脸图像信息替换所述模型脸部信息，得到替换后的目标动画型模型。此外，除了服务器在检测到有人脸图像信息存在时，主动对目标动画模型的脸部进行替换之外，还可以由用户在上传图片或拍照完成之后，通过设置在显示界面上的脸部替换请求控件，主动触发脸部替换请求。
需要说明的是，图12仅仅是一种示例。
在实际应用中，S106中使用人脸图像信息替换模型脸部信息的替换方式可以如下：在webgl中，使用人脸图像信息替换掉目标动画模型中相应部分的贴图和纹理数据。
本发明实施例提供的信息处理方法、装置、设备及存储介质，通过将预先设计好的3D模型以及对应的模型动画，运行在Html5 Canvas标签上。利用HTML5视频播放接口播放视频，在特定频率时序下侦听视频播放位置接口currentTime获取视频时间上的目标时间点。并在该目标时间点对应的目标时间段内，在预设好的目标位置上叠加上需要的3D目标动画模型，同时播放3D目标动画模型中与该目标时间段对应的目标动画信息，使得模型和视频同步展示效果，从而将用户属性植入视频元素中，使用户和视频产生直接的交流互动，从而实现固定视频和丰富多样变化的体验效果，可以广泛用于娱乐视频互动，比如广泛应用于用户自制的视频中，实现对各种模型形象的组合体验，也可以对项目方准备的素材(音乐、动画、图形、文字等)进行模型制作和体验。再者，在用户选择属性信息的基础上，结合上传照片或拍照，从而生成3D人物形象，根据视频的时间节点，根据场景在对应坐标位置植入3D模型进行同步展示播放模型动作，从而达到更加丰富代入感的互动体验。此外，由于仅在目标时间段出现目标动画模型并播放相应的目标动画，避免大规模的3D模型场景的运行，有效降低资源占用率，确保与用户之间交流互动的流畅性。
如图13所示，本发明实施例提供了一种信息处理装置，所述装置可以包括：
响应模块201，可以用于响应于在显示界面的属性信息选取操作，得到目标属性信息。
本发明实施例中，所述装置还可以包括：动画模型建立模块200。
具体地，该动画模型建立模块200可以包括：
多媒体信息获取单元，可以用于获取至少一个多媒体信息。
动画模型绘制单元，可以用于绘制所述至少一个多媒体信息对应的动画模型，得到至少一个动画模型。
分析单元，可以用于对所述至少一个多媒体信息进行分析，得到所述至少一个多媒体信息对应的至少一个关键时间段。
动画信息确定单元，可以用于将所述至少一个多媒体信息中的对象在对应的至少一个关键时间段内的动作信息，作为所述至少一个多媒体信息对应的动画模型的动画信息。
存储单元，可以用于将所述至少一个多媒体信息、所述至少一个动画模型以及所述至少一个多媒体信息与对应的动画模型之间的映射关系存储在预设信息模型库中；其中，所述至少一个多媒体信息包括所述目标多媒体信息，所述至少一个动画模型包括所述目标动画模型，所述至少一个关键时间段包括所述目标时间段。
目标多媒体信息获取模块203，可以用于获取所述目标属性信息对应的目标多媒体信息。
具体地，目标多媒体信息获取模块203，可以用于从所述至少一个多媒体信息中获取所述目标属性信息对应的目标多媒体信息。
目标动画模型获取模块205，可以用于获取所述目标多媒体信息对应的目标动画模型，所述目标动画模型包括至少一个动画信息，所述至少一个动画信息与所述目标多媒体信息的不同时间段相对应。
具体地，目标动画模型获取模块205，可以用于根据所述映射关系，从所述预设信息模型库中获取所述目标多媒体信息对应的目标动画模型，所述目标动画模型包括至少一个动画信息，所述至少一个动画信息与所述目标多媒体信息的不同时间段相对应。
渲染模块207，可以用于对所述目标多媒体信息进行播放，当所述目标多媒体信息播放到目标时间段时，在所述目标多媒体信息中渲染所述目标动画模型中与所述目标时间段对应的目标动画信息。
本发明实施例中，所述渲染模块207可以包括：
目标位置获取单元，可以用于对所述目标多媒体信息进行播放，当所述目标多媒体信息播放到所述目标时间段的起始时间点时，获取所述目标多媒体信息中的目标对象的目标位置。
隐藏单元，可以用于对所述目标对象进行隐藏，得到对象隐藏后的目标多媒体信息。
显示单元，可以用于在所述目标位置对所述目标动画模型进行渲染显示，并将所述目标动画模型中与所述目标时间段对应的动画信息作为所述目标动画信息。
对齐单元，可以用于根据所述目标动画信息的第一时间戳信息和对象隐藏后的目标多媒体信息的第二时间戳信息，对所述目标动画信息和对象隐藏后的目标多媒体信息进行对齐处理。
同步播放单元，可以用于在同一播放频率下，对对齐处理后的目标多媒体信息和目标动画信息进行同步播放。
本发明实施例中，所述装置还可以包括：
采集模块，可以用于采集人脸图像信息。
模型脸部信息获取模块，可以用于响应于脸部替换请求，获取所述目标动画模型对应的模型脸部信息。
替换模块，可以用于使用所述人脸图像信息替换所述模型脸部信息，得到替换后的目标动画型模型，替换后的目标动画型模型包括所述至少一个动画信息。
相应地，所述渲染模块，可以用于对所述目标多媒体信息进行播放，当所述目标多媒体信息播放到目标时间段时，在所述目标多媒体信息中渲染替换后的目标动画型模型中与所述目标时间段对应的目标动画信息。
需要说明的是，本发明实施例中的装置实施例与发明实施例的方法实施例基于相同的发明构思。
本发明实施例还提供了一种信息处理的设备，所述设备包括处理器和存储器，所述存储器中存储有至少一条指令或至少一段程序，所述至少一条指令或所述至少一段程序由所述处理器加载并执行以实现如上述方法实施例所提供的信息处理方法。
本发明的实施例还提供了一种存储介质，所述计算机可读存储介质中存储有至少一条指令或至少一段程序，所述至少一条指令或所述至少一段程序由所述处理器加载并执行以实现上述方法实施例提供的信息处理方法。
可选地，在本说明书实施例中，存储介质可以位于计算机网络的多个网络服务器中的至少一个网络服务器。可选地，在本实施例中，上述存储介质可以包括但不限于：U盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本说明书实施例所述存储器可用于存储软件程序以及模块，处理器通过运行存储在存储器的软件程序以及模块，从而执行各种功能应用程序以及数据处理。存储器可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、功能所需的应用程序等；存储数据区可存储根据所述设备的使用所创建的数据等。此外，存储器可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器还可以包括存储器控制器，以提供处理器对存储器的访问。
本发明实施例所提供的信息处理方法实施例可以在移动终端、计算机终端、服务器或者类似的运算装置中执行。以运行在服务器上为例，图14是本发明实施例提供的一种信息处理方法的服务器的硬件结构框图。如图14所示，该服务器300可因配置或性能不同而产生比较大的差异，可以包括一个或一个以上中央处理器(Central Processing Units，CPU)310(处理器310可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)、用于存储数据的存储器330，一个或一个以上存储应用程序323或数据322的存储介质320(例如一个或一个以上海量存储设备)。其中，存储器330和存储介质320可以是短暂存储或持久存储。存储在存储介质320的程序可以包括一个或一个以上模块，每个模块可以包括对服务器中的一系列指令操作。更进一步地，中央处理器310可以设置为与存储介质320通信，在服务器300上执行存储介质320中的一系列指令操作。服务器300还可以包括一个或一个以上电源360，一个或一个以上有线或无线网络接口350，一个或一个以上输入输出接口340，和/或，一个或一个以上操作系统321，例如Windows ServerTM，Mac OS XTM，UnixTM，LinuxTM，FreeBSDTM等等。
输入输出接口340可以用于经由一个网络接收或者发送数据。上述的网络具体实例可包括服务器300的通信供应商提供的无线网络。在一个实例中，输入输出接口340包括一个网络适配器(Network Interface Controller，NIC)，其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中，输入输出接口340可以为射频(RadioFrequency，RF)模块，其用于通过无线方式与互联网进行通讯。
本领域普通技术人员可以理解，图14所示的结构仅为示意，其并不对上述电子装置的结构造成限定。例如，服务器300还可包括比图14中所示更多或者更少的组件，或者具有与图14所示不同的配置。
需要说明的是：上述本发明实施例先后顺序仅仅为了描述，不代表实施例的优劣。且上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下，在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外，在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中，多任务处理和并行处理也是可以的或者可能是有利的。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置和服务器实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。
以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (8)

1.一种信息处理方法，其特征在于，所述方法包括：
响应于用户在显示界面的属性信息选取操作，得到目标属性信息；
采集所述用户的人脸图像信息；
获取所述目标属性信息对应的目标多媒体信息以及获取所述目标多媒体信息对应的目标动画模型，所述目标动画模型基于所述目标多媒体信息中的目标对象的特征绘制得到；
响应于脸部替换请求，获取所述目标动画模型对应的模型脸部信息，使用所述人脸图像信息替换所述模型脸部信息，得到替换后的目标动画型模型，所述替换后的目标动画模型包括至少一个动画信息，所述至少一个动画信息为所述目标对象在不同时间段内的动作信息；
对所述目标多媒体信息进行播放，当所述目标多媒体信息播放到目标时间段的起始时间点时，获取所述目标多媒体信息中的目标对象的目标位置；对所述目标对象进行隐藏，得到对象隐藏后的目标多媒体信息；在所述目标位置对所述目标动画模型进行渲染显示，并将所述替换后的目标动画模型中与所述目标时间段对应的动画信息作为目标动画信息；对对象隐藏后的目标多媒体信息和所述目标动画信息进行同步播放。
2.根据权利要求1所述的方法，其特征在于，在所述响应于用户在显示界面的属性信息选取操作，得到目标属性信息之前，所述方法还包括：
获取至少一个多媒体信息；
绘制所述至少一个多媒体信息对应的动画模型，得到至少一个动画模型；
对所述至少一个多媒体信息进行分析，得到所述至少一个多媒体信息对应的至少一个关键时间段；
将所述至少一个多媒体信息中的对象在对应的至少一个关键时间段内的动作信息，作为所述至少一个多媒体信息对应的动画模型的动画信息；
将所述至少一个多媒体信息、所述至少一个动画模型以及所述至少一个多媒体信息与对应的动画模型之间的映射关系存储在预设信息模型库中；
其中，所述至少一个多媒体信息包括所述目标多媒体信息，所述至少一个动画模型包括所述目标动画模型，所述至少一个关键时间段包括所述目标时间段。
3.根据权利要求2所述的方法，其特征在于，所述获取所述目标属性信息对应的目标多媒体信息，包括：
从所述至少一个多媒体信息中获取所述目标属性信息对应的目标多媒体信息；
相应地，所述获取所述目标多媒体信息对应的目标动画模型，包括：
根据所述映射关系，从所述预设信息模型库中获取所述目标多媒体信息对应的目标动画模型。
4.根据权利要求1所述的方法，其特征在于，所述对对象隐藏后的目标多媒体信息和所述目标动画信息进行同步播放，包括：
根据所述目标动画信息的第一时间戳信息和对象隐藏后的目标多媒体信息的第二时间戳信息，对所述目标动画信息和对象隐藏后的目标多媒体信息进行对齐处理；
在同一播放频率下，对对齐处理后的目标多媒体信息和目标动画信息进行同步播放。
5.根据权利要求4所述的方法，其特征在于，所述对对象隐藏后的目标多媒体信息和所述目标动画信息进行同步播放之后，所述方法还包括：
在所述目标时间段之后，隐藏所述目标动画模型；
对所述目标对象进行显示；
对显示有目标对象的目标多媒体信息进行播放。
6.一种信息处理装置，其特征在于，所述装置包括：
响应模块，用于响应于用户在显示界面的属性信息选取操作，得到目标属性信息；
采集模块，用于采集所述用户的人脸图像信息；
目标多媒体信息获取模块，用于获取所述目标属性信息对应的目标多媒体信息；
目标动画模型获取模块，用于获取所述目标多媒体信息对应的目标动画模型，所述目标动画模型基于所述目标多媒体信息中的目标对象的特征绘制得到；
模型脸部信息获取模块和替换模块，用于响应于脸部替换请求，获取所述目标动画模型对应的模型脸部信息，使用所述人脸图像信息替换所述模型脸部信息，得到替换后的目标动画型模型，所述替换后的目标动画模型包括至少一个动画信息，所述至少一个动画信息为所述目标对象在不同时间段内的动作信；
渲染模块，用于对所述目标多媒体信息进行播放，当所述目标多媒体信息播放到目标时间段的起始时间点时，获取所述目标多媒体信息中的目标对象的目标位置；对所述目标对象进行隐藏，得到对象隐藏后的目标多媒体信息；在所述目标位置对所述目标动画模型进行渲染显示，并将所述替换后的目标动画模型中与所述目标时间段对应的动画信息作为目标动画信息；对对象隐藏后的目标多媒体信息和所述目标动画信息进行同步播放。
7.一种设备，其特征在于，所述设备包括处理器和存储器，所述存储器中存储有至少一条指令或至少一段程序，所述至少一条指令或所述至少一段程序由所述处理器加载并执行以实现如权利要求1至5任一所述的信息处理方法。
8.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有至少一条指令或至少一段程序，所述至少一条指令或所述至少一段程序由处理器加载并执行以实现如权利要求1至5任一所述的信息处理方法。
CN201911197126.1A 2019-11-29 2019-11-29 一种信息处理方法、装置、设备及存储介质 Active CN111046198B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911197126.1A CN111046198B (zh) 2019-11-29 2019-11-29 一种信息处理方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911197126.1A CN111046198B (zh) 2019-11-29 2019-11-29 一种信息处理方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN111046198A CN111046198A (zh) 2020-04-21
CN111046198B true CN111046198B (zh) 2022-03-29

Family

ID=70234033

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911197126.1A Active CN111046198B (zh) 2019-11-29 2019-11-29 一种信息处理方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN111046198B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111796846B (zh) * 2020-07-06 2023-12-12 广州一起精彩艺术教育科技有限公司 信息更新方法、装置、终端设备及可读存储介质
CN112435313A (zh) * 2020-11-10 2021-03-02 北京百度网讯科技有限公司 播放帧动画的方法、装置、电子设备及可读存储介质
CN114690975B (zh) * 2020-12-31 2024-05-03 华为技术有限公司 一种动效处理方法及相关装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105069829A (zh) * 2015-07-24 2015-11-18 中国电子科技集团公司第二十八研究所 一种基于多目视频的人体动画生成方法
CN105338370A (zh) * 2015-10-28 2016-02-17 北京七维视觉科技有限公司 一种在视频中实时合成动画的方法和装置
CN109003106A (zh) * 2017-06-06 2018-12-14 腾讯科技（北京）有限公司 信息处理方法及信息处理装置
CN109976632A (zh) * 2019-03-15 2019-07-05 广州视源电子科技股份有限公司 文本动画控制方法和装置、存储介质和处理器
CN110427499A (zh) * 2018-04-26 2019-11-08 腾讯科技（深圳）有限公司 多媒体资源的处理方法、装置及存储介质和电子装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9892205B2 (en) * 2012-06-25 2018-02-13 Microsoft Technology Licensing, Llc Declarative show and hide animations in markup languages

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105069829A (zh) * 2015-07-24 2015-11-18 中国电子科技集团公司第二十八研究所 一种基于多目视频的人体动画生成方法
CN105338370A (zh) * 2015-10-28 2016-02-17 北京七维视觉科技有限公司 一种在视频中实时合成动画的方法和装置
CN109003106A (zh) * 2017-06-06 2018-12-14 腾讯科技（北京）有限公司 信息处理方法及信息处理装置
CN110427499A (zh) * 2018-04-26 2019-11-08 腾讯科技（深圳）有限公司 多媒体资源的处理方法、装置及存储介质和电子装置
CN109976632A (zh) * 2019-03-15 2019-07-05 广州视源电子科技股份有限公司 文本动画控制方法和装置、存储介质和处理器

Also Published As

Publication number Publication date
CN111046198A (zh) 2020-04-21

Similar Documents

Publication Publication Date Title
CN111046198B (zh) 一种信息处理方法、装置、设备及存储介质
US20210299630A1 (en) Generating interactive messages with asynchronous media content
US10828570B2 (en) System and method for visualizing synthetic objects within real-world video clip
CN110809175B (zh) 视频推荐方法及装置
TWI752502B (zh) 一種分鏡效果的實現方法、電子設備及電腦可讀儲存介質
EP3889912B1 (en) Method and apparatus for generating video
CN116508063A (zh) 身体动画共享和再混合
CN109242940B (zh) 三维动态图像的生成方法和装置
CN110992256B (zh) 一种图像处理方法、装置、设备及存储介质
CN110162667A (zh) 视频生成方法、装置及存储介质
CN111405314B (zh) 一种信息处理方法、装置、设备及存储介质
CN113965773A (zh) 直播展示方法和装置、存储介质及电子设备
CN109529350A (zh) 一种应用于游戏中的动作数据处理方法及其装置
CN113301386B (zh) 视频处理方法、装置、服务器以及存储介质
Komianos et al. Efficient and realistic cultural heritage representation in large scale virtual environments
CN104572794A (zh) 一种人性化网络信息展示方法及系统
CN113992638B (zh) 多媒体资源的同步播放方法、装置、存储位置及电子装置
CN114173173A (zh) 弹幕信息的显示方法和装置、存储介质及电子设备
Ziagkas et al. Greek Traditional Dances Capturing and a Kinematic Analysis Approach of the Greek Traditional Dance “Syrtos”(Terpsichore Project)
CN111652986B (zh) 舞台效果呈现方法、装置、电子设备及存储介质
CN114554111A (zh) 视频生成方法和装置、存储介质及电子设备
CN116993872B (zh) 一种基于Labanotation的人体动画生成系统、方法、设备及存储介质
Bibiloni et al. An Augmented Reality and 360-degree video system to access audiovisual content through mobile devices for touristic applications
WO2021208330A1 (zh) 一种生成游戏角色的表情的方法和装置
CN117504296A (zh) 动作生成方法、动作显示方法、装置、设备、介质及产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40022200

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant