CN112818786A - 一种基于体感的互动式影像动作匹配方法及系统 - Google Patents

一种基于体感的互动式影像动作匹配方法及系统 Download PDF

Info

Publication number
CN112818786A
CN112818786A CN202110091353.7A CN202110091353A CN112818786A CN 112818786 A CN112818786 A CN 112818786A CN 202110091353 A CN202110091353 A CN 202110091353A CN 112818786 A CN112818786 A CN 112818786A
Authority
CN
China
Prior art keywords
information
target
instruction
special effect
action
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110091353.7A
Other languages
English (en)
Other versions
CN112818786B (zh
Inventor
朱雪萍
吴俊华
查丛辰
金玉龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Licheng Century Culture Technology Co ltd
Original Assignee
Suzhou Industrial Park Shanglian Advertising Public Relations Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Industrial Park Shanglian Advertising Public Relations Co ltd filed Critical Suzhou Industrial Park Shanglian Advertising Public Relations Co ltd
Priority to CN202110091353.7A priority Critical patent/CN112818786B/zh
Publication of CN112818786A publication Critical patent/CN112818786A/zh
Application granted granted Critical
Publication of CN112818786B publication Critical patent/CN112818786B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/04Synchronising

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请涉及一种基于体感的互动式影像动作匹配方法及系统,其方法包括:获取启动指令;所述启动指令包括第一指令和第二指令,针对每个所述第一指令,获取与该所述第一指令对应的第一目标动作组合;根据该所述第一指令或所述第一指令和所述第一目标动作组合确定第一特效信息;针对每个第一目标动作信息,将第一特效信息根据第一目标动作信息调整为目标适配信息,目标适配信息与第一目标动作信息一一对应;将所有所述目标适配信息同步反馈,每个目标适配信息分别反馈至其对应的所述第一目标动作信息。以及,将第二特效信息反馈至与其对应的所述第二目标动作信息。本申请具有使舞美能够与不同动作类型更加匹配的效果。

Description

一种基于体感的互动式影像动作匹配方法及系统
技术领域
本申请涉及舞台展示的领域,尤其是涉及一种基于体感的互动式影像动作匹配方法及系统。
背景技术
艺术演出舞台对演出效果的作用越来越突出,现有的舞台展示系统通常采用的是人工或定时变换场景画面的方式,难以满足人们对于舞美日益增长的审美需求,因此体感技术与舞美技术的融合已成为最新的流行趋势。
体感技术是指人们可以很直接地使用肢体动作与周边的装置或环境互动,而无需使用任何复杂的控制设备,便可让人们身历其境地与内容做互动的一种技术,体感技术的加入使得舞美具有“跟随”的特性,通过识别人的动态及伸展幅度,为人肢体动作的起伏变换匹配恰如其分的“延伸效果”。
针对上述中的相关技术,发明人认为存在以下缺陷:当多个表演者动作同步,若表演者之间的动作存在差异,则“跟随式”效果可能会使得观赏者容易观察到表演者的动作差异,可能会影响表演的整体效果。
发明内容
为了使舞美能够与不同动作类型更加匹配,本申请提供一种基于体感的互动式影像动作匹配方法及系统。
第一方面,本申请提供一种基于体感的互动式影像动作匹配方法,采用如下的技术方案:
一种基于体感的互动式影像动作匹配方法,包括:
获取启动指令;
所述启动指令包括第一指令组合和第二指令组合,所述第一指令组合至少包含一个第一指令,所述第二指令组合至少包含一个第二指令;
针对每个所述第一指令,获取与该所述第一指令对应的第一目标动作组合,所述第一目标动作组合至少包含两个第一目标动作信息;
根据该所述第一指令或所述第一指令和所述第一目标动作组合确定第一特效信息;
针对每个第一目标动作信息,将第一特效信息根据第一目标动作信息调整为目标适配信息,目标适配信息与第一目标动作信息一一对应;
将所有所述目标适配信息同步反馈,每个目标适配信息分别反馈至其对应的所述第一目标动作信息;
针对每个第二指令,获取该所述第二指令对应的第二目标动作组合,所述第二目标动作组合包含至少第二目标动作信息;
针对每个第二目标动作信息,根据所述第二目标动作信息生成第二特效信息;以及,
将第二特效信息反馈至与其对应的所述第二目标动作信息;
其中,每个第一指令对应有第一时段,每个第二指令对应有第二时段。
通过采用上述技术方案,设定舞蹈动作包括两种类型,第一动作类型是多人同步动作,第二动作类型是每个人单独动作,第一指令对应于第一动作类型,第二指令对应于第二动作类型,一段舞蹈中在时间轴上可能包含多个第一动作类型和多个第二动作类型,每个第一动作类型和每个第二动作类型在舞蹈时间轴上均对应唯一的时间段。
获取其中一个第一指令时,根据该所述第一指令和/或第一目标动作组合确定第一特效信息,针对每个第一目标动作信息,将第一特效信息根据第一目标动作信息调整为目标适配信息,将所有所述目标适配信息同步反馈,每个目标适配信息分别反馈至其对应的所述第一目标动作信息,此时每个目标适配信息同步播放,且每个目标适配信息与每个第一目标动作信息相适配,当需要所有人同步动作时,若表演者之间存在动作差异(如动作先后差异、或者动作伸展度的差异),若每个表演者动作均配合有跟随其动作的特效信息,则存在时差的特效信息可能容易被观赏者发现,进而将舞蹈者的动作差异放大,通过将匹配于每个第一目标动作信息的目标适配信息同步播放,能够使观赏者不便于察觉。
当不需要所有表演者均配合同步动作时,针对每个第二目标动作信息,根据所述第二目标动作信息生成第二特效信息,并将第二特效信息反馈至与其对应的所述第二目标动作信息,实现对单个表演者的表演动作进行特技渲染的功能。
可选的,根据该所述第一指令确定第一特效信息的方法包括:
获取与该所述第一指令对应的第一特效信息。
通过采用上述技术方案,第一特效信息为预设好特效视频信息,在第一时段内播放该视频信息,第一特效信息跟随表演者的位置但不跟随表演者的动作,即可对表演者动作进行渲染,且能够保证每个第一目标动作信息对应的第一特效信息同步播放,优化观赏体验。
可选的,根据该所述第一指令和第一目标动作组合确定第一特效信息的方法包括:
在第一时段的起点判断第一目标动作组合中是否存在指定目标信息;
若不存在,则将第一目标动作信息与第一基准动作信息进行匹配;
将匹配成功的第一目标动作信息作为第一有效信息;
根据第一有效信息生成第一特效信息。
通过采用上述技术方案,若在第一时段内存在于第一基准动作信息匹配的第一目标动作信息,说明该表演者的动作与舞蹈视频/音频播放节奏同步或者最为接近,此时根据第一有效信息生成第一特效信息,使得第一特效信息适配于其中一个或若干个表演者,根据第一特效信息形成适配于每个表演者的目标适配信息,且使每个表演者对应的目标适配信息能够同步播放,提高观赏效果的同时优化了表演者的表演体验。
可选的,确定第一特效信息的方法还包括:
若存在指定目标信息,则根据指定目标信息生成第一特效信息。
通过采用上述技术方案,若在进行同步表演动作时,存在预设的表现优异的主表演者,此时根据该主表演者的动作生成第一特效信息,便于其他表演者跟随主表演者同步操作,进而提高其表演动作与其对应的第一特效信息的配合精确度。
可选的,针对每个第一目标动作信息,将第一特效信息根据第一目标动作信息调整为目标适配信息的方法包括:
每个所述第一目标动作信息对应有第一尺寸信息;
将所述第一特效信息根据所述第一尺寸信息成比例缩放;
将该缩放后的所述第一特效信息作为目标适配信息。
通过采用上述技术方案,将第一特效信息根据每个目标(即表演者)的个体尺寸信息缩放,使得目标适配信息能够与第一目标动作信息较为精准地配合,达到优化人们观赏体验的效果。
第二方面,本申请提供一种基于体感的互动式影像动作匹配系统,采用如下的技术方案:
一种基于体感的互动式影像动作匹配系统,包括:
接收模块,用于获取启动指令,所述启动指令包括第一指令组合和第二指令组合,所述第一指令组合至少包含一个第一指令,所述第二指令组合至少包含一个第二指令,每个第一指令对应有第一时段,每个第二指令对应有第二时段;
第一处理模块,所述第一处理模块包括:
第一获取模块,用于针对每个所述第一指令,获取与该所述第一指令对应的第一目标动作组合,所述第一目标动作组合至少包含两个第一目标动作信息;
第一分析模块,用于根据该所述第一指令或所述第一指令和所述第一目标动作组合确定第一特效信息;
第一转换模块,用于针对每个第一目标动作信息,将第一特效信息根据第一目标动作信息调整为目标适配信息,目标适配信息与第一目标动作信息一一对应;
第一反馈模块,用于将所有所述目标适配信息同步反馈,每个目标适配信息分别反馈至其对应的所述第一目标动作信息;
第二处理模块,所述第二处理模块包括:
第二获取模块,用于针对每个第二指令,获取该所述第二指令对应的第二目标动作组合,所述第二目标动作组合包含至少第二目标动作信息;
第二生成模块,用于针对每个第二目标动作信息,根据所述第二目标动作信息生成第二特效信息;
第二反馈模块,用于将第二特效信息反馈至与其对应的所述第二目标动作信息。
通过采用上述技术方案,设定舞蹈动作包括两种类型,第一动作类型是多人同步动作,第二动作类型是每个人单独动作,第一指令对应于第一动作类型,第二指令对应于第二动作类型,一段舞蹈中在时间轴上可能包含多个第一动作类型和多个第二动作类型,每个第一动作类型和每个第二动作类型在舞蹈时间轴上均对应唯一的时间段。
获取其中一个第一指令时,根据该所述第一指令和/或第一目标动作组合确定第一特效信息,针对每个第一目标动作信息,将第一特效信息根据第一目标动作信息调整为目标适配信息,将所有所述目标适配信息同步反馈,每个目标适配信息分别反馈至其对应的所述第一目标动作信息,此时每个目标适配信息同步播放,且每个目标适配信息与每个第一目标动作信息相适配,当需要所有人同步动作时,若表演者之间存在动作差异(如动作先后差异、或者动作伸展度的差异),若每个表演者动作均配合有跟随其动作的特效信息,则存在时差的特效信息可能容易被观赏者发现,进而将舞蹈者的动作差异放大,通过将匹配于每个第一目标动作信息的目标适配信息同步播放,能够使观赏者不便于察觉。
当不需要所有表演者均配合同步动作时,针对每个第二目标动作信息,根据所述第二目标动作信息生成第二特效信息,并将第二特效信息反馈至与其对应的所述第二目标动作信息,实现对单个表演者的表演动作进行特技渲染的功能。
可选的,第一分析模块根据该所述第一指令确定第一特效信息时,具体用于:
获取与该所述第一指令对应的第一特效信息。
通过采用上述技术方案,第一特效信息为预设好特效视频信息,在第一时段内播放该视频信息,第一特效信息跟随表演者的位置但不跟随表演者的动作,即可对表演者动作进行渲染,且能够保证每个第一目标动作信息对应的第一特效信息同步播放。
可选的,第一分析模块根据该所述第一指令和第一目标动作组合确定第一特效信息时,具体用于:
在第一时段的起点判断第一目标动作组合中是否存在指定目标信息;
若不存在,则将第一目标动作信息与第一基准动作信息进行匹配;
将匹配成功的第一目标动作信息作为第一有效信息;
根据第一有效信息生成第一特效信息。
通过采用上述技术方案,该匹配成功的表演者的动作与舞蹈视频/音频播放节奏同步或者最为接近,此时根据第一有效信息生成第一特效信息,使得第一特效信息适配于其中一个或若干个表演者,优化了表演者的表演体验。
可选的,第一分析模块确定第一特效信息时,具体用于:
若存在指定目标信息,则根据指定目标信息生成第一特效信息。
通过采用上述技术方案,存存在预设的表现优异的主表演者,便于其他表演者跟随主表演者同步操作,进而提高其表演动作与其对应的第一特效信息的配合精确度。
可选的,第一转换模块,用于针对每个第一目标动作信息、将第一特效信息根据第一目标动作信息调整为目标适配信息时,具体用于:
每个所述第一目标动作信息对应有第一尺寸信息;
将所述第一特效信息根据所述第一尺寸信息成比例缩放;
将该缩放后的所述第一特效信息作为目标适配信息。
通过采用上述技术方案,将第一特效信息根据每个目标(即表演者)的个体尺寸信息缩放,使得目标适配信息能够与第一目标动作信息较为精准地配合,达到优化人们观赏体验的效果。
综上所述,本申请包括以下至少一种有益技术效果:
1.通过采用接收模块、第一处理模块和第二处理模块,实现了使特效能够适配于同步动作的表演者、且能够适配于单个表演者的表演动作;
2.通过采用根据该所述第一指令确定第一特效信息,实现了表演者动作进行渲染,且能够保证每个第一目标动作信息对应的第一特效信息同步播放;
3.通过采用根据该所述第一指令和第一目标动作组合确定第一特效信息,使第一特效信息能够适配于其中一个或若干个表演者,优化了表演者的表演体验。
附图说明
图1是本申请实施例影像动作匹配方法的流程示意图。
图2是本申请实施例影像动作匹配系统的系统框图。
附图标记说明:20、影像动作匹配系统;21、接收模块;22、第一处理模块;221、第一获取模块;222、第一分析模块;223、第一转换模块;224、第一反馈模块;23、第二处理模块;231、第二获取模块;232、第二生成模块;233、第二反馈模块。
具体实施方式
本具体实施例仅仅是对本申请的解释,其并不是对本申请的限制,本领域技术人员在阅读完本说明书后可以根据需要对本实施例做出没有创造性贡献的修改,但只要在本申请的权利要求范围内都受到专利法的保护。
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
另外,本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,如无特殊说明,一般表示前后关联对象是一种“或”的关系。
本申请实施例涉及一种基于体感的互动式影像动作匹配方法,该方法适用于特效视频的播放场景中,在本申请实施例中舞蹈舞台的场景为例,舞蹈场景中,为了增加舞美效果,通常随表演者的动作增加特技效果,最常见的手段即基于体感的方式,其包括:预设有跟随人体动作的特效,当表演者做出某一特定的手部动作和/或腿部动作时,显示屏上即播放特技效果,同时将表演者的动作和特技效果融合,使得表演者动作与特技效果无缝融合,优化观赏者的观赏体验;但是,在某些特定情况下,如需要特定的多个表演者进行同步动作时,表演者可能无法做到动作完全同步,因此跟随每个表演者动作生成的特技效果也无法完全同步,特技效果播放的时间差可能会便于观赏者观察到表演者的动作差异,因此表演者动作不统一的缺点容易被放大。本申请实施例提供了一种基于体感的互动式影像动作匹配方法,参照图1,由电子设备执行,该方法包括:
步骤100:获取启动指令,启动指令包括第一指令组合和第二指令组合,第一指令组合至少包含一个第一指令,第二指令组合至少包含一个第二指令。
对于本申请实施例,如在一段舞蹈音乐对应的舞蹈动作中,舞蹈动作为预先设定,设定舞蹈动作包括两种类型,第一动作类型是多人同步动作,第二动作类型是每个人单独动作,第一指令对应于第一动作类型,第二指令对应于第二动作类型,一段舞蹈中在时间轴上可能包含多个第一动作类型和多个第二动作类型,每个第一动作类型和每个第二动作类型在舞蹈时间轴上均对应唯一的时间段,其中,每个第一指令对应有第一时段,每个第二指令对应有第二时段。
参照图1,
步骤200:针对每个第一指令,获取与该第一指令对应的第一目标动作组合,第一目标动作组合至少包含两个第一目标动作信息。
对于本申请实施例,第一时段与第二时段可相互独立或存在重合部分,下面对上述两种情况进行说明。
其一,若第一时段与第二时段相互独立,设启动指令对应有全时段,全时段包括第一时段组合和第二时段组合,第一时段组合包括至少一个第一时段,第二时段组合至少包括一个第二时段,每个第一时段与每个第一指令一一对应,每个第二时段与每个第二指令一一对应。
目标即为表演者,将第一时段内获取到的对应目标的目标动作作为第一目标动作信息,将第二时段内获取到的对应目标的目标动作作为第二目标动作信息,目标动作为表演者的动作信息。
获取多个表演者动作的方式可在表演者的正前方设置多个Kinect体感摄影机,Kinect体感摄影机可以采集人体20个关节点的三维坐标数据,根据这些数据可以分析出人体的运动状态。
其二,若第一时段与第二时段存在重合的部分,则预先将根据目标(即表演者)所需的完成部分将舞蹈动作进行分配,则每个第一指令对应有相应的目标,将该相应的目标在该第一时段内的动作作为第一目标动作信息,每个第二指令对应有相应的目标,将该相应的目标在该第二时段内的动作作为第二目标动作信息。
将第一指令与相应的目标对应的方式可包括,每个第一指令在整个舞蹈时间段内对应有唯一的时间段(即唯一的第一时段),给每个完成同步动作的目标预设以唯一的身份标识信息。
针对每个被分配有唯一身份信息的标识信息,该具有唯一标识信息的目标的动作在任一时刻只能属于第一动作类型或者第二动作类型,其在单独动作时,该目标的动作在第一指令与第二指令重合的时间段内与第二指令对应;其在做与其他目标的同步动作时,该目标的动作在第一指令与第二指令的重合时间段与第一指令对应。
由于舞蹈动为在表演前已预先设定,因此在第一指令与第二指令重合的时间段,该唯一标识信息响应于第一指令/第二指令为预先设定,因此在接收到第一指令/第二指令时,只需对该目标的标识信息进行识别,即可知该目标是否与当前的第一指令/第二指令对应;其余未被标识为唯一身份信息的目标均仅能与第二指令组合对应。
其中,给每个在舞蹈中参与同步动作的目标分配有唯一身份信息的标识信息,并识别该唯一标识信息的方式可通过人脸识别的方式,或者是在该表演者的身上设置有带有唯一ID的传感器,传感器与识别装置通过无线通信的方式传输数据。
步骤201:根据该第一指令或第一指令和第一目标动作组合确定第一特效信息。
对于本申请实施例,根据该第一指令或第一指令和第一目标动作组合确定第一特效信息的情况包括以下两种方法:
其一,获取与该第一指令对应的第一特效信息。
其中,第一特效信息为预设好特效视频信息,在第一时段内播放该视频信息,第一特效信息跟随表演者的位置但不跟随表演者的动作,即可对表演者动作进行渲染,且能够保证每个第一目标动作信息对应的第一特效信息同步播放,优化观赏体验。
其二,根据第一指令和第一目标动作组合确定第一特效信息。
步骤2010:在第一时段的起点判断第一目标动作组合中是否存在指定目标信息;
对于本申请实施例,指定目标信息为预设的用于指定主表演者的身份信息。
步骤2011:若不存在,则将第一目标动作信息与第一基准动作信息进行匹配,将匹配成功的第一目标动作信息作为第一有效信息,根据第一有效信息生成第一特效信息。
对于本申请实施例,如果不存在主表演者,则将多个预进行同步动作的多个第一目标动作信息与第一基准动作信息进行比较,若将匹配成功的第一目标动作信息作为第一有效信息,则说明该第一目标动作信息与预设的节奏(即预设的第一基准动作信息)相同或相近,其他节奏有误差的人员可将动作调整至与第一目标动作信息相同,即与舞蹈音乐的节奏调整为同步。
而后,根据第一有效信息生成第一特效信息,使得第一特效信息适配于其中一个或若干个表演者,根据第一特效信息形成适配于每个表演者的目标适配信息,且使每个表演者对应的目标适配信息能够同步播放,提高观赏效果的同时优化了表演者的表演体验。
其中,根据第一有效信息生成第一特效信息的方法包括:
步骤20110:生成特效模板。
预先录制一段人体动作,根据音乐特性和动作特性,选择合适的时间点或者动作点,选择并加载编辑的特效,预览本次编辑特效的效果,如果不满意,可直接修改,如果满意,将编辑的特效模板保存成自定义的形式。
步骤20111:采集表演者肢体运动状态并记录视频。
获取多个表演者动作的方式可在表演者的正前方设置多个Kinect体感摄影机。
步骤20112:对采集到的视频进行动作关键帧的提取、动作序列的识别。
步骤20113:获取关节点数据角度转化。
在每个关节点建立一个相对关节的坐标系,由于人体上肢与下肢相对运动关节的坐标系变化有所不同,相对固定的矢量取值也有所区别,其中腰部以上取人体躯干矢量,而腰部以下,相对固定的矢量取为垂直于地面的绝对坐标矢量(0,0,1),这样就使得角度换算相对稳定、统一,为以后进行模式匹配奠定了好的基础。
步骤20114:关键帧识别。
关键帧识别是通过若干帧的历史动作数据序列,计算关节的速度和加速度,从中找到其速度、加速度大小和运动方向的突变点,以此来找到关键帧。为了保证关键帧提取的实时性,关键帧的提取以从当前往前的7帧为依据,判定当前帧的上一帧是否为关键帧,关键帧的判断依据为是否是速度曲线的拐点,或运动方向变化量曲线的拐点。
步骤20115:关键帧匹配。
获取最长公共子序列用于匹配两个序列,其中间有多个未匹配上的帧,或帧有错位,都不会影响整体的匹配,因此求解最长公共子序列的算法对关键帧匹配中的噪点、错位等干扰和误差有很好的健壮性,同时,该类算法对于接近的、没有匹配的情况也有有效的值,因此最长公共子序列长度曲线是一个有单峰值的规则曲线,无须进行整个序列的匹配,即可判断是否到达峰值点,这使得该算法可以实时判断匹配情况。
步骤20116:匹配已生成的配特效模板,将表演者肢体动作相应特效投放于显示装置。
步骤2012:若存在指定目标信息,则根据指定目标信息生成第一特效信息。
对于本申请实施例,若在进行同步表演动作时,存在预设的表现优异的主表演者,此时根据该主表演者的动作生成第一特效信息,便于其他表演者跟随主表演者同步操作,进而提高其表演动作与其对应的第一特效信息的配合精确度。
参照图1,
步骤202:针对每个第一目标动作信息,将第一特效信息根据第一目标动作信息调整为目标适配信息,目标适配信息与第一目标动作信息一一对应。
对于本申请实施例,每个第一目标动作信息对应有第一尺寸信息,将第一特效信息根据第一尺寸信息成比例缩放,将该缩放后的第一特效信息作为目标适配信息。
将第一特效信息根据每个目标(即表演者)的个体尺寸信息缩放,使得目标适配信息能够与第一目标动作信息较为精准地配合,达到优化人们观赏体验的效果,下面进行举例说明:
设第一特效信息为跟随人体手部动作的图案信息,若第一特效信息中头部/肩部距离手部的信息为a,获取到的第一尺寸信息中头部/肩部至手部的距离a’,则缩放比例x=a’/a,则第一特效信息显示时跟随其对应目标的手部位置,使得目标适配信息显示位置能够更加精确地匹配每个目标。
参照图1,
步骤203:将所有目标适配信息同步反馈,每个目标适配信息分别反馈至其对应的第一目标动作信息。
对于本申请实施例,目标适配信息与第一特效信息同步显示,并且与每个对应于第一指令的第一目标动作信息,在第一时段,当需要所有人同步动作时,表演者之间可能存在动作差异,但是目标适配信息与第一特效信息动作信息同步播放,能够使观赏者不便于察觉表演者舞蹈的动作差异。
参照图1,
步骤300:针对每个第二指令,获取该第二指令对应的第二目标动作组合,第二目标动作组合包含至少第二目标动作信息。
对于本申请实施例,第二目标动作信息为步骤200中:将第二时段内获取到的对应目标的目标动作作为第二目标动作信息。
参照图1,
步骤301:针对每个第二目标动作信息,根据第二目标动作信息生成第二特效信息。
对于本申请实施例,根据第二目标动作信息生成第二特效信息的方式与步骤20110-步骤20116方法相同,此处不再赘述。
参照图1,
步骤302:将第二特效信息反馈至与其对应的第二目标动作信息。
本申请实施例一种基于体感的互动式影像动作匹配方法的实施原理为:通过第一指令和第二指令配合控制,当不需要所有表演者均配合同步动作时,根据第二目标动作信息生成第二特效信息,并将第二特效信息反馈至与其对应的第二目标动作信息,实现对单个表演者的表演动作进行特技渲染的功能。
上述实施例从方法流程的角度介绍一种基于体感的互动式影像动作匹配方法,下述实施例从虚拟模块或者虚拟单元的角度介绍了一种基于体感的互动式影像动作匹配系统20,具体详见下述实施例。本申请实施例提供一种基于体感的互动式影像动作匹配系统20,参照图2,该匹配系统20具体可以包括:
一种基于体感的互动式影像动作匹配系统,包括:
接收模块21,用于获取启动指令,启动指令包括第一指令组合和第二指令组合,第一指令组合至少包含一个第一指令,第二指令组合至少包含一个第二指令,每个第一指令对应有第一时段,每个第二指令对应有第二时段;
第一处理模块22,第一处理模块22包括:
第一处理模块221,用于针对每个第一指令,获取与该第一指令对应的第一目标动作组合,第一目标动作组合至少包含两个第一目标动作信息;
第一分析模块222,用于根据该第一指令或第一指令和第一目标动作组合确定第一特效信息;
第一转换模块223,用于针对每个第一目标动作信息,将第一特效信息根据第一目标动作信息调整为目标适配信息,目标适配信息与第一目标动作信息一一对应;
第一反馈模块224,用于将所有目标适配信息同步反馈,每个目标适配信息分别反馈至其对应的第一目标动作信息;
第二处理模块23,第二处理模块23包括:
第二获取模块231,用于针对每个第二指令,获取该第二指令对应的第二目标动作组合,第二目标动作组合包含至少第二目标动作信息;
第二生成模块232,用于针对每个第二目标动作信息,根据第二目标动作信息生成第二特效信息;
第二反馈模块233,用于将第二特效信息反馈至与其对应的第二目标动作信息。
本申请实施例的一种可能的实现方式,第一分析模块222根据该第一指令确定第一特效信息时,具体用于:获取与该第一指令对应的第一特效信息。
本申请实施例的一种可能的实现方式,第一分析模块222根据该第一指令和第一目标动作组合确定第一特效信息时,具体用于:
在第一时段的起点判断第一目标动作组合中是否存在指定目标信息;
若不存在,则将第一目标动作信息与第一基准动作信息进行匹配;
将匹配成功的第一目标动作信息作为第一有效信息;
根据第一有效信息生成第一特效信息。
本申请实施例的一种可能的实现方式,第一分析模块222确定第一特效信息时,具体用于:
若存在指定目标信息,则根据指定目标信息生成第一特效信息。
本申请实施例的一种可能的实现方式,第一转换模块223,用于针对每个第一目标动作信息、将第一特效信息根据第一目标动作信息调整为目标适配信息时,具体用于:
每个第一目标动作信息对应有第一尺寸信息;
将第一特效信息根据第一尺寸信息成比例缩放;
将该缩放后的第一特效信息作为目标适配信息。
以上均为本申请的较佳实施例,并非依此限制本申请的保护范围,故:凡依本申请的结构、形状、原理所做的等效变化,均应涵盖于本申请的保护范围之内。

Claims (10)

1.一种基于体感的互动式影像动作匹配方法,其特征在于,包括:
获取启动指令;
所述启动指令包括第一指令组合和第二指令组合,所述第一指令组合至少包含一个第一指令,所述第二指令组合至少包含一个第二指令;
针对每个所述第一指令,获取与该所述第一指令对应的第一目标动作组合,所述第一目标动作组合至少包含两个第一目标动作信息;
根据该所述第一指令或所述第一指令和所述第一目标动作组合确定第一特效信息;
针对每个第一目标动作信息,将第一特效信息根据第一目标动作信息调整为目标适配信息,目标适配信息与第一目标动作信息一一对应;
将所有所述目标适配信息同步反馈,每个目标适配信息分别反馈至其对应的所述第一目标动作信息;
针对每个第二指令,获取该所述第二指令对应的第二目标动作组合,所述第二目标动作组合包含至少第二目标动作信息;
针对每个第二目标动作信息,根据所述第二目标动作信息生成第二特效信息;以及,
将第二特效信息反馈至与其对应的所述第二目标动作信息;
其中,每个第一指令对应有第一时段,每个第二指令对应有第二时段。
2.根据权利要求1所述的一种基于体感的互动式影像动作匹配方法,其特征在于,根据该所述第一指令确定第一特效信息的方法包括:
获取与该所述第一指令对应的第一特效信息。
3.根据权利要求1所述的一种基于体感的互动式影像动作匹配方法,其特征在于,根据该所述第一指令和第一目标动作组合确定第一特效信息的方法包括:
在第一时段的起点判断第一目标动作组合中是否存在指定目标信息;
若不存在,则将第一目标动作信息与第一基准动作信息进行匹配;
将匹配成功的第一目标动作信息作为第一有效信息;
根据第一有效信息生成第一特效信息。
4.根据权利要求3所述的一种基于体感的互动式影像动作匹配方法,其特征在于,确定第一特效信息的方法还包括:
若存在指定目标信息,则根据指定目标信息生成第一特效信息。
5.根据权利要求1所述的一种基于体感的互动式影像动作匹配方法,其特征在于,针对每个第一目标动作信息,将第一特效信息根据第一目标动作信息调整为目标适配信息的方法包括:
每个所述第一目标动作信息对应有第一尺寸信息;
将所述第一特效信息根据所述第一尺寸信息成比例缩放;
将该缩放后的所述第一特效信息作为目标适配信息。
6.一种基于体感的互动式影像动作匹配系统,其特征在于,包括:
接收模块,用于获取启动指令,所述启动指令包括第一指令组合和第二指令组合,所述第一指令组合至少包含一个第一指令,所述第二指令组合至少包含一个第二指令,每个第一指令对应有第一时段,每个第二指令对应有第二时段;
第一处理模块,所述第一处理模块包括:
第一获取模块,用于针对每个所述第一指令,获取与该所述第一指令对应的第一目标动作组合,所述第一目标动作组合至少包含两个第一目标动作信息;
第一分析模块,用于根据该所述第一指令或所述第一指令和所述第一目标动作组合确定第一特效信息;
第一转换模块,用于针对每个第一目标动作信息,将第一特效信息根据第一目标动作信息调整为目标适配信息,目标适配信息与第一目标动作信息一一对应;
第一反馈模块,用于将所有所述目标适配信息同步反馈,每个目标适配信息分别反馈至其对应的所述第一目标动作信息;
第二处理模块,所述第二处理模块包括:
第二获取模块,用于针对每个第二指令,获取该所述第二指令对应的第二目标动作组合,所述第二目标动作组合包含至少第二目标动作信息;
第二生成模块,用于针对每个第二目标动作信息,根据所述第二目标动作信息生成第二特效信息;
第二反馈模块,用于将第二特效信息反馈至与其对应的所述第二目标动作信息。
7.根据权利要求6所述的一种基于体感的互动式影像动作匹配系统,其特征在于,第一分析模块根据该所述第一指令确定第一特效信息时,具体用于:
获取与该所述第一指令对应的第一特效信息。
8.根据权利要求6所述的一种基于体感的互动式影像动作匹配系统,其特征在于,第一分析模块根据该所述第一指令和第一目标动作组合确定第一特效信息时,具体用于:
在第一时段的起点判断第一目标动作组合中是否存在指定目标信息;
若不存在,则将第一目标动作信息与第一基准动作信息进行匹配;
将匹配成功的第一目标动作信息作为第一有效信息;
根据第一有效信息生成第一特效信息。
9.根据权利要求8所述的一种基于体感的互动式影像动作匹配系统,其特征在于,第一分析模块确定第一特效信息时,具体用于:
若存在指定目标信息,则根据指定目标信息生成第一特效信息。
10.根据权利要求6所述的一种基于体感的互动式影像动作匹配系统,其特征在于,第一转换模块,用于针对每个第一目标动作信息、将第一特效信息根据第一目标动作信息调整为目标适配信息时,具体用于:
每个所述第一目标动作信息对应有第一尺寸信息;
将所述第一特效信息根据所述第一尺寸信息成比例缩放;
将该缩放后的所述第一特效信息作为目标适配信息。
CN202110091353.7A 2021-01-23 2021-01-23 一种基于体感的互动式影像动作匹配方法及系统 Active CN112818786B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110091353.7A CN112818786B (zh) 2021-01-23 2021-01-23 一种基于体感的互动式影像动作匹配方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110091353.7A CN112818786B (zh) 2021-01-23 2021-01-23 一种基于体感的互动式影像动作匹配方法及系统

Publications (2)

Publication Number Publication Date
CN112818786A true CN112818786A (zh) 2021-05-18
CN112818786B CN112818786B (zh) 2024-06-18

Family

ID=75859186

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110091353.7A Active CN112818786B (zh) 2021-01-23 2021-01-23 一种基于体感的互动式影像动作匹配方法及系统

Country Status (1)

Country Link
CN (1) CN112818786B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104623910A (zh) * 2015-01-15 2015-05-20 西安电子科技大学 舞蹈辅助特效伴侣系统及实现方法
JP6531272B1 (ja) * 2018-05-29 2019-06-19 株式会社コナミスポーツライフ 運動指示装置、プログラム、トレーニングシステム、及び運動器具
CN111726921A (zh) * 2020-05-25 2020-09-29 磁场科技(北京)有限公司 一种体感交互灯光控制系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104623910A (zh) * 2015-01-15 2015-05-20 西安电子科技大学 舞蹈辅助特效伴侣系统及实现方法
JP6531272B1 (ja) * 2018-05-29 2019-06-19 株式会社コナミスポーツライフ 運動指示装置、プログラム、トレーニングシステム、及び運動器具
CN111726921A (zh) * 2020-05-25 2020-09-29 磁场科技(北京)有限公司 一种体感交互灯光控制系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
王会芹;樊欣严;: "基于体感技术的交互式舞台灯光控制系统设计", 中国传媒大学学报(自然科学版), no. 03, 25 June 2020 (2020-06-25) *

Also Published As

Publication number Publication date
CN112818786B (zh) 2024-06-18

Similar Documents

Publication Publication Date Title
US10629107B2 (en) Information processing apparatus and image generation method
US9218781B2 (en) Information processing apparatus, display control method, and program
US20130113830A1 (en) Information processing apparatus, display control method, and program
CN109710057B (zh) 一种动感重现虚拟现实的方法及系统
CN104883557A (zh) 实时全息投影方法、装置及系统
CN104243951A (zh) 图像处理设备、图像处理系统以及图像处理方法
CN104699247A (zh) 一种基于机器视觉的虚拟现实交互系统及方法
KR20150030993A (ko) 콘텐츠 체험 서비스 제공 장치 및 그 방법
KR20140082610A (ko) 휴대용 단말을 이용한 증강현실 전시 콘텐츠 재생 방법 및 장치
JPWO2017094543A1 (ja) 情報処理装置、情報処理システム、情報処理装置の制御方法、及び、パラメーターの設定方法
CN111315453B (zh) 信息处理设备、信息处理方法及程序
US20230179756A1 (en) Information processing device, information processing method, and program
CN113822970A (zh) 直播控制方法、装置、存储介质与电子设备
KR20190120492A (ko) 실 공간 비강체의 가상 공간 정합 방법 및 장치
CN114363689A (zh) 直播控制方法、装置、存储介质及电子设备
CN112818786A (zh) 一种基于体感的互动式影像动作匹配方法及系统
EP3689427B1 (en) Peripheral tracking system and method
WO2017145552A1 (ja) プログラム及びアイウエア
KR20220057842A (ko) 모션인식 안무학습 장치
US20230360316A1 (en) Information processing device, information processing method, and information distribution system
CN116139471A (zh) 一种互动观影系统-梦幻乘骑
CN101751116A (zh) 交互式立体影像显示方法及其相关立体显示装置
CN115756153A (zh) 一种基于元宇宙虚拟现实vr交互系统及方法
KR20120092960A (ko) 가상 캐릭터 제어 시스템 및 방법
US20240249419A1 (en) Information processing apparatus, information processing method, and program

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20240521

Address after: Room 501, 5th Floor, Building A, No. 12 Hongda North Road, Beijing Economic and Technological Development Zone, Daxing District, Beijing, 102600 (Yizhuang Cluster, High end Industrial Zone, Beijing Pilot Free Trade Zone)

Applicant after: Beijing Licheng Century Culture Technology Co.,Ltd.

Country or region after: China

Address before: Room 1803, building 1, Linghui Business Plaza, 278 Suzhou Avenue East, Suzhou Industrial Park, 215000, Jiangsu Province

Applicant before: Suzhou Industrial Park Shanglian advertising public relations Co.,Ltd.

Country or region before: China

GR01 Patent grant
GR01 Patent grant