CN113918755A - 显示方法及装置、存储介质、电子设备 - Google Patents

显示方法及装置、存储介质、电子设备 Download PDF

Info

Publication number
CN113918755A
CN113918755A CN202111356055.2A CN202111356055A CN113918755A CN 113918755 A CN113918755 A CN 113918755A CN 202111356055 A CN202111356055 A CN 202111356055A CN 113918755 A CN113918755 A CN 113918755A
Authority
CN
China
Prior art keywords
song
picture
singing
data
original scene
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111356055.2A
Other languages
English (en)
Inventor
郑国秀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Boguan Information Technology Co Ltd
Original Assignee
Guangzhou Boguan Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Boguan Information Technology Co Ltd filed Critical Guangzhou Boguan Information Technology Co Ltd
Priority to CN202111356055.2A priority Critical patent/CN113918755A/zh
Publication of CN113918755A publication Critical patent/CN113918755A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63Querying
    • G06F16/632Query formulation
    • G06F16/634Query by example, e.g. query by humming
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63Querying
    • G06F16/638Presentation of query results
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/68Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/683Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/685Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using automatically derived transcript of audio data, e.g. lyrics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73Querying
    • G06F16/738Presentation of query results
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7844Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using original textual content or text extracted from visual content or transcript of audio data

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Mathematical Physics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开属于多媒体技术领域,涉及一种显示方法及装置、存储介质、电子设备。该方法包括:通过终端设备采集待识别歌声,并对待识别歌声进行歌曲识别处理得到歌曲识别数据;根据歌曲识别数据对原始场景画面进行画面更新得到歌曲演唱画面。本公开通过对待识别歌声进行歌曲识别处理准确捕捉用户想要唱歌的时机,并自动化且智能化的根据识别到的歌曲识别数据对演唱者和观众的原始场景画面进行画面更新,推动多种角色的用户的唱歌及参与兴致和情绪。并且,更新得到的歌曲演唱画面准确贴合用户的当前状态,营造了视觉和听觉统一的演唱氛围,优化了可视化方案的呈现,实现了兴趣娱乐的目的。

Description

显示方法及装置、存储介质、电子设备
技术领域
本公开涉及多媒体技术领域,尤其涉及一种显示方法与显示装置、计算机可读存储介质及电子设备。
背景技术
当前市场上具备两种形态的K(唱)歌房,一种是在应用程序内,用户录歌结束后进行上传分享。一是语音房的方式,可以多人参与,并且,具有演唱者和观众角色。其中,麦上用户演唱,房间内用户一起听。在这过程中,用户可给自己觉得唱得好听或喜爱得唱歌选手进行送礼。
但是,无论是哪种形态,都是已搭建好的K歌状态,对用户来说比较被动,需要用户自己去开启K歌状态,无法捕捉用户的K歌兴致。并且,房间内一般参与感比较大的是演唱者角色,触发的结果是单一线性的,只能由演唱者决定最终得歌唱成绩,房间内其他用户在K歌内容上只是观众角色,只能收听,影响用户情绪和兴趣。除此之外,语音房的房间背景在音频呈现上比较约束,目前大多通过音频识别呈现可视化。虽然可以制作多套可视化方案,但很难制造符合听视统一的场景氛围,在视觉空间上也具备一定局限性。
鉴于此,本领域亟需开发一种新的显示方法及装置。
需要说明的是,在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解,因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
发明内容
本公开的目的在于提供一种显示方法、显示装置、计算机可读存储介质及电子设备,进而至少在一定程度上克服由于相关技术的限制而导致的歌曲数据处理效果不佳的技术问题。
本公开的其他特性和优点将通过下面的详细描述变得显然,或部分地通过本公开的实践而习得。
根据本发明实施例的第一个方面,提供一种显示方法,通过终端设备提供用户图形界面,所述图形用户界面显示原始场景画面,所述方法包括:
通过所述终端设备采集待识别歌声,并对所述待识别歌声进行歌曲识别处理得到歌曲识别数据;
根据所述歌曲识别数据对所述原始场景画面进行画面更新得到歌曲演唱画面。
在本发明的一种示例性实施例中,所述歌曲识别数据,包括:歌词数据、歌曲乐器数据以及与所述歌曲乐器数据对应的歌曲节拍数据。
在本发明的一种示例性实施例中,所述根据所述歌曲识别数据对所述原始场景画面进行画面更新得到歌曲演唱画面,包括:
对所述歌词数据进行语义识别处理得到目标词汇,并获取与所述目标词汇对应的环境视频;
利用所述环境视频对所述原始场景画面进行画面更新得到歌曲演唱画面。
在本发明的一种示例性实施例中,所述根据所述歌曲识别数据对所述原始场景画面进行画面更新得到歌曲演唱画面,包括:
在所述原始场景画面上显示与所述歌曲乐器数据对应的乐器,以得到所述歌曲演唱画面。
在本发明的一种示例性实施例中,所述在所述原始场景画面上显示与所述歌曲乐器数据对应的乐器,以得到所述歌曲演唱画面,包括:
响应作用于所述乐器的选中操作,根据所述歌曲乐器数据在所述乐器确定目标乐器;
根据所述歌曲节拍数据在所述原始场景画面中显示与所述目标乐器对应的节拍标识,以得到所述歌曲演唱画面。
在本发明的一种示例性实施例中,在所述根据所述歌曲乐器数据在所述乐器确定目标乐器之后,所述方法还包括:
对所述目标乐器进行差异化显示。
在本发明的一种示例性实施例中,在所述根据所述歌曲识别数据对所述原始场景画面进行画面更新得到歌曲演唱画面之前,所述方法还包括:
在所述图形用户界面上显示互动礼物标识;
响应作用于所述互动礼物标识的发送操作,在所述图形用户界面显示与所述互动礼物标识对应的默认效果画面。
在本发明的一种示例性实施例中,在所述根据所述歌曲识别数据对所述原始场景画面进行画面更新得到歌曲演唱画面之后,所述方法还包括:
在所述图形用户界面上显示互动礼物标识;
响应作用于所述互动礼物标识的互动操作,在所述图形用户界面显示与所述互动礼物标识对应的歌唱效果画面。
在本发明的一种示例性实施例中,所述方法还包括:
在所述图形用户界面上显示演唱话筒控件,以在其他终端设备触发所述演唱话筒控件时,通过所述其他终端设备采集当前演唱声音。
在本发明的一种示例性实施例中,所述方法还包括:
通过所述终端设备采集用户图像,并在所述图形用户界面上显示所述用户图像。
根据本发明实施例的第二个方面,提供一种显示装置,通过终端设备提供用户图形界面,所述图形用户界面显示原始场景画面,包括:
歌曲识别模块,被配置为通过所述终端设备采集待识别歌声,并对所述待识别歌声进行歌曲识别处理得到歌曲识别数据;
画面更新模块,被配置为根据所述歌曲识别数据对所述原始场景画面进行画面更新得到歌曲演唱画面。
根据本发明实施例的第三个方面,提供一种电子设备,包括:处理器和存储器;其中,存储器上存储有计算机可读指令,所述计算机可读指令被所述处理器执行时实现上述任意示例性实施例中的显示方法。
根据本发明实施例的第四个方面,提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述任意示例性实施例中的显示方法。
由上述技术方案可知,本公开示例性实施例中的显示方法、显示装置、计算机存储介质及电子设备至少具备以下优点和积极效果:
在本公开的示例性实施例提供的方法及装置中,通过对待识别歌声进行歌曲识别处理准确捕捉用户想要唱歌的时机,并自动化且智能化的根据识别到的歌曲识别数据对演唱者和观众的原始场景画面进行画面更新,推动多种角色的用户的唱歌及参与兴致和情绪。并且,更新得到的歌曲演唱画面准确贴合用户的当前状态,营造了视觉和听觉统一的演唱氛围,优化了可视化方案的呈现,实现了兴趣娱乐的目的。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。显而易见地,下面描述中的附图仅仅是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示意性示出本公开示例性实施例中一种显示方法的流程示意图;
图2示意性示出本公开示例性实施例中显示原始场景画面的界面示意图;
图3示意性示出本公开示例性实施例中一种画面更新的方法的流程示意图;
图4示意性示出本公开示例性实施例中另一种画面更新的方法的流程示意图;
图5示意性示出本公开示例性实施例中观众角色的图形用户界面的界面示意图;
图6示意性示出本公开示例性实施例中未进入唱歌状态显示默认效果画面的方法的流程示意图;
图7示意性示出本公开示例性实施例中已进入唱歌状态显示默认效果画面的方法的流程示意图;
图8示意性示出本公开示例性实施例中演唱者角色的图形用户界面的界面示意图;
图9示意性示出本公开示例性实施例中一种显示装置的结构示意图;
图10示意性示出本公开示例性实施例中一种用于实现显示方法的电子设备;
图11示意性示出本公开示例性实施例中一种用于实现显示方法的计算机可读存储介质。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的范例;相反,提供这些实施方式使得本公开将更加全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。在下面的描述中,提供许多具体细节从而给出对本公开的实施方式的充分理解。然而,本领域技术人员将意识到,可以实践本公开的技术方案而省略所述特定细节中的一个或更多,或者可以采用其它的方法、组元、装置、步骤等。在其它情况下,不详细示出或描述公知技术方案以避免喧宾夺主而使得本公开的各方面变得模糊。
本说明书中使用用语“一个”、“一”、“该”和“所述”用以表示存在一个或多个要素/组成部分/等;用语“包括”和“具有”用以表示开放式的包括在内的意思并且是指除了列出的要素/组成部分/等之外还可存在另外的要素/组成部分/等;用语“第一”和“第二”等仅作为标记使用,不是对其对象的数量限制。
此外,附图仅为本公开的示意性图解,并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分,因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体,不一定必须与物理或逻辑上独立的实体相对应。
针对相关技术中存在的问题,本公开提出了一种显示方法,通过终端设备提供用户图形界面,图形用户界面显示原始场景画面。图1示出了显示方法的流程图,如图1所示,显示方法至少包括以下步骤:
步骤S110.通过终端设备采集待识别歌声,并对待识别歌声进行歌曲识别处理得到歌曲识别数据。
步骤S120.根据歌曲识别数据对原始场景画面进行画面更新得到歌曲演唱画面。
在本公开的示例性实施例中,通过对待识别歌声进行歌曲识别处理准确捕捉用户想要唱歌的时机,并自动化且智能化的根据识别到的歌曲识别数据对演唱者和观众的原始场景画面进行画面更新,推动多种角色的用户的唱歌及参与兴致和情绪。并且,更新得到的歌曲演唱画面准确贴合用户的当前状态,营造了视觉和听觉统一的演唱氛围,优化了可视化方案的呈现,实现了兴趣娱乐的目的。
下面对显示方法的各个步骤进行详细说明。
在步骤S110中,通过终端设备采集待识别歌声,并对待识别歌声进行歌曲识别处理得到歌曲识别数据。
在本公开的示例性实施例中,在终端设备的用户图形界面上显示的原始场景画面可以用户所处虚拟唱歌房间内的画面,该画面可以是纯色,例如纯黑色的,也可以是其他形式的原始场景画面,本示例性实施例对此不做特殊限定。
图2示出了显示原始场景画面的界面示意图,如图2所示,在用户A所处的虚拟唱歌房间内,该虚拟唱歌房间的原始场景画面为纯黑色的。因此,其他用户此时进入该虚拟唱歌房间时,也只能看到纯黑色的原始场景画面,并无显示差异和参与兴致。
当用户处在具备可通过终端设备发出自己的声音的虚拟唱歌房间内时,终端设备可以采集用户哼曲调或者唱歌等的待识别歌声。
进一步的,通过终端设备的听声识曲功能对待识别歌声进行歌曲识别处理得到对应的歌曲识别数据。
听声识曲在学术上属于音频指纹(Audio Fingerprinting)检索范畴。音频指纹,顾名思义,就像是一首歌的指纹,具有独一无二且信息简洁的特点。
通过待识别歌声的音频数据的片段寻找对应的音乐曲目,可以分为两步。首先,提取待识别歌声的音频数据的片段的特征。过去,人们曾尝试将音高的变化作为检索基础,但是效果并不理想。后来,人们选择将音乐转换成频谱图,每隔几十毫秒,提取一次标志点的特征,并将这种特征称为“指纹”。然后,匹配。只要找到同样的“指纹”串片段,就能找到目标。由于资料库中的乐曲成千上万,为音乐建立一个搜索引擎来满足比对的需求。
因此,乐曲是“网页”,指纹是“关键词”,在含有关键词的歌曲中找到最相似的那首,就完成了听歌识曲的过程。并且,无论通过哼唱还是通过片段寻找目标歌曲,这都属于音乐信息检索的范畴。
在通过听声识曲功能识别出歌曲识别数据之后,还可以将该歌曲识别数据加载到用户所在的虚拟唱歌房间内。
在可选的实施例中,歌曲识别数据,包括:歌词数据、歌曲乐器数据以及与所述歌曲乐器数据对应的歌曲节拍数据。
具体的,歌词数据可以是识别到的歌曲的所有歌词内容数据;歌曲乐器数据可以是识别到的歌曲所使用的所有乐器的数据;歌曲节拍数据可以是识别到的歌曲所使用的每种乐器对应的节拍点数据。
因此,歌曲识别数据还可以包括识别到的歌曲名称或者标识数据等,本示例性实施例对此不做特殊限定。
在步骤S120中,根据歌曲识别数据对原始场景画面进行画面更新得到歌曲演唱画面。
在本公开的示例性实施例中,得到歌曲识别数据进入唱歌状态时,可以根据不同的歌曲识别数据对原始场景画面进行画面更新。
在可选的实施例中,图3示出了一种画面更新的方法的流程示意图,如图3所示,该方法至少包括以下步骤:在步骤S310中,对歌词数据进行语义识别处理得到目标词汇,并获取与目标词汇对应的环境视频。
其中,语义识别处理可以是通过语义识别模型实现的。基于语义识别模型实现语义识别,是基于自然语言处理技术的一种应用,自然语言处理技术是计算机科学领域与人工智能领域中的一个重要方向。它研究能实现人与计算机之间用自然语言进行有效通信的各种理论与方法。自然语言处理是一门融语言学、计算机科学、数学于一体的科学。因此,这一领域的研究将设计自然语言,即人们日常使用的语言,所以它与语言学的研究有着密切的联系。自然语言处理技术通常包括文本处理、语义理解、机器翻译、机器人问答和知识图谱等技术。
具体的,语义识别模型使用到了语义理解技术,尤其是其中的语义分析技术,以及机器人问答技术。语义识别模型的训练是基于人工智能技术实现,尤其是基于人工智能技术中的机器学习技术实现的。更具体的,可以是通过机器学习中的深度学习实现的。
并且,语义识别模型可以是基于任意可用于语义识别的人工神经网络的结构构建的,例如语义识别模型可以是基于BERT(Bidirectional Encoder Representation fromTransformers,双向transformer的编码器)实现,也可以是通过其他模型实现的,本示例性实施例对此不做特殊限定。
因此,利用语义识别模型对歌词数据进行语义识别处理可以得到歌词数据表征的目标词汇。
具体的,目标词汇可以是涉及到自然环境、天气或者情绪等的词汇,也可以是其他词汇,本示例性实施例对此不做特殊限定。
并且,由于提前配置了与目标词汇对应的环境视频,因此可以查找到当前的目标词汇对应的环境视频。优选的,该环境视频可以是以无人机拍摄视角为主得到的,也可以是通过其他拍摄方式得到的,本示例性实施例对此不做特殊限定。
在步骤S320中,利用环境视频对原始场景画面进行画面更新得到歌曲演唱画面。
在确定与目标词汇对应的环境视频之后,可以使用环境视频对原始场景画面进行画面更新得到歌曲演唱画面。
具体的,可以是将环境视频加载到虚拟唱歌房间的背景中,以实现背景替换得到歌曲演唱画面。
在本示例性实施例中,通过与目标词汇对应的环境视频可以实现原始场景画面的画面替换,替换方式简单准确,且与用户的待识别歌声贴合,优化了画面的丰富度,提升了用户的唱歌兴致,实现了兴趣娱乐。在可选的实施例中,在原始场景画面上显示与歌曲乐器数据对应的乐器,以得到歌曲演唱画面。
由于歌曲识别数据中还可以包括歌曲乐器数据,因此可以在麦下用户,亦即虚拟唱歌房间的观众的终端设备上显示多个乐器。并且,该乐器为歌曲乐器数据表征的乐器。
在可选的实施例中,图4示出了另一种画面更新的方法的流程示意图,如图4所示,该方法至少包括以下步骤:在步骤S410中,响应作用于乐器的选中操作,根据歌曲乐器数据在乐器确定目标乐器。
在显示乐器之后,通过观众在终端设备上的选中操作,可以根据歌曲乐器数据从中选择目标乐器。
其中,选中操作可以包括点击操作、长按操作和滑动操作等,本示例性实施例对此不做特殊限定。
并且,根据虚拟唱歌房间的玩法设置,还可以在用户进行选中操作的同时,提醒用户支付一定的消费金额以获得该乐器到的使用权。除此之外,每个乐器可以仅限1个用户使用,也可以同时允许多个用户使用,本示例性实施例对此不做特殊限定。
在可选的实施例中,在根据歌曲乐器数据确定目标乐器之后,对目标乐器进行差异化显示。
举例而言,当每个乐器仅限1个用户使用时,被选择的目标乐器会“消失”,亦即灰色显示,以使其他用户无法通过选中操作继续选择该乐器。除此之外,也可以是将已经选择的目标乐器进行大小或者颜色上的差异化显示,本示例性实施例对此不做特殊限定。
对应的,当某一乐器一直未被选择时,该乐器可以一直显示,以表征待用户选择的状态。
在步骤S420中,根据歌曲节拍数据在原始场景画面中显示与目标乐器对应的节拍标识,以得到歌曲演唱画面。
由于每种歌曲乐器数据都有对应的歌曲节拍数据,因此在选择目标乐器之后,可以根据歌曲节拍数据在原始场景画面中显示与目标乐器对应的节拍标识得到歌曲演唱画面。并且,选择目标乐器的用户可以在歌曲演唱期间通过节拍标识激活歌曲节拍。
图5示出了观众角色的图形用户界面的界面示意图,如图5所示,该观众角色选择的目标乐器为吉他。并且,点状标识可以是吉他对应的节拍标识。该观众角色可以通过点击等触发操作在歌唱期间激活对应节拍。
在本示例性实施例中,通过歌曲乐器数据和对应的歌曲节拍数据可以替换观众终端设备的歌曲演唱画面,为观众端增加了乐器礼物,丰富了唱歌房间内用户的互动方式,提高了观众角色的参与度。
除了虚拟唱歌房间内的画面在进入唱歌状态时不同之外,虚拟唱歌房间内的互动礼物也可以根据是否进入了唱歌状态而不同。
在可选的实施例中,图6示出了未进入唱歌状态显示默认效果画面的方法的流程示意图,如图6所示,该方法至少包括以下步骤:在步骤S610中,在图形用户界面上显示互动礼物标识。
互动礼物标识会因终端设备的角色的不同而不同。举例而言,当终端设备为演唱者角色时,互动礼物标识可以是与麦下用户,亦即观众角色进行互动的礼物标识,例如招手、电眼或者飞吻等礼物标识;当终端设备为观众角色时,互动礼物标识可以是有助场景氛围或者与麦上用户,亦即演唱者角色互动的礼物标识,例如招手和荧光棒等礼物标识。
其中,荧光棒可以在虚拟场景房间内作为底部效果呈现。并且,当多人使用荧光棒时,可以呈现多个荧光棒。
在步骤S620中,响应作用于互动礼物标识的发送操作,在图形用户界面显示与互动礼物标识对应的默认效果画面。
当演唱者角色或者观众角色在终端设备显示的互动礼物标识上作用一发送操作时,可以在图形用户界面上显示该互动礼物标识的默认效果画面。
亦即,当未进入演唱状态时,即使演唱者角色或者观众角色点击互动礼物标识也只能显示默认效果画面,无法触发该互动礼物标识在演唱状态下才有的特殊效果。
并且,当发送的互动礼物标识为演唱者角色和观众角色都有的招手礼物标识时,该默认效果画面可以根据实际需求设置为一样,也可以设置为不一样,本示例性实施例对此不做特殊限定。
在本示例性实施例中,在进入演唱状态之前,通过作用于互动礼物标识的发送操作能够展示对应的默认效果画面,对不同状态下的互动礼物标识画面进行区分,提升了效果画面展示的丰富度和细腻性。
在可选的实施例中,图7示出了已进入唱歌状态显示默认效果画面的方法的流程示意图,如图7所示,该方法至少包括以下步骤:在步骤S710中,在图形用户界面上显示互动礼物标识。
互动礼物标识会因终端设备的角色的不同而不同。举例而言,当终端设备为演唱者角色时,互动礼物标识可以是与麦下用户,亦即观众角色进行互动的礼物标识,例如招手、电眼或者飞吻等礼物标识;当终端设备为观众角色时,互动礼物标识可以是有助场景氛围或者与麦上用户,亦即演唱者角色互动的礼物标识,例如招手和荧光棒等礼物标识。
在步骤S720中,响应作用于互动礼物标识的互动操作,在图形用户界面显示与互动礼物标识对应的歌唱效果画面。
当进入演唱状态时,演唱者角色或者观众角色在终端设备显示的互动礼物标识上作用一互动操作,可以在图形用户界面上显示该互动礼物标识的歌唱效果画面。
亦即,当进入演唱状态时,演唱者角色或者观众角色可以通过点击互动礼物标识触发该互动礼物标识在演唱状态下才有的特殊效果。
并且,当发送的互动礼物标识为演唱者角色和观众角色都有的招手礼物标识时,该歌唱效果画面可以根据实际需求设置为一样,也可以设置为不一样,本示例性实施例对此不做特殊限定。
在本示例性实施例中,在进入演唱状态之后,通过作用于互动礼物标识的互动操作能够展示对应的歌唱效果画面,对不同状态下的互动礼物标识画面进行区分,提升了效果画面展示的丰富度和细腻性,也进一步优化了演唱状态下的礼物展示效果。
更进一步的,还可以在图形用户界面上显示麦上用户的用户头像。
在可选的实施例中,通过终端设备采集用户图像,并在图形用户界面上显示用户图像。
用户可以通过终端设备上的摄像头等图像采集装置进行人脸识别,以采集用户图像。进一步的,可以根据用户图像生成对应的emoji(绘文字,日本在无线通信中所使用的视觉情感符号)表情显示在麦位上,以显示用户图像。并且,emoji表情还可以跟随预先设置的丰富的表情动态变化。
图8示出了演唱者角色的图形用户界面的界面示意图,如图8所示,通过识别出的歌词数据对原始场景画面进行画面更新之后,可以显示山川河流的歌曲演唱画面。并且,还可以显示用户A的用户图像。
除此之外,由于该虚拟唱歌房间内可以采集所用用户的待识别歌声,表明每个用户所使用的终端设备都能够进行演唱,因此当前演唱声音可以是通过不同的终端设备采集的。亦即,当多个用户都想进行演唱时,可以通过合唱或者接力的方式实现多个麦上用户的演唱效果。
在可选的实施例中,在图形用户界面上显示演唱话筒控件,以在其他终端设备触发演唱话筒控件时,通过其他终端设备采集当前演唱声音。
当用户进入虚拟演唱房间时,可以在每个用户终端设备的图形用户界面上显示一演唱话筒控件。在麦上用户演唱之前或者演唱过程中,其他用户可以通过触发该演唱话筒控件进行演唱接力或合唱,以通过该其他用户所使用的其他终端设备采集该其他用户的当前演唱声音。
并且,根据虚拟演唱房间的玩法设置,还可以在其他用户触发演唱话筒空间的同时,要求该用户进行一定金额的消费。
在本公开的示例性实施例中的显示方法,通过对待识别歌声进行歌曲识别处理准确捕捉用户想要唱歌的时机,并自动化且智能化的根据识别到的歌曲识别数据对演唱者和观众的原始场景画面进行画面更新,推动多种角色的用户的唱歌及参与兴致和情绪。并且,更新得到的歌曲演唱画面准确贴合用户的当前状态,营造了视觉和听觉统一的演唱氛围,优化了可视化方案的呈现,实现了兴趣娱乐的目的。
此外,在本公开的示例性实施例中,还提供一种显示装置,通过终端设备提供用户图形界面,图形用户界面显示原始场景画面。图9示出了显示装置的结构示意图,如图9所示,显示装置900可以包括:歌曲识别模块910和画面更新模块920。其中:
歌曲识别模块910,被配置为通过终端设备采集待识别歌声,并对待识别歌声进行歌曲识别处理得到歌曲识别数据;画面更新模块920,被配置为根据歌曲识别数据对原始场景画面进行画面更新得到歌曲演唱画面。
在本发明的一种示例性实施例中,所述歌曲识别数据,包括:歌词数据、歌曲乐器数据以及与所述歌曲乐器数据对应的歌曲节拍数据。
在本发明的一种示例性实施例中,所述根据所述歌曲识别数据对所述原始场景画面进行画面更新得到歌曲演唱画面,包括:
对所述歌词数据进行语义识别处理得到目标词汇,并获取与所述目标词汇对应的环境视频;
利用所述环境视频对所述原始场景画面进行画面更新得到歌曲演唱画面。
在本发明的一种示例性实施例中,所述根据所述歌曲识别数据对所述原始场景画面进行画面更新得到歌曲演唱画面,包括:
在所述原始场景画面上显示与所述歌曲乐器数据对应的乐器,以得到所述歌曲演唱画面。
在本发明的一种示例性实施例中,所述在所述原始场景画面上显示与所述歌曲乐器数据对应的乐器,以得到所述歌曲演唱画面,包括:
响应作用于所述乐器的选中操作,根据所述歌曲乐器数据在所述乐器确定目标乐器;
根据所述歌曲节拍数据在所述原始场景画面中显示与所述目标乐器对应的节拍标识,以得到所述歌曲演唱画面。
在本发明的一种示例性实施例中,在所述根据所述歌曲乐器数据在所述乐器确定目标乐器之后,所述方法还包括:
对所述目标乐器进行差异化显示。
在本发明的一种示例性实施例中,在所述根据所述歌曲识别数据对所述原始场景画面进行画面更新得到歌曲演唱画面之前,所述方法还包括:
在所述图形用户界面上显示互动礼物标识;
响应作用于所述互动礼物标识的发送操作,在所述图形用户界面显示与所述互动礼物标识对应的默认效果画面。
在本发明的一种示例性实施例中,在所述根据所述歌曲识别数据对所述原始场景画面进行画面更新得到歌曲演唱画面之后,所述方法还包括:
在所述图形用户界面上显示互动礼物标识;
响应作用于所述互动礼物标识的互动操作,在所述图形用户界面显示与所述互动礼物标识对应的歌唱效果画面。
在本发明的一种示例性实施例中,所述方法还包括:
在所述图形用户界面上显示演唱话筒控件,以在其他终端设备触发所述演唱话筒控件时,通过所述其他终端设备采集当前演唱声音。
在本发明的一种示例性实施例中,所述方法还包括:
通过所述终端设备采集用户图像,并在所述图形用户界面上显示所述用户图像。
上述显示装置900的具体细节已经在对应的显示方法中进行了详细的描述,因此此处不再赘述。
应当注意,尽管在上文详细描述中提及了显示装置900的若干模块或者单元,但是这种划分并非强制性的。实际上,根据本公开的实施方式,上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之,上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
此外,在本公开的示例性实施例中,还提供了一种能够实现上述方法的电子设备。
下面参照图10来描述根据本发明的这种实施例的电子设备1000。图10显示的电子设备1000仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图10所示,电子设备1000以通用计算设备的形式表现。电子设备1000的组件可以包括但不限于:上述至少一个处理单元1010、上述至少一个存储单元1020、连接不同系统组件(包括存储单元1020和处理单元1010)的总线1030、显示单元1040。
其中,所述存储单元存储有程序代码,所述程序代码可以被所述处理单元1010执行,使得所述处理单元1010执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施例的步骤。
存储单元1020可以包括易失性存储单元形式的可读介质,例如随机存取存储单元(RAM)1021和/或高速缓存存储单元1022,还可以进一步包括只读存储单元(ROM)1023。
存储单元1020还可以包括具有一组(至少一个)程序模块1025的程序/实用工具1024,这样的程序模块1025包括但不限于:操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。
总线1030可以为表示几类总线结构中的一种或多种,包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构的局域总线。
电子设备1000也可以与一个或多个外部设备1200(例如键盘、指向设备、蓝牙设备等)通信,还可与一个或者多个使得用户能与该电子设备1000交互的设备通信,和/或与使得该电子设备1000能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口1050进行。并且,电子设备1000还可以通过网络适配器1060与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图所示,网络适配器1060通过总线1030与电子设备1000的其它模块通信。应当明白,尽管图中未示出,可以结合电子设备1000使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
通过以上的实施例的描述,本领域的技术人员易于理解,这里描述的示例实施例可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本公开实施例的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM,U盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、终端装置、或者网络设备等)执行根据本公开实施例的方法。
在本公开的示例性实施例中,还提供了一种计算机可读存储介质,其上存储有能够实现本说明书上述方法的程序产品。在一些可能的实施例中,本发明的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当所述程序产品在终端设备上运行时,所述程序代码用于使所述终端设备执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施例的步骤。
参考图11所示,描述了根据本发明的实施例的用于实现上述方法的程序产品1100,其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码,并可以在终端设备,例如个人电脑上运行。然而,本发明的程序产品不限于此,在本文件中,可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了可读程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质,该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于无线、有线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络,包括局域网(LAN)或广域网(WAN),连接到用户计算设备,或者,可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其他实施例。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由权利要求指出。

Claims (13)

1.一种显示方法,其特征在于,通过终端设备提供用户图形界面,所述图形用户界面显示原始场景画面,所述方法包括:
通过所述终端设备采集待识别歌声,并对所述待识别歌声进行歌曲识别处理得到歌曲识别数据;
根据所述歌曲识别数据对所述原始场景画面进行画面更新得到歌曲演唱画面。
2.根据权利要求1所述的显示方法,其特征在于,所述歌曲识别数据,包括:歌词数据、歌曲乐器数据以及与所述歌曲乐器数据对应的歌曲节拍数据。
3.根据权利要求2所述的显示方法,其特征在于,所述根据所述歌曲识别数据对所述原始场景画面进行画面更新得到歌曲演唱画面,包括:
对所述歌词数据进行语义识别处理得到目标词汇,并获取与所述目标词汇对应的环境视频;
利用所述环境视频对所述原始场景画面进行画面更新得到歌曲演唱画面。
4.根据权利要求2所述的显示方法,其特征在于,所述根据所述歌曲识别数据对所述原始场景画面进行画面更新得到歌曲演唱画面,包括:
在所述原始场景画面上显示与所述歌曲乐器数据对应的乐器,以得到所述歌曲演唱画面。
5.根据权利要求4所述的显示方法,所述在所述原始场景画面上显示与所述歌曲乐器数据对应的乐器,以得到所述歌曲演唱画面,包括:
响应作用于所述乐器的选中操作,根据所述歌曲乐器数据在所述乐器确定目标乐器;
根据所述歌曲节拍数据在所述原始场景画面中显示与所述目标乐器对应的节拍标识,以得到所述歌曲演唱画面。
6.根据权利要求5所述的显示方法,其特征在于,在所述根据所述歌曲乐器数据在所述乐器确定目标乐器之后,所述方法还包括:
对所述目标乐器进行差异化显示。
7.根据权利要求1所述的显示方法,其特征在于,在所述根据所述歌曲识别数据对所述原始场景画面进行画面更新得到歌曲演唱画面之前,所述方法还包括:
在所述图形用户界面上显示互动礼物标识;
响应作用于所述互动礼物标识的发送操作,在所述图形用户界面显示与所述互动礼物标识对应的默认效果画面。
8.根据权利要求1所述的显示方法,其特征在于,在所述根据所述歌曲识别数据对所述原始场景画面进行画面更新得到歌曲演唱画面之后,所述方法还包括:
在所述图形用户界面上显示互动礼物标识;
响应作用于所述互动礼物标识的互动操作,在所述图形用户界面显示与所述互动礼物标识对应的歌唱效果画面。
9.根据权利要求1所述的显示方法,其特征在于,所述方法还包括:
在所述图形用户界面上显示演唱话筒控件,以在其他终端设备触发所述演唱话筒控件时,通过所述其他终端设备采集当前演唱声音。
10.根据权利要求1所述的显示方法,其特征在于,所述方法还包括:
通过所述终端设备采集用户图像,并在所述图形用户界面上显示所述用户图像。
11.一种显示装置,其特征在于,通过终端设备提供用户图形界面,所述图形用户界面显示原始场景画面,包括:
歌曲识别模块,被配置为通过所述终端设备采集待识别歌声,并对所述待识别歌声进行歌曲识别处理得到歌曲识别数据;
画面更新模块,被配置为根据所述歌曲识别数据对所述原始场景画面进行画面更新得到歌曲演唱画面。
12.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1-10中任意一项所述的显示方法。
13.一种电子设备,其特征在于,包括:
处理器;
存储器,用于存储所述处理器的可执行指令;
其中,所述处理器被配置为经由执行所述可执行指令来执行权利要求1-10中任意一项所述的显示方法。
CN202111356055.2A 2021-11-16 2021-11-16 显示方法及装置、存储介质、电子设备 Pending CN113918755A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111356055.2A CN113918755A (zh) 2021-11-16 2021-11-16 显示方法及装置、存储介质、电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111356055.2A CN113918755A (zh) 2021-11-16 2021-11-16 显示方法及装置、存储介质、电子设备

Publications (1)

Publication Number Publication Date
CN113918755A true CN113918755A (zh) 2022-01-11

Family

ID=79246633

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111356055.2A Pending CN113918755A (zh) 2021-11-16 2021-11-16 显示方法及装置、存储介质、电子设备

Country Status (1)

Country Link
CN (1) CN113918755A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114710709A (zh) * 2022-03-11 2022-07-05 广州博冠信息科技有限公司 直播间虚拟礼物推荐方法及装置、存储介质、电子设备

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114710709A (zh) * 2022-03-11 2022-07-05 广州博冠信息科技有限公司 直播间虚拟礼物推荐方法及装置、存储介质、电子设备
CN114710709B (zh) * 2022-03-11 2024-05-28 广州博冠信息科技有限公司 直播间虚拟礼物推荐方法及装置、存储介质、电子设备

Similar Documents

Publication Publication Date Title
CN110971964B (zh) 智能解说生成、播放方法、装置、设备及存储介质
US7426467B2 (en) System and method for supporting interactive user interface operations and storage medium
US20200286396A1 (en) Following teaching system having voice evaluation function
Dimitropoulos et al. Capturing the intangible an introduction to the i-Treasures project
CN101657816B (zh) 用于分布式音频文件编辑的门户网站
US20110319160A1 (en) Systems and Methods for Creating and Delivering Skill-Enhancing Computer Applications
CN113365134B (zh) 音频分享方法、装置、设备及介质
WO2007043679A1 (ja) 情報処理装置およびプログラム
CN105190678A (zh) 语言学习环境
CN109348275A (zh) 视频处理方法和装置
US20240070397A1 (en) Human-computer interaction method, apparatus and system, electronic device and computer medium
CN111787346B (zh) 基于直播的乐谱展示方法、装置、设备及存储介质
Taylor et al. Using music to interact with a virtual character
CN113918755A (zh) 显示方法及装置、存储介质、电子设备
Goto Music listening in the future: augmented music-understanding interfaces and crowd music listening
Torre The design of a new musical glove: a live performance approach
WO2022196880A1 (ko) 아바타에 기초한 인터랙션 서비스 방법 및 장치
CN112465679B (zh) 一种钢琴学习与创作系统及方法
Sarasúa Context-aware gesture recognition in classical music conducting
CN115437598A (zh) 虚拟乐器的互动处理方法、装置及电子设备
Coggins The invocation at tilburg: Mysticism, implicit religion and Gravetemple’s drone metal
CN110232911A (zh) 跟唱识别方法、装置、存储介质及电子设备
KR102637788B1 (ko) 이동 단말기용 악기 장치 및 그의 제어 방법 및 프로그램
JP7225380B2 (ja) 音声パケット記録機能のガイド方法、装置、デバイス、プログラム及びコンピュータ記憶媒体
CN112466294B (zh) 声学模型的生成方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination