CN102103857A - 演唱打分系统 - Google Patents
演唱打分系统 Download PDFInfo
- Publication number
- CN102103857A CN102103857A CN2009102020121A CN200910202012A CN102103857A CN 102103857 A CN102103857 A CN 102103857A CN 2009102020121 A CN2009102020121 A CN 2009102020121A CN 200910202012 A CN200910202012 A CN 200910202012A CN 102103857 A CN102103857 A CN 102103857A
- Authority
- CN
- China
- Prior art keywords
- word
- sound
- module
- score
- sub
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Electrophonic Musical Instruments (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
Abstract
本发明公开了一种演唱打分系统，包括演唱声音采集模块、演唱声音标准模型模块、演唱声音参考模型模块、通用语音识别打分模块、咬字得分模块、得分规整模块、显示器；演唱声音标准模型模块包括演唱声音标准模型，演唱声音参考模型模块包括演唱声音参考模型，利用通用语音识别打分模块，将演唱声音采集模块采集传来的演唱声音信号，分别与所述演唱声音标准模型、演唱声音参考模型进行匹配，输出对应的演唱声音标准声学得分信号及演唱声音参考声学得分信号到咬字得分模块，咬字得分模块根据所述演唱声音标准、参考声学得分结果，得到该演唱的咬字得分，从而能对演唱者歌词咬字的准确度进行高精确度的咬字打分评测。
Description
技术领域
本发明涉及人工智能技术，特别涉及一种演唱打分系统。
背景技术
演唱打分是一种实时对用户的个人演唱进行即时反馈的技术，可以对演唱者的演唱准确度进行评估，在互动娱乐平台上利用演唱打分系统提供演唱打分功能，可以给用户带来很好的体验，具有很高的娱乐性，用户可以进行飚歌、多人PK等娱乐。
由于声音具有相当的不稳定性，难以直接用单一声学模型进行精确评估，常规的演唱打分系统，声学模型中通常仅包括音准、音色等因素，而不包括咬字因素，仅根据音准、音色进行打分。常规的演唱打分系统，当演唱者的音准、音色并无太大区别，即便演唱者的演唱内容和实际歌词内容不一致，具体打分仍然会无太大差别，具体打分无法体现演唱者对歌词咬字的准确度。
发明内容
本发明要解决的技术问题是提供一种演唱打分系统，能够对演唱者歌词咬字的准确度进行打分。
为解决上述技术问题，本发明的演唱打分系统，包括演唱声音采集模块、演唱声音标准模型模块、演唱声音参考模型模块、通用语音识别打分模块、咬字得分模块、得分规整模块、显示器；
所述演唱声音采集模块采集输出演唱声音信号到所述语音识别打分模块；
所述演唱声音标准模型模块，包括演唱声音标准模型；所述演唱声音参考模型模块包括演唱声音参考模型；
所述通用语音识别打分模块，将演唱声音采集模块采集传来的演唱声音信号，分别与所述演唱声音标准模型、演唱声音参考模型进行匹配，输出对应的演唱声音标准声学得分信号及演唱声音参考声学得分信号到所述咬字得分模块；
所述咬字得分模块，根据所述演唱声音标准声学得分信号及演唱声音参考声学得分信号，得到演唱咬字得分，输出咬字得分信号到所述得分规整模块；
所述得分规整模块，根据分数转换模型，将所述咬字得分信号中的演唱咬字得分转换为相应的演唱咬字分值输出到显示器。
所述演唱声音标准声学得分信号中包括有演唱者演唱的歌词中各个字的标准声学得分；
所述演唱声音参考声学得分信号中包括有该首歌词中各个字的参考声学得分；
所述咬字得分模块，将所述演唱声音标准声学得分信号中的演唱者演唱的歌词中各个字的标准声学得分，分别同所述演唱声音参考声学得分信号中的该首歌词中各个字的参考声学得分相减，得到该首歌词中各个字的声学得分差，并将该首歌词中各个字的声学得分差取算术平均后得到该演唱咬字得分，输出咬字得分信号到所述得分规整模块。
本发明的演唱打分系统，设置有演唱声音标准模型模块，演唱声音参考模型模块，演唱声音标准模型模块包括演唱声音标准模型，演唱声音参考模型模块包括演唱声音参考模型，利用通用语音识别打分模块，将演唱声音采集模块采集传来的演唱声音信号，分别与所述演唱声音标准模型、演唱声音参考模型进行匹配，输出对应的演唱声音标准声学得分信号及演唱声音参考声学得分信号到咬字得分模块，咬字得分模块根据所述演唱声音标准、参考声学得分结果，得到该演唱的咬字得分，从而能对演唱者歌词咬字的准确度进行高精确度的咬字打分评测，可以克服用单一声学模型进行打分带来的精度不足的问题。
附图说明
下面结合附图和具体实施方式对本发明作进一步的详细说明。
图1是本发明的演唱打分系统一实施方式示意图。
具体实施方式
本发明的演唱打分系统一实施方式如图1所示，包括演唱声音采集模块、演唱声音标准模型模块、演唱声音参考模型模块、通用语音识别打分模块、咬字得分模块、得分规整模块、显示器；
所述演唱声音采集模块采集输出演唱声音信号到所述语音识别打分模块；
所述演唱声音标准模型模块，包括演唱声音标准模型，通过采集多个发音咬字准确的歌唱声音数据，对这批数据进行训练，得到咬字准确的语音识别模型，该咬字准确的语音识别模型作为演唱声音标准模型；所述演唱声音参考模型模块包括演唱声音参考模型，通过采集多个带有咬字不准或者与歌词不匹配的歌唱声音数据，对这批数据进行训练，得到咬字不准确的语音识别模型，该咬字不准确的语音识别模型作为演唱声音参考模型；演唱声音标准及参考模型的充分训练要求对性别、目标客户年龄段、各种口音的完整覆盖；
所述通用语音识别打分模块，将演唱声音采集模块采集传来的演唱声音信号，分别与所述演唱声音标准模型、演唱声音参考模型进行匹配，输出对应的演唱声音标准声学得分信号及演唱声音参考声学得分信号到所述咬字得分模块；所述演唱声音标准声学得分信号中包括有演唱者演唱的歌词中各个字的标准声学得分，所述演唱声音参考声学得分信号中包括有该首歌词中各个字的参考声学得分；
所述咬字得分模块，将所述演唱声音标准声学得分信号中的演唱者演唱的歌词中各个字的标准声学得分，分别同所述演唱声音参考声学得分信号中的该首歌词中各个字的参考声学得分相减，得到该首歌词中各个字的声学得分差，并将该首歌词中各个字的声学得分差取算术平均后得到该演唱咬字得分，输出咬字得分信号到所述得分规整模块。
所述得分规整模块，根据分数转换模型，将所述咬字得分信号中的演唱咬字得分转换为相应的演唱咬字分值输出到显示器；所述分数转换模型，是通过收集多个演唱咬字得分打分数据并和实际人工打分结果进行对照后确定，所述咬字得分信号中的演唱咬字得分结果经过转换后，就得到了实际在显示器上显示的演唱咬字打分值。
一实施例如下。
演唱者A要唱“东方红”时，基本没出错，通用语音识别打分模块根据歌词演唱声音标准模型得到的该首歌词中各个字的演唱声音标准声学得分，分别为：(5834，5736，8249)，根据歌词演唱声音参考模型得到的该首歌词中各个字的演唱声音参考声学得分，分别为：(2874，2873，5473)，所述咬字得分模块，将标准声学得分(5834，5736，8249)同参考声学得分(2874，2873，5473)中的各个字的得分分别对应相减，得到演唱的该首歌词中各个字的声学得分差：(2960，2863，2776)，并将演唱的该首歌词中各个字的声学得分差取算术平均后得到该首歌词的演唱咬字得分2866，所述得分规整模块，根据分数转换模型，将2866映射转换为咬字分值90显示在显示器上；而演唱者B将“红”唱错了，通用语音识别打分模块根据歌词演唱声音标准模型得到的该首歌词中各个字的演唱声音标准声学得分，分别为：(4824，5230，5235)，根据歌词演唱声音参考模型得到的该首歌词中各个字的演唱声音参考声学得分，分别为：(1827，2341，7129)，所述咬字得分模块，将标准声学得分(4824，5230，5235)同参考声学得分(1827，2341，7129)中的各个字的得分分别对应相减，得到演唱的该首歌词中各个字的声学得分差：(2997，2889，-1894)，并将演唱的该首歌词中各个字的声学得分差取算术平均后得到该首歌词的演唱咬字得分1331，所述得分规整模块，根据分数转换模型，将1331映射转换为咬字分值66显示在显示器上。
本发明的演唱打分系统，设置有演唱声音标准模型模块，演唱声音参考模型模块，演唱声音标准模型模块包括演唱声音标准模型，演唱声音参考模型模块包括演唱声音参考模型，利用通用语音识别打分模块，将演唱声音采集模块采集传来的演唱声音信号，分别与所述演唱声音标准模型、演唱声音参考模型进行匹配，输出对应的演唱声音标准声学得分信号及演唱声音参考声学得分信号到咬字得分模块，咬字得分模块根据所述演唱声音标准、参考声学得分结果，得到该演唱的咬字得分，从而能对演唱者歌词咬字的准确度进行高精确度的咬字打分评测，可以克服用单一声学模型进行打分带来的精度不足的问题。
Claims (5)
1.一种演唱打分系统，其特征在于，包括演唱声音采集模块、演唱声音标准模型模块、演唱声音参考模型模块、通用语音识别打分模块、咬字得分模块、得分规整模块、显示器；
所述演唱声音采集模块采集输出演唱声音信号到所述语音识别打分模块；
所述演唱声音标准模型模块，包括演唱声音标准模型；所述演唱声音参考模型模块包括演唱声音参考模型；
所述通用语音识别打分模块，将演唱声音采集模块采集传来的演唱声音信号，分别与所述演唱声音标准模型、演唱声音参考模型进行匹配，输出对应的演唱声音标准声学得分信号及演唱声音参考声学得分信号到所述咬字得分模块；
所述咬字得分模块，根据所述演唱声音标准声学得分信号及演唱声音参考声学得分信号，得到演唱咬字得分，输出咬字得分信号到所述得分规整模块；
所述得分规整模块，根据分数转换模型，将所述咬字得分信号中的演唱咬字得分转换为相应的演唱咬字分值输出到显示器。
2.根据权利要求1所述的演唱打分系统，其特征在于，所述演唱声音标准声学得分信号中包括有演唱者演唱的歌词中各个字的标准声学得分；
所述演唱声音参考声学得分信号中包括有该首歌词中各个字的参考声学得分；
所述咬字得分模块，将所述演唱声音标准声学得分信号中的演唱者演唱的歌词中各个字的标准声学得分，分别同所述演唱声音参考声学得分信号中的该首歌词中各个字的参考声学得分相减，得到该首歌词中各个字的声学得分差，并将该首歌词中各个字的声学得分差取算术平均后得到该演唱咬字得分，输出咬字得分信号到所述得分规整模块。
3.根据权利要求1所述的演唱打分系统，其特征在于，所述分数转换模型，是通过收集多个演唱咬字得分打分数据并和实际人工打分结果进行对照后确定。
4.根据权利要求1所述的演唱打分系统，其特征在于，通过采集多个发音咬字准确的歌唱声音数据，对这批数据进行训练，得到咬字准确的语音识别模型，该咬字准确的语音识别模型作为演唱声音标准模型。
5.根据权利要求1所述的演唱打分系统，其特征在于，通过采集多个带有咬字不准或者与歌词不匹配的歌唱声音数据，对这批数据进行训练，得到咬字不准确的语音识别模型，该咬字不准确的语音识别模型作为演唱声音参考模型。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2009102020121A CN102103857B (zh) | 2009-12-21 | 2009-12-21 | 演唱打分系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2009102020121A CN102103857B (zh) | 2009-12-21 | 2009-12-21 | 演唱打分系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN102103857A true CN102103857A (zh) | 2011-06-22 |
| CN102103857B CN102103857B (zh) | 2013-10-30 |
Family
ID=44156574
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2009102020121A Active CN102103857B (zh) | 2009-12-21 | 2009-12-21 | 演唱打分系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102103857B (zh) |
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104064180A (zh) * | 2014-06-06 | 2014-09-24 | 百度在线网络技术（北京）有限公司 | 演唱评分方法及装置 |
| CN104966144A (zh) * | 2015-04-20 | 2015-10-07 | 北京中艺润泽文化传媒有限公司 | 真实艺术水平检测系统 |
| CN108206027A (zh) * | 2016-12-20 | 2018-06-26 | 北京酷我科技有限公司 | 一种音频质量评价方法及系统 |
| CN109165836A (zh) * | 2018-08-15 | 2019-01-08 | 南京光辉互动网络科技股份有限公司 | 一种演唱评分中歌词发音的处理及测评方法及系统 |
| CN110047466A (zh) * | 2019-04-16 | 2019-07-23 | 深圳市数字星河科技有限公司 | 一种开放性创建语音朗读标准参考模型的方法 |
| CN110211585A (zh) * | 2019-06-05 | 2019-09-06 | 广州小鹏汽车科技有限公司 | 车内娱乐互动方法、装置、车辆和机器可读介质 |
| CN110610721A (zh) * | 2019-09-16 | 2019-12-24 | 上海瑞美锦鑫健康管理有限公司 | 一种基于歌词演唱准确度的检测系统及方法 |
| CN111710213A (zh) * | 2020-06-05 | 2020-09-25 | 河南艺树教育科技有限公司 | 一种可量化的音乐教学系统 |
| CN112508397A (zh) * | 2020-12-04 | 2021-03-16 | 成都音悦创想科技有限公司 | 一种游戏化vod评分系统及方法 |
| CN112686020A (zh) * | 2020-12-29 | 2021-04-20 | 科大讯飞股份有限公司 | 作文评分方法、装置、电子设备及存储介质 |
| CN114093386A (zh) * | 2021-11-10 | 2022-02-25 | 厦门大学 | 一种面向教育的多维度歌唱评价方法 |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004205567A (ja) * | 2002-12-24 | 2004-07-22 | Casio Comput Co Ltd | 演奏評価装置および演奏評価プログラム |
| CN101430876B (zh) * | 2007-11-08 | 2012-03-14 | 中国科学院声学研究所 | 一种演唱的评分系统和方法 |
-
2009
- 2009-12-21 CN CN2009102020121A patent/CN102103857B/zh active Active
Cited By (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104064180A (zh) * | 2014-06-06 | 2014-09-24 | 百度在线网络技术（北京）有限公司 | 演唱评分方法及装置 |
| CN104966144A (zh) * | 2015-04-20 | 2015-10-07 | 北京中艺润泽文化传媒有限公司 | 真实艺术水平检测系统 |
| CN108206027A (zh) * | 2016-12-20 | 2018-06-26 | 北京酷我科技有限公司 | 一种音频质量评价方法及系统 |
| CN109165836B (zh) * | 2018-08-15 | 2022-02-11 | 南京光辉互动网络科技股份有限公司 | 一种演唱评分中歌词发音的处理及测评方法及系统 |
| CN109165836A (zh) * | 2018-08-15 | 2019-01-08 | 南京光辉互动网络科技股份有限公司 | 一种演唱评分中歌词发音的处理及测评方法及系统 |
| CN110047466A (zh) * | 2019-04-16 | 2019-07-23 | 深圳市数字星河科技有限公司 | 一种开放性创建语音朗读标准参考模型的方法 |
| CN110047466B (zh) * | 2019-04-16 | 2021-04-13 | 深圳市数字星河科技有限公司 | 一种开放性创建语音朗读标准参考模型的方法 |
| CN110211585A (zh) * | 2019-06-05 | 2019-09-06 | 广州小鹏汽车科技有限公司 | 车内娱乐互动方法、装置、车辆和机器可读介质 |
| CN110610721A (zh) * | 2019-09-16 | 2019-12-24 | 上海瑞美锦鑫健康管理有限公司 | 一种基于歌词演唱准确度的检测系统及方法 |
| CN110610721B (zh) * | 2019-09-16 | 2022-01-07 | 上海瑞美锦鑫健康管理有限公司 | 一种基于歌词演唱准确度的检测系统及方法 |
| CN111710213A (zh) * | 2020-06-05 | 2020-09-25 | 河南艺树教育科技有限公司 | 一种可量化的音乐教学系统 |
| CN112508397A (zh) * | 2020-12-04 | 2021-03-16 | 成都音悦创想科技有限公司 | 一种游戏化vod评分系统及方法 |
| CN112508397B (zh) * | 2020-12-04 | 2024-04-16 | 成都音悦创想科技有限公司 | 一种游戏化vod评分系统及方法 |
| CN112686020A (zh) * | 2020-12-29 | 2021-04-20 | 科大讯飞股份有限公司 | 作文评分方法、装置、电子设备及存储介质 |
| CN112686020B (zh) * | 2020-12-29 | 2024-06-04 | 科大讯飞股份有限公司 | 作文评分方法、装置、电子设备及存储介质 |
| CN114093386A (zh) * | 2021-11-10 | 2022-02-25 | 厦门大学 | 一种面向教育的多维度歌唱评价方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN102103857B (zh) | 2013-10-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102103857B (zh) | 演唱打分系统 | |
| CN106340286B (zh) | 一种通用的实时乐器演奏评价系统 | |
| CN107767847B (zh) | 一种智能钢琴演奏测评方法及系统 | |
| CN105989842B (zh) | 对比声纹相似度的方法、装置及其在数字娱乐点播系统中的应用 | |
| CN107967827A (zh) | 一种音乐教育练习系统及其方法 | |
| CN107146497A (zh) | 一种钢琴考级评分系统 | |
| CN108140369A (zh) | 乐谱、系统和方法 | |
| CN104183171A (zh) | 一种基于电子乐谱的乐器演奏水平精准评判的系统和方法 | |
| CN109065008A (zh) | 一种音乐演奏曲谱匹配方法、存储介质及智能乐器 | |
| CN101441865A (zh) | 演唱类游戏的评分方法及系统 | |
| CN101383103A (zh) | 口语发音水平自动测试方法 | |
| CN106935226A (zh) | 具有评分功能的钢琴及其进行评分的方法 | |
| CN201017624Y (zh) | 无键位弦乐器音准、视奏辅助练习装置 | |
| CN201611570U (zh) | 音频评测装置 | |
| CN111553260A (zh) | 一种交互式教学方法和系统 | |
| CN104200801A (zh) | 小提琴 | |
| CN108428458A (zh) | 一种声乐学习电子辅助发音系统 | |
| CN100538560C (zh) | 电子节拍校音器及其控制方法 | |
| CN205900074U (zh) | 一种钢琴及钢琴跟弹系统 | |
| CN110910714A (zh) | 一种钢琴学习系统 | |
| CN103198733A (zh) | 用于弦乐器的电子显示指板 | |
| CN108320613A (zh) | 一种交互式音乐教学系统 | |
| CN111554257A (zh) | 一种传统中国民族乐器的音符比对系统及其使用方法 | |
| CN109165836B (zh) | 一种演唱评分中歌词发音的处理及测评方法及系统 | |
| CN107591163B (zh) | 一种发音探测方法及装置、语音范畴学习方法及系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| ASS | Succession or assignment of patent right |
Owner name: SHANGHAI GUOKE ELECTRONIC CO., LTD. Free format text: FORMER OWNER: SHANDA NETWORKING CO., LTD. Effective date: 20140731 |
|
| C41 | Transfer of patent application or patent right or utility model | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20140731 Address after: 201203 Pudong New Area Huaxia Road, Lane No. 958, No. 60, Shanghai Patentee after: Shanghai Guoke Electronic Co., Ltd. Address before: Shanghai city Pudong New Area 201203 GuoShouJing Road No. 356 Patentee before: Shanda computer (Shanghai) Co., Ltd. |
|
| CP03 | Change of name, title or address | ||
| CP03 | Change of name, title or address |
Address after: Room 127, building 3, 356 GuoShouJing Road, China (Shanghai) pilot Free Trade Zone, Pudong New Area, Shanghai, 200120 Patentee after: SHANGHAI GEAK ELECTRONICS Co.,Ltd. Address before: No.60, Lane 958, Huaxia Middle Road, Pudong New Area, Shanghai, 201203 Patentee before: Shanghai Nutshell Electronics Co.,Ltd. |