JP7335316B2 - プログラム及び情報処理装置 - Google Patents
プログラム及び情報処理装置 Download PDFInfo
- Publication number
- JP7335316B2 JP7335316B2 JP2021212842A JP2021212842A JP7335316B2 JP 7335316 B2 JP7335316 B2 JP 7335316B2 JP 2021212842 A JP2021212842 A JP 2021212842A JP 2021212842 A JP2021212842 A JP 2021212842A JP 7335316 B2 JP7335316 B2 JP 7335316B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- singing
- sound source
- unit
- source data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 23
- 238000012545 processing Methods 0.000 claims description 38
- 238000000605 extraction Methods 0.000 claims description 18
- 230000001360 synchronised effect Effects 0.000 claims description 15
- 238000011156 evaluation Methods 0.000 claims description 14
- 238000006243 chemical reaction Methods 0.000 claims description 6
- 239000000203 mixture Substances 0.000 claims description 2
- 238000004891 communication Methods 0.000 description 61
- 238000003860 storage Methods 0.000 description 27
- 230000006870 function Effects 0.000 description 23
- 238000000034 method Methods 0.000 description 19
- 238000013500 data storage Methods 0.000 description 18
- 230000005540 biological transmission Effects 0.000 description 17
- 238000010586 diagram Methods 0.000 description 12
- 238000012986 modification Methods 0.000 description 11
- 230000004048 modification Effects 0.000 description 11
- 230000001755 vocal effect Effects 0.000 description 11
- 239000000284 extract Substances 0.000 description 9
- 238000000926 separation method Methods 0.000 description 9
- 239000011295 pitch Substances 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K15/00—Acoustics not otherwise provided for
- G10K15/04—Sound-producing devices
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
Description
図1から図7を参照しながら、本開示の実施の形態1について説明する。図1は通信システムの全体構成を示す図である。図2は通信システムが備える端末の構成を示すブロック図である。図3は通信システムが備えるサーバの構成を示すブロック図である。図4は通信システムが備えるサーバに記憶された同期歌詞データの一例を示す図である。図5は通信システムにおける処理の一例を示すフローチャートである。図6は通信システムが備えるサーバの変形例における要部の構成を示すブロック図である。図7は通信システムの変形例における処理の一例を示すフローチャートである。
図8及び図9を参照しながら、本開示の実施の形態2について説明する。図8は通信システムが備えるサーバの構成を示すブロック図である。図9は通信システムにおける処理の一例を示すフローチャートである。
110 サーバ通信部
111 サーバ送信部
112 サーバ受信部
120 サーバ記憶部
121 音源データ記憶部
122 歌詞データ記憶部
123 リファレンスデータ記憶部
130 サーバ制御部
131 音源データ取得部
132 歌詞データ取得部
133 歌唱部分特定部
134 リファレンスデータ生成部
135 伴奏パート取得部
136 歌唱音声取得部
137 評価部
141 歌唱音声抽出部
142 テキスト化部
143 照合部
150 歌唱音声分離抽出部
200 端末
210 端末通信部
211 端末送信部
212 端末受信部
220 端末記憶部
230 端末制御部
231 再生処理部
232 表示処理部
233 歌唱者音声取得部
240 入出力部
250 表示部
260 マイク
270 スピーカ
280 カメラ
300 ネットワーク
400 通信システム
Claims (5)
- 情報処理装置のコンピュータに実行されるためのプログラムであって、
楽曲の伴奏パート及びメロディパートが混合された波形データからなる音源データを取得する音源データ取得ステップと、
前記メロディパートの歌詞データを取得する歌詞データ取得ステップと、
前記歌詞データ取得ステップで取得された前記歌詞データに基づいて、前記音源データ取得ステップで取得された前記音源データにおける歌唱部分を特定する歌唱部分特定ステップと、
前記歌唱部分特定ステップで特定された歌唱部分以外の非歌唱部分を前記音源データから除外し、非歌唱部分が除外された前記音源データを用いて、前記メロディパートのリファレンスデータを生成するリファレンスデータ生成ステップと、が前記情報処理装置のコンピュータに実行される。 - 請求項1に記載のプログラムであって、
前記歌詞データは、複数の歌詞フレーズを含み、それぞれの前記歌詞フレーズ毎に前記音源データの再生と同期して表示するため表示開始時間が対応付けられている同期歌詞データであり、
前記歌唱部分特定ステップは、前記同期歌詞データの表示開始時間に基づいて、前記音源データにおける歌唱部分を特定する。 - 請求項1に記載のプログラムであって、
前記歌唱部分特定ステップは、
前記音源データ取得ステップで取得された前記音源データから抽出された人の歌唱音声データを取得する歌唱音声抽出ステップと、
前記歌唱音声抽出ステップで取得された歌唱音声データを音声認識処理によってテキスト化して生成された歌唱テキストデータを取得するテキスト化ステップと、
前記テキスト化ステップで取得された前記歌唱テキストデータと前記歌詞データ取得ステップで取得された前記歌詞データとを照合して前記音源データにおける歌唱部分を特定する照合ステップと、を含む。 - 請求項1から請求項3のいずれか一項に記載のプログラムであって、
歌唱者の歌唱音声データを取得する歌唱音声取得ステップと、
前記歌唱音声取得ステップで取得された歌唱音声データを前記リファレンスデータ生成ステップで生成された前記リファレンスデータと比較して評価する評価ステップと、前記情報処理装置のコンピュータにさらに実行される。 - 情報処理装置であって、
楽曲の伴奏パート及びメロディパートが混合された波形データからなる音源データを取得する音源データ取得部と、
前記メロディパートの歌詞データを取得する歌詞データ取得部と、
前記歌詞データ取得部により取得された前記歌詞データに基づいて、前記音源データ取得部により取得された前記音源データにおける歌唱部分を特定する歌唱部分特定部と、
前記歌唱部分特定部により特定された歌唱部分以外の非歌唱部分を前記音源データから除外し、非歌唱部分が除外された前記音源データを用いて、前記メロディパートのリファレンスデータを生成するリファレンスデータ生成部と、を含む。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021212842A JP7335316B2 (ja) | 2021-12-27 | 2021-12-27 | プログラム及び情報処理装置 |
PCT/JP2022/045902 WO2023127486A1 (ja) | 2021-12-27 | 2022-12-13 | プログラム及び情報処理装置 |
JP2023132975A JP2023144076A (ja) | 2021-12-27 | 2023-08-17 | プログラム、情報処理方法及び情報処理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021212842A JP7335316B2 (ja) | 2021-12-27 | 2021-12-27 | プログラム及び情報処理装置 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023132975A Division JP2023144076A (ja) | 2021-12-27 | 2023-08-17 | プログラム、情報処理方法及び情報処理装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023096830A JP2023096830A (ja) | 2023-07-07 |
JP7335316B2 true JP7335316B2 (ja) | 2023-08-29 |
Family
ID=86998772
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021212842A Active JP7335316B2 (ja) | 2021-12-27 | 2021-12-27 | プログラム及び情報処理装置 |
JP2023132975A Pending JP2023144076A (ja) | 2021-12-27 | 2023-08-17 | プログラム、情報処理方法及び情報処理装置 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023132975A Pending JP2023144076A (ja) | 2021-12-27 | 2023-08-17 | プログラム、情報処理方法及び情報処理装置 |
Country Status (2)
Country | Link |
---|---|
JP (2) | JP7335316B2 (ja) |
WO (1) | WO2023127486A1 (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015225302A (ja) | 2014-05-29 | 2015-12-14 | 株式会社第一興商 | カラオケ装置 |
JP2017116899A (ja) | 2015-12-27 | 2017-06-29 | 株式会社コシダカホールディングス | 音声入力によるカラオケ生成 |
WO2020045398A1 (ja) | 2018-08-28 | 2020-03-05 | ヤマハ株式会社 | 楽曲再生システム、楽曲再生システムの制御方法およびプログラム |
WO2022070639A1 (ja) | 2020-09-29 | 2022-04-07 | ソニーグループ株式会社 | 情報処理装置、情報処理方法およびプログラム |
-
2021
- 2021-12-27 JP JP2021212842A patent/JP7335316B2/ja active Active
-
2022
- 2022-12-13 WO PCT/JP2022/045902 patent/WO2023127486A1/ja unknown
-
2023
- 2023-08-17 JP JP2023132975A patent/JP2023144076A/ja active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015225302A (ja) | 2014-05-29 | 2015-12-14 | 株式会社第一興商 | カラオケ装置 |
JP2017116899A (ja) | 2015-12-27 | 2017-06-29 | 株式会社コシダカホールディングス | 音声入力によるカラオケ生成 |
WO2020045398A1 (ja) | 2018-08-28 | 2020-03-05 | ヤマハ株式会社 | 楽曲再生システム、楽曲再生システムの制御方法およびプログラム |
WO2022070639A1 (ja) | 2020-09-29 | 2022-04-07 | ソニーグループ株式会社 | 情報処理装置、情報処理方法およびプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP2023096830A (ja) | 2023-07-07 |
JP2023144076A (ja) | 2023-10-06 |
WO2023127486A1 (ja) | 2023-07-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111402842B (zh) | 用于生成音频的方法、装置、设备和介质 | |
CN110675886B (zh) | 音频信号处理方法、装置、电子设备及存储介质 | |
JP4655047B2 (ja) | 音声評価装置及びカラオケ装置 | |
CN111798821B (zh) | 声音转换方法、装置、可读存储介质及电子设备 | |
CN111899720A (zh) | 用于生成音频的方法、装置、设备和介质 | |
JP2006195385A (ja) | 音楽再生装置および音楽再生プログラム | |
JP6615952B1 (ja) | テキスト表示用同期情報生成装置および方法 | |
KR20200045852A (ko) | 음성 합성 또는 영상 편집을 통한 멀티미디어 컨텐츠 내 광고 서비스 플랫폼 및 음성 합성 서비스와 영상 편집 서비스를 제공하는 방법 | |
KR20200067382A (ko) | 사운드를 출력하기 위한 전자 장치 및 그의 동작 방법 | |
CN113836344A (zh) | 个性化歌曲文件生成方法和装置、音乐演唱设备 | |
CN112035699A (zh) | 音乐合成方法、装置、设备和计算机可读介质 | |
WO2024146338A1 (zh) | 视频生成方法、装置、电子设备及存储介质 | |
CN113923390A (zh) | 视频录制方法、装置、设备及存储介质 | |
JP7335316B2 (ja) | プログラム及び情報処理装置 | |
JP5034599B2 (ja) | 楽曲紹介文生成装置、ナレーション付加装置およびプログラム | |
CN113823300B (zh) | 语音处理方法及装置、存储介质、电子设备 | |
CN114783408A (zh) | 一种音频数据处理方法、装置、计算机设备以及介质 | |
JP7117228B2 (ja) | カラオケシステム、カラオケ装置 | |
US20240194086A1 (en) | Devices and methods for facilitating learning by merging text with music | |
US20240112689A1 (en) | Synthesizing audio for synchronous communication | |
CN114514576A (zh) | 数据处理方法、装置和存储介质 | |
JP7423164B2 (ja) | カラオケ装置 | |
JP2015025839A (ja) | マイク選択装置、マイク選択方法及びマイク選択プログラム | |
WO2023010949A1 (zh) | 一种音频数据的处理方法及装置 | |
US11398212B2 (en) | Intelligent accompaniment generating system and method of assisting a user to play an instrument in a system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230227 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20230227 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230314 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230510 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230725 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230817 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7335316 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |