JP2020076844A5 - 音響処理方法、音響処理システムおよびプログラム - Google Patents
音響処理方法、音響処理システムおよびプログラム Download PDFInfo
- Publication number
- JP2020076844A5 JP2020076844A5 JP2018209289A JP2018209289A JP2020076844A5 JP 2020076844 A5 JP2020076844 A5 JP 2020076844A5 JP 2018209289 A JP2018209289 A JP 2018209289A JP 2018209289 A JP2018209289 A JP 2018209289A JP 2020076844 A5 JP2020076844 A5 JP 2020076844A5
- Authority
- JP
- Japan
- Prior art keywords
- condition
- pronunciation
- data representing
- sound
- instruction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims 9
- 230000015572 biosynthetic process Effects 0.000 claims 4
- 230000005236 sound signal Effects 0.000 claims 4
- 238000003786 synthesis reaction Methods 0.000 claims 4
- 230000002194 synthesizing Effects 0.000 claims 4
- 238000010801 machine learning Methods 0.000 claims 1
Claims (9)
- 発音条件を表す条件データから当該発音条件で発音された音響の特徴を表す特徴データを生成する事前学習済の合成モデルの追加学習を、音響信号から特定される発音条件を表す第１条件データと当該音響信号が表す音響の特徴を表す第１特徴データとを利用して実行し、
前記音響信号に関する発音条件の変更の指示を受付け、
前記変更後の発音条件を表す第２条件データを前記追加学習後の合成モデルに入力することで第２特徴データを生成する
コンピュータにより実現される音響処理方法。 - 前記事前学習済の合成モデルは、前記音響信号が表す音響の発音源と同種の発音源の音響を表す信号を利用した機械学習により生成されたモデルである
請求項１の音響処理方法。 - 前記第２特徴データの生成においては、前記変更後の発音条件を表す前記第２条件データと、音響の特徴に関する発音源間の関係を表す空間における発音源の位置を表す発音源データとを、前記追加学習後の合成モデルに入力する
請求項１または請求項２の音響処理方法。 - 前記発音条件は、音高を含み、
前記発音条件の変更の指示は、前記音高の変更の指示である
請求項１から請求項３の何れかの音響処理方法。 - 前記発音条件は、発音期間を含み、
前記発音条件の変更の指示は、前記発音期間の変更の指示である
請求項１から請求項４の何れかの音響処理方法。 - 前記発音条件は、音韻を含み、
前記発音条件の変更の指示は、前記音韻の変更の指示である
請求項１から請求項５の何れかの音響処理方法。 - 前記音響処理方法は、さらに、
前記生成した第２特徴データに応じて音響信号を生成する
請求項１から請求項６の何れかの音響処理方法。 - 発音条件を表す条件データから当該発音条件で発音された音響の特徴を表す特徴データを生成する事前学習済の合成モデルの追加学習を、音響信号から特定される発音条件を表す第１条件データと当該音響信号が表す音響の特徴を表す第１特徴データとを利用して実行する学習処理部と、
前記音響信号に関する発音条件の変更の指示を受付ける指示受付部と、
前記変更後の発音条件を表す第２条件データを前記追加学習後の合成モデルに入力することで第２特徴データを生成する合成処理部と
を具備する音響処理システム。 - 発音条件を表す条件データから当該発音条件で発音された音響の特徴を表す特徴データを生成する事前学習済の合成モデルの追加学習を、音響信号から特定される発音条件を表す第１条件データと当該音響信号が表す音響の特徴を表す第１特徴データとを利用して実行する学習処理部、および、
前記音響信号に関する発音条件の変更の指示を受付ける指示受付部と、
前記変更後の発音条件を表す第２条件データを前記追加学習後の合成モデルに入力することで第２特徴データを生成する合成処理部
としてコンピュータを機能させるプログラム。
Priority Applications (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018209289A JP6737320B2 (ja) | 2018-11-06 | 2018-11-06 | 音響処理方法、音響処理システムおよびプログラム |
| CN201980072998.7A CN113016028A (zh) | 2018-11-06 | 2019-11-06 | 音响处理方法及音响处理系统 |
| PCT/JP2019/043511 WO2020095951A1 (ja) | 2018-11-06 | 2019-11-06 | 音響処理方法および音響処理システム |
| EP19882740.4A EP3879521A4 (en) | 2018-11-06 | 2019-11-06 | ACOUSTIC TREATMENT METHOD AND ACOUSTIC TREATMENT SYSTEM |
| US17/306,123 US11842720B2 (en) | 2018-11-06 | 2021-05-03 | Audio processing method and audio processing system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018209289A JP6737320B2 (ja) | 2018-11-06 | 2018-11-06 | 音響処理方法、音響処理システムおよびプログラム |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2020076844A JP2020076844A (ja) | 2020-05-21 |
| JP2020076844A5 true JP2020076844A5 (ja) | 2020-07-02 |
| JP6737320B2 JP6737320B2 (ja) | 2020-08-05 |
Family
ID=70611505
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018209289A Active JP6737320B2 (ja) | 2018-11-06 | 2018-11-06 | 音響処理方法、音響処理システムおよびプログラム |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US11842720B2 (ja) |
| EP (1) | EP3879521A4 (ja) |
| JP (1) | JP6737320B2 (ja) |
| CN (1) | CN113016028A (ja) |
| WO (1) | WO2020095951A1 (ja) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6747489B2 (ja) | 2018-11-06 | 2020-08-26 | ヤマハ株式会社 | 情報処理方法、情報処理システムおよびプログラム |
| EP4163912A1 (en) * | 2020-06-09 | 2023-04-12 | Yamaha Corporation | Acoustic processing method, acoustic processing system, and program |
Family Cites Families (31)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0895588A (ja) * | 1994-09-27 | 1996-04-12 | Victor Co Of Japan Ltd | 音声合成装置 |
| US6304846B1 (en) | 1997-10-22 | 2001-10-16 | Texas Instruments Incorporated | Singing voice synthesis |
| CN1156819C (zh) * | 2001-04-06 | 2004-07-07 | 国际商业机器公司 | 由文本生成个性化语音的方法 |
| JP4839891B2 (ja) | 2006-03-04 | 2011-12-21 | ヤマハ株式会社 | 歌唱合成装置および歌唱合成プログラム |
| US8751239B2 (en) * | 2007-10-04 | 2014-06-10 | Core Wireless Licensing, S.a.r.l. | Method, apparatus and computer program product for providing text independent voice conversion |
| JP5293460B2 (ja) | 2009-07-02 | 2013-09-18 | ヤマハ株式会社 | 歌唱合成用データベース生成装置、およびピッチカーブ生成装置 |
| JP5471858B2 (ja) | 2009-07-02 | 2014-04-16 | ヤマハ株式会社 | 歌唱合成用データベース生成装置、およびピッチカーブ生成装置 |
| JP5510852B2 (ja) | 2010-07-20 | 2014-06-04 | 独立行政法人産業技術総合研究所 | 声色変化反映歌声合成システム及び声色変化反映歌声合成方法 |
| GB2501067B (en) | 2012-03-30 | 2014-12-03 | Toshiba Kk | A text to speech system |
| US9922641B1 (en) * | 2012-10-01 | 2018-03-20 | Google Llc | Cross-lingual speaker adaptation for multi-lingual speech synthesis |
| JP5949607B2 (ja) * | 2013-03-15 | 2016-07-13 | ヤマハ株式会社 | 音声合成装置 |
| JP6261924B2 (ja) | 2013-09-17 | 2018-01-17 | 株式会社東芝 | 韻律編集装置、方法およびプログラム |
| US8751236B1 (en) | 2013-10-23 | 2014-06-10 | Google Inc. | Devices and methods for speech unit reduction in text-to-speech synthesis systems |
| CN104766603B (zh) * | 2014-01-06 | 2019-03-19 | 科大讯飞股份有限公司 | 构建个性化歌唱风格频谱合成模型的方法及装置 |
| CN105023570B (zh) * | 2014-04-30 | 2018-11-27 | 科大讯飞股份有限公司 | 一种实现声音转换的方法及系统 |
| JP6392012B2 (ja) * | 2014-07-14 | 2018-09-19 | 株式会社東芝 | 音声合成辞書作成装置、音声合成装置、音声合成辞書作成方法及び音声合成辞書作成プログラム |
| US9542927B2 (en) | 2014-11-13 | 2017-01-10 | Google Inc. | Method and system for building text-to-speech voice from diverse recordings |
| JP6000326B2 (ja) | 2014-12-15 | 2016-09-28 | 日本電信電話株式会社 | 音声合成モデル学習装置、音声合成装置、音声合成モデル学習方法、音声合成方法、およびプログラム |
| JP6622505B2 (ja) | 2015-08-04 | 2019-12-18 | 日本電信電話株式会社 | 音響モデル学習装置、音声合成装置、音響モデル学習方法、音声合成方法、プログラム |
| CN107924678B (zh) * | 2015-09-16 | 2021-12-17 | 株式会社东芝 | 语音合成装置、语音合成方法及存储介质 |
| CN105206258B (zh) * | 2015-10-19 | 2018-05-04 | 百度在线网络技术（北京）有限公司 | 声学模型的生成方法和装置及语音合成方法和装置 |
| JP6004358B1 (ja) * | 2015-11-25 | 2016-10-05 | 株式会社テクノスピーチ | 音声合成装置および音声合成方法 |
| JP6390690B2 (ja) | 2016-12-05 | 2018-09-19 | ヤマハ株式会社 | 音声合成方法および音声合成装置 |
| JP2017107228A (ja) * | 2017-02-20 | 2017-06-15 | 株式会社テクノスピーチ | 歌声合成装置および歌声合成方法 |
| JP6846237B2 (ja) | 2017-03-06 | 2021-03-24 | 日本放送協会 | 音声合成装置及びプログラム |
| JP6729539B2 (ja) * | 2017-11-29 | 2020-07-22 | ヤマハ株式会社 | 音声合成方法、音声合成システムおよびプログラム |
| WO2019139431A1 (ko) | 2018-01-11 | 2019-07-18 | 네오사피엔스 주식회사 | 다중 언어 텍스트-음성 합성 모델을 이용한 음성 번역 방법 및 시스템 |
| JP7142333B2 (ja) | 2018-01-11 | 2022-09-27 | ネオサピエンス株式会社 | 多言語テキスト音声合成方法 |
| JP6747489B2 (ja) | 2018-11-06 | 2020-08-26 | ヤマハ株式会社 | 情報処理方法、情報処理システムおよびプログラム |
| US11302329B1 (en) * | 2020-06-29 | 2022-04-12 | Amazon Technologies, Inc. | Acoustic event detection |
| US11551663B1 (en) * | 2020-12-10 | 2023-01-10 | Amazon Technologies, Inc. | Dynamic system response configuration |
-
2018
- 2018-11-06 JP JP2018209289A patent/JP6737320B2/ja active Active
-
2019
- 2019-11-06 CN CN201980072998.7A patent/CN113016028A/zh active Pending
- 2019-11-06 WO PCT/JP2019/043511 patent/WO2020095951A1/ja unknown
- 2019-11-06 EP EP19882740.4A patent/EP3879521A4/en not_active Withdrawn
-
2021
- 2021-05-03 US US17/306,123 patent/US11842720B2/en active Active
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2020076843A5 (ja) | 情報処理方法、情報処理システムおよびプログラム | |
| JP6485711B2 (ja) | 音場再現装置および方法、並びにプログラム | |
| MX2021014721A (es) | Sistemas y metodos para aprendizaje de maquina de atributos de voz. | |
| JP2019101094A5 (ja) | 音声合成方法、音声合成システムおよびプログラム | |
| Parekh et al. | Motion informed audio source separation | |
| US20210055796A1 (en) | Tactile audio enhancement | |
| JP2012252240A5 (ja) | ||
| JP2020076844A5 (ja) | 音響処理方法、音響処理システムおよびプログラム | |
| JP2007140376A5 (ja) | ||
| KR102612572B1 (ko) | 인공 지능을 이용한 오디오 데이터 생성 | |
| JP2019113636A (ja) | 音声認識システム | |
| JP2020166299A5 (ja) | 音声合成方法、音声合成システムおよびプログラム | |
| JPWO2021240837A5 (ja) | ||
| JP2014142465A (ja) | 音響モデル生成装置及び方法、並びに音声認識装置及び方法 | |
| JP2022146690A (ja) | 情報処理装置、システム、方法、およびプログラム | |
| JP2007033804A (ja) | 音源分離装置，音源分離プログラム及び音源分離方法 | |
| JP2018146928A5 (ja) | ||
| Rink | The interpretive shaping of music performance research | |
| JP2020184092A5 (ja) | 情報処理方法、情報処理システムおよびプログラム | |
| JP6805060B2 (ja) | 共鳴音制御装置及び共鳴音の定位制御方法 | |
| Kirby | Defining and evaluating the performance of electronic music | |
| JP6670259B2 (ja) | 音響再生装置 | |
| JP2020013170A5 (ja) | ||
| Keenan | A theatre wind machine as interactive sounding object | |
| Collins | Introduction: Improvisation |