JP5628749B2 - 通訳端末及び通訳端末間の相互通信を用いた通訳方法 - Google Patents
通訳端末及び通訳端末間の相互通信を用いた通訳方法 Download PDFInfo
- Publication number
- JP5628749B2 JP5628749B2 JP2011125040A JP2011125040A JP5628749B2 JP 5628749 B2 JP5628749 B2 JP 5628749B2 JP 2011125040 A JP2011125040 A JP 2011125040A JP 2011125040 A JP2011125040 A JP 2011125040A JP 5628749 B2 JP5628749 B2 JP 5628749B2
- Authority
- JP
- Japan
- Prior art keywords
- terminal
- interpreting
- party
- speech
- interpretation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 41
- 238000004891 communication Methods 0.000 title claims description 31
- 238000010295 mobile communication Methods 0.000 claims description 4
- 230000004044 response Effects 0.000 claims description 3
- 230000002194 synthesizing effect Effects 0.000 claims description 2
- 230000008569 process Effects 0.000 description 23
- 238000005516 engineering process Methods 0.000 description 5
- 230000015572 biosynthetic process Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000003786 synthesis reaction Methods 0.000 description 4
- 230000001360 synchronised effect Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 208000003028 Stuttering Diseases 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L13/00—Speech synthesis; Text to speech systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/40—Processing or translation of natural language
- G06F40/58—Use of machine translation, e.g. for multi-lingual retrieval, for server-side translation for client devices or for real-time translation
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Acoustics & Sound (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Artificial Intelligence (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Machine Translation (AREA)
Description
Claims (11)
- 通訳端末であって、
相手の通訳端末と通信を行うネットワークインターフェースと、
当事者の発話された音声を認識する音声認識器と、
前記音声認識器を通じて認識された音声を設定された言語に翻訳する翻訳モジュールと、
前記ネットワークインターフェースを通じて相手と通訳する言語を設定し、前記翻訳モジュールにより翻訳された文章を相手の通訳端末に提供する制御部と、
を含み、
前記制御部は、
前記ネットワークインターフェースを通じて前記相手の通訳端末と通信して両者間で通訳の範囲を限定する情報を一致させ、
前記通訳の範囲を限定する情報は、
前記通訳が行われる場所及び状況を規定する情報であり、
前記音声認識器は、前記当事者の雑音が混じっている音声信号と前記相手の通訳端末から伝達された雑音信号とを比較し、前記音声信号のうち前記雑音信号と一致する信号を雑音として検出し、前記音声信号から前記検出された雑音が分離された音声信号に対して音声認識を行うことを特徴とする通訳端末。 - 前記ネットワークインターフェースは、
無線LAN(wireless LAN)、移動通信網(mobile communication network)、又は近距離通信(Near Field Communications(NFC))を通じて相手通訳端末と通信を行うことを特徴とする請求項1に記載の通訳端末。 - 前記無線LANは、
Wi-Fi(wireless-fidelity)であることを特徴とする請求項2に記載の通訳端末。 - 前記ネットワークインターフェースは、
前記相手との通訳が要請される時、前記相手通訳端末と通信チャネルを設定して前記チャネルの設定に必要な情報を相手通訳端末と交換することを特徴とする請求項1に記載の通訳端末。 - 前記翻訳モジュールを通じて翻訳された文章を音声として合成して出力させる音声合成部を更に含むことを特徴とする請求項1に記載の通訳端末。
- 前記音声合成部から出力される合成音声は、以前に相手の通訳端末から伝達を受けた雑音信号と当事者の音声信号間のSNR(Signal-to-noise ratio)に比例する強度となるように設定されることを特徴とする請求項5に記載の通訳端末。
- 前記音声認識器は、
対話モデルを用いて前記翻訳された文章を分析し、分析結果から次に発生する対話を予測し、前記予測された対話情報に基づいて次回に発話される音声の認識に活用することを特徴とする請求項1に記載の通訳端末。 - 当事者と相手の通訳端末間の対話を通訳する方法であって、
通訳要請に応じて当事者及び相手の通訳端末間通信チャネルを設定する段階と、
前記通信チャネルを通じて前記当事者の通訳端末で使用する当事者言語と前記相手の通訳端末で使用する相手言語に関する情報を交換してそれぞれの前記相手及び前記当事者の通訳端末に前記当事者言語及び前記相手言語を設定する段階と、
前記当事者の通訳端末で発話した音声を認識する段階と、
前記当事者の通訳端末で認識された音声を前記相手言語に翻訳する段階と、
前記相手言語に翻訳された文章を前記相手端末に伝達する段階
とを含み、
前記相手の通訳端末と通信して両者間で通訳の範囲を限定する情報を一致させ、
前記通訳の範囲を限定する情報は、前記通訳が行われる場所及び状況を規定する情報であり、
前記音声を認識する段階は、
前記音声認識のために、前記当事者及び前記相手の通訳端末間の同期化を行う段階と、 前記当事者の音声信号から雑音を検出する段階と、
前記音声信号から雑音が分離された音声信号に対して音声認識を行う段階と、を含み、
前記雑音を検出する段階は、
前記当事者の雑音が混じっている音声信号と前記相手の通訳端末から伝達された雑音信号とを比較する段階と、
前記音声信号のうち、前記雑音信号と一致する信号を雑音として検出する段階と、を含むことを特徴とする記載の通訳方法。 - 前記通信チャネルは、
無線LAN(wireless LAN)、移動通信網(mobile communication network)又は近距離通信(Near Field Communications(NFC))を通じて設定されることを特徴とする請求項8に記載の通訳方法。 - 前記近距離通信は、
Wi−Fi(wireless−fidelity)であることを特徴とする請求項9に記載の通訳方法。 - 前記翻訳された文章を音声として合成して出力する段階を更に含むことを特徴とする請求項8に記載の通訳方法。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20100052550 | 2010-06-03 | ||
KR10-2010-0052550 | 2010-06-03 | ||
KR1020100119654A KR101412657B1 (ko) | 2010-06-03 | 2010-11-29 | 두 대 이상의 통역 단말기간 상호 통신을 이용한 통역 방법 및 장치 |
KR10-2010-0119654 | 2010-11-29 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011253543A JP2011253543A (ja) | 2011-12-15 |
JP5628749B2 true JP5628749B2 (ja) | 2014-11-19 |
Family
ID=45065162
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011125040A Active JP5628749B2 (ja) | 2010-06-03 | 2011-06-03 | 通訳端末及び通訳端末間の相互通信を用いた通訳方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US8798985B2 (ja) |
JP (1) | JP5628749B2 (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013186228A (ja) * | 2012-03-07 | 2013-09-19 | Seiko Epson Corp | 音声認識処理装置及び音声認識処理方法 |
WO2014141639A1 (ja) | 2013-03-13 | 2014-09-18 | Necカシオモバイルコミュニケーションズ株式会社 | 端末装置、翻訳システム、通信制御方法、及びプログラム |
KR101834546B1 (ko) * | 2013-08-28 | 2018-04-13 | 한국전자통신연구원 | 핸즈프리 자동 통역 서비스를 위한 단말 장치 및 핸즈프리 장치와, 핸즈프리 자동 통역 서비스 방법 |
US10489515B2 (en) | 2015-05-08 | 2019-11-26 | Electronics And Telecommunications Research Institute | Method and apparatus for providing automatic speech translation service in face-to-face situation |
KR101827773B1 (ko) * | 2016-08-02 | 2018-02-09 | 주식회사 하이퍼커넥트 | 통역 장치 및 방법 |
KR102450823B1 (ko) | 2017-10-12 | 2022-10-05 | 한국전자통신연구원 | 사용자 맞춤형 통번역 장치 및 방법 |
US20190121860A1 (en) * | 2017-10-20 | 2019-04-25 | AK Innovations, LLC, a Texas corporation | Conference And Call Center Speech To Text Machine Translation Engine |
CN110111771A (zh) * | 2019-05-15 | 2019-08-09 | 东华大学 | 一种基于个域网的同声翻译纽扣 |
US20220215857A1 (en) * | 2021-01-05 | 2022-07-07 | Electronics And Telecommunications Research Institute | System, user terminal, and method for providing automatic interpretation service based on speaker separation |
Family Cites Families (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0769709B2 (ja) | 1993-01-08 | 1995-07-31 | 株式会社エイ・ティ・アール自動翻訳電話研究所 | 対話音声認識装置 |
JP2921472B2 (ja) | 1996-03-15 | 1999-07-19 | 日本電気株式会社 | 音声および雑音の除去装置、音声認識装置 |
JP2001127846A (ja) | 1999-10-29 | 2001-05-11 | Nec Telecom Syst Ltd | 無線電話機 |
JP2001251429A (ja) | 2000-03-03 | 2001-09-14 | Net Teimento:Kk | 携帯電話を使用した音声翻訳システムおよび携帯電話 |
JP2001306564A (ja) | 2000-04-21 | 2001-11-02 | Nec Corp | 自動翻訳機能付き携帯端末 |
US6898566B1 (en) * | 2000-08-16 | 2005-05-24 | Mindspeed Technologies, Inc. | Using signal to noise ratio of a speech signal to adjust thresholds for extracting speech parameters for coding the speech signal |
US7451085B2 (en) * | 2000-10-13 | 2008-11-11 | At&T Intellectual Property Ii, L.P. | System and method for providing a compensated speech recognition model for speech recognition |
JP4135307B2 (ja) * | 2000-10-17 | 2008-08-20 | 株式会社日立製作所 | 音声通訳サービス方法および音声通訳サーバ |
JP3960834B2 (ja) | 2002-03-19 | 2007-08-15 | 松下電器産業株式会社 | 音声強調装置及び音声強調方法 |
JP2004015478A (ja) * | 2002-06-07 | 2004-01-15 | Nec Corp | 音声通信端末装置 |
US20040111272A1 (en) * | 2002-12-10 | 2004-06-10 | International Business Machines Corporation | Multimodal speech-to-speech language translation and display |
GB2398913B (en) * | 2003-02-27 | 2005-08-17 | Motorola Inc | Noise estimation in speech recognition |
JP2005167500A (ja) * | 2003-12-01 | 2005-06-23 | Sharp Corp | マルチメディア翻訳機、端末間翻訳システム、マルチメディア翻訳機の制御方法、制御プログラム、および該プログラムを記録した記録媒体 |
JP2005318346A (ja) | 2004-04-30 | 2005-11-10 | Matsushita Electric Ind Co Ltd | 携帯端末装置 |
KR20060044143A (ko) | 2004-11-11 | 2006-05-16 | 주식회사 팬택 | 자동 통역을 위한 이동통신 단말기 및 방법 |
US7643985B2 (en) * | 2005-06-27 | 2010-01-05 | Microsoft Corporation | Context-sensitive communication and translation methods for enhanced interactions and understanding among speakers of different languages |
US7552053B2 (en) * | 2005-08-22 | 2009-06-23 | International Business Machines Corporation | Techniques for aiding speech-to-speech translation |
JP2007207061A (ja) | 2006-02-03 | 2007-08-16 | Brother Ind Ltd | 翻訳装置 |
US7752031B2 (en) * | 2006-03-23 | 2010-07-06 | International Business Machines Corporation | Cadence management of translated multi-speaker conversations using pause marker relationship models |
JP2008021058A (ja) * | 2006-07-12 | 2008-01-31 | Nec Corp | 翻訳機能付き携帯電話装置、音声データ翻訳方法、音声データ翻訳プログラムおよびプログラム記録媒体 |
US20100062713A1 (en) * | 2006-11-13 | 2010-03-11 | Peter John Blamey | Headset distributed processing |
US7742746B2 (en) * | 2007-04-30 | 2010-06-22 | Qualcomm Incorporated | Automatic volume and dynamic range adjustment for mobile audio devices |
US7983428B2 (en) * | 2007-05-09 | 2011-07-19 | Motorola Mobility, Inc. | Noise reduction on wireless headset input via dual channel calibration within mobile phone |
US8478578B2 (en) * | 2008-01-09 | 2013-07-02 | Fluential, Llc | Mobile speech-to-speech interpretation system |
EP2151821B1 (en) * | 2008-08-07 | 2011-12-14 | Nuance Communications, Inc. | Noise-reduction processing of speech signals |
GB2466668A (en) * | 2009-01-06 | 2010-07-07 | Skype Ltd | Speech filtering |
US8868430B2 (en) * | 2009-01-16 | 2014-10-21 | Sony Corporation | Methods, devices, and computer program products for providing real-time language translation capabilities between communication terminals |
KR101589433B1 (ko) * | 2009-03-11 | 2016-01-28 | 삼성전자주식회사 | 동시 통역 시스템 |
JP2010245749A (ja) * | 2009-04-03 | 2010-10-28 | Panasonic Corp | ノイズキャンセル部とこれを用いた高周波受信部 |
-
2011
- 2011-06-02 US US13/151,648 patent/US8798985B2/en active Active
- 2011-06-03 JP JP2011125040A patent/JP5628749B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
US8798985B2 (en) | 2014-08-05 |
JP2011253543A (ja) | 2011-12-15 |
US20110301936A1 (en) | 2011-12-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5628749B2 (ja) | 通訳端末及び通訳端末間の相互通信を用いた通訳方法 | |
US9507772B2 (en) | Instant translation system | |
KR102545764B1 (ko) | 음성 번역을 위한 장치 및 방법 | |
US9280539B2 (en) | System and method for translating speech, and non-transitory computer readable medium thereof | |
US9864745B2 (en) | Universal language translator | |
US9484017B2 (en) | Speech translation apparatus, speech translation method, and non-transitory computer readable medium thereof | |
KR101834546B1 (ko) | 핸즈프리 자동 통역 서비스를 위한 단말 장치 및 핸즈프리 장치와, 핸즈프리 자동 통역 서비스 방법 | |
US8527258B2 (en) | Simultaneous interpretation system | |
WO2014010450A1 (ja) | 音声処理システム及び端末装置 | |
WO2016165590A1 (zh) | 语音翻译方法及装置 | |
KR101412657B1 (ko) | 두 대 이상의 통역 단말기간 상호 통신을 이용한 통역 방법 및 장치 | |
KR20180127136A (ko) | 양면으로 표시되는 동기 번역 설비, 방법 장치 및 전자설비 | |
CN109543021B (zh) | 一种面向智能机器人的故事数据处理方法及系统 | |
KR101983310B1 (ko) | 다중 화자용 통번역기 | |
JP6514475B2 (ja) | 対話装置および対話方法 | |
JP6832503B2 (ja) | 情報提示方法、情報提示プログラム及び情報提示システム | |
US20170221481A1 (en) | Data structure, interactive voice response device, and electronic device | |
WO2018020828A1 (ja) | 翻訳装置および翻訳システム | |
JP5163682B2 (ja) | 通訳通話システム | |
KR20140049922A (ko) | 사용자 정보를 이용한 다국어 자동통역기의 언어인식 장치 | |
JP2007286376A (ja) | 音声案内システム | |
JP2011150657A (ja) | 翻訳音声再生装置およびその再生方法 | |
KR20110066622A (ko) | 음성인식 기반 국제회의 통역 장치 및 방법 | |
JPH08129476A (ja) | 音声データ入力装置 | |
KR20120019011A (ko) | 사용자 정보 조합을 이용한 상호작용 서비스 제공 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130104 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130322 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140217 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140902 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141002 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5628749 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |