TWI833328B - 實境口語互動評測系統 - Google Patents

實境口語互動評測系統 Download PDF

Info

Publication number
TWI833328B
TWI833328B TW111130762A TW111130762A TWI833328B TW I833328 B TWI833328 B TW I833328B TW 111130762 A TW111130762 A TW 111130762A TW 111130762 A TW111130762 A TW 111130762A TW I833328 B TWI833328 B TW I833328B
Authority
TW
Taiwan
Prior art keywords
speech
voice
evaluation
conversion
module
Prior art date
Application number
TW111130762A
Other languages
English (en)
Other versions
TW202410028A (zh
Inventor
廖本昌
Original Assignee
乂迪生科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 乂迪生科技股份有限公司 filed Critical 乂迪生科技股份有限公司
Priority to TW111130762A priority Critical patent/TWI833328B/zh
Application granted granted Critical
Publication of TWI833328B publication Critical patent/TWI833328B/zh
Publication of TW202410028A publication Critical patent/TW202410028A/zh

Links

Landscapes

  • Machine Translation (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

本發明係關於一種實境口語互動評測系統，用以接收一教學平台之真人互動對話後所產生之預定語音樣本，特點在於該實境口語測系統包括由一語音資料庫、第一轉換參數、第二轉換參數、第三轉換參數、一語音標簽單元及一評測比對模組協同運作，其中語音標簽單元係連結第二、第三轉換參數，用以判斷辨識後所產出之單字或片語，並將各該單字建立所對應之語音標籤；其中評測比對模組連結該語音資料庫及該語音標籤單元，所述評測比對模組至少包括預定之比對樣本及評比指標，供讀取該語音標籤單元之結果，判斷該等單字或語音標籤符合評比指標之程度，進而評測口語程度。

Description

實境口語互動評測系統
本發明係涉及一種口語評測系統領域，尤指一種於真人對話實境中評測其口語能力之系統揭示者。
按，隨著時代進步，將科技輔助運用於教學產業已是相當常見，企業能夠透過科技將學員的學習成果數據化，達到追蹤、改善或調整教學內容等多方用途，可為相當便利；就語言學習產業而言，口語檢測及程度的數據化為該學習項目最具參考性的一環，習知亦有不同的評測系統可進行口語檢測，如中華民國專利公開號TW200900969「具正音功能之漢字發音學習裝置及其方法」提供一種具正音功能之漢字發音學習裝置，其至少包含一發音模組、一語音接收模組、一語音分析模組及一處理模組。其中語音接收模組係接收一學習者之跟讀發音，由語音分析模組分析跟讀發音與正確發音，以估算出一相似值，或如中華民國專利號M524976「語言(口譯)學習系統」，藉顯示單元之跟讀鍵及口譯鍵，而可反覆切換第一種語言聲音題目及第二種語言之聲音解答，且顯示介面還會同時呈現第一種語言之學習題目之文字及與其對應之第二種語言之文字解答。
習知系統固然能讓學員利用跟讀一預設聲音題目方式後，評斷得知其發音正確性等數據，惟，由於該預設聲音題目之評測方式，係使學員之口語評測範圍及廣度大大受限，亦有可能僅因熟讀該聲音題目而獲 得較佳的評測數據結果，使得評測結果參考性大打折扣，實有必要進一步改良。
緣此，本發明之主要目的係為了解決習知評測系統之評測參考性不佳、評測範圍受限之缺點，而提供一種實境口語互動評測系統，連結一教學平台，藉以接收該教學平台之真人互動對話後所產生之預定語音樣本，所述實境口語互動評測系統包括：一語音資料庫，儲存包括預定之轉換辨識模組、一教材模組及由真人互動隨機對話所產生之隨機語音樣本及跟讀語音樣本；一第一轉換參數，連結該語音資料庫，至少用以判斷該語音資料庫之隨機語音樣本，當語音資料庫接收為隨機語音樣本時，則透過該轉換辨識模組執行一分類機制，藉由該轉換辨識模組將該隨機語音樣本辨識轉換出多段語音及其組合；一第二轉換參數，連結該語音資料庫，至少用以判斷語音資料庫之跟讀語音樣本，當語音資料庫接收為跟讀語音樣本時，則透過該轉換辨識模組執行一第一構詞轉換機制，並比對該教材模組內所設教材內文，藉由該轉換辨識模組將跟讀語音樣本至少辨識轉換出獨立的多個單字或片語；一第三轉換參數，連結該語音資料庫，用以判斷該隨機語音樣本所辨識產出之語音及其組合，復透過該轉換辨識模組執行一第二構詞轉換機制，先比對該教材模組內所設教材內文，藉由該轉換辨識模組將該等語音及其組合辨識產出獨立的多個單字或片語；一語音標簽單元，連結第二、第三轉換參數，用以判斷辨識後所產出之單字或片語，並將各該單字建立所對應之語音標籤；一評測比對模組，連結該語音資料庫及該語音標籤單元，所述評測比對模組至少包括預定之比對樣本及評比 指標，供讀取該語音標籤單元之結果，判斷該等單字或語音標籤符合評比指標之程度，其中該比對樣本包括為預設關鍵字型態，用以比對所辨識產出之單字、詞彙或文法，且該評比指標係賦予各該比對樣本至少關鍵字符合次數、使用次數或文法排列等級標準，透過該單字或詞彙與各該比對樣本分析比對，而評測產出單字使用量、詞彙應用或文法程度；以下茲配合本創作較佳實施例之圖式進一步說明如，以期能使熟悉本創作相關技術之人士，得依本說明書之陳述據以實施。
05:實境口語互動評測系統
06:教學平台
10:語音資料庫
101:轉換辨識模組
11:教材模組
111:語音
112:教材內文
12:隨機語音樣本
13:讀語音樣本
14:錄音模組
20:第一轉換參數
21:分類機制
30:第二轉換參數
31:第一構詞轉換機制
40:第三轉換參數
41:第二構詞轉換機制
50:語音標簽單元
51:語音標籤
51A:近似語音標籤
51B:選擇機制
60:評測比對模組
61:比對樣本
62:評比指標
[圖1]係發明作之系統架構示意圖。
[圖2]係發明作之實施型態架構示意圖。
[圖3]係發明作之實施型態架構示意圖。
首先，請配合參閱圖1至圖3所示，本創作揭示一種實境口語互動評測系統05，係連結一教學平台06，藉以接收該教學平台06之真人互動對話後所產生之預定語音樣本，所述實境口語互動評測系統05包括：一語音資料庫10，儲存包括預定之轉換辨識模組101、一教材模組11及由真人互動隨機對話所產生之隨機語音樣本12及跟讀語音樣本13；一第一轉換參數20，連結該語音資料庫10，至少用以判斷該語音資料庫10之隨機語音樣本12，當語音資料庫10接收為隨機語音樣本12時，則透過該轉換辨識模組101執行一分類機制21，藉由該轉換辨識模組101將該隨機語音樣本12辨識轉換出多段語音111及其組合；一第二轉換參數30，連結該語音資料庫10，至少用以判斷語音資料庫10之跟讀語音樣本13，當語音資料庫10接收 為跟讀語音樣本13時，則透過該轉換辨識模組101執行一第一構詞轉換機制31，並比對該教材模組11內所設教材內文112，藉由該轉換辨識模組101將跟讀語音樣本13至少辨識轉換出獨立的多個單字或片語；一第三轉換參數40，連結該語音資料庫10，用以判斷該隨機語音樣本12所辨識產出之語音111及其組合，復透過該轉換辨識模組執行一第二構詞轉換機制41，先比對該教材媒組11內所設教材內文112，藉由該轉換辨識模組101將該等語音及其組合辨識產出獨立的多個單字或片語；一語音標簽單元50，連結第二、第三轉換參數20、30，用以判斷辨識後所產出之單字或片語，並將各該單字建立所對應之語音標籤51；一評測比對模組60，連結該語音資料庫10及該語音標籤單元50，所述評測比對模組60至少包括預定之比對樣本61及評比指標62，供讀取該語音標籤單元50之結果，判斷該等單字或語音標籤51符合評比指標之程度，實施上例如該比對樣本包括為預設關鍵字型態，用以比對所辨識產出之單字、詞彙或文法，且該評比指標係賦予各該比對樣本至少關鍵字符合次數、使用次數或文法排列等級標準，透過該單字或詞彙與各該比對樣本分析比對，而評測產出單字使用量、詞彙應用或文法程度。藉此，本發明相較於習知系統而言，不受制式題目跟讀評測形式之限制，學員進行線上課程時的真人實境互動，擷取隨機口語對話過程之樣本而能精準評測學員之口語程度，亦可藉由上課過程陸續擴充比對樣本61，具深度學習演進效果。
參圖1至圖2所示，本實施例中更包括與該語音資料庫10連結之一錄音模組14，該錄音模組14係能預設一音量範圍，當該教學平台06所連接之學員端發言音量符合該音量範圍時，則用以接收或暫時停止接收該 真人互動對話後所產生之隨機語音樣本12或跟讀語音樣本13，例如預設發言音量大於等於35分貝時開放接收隨機語音樣本12、跟讀語音樣本13，小於5分貝則暫時停止接收，藉此可據過濾效果，避免接收無意義之雜音，提升接收該等隨機、跟讀語音樣本12、13之正確性。
本發明實施上該比對樣本61係可包括為預設語音樣本型態(即由預先錄製語音成為預設語音樣本型態)，用以比對該語音標籤51，且該評比指標62係賦予各該比對樣本61至少發音準確度或流暢度等級標準，構成該語音標籤51透過與各該比對樣本61分析比對，而評測產出口語流暢度及發音準確度。
本發明實施上該比對樣本61另可包括為預設關鍵字型態(即預先鍵入之關鍵字比對樣本型態)，用以比對所辨識產出之單字、詞彙或文法，且該評比指標62係賦予各該比對樣本61至少關鍵字符合次數、使用次數或文法排列等級標準等，透過該單字或詞彙與各該比對樣本61分析比對，而評測產出單字使用量、詞彙應用或文法程度。
此外，該評測比對模組實施上60更可包括一發言時間判斷機制，用以分析判別該語音標籤51內容中之發言時間，所述評比指標62係賦予各該比對樣本61之時間標準，構成該語音標籤51透過與各該比對樣本61分析比對，而能評測產出發言時間及口語流暢程度。
另配合參閱圖1及圖3，其中由該語音標簽單元50係能將各該單字分別建立對應之至少複數組近似語音標籤51A。其中該評測比對模組60係執行一選擇機制51B，由近似語音標籤51A判讀選擇出最接近該比對樣本61之結果，例如單字組為My name is John，則該語音標籤單元50係將My單字轉換成語音並建立多組近似語音標籤51A(如建立Audio1、Audio2、 Audio3..等)，其他name、is、John等單字亦然，藉此更貼近實際口語而降低比對誤差。
05:實境口語互動評測系統
06:教學平台
10:語音資料庫
101:轉換辨識模組
11:教材模組
111:語音
112:教材內文
12:隨機語音樣本
13:讀語音樣本
14:錄音模組
20:第一轉換參數
21:分類機制
30:第二轉換參數
31:第一構詞轉換機制
40:第三轉換參數
41:第二構詞轉換機制
50:語音標簽單元
51:語音標籤
60:評測比對模組
61:比對樣本
62:評比指標

Claims (6)

  1. 一種實境口語互動評測系統，係連結一教學平台，藉以接收該教學平台之真人互動對話後所產生之預定語音樣本，所述實境口語互動評測系統包括：一語音資料庫，儲存包括預定之轉換辨識模組、一教材模組及由真人互動隨機對話所產生之隨機語音樣本及跟讀語音樣本；一第一轉換參數，連結該語音資料庫，至少用以判斷該語音資料庫之隨機語音樣本，當語音資料庫接收為隨機語音樣本時，則透過該轉換辨識模組執行一分類機制，藉由該轉換辨識模組將該隨機語音樣本辨識並轉換出多段語音及其組合；一第二轉換參數，連結該語音資料庫，至少用以判斷語音資料庫之跟讀語音樣本，當語音資料庫接收為跟讀語音樣本時，則透過該轉換辨識模組執行一第一構詞轉換機制，並比對該教材模組內所設教材內文，藉由該轉換辨識模組將跟讀語音樣本至少辨識並轉換出獨立的多個單字或片語；一第三轉換參數，連結該語音資料庫，用以判斷該隨機語音樣本所辨識產出之語音及其組合，復透過該轉換辨識模組執行一第二構詞轉換機制，先比對該教材模組內所設教材內文，藉由該轉換辨識模組將該等語音及其組合辨識產出獨立的多個單字或片語；一語音標簽單元，連結第二、第三轉換參數，用以判斷辨識後所產出之單字或片語，並將各該單字建立所對應之語音標籤；一評測比對模組，連結該語音資料庫及該語音標籤單元，所述評測比對模組至少包括預定之比對樣本及評比指標，供讀取該語音標籤單元之結果，判斷該等單字或語音標籤符合評比指標之程度，其中該比對樣本包括為預設關鍵字型態，用以比對所辨識產出之單字、詞彙或文法，且該評比指標 係賦予各該比對樣本至少關鍵字符合次數、使用次數或文法排列等級標準，透過該單字或詞彙與各該比對樣本分析比對，而評測產出單字使用量、詞彙應用或文法程度。
  2. 如請求項1所述之實境口語互動評測系統，更包括與該語音資料庫連結之一錄音模組，該錄音模組係能預設一音量範圍，當該教學平台所連接之學員端發言音量符合該音量範圍時，則用以接收或暫時停止接收該真人互動對話後所產生之隨機語音樣本或跟讀語音樣本。
  3. 如請求項1所述之實境口語互動評測系統，所述比對樣本包括為預設語音樣本型態，用以比對該語音標籤，且該評比指標係賦予各該比對樣本至少發音準確度或流暢度等級標準，構成該語音標籤透過與各該比對樣本分析比對，而評測產出口語流暢度及發音準確度。
  4. 如請求項2所述之實境口語互動評測系統，其中該評測比對模組更包括一發言時間判斷機制，用以分析判別該語音標籤內容中之發言時間，所述評比指標係賦予各該比對樣本之時間標準，構成該語音標籤透過與各該比對樣本分析比對，而能評測產出發言時間及口語流暢程度。
  5. 如請求項1所述之實境口語互動評測系統，其中由該語音標簽單元係能將各該單字分別建立對應之至少複數組近似語音標籤。
  6. 如請求項5所述之實境口語互動評測系統，其中該評測比對模組係執行一選擇機制，由近似語音標籤判讀選擇出最接近該比對樣本之結果。
TW111130762A 2022-08-16 2022-08-16 實境口語互動評測系統 TWI833328B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
TW111130762A TWI833328B (zh) 2022-08-16 2022-08-16 實境口語互動評測系統

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW111130762A TWI833328B (zh) 2022-08-16 2022-08-16 實境口語互動評測系統

Publications (2)

Publication Number Publication Date
TWI833328B true TWI833328B (zh) 2024-02-21
TW202410028A TW202410028A (zh) 2024-03-01

Family

ID=90825014

Family Applications (1)

Application Number Title Priority Date Filing Date
TW111130762A TWI833328B (zh) 2022-08-16 2022-08-16 實境口語互動評測系統

Country Status (1)

Country Link
TW (1) TWI833328B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW548631B (en) * 1999-08-31 2003-08-21 Andersen Consulting Llp System, method, and article of manufacture for a voice recognition system for identity authentication in order to gain access to data on the Internet
US20060294094A1 (en) * 2004-02-15 2006-12-28 King Martin T Processing techniques for text capture from a rendered document
US20160253999A1 (en) * 2015-02-26 2016-09-01 Arizona Board Of Regents Systems and Methods for Automated Evaluation of Human Speech
CN111597305A (zh) * 2020-05-15 2020-08-28 法政国际教育投资有限公司 实体标记方法、装置、计算机设备和存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW548631B (en) * 1999-08-31 2003-08-21 Andersen Consulting Llp System, method, and article of manufacture for a voice recognition system for identity authentication in order to gain access to data on the Internet
US20060294094A1 (en) * 2004-02-15 2006-12-28 King Martin T Processing techniques for text capture from a rendered document
US20160253999A1 (en) * 2015-02-26 2016-09-01 Arizona Board Of Regents Systems and Methods for Automated Evaluation of Human Speech
CN111597305A (zh) * 2020-05-15 2020-08-28 法政国际教育投资有限公司 实体标记方法、装置、计算机设备和存储介质

Also Published As

Publication number Publication date
TW202410028A (zh) 2024-03-01

Similar Documents

Publication Publication Date Title
Dalby et al. Explicit pronunciation training using automatic speech recognition technology
Neri et al. Automatic Speech Recognition for second language learning: How and why it actually works.
Ekayati Shadowing Technique on Students’ Listening Word Recognition
CN105845134A (zh) 自由朗读题型的口语评测方法及系统
CN101551947A (zh) 辅助口语语言学习的计算机系统
CN103761975A (zh) 一种口语评测方法及装置
CN103559892A (zh) 口语评测方法及系统
CN109697988B (zh) 一种语音评价方法及装置
CN103594087A (zh) 提高口语评测性能的方法及系统
Ahsiah et al. Tajweed checking system to support recitation
KR20160008949A (ko) 음성 대화 기반의 외국어 학습 방법 및 이를 위한 장치
CN113205729A (zh) 一种面向外国留学生的演讲评测方法、装置及系统
Evanini et al. Overview of automated speech scoring
Khabbazbashi et al. Opening the black box: Exploring automated speaking evaluation
CN110598041A (zh) 一种FlACS实时分析方法与装置
CN111078010B (zh) 一种人机交互方法、装置、终端设备及可读存储介质
KR20030040955A (ko) 인터넷을 이용한 음성인식 영어 학습서비스방법
WO2019075827A1 (zh) 一种语音评价方法及装置
Shufang Design of an automatic english pronunciation error correction system based on radio magnetic pronunciation recording devices
TWI833328B (zh) 實境口語互動評測系統
KR102407055B1 (ko) 음성인식 후 자연어 처리를 통한 대화 품질지수 측정장치 및 그 방법
CN112767961B (zh) 一种基于云端计算的口音矫正方法
CN111968434A (zh) 一种线上无纸化语言训练与评测的方法和存储介质
Xu et al. Application of Multimodal NLP Instruction Combined with Speech Recognition in Oral English Practice
Yu Evaluation of English Pronunciation Quality Based on Decision Tree Algorithm