CN101383102A - 仿真影音同步显示装置及方法 - Google Patents

仿真影音同步显示装置及方法 Download PDF

Info

Publication number
CN101383102A
CN101383102A CN 200810231886 CN200810231886A CN101383102A CN 101383102 A CN101383102 A CN 101383102A CN 200810231886 CN200810231886 CN 200810231886 CN 200810231886 A CN200810231886 A CN 200810231886A CN 101383102 A CN101383102 A CN 101383102A
Authority
CN
China
Prior art keywords
module
pronunciation information
synchronous display
picture
simulation video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN 200810231886
Other languages
English (en)
Inventor
陈淮琰
王佳雨
周骁
郑建锋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inventec Besta Xian Co Ltd
Original Assignee
Inventec Besta Xian Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inventec Besta Xian Co Ltd filed Critical Inventec Besta Xian Co Ltd
Priority to CN 200810231886 priority Critical patent/CN101383102A/zh
Priority to PCT/CN2008/001914 priority patent/WO2010045757A1/zh
Publication of CN101383102A publication Critical patent/CN101383102A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00—Teaching not covered by other main groups of this subclass
    • G09B19/06—Foreign languages

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

本发明涉及一种仿真影音同步显示方法及装置，该装置包含：接收模块，用来接收发音信息；对应模块，用来取得发音信息所对应的身体图片及口部特写图片；输出模块，用来根据对应模块播放发音信息，并同步显示身体图片及口部特写图片，接收模块接入对应模块，对应模块接入输出模块。本发明解决了先前技术仅播放口部特写图片，显得没有亲和力；或仅播放人脸，无法看清楚口形的缺点。

Description

仿真影音同步显示装置及方法
技术领域
本发明涉及一种仿真显示方法及装置，尤其是一种仿真影音同步显示装置及方法。
背景技术
仿真的意义在于用更生动活泼的方式帮助使用者学习语言，同时让使用者能看清楚发声的口形，由此模仿口形，达到更好的学习效果。但先前技术只能看到一张固定大小的身体图片，无法看清楚口形，或是只能看到口形图片，无法看到人脸，显得毫无亲和力可言。
另外，先前的仿真技术所显示的身体图片或口形图片的背景为原录制时的背景色彩。当我们使用仿真功能时，屏幕仅会显示一个方型的身体图片或是口形图片，此时不仅会遮盖到原先屏幕所显示的文字或图片，而且因为和原先背景没有融合，画面会显得不够协调，不够生动。
所以先前技术具有无法看清楚口形，以及画面不具亲和力，不够仿真的缺点。
发明内容
本发明为解决背景技术中存在的上述技术问题，而提出仿真影音同步显示装置及方法。
本发明的技术解决方案是：本发明为一种仿真影音同步显示装置，其特殊之处在于：该装置包含：接收模块，用来接收发音信息；对应模块，用来取得发音信息所对应的身体图片及口部特写图片；输出模块，用来根据对应模块播放发音信息，并同步显示身体图片及口部特写图片，接收模块接入对应模块，对应模块接入输出模块。
该装置还包含特效模块，用来制作背景特效，特效模块分别与对应模块和输出模块连接。
该装置还包含连续式文字转语音模块，用来提供发音信息，连续式文字转语音模块接入接收模块。
一种实现上述的仿真影音同步显示装置的方法，其特殊之处在于：该方法包含下列步骤：
1)接收发音信息；
2)取得发音信息所对应的身体图片及口部特写图片；
3)播放发音信息，并同步显示所对应的身体图片及口部特写图片。
上述步骤2)中的身体图片经过背景特效处理。
上述步骤2)中对身体图片具有脸部主体图案的边缘作背景特效处理，得到特效处理后的身体图片以及特效处理后的主体图案的边缘。
上述步骤3)中根据对应模块播放发音信息，并同步显示所对应的特效处理后的身体图片及口部特写图片。
本发明提供的仿真影音同步显示装置及方法解决了先前技术仅播放口部特写图片，显得没有亲和力；或仅播放人脸，无法看清楚口形的缺点，实现了逼真的仿真功能。
附图说明
图1为本发明第一实施例示意图；
图2为本发明第一实施例装置示意图；
图3为本发明第一实施例方法流程图；
图4为本发明第二实施例示意图；
图5为本发明第二实施例装置示意图；
图6为本发明第二实施例方法流程图。
其中，102-身体图片，104-主体图案，106-主体图案边缘，203-发音信息，207-口部特写图片，302-接收模块，304-对应模块，306-输出模块，501-显示画面，502-特效处理后的身体图片，506-特效处理后的主体图案的边缘，601-特效模块，602-连续式文字转语音模块；
具体实施方式
参见图1、图2，本发明第一实施例装置，包含下列组件：接收模块302，用来接收发音信息203；对应模块304，用来取得发音信息203所对应的身体图片102及口部特写图片207；及输出模块306，根据对应模块304播放发音信息203，并同步显示身体图片102及口部特写图片207。
参见图3，本发明第一实施例方法，包含下列步骤：
步骤401：接收发音信息203。
经过接收模块302接收发音信息203，发音信息203为中文，且采用罗马拼音的方式。
步骤403：取得发音信息203所对应的身体图片102及口部特写图片207。
发音信息203所对应的身体图片102及口部特写图片207摄自真人实际发音时的脸部及口部动作。
步骤405：播放。
根据对应模块304播放发音信息203，同步显示所对应的身体图片102及口部特写图片207。
参见图4、图5，本发明第二实施例装置，包含下列组件：特效模块601，用来制作背景特效；连续式文字转语音模块602，用来提供发音信息203；接收模块302，用来接收发音信息203；对应模块304，用来取得发音信息203所对应的特效处理后的身体图片502及口部特写图片207；输出模块306，用来根据对应模块304播放发音信息203，并同步显示特效处理后的身体图片502及口部特写图片207。
参见图6，本发明第二实施例方法，包含下列步骤：
步骤701：提供发音信息203。
通过连续式文字转语音模块602提供发音信息203。
步骤703：图片特效处理。
通过特效模块601，对身体图片102具有脸部主体图案104的边缘106作背景特效处理，得到特效处理后的身体图片502以及特效处理后的主体图案104的边缘506。特效模块可以是常见绘图软件PhotoShop的羽化特效，经过羽化特效处理后主体图案104的轮廓以及主体图案104以外的区域将具有渐层效果，使主体图案104在显示画面501中显得更加协调，更仿真。
步骤705：接收发音信息203。
通过接收模块302接收连续式文字转语音模块602所提供的发音信息203，发音信息203为中文，且采用罗马拼音的方式。
步骤707：取得发音信息203所对应的特效处理后的身体图片502及口部特写图片207。
发音信息203所对应的特效处理后的身体图片502以及口部特写图片207摄自真人实际发音时的脸部及口部动作。
步骤709：播放。
根据对应模块304播放发音信息203，同步显示所对应的特效处理后的身体图片502以及口部特写图片207。

Claims (7)

1、一种仿真影音同步显示装置，其特征在于：该装置包含：接收模块，用来接收发音信息；对应模块，用来取得发音信息所对应的身体图片及口部特写图片；输出模块，用来根据对应模块播放发音信息，并同步显示身体图片及口部特写图片，所述接收模块接入对应模块，所述对应模块接入输出模块。
2、根据权利要求1所述的仿真影音同步显示装置，其特征在于：该装置还包含特效模块，用来制作背景特效，所述特效模块分别与对应模块和输出模块连接。
3、根据权利要求1或2所述的仿真影音同步显示装置，其特征在于：该装置还包含连续式文字转语音模块，用来提供发音信息，所述连续式文字转语音模块接入接收模块。
4、一种实现权利要求1所述的仿真影音同步显示装置的方法，其特征在于：该方法包含下列步骤：
1)接收发音信息；
2)取得发音信息所对应的身体图片及口部特写图片；
3)播放发音信息，并同步显示所对应的身体图片及口部特写图片。
5、根据权利要求4所述的仿真影音同步显示方法，其特征在于：所述步骤2)中的身体图片经过背景特效处理。
6、根据权利要求5所述的仿真影音同步显示方法，其特征在于：所述步骤2)中对身体图片具有脸部主体图案的边缘作背景特效处理，得到特效处理后的身体图片以及特效处理后的主体图案的边缘。
7、根据权利要求5或6所述的仿真影音同步显示方法，其特征在于：所述步骤3)中根据对应模块播放发音信息，并同步显示所对应的特效处理后的身体图片及口部特写图片。
CN 200810231886 2008-10-24 2008-10-24 仿真影音同步显示装置及方法 Pending CN101383102A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN 200810231886 CN101383102A (zh) 2008-10-24 2008-10-24 仿真影音同步显示装置及方法
PCT/CN2008/001914 WO2010045757A1 (zh) 2008-10-24 2008-11-24 仿真影音同步显示装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 200810231886 CN101383102A (zh) 2008-10-24 2008-10-24 仿真影音同步显示装置及方法

Publications (1)

Publication Number Publication Date
CN101383102A true CN101383102A (zh) 2009-03-11

Family

ID=40462921

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 200810231886 Pending CN101383102A (zh) 2008-10-24 2008-10-24 仿真影音同步显示装置及方法

Country Status (2)

Country Link
CN (1) CN101383102A (zh)
WO (1) WO2010045757A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102009027387B4 (de) 2009-07-01 2019-01-03 Lisa Dräxlmaier GmbH Vorrichtung und Verfahren zum Absichern einer elektrischen Leitung mit einem steuerbaren Schaltelement

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5938447A (en) * 1993-09-24 1999-08-17 Readspeak, Inc. Method and system for making an audio-visual work with a series of visual word symbols coordinated with oral word utterances and such audio-visual work
US5697789A (en) * 1994-11-22 1997-12-16 Softrade International, Inc. Method and system for aiding foreign language instruction
JPH10268753A (ja) * 1997-03-25 1998-10-09 Tokai Univ 中国語学習プログラムを記録したコンピュータ読取り可能な記録媒体及び中国語学習装置
US7168953B1 (en) * 2003-01-27 2007-01-30 Massachusetts Institute Of Technology Trainable videorealistic speech animation
JP4370811B2 (ja) * 2003-05-21 2009-11-25 カシオ計算機株式会社 音声表示出力制御装置、および音声表示出力制御処理プログラム
CN1808519A (zh) * 2005-01-18 2006-07-26 无敌科技(西安)有限公司 同步播放语言音节发音及其口形图片的装置及方法
JP4591481B2 (ja) * 2007-07-27 2010-12-01 カシオ計算機株式会社 表示制御装置および表示制御処理プログラム

Also Published As

Publication number Publication date
WO2010045757A1 (zh) 2010-04-29

Similar Documents

Publication Publication Date Title
JP4310916B2 (ja) 映像表示装置
CN113256821B (zh) 一种三维虚拟形象唇形生成方法、装置及电子设备
US20160321953A1 (en) Pronunciation learning support system utilizing three-dimensional multimedia and pronunciation learning support method thereof
CN109951718A (zh) 一种通过5g和vr技术可360度全景实时拍摄直播的方法
CN108320625A (zh) 面向言语康复的震动反馈系统及装置
EP1798688A3 (en) Method of locating a human eye in a video image
Pearlman I, cyborg
Humes et al. Audiology and communication disorders: An overview
US7172427B2 (en) System and process for teaching speech to people with hearing or speech disabilities
JP2006270711A (ja) 情報提供装置及び情報提供装置の制御用プログラム
Liu et al. An interactive speech training system with virtual reality articulation for Mandarin-speaking hearing impaired children
CN101383102A (zh) 仿真影音同步显示装置及方法
CN201336085Y (zh) 仿真影音同步显示装置
JP3569278B1 (ja) 発音学習支援方法、学習者端末及び処理プログラム並びに該プログラムを記録した記録媒体
Fletcher et al. Speech modification by a deaf child through dynamic orometric modeling and feedback
Wik et al. Can visualization of internal articulators support speech perception?
RU2715792C1 (ru) Учебно-демонстрационный модуль и система обучения глухих, немых и глухонемых людей разговорной речи
CN202758529U (zh) 人体感官演示仪
US10139780B2 (en) Motion communication system and method
Granström Speech technology for language training and e-inclusion.
JP2003283949A5 (zh)
CN108877836A (zh) 一种评测言语状态的方法及装置
CN220651502U (zh) 一种模拟听觉形成过程的生物学教具
CN106710605A (zh) 一种图文动画方式模拟和训练发音的控制系统
TW200921411A (en) Method and device of displaying speech and corresponding images synchronously

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Open date: 20090311