TWI470588B - 用於對失聰者將口語轉譯成手語的系統 - Google Patents

用於對失聰者將口語轉譯成手語的系統 Download PDF

Info

Publication number
TWI470588B
TWI470588B TW100106607A TW100106607A TWI470588B TW I470588 B TWI470588 B TW I470588B TW 100106607 A TW100106607 A TW 100106607A TW 100106607 A TW100106607 A TW 100106607A TW I470588 B TWI470588 B TW I470588B
Authority
TW
Taiwan
Prior art keywords
video sequence
computer
sign language
signal
language
Prior art date
Application number
TW100106607A
Other languages
English (en)
Other versions
TW201135684A (en
Inventor
Klaus Illgner-Fehns
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed filed Critical
Publication of TW201135684A publication Critical patent/TW201135684A/zh
Application granted granted Critical
Publication of TWI470588B publication Critical patent/TWI470588B/zh

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B21/00—Teaching, or communicating with, the blind, deaf or mute
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/40—Processing or translation of natural language
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B21/00—Teaching, or communicating with, the blind, deaf or mute
    • G09B21/009—Teaching or communicating with deaf persons

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Educational Technology (AREA)
  • Educational Administration (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Tourism & Hospitality (AREA)
  • Economics (AREA)
  • Computational Linguistics (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Machine Translation (AREA)
  • Studio Circuits (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

用於對失聰者將口語轉譯成手語的系統
本發明係有關於一種用於對失聰者將口語轉譯成手語(sign language)的系統。
手語係賦予能以視覺感知之手勢的名稱，其基本上是利用雙手配合臉部表情、嘴部表情、以及姿勢而達成。手語具有其本身的文法結構，因為手語無法被逐字地轉換成口語。尤其是可以使用手語同時傳送多重片段的資訊，而口語則係由連續片段之資訊所構成，意即聲音和語句。
口語對手語之轉譯係透過手語翻譯員執行，與外語翻譯者相當，其係在一全日制的學習計畫中接受訓練。對於視聽媒體而言(特別是電影及電視)，將電影及電視聲音轉譯成失聰者的手語存有極大的需求，但由於欠缺足夠數量的手語翻譯員而難以滿足所需。
本發明之技術問題在於將口語翻成手語之轉譯自動化，以在沒有真人翻譯服務時使用。
依據本發明，此技術問題之解決係藉由申請專利範圍第1項中之特徵部分。
依據本發明之系統之有利實施例及發展而界定於申請專利範圍之附屬項。
本發明之基本構想係一方面將例如德文標準語言之口語的語句及語法之文字資料儲存於資料庫中，且另一方面將手語中對應意義之視訊資料序列儲存於資料庫中。因此，該資料庫包含一視聽語言詞典，其中針對口語的語句及/或用詞提供對應的手語影像或視訊序列。針對口語翻成手語之轉譯，一電腦通連於該資料庫，其中文字資訊(特別是亦可由轉換成文字的一視聽信號之語音成分組成)被饋入該電腦。對於口語內容，上述語音成分之聲調(音韻)及音量被盡可能地加以分析以滿足語義偵測之所需。對應至饋入的文字資料的視訊序列由該電腦自該資料庫讀出並被連結至一完整視訊序列。此可被獨自重製(例如針對收音機節目、播客(podcast)或類似項目)，或者例如被饋入一影像疊覆裝置(image overlay)，其將該等視訊序列以"子母畫面(picture in picture)"的形式疊覆於原始的視聽信號中。藉由播放速度的動態調整，可以使該二個影像信號彼此同步。因此，口語及手語之間的較大時間延遲在"在線(on-line)"模式可以縮減而在"離線(off-line)"模式可以大幅避免。
由於個別文法結構間的初始手部狀態必須是可辨認以理解手語，故初始手部狀態之視訊序列被進一步以詮釋資料(metadata)之形式儲存於資料庫中，其中初始手部狀態之視訊序列在轉譯期間被插入手語的文法結構之間。除了初始手部狀態之外，個別語段間的轉變在獲得流暢的"視覺"言語效果上扮演一個重要的角色。針對此目的，其可以藉由所儲存有關初始手部狀態和轉變時的手部狀態之詮釋資料計算對應的交叉衰落(crossfade)，以使得手的位置在從一個語段到下一語段的轉變處能夠無間隙地跟隨。
在圖1中，參考標號10代表一資料庫，其被構建成一視聽語言詞典，其中針對口語之語句及/或用詞以視訊序列(片段)之形式儲存一手語之對應影像。透過一資料匯流排11，資料庫10與一電腦20通連，電腦20以口語的語句及/或用詞的文字資料來定址資料庫10，並予以儲存於其中對應於手語之視訊序列讀出至其輸出線21上。此外且較佳為，在資料庫10中可以儲存手語的初始手部狀態的詮釋資料(定義個別手勢的轉變位置，且以轉變序列之形式)插入於個別手勢的連續視訊序列之間。在以下內容中，所產生的視訊及轉變序列均統稱為"視訊序列"。
在圖2所示一第一實施例中，針對所產生視訊序列之處理，被電腦20讀出至輸出線21上的視訊序列被直接或在居間儲存於一視訊記憶體("序列記憶體")130後而透過其輸出131以饋入一影像疊覆裝置120。此外，儲存於視訊記憶體130中的視訊序列可透過記憶體130之輸出132顯示於一顯示器180上。儲存視訊序列通往輸出131及132之輸出受一控制器140所控制，該控制器140透過一輸出141連接至記憶體130。另外，來自將一視聽信號在輸出端111處轉換成一標準類比電視信號之一電視信號轉換器110的類比電視信號被饋入影像疊覆裝置120中。影像疊覆裝置120將讀出之視訊序列插入該類比電視信號中，例如以"子母畫面"(縮寫為"PIP")之形式。如此產生於影像疊覆裝置120之輸出端121處的"PIP"電視信號依據圖2而自一電視信號傳送器150透過一類比傳輸路徑151被傳送至一接收器160。接收之電視信號50在一重製裝置170(顯示器)上進行重製期間，可以同時觀看該視聽信號的影像成分以及與其分離之一手語轉譯之手勢。
在圖3所示一第二實施例中，針對所產生視訊序列之處理，被電腦20讀出至輸出線21上的視訊序列直接或在居間儲存於一視訊記憶體("序列記憶體")130後而透過其輸出131以饋入一多工器220。此外，包含分離資料頻道之數位電視信號(多工器220於其中插入視訊序列)從電視信號轉換器110透過其輸出112而被饋入多工器220。在多工器220之輸出221處，經過上述過程之數位電視信號又經由一電視傳送器150透過一數位傳輸路徑151被傳送至一接收器160。接收的數位電視信號50在一重製裝置170(顯示器)上進行重製期間，可以同時觀看該視聽信號的影像成分以及與其分離之一手語轉譯之手勢。
如圖3所示，視訊序列21可以自記憶體130(或者是直接從電腦20)透過一獨立的第二傳輸路徑190(例如透過網際網路)被進一步傳送至一使用者。在此情況下，並未發生由多工器220將視訊序列插入數位電視信號之中。更確切說，使用者透過該獨立的第二傳輸路徑190所接收到的視訊序列和轉變序列是可以隨使用者的需求並透過一影像疊覆裝置200而插入由接收器160所接收的數位電視信號中，且手勢可以被以子母畫面之形式重製於顯示器170上。
顯示於圖3中的另一替代係所產生的視訊序列21透過該第二傳輸路徑190而被個別地播放(廣播或串流)或者透過視訊記憶體130之一輸出133而被提供用以一擷取(例如提供予一有聲書(audio book) 210)。
取決於視聽信號所產生或導出之形式，圖1以一實例顯示將文字資料饋入電腦20中之一離線形式和一在線形式。於在線形式中，視聽信號藉由一攝影機61及一語音麥克風62產生於一電視或電影工作室中。透過語音麥克風62之一聲音輸出64，視聽信號的語音成分被饋入一文字轉換器70以將口語轉換成包含該口語的語句及/或用詞的文字資料並從而產生一中介格式。接著，該文字資料透過一文字資料線71被傳送至電腦20，用以定址該手語在該資料庫10中的對應資料。
在使用工作室60中所謂的"提詞機(telepromter)"90(一講演者利用以自一監視器讀取待說出之文字)的情況中，提詞機90之文字資料透過連線91被饋入文字轉換器70或者透過連線91被直接饋入(圖中未顯示)電腦20。
在離線形式中，舉例而言，視聽信號之語音成分在一影片掃描器80之音訊輸出81處被掃描，以將一影片轉換成一電視聲音信號。不使用一影片掃描器80，亦可以針對視聽信號提供一碟片儲存媒體(例如DVD)。被掃描視聽信號之語音成分從而被饋入文字轉換器70中(或是另一個未明確顯示的文字轉換器)，其配合電腦20而將口語轉換成包含該口語之語句及/或用詞的文字資料。
來自工作室60或影片掃描器80的視聽信號可進一步較佳地透過其輸出65或82而被儲存於一信號記憶體50上。透過其輸出51，信號記憶體50將儲存之視聽信號饋入電視轉換器110，其從饋入之視聽信號中產生一類比或數位電視信號。理所當然地，其亦有可能將視聽信號自工作室60或影片掃描器80直接饋入電視信號轉換器110中。
在無線電信號之情形，上述說明均類似地適用，除了視訊信號與音頻信號無並行存在。於在線模式中，音頻信號透過麥克風62被直接記錄並透過64饋入文字轉換器70中。在離線模式中，一音頻檔案(可以任何格式存在)之音頻信號被饋入文字轉換器中。針對具有手勢的視訊序列與並存視訊序列間之同步最佳化，可選擇性地連接一邏輯100(例如一訊框速率轉換器)以利用來自原始音頻信號及視訊信號的時間資訊(位於攝影機輸出63處的攝影機61時間戳記)，以動態改變(加速或減速)來自電腦20的手勢視訊序列和來自信號記憶體50的原始視聽信號二者的播放速度。針對此目的，邏輯100的控制輸出101連接至電腦20及信號記憶體50二者。藉由此同步，口語及手語之間的較大時間延遲在"在線"模式可縮減而在"離線"模式可大幅避免。
10．．．資料庫
11．．．資料匯流排
20．．．電腦
21．．．輸出線
50．．．信號記憶體
51．．．輸出
60．．．工作室
61．．．攝影機
62．．．語音麥克風
63．．．攝影機輸出
64．．．聲音輸出
65．．．輸出
70．．．文字轉換器
71．．．文字資料線
80．．．影片掃描器
81．．．音訊輸出
82．．．輸出
90．．．提詞機
91．．．連線
100．．．邏輯
101．．．控制輸出
110．．．電視(信號)轉換器
111．．．輸出
112．．．輸出
120．．．影像疊覆裝置
121．．．輸出
130．．．視訊記憶體
131-133．．．輸出
140．．．控制器
141．．．輸出
150．．．電視信號傳送器
151．．．類比/數位傳輸路徑
160．．．接收器
161．．．輸出
170．．．重製裝置/顯示器
180．．．顯示器
190．．．獨立的第二傳輸路徑
200．．．影像疊覆裝置
210．．．有聲書
220．．．多工器
221．．．輸出
本發明之詳細說明業已透過圖式中的實施例所敘述。
圖1顯示針對失聰者而用於將口語轉譯成一視訊序列形式之手語之一系統之示意性方塊圖；
圖2顯示一第一實施例之示意性方塊圖，用於處理利用依據圖1之系統所產生的視訊序列，而
圖3顯示一第二實施例之示意性方塊圖，用於處理利用依據圖1之系統所產生的視訊序列。
10．．．資料庫
11．．．資料匯流排
20．．．電腦
21．．．輸出線
50．．．信號記憶體
51．．．信號記憶體之輸出
60．．．工作室
61．．．攝影機
62．．．麥克風
63．．．攝影機輸出
64．．．聲音輸出
65．．．工作室之輸出
70．．．文字轉換器
71．．．文字資料線
80．．．影片掃描器
81．．．影片掃描器之音訊輸出
82．．．影片掃描器之輸出
90．．．提詞機
91．．．提詞機連線
100．．．邏輯
101．．．控制輸出
110．．．電視信號轉換器
111．．．電視信號轉換器之類比輸出
112．．．電視信號轉換器之數位輸出

Claims (7)

  1. 一種用於對失聰者以將口語轉譯成手語的系統，其特徵在於以下特點：- 一資料庫(10)，其中儲存口語之語句及語法之文字資料和具有在手語中之對應意義之視訊資料序列，以及- 一電腦(20)，通連該資料庫(10)以將一口語所饋入之文字資料轉譯成該手語之對應的視訊序列，其中用於定義在該手語的個別文法結構之間的轉變位置之初始手部狀態之視訊序列被進一步以詮釋資料之形式儲存於該資料庫(10)中，以在轉譯期間被該電腦(20)插入該手語的文法結構的視訊序列之間。
  2. 依據申請專利範圍第1項之系統，其特徵在於用於將該電腦(20)所轉譯的視訊序列插入一視聽信號中的裝置(120；220)。
  3. 依據申請專利範圍第1或2項之系統，其特徵在於用於將一視聽信號之聲音信號成分轉換成文字資料並用以將該文字資料饋入該電腦(20)中的一轉換器(70)。
  4. 依據申請專利範圍第1或2項之系統，其特徵在於提供有一邏輯裝置(100)以將自該視聽信號所導出之一時間資訊饋入該電腦(20)，其中饋入之時間資訊動態地改變來自電腦(20)的視訊序列及原始視聽信號二者的播放速度。
  5. 依據申請專利範圍第1或2項之系統，其中該視聽信號透過一電視信號傳送器(150)以數位信號之形式被傳送至一接收器(160)，其特徵在於一獨立的第二傳輸路徑(190)(例 如透過網際網路)被提供予該視訊序列(21)，該視訊序列(21)透過該獨立的第二傳輸路徑(190)而自一視訊記憶體(130)或直接自該電腦(20)被傳送至一使用者，且一影像疊覆裝置(200)被連接至該接收器(160)以將所傳送至該使用者之視訊序列(21)透過該獨立的第二傳輸路徑(190)以子母畫面之形式插入該接收器(160)所接收之數位電視信號中。
  6. 依據申請專利範圍第1或2項之系統，其特徵在於一獨立的第二傳輸路徑(190)(例如透過網際網路)被提供予該視訊序列(21)，該視訊序列(21)針對廣播或串流應用而透過該獨立的第二傳輸路徑(190)以自一視訊記憶體(130)或直接自該電腦(20)播放或提供用以一擷取(例如一有聲書210)。
  7. 一種數位視聽信號之接收器，其特徵在於一影像疊覆裝置(200)，其連接該接收器(160)以將透過一獨立的第二傳輸路徑(190)所傳送的視訊序列(21)以子母畫面之形式插入由該接收器(160)所接收的數位電視信號中，其中該視訊序列(21)係藉由申請專利範圍第1到6項中任一項之系統以從口語轉譯成手語。
TW100106607A 2010-03-01 2011-03-01 用於對失聰者將口語轉譯成手語的系統 TWI470588B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102010009738A DE102010009738A1 (de) 2010-03-01 2010-03-01 Anordnung zum Übersetzen von Lautsprache in eine Gebärdensprache für Gehörlose

Publications (2)

Publication Number Publication Date
TW201135684A TW201135684A (en) 2011-10-16
TWI470588B true TWI470588B (zh) 2015-01-21

Family

ID=43983702

Family Applications (1)

Application Number Title Priority Date Filing Date
TW100106607A TWI470588B (zh) 2010-03-01 2011-03-01 用於對失聰者將口語轉譯成手語的系統

Country Status (8)

Country Link
US (1) US20130204605A1 (zh)
EP (1) EP2543030A1 (zh)
JP (1) JP2013521523A (zh)
KR (1) KR20130029055A (zh)
CN (1) CN102893313A (zh)
DE (1) DE102010009738A1 (zh)
TW (1) TWI470588B (zh)
WO (1) WO2011107420A1 (zh)

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9282377B2 (en) 2007-05-31 2016-03-08 iCommunicator LLC Apparatuses, methods and systems to provide translations of information into sign language or other formats
CN102723019A (zh) * 2012-05-23 2012-10-10 苏州奇可思信息科技有限公司 一种手语教学系统
EP2760002A3 (en) * 2013-01-29 2014-08-27 Social IT Pty Ltd Methods and systems for converting text to video
WO2015061248A1 (en) * 2013-10-21 2015-04-30 iCommunicator LLC Apparatuses, methods and systems to provide translations of information into sign language or other formats
US10248856B2 (en) 2014-01-14 2019-04-02 Toyota Motor Engineering & Manufacturing North America, Inc. Smart necklace with stereo vision and onboard processing
US10024679B2 (en) 2014-01-14 2018-07-17 Toyota Motor Engineering & Manufacturing North America, Inc. Smart necklace with stereo vision and onboard processing
US9915545B2 (en) 2014-01-14 2018-03-13 Toyota Motor Engineering & Manufacturing North America, Inc. Smart necklace with stereo vision and onboard processing
US10360907B2 (en) 2014-01-14 2019-07-23 Toyota Motor Engineering & Manufacturing North America, Inc. Smart necklace with stereo vision and onboard processing
WO2015116014A1 (en) * 2014-02-03 2015-08-06 IPEKKAN, Ahmet Ziyaeddin A method of managing the presentation of sign language by an animated character
US10460407B2 (en) * 2014-05-20 2019-10-29 Jessica Robinson Systems and methods for providing communication services
US11875700B2 (en) 2014-05-20 2024-01-16 Jessica Robinson Systems and methods for providing communication services
US10146318B2 (en) 2014-06-13 2018-12-04 Thomas Malzbender Techniques for using gesture recognition to effectuate character selection
US10024667B2 (en) 2014-08-01 2018-07-17 Toyota Motor Engineering & Manufacturing North America, Inc. Wearable earpiece for providing social and environmental awareness
US9922236B2 (en) 2014-09-17 2018-03-20 Toyota Motor Engineering & Manufacturing North America, Inc. Wearable eyeglasses for providing social and environmental awareness
US10024678B2 (en) 2014-09-17 2018-07-17 Toyota Motor Engineering & Manufacturing North America, Inc. Wearable clip for providing social and environmental awareness
US10490102B2 (en) 2015-02-10 2019-11-26 Toyota Motor Engineering & Manufacturing North America, Inc. System and method for braille assistance
US9586318B2 (en) 2015-02-27 2017-03-07 Toyota Motor Engineering & Manufacturing North America, Inc. Modular robot with smart device
US9972216B2 (en) 2015-03-20 2018-05-15 Toyota Motor Engineering & Manufacturing North America, Inc. System and method for storing and playback of information for blind users
US10395555B2 (en) * 2015-03-30 2019-08-27 Toyota Motor Engineering & Manufacturing North America, Inc. System and method for providing optimal braille output based on spoken and sign language
US9898039B2 (en) 2015-08-03 2018-02-20 Toyota Motor Engineering & Manufacturing North America, Inc. Modular smart necklace
CZ306519B6 (cs) * 2015-09-15 2017-02-22 Západočeská Univerzita V Plzni Způsob poskytnutí překladu televizního vysílání do znakové řeči a zařízení k provádění tohoto způsobu
DE102015016494B4 (de) 2015-12-18 2018-05-24 Audi Ag Kraftfahrzeug mit Ausgabeeinrichtung und Verfahren zum Ausgeben von Hinweisen
KR102450803B1 (ko) 2016-02-11 2022-10-05 한국전자통신연구원 양방향 수화 번역 장치 및 장치가 수행하는 양방향 수화 번역 방법
US10024680B2 (en) 2016-03-11 2018-07-17 Toyota Motor Engineering & Manufacturing North America, Inc. Step based guidance system
US9958275B2 (en) 2016-05-31 2018-05-01 Toyota Motor Engineering & Manufacturing North America, Inc. System and method for wearable smart device communications
US10561519B2 (en) 2016-07-20 2020-02-18 Toyota Motor Engineering & Manufacturing North America, Inc. Wearable computing device having a curved back to reduce pressure on vertebrae
US10432851B2 (en) 2016-10-28 2019-10-01 Toyota Motor Engineering & Manufacturing North America, Inc. Wearable computing device for detecting photography
USD827143S1 (en) 2016-11-07 2018-08-28 Toyota Motor Engineering & Manufacturing North America, Inc. Blind aid device
US10012505B2 (en) 2016-11-11 2018-07-03 Toyota Motor Engineering & Manufacturing North America, Inc. Wearable system for providing walking directions
US10521669B2 (en) 2016-11-14 2019-12-31 Toyota Motor Engineering & Manufacturing North America, Inc. System and method for providing guidance or feedback to a user
US10008128B1 (en) 2016-12-02 2018-06-26 Imam Abdulrahman Bin Faisal University Systems and methodologies for assisting communications
US10176366B1 (en) 2017-11-01 2019-01-08 Sorenson Ip Holdings Llc Video relay service, communication system, and related methods for performing artificial intelligence sign language translation services in a video relay service environment
US10855888B2 (en) * 2018-12-28 2020-12-01 Signglasses, Llc Sound syncing sign-language interpretation system
CN111385612A (zh) * 2018-12-28 2020-07-07 深圳Tcl数字技术有限公司 基于听力障碍人群的电视播放方法、智能电视及存储介质
WO2021014189A1 (en) * 2019-07-20 2021-01-28 Dalili Oujan Two-way translator for deaf people
US11610356B2 (en) 2020-07-28 2023-03-21 Samsung Electronics Co., Ltd. Method and electronic device for providing sign language
CN114639158A (zh) * 2020-11-30 2022-06-17 伊姆西Ip控股有限责任公司 计算机交互方法、设备和程序产品
US20220327309A1 (en) * 2021-04-09 2022-10-13 Sorenson Ip Holdings, Llc METHODS, SYSTEMS, and MACHINE-READABLE MEDIA FOR TRANSLATING SIGN LANGUAGE CONTENT INTO WORD CONTENT and VICE VERSA
IL283626A (en) * 2021-06-01 2022-12-01 Yaakov Livne Nimrod A method for translating sign language and a system for it
WO2023195603A1 (en) * 2022-04-04 2023-10-12 Samsung Electronics Co., Ltd. System and method for bidirectional automatic sign language translation and production

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200405988A (en) * 2002-09-17 2004-04-16 Ginganet Corp System and method for sign language translation
TWI250476B (en) * 2003-08-11 2006-03-01 Univ Nat Cheng Kung Method for generating and serially connecting sign language images
US20060134585A1 (en) * 2004-09-01 2006-06-22 Nicoletta Adamo-Villani Interactive animation system for sign language
US20060174315A1 (en) * 2005-01-31 2006-08-03 Samsung Electronics Co.; Ltd System and method for providing sign language video data in a broadcasting-communication convergence system
US20090012788A1 (en) * 2007-07-03 2009-01-08 Jason Andre Gilbert Sign language translation system
TW201009766A (en) * 2008-08-27 2010-03-01 Inventec Appliances Corp Sign language recognition system and method

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5982853A (en) * 1995-03-01 1999-11-09 Liebermann; Raanan Telephone for the deaf and method of using same
WO1997008895A1 (fr) * 1995-08-30 1997-03-06 Hitachi, Ltd. Systeme de telephone chirologique
DE19723678A1 (de) * 1997-06-05 1998-12-10 Siemens Ag Verfahren und Anordnung zur Kommunikation
JP2000149042A (ja) * 1998-11-18 2000-05-30 Fujitsu Ltd ワード手話映像変換方法並びに装置及びそのプログラムを記録した記録媒体
JP2001186430A (ja) * 1999-12-22 2001-07-06 Mitsubishi Electric Corp デジタル放送受信機
US7774194B2 (en) * 2002-08-14 2010-08-10 Raanan Liebermann Method and apparatus for seamless transition of voice and/or text into sign language
US6760408B2 (en) * 2002-10-03 2004-07-06 Cingular Wireless, Llc Systems and methods for providing a user-friendly computing environment for the hearing impaired
EP1847127B1 (en) * 2005-01-11 2020-08-05 TVNGO Ltd. Method and apparatus for facilitating toggling between internet and tv broadcasts
CN200969635Y (zh) * 2006-08-30 2007-10-31 康佳集团股份有限公司 一种具有手语解说功能的电视机
JP2008134686A (ja) * 2006-11-27 2008-06-12 Matsushita Electric Works Ltd 作画プログラム、プログラマブル表示器、並びに、表示システム
US8345827B2 (en) * 2006-12-18 2013-01-01 Joshua Elan Liebermann Sign language public addressing and emergency system

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200405988A (en) * 2002-09-17 2004-04-16 Ginganet Corp System and method for sign language translation
TWI250476B (en) * 2003-08-11 2006-03-01 Univ Nat Cheng Kung Method for generating and serially connecting sign language images
US20060134585A1 (en) * 2004-09-01 2006-06-22 Nicoletta Adamo-Villani Interactive animation system for sign language
US20060174315A1 (en) * 2005-01-31 2006-08-03 Samsung Electronics Co.; Ltd System and method for providing sign language video data in a broadcasting-communication convergence system
US20090012788A1 (en) * 2007-07-03 2009-01-08 Jason Andre Gilbert Sign language translation system
TW201009766A (en) * 2008-08-27 2010-03-01 Inventec Appliances Corp Sign language recognition system and method

Also Published As

Publication number Publication date
JP2013521523A (ja) 2013-06-10
EP2543030A1 (en) 2013-01-09
WO2011107420A1 (en) 2011-09-09
TW201135684A (en) 2011-10-16
CN102893313A (zh) 2013-01-23
KR20130029055A (ko) 2013-03-21
DE102010009738A1 (de) 2011-09-01
US20130204605A1 (en) 2013-08-08

Similar Documents

Publication Publication Date Title
TWI470588B (zh) 用於對失聰者將口語轉譯成手語的系統
US11887578B2 (en) Automatic dubbing method and apparatus
US9552807B2 (en) Method, apparatus and system for regenerating voice intonation in automatically dubbed videos
Chaume The turn of audiovisual translation: New audiences and new technologies
O’Connell Screen translation
WO2014155377A1 (en) Method and system for automatically adding subtitles to streaming media content
US20120105719A1 (en) Speech substitution of a real-time multimedia presentation
US9767825B2 (en) Automatic rate control based on user identities
US10354676B2 (en) Automatic rate control for improved audio time scaling
JP2006524856A (ja) 自動ダビングをオーディオ・ビジュアル・ストリームに対して行うシステム及び方法
EP2356654A1 (en) Method and process for text-based assistive program descriptions for television
US20130151251A1 (en) Automatic dialog replacement by real-time analytic processing
Haikuo Film translation in China: Features and technical constraints of dubbing and subtitling English into Chinese
JP2008299032A (ja) 語学教材および文字データ再生装置
US20240080514A1 (en) Methods and systems for synchronization of closed captions with content output
JP2006339817A (ja) 情報処理装置およびその表示方法
JP2013097240A (ja) 聴覚障がい者支援装置およびその動作方法
US11665392B2 (en) Methods and systems for selective playback and attenuation of audio based on user preference
Walczak et al. Artificial voices
KR20140024797A (ko) 동영상 파일 재생시 자막 표시 및 자막 음성 출력 방법
Televisió de Catalunya et al. D6. 1–Pilot-D Progress report
Malaeva MASTERARBEIT/MASTER’S THESIS
WO2009083832A1 (en) Device and method for converting multimedia content using a text-to-speech engine

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees