RU2455700C2 - Мобильный переговорный комплекс для глухонемых людей - Google Patents

Мобильный переговорный комплекс для глухонемых людей Download PDF

Info

Publication number
RU2455700C2
RU2455700C2 RU2007143824/12A RU2007143824A RU2455700C2 RU 2455700 C2 RU2455700 C2 RU 2455700C2 RU 2007143824/12 A RU2007143824/12 A RU 2007143824/12A RU 2007143824 A RU2007143824 A RU 2007143824A RU 2455700 C2 RU2455700 C2 RU 2455700C2
Authority
RU
Russia
Prior art keywords
infrared
speech
glasses
deaf
input
Prior art date
Application number
RU2007143824/12A
Other languages
English (en)
Other versions
RU2007143824A (ru
Inventor
Эдуард Борисович Попов (RU)
Эдуард Борисович Попов
Светлана Эдуардовна Попова (RU)
Светлана Эдуардовна Попова
Константин Валерьевич Белынский (RU)
Константин Валерьевич Белынский
Original Assignee
Эдуард Борисович Попов
Светлана Эдуардовна Попова
Константин Валерьевич Белынский
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Эдуард Борисович Попов, Светлана Эдуардовна Попова, Константин Валерьевич Белынский filed Critical Эдуард Борисович Попов
Priority to RU2007143824/12A priority Critical patent/RU2455700C2/ru
Publication of RU2007143824A publication Critical patent/RU2007143824A/ru
Application granted granted Critical
Publication of RU2455700C2 publication Critical patent/RU2455700C2/ru

Links

Images

Landscapes

  • Optical Communication System (AREA)

Abstract

Изобретение относится к техническим средствам для распознавания глухонемым человеком смысла речи собеседника, распознавания направления распространения звука речи и искусственного синтеза звуков речи. Мобильное переговорное устройство, размещаемое в ладони руки, включает инфракрасный приемник, инфракрасный передатчик, синтезатор речи. Очки включают два синхронно работающих инфракрасных приемника, расположенных раздельно по одному на правом и левом заушниках очков, и два синхронно работающих инфракрасных передатчика, расположенных раздельно по одному на правом и левом заушниках очков. Два синхронно работающих инфракрасных приемника и передатчика очков по инфракрасным каналам связи взаимодействуют с мобильным переговорным устройством. Для воспроизведения программно синтезированной речи служит внешнее акустическое устройство. Три инфракрасных передатчика имеют диафрагмы, подвижные вдоль оси конусного потока инфракрасного излучения, служащие для изменения величины телесного угла конусного потока инфракрасного излучения. Техническим результатом изобретения является повышение качества принимаемых звуков речи. 1 з.п. ф-лы, 2 ил.

Description

Изобретение относится к техническим средствам распознавания речи и обучения глухонемых и слабослышащих людей методам освоения самостоятельной речи посредством визуализации звуков речи с применением цветографического алфавита. Распознавание речи обеспечивается путем формирования цветографических изображений, являющихся функцией звуков речи. Изобретение предназначено для переговоров глухонемых людей с обычными здоровыми хорошо слышащими людьми и обучения глухонемых людей при освоении разговорной речи.
В ранее полученном патенте [1] авторы изложили способ и конструкцию устройства для распознавания смысла речи глухонемыми людьми. В заявке на изобретение [2] авторы изложили способ формирования цветографического алфавита, посредством которого глухой человек может распознавать речь. Эффективность применения устройства для распознавания речи и освоение разговорной речи в существенной степени будет зависеть от того, насколько точно человек будет распознавать визуально принятые в цветографическом алфавите цветографические символы отдельных звуков речи. Это можно будет сделать только при условии, что глухонемой человек самостоятельно по специальной программе прошел курс изучения цветографического алфавита и твердо усвоил цветографический алфавит. В случае освоения разговорной речи глухонемой человек должен самостоятельно отработать произношение отдельных звуков речи, каждый раз при этом корректируя свое произношение путем визуального сравнения цветографических символов, появляющихся на цветном дисплее и являющихся результатом собственного произношения звука с эталонным цветографическим символом того же звука, вызываемым из памяти компьютера. Предложенные авторами в описании к патенту [1] очки, предназначенные для переговоров глухонемых людей, имеют определенные недостатки, снижающие качество переговоров, а именно:
1. Радиоканал между блоком идентификации звуков речи и непосредственно специализированными очками для формирования изображения цветографических символов звуков речи подвержен влиянию внешних паразитных радиопомех, связанных с работой автомобильного транспорта, искрением скользящих токосъемников трамваев и троллейбусов, работой сварочных агрегатов и других источников радиопомех. Данные радиопомехи могут существенно снизить и исказить визуализацию звука, тем самым исказить смысл речи, что недопустимо.
2. Во время переговоров, если в непосредственной близости друг от друга находятся одновременно два или более глухонемых людей, носящих такие очки, радиоканалы этих очков могут пересекаться и, соответственно, информация, соответствующая речи двух или более говорящих, будет смешиваться и искажаться, что также недопустимо.
3. Хорошо видящие глухонемые люди не хотели бы носить такие очки и желают иметь мобильные переговорные устройства с цветными дисплеями, размещаемые в руке.
4. Взрослые и глухонемые от рождения люди имеют недоразвитый звуковоспроизводящий аппарат и, следовательно, им для переговоров нужен синтезатор речи, чего нет в устройстве [1]. В предлагаемой заявке на изобретение устраняются все четыре вышеуказанных недостатка путем создания переговорного комплекса для глухонемых людей.
Отличия предлагаемого авторами переговорного устройства от известных устройств [1], [4] для распознавания звуков речи и устройств для обучения глухонемых людей самостоятельной разговорной речи:
1. Исключение влияния паразитных радиопомех на работу переговорного устройства.
2. Исключение взаимовлияния электромагнитных полей двух и более близко расположенных переговорных устройств за счет изменения принципа действия бесконтактного канала передачи информации от блока идентификации звуков речи до специализированных очков. В новом варианте предлагается канал для передачи информации с применением инфракрасных передатчиков и приемников, хорошо известных в бытовой телеаппаратуре.
3. Наличие синтезатора речи.
4. Возможность пользоваться мобильным, помещающемся в ладони руки, переговорным устройством.
5. Возможность определения направления распространения звука речи.
6. Наличие батареи фотоэлементов для подзарядки источника питания.
В результате реализации изобретения появляется принципиальная возможность глухонемым людям проводить переговоры со здоровыми хорошо слышащими людьми и, как результат этого, появляется возможность для глухонемых людей научиться самостоятельно говорить, так как посредством данного переговорного комплекса у них появляется постоянная визуальная обратная связь по результатам произношения самим говорящим звуков и слов, что дает возможность глухонемому человеку самостоятельно корректировать неправильно произнесенные звуки и слова.
Техническим результатом изобретения является повышение качества принимаемых звуков речи.
Указанный технический результат достигается тем, что известный мобильный переговорный комплекс для глухонемых людей, включающий микрофоны, устройства для усиления и идентификации сигналов звука, устройства формирования изображения с целью визуального распознавания звуков речи, согласно изобретению имеет мобильное переговорное устройство, размещаемое в ладони руки, включающее инфракрасный приемник, инфракрасный передатчик, синтезатор речи, очки, включающие два синхронно работающих инфракрасных приемника, расположенных раздельно по одному на правом и левом заушниках очков, и два синхронно работающих инфракрасных передатчика, расположенных раздельно по одному на правом и левом заушниках очков, причем два синхронно работающих инфракрасных приемника и передатчика очков по инфракрасным каналам связи взаимодействуют с мобильным переговорным устройством, и внешнее акустическое устройство для воспроизведения программно синтезированной речи.
Три инфракрасных передатчика мобильного переговорного комплекса имеют диафрагмы, подвижные вдоль оси конусного потока инфракрасного излучения, служащие для изменения величины телесного угла конусного потока инфракрасного излучения.
Предлагаемый мобильный переговорный комплекс (МПК) 1 для распознавания речи и обучения глухонемых людей разговорной речи с применением цветографического алфавита представлен на Фиг.1 и Фиг.2.
Он включает четыре функциональных устройства:
1. Мобильное переговорное устройство (МПУ) 2.
2. Очки (О) 3.
3. Внешнее акустическое устройство (ВАУ) 4 для воспроизведения синтезированного речевого сигнала.
4. Внешний малогабаритный микрофон (М4) 5.
В конструкцию (МПУ) 2 входят: цветной жидкокристаллический дисплей (ЖКД) 6, клавиатура (КЛ) 7, правый боковой микрофон (М3) 8, левый боковой микрофон (М2) 9, центральный микрофон (M1) 10, инфракрасный передатчик (ИКПД1) 11, диафрагма 12, инфракрасный приемник (ИКПР1) 13, разъем электрический (Р1) 14 для (ВАУ) 4, разъем электрический (Р2) 15 для (М4) 5, встроенный акустический динамик (АД) 16, расположенный на обратной стороне (МПУ) 2.
В конструкцию (О) 3 входят: батарея фотоэлементов (БФ) 17, состоящая из отдельных фотоэлементов, расположенных по верхней кромке правого и левого окуляров очков и на внешних боковых поверхностях правого и левого заушников (О) 3; центральный микрофон (М5) 18, закрепленный на шаровом шарнире; правый микрофон (Мб) 19 установленный на правом заушнике 20; левый микрофон (М7) 21 установленный на левом заушнике 22; правый инфракрасный приемник (ИКПР2) 23, расположенный на внешней боковой поверхности правого заушника 20; левый инфракрасный приемник (ИКПР3) 24, расположенный на внешней боковой поверхности левого заушника 22; правый инфракрасный передатчик (ИКПД2) 25, расположенный на внешней боковой поверхности правого заушника; левый инфракрасный передатчик (ИКПД3) 26, расположенный на внешней боковой поверхности левого заушника.
Посредством (МПУ) 2 глухонемой человек, держа МПУ в руке, может вести переговоры с нормально слышащим человеком. При этом он будет распознавать речь визуально глядя на (ЖКД1) 6. Как было объяснено в заявке [13] он будет наблюдать на экране (ЖКД1) 6 бегущую строку в виде последовательности цветографических символов звуков речи, возникающих синхронно со звуками речи в строгом соответствии со звуками речи согласно принятому цветографическому алфавиту [2].
Зная цветографический алфавит, глухонемой человек будет визуально распознавать речь другого говорящего человека.
Для ответа собеседнику глухонемой человек должен перевести (МПУ) 2 в режим звукового ответа путем набора на клавиатуре соответствующей команды и далее набрать ответ посредством (КЛ) 7 в текстовом виде, глядя на экран (ЖКД1) 6. Затем он, нажимая кнопку «ответ», запускает программу исполнения ответа. При этом синтезатор звука речи (СЭР) 27 согласно набранному тексту ответа воспроизведет посредством (АД) 16 ответную программно синтезированную речь. Далее глухонемой человек переводит (МПУ) 2 в режим « слушаю речь» путем нажатия соответствующей клавиши на (КЛ) 7 и вновь, глядя на (ЖКД1) 6, распознает речь собеседника. Если беседа ведется с группой далеко расположенных собеседников, глухонемой человек может подключить для генерации ответа (ВАУ) 4.
При индивидуальной беседе или при просмотре программы телевидения глухонемой человек надевает (О) 3 и переводит (МПУ) 2 посредством клавиатуры в режим «индивидуальное прослушивание».
При этом включаются в работу инфракрасные передатчики (ИКПД1) 11, (ИКПД2) 25, (ИКПД3)26 и инфракрасные приемники (ИКПР1) 12, (ИКПР2) 23, (ИКПР3) 24.
(МПУ) 2 в данный момент должно находиться в кармане одежды, причем должно быть обязательно расположено так, чтобы инфракрасный конусный поток излучения 28 от (ИКПД1) 11 попадал на чувствительную зону (ИКПР2) 23 или (ИКПР3) 24, и при этом должна надежно передаваться информация от (МПУ) 2 к (О) 3 независимо от поворота головы глухонемого человека. Для этого величина телесного угла инфракрасного конусного потока излучения 28 регулируется путем осевого перемещения диафрагмы 12 относительно инфракрасного передатчика (ИКПД1) 11. При этом также важно, чтобы излучаемый инфракрасный информационный конусный поток 29 от (ИКПД2) 25 или конусный поток от (ИКПД3) 26 гарантированно попадали на чувствительную поверхность (ИКПР1) 13 независимо от поворота головы глухонемого человека и расположения (МПУ) 2 в левом или правом нагрудном кармане одежды глухонемого человека. На Фиг.1 представлено расположение (МПУ) 2 в левом кармане одежды и при этом (ИКПР1) 13 попадает в зону конусного потока 30. При расположении (МПУ) 2 в правом кармане (ИКПР1) 13 гарантированно попадет в зону действия инфракрасного информационного конусного потока 29 от (ИКПД2) 25, и канал связи не будет прерываться.
Действительно при произвольных движениях головы происходит смещение взаимного положения (ИКПР2) 23, (ИКПР3) 24, (ИКПД2) 25, (ИКПД3) 26 относительно (МПУ) 2 лежащим в кармане одежды и, следовательно, относительно (ИКПД1) 11 и (ИКПР1) 13. При этом инфракрасный информационный поток может не попасть на чувствительную зону (ИКПР2) 23 и связь между (МПУ) 2 и (О) 3 прервется, что недопустимо. Для гарантированного исключения подобной ситуации на (О) 3 устанавливаются два одинаковых синхронно работающих и разнесенных в пространстве приемника (ИКПР2) 23 и (ИКПР3) 24, причем (ИКПР2) 24 расположен на правом заушнике (О) 3, а (ИКПР3) 24 на левом заушнике (О) 3.
С этой же целью на (О) 3 установлены: (ИКПД2) 25 на правом заушнике и (ИКПД3) 26 на левом заушнике. Инфракрасные передатчики (ИКПД2) 25 и (ИКПД3) 26 работают всегда одновременно и синхронно.
Для того чтобы исключить пересечение информационных потоков всех работающих инфракрасных приемников и передатчиков реализуется принцип временного или частотного разделения каналов передачи информации от (МПУ) 2 к (О) 3 и обратно от (0)3 к (МПУ) 2.
Во время работы (МПК) 1 от (МПУ) 2 на два цветных жидкокристаллических дисплея (О) 3 передается синхронно с развитием речи закодированная в цифровом виде информация о последовательности цветографических символов звуков речи, представленная в виде бегущей строки. Со стороны (О) 3 к (МПУ) 2 передается информация о сигнале звуков, воспринимаемых микрофонами (М5) 18, (Мб) 19, (М7) 21. Малогабаритный микрофон (М4) 5 закрепляется на шейном отвороте одежды и применяется в случае, если не надо определять направление распространения звука или в случае аварийного отказа в работе звукового канала обработки информации в (О) 3.
На левом и правом окулярах (О) 3 установлены (Фиг.1): два цветных жидкокристаллических дисплея (Д1) 43 и (Д2) 44, расположенных вдоль верхних кромок правого и левого окуляров очков 3, причем излучающие поверхности двух цветных жидкокристаллических дисплеев (Д1) 43 и (Д2) 44 обращены вниз; две локальные оптические системы (Л1) 45 и (Л2) 46, предназначенные для зрительного восприятия бегущей строки [14] цветографических символов звуков речи во время прослушивания программ радиоприемников или звукового сопровождения телевизионных программ. Локальная оптическая система (Л1) 45, установленная на правом окуляре очков включает: отражающее зеркало 52 и корректирующую линзу 53, подвижно закрепленную в П-образном каркасе между продольными направляющими боковыми стенками каркаса. Локальная оптическая система (Л2) 46, установленная на левом окуляре очков, включает: отражающее зеркало 54 и корректирующую линзу 55, подвижно закрепленную в П-образном каркасе между продольными направляющими боковыми стенками каркаса. Каркас локальной оптической системы (Л1) 45 расположен с внутренней стороны правого окуляра очков вдоль кожного покрова с правой стороны носа человека [14]. Каркас локальной оптической системы (Л2) 46 расположен с внутренней стороны левого окуляра очков вдоль кожного покрова с левой стороны носа человека [14].
Локальные оптические системы (Л1) 45 и (Л2) 46 жестко закреплены посредством своих каркасов к нижним кромкам правого и левого окуляров очков соответственно. Для правого окуляра очков цветное изображение бегущей цветографической строки отражается узким зеркальцем 52 и затем, проходя через корректирующую линзу 53, фокусируется линзой 53 и попадает в зрачок al правого глаза глухого человека. Корректирующая линза 53 может перемещаться вдоль стенок каркаса (Л1) 45 с целью настройки на резкость изображения цветографической строки.
Границы изображения бегущей цветографической строки на Фиг.1 обозначены пунктирными линиями 56. Для левого окуляра очков цветное изображение бегущей цветографической строки отражается узким зеркальцем 54 и затем, проходя через корректирующую линзу 55, фокусируется линзой 55 и попадает в зрачок а2 левого глаза глухого человека.
Корректирующая линза 55 может также перемещаться вдоль стенок каркаса (Л2) 46 с целью настройки на резкость изображения цветографической строки. Предусмотренное перемещение корректирующих линз 53 и 55 вдоль боковых направляющих сторон каркасов локальных оптических систем (Л1) 45 и (Л2) 46 позволяет после настройки оптических систем на резкость создать четкое изображение бегущей цветографической строки одновременно в двух глазах человека [14].
Во время прослушивания речи глухой человек, наблюдая бегущую цветографическую строку, соответствующую звукам данной речи, зрительно распознает смысл речи собеседника или смысл звукового сопровождения с экрана телевизора.
В (МПУ) 2 центральный микрофон 10 служит для восприятия звуков речи, приходящих спереди. Его лепестковая диаграмма звуковой чувствительности направлена вперед по отношению к положению слушателя. Так как данный микрофон 10 смещен по отношению боковых микрофонов 8 и 9 вперед, то это позволяет за счет стереофонического эффекта определить с помощью трех микрофонов 8, 9, 10 также направление распространения звука, приходящего спереди, сзади, справа или слева по отношению к слушателю. Направление распространения звука, определяемое путем реализации стереофонического эффекта посредством трех микрофонов и микропроцессора 31, отображается в виде высвечивания на цветном дисплее 6 двух [3] цветных вертикальных индикаторных полос 57, 58.
Глухонемой человек во время использования (МПУ) 2 держит его горизонтально и направляет центральный микрофон 10 предположительно на говорящего человека. Если звук приходит справа, то вертикальная индикаторная полоса 57, расположенная вдоль правой стороны дисплея 6 будет увеличиваться по ширине и, одновременно, будет уменьшаться ширина левой индикаторной полосы 58. Если звук приходит слева, то, наоборот, будет увеличиваться ширина левой 58 индикаторной полосы и будет уменьшаться ширина правой 57 индикаторной полосы. Если звук приходит сзади, то обе индикаторные полосы 57, 58 изменяют свой цвет на другой цвет, существенно отличный от цвета этих полос, принятого для направления звука, приходящего спереди.
Таким образом, (МПК) 1 может работать в трех режимах:
(а) режим распознавания речи и направления распространения звука речи посредством только одного (МПУ) 2;
(б) режим распознавания речи и направления распространения звука речи посредством очков (О) 3 при функциональном участии (МПУ) 2;
(в) режим синтезирования и последующего звукового воспроизведения звука речи с помощью (МПУ) 2.
Электронные элементы для обработки информации располагаются в корпусе левого 22 и правого 20 заушников очков.
Чувствительные поверхности инфракрасных приемников 23, 24 и излучающие поверхности инфракрасных передатчиков 25, 26 направлены вниз в сторону (МПУ) 2. Инфракрасные передатчики 25, 26 подобно (ИКПД1) 11 имеют диафрагмы для настройки величины телесных углов потоков излучения 29, 30.
На Фиг.2 представлена структурная схема мобильного переговорного комплекса (МПК) 1, включающего мобильное переговорное устройство (МПУ) 2, очки (О) 3, внешнее акустическое устройство (ВАУ) 4 и внешний микрофон (М4) 5.
Согласно структурной схеме (Фиг.2) мобильное переговорное устройство (МПУ) 2 включает все описанные и пронумерованные на Фиг.1 функциональные звенья и дополнительно имеет следующие функциональные звенья: микропроцессор (МП) 31, усилители звукового сигнала (У1) 32, (У2) 33, (У3) 34, (У4) 35; согласующее устройство (СУ1) 36; контроллеры управления (КУ1) 37, (КУ2) 38, (КУ3) 39.
Согласно структурной схеме выход (M1) 10 соединен с входом 1 усилителя (У1) 32, выход (У1) 32 соединен с входом 1 микропроцессора 31, выход (М2) 9 соединен с входом 1 усилителя (У2) 33, выход (У2) 33 соединен с входом 6 микропроцессора 31, выход (М3) 8 соединен с входом 1 усилителя (У3) 34, выход (У3) 34 соединен с входом 4 микропроцессора 31, выход (М4) 5 через разъем (Р2) 14 соединен с входом 1 усилителя (У4) 35, выход (У4) 35 соединен с входом 3 микропроцессора 31. Выход (КЛ) 7 соединен с входом 5 микропроцессора 31, выход (ИКПР1) 13 соединен с входом 1 согласующего устройства (СУ1) 36, выход (СУ1) 36 соединен с входом 2 микропроцессора 31. Выход 1 микропроцессора 27 соединен с входом (КУ1) 37, выход (КУ1) 37 соединен с входом (ЖКД1) 6. Выход 2 микропроцессора 31 соединен с входом (КУЗ) 39, выход (КУ3) 39 соединен с входом синтезатора речи (С3Р) 27, выход синтезатора речи (С3Р) 27 соединен одновременно с входом (АД) 15 и через разъем (Р1) 13 с входом (ВАУ) 4. Выход 3 микропроцессора 31 соединен с входом (КУ2) 38, выход (КУ2) 38 соединен с входом (ИКПД1)11.
(МПУ) 2 работает следующим образом: (МПУ) 2 в своем составе имеет микропроцессор (МП) 31, посредством которого по специальной программе осуществляется идентификация звуков речи и определение направления распространения звука речи. Посредством центрального микрофона (M1) 10, правого бокового микрофона (МЗ) 8, левого бокового микрофона (М2) 9 улавливаются звуки речи. Электрические сигналы звука речи усиливаются соответствующими усилителями (У1) 32, (У2) 33, (У3) 34, (У4) 35 и подаются на соответствующие входы входного порта (МП) 31. От (ИКПР1) 13 через согласующее устройство (СУ1) 36 сигнал подается на вход 2 (МП) 31, на вход 5 подается сигнал с клавиатуры (КЛ) 7. Посредством клавиатуры 7 осуществляется управление всеми режимами работы (МПУ) 2 и (МПК) 1.
С выхода 1 микропроцессора (МП) 31 цифровой сигнал, несущий информацию о цветографических символах звуков речи, через контроллер управления (КУ1) 37 поступает на (ЖКД1) 6 и соответственно формирует бегущую строку из цветографических символов звуков речи в соответствии с принятым цветографическим алфавитом, заложенным в память (МП) 31.
Одновременно на жидкокристаллическом дисплее 6 вдоль его правой и левой строи высвечиваются правая 57 и левая 58 индикаторные полосы, сигнализирующие о направлении распространения звука речи [3].
При работе (МПУ) 2 в режиме «ответ» включаются в работу синтезатор речи (С3Р) 27 и внутренний акустический динамик (АД) 16. Текст речи набирается посредством клавиатуры 7, программно переводится в звуковые символы и далее посредством синтезатора речи 27 и (АД) 16 или (ВАУ) 4 переводится в звуковую форму. С выхода 2 (МП) 31 цифровой сигнал программно синтезированной речи через контроллер управления (КУ3) 39, (С3Р) 27 поступает одновременно на вход (АД) 15 и через электрический разъем (Р1) 14 на вход (ВАУ) 4. Посредством (АД) 16 и (ВАУ) 4 осуществляется процедура звуковых переговоров.
При работе (МПУ) в режиме « индивидуальное прослушивание» посредством (КЛ) 6 включается в работу (ИКПД1) 11 и через приемники (ИКПР2) 23, (ИКПР3) 24 включается в работу (О) 3. В данном режиме работы с выхода 3 (МП) 31 цифровой сигнал через контроллер управления (КУ2) 38 поступает на передатчик (ИКПД1) 11 и далее через инфракрасный канал связи попадает на приемники (ИКПР2) 23, (ИКПР3) 24, работающие в паре синхронно.
Согласно структурной схеме (Фиг.2) очки (О) 3 включают все описанные и пронумерованные на Фиг.1 функциональные звенья и дополнительно имеют следующие функциональные звенья: согласующее устройство (СУ2) 40, контроллеры управления (КР1) 41, (КР2) 42; цветные жидкокристаллические дисплеи (Д1) 43 и (Д2) 44, локальные оптические системы (Л1) 45, (Л2) 46; усилители сигнала звука (У5) 47, (У6) 48, (У7) 49, усилитель мощности (УМ) 50, источник питания (ИП) 51. Согласно структурной схеме (Фиг.2) выход инфракрасного приемника (ИКПР2) 23 соединен с входом 1 (СУ2) 40, выход инфракрасного приемника (ИКПР3) 24 соединен с входом 2 (СУ2) 40, выход (СУ2) 40 соединен с входом (КР1) 41, выход 1 (КР1) 41 соединен с входом (Д1) 43, выход 2 (КР1) 41 соединен с входом (Д2) 44.
Выход (М5) 18 соединен с входом (У5) 47, выход (У5) 47 соединен с входом 1 контроллера (КР2) 42. Выход (Мб) 19 соединен с входом (У6) 48, выход (У6) 48 соединен с входом 2 контроллера (КР2) 42. Выход (М7) 21 соединен с входом (У7) 49, выход (У7) 49 соединен с входом 3 контроллера (КР2) 42. Выход контроллера (КР2) 42 соединен с входом усилителя мощности (УМ) 50, выход усилителя мощности (УМ) 50 соединен одновременно с входом (ИКПД2) 25 и с входом (ИКПД3) 26. Выход батареи фотоэлементов (БФ) 17 соединен с источником питания (ИП) 51.
Работают (О) 3 следующим образом: инфракрасные приемники (ИКПР2) 23, (ИКПР3) 24, принимают от передатчика (ИКПД1) 11 информацию о цветографических символах речи, выстроенных в бегущей строке в соответствии с речью говорящего собеседника. Далее эта информация через согласующее устройство (СУ2) 40 поступает на контроллер (КР1) 41 и с двух выходов 1 и 2 (КР1) 41 поступает далее на два жидкокристаллических дисплея (Д1) 43 и (Д2) 44, расположенных по одному вдоль верхней кромки левого и правого окуляров (О) 3.
Глухонемой человек, глядя на цветные дисплеи (Д1) 43 и (Д2) 44, воспринимает визуально последовательность цветографических символов речи, движущихся в режиме «бегущей строки», и, зная цветографический алфавит, распознает смысл речи и направление распространения звука речи [2], [3]. Сигналы звука речи, поступающие с микрофонов (М5) 18, (Мб) 19, (М7) 21 через усилители (У5) 47, (У6) 48, (У7) 49, поступают на контроллер (КР2) 42. Наличие на (О) 3 трех микрофонов 18, 19, 21, разнесенных в пространстве, позволяет посредством (КР2) 42 определить направление распространения звука. С выхода (КР2) 42 обработанный цифровой сигнал через усилитель мощности (УМ) 50 поступает на передатчики (ИКПД2) 25, (ИКПД3) 26, работающие синхронно. Далее информация о речевом сигнале по инфракрасному каналу связи поступает на вход приемника (ИКПР1) 13, затем через (СУ1) 36 она попадает на обработку в (МП) 31, посредством которого осуществляется идентификация звуков речи и формирование бегущей строки из последовательности выстроенных цветографических символов звуков речи. Очки (О) 3 имеют батарею фотоэлементов (БФ) 17 для подзарядки и работающую в паре с источником питания (ИП) 51.
Таким образом, глухонемой человек посредством (МПК) 1 может визуально распознавать смысл речи другого говорящего собеседника и может передавать ему звуковые синтезированные сообщения через (АД) 16 или (ВАУ) 4 с помощью мобильного переговорного комплекса, конструкция которого приведена на Фиг.1 и структурная схема которого приведена на Фиг.2. Элементы мобильного переговорного комплекса могут быть выполнены с помощью аналоговых и цифровых микросхем, студийных малогабаритных микрофонов, типовых микропроцессоров, инфракрасных приемников и передатчиков, цветных жидкокристаллических дисплеев, широко применяемых в цифровых фотоаппаратах, сотовых телефонах и телевизорах.
Литература
1. Патент RU №2298837, МПК G09B 21/00, опубликован 10.05.2007.
2. Заявка RU №2007126270/12(028593), дата подачи заявки 10.07.2007.
3. Заявка RU №2006140930/12(044703), дата подачи заявки 20.11.2006.
4. Патент RU №2111548, МПК 6 G09B 19/04, опубликован 20.05.98.
5. Патент RU №2231133, МПК 7 G10L 15/08, G10L 101:023, опубликован 2004.06.20.
6. Патент RU №2230375, МПК 7 G10L 15/00, 17/00 опубликован в 2004 г., БИ №16 (II ч.), стр.437.
7. Патент RU №2234746, МПК 7 G10L 19/02, опубликован 2004.08.20.
8. Патент РФ №2047912, МПК G10L 7/06, опубликован 10.11.1995.
9. Патент РФ №2161826, МПК G10L 17/00, опубликован 10.01.2001.
10. Патент США №6411930, МПК G10L 15/08, 25.06.2002.
11. Патент США №5995927, МПК G10L 9/00, 30.11.199.
12. Патент США №6389392, МПК G10L 17/00, 14.05.2002.
13. Патент RU №2036496, МПК 6 G02C 7/16, опубликован 27.05.95, бюл. №15.
14. Патент RU №2268553, МПК Н03К 17/94, H04N 5/50, опубликован 20.01.2006.
15. Заявка RU №2007138659/12(042283), дата подачи заявки 17.10.2007.

Claims (2)

1. Мобильный переговорный комплекс для глухонемых людей, включающий микрофоны, устройства для усиления и идентификации сигналов звука, устройства формирования изображения с целью визуального распознавания звуков речи, отличающийся тем, что имеет мобильное переговорное устройство, размещаемое в ладони руки, включающее инфракрасный приемник, инфракрасный передатчик, синтезатор речи, очки, включающие два синхронно работающих инфракрасных приемника, расположенных раздельно по одному на правом и левом заушниках очков, и два синхронно работающих инфракрасных передатчика, расположенных раздельно по одному на правом и левом заушниках очков, причем два синхронно работающих инфракрасных приемника и передатчика очков по инфракрасным каналам связи взаимодействуют с мобильным переговорным устройством, и внешнее акустическое устройство для воспроизведения программно синтезированной речи.
2. Мобильный переговорный комплекс по п.1, отличающийся тем, что три его инфракрасных передатчика имеют диафрагмы, подвижные вдоль оси конусного потока инфракрасного излучения, служащие для изменения величины телесного угла конусного потока инфракрасного излучения.
RU2007143824/12A 2007-11-26 2007-11-26 Мобильный переговорный комплекс для глухонемых людей RU2455700C2 (ru)

Priority Applications (1)

Application Number Priority Date Filing Date Title
RU2007143824/12A RU2455700C2 (ru) 2007-11-26 2007-11-26 Мобильный переговорный комплекс для глухонемых людей

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
RU2007143824/12A RU2455700C2 (ru) 2007-11-26 2007-11-26 Мобильный переговорный комплекс для глухонемых людей

Publications (2)

Publication Number Publication Date
RU2007143824A RU2007143824A (ru) 2009-06-10
RU2455700C2 true RU2455700C2 (ru) 2012-07-10

Family

ID=41024055

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2007143824/12A RU2455700C2 (ru) 2007-11-26 2007-11-26 Мобильный переговорный комплекс для глухонемых людей

Country Status (1)

Country Link
RU (1) RU2455700C2 (ru)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SU1690748A1 (ru) * 1987-08-14 1991-11-15 Киевский научно-исследовательский институт отоларингологии им.проф.А.И.Коломийченко Способ пространственной акустической ориентации и устройство дл его осуществлени
US6629076B1 (en) * 2000-11-27 2003-09-30 Carl Herman Haken Method and device for aiding speech
WO2005094157A2 (de) * 2004-03-31 2005-10-13 Swisscom Mobile Ag Brillengestell mit integriertem akustischem kommunikationssystem zur kommunikation mit einem mobilfunkgerät und entsprechendes verfahren

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SU1690748A1 (ru) * 1987-08-14 1991-11-15 Киевский научно-исследовательский институт отоларингологии им.проф.А.И.Коломийченко Способ пространственной акустической ориентации и устройство дл его осуществлени
US6629076B1 (en) * 2000-11-27 2003-09-30 Carl Herman Haken Method and device for aiding speech
WO2005094157A2 (de) * 2004-03-31 2005-10-13 Swisscom Mobile Ag Brillengestell mit integriertem akustischem kommunikationssystem zur kommunikation mit einem mobilfunkgerät und entsprechendes verfahren

Also Published As

Publication number Publication date
RU2007143824A (ru) 2009-06-10

Similar Documents

Publication Publication Date Title
US6275258B1 (en) Voice responsive image tracking system
US20100195836A1 (en) Wireless communication system and method
US10257637B2 (en) Shoulder-mounted robotic speakers
KR102615844B1 (ko) 맹인 또는 시각 장애인에게 소리 또는 촉각에 의하여 주변환경을 이해할 수 있도록 하는 휴대용 시스템
CN102724604B (zh) 一种视频会议的声音处理方法
CN103004238A (zh) 利用便携式通信装置和定向声音输出来通信
US20100150387A1 (en) System and method for providing hearing assistance to a user
WO2011153905A1 (zh) 一种音频信号的混音处理方法及装置
KR102386110B1 (ko) 휴대용 음향기기
KR20120053587A (ko) 디스플레이장치 및 그 사운드 제어방법
WO2015090182A1 (zh) 多信息同步编码学习装置及方法
JP6290827B2 (ja) オーディオ信号を処理する方法及び補聴器システム
US20200227067A1 (en) Communication aid system
KR101354927B1 (ko) 청각장애인을 위한 머리 착용형 디스플레이장치
WO2019198194A1 (ja) 音声出力装置
RU2455700C2 (ru) Мобильный переговорный комплекс для глухонемых людей
JPH11234640A (ja) 通信制御システム
JP3952870B2 (ja) 音声伝送装置、音声伝送方法及びプログラム
EP4304207A1 (en) Information processing device, information processing method, and program
KR101252762B1 (ko) 화상 회의 단말장치의 화상 합성 장치 및 방법
US20240098409A1 (en) Head-worn computing device with microphone beam steering
JPH04238475A (ja) ハンドセット形テレビ装置とそれを用いたテレビ電話装置
JPH11313272A (ja) 映像音声出力装置
JP2019096220A (ja) 文字情報提供装置および方法
RU2345422C2 (ru) Способ и устройство формирования изображения для распознавания направления распространения звука речи

Legal Events

Date Code Title Description
MM4A The patent is invalid due to non-payment of fees

Effective date: 20171127