RU2713874C2 - Mobile voice information device - Google Patents

Mobile voice information device Download PDF

Info

Publication number
RU2713874C2
RU2713874C2 RU2017127207A RU2017127207A RU2713874C2 RU 2713874 C2 RU2713874 C2 RU 2713874C2 RU 2017127207 A RU2017127207 A RU 2017127207A RU 2017127207 A RU2017127207 A RU 2017127207A RU 2713874 C2 RU2713874 C2 RU 2713874C2
Authority
RU
Russia
Prior art keywords
voice
information
microcomputer
translation
voice information
Prior art date
Application number
RU2017127207A
Other languages
Russian (ru)
Other versions
RU2017127207A3 (en
RU2017127207A (en
Inventor
Сергей Иванович Демидов
Original Assignee
Сергей Иванович Демидов
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Сергей Иванович Демидов filed Critical Сергей Иванович Демидов
Priority to RU2017127207A priority Critical patent/RU2713874C2/en
Publication of RU2017127207A publication Critical patent/RU2017127207A/en
Publication of RU2017127207A3 publication Critical patent/RU2017127207A3/ru
Application granted granted Critical
Publication of RU2713874C2 publication Critical patent/RU2713874C2/en

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility

Landscapes

  • Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Machine Translation (AREA)

Abstract

FIELD: physics.
SUBSTANCE: invention relates to computer engineering. Technical result is achieved due to mobile voice information device intended for simultaneous translation and sounding of voice information from one language to another from different sources and containing: microcomputer with WI-FI and Bluetooth modules and peripheral interfaces, controlled by voice commands through voice virtual assistant and configured to obtain information from external sources and connected to an output speaker configured to receive voice information, connected to a microphone comprising a bone conduction microphone and configured to receive spoken speech voices, wherein the microcomputer, through built-in WI-FI and Bluetooth modules, is configured to find the desired music, or news, or background information from the Internet through standard communication with a personal mobile phone, provide its translation and voice to user through microphone of bone conductivity in background mode.
EFFECT: technical result is broader technical means for simultaneous translation and voice recognition of voice information from one language to another from different sources.
1 cl, 1 dwg

Description

Область техники, к которой относится изобретениеFIELD OF THE INVENTION

Изобретение относится к области мобильных голосовых языковых переводчиков.The invention relates to the field of mobile voice language translators.

Существующие российские изобретения и зарубежные патенты не рассматривают мобильные информационные устройства, а усовершенствовают голосовые языковые переводчики.Existing Russian inventions and foreign patents do not consider mobile information devices, but improve voice language translators.

Предлагаемое информационное устройство представляет собой персональное мобильное информационное устройство решающий задачу не только голосового перевода, но и ряда других важных потребительских функций пользователя.The proposed information device is a personal mobile information device that solves the problem of not only voice translation, but also a number of other important consumer functions of the user.

Уровень техникиState of the art

Из существующего уровня техники известно устройство голосового языкового перевода описанном в изобретение RU 2016 138 166 опубл. 10.01.2017 МПК G06F 17/28 (2006.01).From the prior art it is known device voice language translation described in the invention RU 2016 138 166 publ. 01/10/2017 IPC G06F 17/28 (2006.01).

Предлагаемое устройство отличается от предлагаемого изобретения тем, что устройство имеет ряд отличительных особенностей:The proposed device differs from the proposed invention in that the device has a number of distinctive features:

- применение устройства для речевого диалога пользователя с собеседником на разных языках при отсутствии дополнительных устройств у последнего.- use of the device for voice dialogue of the user with the interlocutor in different languages in the absence of additional devices in the latter.

- предлагаемое устройство работает от микрокомпьютера, что позволяет расширить его коммуникационные и потребительские возможности, и не требует для выполнения своих функций смартфона, iPhone и планшетного компьютера.- the proposed device works from a microcomputer, which allows to expand its communication and consumer capabilities, and does not require a smartphone, iPhone and tablet computer to perform its functions.

Наиболее близкий к заявленному техническому решению является устройство голосового переводчика языков, которые отражены в патенте US 2017/0039866 А1 опубл. 09.02.2017 Int. C1 G09B 5/049 (2006.01) G06F 17/28 (2006.01).Closest to the claimed technical solution is the device voice translator languages, which are reflected in patent US 2017/0039866 A1 publ. 02.09.2017 Int. C1 G09B 5/049 (2006.01) G06F 17/28 (2006.01).

Предлагаемое устройство отличается от патента:The proposed device differs from the patent:

- присутствием синхронного озвучивания переведенного ответа пользователя на язык собеседника;- the presence of synchronous scoring of the translated user response into the language of the interlocutor;

- отсутствием сенсорного дисплея, так как управление предлагаемым устройством осуществляется программно голосовым виртуальным помощником-ассистентом;- the lack of a touch screen, since the proposed device is controlled by a software voice virtual assistant;

- наличием микрокомпьютера, что позволяет для увеличения его пользовательских возможностей использовать вместе с Bluetooth и WI-FI.- the presence of a microcomputer, which allows you to use it with Bluetooth and WI-FI to increase its user capabilities.

Раскрытие изобретенияDisclosure of Invention

Мобильное голосовое информационное устройство представляет собой персональный мобильный информационный комплекс, который кроме голосового языкового перевода в синхронном разговорном и визуальном режимах, способен обеспечивать пользователя справочной информацией из интернета по WI-FI, и других пользовательских устройств со встроенным Bluetooth.Mobile voice information device is a personal mobile information complex, which, in addition to voice language translation in synchronous colloquial and visual modes, is able to provide the user with reference information from the Internet via WI-FI, and other user devices with built-in Bluetooth.

Предлагаемое устройство имеет в своем составе: микрокомпьютер со встроенными модулями Wi-Fi и Bluetooth (фиг. 1 поз. 2) и интерфейсами периферии; наушники с технологией костной проводимостью звука (фиг. 1 поз. 12); стандартные микрофоны (фиг. 1 поз. 3 и 7); фото камеру (фиг. 1 поз. 9); выходной динамик (фиг. 1 поз. 8); разъемы для micro USB (фиг. 1 поз. 4); micro SD (фиг. 1 поз. 5); аккумулятор (фиг. 1 поз. 1).The proposed device includes: a microcomputer with built-in Wi-Fi and Bluetooth (Fig. 1, position 2) and peripheral interfaces; headphones with bone conduction sound technology (FIG. 1, item 12); standard microphones (Fig. 1, items 3 and 7); photo camera (Fig. 1, item 9); output speaker (Fig. 1, item 8); connectors for micro USB (Fig. 1, item 4); micro SD (Fig. 1, item 5); battery (Fig. 1, item 1).

Интерфейс micro USB позволяет заряжать аккумулятор устройства, делать апгрейд операционных систем установленных на микрокомпьютере, установку программ, осуществлять связь с внешними устройствами.The micro USB interface allows you to charge the device’s battery, upgrade the operating systems installed on the microcomputer, install programs, and communicate with external devices.

Интерфейс micro SD позволяет работать с дополнительными базами данных, увеличивать USB флеш-накопителями объем оперативной памяти.The micro SD interface allows you to work with additional databases, to increase the amount of RAM memory by USB flash drives.

Устанавливаемые программы языкового перевода на микрокомпьютере устройства, воспринимая через микрофонную гарнитуру входные голосовые сигналы разговорной речи, автоматически определяют язык и синхронно озвучивают перевод на родной язык пользователя в наушник.The installed language translation programs on the microcomputer of the device, perceiving the input voice signals of spoken speech through the microphone, automatically determine the language and synchronously voice the translation into the user's native language into the headphone.

Использование в устройстве микрофонной гарнитуры костной проводимости позволяет пользователю проговаривать голосовой ответ на родном языке в режиме тихого ответа. Устройство, через эту гарнитуру, получая голосовой речевой сигнал от пользователя, программно переводит его на язык собеседника и озвучивает перевод, через встроенный в устройство динамик, который усиливая громкость ответа пользователя, исключает дискомфорт диссонанса при проговаривании ответа пользователем на родном языке и озвучивании перевода компьютерным переводчиком.The use of bone conduction microphone headset in the device allows the user to pronounce the voice response in their native language in the silent response mode. The device, through this headset, receiving a voice speech signal from the user, programmatically translates it into the interlocutor’s language and reads the translation through the speaker built into the device, which increases the volume of the user's response, eliminates the discomfort of speaking the user in the native language and voicing the translation by a computer translator .

Для комфортного диалога с собеседником встроенный голос в используемых программах переводчика можно дополнительно программно тонально подстроить под тембр пользователя, что позволяет его идентифицировать как конкретного человека.For a comfortable dialogue with the interlocutor, the built-in voice in the used translator programs can be further programmatically tuned to the user's timbre, which allows him to be identified as a specific person.

Подстройка параметров выходного голоса из динамика устройства возможна как в автоматическом режиме, так и в ручном с использованием USB устройства для настройки встраиваемой программы, синтезирующий выходной звук.Adjusting the parameters of the output voice from the device’s speaker is possible both in automatic mode and in manual mode using a USB device to configure an embedded program that synthesizes the output sound.

Через стандартные микрофоны, устройство воспринимает разговорную речь для перевода как от собеседника, так и в фоновом режиме от окружения пользователя, что создает эффект присутствия в незнакомой языковой среде - например в месте скопления людей.Through standard microphones, the device perceives colloquial speech for translation both from the interlocutor and in the background from the user's environment, which creates the effect of being in an unfamiliar language environment - for example, in crowded places.

Устройство, с помощью фото камеры, осуществляет языковой перевод с визуальной текстовой фотоинформации (например перевод для туристов уличных вывесок, рекламных щитов, объявлений и так далее) и программно озвучивает его пользователю.The device, using a photo camera, carries out a language translation from visual textual photo information (for example, translating street signs, billboards, advertisements, etc. for tourists) and programmatically voices it to the user.

Устройство позволяет осуществлять в реальном времени языковый перевод озвучки продукции киноиндустрии - фильмов. Голосовой языковый перевод при просмотре фильмов для пользователя производиться синхронно с помощью программы переводчика.The device allows for real-time language translation of the voice acting of the film industry products - films. The voice language translation when watching movies for the user is carried out synchronously using the translator program.

Устройство может использоваться как его как обучающее устройство.The device can be used as it as a training device.

Выполнять справочную функцию со специализированными языковыми словарями в интернете, например при разговоре со специалистами по специализированным темам.Perform a reference function with specialized language dictionaries on the Internet, for example, when talking with specialists in specialized topics.

Устройство управляется пользователем с помощью голосовых команд через голосовой программный виртуальный помощник-ассистент, который устанавливается под конкретную используемую на микрокомпьютере оперативную систему.The device is controlled by the user with the help of voice commands through the voice program virtual assistant assistant, which is installed under the specific operating system used on the microcomputer.

В настоящее время на компьютерном рынке программный помощник-ассистент присутствует как на русско, так и англо говорящих пользователей и предназначена для голосового управления в диалоговом режиме с пользователем различными программными приложениями, которые установлены на микрокомпьютере устройства.Currently, in the computer market, a software assistant-assistant is present both in Russian and English-speaking users and is intended for voice control in dialogue with the user of various software applications that are installed on the microcomputer of the device.

В диалоговом режиме с пользователем, она позволяет, помощью модуля Wi-Fi, получать из интернета с справочную голосовую информацию со справочных сайтов, как при непосредственно при разговоре, так и в фоновом режиме, находить требуемую пользователю звуковую информацию по Wi-Fi (конкретные музыкальные композиции, новостные радио программы с синхронным переводом на различных языках.In the dialogue mode with the user, it allows, using the Wi-Fi module, to receive help from the Internet with help voice information from help sites, both during direct conversation and in the background, to find the sound information required by the user via Wi-Fi (specific music compositions, news radio programs with simultaneous translation in various languages.

Встроенный модуль Bluetooth в микрокомпьютер устройства позволяет получать информацию от любых гаджетов медицинского, спортивного и специального назначения, как например дозиметра радиации, и озвучивать ее голосовым помощником программой ассистента.The built-in Bluetooth module in the microcomputer of the device allows you to receive information from any gadgets of medical, sports and special purposes, such as a radiation dosimeter, and to voice it with a voice assistant program assistant.

Устройство через модуль Bluetooth, также способно выполнять стандартную связь с личным мобильным телефоном для радиосвязи.The device via the Bluetooth module is also capable of performing standard communication with a personal mobile phone for radio communication.

Микрокомпьютер устройства позволяет подключать внешние источники, менять программное обеспечение, обновлять базы данных, наращивать оперативную память.The microcomputer of the device allows you to connect external sources, change software, update databases, and increase RAM.

Устройство работает как в офлайн, так и в онлайн режимах.The device works both offline and online.

Описание чертежейDescription of drawings

На чертеже фиг. 1 представлена принципиальная схема микрокомпьютера устройства, применяемого в примере предлагаемого устройства.In the drawing of FIG. 1 shows a schematic diagram of a microcomputer of the device used in the example of the proposed device.

Устройство оснащено микрокомпьютером типа Intel Edison или Onion Omega на операционных системах Windows, Os X, микрофонной гарнитурой, фото камерой с функцией видео съемки, динамиком, аккумулятором.The device is equipped with a microcomputer such as Intel Edison or Onion Omega on Windows, Os X operating systems, a microphone headset, a photo camera with video shooting function, a speaker, a battery.

Осуществление изобретенияThe implementation of the invention

На базе предлагаемого персонального мобильного информационного устройства предлагается пример его применения (фиг. 1).Based on the proposed personal mobile information device, an example of its application is proposed (Fig. 1).

Микрокомпьютеры используются на операционных системах Windows, Os X. Примером могут служит использование микрокомпьютеров Intel Edison или Onion Omega.Microcomputers are used on Windows, Os X operating systems. An example is the use of Intel Edison or Onion Omega microcomputers.

Программный компьютерный рынок предлагает на платной и бесплатной основе ряд программ языкового переводчика, программ виртуального помощника ассистента, программ перевода с фото и видео материала, поисковых программ.The software computer market offers, on a paid and free basis, a number of language translator programs, virtual assistant programs, translation programs from photo and video material, and search programs.

Для каждой операционной системы на компьютерном рынке разработан свой программный софт для голосовых приложений.For each operating system in the computer market has developed its own software for voice applications.

Наличие в современных гаджетах медицинского, спортивного и специального назначения модуля Bluetooth, позволяет устройству считывая с них информацию переводить и озвучивать ее пользователю.The presence of a Bluetooth module in modern medical, sports and special-purpose gadgets allows the device to read and sound information from them, reading them from the user.

Микрофонная гарнитура с костной проводимостью (поз. 12) решается технологиями FORBAIN, Aftershokz.The bone-conduction microphone headset (key 12) is solved by FORBAIN and Aftershokz technologies.

В предлагаемом примере устройства использован плоский аккумулятор, который расположен между миникомпьютером и головой, что служит радиозащитой пользователя при работы устройства с модулем WI-FI.In the proposed example of the device, a flat battery is used, which is located between the minicomputer and the head, which serves as radiation protection for the user when the device is operated with the WI-FI module.

Развитие компьютерной технологии ведет, как к уменьшению размеров системных плат микрокомпьютеров, так и к увеличению их быстродействия, что позволяет совершенствовать программный софт приложений.The development of computer technology leads both to a decrease in the size of microcomputer motherboards and to an increase in their speed, which makes it possible to improve software software applications.

Структура набора потребительских функций предлагаемого персонального мобильного голосового информационного устройства должна быть базовой для дальнейшего его усовершенствования.The structure of the set of consumer functions of the proposed personal mobile voice information device should be basic for its further improvement.

Claims (1)

Мобильное голосовое информационное устройство, предназначенное для синхронного перевода и озвучивания голосовой информации с одного языка на другой от различных источников и содержащее: микрокомпьютер с модулями WI-FI и Bluetooth и интерфейсами периферии, управляемый посредством голосовых команд через голосовой программный виртуальный помощник-ассистент и выполненный с возможностью получения информации от внешних источников и соединенный с выходным динамиком, выполненным с возможностью озвучивания голосовой информации, соединенный с микрофонной гарнитурой, содержащей микрофон костной проводимости и выполненной с возможностью приема голосовых сигналов разговорной речи, при этом микрокомпьютер посредством встроенных модулей WI-FI и Bluetooth выполнен с возможностью находить требуемую музыкальную, или новостную, или справочную информацию из Интернета посредством стандартной связи с личным мобильным телефоном, или получать информацию от гаджетов медицинского, спортивного назначения или от гаджетов, функционирующих как дозиметр радиации, обеспечивать ее перевод и озвучивать пользователю через микрофон костной проводимости в фоновом режиме.A mobile voice information device designed for simultaneous translation and dubbing of voice information from one language to another from various sources and containing: a microcomputer with WI-FI and Bluetooth modules and peripheral interfaces, controlled by voice commands through a voice-activated virtual assistant program and performed with the ability to receive information from external sources and connected to the output speaker, configured to sound voice information, connected to a microphone headset containing a bone conduction microphone and configured to receive conversational voice signals, while the microcomputer via the built-in WI-FI and Bluetooth modules is configured to find the required music, or news, or reference information from the Internet through standard communication with a personal mobile phone , or receive information from medical or sports gadgets or from gadgets that function as a radiation dosimeter, provide its translation and voice s user via bone conduction microphone in the background.
RU2017127207A 2017-07-28 2017-07-28 Mobile voice information device RU2713874C2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
RU2017127207A RU2713874C2 (en) 2017-07-28 2017-07-28 Mobile voice information device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
RU2017127207A RU2713874C2 (en) 2017-07-28 2017-07-28 Mobile voice information device

Publications (3)

Publication Number Publication Date
RU2017127207A RU2017127207A (en) 2019-01-29
RU2017127207A3 RU2017127207A3 (en) 2019-03-05
RU2713874C2 true RU2713874C2 (en) 2020-02-07

Family

ID=65270711

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2017127207A RU2713874C2 (en) 2017-07-28 2017-07-28 Mobile voice information device

Country Status (1)

Country Link
RU (1) RU2713874C2 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030115068A1 (en) * 2001-12-13 2003-06-19 Boesen Peter V. Voice communication device with foreign language translation
US20040210444A1 (en) * 2003-04-17 2004-10-21 International Business Machines Corporation System and method for translating languages using portable display device
RU2391716C2 (en) * 2004-10-12 2010-06-10 Майкрософт Корпорейшн Method and device for multisensor improvement of speech in mobile device
WO2015177932A1 (en) * 2014-05-23 2015-11-26 有限会社forte Bidirectional bone conduction communication device, bidirectional bone conduction communication method, and bidirectional bone conduction guide navigation system
CN205305109U (en) * 2016-01-10 2016-06-08 尹桂芳 Hearing translation helps sound ware

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030115068A1 (en) * 2001-12-13 2003-06-19 Boesen Peter V. Voice communication device with foreign language translation
US20040210444A1 (en) * 2003-04-17 2004-10-21 International Business Machines Corporation System and method for translating languages using portable display device
RU2391716C2 (en) * 2004-10-12 2010-06-10 Майкрософт Корпорейшн Method and device for multisensor improvement of speech in mobile device
WO2015177932A1 (en) * 2014-05-23 2015-11-26 有限会社forte Bidirectional bone conduction communication device, bidirectional bone conduction communication method, and bidirectional bone conduction guide navigation system
CN205305109U (en) * 2016-01-10 2016-06-08 尹桂芳 Hearing translation helps sound ware

Also Published As

Publication number Publication date
RU2017127207A3 (en) 2019-03-05
RU2017127207A (en) 2019-01-29

Similar Documents

Publication Publication Date Title
US9507772B2 (en) Instant translation system
US10777193B2 (en) System and device for selecting speech recognition model
KR101834546B1 (en) Terminal and handsfree device for servicing handsfree automatic interpretation, and method thereof
KR102108500B1 (en) Supporting Method And System For communication Service, and Electronic Device supporting the same
US20160372110A1 (en) Adapting voice input processing based on voice input characteristics
Tashev Kinect development kit: A toolkit for gesture-and speech-based human-machine interaction [best of the web]
JP2018195276A (en) Simultaneous translation device with double-sided display, method, device, and electronic device
JP6545174B2 (en) User configurable speech commands
CN112840396A (en) Electronic device for processing user words and control method thereof
CN108073572B (en) Information processing method and device, simultaneous interpretation system
JP2018194832A (en) User command processing method and system for adjusting output volume of sound to be output, based on input volume of received voice input
US20190051307A1 (en) Digital assistant activation based on wake word association
US9921805B2 (en) Multi-modal disambiguation of voice assisted input
KR20200027331A (en) Voice synthesis device
CN108538284A (en) Simultaneous interpretation result shows method and device, simultaneous interpreting method and device
WO2021208531A1 (en) Speech processing method and apparatus, and electronic device
CN110992927A (en) Audio generation method and device, computer readable storage medium and computing device
CN112001189A (en) Real-time foreign language communication system
JP2021177418A (en) Method of providing electronic device with interpretation function and ear set device
JP2016076007A (en) Interactive apparatus and interactive method
KR20180131155A (en) Method, system and computer program for translation
KR20110132960A (en) Method and apparatus for improving automatic interpretation function by use of mutual communication between portable interpretation terminals
US10943601B2 (en) Provide output associated with a dialect
RU2713874C2 (en) Mobile voice information device
JP2024509873A (en) Video processing methods, devices, media, and computer programs

Legal Events

Date Code Title Description
MM4A The patent is invalid due to non-payment of fees

Effective date: 20200729