RU2705769C1 - Vehicle speech recognition together with portable device - Google Patents

Vehicle speech recognition together with portable device Download PDF

Info

Publication number
RU2705769C1
RU2705769C1 RU2018115684A RU2018115684A RU2705769C1 RU 2705769 C1 RU2705769 C1 RU 2705769C1 RU 2018115684 A RU2018115684 A RU 2018115684A RU 2018115684 A RU2018115684 A RU 2018115684A RU 2705769 C1 RU2705769 C1 RU 2705769C1
Authority
RU
Russia
Prior art keywords
vehicle
vehicle computer
processor
computer
interpreted
Prior art date
Application number
RU2018115684A
Other languages
Russian (ru)
Inventor
Прамита МИТРА
Гэри Стивен СТРУМОЛО
Крейг Джон САЙМОНДЗ
Али ХАССАНИ
Марк А. КУДДИХИ
Дэвид МЕЛЧЕР
Original Assignee
ФОРД ГЛОУБАЛ ТЕКНОЛОДЖИЗ, ЭлЭлСи
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ФОРД ГЛОУБАЛ ТЕКНОЛОДЖИЗ, ЭлЭлСи filed Critical ФОРД ГЛОУБАЛ ТЕКНОЛОДЖИЗ, ЭлЭлСи
Application granted granted Critical
Publication of RU2705769C1 publication Critical patent/RU2705769C1/en

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B60R16/0373—Voice control
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/02—Feature extraction for speech recognition; Selection of recognition unit
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/06—Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/02—Feature extraction for speech recognition; Selection of recognition unit
    • G10L2015/025—Phonemes, fenemes or fenones being the recognition units
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/02—Feature extraction for speech recognition; Selection of recognition unit
    • G10L2015/027—Syllables being the recognition units
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/01—Aspects of volume control, not necessarily automatic, in sound systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/13—Acoustic transducers and sound field adaptation in vehicles

Abstract

FIELD: computer engineering.
SUBSTANCE: invention relates to computing devices. System includes a portable device including a memory and a processor. Processor receives and generates a message corresponding to the speech input, including at least one data element, and sends a message to the vehicle.
EFFECT: possibility of generating message to vehicle by means of portable device.
19 cl, 4 dwg

Description

Уровень техникиState of the art

Транспортные средства могут включать в себя компьютеры, запрограммированные распознавать речь, и, например, предоставлять оператору возможность управлять информационно-развлекательными системами, навигационными системами, системами реагирования на чрезвычайные ситуации, и т.д., с помощью речевых команд. Система распознавания речи может быть оптимизирована для широко используемого или нормативного произношения и, кроме того, может быть запрограммирована ожидать конкретные команды. В некоторых примерах, команды, которые произносятся с акцентом или не соответствуют ожидаемым командам, могут не пониматься компьютером транспортного средства, приводя к чувству разочарования, что касается оператора или другого занимающего место человека транспортного средства.Vehicles may include computers programmed to recognize speech, and, for example, provide the operator with the ability to control infotainment systems, navigation systems, emergency response systems, etc., using voice commands. The speech recognition system can be optimized for widely used or normative pronunciation and, in addition, specific commands can be programmed to wait. In some examples, commands that are pronounced with an accent or do not correspond to the expected commands may not be understood by the vehicle computer, leading to a feeling of frustration with the operator or other person occupying the vehicle.

Краткое описание чертежейBrief Description of the Drawings

Фиг. 1 - схема примерной системы для поддержания связи с транспортным средством с использованием носимого устройства.FIG. 1 is a diagram of an example system for communicating with a vehicle using a wearable device.

Фиг. 2 - структурная схема примерной системы по фиг. 1.FIG. 2 is a block diagram of the exemplary system of FIG. one.

Фиг. 3 - схема примерной последовательности операций для приема пользовательского ввода и формирования сообщения транспортному средству посредством носимого устройства.FIG. 3 is a diagram of an exemplary sequence of operations for receiving user input and generating a message to a vehicle via a wearable device.

Фиг. 4 - схема примерной последовательности операций для приема пользовательского ввода и формирования сообщения транспортному средству посредством носимого устройства, в том числе, начального образования пары носимого устройства с транспортным средством.FIG. 4 is a diagram of an exemplary sequence of operations for receiving user input and generating a message to a vehicle via a wearable device, including the initial pairing of a wearable device with a vehicle.

ОписаниеDescription

ВведениеIntroduction

Со ссылкой на фиг. 1, система 10 использует возможности распознавания речи носимого устройства 12 для содействия связи с транспортным средством 14. Носимое устройство 12, например, может быть интеллектуальными часами, браслетом для фитнеса, и т.д. Транспортное средство 14, например, может быть автомобилем, грузовым автомобилем, мотоциклом, тягачом, снегоходом, и т.д., и включает в себя компьютер 34 транспортного средства (фиг. 2). Для того чтобы содействовать связи пользователя с транспортным средством 14, носимое устройство 12 может быть запрограммировано принимать пользовательский ввод от пользователя и, на основании библиотеки, хранимой в памяти устройства 12, формировать сообщения транспортному средству, которые предопределены быть интерпретируемыми компьютером 34 транспортного средства. Пользовательский ввод может быть речевым вводом. Дополнительно или в качестве альтернативы, пользовательский ввод может быть жестовым вводом или сенсорным вводом. Сообщение транспортному средству, например, может быть командой выполнять функцию. Например, библиотека может включать в себя фонемы, которые предопределены быть интерпретируемыми компьютером 34 транспортного средства, и носимое устройство 12 может отображать пользовательский ввод в сообщение транспортному средству на основе «слог за слогом». Дополнительно или в качестве альтернативы, библиотека может включать в себя фразы и/или цифровые коды, которые предопределены быть интерпретируемыми компьютером 34 транспортного средства, и носимое устройство 12 может быть запрограммировано отображать пользовательский ввод во фразу или цифровой код с тем же самым или сходным смыслом для формирования сообщения транспортному средству. Сообщение транспортному средству может передаваться в компьютер 34 транспортного средства слышимым образом, например, через громкоговоритель, включенный в носимое устройство 12, в микрофон, включенный в транспортное средство 14. Дополнительно или в качестве альтернативы, сообщение транспортному средству может передаваться в компьютер 34 транспортного средства с помощью радиочастотной передачи, например, через соединение bluetooth с компьютером 34 транспортного средства.With reference to FIG. 1, the system 10 uses the speech recognition capabilities of the wearable device 12 to facilitate communication with the vehicle 14. The wearable device 12, for example, may be a smart watch, a fitness bracelet, etc. The vehicle 14, for example, may be a car, a truck, a motorcycle, a tractor, a snowmobile, etc., and includes a vehicle computer 34 (FIG. 2). In order to facilitate communication between the user and the vehicle 14, the wearable device 12 may be programmed to receive user input from the user and, based on the library stored in the memory of the device 12, generate messages to the vehicle that are predetermined to be interpreted by the vehicle computer 34. User input may be voice input. Additionally or alternatively, the user input may be gesture input or touch input. A message to a vehicle, for example, may be a command to perform a function. For example, a library may include phonemes that are predetermined to be interpreted by the vehicle computer 34, and the wearable device 12 may display user input to a message to the vehicle based on syllable by syllable. Additionally or alternatively, the library may include phrases and / or digital codes that are predetermined to be interpreted by the vehicle computer 34, and the wearable device 12 may be programmed to display user input in a phrase or digital code with the same or similar meaning for forming a message to the vehicle. The message to the vehicle may be transmitted to the vehicle computer 34 in an audible manner, for example, through a loudspeaker included in the wearable device 12, to a microphone included in the vehicle 14. Additionally or alternatively, the message to the vehicle may be transmitted to the vehicle computer 34 with using radio frequency transmission, for example, via a bluetooth connection with a vehicle computer 34.

Элементы системыSystem elements

С обращением к фиг. 2, как описано выше, система 10 включает в себя носимое устройство 12 и транспортное средство 14. Носимое устройство 12 запрограммировано принимать пользовательский ввод от пользователя и передавать команды в компьютер 34 транспортного средства. Как отмечено выше, пользовательский ввод может быть речевым вводом, жестовым вводом и/или сенсорным вводом. Дополнительно, носимое устройство 12 и транспортное средство 14 могут быть связаны с возможностью обмена информацией, например, через соединение bluetooth.Referring to FIG. 2, as described above, system 10 includes a wearable device 12 and a vehicle 14. The wearable device 12 is programmed to receive user input from a user and transmit commands to the vehicle computer 34. As noted above, user input may be voice input, gesture input and / or touch input. Additionally, the wearable device 12 and the vehicle 14 may be associated with the possibility of exchanging information, for example, via a bluetooth connection.

Носимое устройство 12 включает в себя компьютер 20, пользовательский интерфейс 22, устройство 24 звукового вывода и схему 26 связи.The wearable device 12 includes a computer 20, a user interface 22, an audio output device 24, and a communication circuit 26.

Компьютер 20 включает в себя память и один или более процессоров, выполненных с возможностью выполнять программы, то есть, наборы машинно-исполняемых команд, хранимых в памяти. Компьютер может быть присоединен с возможностью обмена информацией к пользовательскому интерфейсу 22, устройству 24 звукового вывода и схеме 26 связи. Как подобно описано ниже, компьютер 20 может быть запрограммирован принимать ввод от пользователя через пользовательский интерфейс 22 и формировать сообщения транспортному средству для транспортного средства 14. Сообщения транспортному средству могут быть командами выполнять функцию. Компьютер 20 может быть запрограммирован передавать сообщения транспортному средству в виде слышимых сигналов в транспортное средство 14 через устройство 24 звукового вывода. Дополнительно или в качестве альтернативы, компьютер 20 может быть запрограммирован передавать сообщения транспортному средству с помощью электрических сигналов в транспортное средство 14 с использованием схемы 26 связи.Computer 20 includes memory and one or more processors configured to execute programs, that is, sets of machine-executable instructions stored in memory. A computer may be coupled to exchange user interface 22, audio output device 24, and communication circuit 26. As similarly described below, the computer 20 may be programmed to receive input from the user through the user interface 22 and generate messages to the vehicle for the vehicle 14. Messages to the vehicle may be commands to perform a function. The computer 20 may be programmed to transmit messages to the vehicle in the form of audible signals to the vehicle 14 through the audio output device 24. Additionally or alternatively, the computer 20 may be programmed to transmit messages to the vehicle using electrical signals to the vehicle 14 using the communication circuit 26.

Как показано на фиг. 2, компьютер 20, например, может включать в себя хранимые в энергонезависимой памяти, интерфейс 27 прикладного программирования (api) и библиотеку 28. Api 27 может загружаться в носимое устройство 12 и может включать в себя машинно-читаемые команды для формирования, вместе с машинным кодом, предусмотренным в носимом устройстве 12, сообщений транспортному средству. Api 27 может быть специфичным для конкретного типа транспортного средства 14, конкретного типа компьютера 34 транспортного средства и/или конкретного типа носимого устройства 12.As shown in FIG. 2, computer 20, for example, may include non-volatile memory, an application programming interface (api) 27 and a library 28. Api 27 may be loaded into a wearable device 12 and may include machine-readable instructions for generating, together with machine the code provided in the wearable device 12, messages to the vehicle. Api 27 may be specific to a specific type of vehicle 14, a specific type of vehicle computer 34, and / or a specific type of wearable device 12.

Библиотека 28 может быть включена в api 27 или может быть отдельным файлом. Библиотека 28 может загружаться в носимое устройство 12 и может включать в себя различные элементы данных для составления сообщений транспортному средству. Например, библиотека 28 может включать в себя фонемы. Фонемы могут быть звуками, например, одиночными произносимыми по слогам звуками, которые предопределены быть интерпретируемыми компьютером 34 транспортного средства. В качестве еще одного примера, библиотека 28 может включать в себя фразы. Фразы могут быть многословными выражениями, которые предопределены быть интерпретируемыми компьютером 34 транспортного средства. Примерной фразой может быть «убавить громкость».Library 28 may be included in api 27 or may be a separate file. Library 28 may be loaded into wearable device 12 and may include various data items for composing messages to a vehicle. For example, library 28 may include phonemes. Phonemes can be sounds, for example, single syllable sounds that are predetermined to be interpreted by the vehicle computer 34. As another example, library 28 may include phrases. The phrases may be verbose expressions that are predetermined to be interpreted by the vehicle computer 34. An example phrase would be “turn down the volume.”

В качестве еще одного другого примера, библиотека 28 может включать в себя один или более цифровых кодов, или тому подобное, которые могут быть предопределены быть интерпретируемыми компьютером 34 транспортного средства. Цифровые коды могут передаваться в компьютер 34 транспортного средства через схему 26 связи. Каждый цифровой код типично соответствует конкретному сообщению транспортному средству.As another another example, library 28 may include one or more digital codes, or the like, that may be predetermined to be interpreted by vehicle computer 34. Digital codes may be transmitted to the vehicle computer 34 via a communication circuit 26. Each digital code typically corresponds to a specific message to a vehicle.

Пользовательский интерфейс 22 с возможностью обмена информацией присоединен к компьютеру 20 и может включать в себя одно или более устройств ввода, таких как микрофон, кнопки, устройство отображения с сенсорным экраном, мышь, кнопочная панель, устройство распознавания жестов, переключатели, и т.д., для приема ввода от пользователя. Пользовательский интерфейс 22 дополнительно может включать в себя одно или более устройств вывода, таких как устройство отображения, лампы, громкоговорители, и т.д., для сообщения информации пользователю.A user interface 22 with the ability to exchange information is connected to the computer 20 and may include one or more input devices, such as a microphone, buttons, a touch screen display device, a mouse, a keypad, gesture recognition device, switches, etc. , to receive input from the user. User interface 22 may further include one or more output devices, such as a display device, lamps, speakers, etc., for communicating information to a user.

Более точно, пользовательский интерфейс 22 принимает пользовательский ввод от пользователя. Пользовательский ввод может приниматься в виде речевых команд, например, через микрофон. Дополнительно или в качестве альтернативы, пользовательский интерфейс 22 может принимать команды, например, такие как сенсорный ввод на устройстве отображения с сенсорным экраном, или жесты через устройство распознавания жестов, и т.д.More specifically, the user interface 22 receives user input from the user. User input can be received in the form of voice commands, for example, through a microphone. Additionally or alternatively, user interface 22 may receive commands, such as for example touch input on a touch screen display device, or gestures through a gesture recognition device, etc.

Как описано выше, компьютер 20 может передавать сообщения транспортному средству через устройство 24 звукового вывода. Устройство 24 звукового вывода, например, может быть громкоговорителем. Устройство 24 звукового вывода показано на фиг. 2 в качестве компонента, отдельного от пользовательского интерфейса 22. Однако устройство 24 звукового вывода может быть включено в пользовательский интерфейс 22.As described above, computer 20 can transmit messages to the vehicle through the audio output device 24. The audio output device 24, for example, may be a speaker. The audio output device 24 is shown in FIG. 2 as a component separate from the user interface 22. However, the audio output device 24 may be included in the user interface 22.

Устройство 24 звукового вывода может передавать фонемы или фразы, которые предопределены быть интерпретируемыми компьютером 34 транспортного средства. Фонемы или фразы могут передаваться в области слышимости звука. Дополнительно или в качестве альтернативы, громкоговоритель может передавать, а компьютер 34 транспортного средства может быть выполнен с возможностью распознавать ультразвуковые передачи.The audio output device 24 may transmit phonemes or phrases that are predetermined to be interpreted by the vehicle computer 34. Phonemes or phrases can be transmitted in the field of audibility of the sound. Additionally or alternatively, the loudspeaker may transmit, and the vehicle computer 34 may be configured to recognize ultrasonic transmissions.

Носимое устройство 12 дополнительно может включать в себя схему 26 связи. Схема 26 связи, например, может включать в себя приемопередатчик bluetooth или другой радиочастотный приемопередатчик, как известно, для поддержания связи с компьютером 34 транспортного средства. Дополнительно, схема 26 связи, например, может включать в себя приемопередатчик wifi, как известно, для соединения с точкой доступа wifi.The wearable device 12 may further include a communication circuit 26. The communication circuit 26, for example, may include a bluetooth transceiver or other radio frequency transceiver, as is known, to maintain communication with the vehicle computer 34. Additionally, the communication circuit 26, for example, may include a wifi transceiver, as is known, for connecting to a wifi access point.

Схема 26 связи может использоваться для передачи сообщений транспортному средству в компьютер 34 транспортного средства. Дополнительно или в качестве альтернативы, схема связи может использоваться для загрузки, например, из сети интернет или из компьютера 34 транспортного средства, api 27 и библиотеки 28.The communication circuit 26 may be used to transmit messages to the vehicle in the vehicle computer 34. Additionally or alternatively, the communication scheme can be used to download, for example, from the Internet or from the computer 34 of the vehicle, api 27 and library 28.

Транспортное средство 14 включает в себя устройство 31 звукового ввода, компьютер 34 транспортного средства и приложения 36 транспортного средства. Транспортное средство 14 дополнительно может включать в себя схему 32 связи.Vehicle 14 includes an audio input device 31, a vehicle computer 34, and vehicle applications 36. Vehicle 14 may further include a communication circuit 32.

Компьютер 34 включает в себя память и один или более процессоров, выполненных с возможностью выполнять программы, то есть, наборы машинно-исполняемых команд, хранимых в памяти. Компьютер 34 как правило запрограммирован для обмена информацией по шине локальной сети контроллеров (can), или тому подобному, и также может иметь соединение с разъемом бортовой диагностики (obd-ii). Через шину can, obd-ii и/или другие проводные или беспроводные механизмы компьютер 34 может передавать сообщения в и/или принимать сообщения из различных устройств в транспортном средстве 14, например, приложений 36 транспортного средства. В качестве альтернативы или дополнительно, в примерах, где компьютер 34 фактически содержит многочисленные устройства, шина can или тому подобное могут использоваться для связи между устройствами, представленными в качестве компьютера 34 в данном изобретении.Computer 34 includes memory and one or more processors configured to execute programs, that is, sets of computer-executable instructions stored in memory. Computer 34 is typically programmed to exchange information over a local area network (CAN) bus, or the like, and may also be connected to an on-board diagnostic (obd-ii) connector. Through the can, obd-ii bus and / or other wired or wireless mechanisms, the computer 34 can transmit messages to and / or receive messages from various devices in the vehicle 14, for example, vehicle applications 36. Alternatively or additionally, in examples where the computer 34 actually contains multiple devices, a can bus or the like can be used to communicate between devices represented as the computer 34 in this invention.

Компьютер 34 запрограммирован принимать сообщения транспортному средству из носимого устройства 12 через устройство 31 звукового ввода и/или схему 32 связи. На основании сообщений транспортному средству, компьютер 34 запрограммирован отправлять команды в одно или более приложений 36. Например, одним из приложений 36 может быть радиоприемник. Компьютер 34 может принимать сообщение транспортному средству для воспроизведения конкретной радиостанции. Компьютер 34 может отправлять команды на радиоприемник настроиться на конкретную радиостанцию.Computer 34 is programmed to receive messages from the vehicle 12 from the wearable device 12 through the audio input device 31 and / or the communication circuit 32. Based on messages to the vehicle, computer 34 is programmed to send commands to one or more applications 36. For example, one of the applications 36 may be a radio receiver. Computer 34 may receive a message to a vehicle for playing a particular radio station. Computer 34 may send commands to the radio to tune in to a particular radio station.

Компьютер 34 может быть запрограммирован выполнять распознавание речи, как известно. В этом случае, компьютер 34 может быть запрограммирован распознавать конкретные фонемы и идентифицировать слова на основании последовательностей фонем. Кроме того, компьютер 34 может быть запрограммирован идентифицировать последовательности слов и связывать последовательности слов с действиями, которые компьютер 34 может инициировать в транспортном средстве 14. Например, компьютер 34 может быть запрограммирован идентифицировать «убавить громкость» в качестве команды уменьшить уровень громкости радиоприемника.Computer 34 may be programmed to perform speech recognition, as is known. In this case, the computer 34 may be programmed to recognize specific phonemes and identify words based on sequences of phonemes. In addition, computer 34 may be programmed to identify word sequences and associate word sequences with actions that computer 34 can initiate in vehicle 14. For example, computer 34 may be programmed to identify “turn down” as a command to lower the radio volume.

Дополнительно или в качестве альтернативы, компьютер 34 может быть запрограммирован принимать цифровые команды. Цифровые команды, например, могут приниматься из схемы 32 связи и могут включать в себя один или более цифровых кодов. Цифровые коды могут быть связаны, например, таблицей, хранимой в памяти, связанной с компьютером 34, с действиями, которые компьютер 34 может выполнять в транспортном средстве 14.Additionally or alternatively, computer 34 may be programmed to receive digital commands. Digital commands, for example, may be received from communication circuitry 32 and may include one or more digital codes. Digital codes may be associated, for example, with a table stored in memory associated with the computer 34, with the actions that the computer 34 can perform in the vehicle 14.

Приложения 36 транспортного средства могут быть любой системой в пределах транспортного средства 14, которая может управляться непосредственно или опосредованно с помощью пользовательского ввода. Каждое из приложений 36 транспортного средства может включать в себя компьютер, в том числе, память и один или более процессоров, выполненных с возможностью выполнять программы, то есть, наборы машинно-исполняемых команд, хранимых в памяти. Каждое из приложений транспортного средства может быть связано с возможностью обмена информацией, например, через проводную или беспроводную сеть, с компьютером и может быть запрограммировано принимать команды из компьютера 34 и исполнять команды. Приложения 36 транспортного средства дополнительно могут включать в себя исполнительные механизмы для приведения в действие функций транспортного средства, например, электродвигатель для закрывания или открывания окна, и дополнительно могут включать в себя пользовательский интерфейс, например, для отображения кинофильма и/или проигрывания музыки. Неограничивающий список приложений 36 транспортного средства, например, может включать в себя информационно-развлекательные системы (радиоприемник, проигрыватель cd (компакт-дисков), dvd (цифровых многофункциональных дисков)), системы gps, сетевые приложения (например, поисковую машину в сети интернет, электронную почту, обновления движения транспорта), службы реагирования на чрезвычайные ситуации, внутренние фонари, наружные фонари, стеклоподъемники, и т.д.Vehicle applications 36 can be any system within vehicle 14 that can be controlled directly or indirectly by user input. Each of the vehicle applications 36 may include a computer, including a memory and one or more processors configured to execute programs, that is, sets of machine-executable instructions stored in memory. Each of the vehicle applications may be associated with the possibility of exchanging information, for example, through a wired or wireless network, with a computer and may be programmed to receive commands from computer 34 and execute commands. Vehicle applications 36 may further include actuators for actuating vehicle functions, such as an electric motor for closing or opening a window, and may further include a user interface, for example, for displaying a movie and / or playing music. A non-limiting list of vehicle applications 36, for example, may include infotainment systems (radio, cd (compact disc) player, dvd (digital multifunction discs)), gps systems, network applications (e.g., internet search engine, e-mail, traffic updates), emergency response services, interior lights, exterior lights, power windows, etc.

Устройство 31 звукового ввода. Устройство 31 звукового ввода может быть микрофоном или другим акустическим приемником, как известно. Устройство 31 звукового ввода, например, также может быть ультразвуковым датчиком для приема сигналов давления воздуха на частотах выше диапазона слышимости.Sound input device 31. The audio input device 31 may be a microphone or other acoustic receiver, as is known. The sound input device 31, for example, can also be an ultrasonic sensor for receiving air pressure signals at frequencies above the audible range.

Как описано выше, транспортное средство 14 дополнительно может включать в себя схему 32 связи. Схема 32 связи, например, может включать в себя радиочастотный приемопередатчик, как известно, и может принимать сообщения из и/или передавать сообщения в носимое устройство 12. Например, радиочастотный приемопередатчик может быть приемопередатчиком bluetooth. Схема 32 связи может принимать радиочастотную передачу из носимого устройства 12, извлекать цифровой код, представляющий собой одно или более сообщений транспортному средству, из передачи и выдавать цифровой код в компьютер 34.As described above, the vehicle 14 may further include a communication circuit 32. The communication circuit 32, for example, may include a radio frequency transceiver, as is known, and may receive messages from and / or transmit messages to a wearable device 12. For example, the radio frequency transceiver may be a bluetooth transceiver. The communication circuit 32 may receive a radio frequency transmission from the wearable device 12, extract a digital code representing one or more messages to the vehicle from the transmission, and provide a digital code to the computer 34.

Последовательности операцийOperation sequences

Фиг. 3 - схема примерной последовательности 300 операций для формирования носимым устройством 12 сообщения транспортному средству для компьютера 34 транспортного средства 14 на основании ввода от пользователя. Ввод от пользователя, например, может быть речевым вводом. Последовательность 300 операций начинается на этапе 305 блок-схемы.FIG. 3 is a diagram of an exemplary process 300 for generating a vehicle wearable device 12 to a vehicle computer 34 of a vehicle 14 based on input from a user. Input from a user, for example, may be voice input. The process 300 begins at block 305.

На этапе 305 блок-схемы, компьютер 20 носимого устройства 12 может идентифицировать запускающее событие, инициирующее режим сообщений транспортному средству. Режим сообщений транспортному средству может быть режимом, в котором компьютер 20 принимает пользовательский ввод от пользователя носимого устройства 12 и передает сообщение транспортному средству на основании пользовательского ввода в компьютер 34 транспортного средства. Запускающее событие, например, может быть пользовательским вводом через пользовательский интерфейс 22 для ввода в действие режима сообщений транспортному средству. Например, пользовательский ввод может быть касанием сенсорного экрана, которое вводит в действие приложение для формирования сообщения транспортному средству. В качестве альтернативы, запускающее событие может быть речевой командой, такой как «ввести в действие режим сообщений транспортному средству». В качестве еще одного возможного альтернативного варианта, запускающее событие может быть речевым вводом для приведения в действие функции транспортного средства, таким как «включите радио». Носимое устройство 12 может определять, на основании распознавания команды, которая является командой, предназначенной для компьютера 34 транспортного средства 14, и инициировать режим сообщений транспортному средству. Последовательность 300 операций продолжается на этапе 310 блок-схемы.At block block 305, the computer 20 of the wearable device 12 may identify a triggering event that triggers a message mode to the vehicle. The vehicle message mode may be a mode in which computer 20 receives user input from a user of wearable device 12 and transmits a message to the vehicle based on user input to vehicle computer 34. The triggering event, for example, may be user input through the user interface 22 for activating the message mode of the vehicle. For example, user input may be a touch of a touch screen that activates an application to generate a message to a vehicle. Alternatively, the triggering event may be a voice command, such as “activate a vehicle message mode”. As another possible alternative, the triggering event may be a voice input for activating a vehicle function, such as “turn on the radio”. The wearable device 12 may determine, based on recognition of a command, which is a command intended for the computer 34 of the vehicle 14, and initiate a message mode to the vehicle. Flow 300 continues at block 310.

На этапе 310 блок-схемы, компьютер 20 может принимать пользовательский ввод, связанный с эксплуатацией транспортного средства. Например, компьютер 20 может принимать ввод «включить радио». В некоторых примерах, как описано касательно вершины 305 блок-схемы, компьютер 20 уже мог принять пользовательский ввод во время выполнения вершины 305 блок-схемы. По приему пользовательского ввода, последовательность 300 операций продолжается на этапе 315 блок-схемы.At block 310, the computer 20 may receive user input related to the operation of the vehicle. For example, computer 20 may receive a “turn on radio” input. In some examples, as described with respect to vertex 305 of the flowchart, computer 20 may already have received user input while executing vertex 305 of the flowchart. Upon receipt of user input, the process 300 continues at block 315.

На этапе 315 блок-схемы, компьютер 20 формирует, на основании пользовательского ввода, сообщение транспортному средству. В одном из примеров, компьютер 20 может анализировать пользовательский ввод по слогам. Один или более из слогов пользовательского ввода могут отображаться в соответствующую фонему из библиотеки 28. Фонемы могут соединяться в последовательность, соответствующую слогам пользовательского ввода. Фонемы, хранимые в библиотеке, могут быть звуками, которые предопределены быть интерпретируемыми компьютером 34 транспортного средства. Это может быть полезно, например, когда пользователь носимого устройства 12 имеет акцент и произносит слова некоторым образом, который не является интерпретируемым компьютером 34 транспортного средства. Компьютер 20 носимого устройства 12, например, может включать в себя распознавание речи, которое может распознавать звуки/слоги от пользователя и отображать звуки/слоги в фонемы, предопределенные быть интерпретируемыми компьютером 34 транспортного средства.At block 315, the computer 20 generates, based on user input, a message to the vehicle. In one example, computer 20 may parse user input into syllables. One or more of the user input syllables can be mapped to the corresponding phoneme from the library 28. The phonemes can be connected in a sequence corresponding to the user input syllables. The phonemes stored in the library may be sounds that are predetermined to be interpreted by the vehicle computer 34. This can be useful, for example, when the user of the wearable device 12 has an accent and pronounces the words in a way that is not interpreted by the vehicle computer 34. The computer 20 of the wearable device 12, for example, may include speech recognition, which can recognize sounds / syllables from the user and display sounds / syllables in phonemes, predetermined to be interpreted by the vehicle computer 34.

В еще одном примере, компьютер 20 может анализировать пользовательский ввод на основании слов или фраз. Компьютер 20 может идентифицировать слова и/или фразы в пользовательском вводе и отображать слова или фразы в слова или фразы из библиотеки 28. Отображение может выполняться на пословной основе. В качестве альтернативы, компьютер 20 может анализировать пользовательский ввод в отношении смысла и идентифицировать фразу в библиотеке 28 с тем же самым или подобным смыслом. Например, компьютер 20 может быть запрограммирован распознавать «убавить громкость», «уменьшить громкость», «пожалуйста, потише», «пожалуйста, сделай тише», и т.д., в качестве команд для уменьшения громкости радио и отображать каждую из этих команд в сообщение транспортному средству из библиотеки 28, предопределенное быть интерпретируемым компьютером 34 транспортного средства. Например, каждая из этих команд может отображаться в сообщение транспортному средству «убавить громкость». Кроме того, компьютер 20 носимого устройства 12 может включать в себя режим обучения для изучения акцента пользователя. Например, компьютер 20 может обучаться распознавать выражения с неправильной грамматикой и отображать их в фразы, предопределенные быть интерпретируемыми компьютером 34 транспортного средства.In yet another example, computer 20 may analyze user input based on words or phrases. Computer 20 can identify words and / or phrases in user input and map words or phrases to words or phrases from library 28. Mapping can be done word by word. Alternatively, computer 20 may analyze user input for meaning and identify a phrase in library 28 with the same or similar meaning. For example, computer 20 may be programmed to recognize “turn down the volume,” “turn down the volume,” “please turn down”, “please turn down,” etc., as commands to decrease the volume of the radio and display each of these commands per message to the vehicle from the library 28, predetermined to be interpreted by the vehicle computer 34. For example, each of these commands may appear as a “turn down” message to the vehicle. In addition, the computer 20 of the wearable device 12 may include a training mode for studying user emphasis. For example, computer 20 may learn to recognize incorrect grammar expressions and display them in phrases predetermined to be interpreted by vehicle computer 34.

В еще одном примере, компьютер 20 может принимать пользовательский ввод и анализировать команду в отношении смысла. Компьютер 20 затем может отображать пользовательский ввод в цифровой код, соответствующий смыслу, и формировать сообщение транспортному средству из цифрового кода. По отображению пользовательского ввода в сообщение транспортному средству, последовательность 300 операций продолжается на этапе 320 блок-схемы.In yet another example, computer 20 may receive user input and analyze the command for meaning. The computer 20 may then display the user input in a digital code appropriate for the meaning, and generate a message to the vehicle from the digital code. Upon displaying the user input in the message to the vehicle, the process 300 continues at block 320 of the flowchart.

На этапе 320 блок-схемы, компьютер 20 выводит сообщение транспортному средству. В одном из примеров, компьютер 20 может выводить сообщение транспортному средству через устройство 24 звукового вывода в виде слышимого сигнала. Как описано выше, устройство 24 звукового вывода также может быть ультразвуковым устройством вывода, которое может передавать ультразвуковые сигналы в компьютер 34 транспортного средства.At block 320, the computer 20 displays a message to the vehicle. In one example, computer 20 may output a message to the vehicle through the audio output device 24 as an audible signal. As described above, the audio output device 24 may also be an ultrasonic output device that can transmit ultrasonic signals to the vehicle computer 34.

В еще одном примере, компьютер 20 может выводить сообщение транспортному средству через схему 26 связи. Компьютер 20 может формировать цифровой код, соответствующий сообщению транспортному средству, и передавать сообщение транспортному средству в виде радиочастотной передачи в компьютер 34 транспортного средства. Как описано выше, радиочастотная передача может передаваться согласно протоколу bluetooth.In yet another example, computer 20 may output a message to the vehicle via communication circuit 26. Computer 20 may generate a digital code corresponding to the message to the vehicle, and transmit the message to the vehicle in the form of radio frequency transmission to the vehicle computer 34. As described above, radio frequency transmission can be transmitted according to the bluetooth protocol.

Вслед за этапом 320 блок-схемы последовательность 300 операций заканчивается.Following block 320 of the flowchart, the flow of 300 ends.

Фиг. 4 - схема примерной последовательности 400 операций для формирования, носимым устройством 12, сообщения транспортному средству применительно к транспортному средству 14 на основании пользовательского ввода от пользователя. В примерной последовательности 400 операций, носимое устройство 12 спарено с транспортным средством 14 перед инициацией режима сообщений транспортному средству. Последовательность 400 операций может быть применимой, например, когда сообщения транспортному средству передаются с помощью радиочастотных сигналов из носимого устройства 12 в транспортное средство 14. Последовательность 400 операций начинается на этапе 405 блок-схемы.FIG. 4 is a diagram of an example flow of 400 operations for generating, by a wearable device 12, a message to a vehicle as applied to a vehicle 14 based on user input from a user. In an exemplary sequence of 400 operations, the wearable device 12 is paired with the vehicle 14 before initiating a message mode to the vehicle. The sequence 400 may be applicable, for example, when messages to the vehicle are transmitted using radio frequency signals from the wearable device 12 to the vehicle 14. The sequence 400 of operations begins at block 405.

На этапе 405 блок-схемы носимое устройство 12 образует пару с транспортным средством 14. Например, носимое устройство 12 может через интерфейс bluetooth в схеме 26 связи отправлять сообщение, включающее в себя идентификацию носимого устройства 12. Компьютер 34 транспортного средства 12 может принимать сообщение и идентифицировать носимое устройство 12 в качестве авторизованного устройства для обмена информацией с транспортным средством 14. Компьютер 34 транспортного средства может передавать сообщение на носимое устройство 12, авторизующее носимое устройство 12 отправлять сообщения транспортному средству с помощью радиочастотной передачи на транспортное средство 14. Последовательность 400 операций продолжается на этапе 410 блок-схемы.At block 405, the wearable device 12 paired with the vehicle 14. For example, the wearable device 12 can send a message through the bluetooth interface in the communication circuit 26 including the identification of the wearable device 12. The computer 34 of the vehicle 12 can receive the message and identify the wearable device 12 as an authorized device for exchanging information with the vehicle 14. The vehicle computer 34 may transmit a message to the wearable device 12 authorizing the wearable device the trinity 12 send messages to the vehicle using radio frequency transmission to the vehicle 14. The flow 400 continues at block 410.

На этапе 410 блок-схемы, компьютер 20 носимого устройства 12 идентифицирует запускающее событие, инициирующее режим сообщений транспортному средству, как описано со ссылкой на этап 305 блок-схемы последовательности 300 операций. На основании идентификации запускающего события, компьютер 20 инициирует режим сообщений транспортному средству. Последовательность 400 операций продолжается на этапе 415 блок-схемы.At block 410, the computer 20 of the wearable device 12 identifies a triggering event that triggers a message mode to the vehicle, as described with reference to block 305 of the flowchart 300 of the operation. Based on the identification of the triggering event, the computer 20 initiates a message mode to the vehicle. Flow 400 continues at block 415.

На этапе 415 блок-схемы, компьютер 20 принимает пользовательский ввод, связанный с эксплуатацией транспортного средства, как описано со ссылкой на этап 310 блок-схемы. Последовательность 400 операций продолжается на этапе 420 блок-схемы.At block 415, computer 20 receives user input related to the operation of the vehicle, as described with reference to block 310. Flow 400 continues at block 420.

На этапе 420 блок-схемы, компьютер 20 формирует сообщение транспортному средству на основании пользовательского ввода. Как обсуждено со ссылкой на этап 315 блок-схемы, компьютер 20 может включать в себя распознавание речи и дополнительно может включать в себя режим обучения и быть способным изучать произношение пользователя. Компьютер 20 анализирует пользовательский ввод. На основании анализа, компьютер 20 отображает пользовательский ввод в цифровой код, включенный в библиотеку 28, который соответствует смыслу пользовательского ввода. По отображению пользовательского ввода в сообщение транспортному средству, последовательность 400 операций продолжается на этапе 425 блок-схемы.At block 420, a computer 20 generates a message to the vehicle based on user input. As discussed with reference to block diagram step 315, computer 20 may include speech recognition and may further include a learning mode and be able to learn a user's pronunciation. Computer 20 parses user input. Based on the analysis, the computer 20 displays the user input in a digital code included in the library 28, which corresponds to the meaning of the user input. By mapping the user input to the message to the vehicle, the flow of 400 continues at block 425.

На этапе 425 блок-схемы, компьютер 20 передает, с помощью схемы 26 связи, сообщение транспортному средству в компьютер 34 транспортного средства 14. Компьютер 34 транспортного средства может подтверждать, что сообщение транспортному средству было принято из авторизованного носимого устройства 12, и может выдавать одну или более команд в одно или более приложений 36 транспортного средства на основании сообщения транспортному средству.At block diagram 425, computer 20 transmits, using the communication circuit 26, a message to the vehicle to vehicle computer 34. Vehicle computer 34 can confirm that the message to the vehicle was received from an authorized wearable device 12, and may issue one or more commands to one or more vehicle applications 36 based on a message to the vehicle.

Вслед за этапом 425 блок-схемы последовательность 400 операций заканчивается.Following block 425, flow 400 ends.

ЗаключениеConclusion

Каждое из вычислительных устройств, таких как обсужденные в материалах настоящей заявки, как правило, включает в себя команды, исполняемые одним или более вычислительных устройств, таких как идентифицированные выше, и для выполнения этапов блок-схем или этапов последовательностей операций, описанных выше. Например, этапы блок-схем последовательностей операций, обсужденные выше, могут быть воплощены в качестве машинно-исполняемых команд.Each of the computing devices, such as those discussed herein, typically includes instructions executed by one or more computing devices, such as those identified above, and to perform the steps of the flowcharts or the steps of the sequences of operations described above. For example, the steps of the flowcharts discussed above may be embodied as machine-executable instructions.

Машинно-исполняемые команды могут компилироваться или интерпретироваться из компьютерных программ, созданных с использованием многообразия языков и/или технологий программирования, в том числе, но не в качестве ограничения, и в одиночку или в комбинации, java™™, c, c++, visual basic, java script, perl, html, и т.д. Вообще, процессор (например, микропроцессор) принимает команды, например, из памяти, машинно-читаемого носителя, и т.д., и исполняет эти команды, тем самым, выполняя одну или более последовательностей операций, в том числе, одну или более из последовательностей операций, описанных в материалах настоящей заявки. Такие команды и другие данные могут храниться в файлах и передаваться с использованием многообразия машинно-читаемых носителей. Файл в вычислительном устройстве как правило является совокупностью данных, хранимых на машинно-читаемом носителе, таком как запоминающий носитель, оперативное запоминающее устройство, и т.д.Machine-executable instructions can be compiled or interpreted from computer programs created using a variety of programming languages and / or technologies, including, but not limited to, and alone or in combination, java ™,, c, c ++, visual basic , java script, perl, html, etc. In general, a processor (e.g., a microprocessor) receives instructions, for example, from memory, a machine-readable medium, etc., and executes these instructions, thereby performing one or more sequences of operations, including one or more of the sequences of operations described in the materials of this application. Such commands and other data may be stored in files and transmitted using a variety of machine-readable media. A file in a computing device is typically a collection of data stored on a computer-readable medium, such as a storage medium, random access memory, etc.

Машинно-читаемый носитель включает в себя любой носитель, который принимает участие в предоставлении данных (например, команд), которые могут читаться компьютером. Такой носитель может принимать многие формы, в том числе, но не в качестве ограничения, энергонезависимых носителей, энергозависимых носителей, и т.д. Энергонезависимые носители, например, включают в себя оптические или магнитные диски и другую постоянную память. Энергозависимые носители включают в себя динамическое оперативное запоминающее устройство (dram), которое типично составляет основную память. Обычные формы машинно-читаемых носителей, например, включают в себя дискету, гибкий диск, жесткий диск, магнитную ленту, любой другой магнитный носитель, cd-rom (постоянное запоминающее устройство (пзу) на компакт-диске), dvd (цифровой многофункциональный диск), любой другой оптический носитель, перфокарты, бумажную ленту, любой другой физический носитель со схемами расположения отверстий, озу (оперативное запоминающее устройство, ram), ппзу (программируемое пзу, prom), сппзу (стираемое программируемое пзу, eprom), флэш-память/эсппзу (flash-eeprom (электрически стираемое программируемое пзу)), любые другие микросхему или картридж памяти, или любой другой носитель, с которого компьютер может осуществлять считывание.A computer-readable medium includes any medium that is involved in providing data (e.g., instructions) that can be read by a computer. Such a medium can take many forms, including, but not limited to, non-volatile media, volatile media, etc. Non-volatile media, for example, include optical or magnetic disks and other read-only memory. Volatile media includes dynamic random access memory (dram), which typically constitutes main memory. Common forms of machine-readable media, for example, include a floppy disk, floppy disk, hard disk, magnetic tape, any other magnetic medium, cd-rom (read-only memory on CD), dvd (digital multifunction disk) , any other optical medium, punched cards, paper tape, any other physical medium with hole patterns, RAM (random access memory, ram), EPROM (programmable ROM, prom), EPROM (erasable programmable ROM, eprom), flash memory / ESPU (flash-eeprom (electric and Erasable Programmable ROM)), any other memory chip or cartridge, or any other medium from which a computer can perform the reading.

Все термины, используемые в формуле изобретения, подразумеваются обусловленными своими очевидными и обычными значениями в качестве понятных специалистам в данной области техники, если в материалах настоящей заявки не сделано явное указание на обратное. В частности, использование форм единственного числа «упомянутый», и т.д., должно читаться излагающим один или более из указанных элементов, если пункт формулы изобретения не излагает явное ограничение иначе.All terms used in the claims are implied by their obvious and ordinary meanings as understood by those skilled in the art, unless explicitly indicated otherwise in the materials of this application. In particular, the use of the singular forms “mentioned,” etc., should be read to set forth one or more of these elements, unless the claim sets forth a clear limitation otherwise.

Термин «примерный» в материалах настоящей заявки используется в смысле обозначения примера, например, ссылка на «примерное устройство» должна толковаться в качестве просто упоминающей пример устройства.The term "exemplary" in the materials of this application is used in the sense of designating an example, for example, a reference to an "exemplary device" should be construed as simply mentioning an example of a device.

Наречие «приблизительно», модифицирующее значение или результат, означает, что форма, конструкция, измерение, значение, определение, расчет, и т.д., могут отклоняться от точно описанной геометрии, расстояния, измерения, значения, определения, расчета, и т.д., вследствие несовершенства материалов, механической обработки, производства, измерений датчиков, вычислений, времен обработки, времени передачи данных, и т.д.The adverb “approximately”, modifying a value or result, means that the shape, design, measurement, value, definition, calculation, etc., can deviate from the precisely described geometry, distance, measurement, value, definition, calculation, and t .d., due to imperfection of materials, machining, production, sensor measurements, calculations, processing times, data transfer times, etc.

На чертежах, одинаковые номера позиций указывают идентичные элементы. Кроме того, некоторые или все из этих элементов могли бы быть изменены. Что касается сред, последовательностей операций, систем, способов, и т.д., описанных в материалах настоящей заявки, должно быть понятно, что, хотя этапы таких последовательностей операций, и т.д., были описаны в качестве происходящих согласно определенной упорядоченной последовательности, такие последовательности операций могли бы быть осуществлены на практике с описанными этапами, выполняемыми в порядке, ином, чем порядок, описанный в материалах настоящей заявки. Кроме того, должно быть понятно, что некоторые этапы могли бы выполняться одновременно, что могли бы быть добавлены другие этапы, или что некоторые этапы, описанные в материалах настоящей заявки, могли бы быть опущены. Другими словами, описания способов в материалах настоящей заявки предоставлены с целью иллюстрации некоторых вариантов осуществления и никоим образом не должны толковаться, с тем чтобы ограничивать заявленное изобретение.In the drawings, the same reference numbers indicate identical elements. In addition, some or all of these elements could be changed. As for the environments, sequences of operations, systems, methods, etc. described in the materials of this application, it should be clear that, although the steps of such sequences of operations, etc., have been described as occurring according to a certain ordered sequence , such sequences of operations could be carried out in practice with the described steps performed in an order other than the order described in the materials of this application. In addition, it should be understood that some steps could be carried out simultaneously, that other steps could be added, or that some steps described in the materials of this application could be omitted. In other words, the method descriptions in the materials of this application are provided to illustrate some embodiments and should not be construed in any way in order to limit the claimed invention.

Claims (66)

1. Носимое вычислительное устройство, содержащее:1. A wearable computing device containing: устройство звукового вывода иsound output device and процессор и память, память хранит команды, исполняемые процессором, так что процессор запрограммирован:processor and memory, memory stores instructions executed by the processor, so the processor is programmed: принимать от пользователя речевой ввод для компьютера транспортного средства;receive voice input from a user for a vehicle computer; интерпретировать речевой ввод, чтобы определять в памяти по меньшей мере один элемент данных, предопределенный быть интерпретируемым компьютером транспортного средства;interpret the speech input to determine in memory at least one data item predetermined to be interpreted by the vehicle computer; формировать звуковое сообщение, соответствующее речевому вводу, включающее в себя по меньшей мере один элемент данных, иgenerate an audio message corresponding to the voice input, including at least one data element, and отправлять звуковое сообщение, содержащее по меньшей мере один элемент данных, предопределенный быть интерпретируемым компьютером транспортного средства, на транспортное средство посредством устройства звукового вывода.send an audio message containing at least one data item, predetermined to be interpreted by the vehicle computer, to the vehicle through the sound output device. 2. Устройство по п. 1, в котором процессор дополнительно запрограммирован:2. The device according to claim 1, in which the processor is additionally programmed: распознавать один или более слогов в речевом вводе;recognize one or more syllables in a speech input; сопоставлять по меньшей мере один из одного или более слогов с фонемой в памяти, предопределенной быть интерпретируемой компьютером транспортного средства; иmatch at least one of the one or more syllables with a phoneme in memory predetermined to be interpreted by the vehicle computer; and включать соответствующую фонему в звуковое сообщение.include the corresponding phoneme in the audio message. 3. Устройство по п. 1, в котором процессор дополнительно запрограммирован:3. The device according to claim 1, in which the processor is additionally programmed: определять смысл по меньшей мере части речевого ввода;determine the meaning of at least a portion of the speech input; сопоставлять смысл части речевого ввода со смыслом фразы в памяти, предопределенной быть интерпретируемой компьютером транспортного средства; иto compare the meaning of the part of the speech input with the meaning of the phrase in the memory, predetermined to be interpreted by the vehicle computer; and включать фразу в звуковое сообщение.include a phrase in an audio message. 4. Устройство по п. 1, в котором процессор дополнительно запрограммирован:4. The device according to claim 1, in which the processor is additionally programmed: определять смысл по меньшей мере части речевого ввода;determine the meaning of at least a portion of the speech input; сопоставлять смысл части речевой команды со смыслом цифрового кода в памяти, предопределенного быть интерпретируемым компьютером транспортного средства; иcompare the meaning of part of the speech command with the meaning of a digital code in memory, predetermined to be interpreted by the vehicle computer; and включать цифровой код в цифровое сообщение транспортному средству.include a digital code in a digital message to the vehicle. 5. Устройство по п. 1, в котором процессор дополнительно запрограммирован:5. The device according to claim 1, in which the processor is additionally programmed: принимать данные, предопределенные быть интерпретируемыми компьютером транспортного средства, из второго вычислительного устройства.receive data predetermined to be interpreted by the vehicle computer from the second computing device. 6. Устройство по п. 1, в котором процессор дополнительно запрограммирован:6. The device according to claim 1, in which the processor is additionally programmed: образовывать пару, перед приемом речевого ввода, носимого вычислительного устройства с компьютером транспортного средства.pair up, before receiving voice input, a wearable computing device with a vehicle computer. 7. Устройство по п. 4, в котором носимое вычислительное устройство дополнительно включает в себя радиочастотный передатчик, и процессор запрограммирован отправлять цифровое сообщение через радиочастотный передатчик.7. The device according to claim 4, in which the wearable computing device further includes a radio frequency transmitter, and the processor is programmed to send a digital message through the radio frequency transmitter. 8. Устройство по п. 1, в котором процессор дополнительно запрограммирован:8. The device according to claim 1, in which the processor is additionally programmed: принимать, перед приемом речевого ввода, ввод, инициирующий операцию сообщения транспортному средству.receive, before receiving voice input, input initiating a message operation to the vehicle. 9. Устройство по п. 1, в котором процессор дополнительно запрограммирован:9. The device according to claim 1, in which the processor is additionally programmed: принимать, перед приемом речевого ввода, интерфейс прикладного программирования, при этом интерфейс прикладного программирования связан с компьютером транспортного средства, и по меньшей мере часть команд, исполняемых процессором, включена в интерфейс прикладного программирования.receive, before receiving voice input, an application programming interface, wherein the application programming interface is connected to the vehicle computer, and at least a part of the instructions executed by the processor is included in the application programming interface. 10. Устройство по п. 1, в котором данные, предопределенные быть интерпретируемыми компьютером транспортного средства, связаны с интерфейсом прикладного программирования, при этом интерфейс прикладного программирования связан с компьютером транспортного средства, и по меньшей мере часть команд, исполняемых процессором, включена в интерфейс прикладного программирования.10. The device according to claim 1, wherein the data predetermined to be interpreted by the vehicle computer is associated with the application programming interface, wherein the application programming interface is connected with the vehicle computer, and at least a part of the instructions executed by the processor is included in the application interface programming. 11. Система формирования сообщения транспортному средству посредством носимого устройства, содержащая:11. A message generating system for a vehicle by means of a wearable device, comprising: носимое вычислительное устройство, содержащее:wearable computing device containing: устройство звукового вывода, иsound output device, and процессор и память, память хранит команды, исполняемые процессором, так что процессор запрограммирован:processor and memory, memory stores instructions executed by the processor, so the processor is programmed: принимать, от пользователя, речевой ввод для компьютера транспортного средства;receive, from the user, voice input for the vehicle computer; интерпретировать речевой ввод, чтобы определять в памяти по меньшей мере один элемент данных, предопределенный быть интерпретируемым компьютером транспортного средства;interpret the speech input to determine in memory at least one data item predetermined to be interpreted by the vehicle computer; формировать звуковое сообщение, соответствующее речевому вводу, включающее в себя по меньшей мере один элемент данных; иgenerate an audio message corresponding to the voice input, including at least one data element; and отправлять звуковое сообщение, содержащее по меньшей мере один элемент данных, предопределенный быть интерпретируемым компьютером транспортного средства, на транспортное средство посредством устройства звукового вывода; иsend an audio message containing at least one data item, predetermined to be interpreted by the vehicle computer, to the vehicle through the sound output device; and компьютер транспортного средства, включающий в себя процессор и память, память компьютера транспортного средства хранит команды, исполняемые процессором компьютером транспортного средства, так что процессор компьютера транспортного средства запрограммирован:a vehicle computer including a processor and a memory, a vehicle computer memory stores instructions executed by the processor of the vehicle computer, such that the processor of the vehicle computer is programmed: принимать звуковое сообщение из носимого устройства иreceive an audio message from a wearable device and давать, на основании звукового сообщения, одному или более приложениям транспортного средства команду выполнять одну или более операций.give, on the basis of the sound message, one or more applications of the vehicle a command to perform one or more operations. 12. Способ формирования сообщения транспортному средству посредством носимого устройства, состоящий в том, что:12. A method of generating a message to a vehicle by means of a wearable device, comprising: принимают, посредством процессора в носимом вычислительном устройстве, от пользователя речевой ввод для компьютера транспортного средства;receive, by a processor in a portable computing device, from a user, voice input for a vehicle computer; интерпретируют речевой ввод, чтобы определять в памяти по меньшей мере один элемент данных, предопределенный быть интерпретируемым компьютером транспортного средства;interpreting the speech input to determine in memory at least one data item predetermined to be interpreted by the vehicle computer; формируют звуковое сообщение, соответствующее речевому вводу, включающее в себя по меньшей мере один элемент данных, иform an audio message corresponding to the speech input, including at least one data element, and отправляют звуковое сообщение, содержащее по меньшей мере один элемент данных, предопределенный быть интерпретируемым компьютером транспортного средства, на транспортное средство посредством устройства звукового вывода, содержащегося в носимом вычислительном устройстве.send an audio message containing at least one data item, predetermined to be interpreted by the vehicle computer, to the vehicle by means of the sound output device contained in the wearable computing device. 13. Способ по п. 12, дополнительно состоящий в том, что:13. The method according to p. 12, further consisting in the fact that: распознают один или более слогов в речевом вводе;recognize one or more syllables in a speech input; сопоставляют по меньшей мере один из одного или более слогов с фонемой в памяти, предопределенной быть интерпретируемой компьютером транспортного средства; иmatching at least one of one or more syllables with a phoneme in memory predetermined to be interpreted by the vehicle computer; and включают соответствующую фонему в звуковое сообщение.include the corresponding phoneme in the audio message. 14. Способ по п. 12, дополнительно состоящий в том, что:14. The method according to p. 12, further consisting in the fact that: определяют смысл по меньшей мере части речевого ввода;determine the meaning of at least a portion of the speech input; сопоставляют смысл части речевого ввода со смыслом фразы в памяти, предопределенной быть интерпретируемой компьютером транспортного средства; иcompare the meaning of the part of the speech input with the meaning of the phrase in the memory, predetermined to be interpreted by the vehicle computer; and включают фразу в звуковое сообщение.include the phrase in the audio message. 15. Способ по п. 12, в котором библиотека включает в себя один или более сигналов, предопределенных быть интерпретируемыми устройством ввода транспортного средства, дополнительно состоящий в том, что:15. The method of claim 12, wherein the library includes one or more signals predetermined to be interpreted by the vehicle input device, further comprising: определяют смысл по меньшей мере части речевого ввода;determine the meaning of at least a portion of the speech input; сопоставляют смысл части речевой команды со смыслом цифрового кода в памяти, предопределенного быть интерпретируемым компьютером транспортного средства; иcomparing the meaning of part of the speech command with the meaning of a digital code in memory, predetermined to be interpreted by the vehicle computer; and включают цифровой код в цифровое сообщение.include a digital code in a digital message. 16. Способ по п. 12, дополнительно состоящий в том, что:16. The method according to p. 12, further consisting in the fact that: принимают данные, предопределенные быть интерпретируемыми компьютером транспортного средства, из второго вычислительного устройства.receive data predetermined to be interpreted by the vehicle computer from the second computing device. 17. Способ по п. 12, дополнительно состоящий в том, что:17. The method according to p. 12, further consisting in the fact that: образуют пару, перед приемом речевого ввода, носимого вычислительного устройства с компьютером транспортного средства.form a pair, before receiving voice input, a wearable computing device with a vehicle computer. 18. Способ по п. 12, в котором процессор дополнительно запрограммирован:18. The method according to p. 12, in which the processor is additionally programmed: принимать, перед приемом речевого ввода, ввод, инициирующий операцию сообщения транспортному средству.receive, before receiving voice input, input initiating a message operation to the vehicle. 19. Способ по п. 12, дополнительно содержащий:19. The method of claim 12, further comprising: прием, посредством компьютера транспортного средства, звукового сообщения из носимого устройства; иreceiving, via a vehicle computer, an audio message from a wearable device; and подачу, посредством компьютера транспортного средства, на основании звукового сообщения, одному или более приложениям транспортного средства, команды выполнять одну или более операций.giving, by the vehicle computer, based on the sound message, to one or more applications of the vehicle, a command to perform one or more operations.
RU2018115684A 2015-10-28 2015-10-28 Vehicle speech recognition together with portable device RU2705769C1 (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2015/057689 WO2017074328A1 (en) 2015-10-28 2015-10-28 Vehicle voice recognition including a wearable device

Publications (1)

Publication Number Publication Date
RU2705769C1 true RU2705769C1 (en) 2019-11-11

Family

ID=58631924

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2018115684A RU2705769C1 (en) 2015-10-28 2015-10-28 Vehicle speech recognition together with portable device

Country Status (7)

Country Link
US (1) US10522141B2 (en)
CN (1) CN108352167B (en)
DE (1) DE112015006999T5 (en)
GB (1) GB2559702B (en)
MX (1) MX2018004100A (en)
RU (1) RU2705769C1 (en)
WO (1) WO2017074328A1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2767962C2 (en) * 2020-04-13 2022-03-22 Общество С Ограниченной Ответственностью «Яндекс» Method and system for recognizing replayed speech fragment
RU2792947C2 (en) * 2021-07-20 2023-03-28 Общество С Ограниченной Ответственностью «Яндекс» Method and system for audio signal supplement
US11915711B2 (en) 2021-07-20 2024-02-27 Direct Cursus Technology L.L.C Method and system for augmenting audio signals

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10950229B2 (en) * 2016-08-26 2021-03-16 Harman International Industries, Incorporated Configurable speech interface for vehicle infotainment systems

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070005206A1 (en) * 2005-07-01 2007-01-04 You Zhang Automobile interface
RU2466038C2 (en) * 2007-09-12 2012-11-10 Фольксваген Аг Vehicle system with help function
US20150057839A1 (en) * 2013-08-26 2015-02-26 Sherry S. Chang Configuring user customizable operational features of a vehicle
US20150081169A1 (en) * 2013-09-17 2015-03-19 Toyota Motor Sales, U.S.A., Inc. Integrated wearable article for interactive vehicle control system
US9037125B1 (en) * 2014-04-07 2015-05-19 Google Inc. Detecting driving with a wearable computing device

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IT1150715B (en) * 1982-03-19 1986-12-17 Marco Clementi HI=FI car radio with automatic tuner
GB2297667A (en) * 1995-02-01 1996-08-07 Brian Page Controls Ltd Portable control device with multi-mode transmission
US6496107B1 (en) 1999-07-23 2002-12-17 Richard B. Himmelstein Voice-controlled vehicle control system
JP3726783B2 (en) * 2002-07-16 2005-12-14 株式会社デンソー Voice recognition device
EP1920588A4 (en) * 2005-09-01 2010-05-12 Vishal Dhawan Voice application network platform
ATE456490T1 (en) 2007-10-01 2010-02-15 Harman Becker Automotive Sys VOICE-CONTROLLED ADJUSTMENT OF VEHICLE PARTS
JP2009205596A (en) * 2008-02-29 2009-09-10 Toyota Industries Corp Worker detector
US20100128570A1 (en) * 2008-11-24 2010-05-27 Smith Christopher E Wristwatch interface system
GB201116994D0 (en) * 2011-10-03 2011-11-16 The Technology Partnership Plc Assistive device
US10134385B2 (en) * 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US20140309934A1 (en) 2013-04-15 2014-10-16 Flextronics Ap, Llc Automatic Alert Sent to User Based on Host Location Information
KR102011457B1 (en) * 2013-04-17 2019-08-19 엘지전자 주식회사 Mobile terminal and control method thereof
US20140357248A1 (en) * 2013-06-03 2014-12-04 Ford Global Technologies, Llc Apparatus and System for Interacting with a Vehicle and a Device in a Vehicle
US9013300B2 (en) 2013-06-12 2015-04-21 Wilfredo FELIX Method of communicating information through a wearable device
US9481326B2 (en) * 2013-11-06 2016-11-01 Harman International Industries, Incorporated Adapting vehicle systems based on wearable devices
US10088844B2 (en) * 2013-11-22 2018-10-02 Ford Global Technologies, Llc Wearable computer in an autonomous vehicle
US20150230022A1 (en) * 2014-02-07 2015-08-13 Samsung Electronics Co., Ltd. Wearable electronic system
CN203760076U (en) * 2014-03-14 2014-08-06 江苏南大电子信息技术股份有限公司 Wearable intelligent voice input device
US20150309984A1 (en) * 2014-04-25 2015-10-29 Nuance Communications, Inc. Learning language models from scratch based on crowd-sourced user text input
CN204129661U (en) * 2014-10-31 2015-01-28 柏建华 Wearable device and there is the speech control system of this wearable device
CN204288507U (en) * 2014-11-19 2015-04-22 深圳市华晨阳科技有限公司 Intelligent vehicle-carried control electronics bracelet

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070005206A1 (en) * 2005-07-01 2007-01-04 You Zhang Automobile interface
RU2466038C2 (en) * 2007-09-12 2012-11-10 Фольксваген Аг Vehicle system with help function
US20150057839A1 (en) * 2013-08-26 2015-02-26 Sherry S. Chang Configuring user customizable operational features of a vehicle
US20150081169A1 (en) * 2013-09-17 2015-03-19 Toyota Motor Sales, U.S.A., Inc. Integrated wearable article for interactive vehicle control system
US9037125B1 (en) * 2014-04-07 2015-05-19 Google Inc. Detecting driving with a wearable computing device

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2767962C2 (en) * 2020-04-13 2022-03-22 Общество С Ограниченной Ответственностью «Яндекс» Method and system for recognizing replayed speech fragment
US11513767B2 (en) 2020-04-13 2022-11-29 Yandex Europe Ag Method and system for recognizing a reproduced utterance
RU2792947C2 (en) * 2021-07-20 2023-03-28 Общество С Ограниченной Ответственностью «Яндекс» Method and system for audio signal supplement
US11915711B2 (en) 2021-07-20 2024-02-27 Direct Cursus Technology L.L.C Method and system for augmenting audio signals

Also Published As

Publication number Publication date
CN108352167B (en) 2023-04-04
CN108352167A (en) 2018-07-31
US20180261217A1 (en) 2018-09-13
DE112015006999T5 (en) 2018-07-05
GB2559702B (en) 2022-01-12
MX2018004100A (en) 2018-08-01
GB201808311D0 (en) 2018-07-11
US10522141B2 (en) 2019-12-31
WO2017074328A1 (en) 2017-05-04
GB2559702A (en) 2018-08-15

Similar Documents

Publication Publication Date Title
CN109891497B (en) Dynamic text-to-speech provision
CN106796785B (en) Sound sample validation for generating a sound detection model
KR102528466B1 (en) Method for processing speech signal of plurality of speakers and electric apparatus thereof
US11790912B2 (en) Phoneme recognizer customizable keyword spotting system with keyword adaptation
CN111095400A (en) Selection system and method
KR20190100334A (en) Contextual Hotwords
US9368107B2 (en) Permitting automated speech command discovery via manual event to command mapping
CN112970059B (en) Electronic device for processing user utterance and control method thereof
RU2705769C1 (en) Vehicle speech recognition together with portable device
US11468892B2 (en) Electronic apparatus and method for controlling electronic apparatus
US11474780B2 (en) Method of providing speech recognition service and electronic device for same
KR20210036527A (en) Electronic device for processing user utterance and method for operating thereof
KR20210001082A (en) Electornic device for processing user utterance and method for operating thereof
US11710495B2 (en) Device for outputting sound and method therefor
JP6387287B2 (en) Unknown matter resolution processing system
US20210241771A1 (en) Electronic device and method for controlling the electronic device thereof
KR20180134337A (en) Information processing apparatus, information processing method, and program
JP2020152298A (en) Agent device, control method of agent device, and program
KR20200040562A (en) System for processing user utterance and operating method thereof
US11955123B2 (en) Speech recognition system and method of controlling the same
US20220165264A1 (en) Dialogue system, vehicle, and method of controlling dialogue system
CN111640429B (en) Method for providing voice recognition service and electronic device for the same
KR20220118242A (en) Electronic device and method for controlling thereof
JP6221267B2 (en) Speech recognition apparatus and method, and semiconductor integrated circuit device
US20170092271A1 (en) Semiconductor device, system, electronic device, and speech recognition method