RU2015102279A - Способ ввода данных в электронное устройство, способ обработки голосового запроса, машиночитаемый носитель (варианты), электронное устройство, сервер и система - Google Patents
Способ ввода данных в электронное устройство, способ обработки голосового запроса, машиночитаемый носитель (варианты), электронное устройство, сервер и система Download PDFInfo
- Publication number
- RU2015102279A RU2015102279A RU2015102279A RU2015102279A RU2015102279A RU 2015102279 A RU2015102279 A RU 2015102279A RU 2015102279 A RU2015102279 A RU 2015102279A RU 2015102279 A RU2015102279 A RU 2015102279A RU 2015102279 A RU2015102279 A RU 2015102279A
- Authority
- RU
- Russia
- Prior art keywords
- text
- electronic device
- tags
- application
- input field
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract 29
- 238000012545 processing Methods 0.000 title claims 2
- 238000013479 data entry Methods 0.000 title 1
- 230000005540 biological transmission Effects 0.000 claims 1
- 238000006243 chemical reaction Methods 0.000 claims 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
- G06F16/68—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/686—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, title or artist information, time, location or usage information, user ratings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/103—Formatting, i.e. changing of presentation of documents
- G06F40/117—Tagging; Marking up; Designating a block; Setting of attributes
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/226—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics
- G10L2015/228—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics of application context
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Multimedia (AREA)
- Computational Linguistics (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Library & Information Science (AREA)
- General Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Quality & Reliability (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
- Machine Translation (AREA)
- Information Transfer Between Computers (AREA)
Abstract
1. Способ ввода данных в электронное устройство, включающий в себя:получение голосового запроса через голосовой интерфейс электронного устройства;получение множества тегов, каждый из которых связан с соответствующим полем ввода пользовательского интерфейса, относящегося к приложению на упомянутом электронном устройстве;получение по меньшей мере одной части текста, связанной с соответствующим тегом, который является производным от упомянутого голосового запроса;заполнение по меньшей мере одного поля ввода упомянутого приложения с помощью соответствующей части текста, которая связана с соответствующим тегом, связанным с полем ввода.2. Способ по п. 1, в котором каждый из упомянутого множества тегов предоставляет семантическое описание для соответствующего поля ввода.3. Способ по п. 1, в котором упомянутое приложение включает в себя веб-приложение, упомянутое веб-приложение включает в себя множество веб-страниц, каждая страница включает в себя по меньшей мере одно поле ввода, множество упомянутых полей ввода обладает соответствующими тегами.4. Способ по п. 3, в котором по меньшей мере одна из упомянутых веб-страниц включает в себя определение потока операций, и это определение указывает на последовательность страниц, включая упомянутое веб-приложение, и для каждой страницы - набор идентификаторов для каждого поля ввода упомянутой страницы.5. Способ по п. 4, в котором упомянутое определение потока операций включает в себя логику определения условной последовательности страниц в рамках упомянутого веб-приложения.6. Способ по п. 4, в котором упомянутые идентификаторы включают в себя теги для упомянутых полей ввода.7. Способ по п. 1, в котором на
Claims (25)
1. Способ ввода данных в электронное устройство, включающий в себя:
получение голосового запроса через голосовой интерфейс электронного устройства;
получение множества тегов, каждый из которых связан с соответствующим полем ввода пользовательского интерфейса, относящегося к приложению на упомянутом электронном устройстве;
получение по меньшей мере одной части текста, связанной с соответствующим тегом, который является производным от упомянутого голосового запроса;
заполнение по меньшей мере одного поля ввода упомянутого приложения с помощью соответствующей части текста, которая связана с соответствующим тегом, связанным с полем ввода.
2. Способ по п. 1, в котором каждый из упомянутого множества тегов предоставляет семантическое описание для соответствующего поля ввода.
3. Способ по п. 1, в котором упомянутое приложение включает в себя веб-приложение, упомянутое веб-приложение включает в себя множество веб-страниц, каждая страница включает в себя по меньшей мере одно поле ввода, множество упомянутых полей ввода обладает соответствующими тегами.
4. Способ по п. 3, в котором по меньшей мере одна из упомянутых веб-страниц включает в себя определение потока операций, и это определение указывает на последовательность страниц, включая упомянутое веб-приложение, и для каждой страницы - набор идентификаторов для каждого поля ввода упомянутой страницы.
5. Способ по п. 4, в котором упомянутое определение потока операций включает в себя логику определения условной последовательности страниц в рамках упомянутого веб-приложения.
6. Способ по п. 4, в котором упомянутые идентификаторы включают в себя теги для упомянутых полей ввода.
7. Способ по п. 1, в котором на упомянутом этапе получения по меньшей мере одной части текста выполняют предоставление упомянутого голосового запроса, а также индикатора упомянутого множества тегов, связанных с соответствующими полями ввода упомянутого приложения, серверу преобразования речи в текст и получают упомянутую по меньшей мере одну часть текста, связанную с соответствующим тегом, от упомянутого сервера преобразования речи в текст.
8. Способ по п. 7, в котором упомянутый индикатор включает в себя URL веб-приложения.
9. Способ по п. 7, в котором упомянутый индикатор включает в себя упомянутые теги.
10. Способ по п. 1, в котором дополнительно:
выполняют поиск семантической пользовательской информации, доступной на упомянутом электронном устройстве в ответ на получение части текста с нулевым значением текста, связанной с соответствующим тегом для поля ввода упомянутого приложения;
заполняют упомянутое поле ввода упомянутого приложения, связанного с упомянутым тегом, с помощью упомянутой семантической пользовательской информации в ответ на получение семантической пользовательской информации, совпадающей с упомянутым соответствующим тегом с частью текста с нулевым значением текста.
11. Способ по п. 10, в котором упомянутая семантическая пользовательская информация включает одно из: личную информацию пользователя; контактную информацию пользователя; информацию о местонахождении пользователя; историю браузера пользователя; избранные веб-страницы пользователя.
12. Способ обработки голосового запроса, включающий в себя:
получение голосового запроса через голосовой интерфейс электронного устройства;
получение множества тегов, каждый из которых связан с соответствующим полем ввода пользовательского интерфейса, для приложения на упомянутом электронном устройстве;
перевод голосового запроса в текст;
анализ текста для предоставления по меньшей мере одной части текста;
установление связи по меньшей мере одной части текста с соответствующим тегом из множества тегов;
передачу электронному устройству по меньшей мере части текста с указанием соответствующего тега.
13. Способ по п. 12, в котором каждый из упомянутого множества тегов предоставляет семантическое описание для соответствующего поля ввода.
14. Способ по п. 12, в котором упомянутое приложение включает в себя веб-приложение, упомянутое веб-приложение включает в себя множество веб-страниц, каждая страница включает в себя по меньшей мере одно поле ввода, множество упомянутых полей обладает соответствующими тегами.
15. Способ по п. 14, в котором по меньшей мере одна из упомянутых веб-страниц включает в себя определение потока операций, и это определение указывает на последовательность страниц, включая упомянутое веб-приложение, и для каждой страницы - набор идентификаторов для каждого поля ввода упомянутой страницы.
16. Способ по п. 15, в котором упомянутое определение потока операций включает в себя логику определения условной последовательности страниц в рамках упомянутого веб-приложения.
17. Способ по п. 15, в котором упомянутые идентификаторы включают в себя теги для упомянутых полей ввода.
18. Способ по п. 12, в котором на упомянутом этапе анализа текста используют понимание естественного языка для предоставления упомянутой по меньшей мере одной части текста.
19. Способ по п. 12, в котором на упомянутом этапе получения упомянутого множества тегов выполняют: получение URL веб-приложения от упомянутого электронного устройства, извлечение веб-страницы из упомянутого URL, и извлечение упомянутых тегов от упомянутой веб-страницы.
20. Способ по п. 12, в котором на упомянутом этапе получения упомянутого множества тегов выполняют: получение упомянутого множества тегов от упомянутого электронного устройства.
21. Машиночитаемый носитель, включающий в себя программные инструкции, выполненные с возможностью инициирования выполнения электронным устройством:
получения голосового запроса через голосовой интерфейс электронного устройства;
получения множества тегов, каждый из которых связан с соответствующим полем ввода пользовательского интерфейса, относящегося к приложению на упомянутом электронном устройстве;
получения по меньшей мере одной части текста, связанной с соответствующим тегом, который является производным от упомянутого голосового запроса;
заполнения по меньшей мере одного поля ввода упомянутого приложения с помощью соответствующей части текста, которая связана с соответствующим тегом, связанным с полем ввода.
22. Машиночитаемый носитель, включающий в себя программные инструкции, выполненные с возможностью инициирования выполнения сервером:
получения голосового запроса через голосовой интерфейс электронного устройства;
получения множества тегов, каждый из которых связан с соответствующим полем ввода пользовательского интерфейса, для приложения на упомянутом электронном устройстве;
перевода голосового запроса в текст; анализа текста для предоставления по меньшей мере одной части текста;
установления связи по меньшей мере одной части текста с соответствующим тегом из множества тегов; и передачи электронному устройству по меньшей мере части текста с указанием соответствующего тега.
23. Электронное устройство, включающее в себя компонент, работающий в сочетании с пользовательским интерфейсом приложения, и выполнено с возможностью:
получения голосового запроса через голосовой интерфейс электронного устройства;
получения множества тегов, каждый из которых связан с соответствующим полем ввода пользовательского интерфейса, относящегося к приложению на упомянутом электронном устройстве;
получения по меньшей мере одной части текста, связанной с соответствующим тегом, который является производным от упомянутого голосового запроса;
заполнения по меньшей мере одного поля ввода упомянутого приложения с помощью соответствующей части текста, которая связана с соответствующим тегом, связанным с полем ввода.
24. Сервер, связанный с одним или несколькими электронными устройствами в сети передачи данных и выполненный с возможностью:
получения голосового запроса через голосовой интерфейс электронного устройства;
получения множества тегов, каждый из которых связан с соответствующим полем ввода пользовательского интерфейса, для приложения на упомянутом электронном устройстве;
перевода голосового запроса в текст;
анализа текста для предоставления по меньшей мере одной части текста;
установления связи по меньшей мере одной части текста с соответствующим тегом из множества тегов;
передачи электронному устройству по меньшей мере части текста с указанием соответствующего тега.
25. Система, включающая в себя множество электронных устройств в соответствии с п. 23, связанных с сервером по п. 24 в сети передачи данных.
Priority Applications (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| RU2015102279A RU2646350C2 (ru) | 2015-01-27 | 2015-01-27 | Способ ввода данных в электронное устройство, способ обработки голосового запроса, машиночитаемый носитель (варианты), электронное устройство, сервер и система |
| PCT/IB2015/053789 WO2016120675A1 (en) | 2015-01-27 | 2015-05-22 | Method of entering data in an electronic device |
| EP15879783.7A EP3251113A4 (en) | 2015-01-27 | 2015-05-22 | Method of entering data in an electronic device |
| US15/525,614 US20170372700A1 (en) | 2015-01-27 | 2015-05-22 | Method of entering data in an electronic device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| RU2015102279A RU2646350C2 (ru) | 2015-01-27 | 2015-01-27 | Способ ввода данных в электронное устройство, способ обработки голосового запроса, машиночитаемый носитель (варианты), электронное устройство, сервер и система |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| RU2015102279A true RU2015102279A (ru) | 2016-08-20 |
| RU2646350C2 RU2646350C2 (ru) | 2018-03-02 |
Family
ID=56542514
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2015102279A RU2646350C2 (ru) | 2015-01-27 | 2015-01-27 | Способ ввода данных в электронное устройство, способ обработки голосового запроса, машиночитаемый носитель (варианты), электронное устройство, сервер и система |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US20170372700A1 (ru) |
| EP (1) | EP3251113A4 (ru) |
| RU (1) | RU2646350C2 (ru) |
| WO (1) | WO2016120675A1 (ru) |
Families Citing this family (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10581989B2 (en) | 2015-07-30 | 2020-03-03 | Nasdaq, Inc. | Application logging framework |
| JP6762819B2 (ja) * | 2016-09-14 | 2020-09-30 | 株式会社東芝 | 入力支援装置およびプログラム |
| US11861298B1 (en) * | 2017-10-20 | 2024-01-02 | Teletracking Technologies, Inc. | Systems and methods for automatically populating information in a graphical user interface using natural language processing |
| CN111324213A (zh) * | 2018-12-13 | 2020-06-23 | 青岛海信移动通信技术股份有限公司 | 终端的信息输入方法和终端 |
| WO2020226675A1 (en) * | 2019-05-06 | 2020-11-12 | Google Llc | Automated assistant for generating, in response to a request from a user, application input content using application data from other sources |
| KR20210016739A (ko) * | 2019-08-05 | 2021-02-17 | 삼성전자주식회사 | 전자 장치 및 전자 장치의 입력 방법 |
| US10915227B1 (en) * | 2019-08-07 | 2021-02-09 | Bank Of America Corporation | System for adjustment of resource allocation based on multi-channel inputs |
| RU2757264C2 (ru) | 2019-12-24 | 2021-10-12 | Общество С Ограниченной Ответственностью «Яндекс» | Способ и система для обработки пользовательского разговорного речевого фрагмента |
| US11289095B2 (en) | 2019-12-30 | 2022-03-29 | Yandex Europe Ag | Method of and system for translating speech to text |
| US11425075B2 (en) * | 2020-07-29 | 2022-08-23 | Vmware, Inc. | Integration of client applications with hosted applications |
Family Cites Families (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1998020434A2 (en) * | 1996-11-07 | 1998-05-14 | Vayu Web, Inc. | System and method for displaying information and monitoring communications over the internet |
| US20020062342A1 (en) * | 2000-11-22 | 2002-05-23 | Sidles Charles S. | Method and system for completing forms on wide area networks such as the internet |
| US7003464B2 (en) * | 2003-01-09 | 2006-02-21 | Motorola, Inc. | Dialog recognition and control in a voice browser |
| US7158779B2 (en) * | 2003-11-11 | 2007-01-02 | Microsoft Corporation | Sequential multimodal input |
| US7660400B2 (en) * | 2003-12-19 | 2010-02-09 | At&T Intellectual Property Ii, L.P. | Method and apparatus for automatically building conversational systems |
| US7739117B2 (en) * | 2004-09-20 | 2010-06-15 | International Business Machines Corporation | Method and system for voice-enabled autofill |
| US20070130134A1 (en) * | 2005-12-05 | 2007-06-07 | Microsoft Corporation | Natural-language enabling arbitrary web forms |
| US8060371B1 (en) * | 2007-05-09 | 2011-11-15 | Nextel Communications Inc. | System and method for voice interaction with non-voice enabled web pages |
| EP2339576B1 (en) * | 2009-12-23 | 2019-08-07 | Google LLC | Multi-modal input on an electronic device |
| US8255218B1 (en) * | 2011-09-26 | 2012-08-28 | Google Inc. | Directing dictation into input fields |
| US9148499B2 (en) * | 2013-01-22 | 2015-09-29 | Blackberry Limited | Method and system for automatically identifying voice tags through user operation |
| US9111546B2 (en) * | 2013-03-06 | 2015-08-18 | Nuance Communications, Inc. | Speech recognition and interpretation system |
-
2015
- 2015-01-27 RU RU2015102279A patent/RU2646350C2/ru not_active Application Discontinuation
- 2015-05-22 EP EP15879783.7A patent/EP3251113A4/en not_active Ceased
- 2015-05-22 WO PCT/IB2015/053789 patent/WO2016120675A1/en active Application Filing
- 2015-05-22 US US15/525,614 patent/US20170372700A1/en not_active Abandoned
Also Published As
| Publication number | Publication date |
|---|---|
| US20170372700A1 (en) | 2017-12-28 |
| RU2646350C2 (ru) | 2018-03-02 |
| EP3251113A4 (en) | 2018-07-25 |
| WO2016120675A1 (en) | 2016-08-04 |
| EP3251113A1 (en) | 2017-12-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| RU2015102279A (ru) | Способ ввода данных в электронное устройство, способ обработки голосового запроса, машиночитаемый носитель (варианты), электронное устройство, сервер и система | |
| US10430255B2 (en) | Application program interface mashup generation | |
| US20190196811A1 (en) | Api specification generation | |
| RU2012144644A (ru) | Определение намерения пользователя на основе онтологий предметных областей | |
| RU2016137787A (ru) | Персонализированный поиск на основе явной подачи сигналов | |
| US9235569B1 (en) | Techniques for on-the-spot translation of web-based applications without annotating user interface strings | |
| US9619209B1 (en) | Dynamic source code generation | |
| US20190018842A1 (en) | Method executed in translation system and including generation of translated text and generation of parallel translation data | |
| US9619850B2 (en) | Identifying word-senses based on linguistic variations | |
| JP2020030408A (ja) | オーディオにおける重要語句を認識するための方法、装置、機器及び媒体 | |
| US20190163699A1 (en) | Method and apparatus for information interaction | |
| US20170220327A1 (en) | Dynamic source code generation | |
| CN108227954A (zh) | 一种提供搜索输入联想词的方法、装置及电子设备 | |
| JP2020191075A (ja) | Ｗｅｂ ＡＰＩおよび関連エンドポイントの推薦 | |
| JP2015523623A5 (ru) | ||
| CN109190123B (zh) | 用于输出信息的方法和装置 | |
| CN106776744A (zh) | 一种基于互联网信息的软件开发方法及系统 | |
| RU2013156495A (ru) | Разрешение семантической неоднозначности при помощи семантического классификатора | |
| US10191786B2 (en) | Application program interface mashup generation | |
| CN115905490B (zh) | 人机交互对话方法、装置以及设备 | |
| CN109710634B (zh) | 用于生成信息的方法及装置 | |
| CN106462614B (zh) | 信息分析系统、信息分析方法以及信息分析程序 | |
| US20130230248A1 (en) | Ensuring validity of the bookmark reference in a collaborative bookmarking system | |
| CN114201376A (zh) | 基于人工智能的日志解析方法、装置、终端设备及介质 | |
| JP2020035427A (ja) | 情報を更新するための方法と装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FA92 | Acknowledgement of application withdrawn (lack of supplementary materials submitted) |
Effective date: 20170127 |
|
| FZ9A | Application not withdrawn (correction of the notice of withdrawal) |
Effective date: 20171206 |