RU2011144585A - Устройство обработки информации, способ обработки информации и компьютерный носитель данных - Google Patents

Устройство обработки информации, способ обработки информации и компьютерный носитель данных Download PDF

Info

Publication number
RU2011144585A
RU2011144585A RU2011144585/08A RU2011144585A RU2011144585A RU 2011144585 A RU2011144585 A RU 2011144585A RU 2011144585/08 A RU2011144585/08 A RU 2011144585/08A RU 2011144585 A RU2011144585 A RU 2011144585A RU 2011144585 A RU2011144585 A RU 2011144585A
Authority
RU
Russia
Prior art keywords
input data
input
semantic information
module
determining
Prior art date
Application number
RU2011144585/08A
Other languages
English (en)
Inventor
Йосинори МАЕДА
Original Assignee
Сони Корпорейшн
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Сони Корпорейшн filed Critical Сони Корпорейшн
Publication of RU2011144585A publication Critical patent/RU2011144585A/ru

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/24—Speech recognition using non-acoustical features
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038—Indexing scheme relating to G06F3/038
    • G06F2203/0381—Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Details Of Television Systems (AREA)

Abstract

1. Устройство, содержащее:модуль получения, предназначенный для получения первых входных данных и вторых входных данных из множества входных данных;модуль распознавания, предназначенный для:определения первой семантической информации, связанной с первыми входными данными; иопределения второй семантической информации, связанной со вторыми входными данными; имодуль обработки, предназначенный для генерирования команды для выполнения заданной операции на основе объединения первой семантической информации и второй семантической информации.2. Устройство по п.1, содержащее модуль выполнения, предназначенный для выполнения сгенерированной команды для выполнения заданной операции.3. Устройство по п.1, содержащее модуль распознавания голоса, предназначенный для распознавания ввода голосом как первые входные данные.4. Устройство по п.1, содержащее модуль распознавания жеста, предназначенный для распознавания ввода жестом как вторые входные данные.5. Устройство по п.1, в котором первые входные данные и вторые входные данные принимают одновременно.6. Устройство по п.1, в котором первые входные данные или вторые входные данные указывают цель для заданной операции.7. Устройство по п.1, в котором первые входные данные или вторые входные данные указывают информацию величины выполнения для заданной операции.8. Устройство по п.1, содержащее модуль хранения, предназначенный для хранения шаблона ввода, сравниваемого с первой входной информацией или второй входной информацией.9. Устройство по п.8, в котором модуль хранения содержит модуль хранения голоса, предназначенный для хранения шаблонов ввода голосом.10. Устройство по п.9,

Claims (19)

1. Устройство, содержащее:
модуль получения, предназначенный для получения первых входных данных и вторых входных данных из множества входных данных;
модуль распознавания, предназначенный для:
определения первой семантической информации, связанной с первыми входными данными; и
определения второй семантической информации, связанной со вторыми входными данными; и
модуль обработки, предназначенный для генерирования команды для выполнения заданной операции на основе объединения первой семантической информации и второй семантической информации.
2. Устройство по п.1, содержащее модуль выполнения, предназначенный для выполнения сгенерированной команды для выполнения заданной операции.
3. Устройство по п.1, содержащее модуль распознавания голоса, предназначенный для распознавания ввода голосом как первые входные данные.
4. Устройство по п.1, содержащее модуль распознавания жеста, предназначенный для распознавания ввода жестом как вторые входные данные.
5. Устройство по п.1, в котором первые входные данные и вторые входные данные принимают одновременно.
6. Устройство по п.1, в котором первые входные данные или вторые входные данные указывают цель для заданной операции.
7. Устройство по п.1, в котором первые входные данные или вторые входные данные указывают информацию величины выполнения для заданной операции.
8. Устройство по п.1, содержащее модуль хранения, предназначенный для хранения шаблона ввода, сравниваемого с первой входной информацией или второй входной информацией.
9. Устройство по п.8, в котором модуль хранения содержит модуль хранения голоса, предназначенный для хранения шаблонов ввода голосом.
10. Устройство по п.9, в котором модуль обработки выполнен с возможностью определения первой семантической информации сравнением первых входных данных с шаблонами ввода голосом.
11. Устройство по п.8, в котором модуль хранения содержит модуль хранения жестов, предназначенный для хранения шаблонов ввода жестом.
12. Устройство по п.11, в котором модуль обработки выполнен с возможностью определения первой семантической информации сравнением первых входных данных с шаблонами ввода жестом.
13. Устройство по п.1, содержащее модуль идентификации пользователя, предназначенный для идентификации пользователя на основе первых входных данных и вторых входных данных.
14. Устройство по п.13, в котором модуль распознавания выполнен с возможностью определения первой семантической информации и второй семантической информации, связанные с идентифицированным пользователем.
15. Устройство по п.1, в котором семантическая информация содержит информацию, обозначающую значение принятых входных данных.
16. Устройство по п.1, содержащее модуль частотной информации, предназначенный для хранения частоты генерирования, представляющей количество раз, которое генерируемая команда была сгенерирована за заданный период времени.
17. Устройство по. 1, в котором модуль обработки выполнен с возможностью генерирования одиночной команды для выполнения заданной операции.
18. Способ, содержащий:
получение, по меньшей мере, первых входных данных и вторых входных данных из множества входных данных;
определение первой семантической информации, связанной с первыми входными данными;
определение второй семантической информации, связанной со вторыми входными данными; и
генерирование команды для выполнения заданной операции на основе объединения определенной первой и второй семантической информации.
19. Материально реализованное постоянное компьютерное запоминающее устройство, хранящее компьютерные команды, которые, при выполнении их процессором, заставляют компьютер выполнить способ для отображения множества объектов, содержащий:
получение, по меньшей мере, первых входных данных и вторых входных данных из множества входных данных;
определение первой семантической информации, связанной с первыми входными данными;
определение второй семантической информации, связанной со вторыми входными данными; и
генерирование команды для выполнения заданной операции на основе объединения определенной первой и второй семантической информации.
RU2011144585/08A 2010-11-09 2011-11-02 Устройство обработки информации, способ обработки информации и компьютерный носитель данных RU2011144585A (ru)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010-250713 2010-11-09
JP2010250713A JP5636888B2 (ja) 2010-11-09 2010-11-09 情報処理装置、プログラムおよびコマンド生成方法

Publications (1)

Publication Number Publication Date
RU2011144585A true RU2011144585A (ru) 2013-05-10

Family

ID=44925371

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2011144585/08A RU2011144585A (ru) 2010-11-09 2011-11-02 Устройство обработки информации, способ обработки информации и компьютерный носитель данных

Country Status (5)

Country Link
US (1) US20120112995A1 (ru)
EP (1) EP2450879A1 (ru)
JP (1) JP5636888B2 (ru)
CN (1) CN102591448A (ru)
RU (1) RU2011144585A (ru)

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9652506B2 (en) 2011-12-16 2017-05-16 Microsoft Technology Licensing, Llc Providing data experience(s) via disparate semantic annotations based on a respective user scenario
KR101196751B1 (ko) * 2012-04-23 2012-11-07 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
JP6044819B2 (ja) * 2012-05-30 2016-12-14 日本電気株式会社 情報処理システム、情報処理方法、通信端末、情報処理装置およびその制御方法と制御プログラム
EP2871640B1 (en) * 2012-07-09 2021-01-06 LG Electronics, Inc. Speech recognition apparatus and method
US9412366B2 (en) 2012-09-18 2016-08-09 Adobe Systems Incorporated Natural language image spatial and tonal localization
US10656808B2 (en) * 2012-09-18 2020-05-19 Adobe Inc. Natural language and user interface controls
JP6227236B2 (ja) * 2012-10-01 2017-11-08 シャープ株式会社 記録装置および再生装置
KR102004884B1 (ko) * 2013-01-07 2019-07-29 삼성전자주식회사 전자 장치에서 움직이는 사진 제어 장치 및 방법
JP5783385B2 (ja) * 2013-02-27 2015-09-24 カシオ計算機株式会社 データ処理装置及びプログラム
US10157618B2 (en) * 2013-05-02 2018-12-18 Xappmedia, Inc. Device, system, method, and computer-readable medium for providing interactive advertising
JP6102588B2 (ja) 2013-07-10 2017-03-29 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
JP6386331B2 (ja) 2013-11-05 2018-09-05 株式会社Ｍｏｆｆ 動作検出システム、動作検出装置、移動通信端末及びプログラム
CN103761463B (zh) * 2014-01-13 2017-09-01 联想(北京)有限公司 一种信息处理方法及电子设备
JP2015153353A (ja) * 2014-02-19 2015-08-24 パイオニア株式会社 情報処理装置及び方法、並びにコンピュータプログラム
KR20150102589A (ko) * 2014-02-28 2015-09-07 삼성메디슨 주식회사 의료 영상 처리 장치, 의료 영상 처리 방법, 및 컴퓨터 판독가능 기록매체
US10307672B2 (en) 2014-05-19 2019-06-04 Moff, Inc. Distribution system, distribution method, and distribution device
US9710071B2 (en) * 2014-09-22 2017-07-18 Rovi Guides, Inc. Methods and systems for recalibrating a user device based on age of a user and received verbal input
US9778736B2 (en) * 2014-09-22 2017-10-03 Rovi Guides, Inc. Methods and systems for calibrating user devices
CN105792005B (zh) * 2014-12-22 2019-05-14 深圳Tcl数字技术有限公司 录像控制的方法及装置
JP6094638B2 (ja) * 2015-07-10 2017-03-15 カシオ計算機株式会社 処理装置及びプログラム
US10157333B1 (en) 2015-09-15 2018-12-18 Snap Inc. Systems and methods for content tagging
US9978366B2 (en) 2015-10-09 2018-05-22 Xappmedia, Inc. Event-based speech interactive media player
JP6599803B2 (ja) * 2016-03-08 2019-10-30 シャープ株式会社 発話装置
CN105898256A (zh) * 2016-05-30 2016-08-24 佛山市章扬科技有限公司 一种动作识别无屏电视
WO2018185830A1 (ja) * 2017-04-04 2018-10-11 株式会社オプティム 情報処理システム、情報処理方法、情報処理装置、及びプログラム
KR102441067B1 (ko) * 2017-10-12 2022-09-06 현대자동차주식회사 차량의 사용자 입력 처리 장치 및 사용자 입력 처리 방법
US10859830B2 (en) * 2018-01-31 2020-12-08 Sony Interactive Entertainment LLC Image adjustment for an eye tracking system
US11195525B2 (en) * 2018-06-13 2021-12-07 Panasonic Intellectual Property Corporation Of America Operation terminal, voice inputting method, and computer-readable recording medium
WO2020031367A1 (ja) * 2018-08-10 2020-02-13 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
JP6671524B1 (ja) * 2019-02-22 2020-03-25 菱洋エレクトロ株式会社 報告書作成するための方法、システム、及び装置
CN112614490B (zh) * 2020-12-09 2024-04-16 北京罗克维尔斯科技有限公司 生成语音指令的方法、装置、介质、设备、系统及车辆
WO2023218522A1 (ja) * 2022-05-10 2023-11-16 ファナック株式会社 機械操作装置

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1031551A (ja) * 1996-07-15 1998-02-03 Mitsubishi Electric Corp ヒューマンインターフェースシステムおよびこれを使用した高速移動物体位置検出装置
JP2004192653A (ja) 1997-02-28 2004-07-08 Toshiba Corp マルチモーダルインタフェース装置およびマルチモーダルインタフェース方法
JPH11288296A (ja) * 1998-04-06 1999-10-19 Denso Corp 情報処理装置
US7216351B1 (en) * 1999-04-07 2007-05-08 International Business Machines Corporation Systems and methods for synchronizing multi-modal interactions
JP2000339305A (ja) * 1999-05-31 2000-12-08 Toshiba Corp 文書作成装置、及び文書作成方法
JP3581881B2 (ja) * 2000-07-13 2004-10-27 独立行政法人産業技術総合研究所 音声補完方法、装置および記録媒体
JP2002062962A (ja) * 2000-08-23 2002-02-28 Hitachi Ltd 機器のデータ処理方法および装置および機器
JP2002251235A (ja) * 2001-02-23 2002-09-06 Fujitsu Ltd 利用者インタフェースシステム
JP3837505B2 (ja) 2002-05-20 2006-10-25 独立行政法人産業技術総合研究所 ジェスチャ認識による制御装置のジェスチャの登録方法
JP4311190B2 (ja) * 2003-12-17 2009-08-12 株式会社デンソー 車載機器用インターフェース
US20050197843A1 (en) * 2004-03-07 2005-09-08 International Business Machines Corporation Multimodal aggregating unit
JP2007283968A (ja) * 2006-04-19 2007-11-01 Toyota Motor Corp 車両用制御装置
JP5018074B2 (ja) * 2006-12-22 2012-09-05 富士通セミコンダクター株式会社 メモリ装置，メモリコントローラ及びメモリシステム
JP2008180833A (ja) * 2007-01-24 2008-08-07 Kyocera Mita Corp 操作表示装置、操作表示プログラム及び電子機器
US20080252595A1 (en) * 2007-04-11 2008-10-16 Marc Boillot Method and Device for Virtual Navigation and Voice Processing
US7895518B2 (en) * 2007-04-27 2011-02-22 Shapewriter Inc. System and method for preview and selection of words
JP2008293252A (ja) * 2007-05-24 2008-12-04 Nec Corp 操作システム及び操作システムの制御方法
US8532871B2 (en) * 2007-06-05 2013-09-10 Mitsubishi Electric Company Multi-modal vehicle operating device
DE102008051757A1 (de) * 2007-11-12 2009-05-14 Volkswagen Ag Multimodale Benutzerschnittstelle eines Fahrerassistenzsystems zur Eingabe und Präsentation von Informationen
JP5170771B2 (ja) * 2009-01-05 2013-03-27 任天堂株式会社 描画処理プログラム、情報処理装置、情報処理システムおよび情報処理制御方法
JP5282640B2 (ja) 2009-04-20 2013-09-04 富士通株式会社 データ処理装置、データ処理方法、およびデータ処理プログラム
KR101566379B1 (ko) * 2009-05-07 2015-11-13 삼성전자주식회사 입력 신호 종류 별 사용자 기능 활성화 방법 및 이를 지원하는 휴대 단말기
US20100315329A1 (en) * 2009-06-12 2010-12-16 Southwest Research Institute Wearable workspace

Also Published As

Publication number Publication date
EP2450879A1 (en) 2012-05-09
JP2012103840A (ja) 2012-05-31
JP5636888B2 (ja) 2014-12-10
US20120112995A1 (en) 2012-05-10
CN102591448A (zh) 2012-07-18

Similar Documents

Publication Publication Date Title
RU2011144585A (ru) Устройство обработки информации, способ обработки информации и компьютерный носитель данных
CN106462399B (zh) 代码推荐
RU2016133850A (ru) Определение задач в сообщениях
TWI467418B (zh) 效率高的姿勢處理方法及電腦程式產品
RU2017137406A (ru) Модуль видеоанализа и способ формирования материалов расследования поведения пользователя
GB2543198A (en) Providing automatic actions for mobile onscreen content
RU2016101409A (ru) Способ и устройство для управления приложением
RU2014150944A (ru) Система и способ использования данных предыдущего кадра для оптического распознавания символов кадров видеоматериалов
US20130262352A1 (en) Apparatus and method for recognizing user activity
US20150370541A1 (en) Verification of a model of a gui-based application
RU2015100255A (ru) Способ и устройство для сокрытия конфиденциальной информации
US9448637B2 (en) Detection of and response to extra-device touch events
US10241621B2 (en) Determining unintended touch rejection
WO2014210548A3 (en) Extracting card data using card art
US20140270258A1 (en) Apparatus and method for executing object using voice command
JP2006209542A5 (ru)
JP2010086482A5 (ru)
RU2020112483A (ru) Устройство, способ и программа для обработки сигнала
EP1760571A3 (en) Input data processing program and information processing apparatus
US8378198B2 (en) Method and apparatus for detecting pitch period of input signal
CN106782529B (zh) 语音识别的唤醒词选择方法及装置
US20160179239A1 (en) Information processing apparatus, input method and program
ES2552881A1 (es) Dispositivo portable y método de control mediante gestos
JP2016071382A5 (ru)
US9594952B2 (en) Computer-readable recording medium, method, and apparatus for character recognition