JP5636888B2 - 情報処理装置、プログラムおよびコマンド生成方法 - Google Patents
情報処理装置、プログラムおよびコマンド生成方法 Download PDFInfo
- Publication number
- JP5636888B2 JP5636888B2 JP2010250713A JP2010250713A JP5636888B2 JP 5636888 B2 JP5636888 B2 JP 5636888B2 JP 2010250713 A JP2010250713 A JP 2010250713A JP 2010250713 A JP2010250713 A JP 2010250713A JP 5636888 B2 JP5636888 B2 JP 5636888B2
- Authority
- JP
- Japan
- Prior art keywords
- input
- information
- command
- user
- semantic information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000010365 information processing Effects 0.000 title claims description 110
- 238000000034 method Methods 0.000 title claims description 61
- 238000012545 processing Methods 0.000 claims description 157
- 230000008859 change Effects 0.000 claims description 82
- 230000008569 process Effects 0.000 claims description 47
- 238000006243 chemical reaction Methods 0.000 claims description 46
- 238000000059 patterning Methods 0.000 claims description 8
- 238000012790 confirmation Methods 0.000 claims description 6
- 230000006870 function Effects 0.000 description 18
- 238000004891 communication Methods 0.000 description 17
- 239000000284 extract Substances 0.000 description 15
- 230000001174 ascending effect Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 12
- 238000007726 management method Methods 0.000 description 9
- 230000000694 effects Effects 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 230000002093 peripheral effect Effects 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 238000007796 conventional method Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000004424 eye movement Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000005406 washing Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/24—Speech recognition using non-acoustical features
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L17/00—Speaker identification or verification techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/038—Indexing scheme relating to G06F3/038
- G06F2203/0381—Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer
Landscapes
- Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Multimedia (AREA)
- Computational Linguistics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Details Of Television Systems (AREA)
Description
1.第1の実施形態
1−1.情報処理装置の構成
1−2.処理の流れ
2.第2の実施形態
2−1.情報処理装置の構成
2−2.処理の流れ
3.第3の実施形態
3−1.情報処理装置の構成
3−2.処理の流れ
4.第4の実施形態
4−1.情報処理装置の構成
4−2.処理の流れ
5.第5の実施形態
5−1.情報処理装置の構成
5−2.処理の流れ
6.発明の各実施形態に係る情報処理装置のハードウェア構成
7.まとめ
[1−1.情報処理装置の構成]
以下では、図1〜8を用いて、本発明の第1の実施形態に係る情報処理装置の構成について説明する。
以下では、図9を用いて、本発明の第1の実施形態に係るコマンド生成処理について説明する。図9は、第1の実施形態に係るコマンド生成処理を示すフローチャートである。
本発明の第2の実施形態に係る情報処理装置は、本発明の第1の実施形態に係る情報処理装置が有する機能に対して、対象装置に実行させる動作の実行量を入力操作に基づいて変える機能がさらに追加されたものである。
以下では、図10〜13を用いて、本発明の第2の実施形態に係る情報処理装置の構成について説明する。
以下では、図14を用いて、本発明の第2の実施形態に係るコマンド生成処理について説明する。図14は、第2の実施形態に係るコマンド生成処理を示すフローチャートである。この中で、ステップS310、ステップS320、ステップS330、ステップS350およびステップS360は、[1−2.処理の流れ]にて説明した第1の実施形態に係るコマンド生成処理と同じである。よって、ここでは新たに追加されているステップS322、および第1の実施形態と一部の処理が相違するステップS340の相違箇所を中心に説明する。
本発明の第3の実施形態に係る情報処理装置は、本発明の第1の実施形態に係る情報処理装置が有する機能に対して、各ユーザの特性に合わせた意味情報の認識を行う機能がさらに追加されたものである。
以下では、図15〜17を用いて、本発明の第3の実施形態に係る情報処理装置の構成について説明する。
以下では、図18を用いて、本発明の第3の実施形態に係るコマンド生成処理について説明する。図18は、第3の実施形態に係るコマンド生成処理を示すフローチャートである。この中で、ステップS310、ステップS330、ステップS340、ステップS350およびステップS360は、[1−2.処理の流れ]にて説明した第1の実施形態に係るコマンド生成処理と同じである。よって、ここでは新たに追加されているステップS312、ステップS314、ステップS316およびステップS318、並びに第1の実施形態と一部の処理が相違するステップS320の相違箇所を中心に説明する。
本発明の第4の実施形態に係る情報処理装置は、本発明の第1の実施形態に係る情報処理装置が有する機能に対して、コマンドを生成するために入力操作の一部を省略することを可能とする機能がさらに追加されたものである。
以下では、図19〜24を用いて、本発明の第4の実施形態に係る情報処理装置の構成について説明する。
以下では、図25を用いて、本発明の第4の実施形態に係るコマンド生成処理について説明する。図25は、第4の実施形態に係るコマンド生成処理を示すフローチャートである。この中で、ステップS310、ステップS320、ステップS330、ステップS340、ステップS350およびステップS360は、[1−2.処理の流れ]にて説明した第1の実施形態に係るコマンド生成処理と同じである。よって、ここでは新たに追加されているステップS410、ステップS420、ステップS430およびステップS440を中心に説明する。
本発明の第5の実施形態に係る情報処理装置は、本発明の第1の実施形態に係る情報処理装置が有する機能に対して、ユーザにより入力操作の一部が行われた場合に、さらなる入力操作の候補をユーザに提示することを可能とする機能が、さらに追加されたものである。また、ユーザにより入力操作の一部が行われた場合に、コマンドにより動作が実行される前における当該動作の対象の状態をユーザに提示することを可能とする機能が、さらに追加されたものである。
以下では、図26〜30を用いて、本発明の第5の実施形態に係る情報処理装置の構成について説明する。
「パラメータを上げる」という意味情報をジェスチャ認識部140から入力される。また、図27の場合と同様に、動作処理部150は、「動作の対象はチャンネル」、「動作の対象は音量」、「動作の対象は画面の輝度」という意味情報の候補をコマンド記憶部152から取得する。図5を参照すると、コマンド記憶部152のコマンド辞書には、「チャンネルを昇順に変える」、「音量を上げる」、「画面の輝度を上げる」というコマンドが「パラメータを上げる」という既に認識された意味情報と、「動作の対象はチャンネル」、「動作の対象は音量」、「動作の対象は画面の輝度」という候補の意味情報との組合せに対応して記憶されている。よって、動作処理部150は、「チャンネルを昇順に変える」、「音量を上げる」、「画面の輝度を上げる」というコマンドをコマンド記憶部152から取得する。そして、動作処理部150は、図29に示されるとおり、「チャンネルを昇順に変える」、「音量を上げる」、「画面の輝度を上げる」というコマンドにより動作が実行される前の、「チャンネル」、「音量」、「画面の輝度」の状態を、表示画面に表示するよう制御する。
以下では、図31を用いて、本発明の第5の実施形態に係るコマンド生成処理について説明する。図31は、第5の実施形態に係るコマンド生成処理を示すフローチャートである。この中で、ステップS310、ステップS320、ステップS330、ステップS340、ステップS350およびステップS360は、[1−2.処理の流れ]にて説明した第1の実施形態に係るコマンド生成処理と同じである。よって、ここでは新たに追加されているステップS410、ステップS450、ステップS460、ステップS470、ステップS480およびステップS490を中心に説明する。
次に、図32を参照しながら、本発明の各実施形態に係る情報処理装置100のハードウェア構成について、詳細に説明する。図32は、本発明の各実施形態に係る情報処理装置100のハードウェア構成の一例を示すブロック図である。
ここまで、図1〜図32を用いて、本発明の各実施形態について説明した。第1の実施形態によれば、様々な効果が得られ得る。まず、2種類以上の入力操作を組合せることにより、ユーザが覚えなければならない入力操作の数を減らすことが可能となる。例えば、音声による入力操作と手の動きによる入力操作が組合せられる場合に、ユーザは、5個の音声による入力操作および5個の手の動きによる入力操作の計10個の入力操作を覚えることにより、最大でその組合せの数である25個のコマンドを生成させ得る。一方で、手の動きによる入力操作のみが用いられる場合に、ユーザが25個のコマンドを生成させるために、ユーザは25個の手の動きによる入力操作を覚えなければならない。
110 音声入力情報取得部
120 ジェスチャ入力情報取得部
130 音声認識部
132 音声記憶部
140 ジェスチャ認識部
142 ジェスチャ記憶部
150 動作処理部
152 コマンド記憶部
160 変化量変換部
170 個人判別部
Claims (17)
- 2種類以上の異なる入力操作により取得した2種類以上の入力情報から、該入力情報の種類毎に各入力操作の意味する意味情報を認識する入力認識部と、
2種類以上の前記意味情報を組合せることにより、対象装置に所定の動作を実行させるためのコマンドを生成する動作処理部と、
予め登録されたユーザIDの中から、前記入力操作を行うユーザのユーザIDを特定する個人判別部と、
を備え、
前記入力認識部は、前記特定されたユーザIDに応じて、前記入力情報の種類毎に前記入力操作を行うユーザの特性に合わせた意味情報を認識し、
前記入力認識部は、前記特定されたユーザIDに応じて、前記入力情報の種類毎に、予め入力操作をパターン化した入力パターンに対してユーザID毎に予め定められた優先度に基づいて、前記各入力情報に対応する前記入力パターンを特定し、該入力パターンに関連付けられた前記意味情報を抽出する、
情報処理装置。 - 前記入力認識部は、前記特定されたユーザIDに応じて、前記入力情報の種類毎に、ユーザID毎に予め入力操作をパターン化した入力パターンのうち、前記各入力情報に対応する前記入力パターンを特定し、該入力パターンに関連付けられた前記意味情報を抽出する、請求項1に記載の情報処理装置。
- 2種類以上の異なる入力操作により取得した2種類以上の入力情報から、該入力情報の種類毎に各入力操作の意味する意味情報を認識する入力認識部と、
2種類以上の前記意味情報を組合せることにより、対象装置に所定の動作を実行させるためのコマンドを生成する動作処理部と、
を備え、
前記動作処理部は、前記コマンドが入力操作の一部を省略することが可能な省略対象に指定されている場合に、前記コマンドを生成するための2種類以上の前記意味情報のうち1種類以上の前記意味情報が認識されると、前記コマンドを生成する、
情報処理装置。 - 前記動作処理部は、前記コマンドの生成頻度、最新に生成されたコマンドから過去に向かって連続的に生成された所定個数のコマンドのうち少なくとも1つ以上のコマンド、前記動作処理部により繰り返し実行されるコマンド生成処理のうち最新のコマンド生成処理の開始時点から過去に向かって所定時間内に生成されたコマンド、およびユーザにより指定された省略対象に関する情報のうち少なくとも1つ以上に基づいて、前記コマンドを前記省略対象に指定する、請求項3に記載の情報処理装置。
- 前記動作処理部は、前記コマンドにより所定の動作が実行される前に、該所定の動作の実行の可否をユーザに確認させるための確認表示を、前記対象装置またはその他の装置の表示画面に表示するように制御する、請求項3に記載の情報処理装置。
- 前記入力認識部は、前記2種類以上の入力情報から少なくとも前記所定の動作の対象を示す意味情報と前記所定の動作の内容を示す意味情報とを認識する、請求項1又は3に記載の情報処理装置。
- 前記2種類以上の入力情報は、音声による入力操作により取得した音声入力情報、および体の一部若しくは全部の動きまたは状態による入力操作により取得した1種類以上のジェスチャ入力情報のうちの、少なくとも2種類以上の入力情報を含む、請求項1又は3に記載の情報処理装置。
- 前記情報処理装置は、前記2種類以上の入力情報および別の入力操作により取得した別の入力情報のうち、いずれかの入力情報から、前記所定の動作の実行量を示す実行量情報を認識する変化量変換部をさらに備え、
前記動作処理部は、前記2種類以上の前記意味情報および前記実行量情報を組合せることにより、対象装置に所定量の動作を実行させるためのコマンドを生成する、
請求項1又は3に記載の情報処理装置。 - 前記いずれかの入力情報は、音声による入力操作により取得した音声入力情報、または体の一部若しくは全部の動きまたは状態による入力操作により取得したジェスチャ入力情報であり、
前記変化量変換部は、前記いずれかの入力情報が前記音声入力情報である場合には、前記音声入力情報から取得される音量から前記実行量情報を認識し、前記いずれかの入力情報が前記ジェスチャ入力情報である場合には、前記ジェスチャ入力情報から取得される体の一部若しくは全部の動きまたは状態の変化量から前記実行量情報を認識する、
請求項8に記載の情報処理装置。 - 前記動作処理部は、前記コマンドの生成のために必要な前記意味情報のうち1種類以上の前記意味情報が認識されていない場合に、前記認識されていない前記意味情報の候補を特定し、該候補の意味情報を意味する入力操作を、前記対象装置またはその他の装置の表示画面に表示するように制御する、請求項1又は3に記載の情報処理装置。
- 前記動作処理部は、前記コマンドの生成のために必要な前記意味情報のうち1種類以上の前記意味情報が認識されていない場合に、前記認識されていない前記意味情報の候補を特定し、該候補の意味情報と既に認識された意味情報により生成される前記コマンドを特定し、該コマンドにより所定の動作が実行される前の、前記対象装置に関する該動作の対象の状態を、前記対象装置またはその他の装置の表示画面に表示するように制御する、請求項1又は3に記載の情報処理装置。
- 前記対象装置は、前記情報処理装置および前記情報処理装置に接続された機器のうち少なくとも1つ以上であり、
前記動作処理部は、生成された前記コマンドに従って前記情報処理装置および前記機器のなくとも1つ以上に所定の動作を実行させる、
請求項1又は3に記載の情報処理装置。 - 前記動作処理部は、生成された前記コマンドに従って所定の動作が実行された結果を示す結果情報を、前記対象装置またはその他の装置の表示画面に表示するように制御する、請求項12に記載の情報処理装置。
- コンピュータを、
2種類以上の異なる入力操作により取得した2種類以上の入力情報から、該入力情報の種類毎に各入力操作の意味する意味情報を認識する入力認識部と、
2種類以上の前記意味情報を組合せることにより、対象装置に所定の動作を実行させるためのコマンドを生成する動作処理部と、
予め登録されたユーザIDの中から、前記入力操作を行うユーザのユーザIDを特定する個人判別部と、
として機能させるためのプログラムであり、
前記入力認識部は、前記特定されたユーザIDに応じて、前記入力情報の種類毎に前記入力操作を行うユーザの特性に合わせた意味情報を認識し、
前記入力認識部は、前記特定されたユーザIDに応じて、前記入力情報の種類毎に、予め入力操作をパターン化した入力パターンに対してユーザID毎に予め定められた優先度に基づいて、前記各入力情報に対応する前記入力パターンを特定し、該入力パターンに関連付けられた前記意味情報を抽出する、
プログラム。 - コンピュータを、
2種類以上の異なる入力操作により取得した2種類以上の入力情報から、該入力情報の種類毎に各入力操作の意味する意味情報を認識する入力認識部と、
2種類以上の前記意味情報を組合せることにより、対象装置に所定の動作を実行させるためのコマンドを生成する動作処理部と、
として機能させるためのプログラムであり、
前記動作処理部は、前記コマンドが入力操作の一部を省略することが可能な省略対象に指定されている場合に、前記コマンドを生成するための2種類以上の前記意味情報のうち1種類以上の前記意味情報が認識されると、前記コマンドを生成する、
プログラム。 - 2種類以上の異なる入力操作により取得した2種類以上の入力情報から、該入力情報の種類毎に各入力操作の意味する意味情報を認識する認識ステップと、
2種類以上の前記意味情報を組合せることにより、対象装置に所定の動作を実行させるためのコマンドを生成する生成ステップと、
予め登録されたユーザIDの中から、前記入力操作を行うユーザのユーザIDを特定する特定ステップと、
を含み、
前記認識ステップは、前記特定されたユーザIDに応じて、前記入力情報の種類毎に前記入力操作を行うユーザの特性に合わせた意味情報を認識することを含み、
前記特性に合わせた前記意味情報を認識することは、前記特定されたユーザIDに応じて、前記入力情報の種類毎に、予め入力操作をパターン化した入力パターンに対してユーザID毎に予め定められた優先度に基づいて、前記各入力情報に対応する前記入力パターンを特定し、該入力パターンに関連付けられた前記意味情報を抽出すること、を含む、
コマンド生成方法。 - 2種類以上の異なる入力操作により取得した2種類以上の入力情報から、該入力情報の種類毎に各入力操作の意味する意味情報を認識する認識ステップと、
2種類以上の前記意味情報を組合せることにより、対象装置に所定の動作を実行させるためのコマンドを生成する生成ステップと、
を含み、
前記生成ステップは、前記コマンドが入力操作の一部を省略することが可能な省略対象に指定されている場合に、前記コマンドを生成するための2種類以上の前記意味情報のうち1種類以上の前記意味情報が認識されると、前記コマンドを生成すること、を含む、
コマンド生成方法。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010250713A JP5636888B2 (ja) | 2010-11-09 | 2010-11-09 | 情報処理装置、プログラムおよびコマンド生成方法 |
US13/285,405 US20120112995A1 (en) | 2010-11-09 | 2011-10-31 | Information Processing Apparatus, Information Processing Method, and Computer-Readable Storage Medium |
EP11187390A EP2450879A1 (en) | 2010-11-09 | 2011-11-01 | Information processing apparatus, information processing method, and computer-readable storage medium |
CN2011103419297A CN102591448A (zh) | 2010-11-09 | 2011-11-02 | 信息处理设备、信息处理方法和计算机可读存储介质 |
RU2011144585/08A RU2011144585A (ru) | 2010-11-09 | 2011-11-02 | Устройство обработки информации, способ обработки информации и компьютерный носитель данных |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010250713A JP5636888B2 (ja) | 2010-11-09 | 2010-11-09 | 情報処理装置、プログラムおよびコマンド生成方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012103840A JP2012103840A (ja) | 2012-05-31 |
JP5636888B2 true JP5636888B2 (ja) | 2014-12-10 |
Family
ID=44925371
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010250713A Expired - Fee Related JP5636888B2 (ja) | 2010-11-09 | 2010-11-09 | 情報処理装置、プログラムおよびコマンド生成方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20120112995A1 (ja) |
EP (1) | EP2450879A1 (ja) |
JP (1) | JP5636888B2 (ja) |
CN (1) | CN102591448A (ja) |
RU (1) | RU2011144585A (ja) |
Families Citing this family (32)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9652506B2 (en) | 2011-12-16 | 2017-05-16 | Microsoft Technology Licensing, Llc | Providing data experience(s) via disparate semantic annotations based on a respective user scenario |
KR101196751B1 (ko) * | 2012-04-23 | 2012-11-07 | 엘지전자 주식회사 | 이동 단말기 및 그것의 제어 방법 |
JP6044819B2 (ja) * | 2012-05-30 | 2016-12-14 | 日本電気株式会社 | 情報処理システム、情報処理方法、通信端末、情報処理装置およびその制御方法と制御プログラム |
EP2871640B1 (en) * | 2012-07-09 | 2021-01-06 | LG Electronics, Inc. | Speech recognition apparatus and method |
US9412366B2 (en) | 2012-09-18 | 2016-08-09 | Adobe Systems Incorporated | Natural language image spatial and tonal localization |
US10656808B2 (en) * | 2012-09-18 | 2020-05-19 | Adobe Inc. | Natural language and user interface controls |
JP6227236B2 (ja) * | 2012-10-01 | 2017-11-08 | シャープ株式会社 | 記録装置および再生装置 |
KR102004884B1 (ko) * | 2013-01-07 | 2019-07-29 | 삼성전자주식회사 | 전자 장치에서 움직이는 사진 제어 장치 및 방법 |
JP5783385B2 (ja) * | 2013-02-27 | 2015-09-24 | カシオ計算機株式会社 | データ処理装置及びプログラム |
US10157618B2 (en) * | 2013-05-02 | 2018-12-18 | Xappmedia, Inc. | Device, system, method, and computer-readable medium for providing interactive advertising |
JP6102588B2 (ja) | 2013-07-10 | 2017-03-29 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
JP6386331B2 (ja) | 2013-11-05 | 2018-09-05 | 株式会社Moff | 動作検出システム、動作検出装置、移動通信端末及びプログラム |
CN103761463B (zh) * | 2014-01-13 | 2017-09-01 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
JP2015153353A (ja) * | 2014-02-19 | 2015-08-24 | パイオニア株式会社 | 情報処理装置及び方法、並びにコンピュータプログラム |
KR20150102589A (ko) * | 2014-02-28 | 2015-09-07 | 삼성메디슨 주식회사 | 의료 영상 처리 장치, 의료 영상 처리 방법, 및 컴퓨터 판독가능 기록매체 |
US10307672B2 (en) | 2014-05-19 | 2019-06-04 | Moff, Inc. | Distribution system, distribution method, and distribution device |
US9710071B2 (en) * | 2014-09-22 | 2017-07-18 | Rovi Guides, Inc. | Methods and systems for recalibrating a user device based on age of a user and received verbal input |
US9778736B2 (en) * | 2014-09-22 | 2017-10-03 | Rovi Guides, Inc. | Methods and systems for calibrating user devices |
CN105792005B (zh) * | 2014-12-22 | 2019-05-14 | 深圳Tcl数字技术有限公司 | 录像控制的方法及装置 |
JP6094638B2 (ja) * | 2015-07-10 | 2017-03-15 | カシオ計算機株式会社 | 処理装置及びプログラム |
US10157333B1 (en) | 2015-09-15 | 2018-12-18 | Snap Inc. | Systems and methods for content tagging |
US9978366B2 (en) | 2015-10-09 | 2018-05-22 | Xappmedia, Inc. | Event-based speech interactive media player |
JP6599803B2 (ja) * | 2016-03-08 | 2019-10-30 | シャープ株式会社 | 発話装置 |
CN105898256A (zh) * | 2016-05-30 | 2016-08-24 | 佛山市章扬科技有限公司 | 一种动作识别无屏电视 |
WO2018185830A1 (ja) * | 2017-04-04 | 2018-10-11 | 株式会社オプティム | 情報処理システム、情報処理方法、情報処理装置、及びプログラム |
KR102441067B1 (ko) * | 2017-10-12 | 2022-09-06 | 현대자동차주식회사 | 차량의 사용자 입력 처리 장치 및 사용자 입력 처리 방법 |
US10859830B2 (en) * | 2018-01-31 | 2020-12-08 | Sony Interactive Entertainment LLC | Image adjustment for an eye tracking system |
US11195525B2 (en) * | 2018-06-13 | 2021-12-07 | Panasonic Intellectual Property Corporation Of America | Operation terminal, voice inputting method, and computer-readable recording medium |
WO2020031367A1 (ja) * | 2018-08-10 | 2020-02-13 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
JP6671524B1 (ja) * | 2019-02-22 | 2020-03-25 | 菱洋エレクトロ株式会社 | 報告書作成するための方法、システム、及び装置 |
CN112614490B (zh) * | 2020-12-09 | 2024-04-16 | 北京罗克维尔斯科技有限公司 | 生成语音指令的方法、装置、介质、设备、系统及车辆 |
WO2023218522A1 (ja) * | 2022-05-10 | 2023-11-16 | ファナック株式会社 | 機械操作装置 |
Family Cites Families (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1031551A (ja) * | 1996-07-15 | 1998-02-03 | Mitsubishi Electric Corp | ヒューマンインターフェースシステムおよびこれを使用した高速移動物体位置検出装置 |
JP2004192653A (ja) | 1997-02-28 | 2004-07-08 | Toshiba Corp | マルチモーダルインタフェース装置およびマルチモーダルインタフェース方法 |
JPH11288296A (ja) * | 1998-04-06 | 1999-10-19 | Denso Corp | 情報処理装置 |
US7216351B1 (en) * | 1999-04-07 | 2007-05-08 | International Business Machines Corporation | Systems and methods for synchronizing multi-modal interactions |
JP2000339305A (ja) * | 1999-05-31 | 2000-12-08 | Toshiba Corp | 文書作成装置、及び文書作成方法 |
JP3581881B2 (ja) * | 2000-07-13 | 2004-10-27 | 独立行政法人産業技術総合研究所 | 音声補完方法、装置および記録媒体 |
JP2002062962A (ja) * | 2000-08-23 | 2002-02-28 | Hitachi Ltd | 機器のデータ処理方法および装置および機器 |
JP2002251235A (ja) * | 2001-02-23 | 2002-09-06 | Fujitsu Ltd | 利用者インタフェースシステム |
JP3837505B2 (ja) | 2002-05-20 | 2006-10-25 | 独立行政法人産業技術総合研究所 | ジェスチャ認識による制御装置のジェスチャの登録方法 |
JP4311190B2 (ja) * | 2003-12-17 | 2009-08-12 | 株式会社デンソー | 車載機器用インターフェース |
US20050197843A1 (en) * | 2004-03-07 | 2005-09-08 | International Business Machines Corporation | Multimodal aggregating unit |
JP2007283968A (ja) * | 2006-04-19 | 2007-11-01 | Toyota Motor Corp | 車両用制御装置 |
JP5018074B2 (ja) * | 2006-12-22 | 2012-09-05 | 富士通セミコンダクター株式会社 | メモリ装置,メモリコントローラ及びメモリシステム |
JP2008180833A (ja) * | 2007-01-24 | 2008-08-07 | Kyocera Mita Corp | 操作表示装置、操作表示プログラム及び電子機器 |
US20080252595A1 (en) * | 2007-04-11 | 2008-10-16 | Marc Boillot | Method and Device for Virtual Navigation and Voice Processing |
US7895518B2 (en) * | 2007-04-27 | 2011-02-22 | Shapewriter Inc. | System and method for preview and selection of words |
JP2008293252A (ja) * | 2007-05-24 | 2008-12-04 | Nec Corp | 操作システム及び操作システムの制御方法 |
US8532871B2 (en) * | 2007-06-05 | 2013-09-10 | Mitsubishi Electric Company | Multi-modal vehicle operating device |
DE102008051757A1 (de) * | 2007-11-12 | 2009-05-14 | Volkswagen Ag | Multimodale Benutzerschnittstelle eines Fahrerassistenzsystems zur Eingabe und Präsentation von Informationen |
JP5170771B2 (ja) * | 2009-01-05 | 2013-03-27 | 任天堂株式会社 | 描画処理プログラム、情報処理装置、情報処理システムおよび情報処理制御方法 |
JP5282640B2 (ja) | 2009-04-20 | 2013-09-04 | 富士通株式会社 | データ処理装置、データ処理方法、およびデータ処理プログラム |
KR101566379B1 (ko) * | 2009-05-07 | 2015-11-13 | 삼성전자주식회사 | 입력 신호 종류 별 사용자 기능 활성화 방법 및 이를 지원하는 휴대 단말기 |
US20100315329A1 (en) * | 2009-06-12 | 2010-12-16 | Southwest Research Institute | Wearable workspace |
-
2010
- 2010-11-09 JP JP2010250713A patent/JP5636888B2/ja not_active Expired - Fee Related
-
2011
- 2011-10-31 US US13/285,405 patent/US20120112995A1/en not_active Abandoned
- 2011-11-01 EP EP11187390A patent/EP2450879A1/en not_active Ceased
- 2011-11-02 CN CN2011103419297A patent/CN102591448A/zh active Pending
- 2011-11-02 RU RU2011144585/08A patent/RU2011144585A/ru unknown
Also Published As
Publication number | Publication date |
---|---|
EP2450879A1 (en) | 2012-05-09 |
JP2012103840A (ja) | 2012-05-31 |
US20120112995A1 (en) | 2012-05-10 |
RU2011144585A (ru) | 2013-05-10 |
CN102591448A (zh) | 2012-07-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5636888B2 (ja) | 情報処理装置、プログラムおよびコマンド生成方法 | |
US10796694B2 (en) | Optimum control method based on multi-mode command of operation-voice, and electronic device to which same is applied | |
US10504517B2 (en) | Method for controlling speech-recognition text-generation system and method for controlling mobile terminal | |
JP7152528B2 (ja) | フェイシャル特殊効果による複数のフェイシャルの追跡方法、装置および電子機器 | |
US10438058B2 (en) | Information processing apparatus, information processing method, and program | |
US10133481B2 (en) | Display control apparatus and method for estimating attribute of a user based on the speed of an input gesture | |
JP6221535B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
US20170161014A1 (en) | Electronic device and method | |
US8013890B2 (en) | Image processing apparatus and image processing method for recognizing an object with color | |
US10089061B2 (en) | Electronic device and method | |
US20180196503A1 (en) | Information processing device, information processing method, and program | |
US10770077B2 (en) | Electronic device and method | |
CN104662889B (zh) | 用于在便携式终端中进行拍摄的方法和设备 | |
KR20220048374A (ko) | 전자 장치 및 이의 제어 방법 | |
JP4945617B2 (ja) | 画像処理装置、画像処理方法、画像処理プログラム | |
WO2019187549A1 (ja) | 情報処理装置および情報処理方法 | |
JP2009116535A (ja) | 自動テストシステム及び自動テスト方法並びにプログラム | |
KR20170097890A (ko) | 전자 장치 및 이의 서비스 제공 방법 | |
US20220138625A1 (en) | Information processing apparatus, information processing method, and program | |
US9536526B2 (en) | Electronic device with speaker identification, method and storage medium | |
JP7468360B2 (ja) | 情報処理装置および情報処理方法 | |
JP7322824B2 (ja) | 情報処理装置、情報処理方法、および制御システム | |
KR20130128143A (ko) | 손동작에 의한 인터페이스 조작 장치 및 방법, 그리고 컴퓨터로 읽을 수 있는 기록매체 | |
WO2020252008A1 (en) | Fingertip tracking for touchless input device | |
JP2014021893A (ja) | 情報処理装置、操作信号生成方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20131029 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140528 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140715 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140904 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140924 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141007 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5636888 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |