JP2013140349A - 電子装置及びその制御方法 - Google Patents
電子装置及びその制御方法 Download PDFInfo
- Publication number
- JP2013140349A JP2013140349A JP2012267779A JP2012267779A JP2013140349A JP 2013140349 A JP2013140349 A JP 2013140349A JP 2012267779 A JP2012267779 A JP 2012267779A JP 2012267779 A JP2012267779 A JP 2012267779A JP 2013140349 A JP2013140349 A JP 2013140349A
- Authority
- JP
- Japan
- Prior art keywords
- voice
- task mode
- user
- electronic device
- guide information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 49
- 238000003825 pressing Methods 0.000 claims description 10
- 230000033001 locomotion Effects 0.000 description 60
- 238000010586 diagram Methods 0.000 description 48
- 230000006870 function Effects 0.000 description 21
- 238000003860 storage Methods 0.000 description 15
- 238000001514 detection method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000005452 bending Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/06—Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/28—Constructional details of speech recognition systems
- G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/225—Feedback of the input speech
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/226—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics
- G10L2015/228—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics of application context
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Theoretical Computer Science (AREA)
- Computational Linguistics (AREA)
- Acoustics & Sound (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Quality & Reliability (AREA)
- User Interface Of Digital Computer (AREA)
- Selective Calling Equipment (AREA)
- Details Of Television Systems (AREA)
Abstract
【課題】 音声開始命令に応じて相違なる音声タスクモードを提供し、それぞれの音声タスクモードに対応する音声ガイド情報をディスプレイする電子装置及びその制御方法を提供する。
【解決手段】 電子装置及びその制御方法が提供される。本電子装置の制御方法は、入力された音声開始命令が第１音声開始命令である場合、電子装置の音声入力部に入力されたユーザ音声に応じて制御される第１音声タスクモードに切り替え、入力された音声開始命令が第２音声開始命令である場合、電子装置と連動する外部機器に入力されたユーザ音声に応じて制御される第２音声タスクモードに切り替える。
【選択図】図６
【解決手段】 電子装置及びその制御方法が提供される。本電子装置の制御方法は、入力された音声開始命令が第１音声開始命令である場合、電子装置の音声入力部に入力されたユーザ音声に応じて制御される第１音声タスクモードに切り替え、入力された音声開始命令が第２音声開始命令である場合、電子装置と連動する外部機器に入力されたユーザ音声に応じて制御される第２音声タスクモードに切り替える。
【選択図】図６
Description
本発明は、電子装置及びその制御方法に関し、より詳細には、音声入力部を介して入力されたユーザ音声に応じて制御される電子装置及びその制御方法に関する。
電子技術の発展により、多様な種類の電子装置が開発され普及されている。特に、最近はテレビをはじめとする多様な類型の電子装置が一般家庭でも使われている。これらの電子装置は、ユーザの要求に応じてより多様な機能を備えるようになっている。特に、テレビの場合、最近はインターネットと接続されてインターネットサービスまでサポートしている。また、ユーザはテレビを通じて数多くのデジタル放送チャネルも視聴できるようになっている。
よって、電子装置の多様な機能を効率的に使うための多様な入力方法が要求されている。例えば、リモコンを用いた入力方法、マウスを用いた入力方法、及びタッチパッドを用いた入力方法等が電子装置に適用されている。
ところが、このような単純な入力方法だけでは、電子装置の多様な機能を効果的に使いこなすことが困難であった。仮に、電子装置のすべての機能をリモコンだけで制御するように実現すると、リモコンのボタン数を増やさざるを得なかった。この場合、一般のユーザがリモコンの使用法を習得することは決して容易なことではない。また、多様なメニューを画面上に表示してユーザが当該メニューを探し出して選択する方法の場合、ユーザが複雑なメニューツリーを一々確認し、自分の望むメニューを選択しなければならないため、不便であった。
従って、最近では、電子装置を一層便利かつ直観的に制御するために、音声認識を用いた技術が開発されている。音声認識を用いて電子装置を制御する方法には、電子装置に備えられたマイクを用いて電子装置を制御する方法と、電子装置と連動する外部機器（例えば、リモコン）に備えられたマイクを用いて電子装置を制御する方法とがある。
しかし、電子装置が二つの音声入力方法を同時に使用する場合、ユーザはどのマイクを使って電子装置を制御すればよいのか分からなくなってしまう場合が生じるという問題がある。また、二つの音声入力方法を用いて制御される電子装置の機能は互いに異なるため、ユーザに相違なるＵＩを提供しなければならないという必要性が出てくる。
なお、音声認識技術の限界により、１００％完璧にユーザの音声を認識することができないという状況が存在する。また、周辺環境或いは不慣れな操作を理由とし、音声認識のエラーが生じる場合も存在する。従って、このような音声認識エラーが発生した場合、ユーザに音声認識エラーをガイドするための方策への模索が求められる。
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、音声開始命令に応じて相違なる音声タスクモードを提供し、それぞれの音声タスクモードに対応する音声ガイド情報をディスプレイする電子装置及びその制御方法を提供することにある。
本発明のもう一つの目的は、音声認識エラーが生じた場合、音声認識エラーガイドをガイドするための複数のフィードバックメッセージのうちの一つを選択してディスプレイする電子装置及びその制御方法を提供することにある。
前記目的を達成するための本発明の一実施形態に係る音声認識が可能な電子装置の制御方法は、音声開始命令を入力されるステップと、前記音声開始命令が第１音声開始命令である場合、前記電子装置の音声入力部に入力されたユーザ音声に応じて制御される第１音声タスクモードに切り替え、前記音声開始命令が第２音声開始命令である場合、前記電子装置と連動する外部機器に入力されたユーザ音声に応じて制御される第２音声タスクモードに切り替えるステップとを含む。
そして、前記電子装置のモードが第１音声タスクモードに切り替わった場合、前記第１音声タスクモードに対応する第１音声ガイド情報をディスプレイし、前記電子装置のモードが第２音声タスクモードに切り替わった場合、前記第２音声タスクモードに対応する第２音声ガイド情報をディスプレイするステップを更に含んでよい。
また、前記第１音声ガイド情報は、前記第１音声タスクモードを行うためにユーザ音声をガイドする複数の音声アイテムを含み、前記第２音声ガイド情報は、前記第２音声タスクモードを行うためにユーザ音声をガイドする複数の音声アイテムを含み、前記第２音声ガイド情報に含まれた複数の音声アイテムのうちの一部の音声アイテムは、前記第１音声ガイド情報に含まれた複数の音声アイテムと相違してよい。
そして、前記第１音声ガイド情報は、チャネルアップ／ダウン命令を行うための音声アイテムが含まれ、前記第２音声ガイド情報は、チャネルアップ／ダウン命令を行うための音声アイテムが含まれず、チャネルリスト提供のための音声アイテムが含まれてよい。
また、前記第１音声ガイド情報は、前記第１音声タスクモードを表すアイコン領域を含み、前記第２音声ガイド情報は、前記第２音声タスクモードを表すアイコン領域を含んでよい。
そして、前記第２音声タスクモードは、前記外部機器の予め設定された第２ボタンが押され、前記外部機器に入力されたユーザ音声によって制御されてよい。
また、前記第１音声開始命令は、予め設定された単語が含まれたユーザの音声命令であり、前記第２音声開始命令は、前記外部機器に含まれた予め設定されたボタンが押されるユーザ命令であってよい。
そして、前記外部機器はリモコンであってよい。
一方、前記目的を達成するための本発明の一実施形態に係る電子装置は、ユーザ音声を入力される音声入力部と、音声タスクモードに移行するための音声開始命令が入力されると、前記音声開始命令の種類を判断し、前記音声開始命令が第１音声開始命令である場合、前記電子装置の音声入力部に入力されたユーザ音声に応じて制御される第１音声タスクモードに切り替え、前記音声開始命令が第２音声開始命令である場合、前記電子装置と連動する外部機器に入力されたユーザ音声に応じて制御される第２音声タスクモードに切り替える制御部とを含む。
そして、ディスプレイ部を更に含み、前記制御部は、前記電子装置のモードが第１音声タスクモードに切り替わった場合、前記第１音声タスクモードに対応する第１音声ガイド情報をディスプレイし、前記電子装置のモードが第２音声タスクモードに切り替わった場合、前記第２音声タスクモードに対応する第２音声ガイド情報をディスプレイするようにディスプレイ部を制御してよい。
また、前記第１音声ガイド情報は、前記第１音声タスクモードを行うためにユーザ音声をガイドする複数の音声アイテムを含み、前記第２音声ガイド情報は、前記第２音声タスクモードを行うためにユーザ音声をガイドする複数の音声アイテムを含み、前記第２音声ガイド情報に含まれた複数の音声アイテムのうちの一部の音声アイテムは、前記第１音声ガイド情報に含まれた複数の音声アイテムと相違してよい。
そして、前記第１音声ガイド情報は、チャネルアップ／ダウン命令を行うための音声アイテムが含まれ、前記第２音声ガイド情報は、チャネルアップ／ダウン命令を行うための音声アイテムが含まれず、チャネルリスト提供のための音声アイテムが含まれてよい。
また、前記第１音声ガイド情報は、前記第１音声タスクモードを表すアイコン領域を含み、前記第２音声ガイド情報は、前記第２音声タスクモードを表すアイコン領域を含んでよい。
そして、前記第２音声タスクモードは、前記外部機器の予め設定された第２ボタンが押され、前記外部機器に入力されたユーザ音声によって制御されてよい。
また、前記第１音声開始命令は、予め設定された単語が含まれたユーザの音声命令であり、前記第２音声開始命令は、前記外部機器に含まれた予め設定されたボタンが押されるユーザ命令であってよい。
そして、前記外部機器はリモコンであってよい。
一方、前記目的を達成するための本発明の一実施形態に係る電子装置の制御方法は、音声入力部を介して音声開始命令を入力されるステップと、前記音声開始命令が入力されると、電子装置のモードを音声タスクモードに切り替えるステップと、前記音声タスクモードで音声入力エラーが発生された場合、音声認識エラーガイドをガイドするための複数のフィードバックメッセージのうちの一つをディスプレイするステップとを含む。
そして、前記音声タスクモードで音声認識エラーが繰り返し発生された場合、前記複数のフィードバックメッセージのうちの一つをランダムに選択してディスプレイするステップを含んでよい。
また、前記音声タスクモードは、前記電子装置の音声入力部に入力されたユーザ音声に応じて制御される第１音声タスクモード及び前記電子装置と連動する外部機器に入力されたユーザ音声に応じて制御される第２音声タスクモードを含んでよい。
そして、前記複数のフィードバックメッセージは、前記音声タスクモードの種類によって異なってよい。
また、前記複数のフィードバックメッセージは、前記音声認識エラーの種類によって異なってよい。
そして、前記音声認識エラーは、前記音声入力部を介して入力されたユーザ音声を明確に認識できていないエラー、ユーザ音声を入力してから外部機器の認識ボタンを予め設定された時間の間押し続けるエラー、及び前記外部機器の認識ボタンを押した後、予め設定された時間の間ユーザ音声が入力されていないエラーのうち、少なくとも何れか一つを含んでよい。
また、前記ディスプレイするステップは、前記音声認識エラーが初めて発生された場合、デフォルト（Ｄｅｆａｕｌｔ）として設定したフィードバックメッセージをディスプレイしてよい。
一方、前記目的を達成するための本発明の一実施形態に係る電子装置は、ユーザ音声を入力される音声入力部と、ディスプレイ部と、前記音声入力部を介して音声開始命令が入力されると、電子装置のモードを音声タスクモードに切り替え、前記音声タスクモードで音声入力エラーが発生された場合、音声認識エラーガイドをガイドするための複数のフィードバックメッセージのうちの一つを前記ディスプレイ部にディスプレイする制御部とを含む。
そして、前記制御部は、前記音声タスクモードで音声認識エラーが繰り返し発生された場合、前記複数のフィードバックメッセージのうちの一つをランダムに選択してディスプレイしてよい。
また、前記音声タスクモードは、前記電子装置の音声入力部に入力されたユーザ音声に応じて制御される第１音声タスクモード及び前記電子装置と連動する外部機器に入力されたユーザ音声に応じて制御される第２音声タスクモードを含んでよい。
そして、前記複数のフィードバックメッセージは、前記音声タスクモードの種類によって異なってよい。
また、前記複数のフィードバックメッセージは、前記音声認識エラーの種類によって異なってよい。
そして、前記音声認識エラーは、前記音声入力部を介して入力されたユーザ音声を明確に認識できていないエラー、ユーザ音声を入力してから外部機器の認識ボタンを予め設定された時間の間押し続けるエラー、及び前記外部機器の認識ボタンを押した後、予め設定された時間の間ユーザ音声が入力されていないエラーのうち、少なくとも何れか一つを含んでよい。
また、前記制御部は、前記音声認識エラーが初めて発生された場合、デフォルト（Ｄｅｆａｕｌｔ）として設定したフィードバックメッセージを前記ディスプレイ部にディスプレイしてよい。
以上説明したように本発明によれば、ユーザは相違なる音声入力方式を用いて電子装置をより効率よく制御することができるようになる。
以下に添付図面を参照しながら、本発明の好適な実施形態について詳細に説明する。
図１は、本発明の実施形態に係る電子装置を示す概略的なブロック図である。
図１を参照すると、電子装置１００は、音声入力部１１０と、保存部１３０と、制御部１４０及びディスプレイ部１９３を含む。このとき、電子装置１００は、外部のネットワークと接続可能なスマートテレビ、セットトップボックス、ＰＣとして、又はデジタルテレビや携帯電話等で実現されてよいが、これらに限られるものではない。また、本発明の一実施形態に係る電子装置１００は、少なくとも一つのメモリやプロセッサ、キーボードのようなハードウェア入力部及びスクリーンを含んでよい。
音声入力部１１０には、ユーザが発話（Ｕｔｔｅｒａｎｃｅ）した音声命令が入力される。音声入力部１１０は、入力された音声信号を電気信号に変換して制御部１４０に出力する。例えば、音声入力部１１０は、マイクロフォンで実現されてよい。また、音声入力部１１０は、電子装置１００と一体型（Ａｌｌ−ｉｎ−ｏｎｅ）だけでなく、分離した形で実現されてよい。分離された音声入力部１１０は、電子装置１００と有線又は無線ネットワークを通じて接続されてよい。
特に、本発明の一実施形態に係る音声入力部１１０は、電子装置１００に備えられた音声入力部（例えば、マイク）及び電子装置と連動する外部機器（例えば、リモコン）に備えられた音声入力部を含む。
保存部１３０は、電子装置１００を駆動して制御するための多様なデータ及びプログラムを保存する。保存部１３０は、音声入力部１１０を介して入力された音声を認識するための音声認識モジュール及びモーション入力部１２０を介して入力されたモーションを認識するためのモーション認識モジュールを保存する。
保存部１３０は、音声データベース及びモーションデータベースを含んでよい。音声データベースは、予め設定された音声及び予め設定された音声にマッチする音声タスクが記録されたデータベースのことを意味する。モーションデータベースとは、予め設定されたモーション及び予め設定されたモーションにマッチするモーションタスクが記録されたデータバースのことを意味する。
ディスプレイ部１９３は、放送受信部を介して受信された放送信号に対応する映像を表示する。ディスプレイ部１９３は、外部端子入力部を介して入力される映像データ（例えば、動画）を表示することができる。ディスプレイ部１９３は、制御部１４０の制御に応じて音声タスクを行うための音声ガイド情報及びモーションタスクを行うためのモーションガイド情報を表示することができる。
制御部１４０は、音声入力部１１０と、保存部１３０及びディスプレイ部１９３を制御する。ここで、制御部１４０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）及び電子装置１００を制御するためのモジュール及びデータを保存するＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）及びＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）を含んでよい。
制御部１４０は、音声入力部１１０を介して音声が入力される場合、音声認識モジュール及び音声データベースを用いて音声を認識する。音声認識（Ｖｏｉｃｅ Ｒｅｃｏｇｎｉｔｉｏｎ）は入力される音声の形態によって、各々の単語を区分して発話した音声を認識する孤立単語認識（Ｉｓｏｌａｔｅｄ Ｗｏｒｄ Ｒｅｃｏｇｎｉｔｉｏｎ）連続単語、連続文章及び会話体音声を認識する連続音声認識（Ｃｏｎｔｉｎｕｏｕｓ ｓｐｅｅｃｈ Ｒｅｃｏｇｎｉｔｉｏｎ）及び孤立単語認識と連続音声認識との中間形態で、予め定められたキーワードを検出して認識するキーワード検出（Ｋｅｙｗｏｒｄ Ｓｐｏｔｔｉｎｇ）で区分されてよい。
ユーザ音声が入力される場合、制御部１４０は入力された音声信号内でユーザが発話した音声の始めと終わりを検出して音声区間を判断する。制御部１４０は、入力された音声信号のエネルギーを計算し、計算されたエネルギーに応じて音声信号のエネルギーレベルを分類し、動的プログラミングを通じて音声区間を検出することができる。制御部１４０は、検出された音声区間内の音声信号に音響モデル（Ａｃｏｕｓｔｉｃ Ｍｏｄｅｌ）に基づいて、音声の最小単位である音素を検出して音素データを生成する。制御部１４０は、生成された音素データにＨＭＭ（Ｈｉｄｄｅｎ Ｍａｒｋｏｖ Ｍｏｄｅｌ）確率モデルを適用してテキスト情報を生成する。しかし、上述のように、ユーザの音声を認識する方法は一実施形態に過ぎず、他の方法を用いてユーザ音声を認識することができる。それにより、制御部１４０は、音声信号の中に含まれたユーザの音声を認識することができる。
制御部１４０は、上述のように、認識された音声を用いて、電子装置１００のタスク（Ｔａｓｋ）を行う。電子装置１００のタスクは、チャネル変更、音量調節、コンテンツ（例えば、動画や音楽、写真等）の再生又はインターネットブラウジング等のように、電子装置１００によって実行可能な機能の少なくとも一つを含む。
特に、音声開始命令が入力されると、制御部１４０は入力された音声開始命令が第１音声開始命令であるか、第２音声開始命令であるかを判断する。ここで、音声開始命令とは、電子装置１００のモードを音声入力部１１０を介して入力されるユーザ音声によって制御される音声タスクモードに移行するための命令である。特に、第１音声開始命令は、電子装置１００に備えられた音声入力部１１０を介して入力された予め設定された単語が含まれたユーザ音声命令であり、第２音声開始命令は電子装置１００と連動する外部機器（例えば、リモコン）に含まれた予め設定されたボタンが押されるユーザ命令であってよい。具体的に、「ハイ、テレビ」のような特定のユーザ音声が音声開始命令として使用されてよく、音声開始命令はユーザの設定によって変更可能である。しかし、上述の第１音声開始命令及び第２音声開始命令は一実施形態に過ぎず、他の方法の音声開始命令としても実現されてよい。
音声開始命令が第１音声開始命令と判断されると、制御部１４０は、電子装置１００のモードを第１音声タスクモードに切り替える。このとき、第１音声タスクモードは、電子装置１００の音声入力部１１０に入力されたユーザ音声に応じて制御される音声タスクモードである。
そして、音声開始命令が第２音声開始命令と判断されると、制御部１０４は、電子装置１００のモードを第２音声タスクモードに切り替える。第２音声タスクモードは、電子装置１００と連動する外部機器に入力されたユーザ音声に応じて制御される音声タスクモードである。特に、第２音声タスクモードでは、外部機器に備えられた音声入力ボタンを押している間、ユーザの音声が入力されてよい。又は、第２音声タスクモードでは、外部機器に備えられた音声入力ボタンを一回押して、ユーザ音声を入力した後、もう一度音声入力ボタンを押すことにより、ユーザの音声が入力されてよい。しかし、それは一実施形態に過ぎず、外部機器のボタンを用いて音声を認識する方法以外の他の方法を用いて外部機器を通じてユーザ音声が入力されてよい。例えば、外部機器に備えられたスイッチがオン（Ｏｎ）された場合にのみ、ユーザ音声が入力されてよい。
特に、第１音声タスクモードでは、外部機器によって入力されたユーザの音声によって電子装置１００が制御されずに、第２音声タスクモードでは、電子装置１００に備えられた音声入力部に入力されたユーザ音声によって電子装置１００が制御されなくてもよい。
電子装置１００のモードが音声開始モードに切り替えられると、制御部１４０は、切り替えられた音声タスクモードに対応する音声ガイド情報をディスプレイする。ここで、音声ガイド情報は、電子装置１００の特定機能を実行するための命令語をガイドする少なくとも一つの音声アイテムをディスプレイする。
特に、電子装置１００のモードが第１音声タスクモードに切り替えられると、制御部１４０は、第１音声タスクモードに対応する第１音声ガイド情報をディスプレイする。そして、電子装置１００のモードが第２音声タスクモードに切り替えられると、制御部１４０は、第２音声タスクモードに対応する第２音声ガイド情報をディスプレイする。
第１音声ガイド情報及び第２音声ガイド情報に対しては、図４及び図５を参照してより詳細に説明する。
図４は、本発明の一実施形態に係る第１音声ガイド情報を示す図である。
図４に示すように、第１音声ガイド情報４００は、放送映像がディスプレイされる画面の下段にディスプレイされる。また、第１音声ガイド情報４００は、現在のディスプレイ装置のモードが第１音声タスクモードであることを報知するアイコン４１０及びユーザの音声をガイドする複数の音声アイテム４２１ないし４２７が含まれる。複数の音声アイテムには、電源オフの音声アイテム４２１と、外部入力の音声アイテム４２２と、チャネルショートカットの音声アイテム４２３と、チャネルアップ／ダウン（ＵＰ／ＤＯＷＮ）の音声アイテム４２４と、音量アップ／ダウン（ＵＰ／ＤＯＷＮ）の音声アイテム４２５と、消音の音声アイテム４２６及びＭｏｒｅの音声アイテム４２７が含まれる。Ｍｏｒｅの音声アイテム４２７は、ディスプレイされた音声アイテム以外の音声アイテムをもっと見るためのアイテムである。
このとき、第１音声タスクモードであることを報知するアイコン４１０は、図４に示すように、マイクの形であってよい。
特に、第１音声ガイド情報４００は、リモコンに備えられたボタンのうち、一回押すことで実行できるボタンに対応する音声アイテムが含まれてよい。例えば、第１音声ガイド情報４００は、チャネルアップ／ダウンの音声アイテム４２４と、音量アップ／ダウンの音声アイテム４２５と、消音の音声アイテム４２６等が含まれてよい。
図５は、本発明の一実施形態に係る第２音声ガイド情報５００を示す図である。
図５に示すように、第２音声ガイド情報５００は、第１音声ガイド情報４００がディスプレイされる領域と同様の領域である放送映像がディスプレイされる画面の下段にディスプレイされる。また、第２音声ガイド情報５００は、現在のディスプレイ装置のモードが第２音声タスクモードであることを報知するアイコン５１０（例えば、リモコンのような外部装置に音声命令を入力するためのモード）及びユーザの音声をガイドする複数の音声アイテム５２１ないし５２６が含まれる。複数の音声アイテムには、チャネルショートカットの音声アイテム５２１と、検索の音声アイテム５２２と、外部入力の音声アイテム５２３と、チャネルリストの音声アイテム５２４と、お気に入りの音声アイテム５２５及び「Ｍｏｒｅ」の音声アイテム５２６が含まれる。このとき、お気に入りの音声アイテム５２５は、ユーザが頻繁に使用する機能（例えば、特定のアプリケーションの実行）を含むメニューをディスプレイするための音声アイテムである。
このとき、第２音声タスクモードであることを報知するアイコン５１０は、図４に示す第１音声タスクモードを報知するアイコン４１０とは異なるリモコンの形であってよい。従って、音声ガイド情報４００、５００に含まれたアイコン４１０、５１０を介してユーザは現在の音声タスクモードが、第１音声タスクモードであるか、第２音声タスクモードであるかを確認することができるようになる。
そして、第２音声ガイド情報５００に含まれた複数の音声アイテムは、第１音声ガイド情報４００に含まれた複数の音声アイテムと一部異なってよい。特に、第２音声ガイド情報５００は、リモコンに備えられたボタンのうち、一回押すことで実行できるボタンに対応する音声アイテムを含まなくてよい。例えば、第２音声ガイド情報５００は、チャネルアップ／ダウンの音声アイテム４２４と、音量アップ／ダウンの音声アイテム４２５と、消音の音声アイテム４２６等が含まれてよい。それは、第２音声タスクモードでリモコンをユーザが握っているため、ユーザが話すよりは、リモコンのボタンを押すほうがより便利な場合があるためである。
その代わりに、第２音声ガイド情報５００には、検索の音声アイテム５２２と、外部入力の音声アイテム５２３と、チャネルリストの音声アイテム５２４及びお気に入りの音声アイテム５２５のように、デプスが存在する音声アイテムが含まれてよい。
即ち、上述のように、第１音声タスクモード及び第２音声タスクモードによって異なる音声ガイド情報を提供することにより、ユーザは複数の音声タスクモードに応じて、効率よくかつ便利に電子装置１００を制御することができるようになる。
第１音声ガイド情報４００及び第２音声ガイド情報５００の何れか一方がディスプレイされると、制御部１４０は、該当する音声タスクモードで音声入力部１１０に入力されたユーザ入力に応じて電子装置１００を制御する。例えば、第１音声ガイド情報４００がディスプレイされた状態で、音声入力部１００を介して「消音」というユーザ音声が入力されると、制御部１４０は電子装置１００の音量レベルを「０」に設定することができる。また、第２音声ガイド情報４００がディスプレイされた状態で、音声入力部１１０を介して「チャネルリスト」というユーザ音声が入力されると、制御部１４０は、ディスプレイ部１９３にチャネルリストをディスプレイすることができる。
図２は、本発明の別の実施形態に係る電子装置１００の構成を示すブロック図である。図２を参照すると、電子装置１００は、音声入力部１１０と、モーション入力部１２０と、保存部１３０と、制御部１４０と、放送受信部１５０と、外部端子入力部１６０と、リモコン信号受信部１７０と、ネットワークインターフェース部１８０及び映像出力部１９０を含む。図２に示す電子装置１００は、セットトップボックス（Ｓｅｔ Ｔｏｐ Ｂｏｘ）で実現されてよい。
一方、図２に示す音声入力部１１０と、保存部１３０及び制御部１４０に対する説明は、図１において説明した音声入力部１１０と、保存部１３０及び制御部１４０に対する説明と同様であるため、詳細な説明は省略する。
モーション入力部１２０は、ユーザのモーションを撮像した映像信号（例えば、連続するフレーム）を受信して制御部１４０に提供する。例えば、モーション入力部１２０は、レンズ及びイメージセンサで構成されるユニットで構成されてよい。モーション入力部１２０は、電子装置１００と一体型だけでなく、分離した形で実現されてよい。分離したモーション入力部１２０は、電子装置１００と有線又は無線ネットワークを通じて接続されてよい。
放送受信部１５０は、有線／無線で外部から放送信号を受信する。放送信号は、映像（Ｖｉｄｅｏ）、オーディオ（Ａｕｄｉｏ）及び付加データ（例えば、ＥＰＧ）を含む。放送受信部１５０は、地上波放送、ケーブル放送、衛星放送、インターネット放送等のような多様なソースから放送信号を受信することができる。
外部端子入力部１６０は、電子装置１００の外部から映像データ（例えば、動画や写真等）、オーディオデータ（例えば、音楽等）等を受信する。外部端子入力部１６０は、ＨＤＭＩ入力端子（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ Ｉｎｐｕｔ）１６１、コンポーネント入力端子１６２、ＰＣ入力端子１６３、又はＵＳＢ入力端子１６４の少なくとも一つを含んでよい。リモコン信号受信部１７０は、外部のリモコンから入力されるリモコン信号を受信する。リモコン信号受信部１７０は、電子装置１００が音声タスクモードか、モーションタスクモードでも、リモコン信号を受信することができる。
ネットワークインターフェース部１８０は、制御部１４０の制御によって電子装置１００と外部装置（例えば、サーバ、他の電子装置等）を接続することができる。制御部１４０は、ネットワークインターフェース部１８０を介して接続された外部装置からアプリケーションをダウンロードしたり、ウェブブラウジングをすることができる。ネットワークインターフェース部１８０は、イーサネット（登録商標）（Ｅｔｈｅｒｎｅｔ（登録商標））１８１、無線ＬＡＮ１８２及びブルートゥース（Ｂｌｕｅｔｏｏｔｈ（登録商標））１８３の少なくとも一つを提供することができる。
映像出力部１９０は、放送受信部１５０を介して受信される外部の放送信号、又は外部端子入力部１６０で入力される映像データ、又は保存部１３０に保存された映像データを外部のディスプレイ装置（例えば、モニタやテレビ）に出力する。
制御部１４０は、モーション入力部１２０を介してモーションが入力される場合、モーション検知モジュール及びモーションデータベースを用いてモーションを認識する。モーション認識（Ｍｏｔｉｏｎ Ｒｅｃｏｇｎｉｔｉｏｎ）はモーション入力部１２０を介して入力されるユーザのモーションに対応する映像（例えば、連続するフレーム）をモーション認識モジュールを用いて周囲の背景と手（例えば、指を伸ばしたり指を曲げて拳を作る）領域に分離し、連続する手の動きを認識することができる。ユーザモーションが入力される場合、制御部１４０は受信された映像をフレーム単位で保存し、保存されたフレームを用いてユーザモーションの対象であるオブジェクト（例えば、ユーザの手）を検知する。制御部１４０は、フレームに含まれたオブジェクトの形態、色、動きのうち、少なくともいずれか一つを検知してオブジェクトを検出する。制御部１４０は、複数のフレームに含まれた各々のオブジェクトの位置を用いて検出されたオブジェクトの動きを追跡することができる。
制御部１４０は、追跡されたオブジェクトの形態及び動きに応じてモーションを判断する。例えば、制御部１４０は、オブジェクトの形態の変化、速度、位置、方向のうち、少なくともいずれか一つを用いてユーザのモーションを判断する。ユーザのモーションは、手を握るモーションであるグラブ（Ｇｒａｂ）、表示されたカーソルを手で移動させるモーションであるポインティング移動（Ｐｏｉｎｔｉｎｇ ｍｏｖｅ）、手を一定速度以上で一方向に動かすモーションであるスラップ（Ｓｌａｐ）、手を左／右又は上／下に振るモーションであるシェイク（Ｓｈａｋｅ）及び手を回転させるモーションである回転を含む。上述の実施形態以外の他のモーションにも本発明の技術的思想が適用されてよい。例えば、握られた手を開くスプレッド（Ｓｐｒｅａｄ）モーション等が更に含まれてよい。
制御部１４０は、ユーザのモーションがポインティング移動であるか、スラップであるかを判断するために、オブジェクトが決定された時間（例えば、８００ｍｓ）内に決定された領域（例えば、４０ｃｍ×４０ｃｍの四角形）から外れているかを判断する。オブジェクトが決定された時間内に決定された領域から外れていない場合、制御部１４０はユーザのモーションをポインティング移動と判断してよい。オブジェクトが決定された時間内に決定された領域から外れている場合、制御部１４０はユーザのモーションをスラップと判断してよい。別の一例として、オブジェクトの速度が予め設定された速度（例えば、３０ｃｍ／ｓ）以下であると判断された場合、制御部１４０はユーザのモーションをポインティング移動と判断する。オブジェクトの速度が予め設定された速度超過であると判断される場合、制御部１４０はユーザのモーションをスラップと判断する。
図３は、本発明の更に別の実施形態に係る電子装置１００のブロック図を示す図である。図３に示すように、電子装置１００は、音声入力部１１０と、モーション入力部１２０と、保存部１３０と、制御部１４０と、放送受信部１５０と、外部端子入力部１６０と、リモコン信号受信部１７０と、ネットワークインターフェース部１８０と、ディスプレイ部１９３及びオーディオ出力部１９６を含む。このとき、電子装置１００は、デジタルテレビであってよいが、これに限られるものではない。
一方、図３において、音声入力部１１０と、モーション入力部１２０と、保存部１３０と、制御部１４０と、放送受信部１５０と、外部端子入力部１６０と、リモコン信号受信部１７０、ネットワークインターフェース部１８０及びディスプレイ部１９３に対する説明は、図１及び図２で同じ参照番号を有する構成に対する説明と同様であるため、詳細な説明は省略する。
オーディオ出力部１９６は、制御部１４０の制御によって放送信号に対応する音声を出力する。オーディオ出力部１９６は、スピーカ１９６ａ、ヘッドホン出力端子１９６ｂ又はＳ／ＰＤＩＦ出力端子１６３ｃの少なくともいずれか一つを含んでよい。
一方、保存部１３０は、図３に示すように、電源制御モジュール１３０ａ、チャネル制御モジュール１３０ｂ、音量制御モジュール１３０ｃ、外部入力制御モジュール１３０ｄ、画面制御モジュール１３０ｅ、オーディオ制御モジュール１３０ｆ、インターネット制御モジュール１３０ｇ、アプリケーションモジュール１３０ｈ、検索制御モジュール１３０ｉ、ＵＩ処理モジュール１３０ｊ、音声認識モジュール１３０ｋ、モーション認識モジュール１３０ｌ、音声データベース１３０ｍ及びモーションデータベース１３０ｎを含む。これらのモジュール（１３０ａないし１３０ｎ）は、それぞれ、電源制御機能、チャネル制御機能、音量制御機能、外部入力制御機能、画面制御機能、オーディオ制御機能、インターネット制御機能、アプリケーション実行機能、検索制御機能、ＵＩ処理機能を行うためにソフトウェアで実現されてよい。制御部１４０は、保存部１３０に保存されたこれらのソフトウェアを実行させて当該機能を行うことができる。上述のようなそれぞれのモジュールは、それぞれ異なる機能を行うため、分離したハードウェアで構成されてよい。
以下では、図６を参照して、音声入力方式によって異なる音声タスクモードを提供する方法についてより詳細に説明する。
まず、電子装置１００は、音声開始命令を入力される（Ｓ６１０）。このとき、ここで、音声開始命令とは、電子装置１００のモードを音声入力部１１０を介して入力されるユーザ音声によって制御される音声タスクモードに移行するための命令である。特に、第１音声開始命令は、電子装置１００に備えられた音声ン入力部１１０を介して入力された予め設定された単語が含まれたユーザ音声命令であり、第２音声開始命令は、電子装置と連動する外部機器（例えば、リモコン）に含まれた予め設定されたボタンが押されるユーザ命令であってよい。
そして、電子装置１００は、入力された音声開始命令が第１音声開始命令であるか否かを判断する（Ｓ６２０）。
入力された音声開始命令が第１音声開始命令である場合（Ｓ６２０−Ｙ）、電子装置１００は電子装置１００のモードを第１音声タスクモードに切り替える（Ｓ６３０）。ここで、第１音声タスクモードは、電子装置１００に備えられた音声入力部１１０を介して入力されたユーザ音声に応じて電子装置１００を制御するモードである。
特に、第１音声タスクモードに切り替わると、電子装置１００は第１音声ガイド情報をディスプレイする（Ｓ６４０）。ここで、第１音声ガイド情報には、現在の電子装置１００のモードが第１音声タスクモードであることをガイドするアイコン及び第１音声タスクモードを行うための複数の音声アイテムが含まれてよい。このとき、第１音声ガイド情報に含まれた複数のアイテムには、「チャネルアップ／ダウンの音声アイコン」、「音量アップ／ダウンの音声アイコン」及び「消音の音声アイコン」のように、ユーザの音声が入力されると、電子装置１００の機能が直ちに実行されることができる音声アイテムが含まれてよい。
そして、電子装置１００は、第１音声ガイド情報を用いて音声タスクを行う（Ｓ６８０）。
しかし、音声開始命令が第１音声開始命令でない場合（Ｓ６２０−Ｎ）、電子装置１００は、入力された音声開始命令が第２音声開始命令であると判断する（Ｓ６５０）。
そして、電子装置１００は、電子装置１００のモードを第２音声タスクモードに切り替える（Ｓ６６０）。このとき、第２音声タスクモードは、電子装置１００と連動する外部機器（例えば、リモコン）に含まれた音声入力部１１０を介して入力されたユーザ音声に応じて電子装置１００を制御するモードである。特に、第２音声タスクモードでは、外部機器の予め設定された第２ボタン（例えば、音声入力ボタン）が押された後、外部機器に入力されたユーザ音声によって制御されてよい。
第２音声タスクモードに切り替えられると、電子装置１００は、第２音声ガイド情報をディスプレイする（Ｓ６７０）。ここで、第２音声ガイド情報には、現在の電子装置１００のモードが第２音声タスクモードであることをガイドするアイコン及び第２音声タスクを行うための複数の音声アイテムが含まれてよい。このとき、第２音声タスクモードであることをガイドするアイコンは、第１音声タスクモードであることを報知するアイコンとは異なる。そして、第２音声ガイド情報に含まれた複数のアイテムには、「外部入力の音声アイコン」、「チャネルリストの音声アイコン」及び「お気に入りの音声アイコン」のように、デプスが存在する音声アイテムが含まれてよい。
そして、電子装置１００は、第２音声ガイド情報を用いて音声タスクを行う（Ｓ６８０）。
上述のような電子装置１００の制御方法により、ユーザは互いに異なる音声入力方式を用いて電子装置１００をより効率よく制御することができるようになる。
以下では、図７ないし図１２を参照して、音声入力時に音声認識のエラーが発生した場合、フィードバックメッセージを出力する方法について説明する。
具体的に、音声開始命令が入力されると、制御部１４０は電子装置１００のモードを音声タスクモードに切り替える。このとき、音声タスクモードは、電子装置１００が音声入力部１１０を介して入力されたユーザ音声に応じて制御されるモードである。
そして、音声開始命令は、上述したように、電子装置１００に備えられた音声入力部１１０を介して入力された予め設定された単語が含まれたユーザ音声命令（以下、「第１音声開始命令」という）か、電子装置１００と連動する外部機器（例えば、リモコン）に含まれた予め設定されたボタンが押されるユーザ命令（以下「第２音声開始命令」という）であってよい。特に、第１音声開始命令が入力されると、制御部１４０は、電子装置１００のモードを第１音声タスクモードに切り替える。このとき、第１音声タスクモードは、電子装置１００の音声入力部に入力されたユーザ音声に応じて制御される音声タスクモードである。第２音声開始命令が入力されると、制御部１４０は電子装置１００のモードを第２音声タスクモードに切り替える。第２音声タスクモードは、電子装置１００と連動する外部機器に入力されたユーザ音声に応じて制御される音声タスクモードである。特に、第２音声タスクモードでは、外部機器に備えられた音声入力ボタンを押す間にユーザの音声が入力されてよい。
電子装置１００のモードが、第１音声タスクモード及び第２音声タスクモードの何れかに切り替わると、制御部１４０は音声タスクモードを行うためのユーザ音声がガイドする音声ガイド情報をディスプレイするようにディスプレイ部１９３を制御する。このとき、音声ガイド情報は、図４に示すような第１音声ガイド情報４００及び図５に示すような第２音声ガイド情報５００の何れかであってよい。
音声ガイド情報を用いて音声タスクを行う途中に音声認識エラーを発生すると、制御部１４０は図７に示すように、音声認識エラーをガイドするフィードバックメッセージ７５０をディスプレイする。本発明の一実施形態では、図７に示すように、音声ガイド情報は、第１音声タスクモード（例えば、ユーザが直接電子装置１００に音声命令を入力するモード）であることを表すアイコン７１０を含む。また、音声ガイド情報７００は、電源オフの音声アイテム７２１と、外部入力の音声アイテム７２２と、チャネルショートカットの音声アイテム７２３と、チャネルアップ／ダウンの音声アイテム７２４と、音量アップ／ダウンの音声アイテム７２５と、消音の音声アイテム７２６及び「Ｍｏｒｅ」の音声アイテム７２７等のような複数の音声アイテムを含んでよい。このとき、「Ｍｏｒｅ」の音声アイテム７２７は、更なる音声アイテムをユーザに提供するために選択できる音声アイテムである。ここで、音声認識エラーが発生する場合には、音声入力部１１０を介して入力されたユーザの音声が小さすぎる場合、音声入力部１１０を介して入力されたユーザの音声を認識した結果、音声データベースにタッチする命令語がない場合、及びユーザの不慣れな操作の場合のうち、少なくとも何れか一つを含んでよい。
特に、制御部１４０は、保存部１３０に保存された複数のフィードバックメッセージのうちの一つをディスプレイすることができる。具体的に、制御部１４０は、音声タスクのモード及び音声認識エラーの種類によって異なるようにフィードバックメッセージ７５０をディスプレイすることができる。
具体的に、制御部１４０は、第１音声タスクモードで音声認識エラーが発生した場合と、第２音声タスクモードで音声認識エラーが発生した場合によって異なるようにフィードバックメッセージをディスプレイすることができる。例えば、第１音声タスクモードにおける音声認識エラーである場合、制御部１４０は、図８Ａないし図８Ｌに示された複数のフィードバックメッセージのうちの一つをディスプレイすることができる。第２音声タスクモードにおける音声認識エラーである場合、制御部１４０は、図９Ａないし図９Ｎ、図１０Ａないし図１０Ｇ及び図１１Ａないし図１１Ｆに示すような複数のフィードバックメッセージのうちの一つをディスプレイすることができる。
また、制御部１４０は、第２音声タスクモードで音声認識エラーの種類に応じて異なるようにフィードバックメッセージ７５０をディスプレイすることができる。例えば、音声入力部１１０を介して入力されたユーザ音声の認識結果が音声データベースにタッチする命令語がなかったり、ユーザの声が予め設定された値より小さいため、ユーザ音声を認識することができていない場合、制御部１４０は、図９Ａないし図９Ｎに示された複数のフィードバックメッセージのうちの一つをディスプレイすることができる。ユーザ音声が入力された後にも外部機器の音声入力ボタンを押し続けている場合、制御部１４０は、図１０Ａないし図１０Ｇに示す複数のフィードバックメッセージのうちの一つをディスプレイすることができる。外部機器の音声入力ボタンを押した後、予め設定された時間の間ユーザ音声が入力されていない場合、制御部１４０は、図１１Ａないし図１１Ｆに示すような複数のフィードバックメッセージのうちの一つをディスプレイすることができる。
なお、制御部１４０は、最初に音声認識の発生時に音声タスクモード及び音声認識エラーの種類に応じてデフォルトとして設定したフィードバックメッセージをディスプレイすることができる。例えば、第１音声タスクモードで音声認識エラーが発生した場合、制御部１４０は、図８Ａないし図８Ｌに示された複数のフィードバックメッセージのうち、図８Ａに示された第１フィードバックメッセージである「もう一度お話下さい。」をディスプレイすることができる。第２音声タスクモードで入力されたユーザ音声が認識できていない場合、制御部１４０は、図９Ａないし図９Ｎに示す複数のフィードバックメッセージのうち、図９Ａに示された第１フィードバックメッセージである「もう一度お話下さい。」をディスプレイすることができる。第２音声タスクモードでユーザ音声入力後にも予め設定された時間の間音声入力ボタンを押す場合、制御部１４０は、図１０Ａないし図１０Ｇに示す複数のフィードバックメッセージのうち、図１０Ａに示された第１フィードバックメッセージである「ボタンから手を離して下さい。」をディスプレイすることができる。第２音声タスクモードで音声入力ボタンを押した後、予め設定された時間の間ユーザ音声が入力されてない場合、制御部１４０は、図１１Ａないし図１１Ｆに示された複数のフィードバックメッセージのうち、図１１Ａに示された図１フィードバックメッセージである「お望みの命令をお話下さい」をディスプレイすることができる。
一方、上述のように、音声タスクモード及び音声認識エラーの種類に応じてデフォルトとして設定したフィードバックメッセージは、製造時に設定してよく、ユーザの操作によって変更されてよい。
そして、繰り返し音声認識エラーが発生すると、制御部１４０はデフォルトとして設定したフィードバックメッセージを除く残りのメッセージのうちの一つをランダムにディスプレイすることができる。例えば、第１音声タスクモードで繰り返し音声認識エラーが発生すると、制御部１４０は、図８Ａに示す第１フィードバックメッセージを除く図８Ｂないし図８Ｌに示すフィードバックメッセージのうちの一つをランダムにディスプレイすることができる。そして、第２音声タスクモードで入力されたユーザ音声が繰り返し入力できていない場合、制御部１４０は、図９Ａに示す第１フィードバックメッセージを除く図９Ｂないし図９Ｎに示すフィードバックメッセージのうちの一つをディスプレイすることができる。第２音声タスクモードでユーザ音声入力後にも音声入力ボタンを押し続ける場合、制御部１４０は、図１０Ａに示された第１フィードバックメッセージを除く図１０Ｂないし図１０Ｇに示すフィードバックメッセージのうちの一つを予め設定された時間（例えば、１０秒）毎にランダムにディスプレイすることができる。第２音声タスクモードで音声入力ボタンを押した後、予め設定された時間の間引き続きユーザ音声が入力が入力されていない場合、制御部１４０は、図１１Ａに示す第１フィードバックメッセージを除く図１１Ｂないし図１１Ｆに示されたフィードバックメッセージのうちの一つを予め設定された時間（例えば、１０秒）毎にランダムにディスプレイすることができる。
上述のように、複数のフィードバックメッセージが音声認識エラー別、音声タスクモード別に異なるように提供されるため、ユーザは音声認識のエラーを正確に確認することができるようになる。また、ユーザがまるで電子装置と会話をしているような効果を得ることができ、エンターテイメント的な要素が増加するようになる。
以下では、図１２を参照して、電子装置１００において音声認識エラーが発生した場合、フィードバックメッセージを提供する方法についてより詳細に説明する。
まず、電子装置１００は、音声開始命令が入力されたか否かを判断する（Ｓ１２１０）。このとき、音声開始命令は、電子装置１００のモードを音声タスクモードに切り替えるためのユーザ命令として、電子装置１００に備えられた音声入力部１１０を介して入力された予め設定された単語が含まれたユーザ音声命令である第１音声開始命令及び電子装置１００と連動する外部機器（例えば、リモコン）に含まれた予め設定されたボタンが押されるユーザ命令である第２音声開始命令が含まれてよい。
音声開始命令が入力されると（Ｓ１２１０−Ｙ）、電子装置１００は電子装置１００のモードを音声タスクモードに切り替える（Ｓ１２２０）。このとき、入力された音声開始命令が第１音声開始命令である場合、電子装置１００は電子装置１００の音声入力部１１０を介して入力されたユーザ音声に応じて制御される第１音声タスクモードに切り替える。そして、入力された音声開始命令が第２音声開始命令である場合、電子装置１００は外部機器の音声入力部１１０を介して入力されたユーザ音声に応じて制御される第２音声タスクモードに切り替える。
音声タスクモードを行う間、電子装置１００は音声認識エラーが発生しているか否かを判断する（Ｓ１２３０）。このとき、音声認識エラーが発生する場合には音声入力部１１０を介して入力されたユーザの音声が予め設定された値より小さい場合、音声入力部１１０を介して入力されたユーザの音声を認識した結果、音声データベースにマッチする命令語がない場合、及びユーザの不慣れな操作の場合のうち、少なくとも一つを含んでよい。
音声認識エラーが発生すると（Ｓ１２３０−Ｙ）、電子装置１００は複数のフィードバックメッセージのうちの一つをディスプレイする（Ｓ１２４０）。このとき、フィードバックメッセージは、音声タスクモード別、音声認識エラー別に異なるようにディスプレイされてよい。例えば、第１音声タスクモードで音声認識エラーが発生した場合、電子装置１００は図８Ａないし図８Ｌに示された複数のフィードバックメッセージのうちの一つをディスプレイする。又は、第２音声タスクモードで音声認識エラーが発生した場合、電子装置１００は、図９Ａないし図１１Ｆに示す複数のフィードバックメッセージのうちの一つをディスプレイすることができる。このとき、最初に音声認識エラーが発生された場合、電子装置１００は複数のフィードバックメッセージのうち、デフォルトとして設定したフィードバックメッセージをディスプレイすることができる。
そして、電子装置１００は、音声認識エラーが繰り返し発生しているか否かを判断する（Ｓ１２５０）。本発明の一実施形態で、電子装置１００は認識エラーが予め設定された境界値より以上の回数発生されているか否かを判断することができる。
音声認識エラーが繰り返し発生すると（Ｓ１２５０−Ｙ）、電子装置１００は複数のフィードバックメッセージのうちの他のフィードバックメッセージをランダムにディスプレイすることができる（Ｓ１２６０）。例えば、第１音声タスクモードで繰り返し音声認識エラーが発生すると、電子装置１００は、図８Ａに示す第１フィードバックメッセージを除く図８Ｂないし図９Ｌに示すフィードバックメッセージのうちの一つをランダムにディスプレイすることができる。そして、第２音声タスクモードで入力されたユーザ音声が繰り返し認識できていない場合、電子装置１００は、図９Ａに示す第１フィードバックメッセージを除く図９Ｂないし図９Ｎに示すフィードバックメッセージのうちの一つをディスプレイすることができる。第２音声タスクモードでユーザ音声入力後にも音声入力ボタンを押し続ける場合、電子装置１００は、図１０Ａに示された第１フィードバックメッセージを除く図１０Ｂないし図１０Ｇに示すフィードバックメッセージのうちの一つを予め設定された時間（例えば、１０秒）毎にランダムにディスプレイすることができる。第２音声タスクモードで音声入力ボタンを押した後、予め設定された時間の間引き続きユーザ音声が入力が入力されていない場合、電子装置１００は、図１１Ａに示す第１フィードバックメッセージを除く図１１Ｂないし図１１Ｆに示されたフィードバックメッセージのうちの一つを予め設定された時間（例えば、１０秒）毎にランダムにディスプレイすることができる。
上述のように、複数のフィードバックメッセージが音声認識エラー別、音声タスクモード別に異なるように提供されるため、ユーザは音声認識のエラーを正確に確認することができるようになる。また、ユーザがまるで電子装置と会話をしているような効果を得ることができ、エンターテイメント的な要素が増加するようになる。
なお、以上のような多様な実施形態に係る制御方法を行うためのプログラムコードは、多様な類型の記録媒体に保存されてよい。具体的には、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、フラッシュメモリ、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｏｎｉｃａｌｌｙ Ｅｒａｓａｂｌｅ ａｎｄ Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ）、レジスタ、ハードディスク、リムーバブルディスク、メモリカード、ＵＳＢメモリ、ＣＤ−ＲＯＭ等のように、端末機で読み取り可能な多様な類型の記録媒体に保存されていてよい。
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明は以上の実施形態に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的趣旨の範疇内において、各種の変更例又は修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
１１０ 音声入力部
１２０ モーション入力部
１３０ 保存部
１３０ａ 電源制御モジュール
１３０ｂ チャネル制御モジュール
１３０ｃ 音量制御モジュール
１３０ｄ 外部入力制御モジュール
１３０ｅ 画面制御モジュール
１３０ｆ オーディオ制御モジュール
１３０ｇ インターネット制御モジュール
１３０ｈ アプリケーションモジュール
１３０ｉ 検索制御モジュール
１３０ｊ ＵＩ処理モジュール
１３０ｋ 音声認識モジュール
１３０ｌ モーション認識モジュール
１３０ｍ 音声データベース
１３０ｎ モーションデータベース
１４０ 制御部
１５０ 放送受信部
１６０ 外部端子入力部
１６１ ＨＤＭＩ端子
１６２ コンポーネント端子
１６３ ＰＣ端子
１６４ ＵＳＢ端子
１７０ リモコン信号受信部
１８０ ネットワークインターフェース部
１８２ 無線ＬＡＮ
１８３ ブルートゥース
１９０ 映像出力部
１９３ ディスプレイ部
１９６ オーディオ出力部
１９６ａ スピーカ
１９６ｂ ヘッドホン
１２０ モーション入力部
１３０ 保存部
１３０ａ 電源制御モジュール
１３０ｂ チャネル制御モジュール
１３０ｃ 音量制御モジュール
１３０ｄ 外部入力制御モジュール
１３０ｅ 画面制御モジュール
１３０ｆ オーディオ制御モジュール
１３０ｇ インターネット制御モジュール
１３０ｈ アプリケーションモジュール
１３０ｉ 検索制御モジュール
１３０ｊ ＵＩ処理モジュール
１３０ｋ 音声認識モジュール
１３０ｌ モーション認識モジュール
１３０ｍ 音声データベース
１３０ｎ モーションデータベース
１４０ 制御部
１５０ 放送受信部
１６０ 外部端子入力部
１６１ ＨＤＭＩ端子
１６２ コンポーネント端子
１６３ ＰＣ端子
１６４ ＵＳＢ端子
１７０ リモコン信号受信部
１８０ ネットワークインターフェース部
１８２ 無線ＬＡＮ
１８３ ブルートゥース
１９０ 映像出力部
１９３ ディスプレイ部
１９６ オーディオ出力部
１９６ａ スピーカ
１９６ｂ ヘッドホン
Claims (15)
- 音声認識が可能な電子装置の制御方法において、
音声開始命令を入力されるステップと、
前記音声開始命令が第１音声開始命令である場合、前記電子装置の音声入力部に入力されたユーザ音声に応じて制御される第１音声タスクモードに切り替え、前記音声開始命令が第２音声開始命令である場合、前記電子装置と連動する外部機器に入力されたユーザ音声に応じて制御される第２音声タスクモードに切り替えるステップと
を含む制御方法。 - 前記電子装置のモードが第１音声タスクモードに切り替わった場合、前記第１音声タスクモードに対応する第１音声ガイド情報をディスプレイし、
前記電子装置のモードが第２音声タスクモードに切り替わった場合、前記第２音声タスクモードに対応する第２音声ガイド情報をディスプレイするステップを更に含むことを特徴とする請求項１に記載の制御方法。 - 前記第１音声ガイド情報は、
前記第１音声タスクモードを行うためにユーザ音声をガイドする複数の音声アイテムを含み、
前記第２音声ガイド情報は、
前記第２音声タスクモードを行うためにユーザ音声をガイドする複数の音声アイテムを含み、
前記第２音声ガイド情報に含まれた複数の音声アイテムのうちの一部の音声アイテムは、前記第１音声ガイド情報に含まれた複数の音声アイテムと相違することを特徴とする請求項２に記載の制御方法。 - 前記第１音声ガイド情報は、チャネルアップ／ダウン命令を行うための音声アイテムが含まれ、
前記第２音声ガイド情報は、チャネルアップ／ダウン命令を行うための音声アイテムが含まれず、チャネルリスト提供のための音声アイテムが含まれることを特徴とする請求項２または３に記載の制御方法。 - 前記第１音声ガイド情報は、前記第１音声タスクモードを表すアイコン領域を含み、
前記第２音声ガイド情報は、前記第２音声タスクモードを表すアイコン領域を含むことを特徴とする請求項２ないし４いずれか一項に記載の制御方法。 - 前記第２音声タスクモードは、
前記外部機器の予め設定された第２ボタンが押され、前記外部機器に入力されたユーザ音声によって制御されることを特徴とする請求項１ないし５いずれか一項に記載の制御方法。 - 前記第１音声開始命令は、
予め設定された単語が含まれたユーザの音声命令であり、
前記第２音声開始命令は、
前記外部機器に含まれた予め設定されたボタンが押されるユーザ命令であることを特徴とする請求項１ないし６いずれか一項に記載の制御方法。 - 前記外部機器はリモコンであることを特徴とする請求項１ないし７いずれか一項に記載の制御方法。
- 電子装置において、
ユーザ音声を入力される音声入力部と、
音声タスクモードに移行するための音声開始命令が第１音声開始命令である場合、前記電子装置の音声入力部に入力されたユーザ音声に応じて制御される第１音声タスクモードに切り替え、前記音声開始命令が第２音声開始命令である場合、前記電子装置と連動する外部機器に入力されたユーザ音声に応じて制御される第２音声タスクモードに切り替える制御部と
を備える電子装置。 - ディスプレイ部を更に備え、
前記制御部は、
前記電子装置のモードが第１音声タスクモードに切り替わった場合、前記第１音声タスクモードに対応する第１音声ガイド情報をディスプレイし、
前記電子装置のモードが第２音声タスクモードに切り替わった場合、前記第２音声タスクモードに対応する第２音声ガイド情報をディスプレイするように前記ディスプレイ部を制御することを特徴とする請求項９に記載の電子装置。 - 前記第１音声ガイド情報は、
前記第１音声タスクモードを行うためにユーザ音声をガイドする複数の音声アイテムを含み、
前記第２音声ガイド情報は、
前記第２音声タスクモードを行うためにユーザ音声をガイドする複数の音声アイテムを含み、
前記第２音声ガイド情報に含まれた複数の音声アイテムのうちの一部の音声アイテムは、前記第１音声ガイド情報に含まれた複数の音声アイテムと相違することを特徴とする請求項１０に記載の電子装置。 - 前記第１音声ガイド情報は、チャネルアップ／ダウン命令を行うための音声アイテムが含まれ、
前記第２音声ガイド情報は、チャネルアップ／ダウン命令を行うための音声アイテムが含まれず、チャネルリスト提供のための音声アイテムが含まれることを特徴とする請求項１０または１１に記載の電子装置。 - 前記第１音声ガイド情報は、前記第１音声タスクモードを表すアイコン領域を含み、
前記第２音声ガイド情報は、前記第２音声タスクモードを表すアイコン領域を含むことを特徴とする請求項１０ないし１２いずれか一項に記載の電子装置。 - 前記第２音声タスクモードは、
前記外部機器の予め設定された第２ボタンが押され、前記外部機器に入力されたユーザ音声によって制御されることを特徴とする請求項９ないし１３いずれか一項に記載の電子装置。 - 前記第１音声開始命令は、
予め設定された単語が含まれたユーザの音声命令であり、
前記第２音声開始命令は、
前記外部機器に含まれた予め設定されたボタンが押されるユーザ命令であることを特徴とする請求項９ないし１４いずれか一項に記載の電子装置。
Applications Claiming Priority (6)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR10-2011-0147448 | 2011-12-30 | ||
| KR20110147453 | 2011-12-30 | ||
| KR10-2011-0147453 | 2011-12-30 | ||
| KR1020110147448A KR20130078483A (ko) | 2011-12-30 | 2011-12-30 | 전자 장치 및 그의 제어 방법 |
| KR1020120058340A KR101324232B1 (ko) | 2011-12-30 | 2012-05-31 | 전자 장치 및 그의 제어 방법 |
| KR10-2012-0058340 | 2012-05-31 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2013140349A true JP2013140349A (ja) | 2013-07-18 |
| JP5535298B2 JP5535298B2 (ja) | 2014-07-02 |
Family
ID=47358521
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012267779A Expired - Fee Related JP5535298B2 (ja) | 2011-12-30 | 2012-12-07 | 電子装置及びその制御方法 |
Country Status (6)
| Country | Link |
|---|---|
| US (3) | US8650036B2 (ja) |
| EP (2) | EP2610862B1 (ja) |
| JP (1) | JP5535298B2 (ja) |
| CN (1) | CN103187063A (ja) |
| AU (1) | AU2012261686B2 (ja) |
| WO (1) | WO2013100366A1 (ja) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015088108A (ja) * | 2013-11-01 | 2015-05-07 | 株式会社ユピテル | システム及びプログラム |
| WO2016143276A1 (ja) * | 2015-03-12 | 2016-09-15 | パナソニックＩｐマネジメント株式会社 | 音響装置および補正方法 |
| JP2017191418A (ja) * | 2016-04-13 | 2017-10-19 | ホーチキ株式会社 | 防災監視設備の受信機 |
| JP2018063328A (ja) * | 2016-10-12 | 2018-04-19 | 株式会社東芝 | 電子機器及びその制御方法 |
| JP2018162956A (ja) * | 2017-03-27 | 2018-10-18 | 東芝ホームテクノ株式会社 | 加熱調理器 |
| JP2018173456A (ja) * | 2017-03-31 | 2018-11-08 | 国立大学法人大阪大学 | 対話ロボットおよびロボット制御プログラム |
| KR20190034964A (ko) * | 2017-09-25 | 2019-04-03 | 현대자동차주식회사 | 음성 인식 제어 장치, 그를 포함한 시스템 및 그 방법 |
| JP2020047062A (ja) * | 2018-09-20 | 2020-03-26 | Ｄｙｎａｂｏｏｋ株式会社 | 電子機器および制御方法 |
| JP2021015180A (ja) * | 2019-07-11 | 2021-02-12 | 東芝映像ソリューション株式会社 | 電子機器、プログラムおよび音声認識方法 |
Families Citing this family (35)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2555536A1 (en) * | 2011-08-05 | 2013-02-06 | Samsung Electronics Co., Ltd. | Method for controlling electronic apparatus based on voice recognition and motion recognition, and electronic apparatus applying the same |
| EP2610862B1 (en) * | 2011-12-30 | 2015-07-08 | Samsung Electronics Co., Ltd. | Electronic apparatus and method of controlling electronic apparatus |
| US9497515B2 (en) | 2012-08-16 | 2016-11-15 | Nuance Communications, Inc. | User interface for entertainment systems |
| US9031848B2 (en) | 2012-08-16 | 2015-05-12 | Nuance Communications, Inc. | User interface for searching a bundled service content data source |
| US8799959B2 (en) | 2012-08-16 | 2014-08-05 | Hoi L. Young | User interface for entertainment systems |
| US9106957B2 (en) | 2012-08-16 | 2015-08-11 | Nuance Communications, Inc. | Method and apparatus for searching data sources for entertainment systems |
| US9026448B2 (en) * | 2012-08-16 | 2015-05-05 | Nuance Communications, Inc. | User interface for entertainment systems |
| JP6393021B2 (ja) * | 2012-08-28 | 2018-09-19 | 京セラ株式会社 | 電子機器、制御方法、及び制御プログラム |
| KR102091003B1 (ko) * | 2012-12-10 | 2020-03-19 | 삼성전자 주식회사 | 음성인식 기술을 이용한 상황 인식 서비스 제공 방법 및 장치 |
| US9530410B1 (en) * | 2013-04-09 | 2016-12-27 | Google Inc. | Multi-mode guard for voice commands |
| CN103414929A (zh) * | 2013-07-18 | 2013-11-27 | 深圳Tcl新技术有限公司 | 语音遥控的方法、遥控器及电视机 |
| US8768712B1 (en) * | 2013-12-04 | 2014-07-01 | Google Inc. | Initiating actions based on partial hotwords |
| KR102179506B1 (ko) | 2013-12-23 | 2020-11-17 | 삼성전자 주식회사 | 전자장치 및 그 제어방법 |
| US10770075B2 (en) | 2014-04-21 | 2020-09-08 | Qualcomm Incorporated | Method and apparatus for activating application by speech input |
| CN105426154A (zh) * | 2014-09-22 | 2016-03-23 | 中兴通讯股份有限公司 | 一种语音输入控制的方法、装置及终端 |
| KR102299330B1 (ko) * | 2014-11-26 | 2021-09-08 | 삼성전자주식회사 | 음성 인식 방법 및 그 전자 장치 |
| WO2016103415A1 (ja) * | 2014-12-25 | 2016-06-30 | 日立マクセル株式会社 | ヘッドマウントディスプレイシステム及びヘッドマウントディスプレイ装置の操作方法 |
| CN104639967A (zh) * | 2015-01-31 | 2015-05-20 | 乐视致新电子科技（天津）有限公司 | 语音启动终端的方法及装置 |
| US9754588B2 (en) | 2015-02-26 | 2017-09-05 | Motorola Mobility Llc | Method and apparatus for voice control user interface with discreet operating mode |
| US9489172B2 (en) | 2015-02-26 | 2016-11-08 | Motorola Mobility Llc | Method and apparatus for voice control user interface with discreet operating mode |
| CN105957530B (zh) * | 2016-04-28 | 2020-01-03 | 海信集团有限公司 | 一种语音控制方法、装置和终端设备 |
| US10091545B1 (en) * | 2016-06-27 | 2018-10-02 | Amazon Technologies, Inc. | Methods and systems for detecting audio output of associated device |
| US10506204B2 (en) | 2016-10-10 | 2019-12-10 | At&T Digital Life, Inc. | State detection and voice guided setup for a video doorbell unit |
| KR102392087B1 (ko) * | 2017-07-10 | 2022-04-29 | 삼성전자주식회사 | 원격 조정 장치 및 원격 조정 장치의 사용자 음성 수신방법 |
| US10468017B2 (en) * | 2017-12-14 | 2019-11-05 | GM Global Technology Operations LLC | System and method for understanding standard language and dialects |
| CN108600810A (zh) * | 2018-05-03 | 2018-09-28 | 四川长虹电器股份有限公司 | 利用语音遥控器提高语音识别精度的电视系统及方法 |
| KR102563314B1 (ko) | 2018-08-30 | 2023-08-04 | 삼성전자주식회사 | 전자 장치 및 단축 명령어의 바로가기 생성 방법 |
| US11094327B2 (en) * | 2018-09-28 | 2021-08-17 | Lenovo (Singapore) Pte. Ltd. | Audible input transcription |
| JP2022051970A (ja) * | 2019-02-01 | 2022-04-04 | ソニーグループ株式会社 | 情報処理装置、情報処理方法、およびプログラム |
| CN109994111B (zh) * | 2019-02-26 | 2021-11-23 | 维沃移动通信有限公司 | 一种交互方法、装置及移动终端 |
| CN110265033A (zh) * | 2019-06-21 | 2019-09-20 | 四川长虹电器股份有限公司 | 扩展设备语音交互功能的系统及方法 |
| JP7227093B2 (ja) * | 2019-07-05 | 2023-02-21 | Ｔｖｓ Ｒｅｇｚａ株式会社 | 電子機器、プログラムおよび検索サービス選定方法 |
| KR20210025812A (ko) | 2019-08-28 | 2021-03-10 | 삼성전자주식회사 | 전자장치, 디스플레이장치 및 그 제어방법 |
| CN111681594A (zh) | 2020-06-24 | 2020-09-18 | 武汉华星光电技术有限公司 | Mog电路及显示面板 |
| US11922096B1 (en) * | 2022-08-30 | 2024-03-05 | Snap Inc. | Voice controlled UIs for AR wearable devices |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000062549A (ja) * | 1998-08-20 | 2000-02-29 | Tokai Rika Co Ltd | 車両用音声認識装置 |
| JP2011118822A (ja) * | 2009-12-07 | 2011-06-16 | Nec Casio Mobile Communications Ltd | 電子機器、発話検出装置、音声認識操作システム、音声認識操作方法及びプログラム |
Family Cites Families (28)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5774859A (en) * | 1995-01-03 | 1998-06-30 | Scientific-Atlanta, Inc. | Information system having a speech interface |
| KR970057020A (ko) | 1995-12-15 | 1997-07-31 | 배순훈 | 음성인식에 의한 텔레비전 제어장치 |
| JPH09322086A (ja) | 1996-05-31 | 1997-12-12 | Hitachi Ltd | 番組予約システム |
| JPH10133849A (ja) | 1996-10-28 | 1998-05-22 | Toshiba Corp | パーソナルコンピュータおよびエラー通知方法 |
| IL119948A (en) * | 1996-12-31 | 2004-09-27 | News Datacom Ltd | Voice activated communication system and program guide |
| FR2783625B1 (fr) * | 1998-09-21 | 2000-10-13 | Thomson Multimedia Sa | Systeme comprenant un appareil telecommande et un dispositif de telecommande vocale de l'appareil |
| JP2000112497A (ja) | 1998-10-02 | 2000-04-21 | Canon Inc | 音声認識方法及び装置と通信装置及びその制御方法 |
| US6397186B1 (en) * | 1999-12-22 | 2002-05-28 | Ambush Interactive, Inc. | Hands-free, voice-operated remote control transmitter |
| JP2001197379A (ja) * | 2000-01-05 | 2001-07-19 | Matsushita Electric Ind Co Ltd | 機器設定装置、機器設定システムおよび機器設定処理プログラムを記録した記録媒体 |
| ES2273870T3 (es) * | 2000-07-28 | 2007-05-16 | Koninklijke Philips Electronics N.V. | Sistema para controlar una aparato con instrucciones de voz. |
| JP2003005897A (ja) * | 2001-06-20 | 2003-01-08 | Alpine Electronics Inc | 情報入力方法および装置 |
| US7324947B2 (en) * | 2001-10-03 | 2008-01-29 | Promptu Systems Corporation | Global speech user interface |
| DE60222852D1 (de) * | 2001-12-18 | 2007-11-22 | Matsushita Electric Ind Co Ltd | Fernsehapparat mit Spracherkennungsfunktion |
| US7519534B2 (en) * | 2002-10-31 | 2009-04-14 | Agiletv Corporation | Speech controlled access to content on a presentation medium |
| US20060041926A1 (en) * | 2004-04-30 | 2006-02-23 | Vulcan Inc. | Voice control of multimedia content |
| JP2007052397A (ja) | 2005-07-21 | 2007-03-01 | Denso Corp | 操作装置 |
| US20070136752A1 (en) * | 2005-12-12 | 2007-06-14 | John Sanders | Personalized electronic programming guide |
| KR100834679B1 (ko) * | 2006-10-31 | 2008-06-02 | 삼성전자주식회사 | 음성 인식 오류 통보 장치 및 방법 |
| JP2008256802A (ja) | 2007-04-02 | 2008-10-23 | Fujitsu Ten Ltd | 音声認識装置および音声認識方法 |
| TW200928315A (en) * | 2007-12-24 | 2009-07-01 | Mitac Int Corp | Voice-controlled navigation device and method thereof |
| KR101502004B1 (ko) | 2008-07-25 | 2015-03-12 | 엘지전자 주식회사 | 이동 단말기 및 그의 음성 명령 인식 방법 |
| JP2011209787A (ja) * | 2010-03-29 | 2011-10-20 | Sony Corp | 情報処理装置、および情報処理方法、並びにプログラム |
| KR101134245B1 (ko) | 2010-05-28 | 2012-04-09 | 엘지이노텍 주식회사 | 3차원 가상 리모콘을 포함한 전자기기 및 그의 구동 방법 |
| US20120110456A1 (en) * | 2010-11-01 | 2012-05-03 | Microsoft Corporation | Integrated voice command modal user interface |
| JP5695447B2 (ja) * | 2011-03-01 | 2015-04-08 | 株式会社東芝 | テレビジョン装置及び遠隔操作装置 |
| JP5790238B2 (ja) * | 2011-07-22 | 2015-10-07 | ソニー株式会社 | 情報処理装置、情報処理方法及びプログラム |
| WO2013022135A1 (en) * | 2011-08-11 | 2013-02-14 | Lg Electronics Inc. | Electronic device and method of controlling the same |
| EP2610862B1 (en) * | 2011-12-30 | 2015-07-08 | Samsung Electronics Co., Ltd. | Electronic apparatus and method of controlling electronic apparatus |
-
2012
- 2012-10-05 EP EP12187522.3A patent/EP2610862B1/en active Active
- 2012-10-05 EP EP14200231.0A patent/EP2860726B1/en active Active
- 2012-10-10 US US13/648,314 patent/US8650036B2/en active Active
- 2012-10-30 CN CN2012104254239A patent/CN103187063A/zh active Pending
- 2012-11-22 WO PCT/KR2012/009896 patent/WO2013100366A1/en active Application Filing
- 2012-12-07 JP JP2012267779A patent/JP5535298B2/ja not_active Expired - Fee Related
- 2012-12-07 AU AU2012261686A patent/AU2012261686B2/en not_active Ceased
-
2014
- 2014-01-10 US US14/152,011 patent/US20140129234A1/en not_active Abandoned
- 2014-04-08 US US14/247,328 patent/US9148688B2/en active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000062549A (ja) * | 1998-08-20 | 2000-02-29 | Tokai Rika Co Ltd | 車両用音声認識装置 |
| JP2011118822A (ja) * | 2009-12-07 | 2011-06-16 | Nec Casio Mobile Communications Ltd | 電子機器、発話検出装置、音声認識操作システム、音声認識操作方法及びプログラム |
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015088108A (ja) * | 2013-11-01 | 2015-05-07 | 株式会社ユピテル | システム及びプログラム |
| WO2016143276A1 (ja) * | 2015-03-12 | 2016-09-15 | パナソニックＩｐマネジメント株式会社 | 音響装置および補正方法 |
| JP2017191418A (ja) * | 2016-04-13 | 2017-10-19 | ホーチキ株式会社 | 防災監視設備の受信機 |
| US11404060B2 (en) | 2016-10-12 | 2022-08-02 | Hisense Visual Technology Co., Ltd. | Electronic device and control method thereof |
| JP2018063328A (ja) * | 2016-10-12 | 2018-04-19 | 株式会社東芝 | 電子機器及びその制御方法 |
| US10522139B2 (en) | 2016-10-12 | 2019-12-31 | Qingdao Hisense Electronics Co., Ltd. | Electronic device and control method thereof |
| JP2018162956A (ja) * | 2017-03-27 | 2018-10-18 | 東芝ホームテクノ株式会社 | 加熱調理器 |
| JP2018173456A (ja) * | 2017-03-31 | 2018-11-08 | 国立大学法人大阪大学 | 対話ロボットおよびロボット制御プログラム |
| KR20190034964A (ko) * | 2017-09-25 | 2019-04-03 | 현대자동차주식회사 | 음성 인식 제어 장치, 그를 포함한 시스템 및 그 방법 |
| KR102474804B1 (ko) | 2017-09-25 | 2022-12-06 | 현대자동차주식회사 | 음성 인식 제어 장치, 그를 포함한 시스템 및 그 방법 |
| JP2020047062A (ja) * | 2018-09-20 | 2020-03-26 | Ｄｙｎａｂｏｏｋ株式会社 | 電子機器および制御方法 |
| JP2021015180A (ja) * | 2019-07-11 | 2021-02-12 | 東芝映像ソリューション株式会社 | 電子機器、プログラムおよび音声認識方法 |
| JP7216621B2 (ja) | 2019-07-11 | 2023-02-01 | Ｔｖｓ Ｒｅｇｚａ株式会社 | 電子機器、プログラムおよび音声認識方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| US9148688B2 (en) | 2015-09-29 |
| JP5535298B2 (ja) | 2014-07-02 |
| US20130173270A1 (en) | 2013-07-04 |
| US8650036B2 (en) | 2014-02-11 |
| WO2013100366A1 (en) | 2013-07-04 |
| EP2610862B1 (en) | 2015-07-08 |
| US20140129234A1 (en) | 2014-05-08 |
| EP2860726A3 (en) | 2015-04-22 |
| EP2860726A2 (en) | 2015-04-15 |
| US20140223477A1 (en) | 2014-08-07 |
| AU2012261686A1 (en) | 2013-07-18 |
| AU2012261686B2 (en) | 2014-08-14 |
| EP2610862A1 (en) | 2013-07-03 |
| EP2860726B1 (en) | 2017-12-06 |
| CN103187063A (zh) | 2013-07-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5535298B2 (ja) | 電子装置及びその制御方法 | |
| JP5746111B2 (ja) | 電子装置及びその制御方法 | |
| JP5819269B2 (ja) | 電子装置及びその制御方法 | |
| JP6111030B2 (ja) | 電子装置及びその制御方法 | |
| KR102003267B1 (ko) | 전자 장치 및 그의 제어 방법 | |
| KR20130078486A (ko) | 전자 장치 및 그의 제어 방법 | |
| JP2013037689A (ja) | 電子装置及びその制御方法 | |
| KR20130016025A (ko) | 음성 인식 및 모션 인식을 이용한 전자 장치의 제어 방법 및 이를 적용한 전자 장치 | |
| JP2014532933A (ja) | 電子装置及びその制御方法 | |
| AU2012216583B2 (en) | Electronic apparatus and method for controlling thereof | |
| EP2752732A2 (en) | Electronic apparatus and control method thereof | |
| JP2014130595A (ja) | 電子装置及びその制御方法 | |
| KR101324232B1 (ko) | 전자 장치 및 그의 제어 방법 | |
| KR20130078483A (ko) | 전자 장치 및 그의 제어 방법 | |
| KR20130080380A (ko) | 전자 장치 및 그의 제어 방법 | |
| EP2611196A2 (en) | Electronic apparatus and method of controlling the same |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130611 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130911 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140325 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140422 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5535298 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |