JP7187468B2 - 遠隔制御装置及び遠隔制御装置のユーザ音声受信方法 - Google Patents

遠隔制御装置及び遠隔制御装置のユーザ音声受信方法 Download PDF

Info

Publication number
JP7187468B2
JP7187468B2 JP2019546280A JP2019546280A JP7187468B2 JP 7187468 B2 JP7187468 B2 JP 7187468B2 JP 2019546280 A JP2019546280 A JP 2019546280A JP 2019546280 A JP2019546280 A JP 2019546280A JP 7187468 B2 JP7187468 B2 JP 7187468B2
Authority
JP
Japan
Prior art keywords
remote control
control device
user
voice
utterance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019546280A
Other languages
English (en)
Other versions
JP2020527734A (ja
Inventor
チェ－ヨン・リム
ジョン－ジン・パク
ミン－スプ・キム
ヒョン－キュ・ユン
ウォン－ジェ・イ
キョン－イク・チョ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of JP2020527734A publication Critical patent/JP2020527734A/ja
Application granted granted Critical
Publication of JP7187468B2 publication Critical patent/JP7187468B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/28—Constructional details of speech recognition systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/04—Segmentation; Word boundary detection
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/78—Detection of presence or absence of voice signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42222—Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q2209/00—Arrangements in telecontrol or telemetry systems
    • H04Q2209/30—Arrangements in telecontrol or telemetry systems using a wired architecture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q2209/00—Arrangements in telecontrol or telemetry systems
    • H04Q2209/40—Arrangements in telecontrol or telemetry systems using a wireless architecture

Description

本発明は、遠隔制御装置及び遠隔制御装置の音声受信方法に関し、より詳細には、音声入力ボタンなしに、遠隔からディスプレイ装置を制御可能な遠隔制御装置及び遠隔制御装置の音声受信方法に関する。
放送だけでなく、コンテンツを出力可能なディスプレイ装置とユーザとの間のインターフェースとして、ディスプレイ装置のパネルキー（ｐａｎｅｌ ｋｅｙ）または遠隔制御装置（ｒｅｍｏｔｅｌｙ ｃｏｎｔｒｏｌｌｅｒ）が多く使われている。なお、ディスプレイ装置とユーザとの間のインターフェースとしてユーザの音声（ｖｏｉｃｅ）またはユーザのモーション（ｍｏｔｉｏｎ）が使われることがある。
技術の発展により、ディスプレイ装置の機能は複雑化（例えば、様々なアプリケーション実行、ゲーム実行など）し、多様化しており、外部からダウンロードした動画のようなコンテンツを実行したり、インターネットブラウジングもできるようになっている。
複雑化し且つ多様化するディスプレイ装置に対応し、ユーザの音声命令語の数も増加している。ユーザの音声を容易に入力可能な遠隔制御装置が必要になってきている。
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、音声入力ボタンなしにディスプレイ装置を遠隔制御できる遠隔制御装置及び遠隔制御装置のユーザ音声を受信する方法を提供することにある。
実施形態は、以下の詳細な説明から明らかになり、または、提示された実施形態の実施によって習得されるものである。
本発明の実施形態に係る遠隔制御装置は、マイクと、少なくとも一つのセンサと、通信インターフェースと、前記マイク、前記少なくとも一つのセンサ、及び前記通信インターフェースを制御するプロセッサとを含み、前記プロセッサは、前記遠隔制御装置の発話意図情報及び前記外部装置の発話意図情報に基づいてユーザ発話意図を識別し、前記遠隔制御装置の発話意図情報は、前記少なくとも一つのセンサによって識別された前記遠隔制御装置の状態または外部状態に基づいており、前記外部装置の発話意図情報は、前記通信インターフェースを介して前記外部装置から受信され、前記ユーザ発話意図の識別結果に応じて、前記マイクの電源供給有無を制御し、前記マイクを介して受信されるユーザ音声に対応する電気的信号を前記外部装置に伝送するように前記通信インターフェースを制御してよい。
前記少なくとも一つのセンサは、複数のセンサを含み、前記プロセッサは、前記遠隔制御装置とユーザの顔との間の距離に対応し、前記複数のセンサから検出された状態を組み合わせてユーザの発話意図を識別してよい。
前記少なくとも一つのセンサは、前記遠隔制御装置の把持を検出するグリップセンサ、前記遠隔制御装置の動きを検出するモーションセンサ、及びユーザの呼気に含まれるガスを検出するガスセンサのうち、少なくとも一つを含んでよい。
前記外部装置から受信した発話意図情報は、前記外部装置のディスプレイにユーザの音声発話をガイドするポップアップの表示有無に対する情報を含んでよい。
前記外部装置から受信した発話意図情報は、前記外部装置のディスプレイに表示されるコンテントに対応するユーザの発話履歴に関する情報を含んでよい。
前記外部装置から受信した発話意図情報は、ユーザの後続発話が予想されるか否かに対する情報を含んでよい。
前記ユーザの後続発話が予想されるか否かに対する情報は、直前の発話内容、前記外部装置のディスプレイに表示されるユーザインターフェースの内容、及び直前の発話に応じた前記外部装置の動作または機能実行結果のうち、少なくとも一つに基づいて識別されてよい。
前記プロセッサは、ユーザの発話意図があると識別される場合、前記マイクに電源を供給し、前記通信インターフェースを制御して前記発話意図情報を前記外部装置に伝送し、前記外部装置は、音声認識ガイドユーザインターフェースをディスプレイに表示してよい。
本発明の別の実施形態に係るディスプレイ装置は、ディスプレイ部と、通信インターフェースと、前記ディスプレイ部及び前記通信インターフェースを制御するプロセッサとを含み、前記プロセッサは、前記ディスプレイ部がコンテントを表示するように制御し、前記通信インターフェースを介して遠隔制御装置から受信される情報を通じてユーザ発話意図を識別し、前記ユーザ発話意図の識別結果に応じて、音声認識ガイドユーザインターフェースを前記コンテントと区別できるように表示するように制御してよい。
前記プロセッサは、前記通信インターフェースを介して前記遠隔制御装置から受信される情報に対応し、音声受信が可能な前記遠隔制御装置の状態または外部状態を示す音声認識ガイドユーザインターフェースを前記コンテントと区別できるように表示するように制御してよい。
前記プロセッサは、前記通信インターフェースを介して前記遠隔制御装置から受信されるユーザ音声に対応する電気的信号を音声認識サーバに伝送するように制御し、前記通信インターフェースを介して前記音声認識サーバから応答情報または制御情報が受信されると、前記応答情報を前記ディスプレイ部に表示するか、または前記制御情報に基づいて機能を行ってよい。
本発明の実施形態に係る遠隔制御装置のユーザ音声受信方法は、外部装置と接続するステップと、前記遠隔制御装置の発話意図情報及び前記外部装置の発話意図情報に基づいて、ユーザ発話意図を識別するステップであって、前記遠隔制御装置の発話意図情報は、少なくとも一つのセンサによって識別された前記遠隔制御装置の状態または外部状態に基づいており、前記外部装置の発話意図情報は、前記外部装置から受信される、ステップと、前記ユーザ発話意図の識別結果に応じてマイクに電源を供給するステップと、前記マイクを介して受信されるユーザ音声に対応する電気的信号を前記外部装置に伝送するステップとを含んでよい。
前記ユーザ発話意図を識別するステップは、前記遠隔制御装置の内部から前記遠隔制御装置の発話意図情報を受信し、前記遠隔制御装置の外部から前記外部装置の発話意図情報を受信してよい。
前記遠隔制御装置の内部からの前記遠隔制御装置の発話意図情報の受信は、少なくとも一つのセンサ及び前記マイクのうち一方を用いてよい。
前記遠隔制御装置の外部からの前記外部装置の発話意図情報の受信は、前記外部装置に表示されるポップアップガイド及びユーザ発話履歴のうち一方を用いてよい。
前記制御方法は、前記マイクを介して入力されるユーザの音声に対応する電気的信号を前記外部装置に伝送してよい。
プロセッサによって遠隔制御装置のユーザ音声を受信する方法を行わせるプログラムを記録したコンピュータで読み取り可能な記録媒体において、方法は、外部装置と接続するステップと、前記遠隔制御装置の発話意図情報及び前記外部装置の発話意図情報に基づいて、ユーザ発話意図を識別するステップであって、前記遠隔制御装置の発話意図情報は、少なくとも一つのセンサによって識別された前記遠隔制御装置の状態または外部状態に基づいており、前記外部装置の発話意図情報は、前記外部装置から受信される、ステップと、前記ユーザ発話意図の識別結果に応じてマイクに電源を供給するステップと、前記マイクを介して受信されるユーザ音声に対応する電気的信号を前記外部装置に伝送するステップとを含んでよい。
前記ユーザ発話意図を識別するステップは、前記遠隔制御装置の内部から前記遠隔制御装置の発話意図情報を受信し、前記遠隔制御装置の外部から前記外部装置の発話意図情報を受信してよい。
前記遠隔制御装置の内部からの前記遠隔制御装置の発話意図情報の受信は、少なくとも一つのセンサ及び前記マイクのうち一方を用いてよい。
前記遠隔制御装置の外部からの前記外部装置の発話意図情報の受信は、前記外部装置に表示されるポップアップガイド及びユーザ発話履歴のうち一方を用いてよい。
前記制御方法は、前記マイクを介して入力されるユーザの音声に対応する電気的信号を前記外部装置に伝送してよい。
本発明の一実施形態の上記及び別の様態、特徴及び長所は、添付の図面とともに次の説明により明確になる。
本発明の実施形態に係るディスプレイ装置及び遠隔制御装置の間の動作を概略に示す図である。 本発明の実施形態に係るディスプレイ装置及び遠隔制御装置を示すブロック図である。 本発明の実施形態に係る遠隔制御装置の音声受信方法を概略に示すフローチャートである。 本発明の実施形態に係る遠隔制御装置の音声受信方法の例を概略に示す図である。 本発明の実施形態に係る遠隔制御装置の音声受信方法の例を概略に示す図である。 本発明の実施形態に係る遠隔制御装置の音声受信方法の例を概略に示す図である。 本発明の実施形態に係る遠隔制御装置の音声受信方法の例を概略に示す図である。 本発明の実施形態に係る遠隔制御装置の音声受信方法の例を概略に示す図である。 本発明の実施形態に係る遠隔制御装置の音声受信方法の例を概略に示す図である。 本発明の実施形態に係る遠隔制御装置の音声受信方法の例を概略に示す図である。 本発明の実施形態に係る遠隔制御装置の音声受信方法の例を概略に示す図である。
以下では、添付の図面に記載された内容を参照し、本発明に係る例示的な実施形態について詳細に説明する。なお、添付の図面に記載された内容を参照し、本発明の実施形態に係る電子装置を製造して使用する方法を詳細に説明する。各図面に提示された同一の参照番号または符号は、実質的に同一の機能を行う部品または構成要素を表す。
第１、第２などのように序数を含む用語は、多様な構成要素を説明するうえで使われるが、構成要素は用語によって限定されてはならない。用語は、一つの構成要素を別の構成要素から区別する目的としてのみ使われる。例えば、本発明の権利範囲を逸脱しない範囲で、第１構成要素は第２構成要素と称されてよく、同様に、第２構成要素も第１構成要素と称されてよい。「及び／または」という用語は、複数の関連する項目の組み合わせまたは複数の関連する項目のうちいずれかの項目を含む。
音声入力ボタンなしに、ユーザの音声入力が可能な遠隔制御装置及び遠隔制御装置の音声受信方法が提供されてよい。
音声入力ボタンなしに、ユーザ発話意図を決定可能な遠隔制御装置及び遠隔制御装置の音声受信方法が提供されてよい。
音声入力ボタンなしに、多様なユーザ発話意図に応じて、マイクを動作させる遠隔制御装置及び遠隔制御装置の音声受信方法が提供されてよい。
音声入力ボタンなしに、受信されるユーザ発話意図情報に応じて、マイクを動作させる遠隔制御装置及び遠隔制御装置の音声受信方法が提供されてよい。
音声入力ボタンなしに、内部のユーザ発話意図及び外部のユーザ発話意図のうち一方に応じて、マイクを動作させる遠隔制御装置及び遠隔制御装置の音声受信方法が提供されてよい。
音声入力ボタンなしに、ユーザの音声を容易に受信可能な遠隔制御装置及び遠隔制御装置の音声受信方法が提供されてよい。
本発明の実施形態において、遠隔制御装置（ｒｅｍｏｔｅｌｙ ｃｏｎｔｒｏｌｌｅｒ）２００（図１を参照）にある「ボタン（または、キー）の選択」は、ボタン（または、キー）の押圧またはボタン（または、キー）のタッチを意味する用語として使われてよい。
「ユーザ入力」は、例えば、ユーザによる遠隔制御装置２００のボタン（または、キー）の選択、ユーザによる遠隔制御装置２００のボタン（または、キー）の押圧、ユーザによる遠隔制御装置２００のボタンのタッチ、ユーザによる遠隔制御装置２００で入力されるタッチジェスチャ、ユーザによる遠隔制御装置２００の把持、ユーザによる遠隔制御装置２００の移動、遠隔制御装置２００を通じたユーザ音声入力、ディスプレイ装置１００を通じたユーザ音声入力、遠隔制御装置２００を通じたユーザモーション入力及びディスプレイ装置１００を通じたユーザモーション入力のうち少なくとも一つを含む用語として使用されてよい。ただ、実施形態はその例に限定されない。
本発明の実施形態において、「ディスプレイ装置の画面」はディスプレイ装置のディスプレイ部を含む意味として使用されてよい。ただ、実施形態は、その例に限定されない。
本明細書で使用される用語は、実施形態を説明するために使われるものとして、本発明を制限及び／または限定しようとする意図がない。単数の表現は、文脈上明白にそうでないことを意味しない限り、複数の表現を含む。本明細書において、「含む」または「有する」などの用語は、明細書上に記載された特徴、数字、ステップ、動作、構成要素、部品またはこれらを組み合わせたものが存在することを指定するものであって、一つまたはそれ以上の別の特徴、数字、ステップ、動作、構成要素、部品またはこれらを組み合わせたものの存在または付加可能性を予め排除しないものとして理解されるべきである。
各図面に提示された同一の参照符号は、実質的に同一の機能を行う部材を示す。
図１は、本発明の実施形態に係るディスプレイ装置及び遠隔制御装置の間の動作を概略に示す図である。
図１を参照すると、ディスプレイ装置１００及び遠隔制御装置２００が表示される。なお、ディスプレイ装置１００及び遠隔制御装置２００が表示される。
コンテントを出力可能なディスプレイ装置１００は、内蔵されるか、または、有線または無線で接続可能なマイク１４０（図２を参照）を用いて、ユーザの音声を受信することができる。なお、遠隔制御装置２００は、マイク２４３（図２を参照）を用いてユーザの音声を受信することができる。本発明の実施形態において、「コンテント」とは、放送、ビデオ、イメージ、テキストまたはウェブ文書を含んでよい。なお、「コンテント」は、放送、ビデオ、イメージ、テキスト及びウェブ文書の組み合わせを含んでよい。コンテンツ（ｃｏｎｔｅｎｔｓ）は、コンテント（ｃｏｎｔｅｎｔ）の集合体を意味してよい。
遠隔制御装置２００は、赤外線（ｉｎｆｒａｒｅｄ）または近距離通信（例えば、ブルートゥース（ｂｌｕｅｔｏｏｔｈ）（登録商標）またはＷｉ－Ｆｉなど）を通じて制御情報を出力（または、伝送）してディスプレイ装置１００を制御することができる。なお、遠隔制御装置２００は、受信されたユーザ音声を変換して赤外線または近距離通信（例えば、ブルートゥースなど）を通じてディスプレイ装置１００に伝送することができる。
ユーザは、遠隔制御装置２００に本体（例えば、前面２００ａ、側面２００ｂ、２００ｃ及び／または背面で実現）に位置するキー（または、ボタン）の選択及びユーザ入力（例えば、タッチパッドを通じたタッチ（または、タッチジェスチャ）、マイク２４３を通じた音声認識、またはセンサ２４５（図２を参照）を通じたモーション認識（または、把持認識））を用いて、ディスプレイ装置１００を制御（例えば、電源オン／オフ、ブート（ｂｏｏｔｉｎｇ）、チャネル変更、音量調整またはコンテント再生など）を行うことができる。
ユーザは、音声発話（または、発話された音声に対する音声認識）を通じてディスプレイ装置１００を制御することができる。遠隔制御装置２００の前面２００ａを介して遠隔制御装置２００の本体の内部に位置するマイク２４３は、ディスプレイ装置１００の制御に対応するユーザ音声を受信することができる。遠隔制御装置２００は、受信された音声を電気的信号（例えば、デジタル信号、デジタルデータ、またはパケット）に変換してディスプレイ装置１００に伝送することができる。
ユーザは、ディスプレイ装置１００に付着されたカメラ１４５（図２を参照）を通じたモーション認識でディスプレイ装置１００を制御（例えば、電源オン／オフ、ブート、チャネル変更、音量調整またはコンテント再生など）を行うこともできる。なお、ユーザは、遠隔制御装置２００の動き（例えば、遠隔制御装置２００を把持（ｇｒｉｐ）したりまたは移動させたり）を用いて、ディスプレイ装置１００の画面を制御することができる。
図１を参照すると、遠隔制御装置２００は、ディスプレイ装置１００の機能及び／または動作に対応するボタン（または、キー２４１）を含む。ボタン２４１は、押圧され得る物理ボタンまたはタッチインターフェースボタンを含んでよい。なお、遠隔制御装置２００は、ディスプレイ装置１００で実行される機能に対応する単一機能ボタン（例えば、２４１ａ、２４１ｂ、２４１ｄないし２４１ｇ）及び／またはマルチ機能ボタン２４１ｃを含んでよい。
遠隔制御装置２００で単一機能ボタン（例えば、電源ボタン２４１ａなど）は、ディスプレイ装置１００で実行される複数の機能のうちの一つの機能に対する制御に対応するボタン（または、キー）を指す用語として使われてよい。遠隔制御装置２００にあるキーのほとんどは、単一機能キーであってよい。
本発明の実施形態において、遠隔制御装置２００に音声ボタン（または、音声認識ボタン）が適用されていない（または、ない）。遠隔制御装置２００のボタンの配列順及び／または数は、ディスプレイ装置１００の機能に対応して追加、変更または削除されてよい。
音声認識サーバは、遠隔制御装置２００またはディスプレイ装置１００で入力されたユーザ音声に対応する電気的信号（または、電気的信号に対応するパケット）を音声認識を通じて生成される音声データ（例えば、テキスト、コードなど）に変換することができる。変換された音声データは、ディスプレイ装置１００を経て別のサーバ（例えば、対話型サーバなど）に伝送されたり、または別のサーバに直ちに伝送されてよい。
対話型サーバは、変換された音声データをディスプレイ装置１００で認識可能な制御情報（例えば、ディスプレイ装置１００を制御する制御命令語）に変換することができる。変換された制御情報は、ディスプレイ装置１００に伝送されてよい。
音声認識サーバ及び対話型サーバは、一つで実現されたり、または別々に実現されてよい。
図２は、本発明の実施形態に係るディスプレイ装置及び遠隔制御装置を示すブロック図である。
図２を参照すると、遠隔制御装置２００からユーザ音声に対応する電気的信号を受信するディスプレイ装置１００は、通信インターフェース１３０又は入／出力部１６０を用いて、外部装置（例えば、一つまたは複数のサーバ）と有線または無線で接続されてよい。
遠隔制御装置２００からユーザ音声に対応する電気的信号を受信するディスプレイ装置１００は、通信インターフェース１３０または入／出力部１６０を用いて受信された電気的信号（または、電気的信号に対応するパケット）を有線または無線で接続された外部装置（例えば、一つまたは複数のサーバ）に伝送することができる。なお、ディスプレイ装置１００は、マイク１４０を介して受信されたユーザ音声に対応する電気的信号（または、電気的信号に対応するパケット）を通信インターフェース１３０または入／出力部１６０を用いて有線または無線で接続された外部装置（例えば、サーバ）に伝送することができる。外部装置は、サーバ、携帯電話、スマートフォン、タブレットパソコン、及びパソコンを含んでよい。
ディスプレイ装置１００は、ディスプレイ部１７０を含み、チューナ（ｔｕｎｅｒ）１２０、通信インターフェース１３０及び入／出力部１６０のうちいずれかを含んでよい。ディスプレイ装置１００は、ディスプレイ部１７０を含み、チューナ１２０、通信インターフェース１３０及び入／出力部１６０の組み合わせを含んでよい。なお、ディスプレイ部１７０を有するディスプレイ装置１００は、チューナを有する別途の電子装置（図示せず）と電気的に接続されてよい。
ディスプレイ装置１００は、例えば、アナログテレビ、デジタルテレビ、３Ｄ－ＴＶ、スマートテレビ、ＬＥＤテレビ、ＯＬＥＤテレビ、プラズマテレビ、モニタ、固定曲率（ｃｕｒｖａｔｕｒｅ）である画面（または、ディスプレイ部）を有するカーブド（ｃｕｒｖｅｄ）テレビ、固定曲率である画面を有するフレキシブル（ｆｌｅｘｉｂｌｅ）テレビ、固定曲率である画面を有するベンデッド（ｂｅｎｄｅｄ）テレビ、及び／または受信されるユーザ入力によって現在の画面の曲率を変更可能な曲率可変な曲率可変型テレビなどで実現されてよいが、それに限定されるものではない。
ディスプレイ装置１００は、チューナ１２０、通信インターフェース１３０、マイク１４０、カメラ１４５、光受信部１５０、入／出力部１６０、ディスプレイ部１７０、オーディオ出力部１７５、保存部１８０及び電源供給部１９０を含む。ディスプレイ装置１００は、ディスプレイ装置１００の内部の状態、または外部の状態を検出するセンサ（例えば、照度センサ、温度センサなど）を含んでよい。
制御部１１０は、プロセッサ（Ｐｒｏｃｅｓｓｏｒ）１１１、ディスプレイ装置１００の制御のための制御プログラムが保存されたＲＯＭ（または、不揮発性メモリ）１１２及びディスプレイ装置１００の外部から入力される信号またはデータを保存したり、ディスプレイ装置１００で行われる多様な作業に対応する保存領域として使用されるＲＡＭ（または、揮発性メモリ）１１３を含んでよい。
制御部１１０は、ディスプレイ装置１００の動作全般及びディスプレイ装置１００の内部の構成要素１１０ないし１９０との間の信号の流れを制御し、データを処理する機能を行う。制御部１１０は、受信されるユーザ音声に対応する電気的信号（または、電気的信号に対応するパケット）を通信インターフェース１３０を介して音声認識サーバに伝送するか、または、音声認識サーバから電気的信号（または、電気的信号に対応するパケット）に対応する音声データ（または、応答信号）を受信するように制御することができる。なお、制御部１１０は、通信インターフェース１３０を介して受信された音声データを対話型サーバに伝送するか、または、対話型サーバから音声データに対応する制御情報を受信するように制御することができる。
通信インターフェース１３０を介して音声認識サーバから応答情報または制御情報が受信される場合、制御部１１０は、応答情報をディスプレイ部１７０に表示するか、前記制御情報に基づいて機能を行うように制御することができる。
制御部１１０は、電源供給部１９０から内部の構成要素１１０ないし１９０から供給される電源を制御する。なお、ユーザの入力があるか、予め設定されて保存された条件を満たす場合、制御部１１０は保存部１８０に保存されたＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）または多様なアプリケーションを実行することができる。
プロセッサ１１１は、画像（ｉｍａｇｅ）またはビデオ（ｖｉｄｅｏ）に対応するグラフィック処理のためのグラフィックプロセッサ（ｇｒａｐｈｉｃ ｐｒｏｃｅｓｓｉｎｇ ｕｎｉｔ）を更に含んでよい。プロセッサ１１１は、グラフィックプロセッサを含むか、または、別に実現されてよい。プロセッサ１１１は、コア（ｃｏｒｅ）とグラフィックプロセッサを含むＳｏＣ（Ｓｙｓｔｅｍ ｏｎ Ｃｈｉｐ）で実現されてよい。なお、プロセッサ１１１は、ＲＯＭ１１２及びＲＡＭ１１３のうち少なくとも一方を含むＳｏＣで実現されてよい。プロセッサ１１１は、シングルコア、デュアルコア、トリプルコア、クアッドコア及びその倍数のコアを含んでよい。
ディスプレイ装置１００のプロセッサ１１１は、複数のプロセッサを含んでよい。複数のプロセッサは、メインプロセッサ（ｍａｉｎ ｐｒｏｃｅｓｓｏｒ）及びディスプレイ装置１００の動作状態のうちの一つである画面オフ（または、電源プラグが接続された状態で画面（電源）オフ）及び／またはスリープ状態（ｓｌｅｅｐ ｓｔａｔｅ）で動作するサブプロセッサ（ｓｕｂ ｐｒｏｃｅｓｓｏｒ）を含んでよい。なお、複数のプロセッサは、センサを制御するセンサプロセッサ（ｓｅｎｓｏｒ ｐｒｏｃｅｓｓｏｒ）を更に含んでよい。
プロセッサ１１１、ＲＯＭ１１２及びＲＡＭ１１３は、内部のバス（ｂｕｓ）を通じて相互接続されてよい。
本発明の実施形態において、「ディスプレイ装置１００の制御部」という用語は、ディスプレイ装置１００のプロセッサ１１１、ＲＯＭ１１２及びＲＡＭ１１３を含む意味であってよい。本発明の実施形態において、「ディスプレイ装置１００の制御部」との用語は、ディスプレイ装置１００のプロセッサ１１１を意味することができる。なお、「ディスプレイ装置１００の制御部」との用語は、ディスプレイ装置１００のメインプロセッサ、サブプロセッサＲＯＭ１１２及びＲＡＭ１１３を含む意味であってよい。
制御部１１０の構成及び動作は、実施形態に応じて多様に実現され得ることは、当該技術分野で通常の知識を有する者に容易に理解されるだろう。
チューナ１２０は、有線または無線で受信される放送信号を増幅（ａｍｐｌｉｆｉｃａｔｉｏｎ）、混合（ｍｉｘｉｎｇ）、共振（ｒｅｓｏｎａｎｃｅ）などを通じて多くの電波成分のうち、ディスプレイ装置１００で受信しようとするチャネルの周波数のみをチューニング（ｔｕｎｉｎｇ）させて選択することができる。放送信号は、ビデオ（ｖｉｄｅｏ）、オーディオ（ａｕｄｉｏ）及び付加データ（例えば、ＥＰＧ（Ｅｌｅｃｔｒｏｎｉｃ Ｐｒｏｇｒａｍ Ｇｕｉｄｅ））を含む。
チューナ１２０は、ユーザ入力（例えば、音声、モーション、ボタン入力、タッチ入力など）に対応するチャネル番号（例えば、ケーブル放送チャネル５０６番）に対応する周波数帯域でビデオ、オーディオ及びデータを受信することができる。
チューナ１２０は、地上波放送、ケーブル放送、衛星放送、インターネット放送などのように、様々なソースから放送信号を受信することができる。
チューナ１２０は、ディスプレイ装置１００と一体型（ａｌｌ－ｉｎ－ｏｎｅ）で実現されたり、またはディスプレイ装置１００と電気的に接続されるチューナ、またはチューナを有する別個の電子装置（例えば、セットトップボックス（ｓｅｔ－ｔｏｐ ｂｏｘ）、またはワンコネクト（ｏｎｅ ｃｏｎｎｅｃｔ））で実現されてよい。
通信インターフェース１３０は、制御部１１０の制御によってディスプレイ装置１００を遠隔制御装置２００、または、外部装置（図示せず）と接続することができる。通信インターフェース１３０は、制御部１１０の制御によってユーザ音声に対応する電気的信号（または、電気的信号に対応するパケット）を音声認識サーバに伝送するか、または、音声認識サーバから電気的信号（または、電気的信号に対応するパケット）に対応する音声データ（または、応答情報）を受信することができる。なお、通信インターフェース１３０は、制御部１１０の制御によって受信された音声データを対話型サーバに伝送するか、または、対話型サーバから音声データに対応する制御情報を受信することができる。
通信インターフェース１３０は、制御部１１０の制御によって外部からアプリケーションをダウンロードしたり、または、ウェブブラウジングを行うことができる。
通信インターフェース１３０は、ディスプレイ装置１００の性能及び構造に対応し、有線イーサネット（Ｅｔｈｅｒｎｅｔ）（登録商標）１３１、無線ＬＡＮ通信部１３２及び近距離通信部１３３のうち一つを含んでよい。なお、通信インターフェース１３０は、有線イーサネット１３１、無線ＬＡＮ通信部１３２及び近距離通信部１３３の組み合わせを含んでよい。
有線イーサネット１３１は、制御部１１０の制御によって有線ネットワークケーブルを介して家庭内（または、事務室など）のネットワークと接続されてよい。無線ＬＡＮ通信部１３２は、制御部１１０の制御によって、ＡＰ（Ａｃｃｅｓｓ Ｐｏｉｎｔ）が設置された場所で無線を用いてＡＰと接続されてよい。無線ＬＡＮ通信部１３２は、例えば、Ｗｉ－Ｆｉを含んでよい。なお、近距離通信部１３３は、制御部１１０の制御によってＡＰなしに無線で遠隔制御装置２００及び／または外部装置と近距離通信を行うことができる。近距離通信は、例えば、ブルートゥース（ｂｌｕｅｔｏｏｔｈ）、ブルートゥース低エネルギー（ｂｌｕｅｔｏｏｔｈ ｌｏｗ ｅｎｅｒｇｙ）、赤外線通信（ＩｒＤＡ、Ｉｎｆｒａｒｅｄ Ｄａｔａ Ａｓｓｏｃｉａｔｉｏｎ）、ＵＷＢ（Ｕｌｔｒａ－Ｗｉｄｅｂａｎｄ）またはＮＦＣ（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ）などを含んでよい。
本発明の実施形態に係る通信インターフェース１３０は、遠隔制御装置２００から伝送される制御信号を受信することができる。なお、近距離通信部１３３は、制御部１１０の制御によって遠隔制御装置２００から伝送される制御信号を受信することができる。
マイク１４０は、発話（ｕｔｔｅｒａｎｃｅ）されたユーザ音声を受信する。マイク１４０は、受信された音声を電気的信号に変換し、制御部１１０に出力することができる。ユーザ音声は、例えば、ディスプレイ装置１００のユーザガイド、メニューまたは機能の制御に対応する音声であってよい。マイク１４０の認識範囲は、ユーザの声の大きさと周辺の環境（例えば、スピーカの音、周辺の騒音）に対応して異なってよい。
マイク１４０は、ディスプレイ装置１００と一体型に実現されたり、または、分離されてよい。分離されたマイク１４０は、通信インターフェース１３０または入／出力部１６０を介してディスプレイ装置１００と電気的に接続されてよい。
カメラ１４５は、カメラ認識範囲でユーザのモーションに対応するビデオ（例えば、連続するフレーム）を撮影する。ユーザモーションは、例えば、ユーザの出現（ｐｒｅｓｅｎｃｅ、例えば、ユーザがカメラ認識範囲内に現れる）、ユーザの顔、表情、手、拳、指のようなユーザの身体の一部またはユーザの身体の一部のモーションなどを含んでよい。カメラ１４５は、レンズ及びイメージセンサで構成されてよい。
カメラ１４５は、ディスプレイ装置１００の上段、下段、左側及び右側のうち一つに位置してよい。
カメラ１４５は、撮影された連続的なフレームを変換して制御部１１０に出力することができる。制御部１１０は、撮影された連続的なフレームを分析し、ユーザのモーションを認識することができる。制御部１１０は、モーション認識結果を用いて、ディスプレイ装置１００にガイドやメニューを表示したりモーション認識結果に対応する制御（例えば、チャネル調整または音量調整など）をすることができる。
カメラ１４５が複数である場合、制御部１１０は複数のカメラ１４５を介して３次元静止イメージまたは３次元モーションを受信することができる。
カメラ１４５は、ディスプレイ装置１００と一体型で実現されたり、または、分離されてよい。分離されたカメラを含む電子装置は、通信インターフェース１３０または入／出力部１６０を介してディスプレイ装置１００と電気的に接続されてよい。
光受信部１５０は、遠隔制御装置２００から出力される光信号（制御信号を含む）を光窓（ｌｉｇｈｔ ｗｉｎｄｏｗ）を介して受信する。
光受信部１５０は、遠隔制御装置２００からユーザ入力（例えば、タッチ、押圧、タッチジェスチャ、音声またはモーション）に対応する光信号を受信することができる。受信された光信号から制御信号が抽出されてよい。受信された光信号及び／または抽出された制御信号は制御部１１０に伝送されてよい。
入／出力部１６０は、制御部１１０の制御によってディスプレイ装置１００の外部からコンテントを受信する。コンテントは、例えば、ビデオ、イメージ、テキストまたはウェブ文書を含んでよい。
入／出力部１６０は、ＨＤＭＩ（登録商標）入力ポート（ｈｉｇｈ－ｄｅｆｉｎｉｔｉｏｎ ｍｕｌｔｉｍｅｄｉａ ｉｎｔｅｒｆａｃｅ ｐｏｒｔ）１６１、コンポーネント入力ジャック（ｊａｃｋ）１６２、ＰＣ入力ポート（ｐｏｒｔ）１６３、及びＵＳＢ入力ジャック１６４のうち、一つを含んでよい。入／出力部１６０は、ＨＤＭＩ入力ポート１６２、コンポーネント入力ジャック１６２、ＰＣ入力ポート１６３、及びＵＳＢ入力ジャック１６４の組み合わせを含んでよい。入／出力部１６０は、ディスプレイ装置１００の性能及び構造に応じて、追加（例えば、光出力部（ｏｐｔｉｃａｌ ｃａｂｌｅ ｏｕｔｐｕｔ））、削除及び／または変更され得ることは、当該技術分野で通常の知識を有する者に容易に理解されるだろう。
ディスプレイ部１７０は、制御部１１０の制御によってチューナ１２０を介して受信される放送信号に含まれたビデオを表示する。ディスプレイ部１７０は、制御部１１０の制御によって通信インターフェース１３０を介して受信された応答情報を表示することができる。
ディスプレイ部１７０は、通信インターフェース１３０または入／出力部１６０を介して入力されるコンテント（例えば、ビデオ）を表示することができる。ディスプレイ部１７０は、制御部１１０の制御によって保存部１８０に保存されたコンテントを出力することができる。なお、ディスプレイ部１７０は、音声認識に対応する音声認識タスクを行うための音声認識ガイドＵＩ（ｕｓｅｒ ｉｎｔｅｒｆａｃｅ）またはモーション認識に対応するモーション認識タスクを行うためのモーション認識ガイドＵＩを表示することができる。例えば、音声認識ガイドＵＩは、音声命令語ガイド（例えば、おすすめ音声データまたはおすすめガイド）を含み、モーション認識ガイドＵＩはモーション命令語ガイドを含んでよい。
本発明の実施形態に係るディスプレイ装置１００の画面は、ディスプレイ装置１００のディスプレイ部１７０を含む意味で使われてよい。
本発明の別の実施形態に係るディスプレイ部１７０は、ディスプレイ装置１００と分離されてよい。ディスプレイ装置１００の入／出力部１６０を介してディスプレイ部１７０は、ディスプレイ装置１００と電気的に接続されてよい。
オーディオ出力部１７５は、制御部１１０の制御によってチューナ１２０を介して受信された放送信号に含まれたオーディオを出力する。オーディオ出力部１７５は、通信インターフェース１３０または入／出力部１６０を介して入力されるオーディオ（例えば、音声またはサウンドに対応する）を出力することができる。なお、オーディオ出力部１７５は、制御部１１０の制御によって保存部１８０に保存されたオーディオファイルを出力することができる。
オーディオ出力部１７５は、スピーカ１７６、ヘッドフォン出力端子１７７またはＳ／ＰＤＩＦ出力端子１７８のうち一つ、または、スピーカ１７６、ヘッドフォン出力端子１７７及びＳ／ＰＤＩＦ出力端子１７８の組み合わせを含んでよい。
保存部１８０は、制御部１１０の制御によってディスプレイ装置１００を駆動して制御するための多様なデータ、プログラムまたはアプリケーションを保存することができる。保存部１８０は、チューナ１２０、通信インターフェース１３０、マイク１４０、カメラ１４５、光受信部１５０、入／出力部１６０、ディスプレイ部１７０、オーディオ出力部１７５及び電源供給部１９０の駆動に対応する入力／出力される信号またはデータを保存することができる。
保存部１８０は、ディスプレイ装置１００及び制御部１１０の制御のための制御プログラム、製造元で最初に提供されたり外部からダウンロードしたアプリケーション、アプリケーションに関連するＧＵＩ（Ｇｒａｐｈｉｃ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ、以下、ＧＵＩという）、ＧＵＩを提供するためのオブジェクト（例えば、イメージテキスト、アイコン、ボタンなど）、ユーザ情報、文書、音声データベース、モーションデータベースまたは関連データを保存することができる。
保存部１８０は、放送受信モジュール、チャネル制御モジュール、音量制御モジュール、通信制御モジュール、音声認識モジュール、モーション認識モジュール、光受信モジュール、ディスプレイ制御モジュール、オーディオ制御モジュール、外部入力制御モジュール、電源制御モジュール、音声データベース（ＤＢ）、またはモーションデータベース（ＤＢ）を含んでよい。
モジュール及びデータベースは、ディスプレイ装置１００で放送受信の制御機能、チャネル制御機能、音量制御機能、通信制御機能、音声認識機能、モーション認識機能、光受信制御機能、ディスプレイ制御機能、オーディオ制御機能、外部入力制御機能、または電源制御機能を行うためにソフトウェア形態で実現されてよい。制御部２１０は、保存部２８０に保存された前記ソフトウェアを用いてディスプレイ装置１００の動作及び／または機能を行うことができる。
保存部１８０は、音声認識サーバから受信された音声データを保存することができる。保存部１８０は、音声認識サーバから受信された制御情報を保存することができる。保存部１８０は、対話型サーバから受信された制御情報を保存することもできる。
保存部１８０は、ユーザ音声に対応する音素に対応するデータベースを保存することができる。
なお、保存部１８０は、音声データに対応する制御情報データベースを保存することができる。
保存部１８０は、視覚フィードバックに対応する動画、イメージ、絵文字などを含むシンボル（ｓｙｍｂｏｌ）またはテキストを保存することができる。保存部１８０は、聴覚フィードバックに対応するサウンドを保存することができる。保存部１８０は、ユーザに提供されるフィードバックのフィードバック提供時間（例えば、３００ｍｓ）を保存することができる。
本発明の実施形態において、「保存部」という用語は、保存部１８０、制御部１１０のＲＯＭ１１２、ＲＡＭ１１３、ＳｏＣで実現される保存部、ディスプレイ装置１００に装着されるメモリカード（例えば、ｍｉｃｒｏ ＳＤカード、ＵＳＢメモリ）、なお、入／出力部１６０のＵＳＢポート１６４に接続可能な外部保存部（例えば、ＵＳＢメモリなど）を含む用語として使われてよい。なお、保存部は、不揮発性メモリ、揮発性メモリ、ハードディスクドライブ（ＨＤＤ）またはソリッドステートドライブ（ＳＳＤ）を含んでよい。
電源供給部１９０は、制御部１１０の制御によってディスプレイ装置１００の内部の構成要素１１０ないし１９０に外部電源ソースから入力される電源を供給する。電源供給部１９０は、制御部１１０の制御によってディスプレイ装置１００の内部に位置する一つまたは二つ以上のバッテリから入力される電源を内部の構成要素１１０ないし１９０に供給することができる。
図１及び図２のディスプレイ装置１００に示された構成要素（例えば、１１０ないし１９０）は、ディスプレイ装置１００の性能及び／または種類に対応し、少なくとも一つの構成要素の追加、変更されたり削除（例えば、点線で示されたボックスのうち少なくとも一つ）されてよい。なお、構成要素の位置（例えば、１１０ないし１９０）は、ディスプレイ装置１００の性能または構造に対応して変更され得ることは、当該技術分野で通常の知識を有する者に容易に理解されるだろう。
図２を参照すると、ディスプレイ装置１００を遠隔から制御する遠隔制御装置２００は、制御部２１０、通信インターフェース２３０、入力部２４０、光出力部２５０、ディスプレイ部２７０、保存部２８０及び電源供給部２９０を含む。ディスプレイ装置１００を遠隔から制御する遠隔制御装置２００の本体は、制御部２１０、通信インターフェース２３０、入力部２４０、光出力部２５０、ディスプレイ部２７０、保存部２８０及び電源供給部２９０を含んでよい。遠隔制御装置２００は、通信インターフェース２３０及び光出力部２５０のうち一つを含んでよい。なお、遠隔制御装置２００は、通信インターフェース２３０及び光出力部２５０の両方を含んでよい。
本発明の実施形態において、遠隔制御装置２００は、ディスプレイ装置１００を遠隔から制御可能な電子装置を指す用語として使われてよい。なお、遠隔制御装置２００は、ディスプレイ装置１００の制御のためのアプリケーションをインストール可能な（または、外部からダウンロードした後インストール可能な）電子装置を含んでよい。
ディスプレイ装置１００の制御のためのアプリケーションをインストール可能な電子装置は、ディスプレイ部（例えば、タッチスクリーン、タッチパネルなしにディスプレイパネルのみがあるか、または、ディスプレイ装置１００のディスプレイ部１７０を用いる）を有することもできる。例えば、ディスプレイ部を有する電子装置は、携帯電話、スマートフォン、タブレットパソコン、ノートパソコン、他のディスプレイ装置または家電装置（例えば、冷蔵庫、洗濯機または掃除機など）を含んでよい。
ユーザは、実行されるアプリケーションから提供されるグラフィックユーザインターフェース（ＧＵＩ）でボタン（例えば、チャネル変更ボタン）を用いて、ディスプレイ装置１００を制御することができる。
制御部２１０は、プロセッサ２１１、遠隔制御装置２００の制御のための制御プログラムが保存されたＲＯＭ（または、不揮発性メモリ）２１２及び遠隔制御装置２００の外部から入力される信号またはデータを保存したり、遠隔制御装置２００で行われる多様な作業に対する保存領域として使用されるＲＡＭ（または、揮発性メモリ）２１３を含んでよい。
制御部２１０は、遠隔制御装置２００の動作全般及び内部の構成要素２１０ないし２９０の間の信号の流れを制御し、データを処理する機能を行う。制御部２１０は、電源供給部２９０を用いて内部の構成要素２１０ないし２９０に電源供給を制御する。
本発明の実施形態において、「遠隔制御装置２００の制御部」という用語は、遠隔制御装置２００のプロセッサ２１１、ＲＯＭ２１２及びＲＡＭ２１３を含んでよい。「遠隔制御装置２００の制御部」という用語は、プロセッサ２１１を含んでよい。なお、「遠隔制御装置２００の制御部」という用語は、プロセッサ２１１にＲＯＭ２１２及びＲＡＭ２１３のうち一つを更に含んでよい。
通信インターフェース２３０は、制御部２１０の制御によってユーザ入力（例えば、タッチ、押圧、タッチジェスチャ、音声またはモーション）に対応する制御信号（例えば、電源オンに対応する制御信号、または音量調整に対応する制御信号など）を制御対象であるディスプレイ装置１００に伝送することができる。
通信インターフェース２３０は、制御部２１０の制御によってディスプレイ装置１００と無線で接続されてよい。通信インターフェース２３０は、無線ＬＡＮ通信部２３１と近距離通信部２３２のうち少なくとも一方（例えば、無線ＬＡＮ通信部２３１及び近距離通信部２３２のうち一方、または、無線ＬＡＮ通信部２３１と近距離通信部２３２の両方）を含んでよい。
遠隔制御装置２００の通信インターフェース１３０は、ディスプレイ装置１００の通信インターフェース１３０と実質的に類似するため、重複する説明を省略する。
入力部２４０は、ディスプレイ装置１００の制御のためのユーザの入力（例えば、タッチまたは押圧）を受信するボタン２４１、タッチパッド２６２、及び／または発話されたユーザ音声を受信するマイク２４３を含んでよい。入力部２４０のうちの一部は、遠隔制御装置２００の内部に位置するか、または前面２００ａに露出されてよい。
入力部２４０は、ハプティックフィードバック（例えば、電気的信号を機械的振動に変換）を提供する振動モータを更に含んでよい。
入力部２４０は、受信されたユーザ入力（例えば、タッチ、押圧、タッチジェスチャ、音声またはモーション）に対応する電気的信号（例えば、アナログ信号またはデジタル信号）を制御部２１０に出力することができる。
ボタン２４１は、図１のボタン２４１ａないし２４１ｉを含んでよい。
タッチパッド２４２は、ユーザのタッチまたはユーザのタッチジェスチャを受信することができる。例えば、タッチパッド１６２は、方向キー２４１ｄ及びエンターキー２４１ｅで実現されてよい。なお、タッチパッド１６２は、遠隔制御装置２００の前面、背面及び後面のうち少なくとも一つに位置することもできる。
遠隔制御装置２００のマイク２４３（図１を参照）は、ユーザの発話された音声を受信する。マイク２４３は、一つまたは複数で実現されてよい。例えば、マイク２４３は、遠隔制御装置２００の前面２００ａを介してユーザ音声を受信することができる。なお、マイクは、遠隔制御装置２００の背面を通じてユーザ音声を受信することができる。
マイク２４３は、受信された音声を変換して制御部２１０に出力することができる。なお、ユーザ音声に設定周波数帯域（例えば、５０ないし４、０００Ｈｚ）の音圧（ｓｏｕｎｄ ｐｒｅｓｓｕｒｅ）を用いてユーザの発話を検出することもできる。
制御部２１０は、ユーザ音声に対応する制御信号（または、電気的信号）を生成して通信インターフェース２３０を介してディスプレイ装置１００に伝送することができる。
センサ２４５は、遠隔制御装置２００の状態及び／または外部状態を検出することができる。例えば、遠隔制御装置２００の動き（例えば、回転、傾きまたは移動など）を検出するセンサ２４５は、モーションセンサ２４６、ジャイロセンサ、加速度センサ及び地磁気センサのうち少なくとも一つを含んでよい。センサ２４５は、ユーザの遠隔制御装置２００の把持（ｇｒｉｐ、ｇｒａｓｐ）を検出するグリップセンサ２４７及びユーザの呼気（ｅｘｈａｌａｔｉｏｎ）に含まれたガス（例えば、二酸化炭素（ＣＯ２）または一酸化炭素（ＣＯ）など）を検出するガスセンサ２４８を含んでよい。なお、センサ２４５は、重力センサを含んでよい。
光出力部２５０は、制御部２１０の制御によってユーザ入力（例えば、タッチ、押圧、タッチジェスチャ、音声またはモーション）に対応する光信号（例えば、制御信号を含む）を出力する。光出力部２５０から出力される光信号は、ディスプレイ装置１００の光受信部１５０で受信されてよい。遠隔制御装置２００で使用されるリモコンコードフォーマットは、製造元専用のリモコンコードフォーマット及び商用リモコンコードフォーマットのうち一つを使ってよい。リモコンコードフォーマットは、リーダーコード（ｌｅａｄｅｒ ｃｏｄｅ）及びデータ領域（ｄａｔａ ｗｏｒｄ）を含んでよい。出力される光信号は、搬送波（ｃａｒｒｉｅｒ ｗａｖｅ）に変調されて出力されてよい。制御信号は、保存部２８０に保存されているか、または、制御部１１０によって生成されてよい。遠隔制御装置２００は、ＩＲ－ＬＥＤ（ｉｎｆｒａｒｅｄ－ｌａｓｅｒ ｅｍｉｔｔｉｎｇ ｄｉｏｄｅ）を含んでよい。
遠隔制御装置２００は、ユーザ音声に対応する制御信号を通信インターフェース２３０及び光出力部２５０のうち一つを介してディスプレイ装置１００に伝送することができる。
制御部２１０は、ユーザ音声に対応する制御信号を通信インターフェース２３０及び光出力部２５０のうち一つを介して優先（ｐｒｉｏｒ）的にディスプレイ装置１００に伝送することができる。
ディスプレイ部２７０は、ディスプレイ装置１００に表示される放送チャネル番号、放送チャネル名及び／またはディスプレイ装置の状態（例えば、画面オフ、準備モード、ウェルカムモード及び／または通常モード）などを表示することができる。ディスプレイ部２７０は、例えば、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）方式、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）方式、またはＶＦＤ（Ｖａｃｕｕｍ Ｆｌｕｏｒｅｓｃｅｎｔ Ｄｉｓｐｌａｙ）方式のディスプレイを含んでよい。
保存部２８０は、制御部１１０の制御によって遠隔制御装置２００を駆動して制御するための多様なデータ、プログラムまたはアプリケーションを保存することができる。保存部２８０は、通信インターフェース２３０、光出力部２５０及び電源供給部２９０の駆動に対応する入力、または出力される信号またはデータを保存することができる。
保存部２８０は、制御部２１０の制御によって受信されたユーザ入力（例えば、タッチ、押圧、タッチジェスチャ、音声またはモーション）に対応する制御情報及び／または遠隔制御装置２００の動きに対応する制御情報を保存することができる。
保存部２８０は、遠隔制御装置２００に対応する遠隔制御装置情報を保存することができる。遠隔制御装置情報は、モデル名、固有の装置ＩＤ（Ｄｅｖｉｃｅ ＩＤ）、メモリ残量、客体データ有無、ブルートゥースバージョンまたはブルートゥースプロファイルを含んでよい。
電源供給部２９０は、制御部２１０の制御によって遠隔制御装置２００の構成要素２１０ないし２９０に電源を供給する。電源供給部２９０は、遠隔制御装置２００に位置する一つまたは二つ以上のバッテリから電源を構成要素２１０ないし２９０に供給することができる。バッテリは、遠隔制御装置２００の表面（例えば、ボタン２６１がある）と背面との間の内部に位置することができる。
図１及び図２の遠隔制御装置２００に示された構成要素は、ディスプレイ装置１００の性能に対応して、少なくとも一つの構成要素が追加されたり削除（例えば、点線で示されたボックスのうち少なくとも一つ）されてよい。なお、構成要素の位置は、ディスプレイ装置１００の性能または構造に対応して変更され得ることは、当該技術分野で通常の知識を有する者に容易に理解されるだろう。
音声認識サーバは、遠隔制御装置２００またはディスプレイ装置１００で入力されるユーザ音声に対応するパケットを通信インターフェースを介して受信する。音声認識サーバの制御部は、音声認識部及び音声認識アルゴリズムを用いて受信されたパケットを分析して音声認識を行う。
音声認識サーバの制御部は、音声認識アルゴリズムを用いて受信された電気的信号（または、電気的信号に対応するパケット）を単語または文章のテキストを含む音声認識データに変換することができる。
音声認識サーバの制御部は、音声データを通信インターフェースを介してディスプレイ装置１００に伝送することができる。
音声認識サーバの制御部は、音声データを用いて制御情報（例えば、制御命令語）に変換することができる。制御情報は、ディスプレイ装置１００の動作（または、機能）を制御することができる。
音声認識サーバは、制御情報データベースを含んでよい。音声認識サーバの制御部は、保存された制御情報データベースを用いて変換された音声データに対応する制御情報を決定することができる。
音声認識サーバは、変換された音声データを制御情報データベースを用いてディスプレイ装置１００を制御する制御情報（例えば、ディスプレイ装置１００の制御部２１０がパーシング（ｐａｒｓｉｎｇ）する）に変換することもできる。
音声認識サーバの制御部は、通信インターフェースを介して制御情報をディスプレイ装置１００に伝送することができる。
本発明の実施形態において、音声認識サーバは、ディスプレイ装置１００と一体型であってよい。音声認識サーバ３００は、ディスプレイ装置１００の構成要素１００ないし１９０と別の構成要素として、ディスプレイ装置１００に含まれてよい。例えば、音声認識サーバは、ディスプレイ装置１００の保存部１８０に内装（ｅｍｂｅｄｄｅｄ）されたり、または、別途の保存部で実現されてよい。
音声認識サーバと別に対話型サーバが実現されてよい。対話型サーバは、音声認識サーバから変換された音声データを制御情報に変換することができる。対話型サーバは、音声認識サーバ及びディスプレイ装置１００のうちの一つから受信される音声データを制御情報に変換することができる。対話型サーバは、変換された制御情報をディスプレイ装置１００に伝送することができる。
図１及び図２の音声認識サーバに示された構成要素は、音声認識サーバ３００の性能に対応し、少なくとも一つの構成要素が追加されたり削除されてよい。
以下では、遠隔制御装置でユーザ音声を受信する場合について、具体的に説明する。
図３は、本発明の実施形態に係る遠隔制御装置の音声受信方法を概略に示すフローチャートである。
図４Ａないし図４Ｈは、本発明の実施形態に係る遠隔制御装置の音声受信方法の例を概略に示す図である。
図３のステップＳ３１０において、ディスプレイ装置が接続される。
図４Ａを参照すると、ディスプレイ装置にコンテント（例えば、放送信号またはビデオなど）１０１が表示されている。遠隔制御装置２００は、テーブル（ｔａｂｌｅ）１０の上に置かれている。ユーザは、テーブル１０の上の遠隔制御装置２００を把持（または、タッチ）していない状態であってよい。
本発明の一実施形態において、遠隔制御装置２００の前面２００ａ及び／または側面２００ｂ、２００ｃに音声ボタン（または、音声認識ボタン）がない（または、実現されていない）。遠隔制御装置２００の前面２００ａ及び／または側面２００ｂ、２００ｃに音声ボタン（または、音声認識ボタン）が露出されていない。音声ボタン（または、音声認識ボタン）の選択（または、押圧、タッチ）は、発話されるユーザ音声の受信待機（または、準備）を意味することができる。
遠隔制御装置２００の制御部２１０及び／またはディスプレイ装置１００の制御部１１０は、音声ボタン（または、音声認識ボタン）の選択によって、マイク２４３、１４０に電源を供給することができる。なお、遠隔制御装置２００及び／またはディスプレイ装置１００は、音声ボタン（または、音声認識ボタン）の選択によってユーザ音声の受信待機（または、準備）で動作状態が変更されてよい。
ディスプレイ装置１００は、遠隔制御装置２００と無線（例えば、無線ＬＡＮ通信部２３１または近距離通信部２３２）に接続される。なお、ディスプレイ装置１００は、音声認識サーバと有線または無線で接続されてよい。
ディスプレイ装置１００と遠隔制御装置２００とが初接続である場合、遠隔制御装置２００の制御部２１０は、近距離通信部（例えば、ブルートゥースまたはブルートゥース低エネルギー）２３２を用いてディスプレイ装置１００を検索することができる。遠隔制御装置２００の制御部１１０は、ディスプレイ装置１００を問合せ（ｉｎｑｕｉｒｙ）し、及び問い合わせられたディスプレイ装置１００に対して接続要請（ｐａｇｅ）を行うことができる。なお、ディスプレイ装置１００と遠隔制御装置２００とが初接続である場合、遠隔制御装置２００の制御部２１０は、無線ＬＡＮ通信部２３１を用いてディスプレイ装置１００を検索することができる。
ディスプレイ装置１００と遠隔制御装置２００とが初接続である場合、ディスプレイ装置１００の制御部２１０は近距離通信部（例えば、ブルートゥースまたはブルートゥース低エネルギー）１３３及び無線ＬＡＮ通信部１３２のうち少なくとも一つを用いて、遠隔制御装置２００を検索することもできる。
ディスプレイ装置１００と遠隔制御装置２００とが接続される場合、ディスプレイ装置１００及び遠隔制御装置２００は、制御情報を含むパケット（例えば、ＢＬＥ ｐａｃｋｅｔまたはｂｌｕｅｔｏｏｔｈ ｐａｃｋｅｔなど）を相互送信／受信することができる。
図３のステップＳ３２０において、ユーザの発話意図が受信される。
図４Ｂないし図４Ｅを参照すると、ディスプレイ装置１００にコンテント１０１及びポップアップ（例えば、キーボードポップアップ）１０１ａが表示されている。表示されるコンテント１０１と別個の（又は、コンテント１０１の一部を遮る）ポップアップ１０１ａは、ディスプレイ装置１００でユーザ入力をガイドする画面を意味することができる。ユーザは、表示されるポップアップ１０１ａに応じて、ユーザ入力を行うことができる。例えば、ポップアップは、環境設定１０１ｂ（図４Ｅを参照）を含んでよい。
ユーザの発話意図は、遠隔制御装置２００の内部センサ及び外部から受信される制御情報によって決定されてよい。
遠隔制御装置２００からセンサ２４５を介してユーザの発話意図が受信されてよい。遠隔制御装置２００でマイク２４３を介してユーザの発話意図が受信されてよい。遠隔制御装置２００の制御部２１０は、マイク２４３及びセンサ２４５のうち少なくとも一つを用いてユーザの発話意図を検出することができる。
本発明の実施形態において、「ユーザの発話意図」は遠隔からディスプレイ装置１００を制御可能な遠隔制御装置２００からマイク２４３を介してユーザの音声を受信できる状態を意味することができる。「ユーザの発話意図」は、遠隔からディスプレイ装置１００を制御可能な遠隔制御装置２００のマイク２４３を介してユーザの音声を受信するための待機状態を意味することができる。なお、「ユーザの発話意図」は遠隔からディスプレイ装置１００を制御可能な遠隔制御装置２００のマイク２４３を介してユーザが音声を発話する前の状態を意味することができる。
ユーザの発話意図は、遠隔制御装置２００のセンサ２４５及びディスプレイ装置１００から受信された制御情報（または、状態情報）によって決定されてよい。本発明の実施形態において、制御部１１０によってユーザの発話意図を決定できる遠隔制御装置２００のセンサ２４５から受信された制御情報（または、状態情報）及びディスプレイ装置１００から受信された制御情報（または、状態情報）のうち少なくとも一つをユーザ発話意図情報と称してよい。例えば、遠隔制御装置２００のセンサ２４５から受信された制御情報（または、センサを介して検出された状態に基づいた状態情報）をセンサ２４５を介して検出された状態に基づいたユーザ発話意図情報（または、発話意図情報）と称してよい。なお、ディスプレイ装置１００から受信された制御情報（または、状態情報）を外部装置から受信されたユーザ発話意図情報（または、発話意図情報）と称してよい。
制御部２１０は、ユーザの発話意図を遠隔制御装置２００のセンサ２４５のうち、モーションセンサ２４６、グリップセンサ２４７及び／またはガスセンサ２４８を介して検出することができる。上述のセンサは一例であり、一つのセンサまたは複数のセンサを介してユーザの発話意図を受信（または、検出）することができる。なお、上述のセンサ２４５は、遠隔制御装置２００及びユーザの顔の間の距離の度合い（例えば、遠距離、中距離、近距離など）に対応されてよい。例えば、グリップセンサ２４７は、遠隔制御装置２００及びユーザの顔の間の遠距離に対応されてよい。モーションセンサ２４６は、遠隔制御装置２００及びユーザの顔の間の中距離に対応されてよい。なお、ガスセンサ２４８は、遠隔制御装置２００及びユーザの顔の間の近距離に対応されてよい。
図４Ｂを参照すると、ユーザはテーブル１０の上に置かれた遠隔制御装置２００を把持することができる。ユーザは、遠隔制御装置２００のマイク２４３を介して発話するために、テーブル１０の上に置かれた遠隔制御装置２００を把持することができる。ユーザは、テーブル１０の上の第１位置２０１ａに置かれた遠隔制御装置２００を左指及び右指のうち少なくとも一つを用いて把持することができる。ユーザは、遠隔制御装置２００のマイク２４３を介して発話するために、テーブル１０の上の第１位置２０１ａに置かれた遠隔制御装置２００を左指及び右指のうち少なくとも一つを用いて把持することができる。
遠隔制御装置２００のグリップセンサ２４７は、ユーザの把持（または、把持圧力）を受信することができる。なお、遠隔制御装置２００の側面２００ｂ、２００ｃに配置されるグリップセンサ２４７は、ユーザの把持（または、把持圧力）を受信することができる。
グリップセンサ２４７は、遠隔制御装置２００の側面２００ｂ、２００ｃのうち少なくとも一つに実現されてよい。遠隔制御装置２００の側面２００ｂ、２００ｃのうち少なくとも一つに実現されるグリップセンサ２４７は、側面に帯（Ｓｔｒｉｐ）状に実現されたり、または、それぞれ離隔している別々のものとして実現されてよい。
遠隔制御装置２００の側面２００ｂ、２００ｃに実現されるグリップセンサ２４７は、方向キー２４１ｄを基準に下方（例えば、電源ボタン２４１ａの反対方向）に位置することができる。
遠隔制御装置２００の側面２００ｂ、２００ｃに配置されるグリップセンサ２４７は、ユーザの把持（または、把持圧力）に対応する電気的信号を制御部２１０に伝送することができる。遠隔制御装置２００の側面２００ｂ、２００ｃに配置されるグリップセンサ２４７は、ユーザの左指及び右指のうち少なくとも一つによる接触に対応する電気的信号を制御部２１０に伝送することができる。
遠隔制御装置２００の制御部２１０は、グリップセンサ２４７から受信される電気的信号を用いてユーザの把持を検出することができる。
保存部２８０は、制御部２１０の制御によってグリップセンサ２４７から受信されるアナログ信号またはデジタル信号を保存することができる。以下では、保存されるアナログ信号またはデジタル信号を「遠隔制御装置把持情報」と称する。保存される遠隔制御装置把持情報は、履歴管理のための遠隔制御装置把持情報識別子（ＩＤ）、センサ識別子（ＩＤ）、遠隔制御装置の把持検出時間、遠隔制御装置の把持検出値（例えば、電圧、電流など）を含んでよい。
遠隔制御装置２００の第１位置２０１ａから保存される遠隔制御装置把持情報は、制御部２１０によるユーザの把持決定まで周期的に保存されてよい。遠隔制御装置把持情報は、センサ分解能及び／または設定されたセンサの検出時間間隔に対応して保存される遠隔制御装置把持情報の集合であってよい。
遠隔制御装置２００の制御部２１０は、ユーザ把持の検出を通じて「ユーザの発話意図あり」を決定することができる。
図４Ｃを参照すると、ユーザはテーブル１０の上に置かれた遠隔制御装置２００を移動させることができる。ユーザは、遠隔制御装置２００のマイク２４３を介して発話するために、テーブル１０の上に置かれた遠隔制御装置２００を移動させることができる。ユーザは、テーブル１０の上の第１位置２０１ａに置かれた遠隔制御装置２００を左指及び右指のうち少なくとも一つで把持して移動させることができる。ユーザは、遠隔制御装置２００のマイク２４３を介して発話するために、テーブル１０の上の第１位置２０１ａに置かれた遠隔制御装置２００を左指及び右指のうち少なくとも一つで把持して移動させることができる。なお、ユーザは、テーブル１０の上の第１位置２０１ａに置かれた遠隔制御装置２００を左指及び右指のうち少なくとも一つで把持して第２位置２０１ｂに移動させることができる。ユーザは、遠隔制御装置２００のマイク２４３を介して発話するために、テーブル１０の上の第１位置２０１ａに置かれた遠隔制御装置２００を左指及び右指のうち少なくとも一つで把持して第２位置２０１ｂに移動させることができる。
遠隔制御装置２００のモーションセンサ２４６は、遠隔制御装置２００の動き（例えば、回転、傾きまたは移動など）を検出することができる。遠隔制御装置２００の動きは、モーションセンサ２４６だけでなく、加速度センサ、地磁気センサまたはジャイロセンサによって検出されてよい。
遠隔制御装置２００の動きは、モーションセンサ２４６によって周期的（例えば、センサの分解能（ｒｅｓｏｌｕｔｉｏｎ）または設定されたセンサの検出時間間隔）に検出されてよい。
モーションセンサ２４６は、遠隔制御装置２００の動きに対応するアナログ信号を制御部２１０に出力することができる。なお、モーションセンサ２４６から出力されるアナログ信号はコンバータによってデジタル信号に変更され、制御部２１０に出力することもできる。
遠隔制御装置２００の制御部２１０は、モーションセンサ２４６から受信される電気的信号（例えば、アナログ信号またはデジタル信号）を分析し、遠隔制御装置２００の動きを決定することができる。なお、遠隔制御装置２００の制御部２１０は、モーションセンサ２４６から受けた電気的信号（例えば、アナログ信号またはデジタル信号）を分析し、遠隔制御装置２００の動き（例えば、移動距離、移動速度または加速度の変化など）を決定することができる。
保存部２８０は、制御部２１０の制御によってモーションセンサ２６５から受信されるアナログ信号またはデジタル信号を保存することができる。以下では、保存されるアナログ信号またはデジタル信号を「遠隔制御装置動き情報」と称する。保存される遠隔制御装置動き情報は、履歴管理のための遠隔制御装置動き情報識別子（ＩＤ）、センサ識別子（ＩＤ）、遠隔制御装置の検出された加速度（例えば、２軸または３軸）値、遠隔制御装置の移動検出時間、遠隔制御装置の移動距離などを含んでよい。
遠隔制御装置２００の第１位置２０１ａから保存される遠隔制御装置動き情報は、第２位置２０１ｂに到達するまで周期的に保存されてよい。遠隔制御装置動き情報は、センサ分解能及び／または設定されたセンサの検出時間間隔に対応して保存される遠隔制御装置動き情報の集合であってよい。
本発明の実施形態において、遠隔制御装置２００の制御部２１０は、グリップセンサ２４７及びモーションセンサ２４６のうちの一つを通じて「ユーザの発話意図あり」を決定することができる。なお、遠隔制御装置２００の制御部２１０は、連続するグリップセンサ２４７及びモーションセンサ２４６の組み合わせを通じて「ユーザの発話意図あり」と決定することができる。
図４Ｄを参照すると、ユーザはテーブル１０の上に置かれた遠隔制御装置２００をユーザの口（ｍｏｕｔｈ）に隣接（例えば、５０ｃｍ以内、マイク２５３の性能に応じて変更可能）するように移動させることができる。ユーザは、遠隔制御装置２００のマイク２４３を介して発話するために、テーブル１０の上に置かれた遠隔制御装置２００をユーザの口に隣接するように移動させることができる。
ユーザは、テーブル１０の上の第１位置２０１ａに置かれた遠隔制御装置２００を左指及び右指のうち少なくとも一つで把持してユーザの口に隣接するように移動させることができる。ユーザは、遠隔制御装置２００のマイク２４３を介して発話するために、テーブル１０の上の第１位置２０１ａに置かれた遠隔制御装置２００を左指及び右指のうち少なくとも一つで把持してユーザの口に隣接するように移動させることができる。
ユーザは、テーブル１０の上の第１位置２０１ａに置かれた遠隔制御装置２００を左指及び右指のうち少なくとも一つで把持してユーザの口に隣接する第３位置２０１ｃに移動させることができる。ユーザは、遠隔制御装置２００のマイク２４３を介して発話するために、テーブル１０の上の第１位置２０１ａに置かれた遠隔制御装置２００を左指及び右指のうち少なくとも一つで把持してユーザの口に隣接する第３位置２０１ｃに移動させることができる。本発明の実施形態において、第３位置２０１ｃは、ユーザの口に隣接する位置を意味し、第３位置２０１ｃでユーザの呼気に含まれるガス（ＣＯ２）がガスセンサ２４８を介して検出されてよい。
第３位置２０１ｃに移動された遠隔制御装置２００のガスセンサ２４８は、ユーザの呼気に含まれたガス（例えば、二酸化炭素（ＣＯ２）など）を検出することができる。遠隔制御装置２００のガスセンサ２４８は到達した第３位置２０１ｃでユーザの呼気に含まれたガス（例えば、二酸化炭素（ＣＯ２）など）を検出することができる。なお、遠隔制御装置２００のガスセンサ２４８は、第３位置２０１ｃに移動中にユーザの呼気に含まれたガス（例えば、二酸化炭素（ＣＯ２）など）を検出することができる。
遠隔制御装置２００のガス検出は、ガスセンサ２４８によって周期的（例えば、センサの分解能（ｒｅｓｏｌｕｔｉｏｎ）または設定されたセンサの検出時間間隔）に検出されてよい。
ガスセンサ２４８は、遠隔制御装置２００に吸引されるガスに対応するアナログ信号を制御部２１０に出力することができる。なお、ガスセンサ２４８から出力されるアナログ信号はコンバータによってデジタル信号に変更され、制御部２１０に出力することもできる。
遠隔制御装置２００の制御部２１０は、ガスセンサ２４８から受信される電気的信号（例えば、アナログ信号またはデジタル信号）を分析し、遠隔制御装置２００から検出される呼気のガスを決定することができる。なお、遠隔制御装置２００の制御部２１０は、ガスセンサ２４８から受けた電気的信号（例えば、アナログ信号またはデジタル信号）を分析し、遠隔制御装置２００から検出される呼気のガスを決定することができる。
保存部２８０は、制御部２１０の制御によってガスセンサ２４８から受信されるアナログ信号またはデジタル信号を保存することができる。以下では、保存されるアナログ信号またはデジタル信号を「遠隔制御装置ガス情報」と称する。保存される遠隔制御装置ガス情報は、履歴管理のための遠隔制御装置ガス情報識別子（ＩＤ）、センサ識別子（ＩＤ）、遠隔制御装置の検出されたガス名、または、遠隔制御装置のガス検出時間などを含んでよい。
遠隔制御装置２００の第１位置２０１ａから保存される遠隔制御装置ガス情報は、第３位置２０１ｃに到達するまで周期的に保存されてよい。遠隔制御装置２００の第１位置２０１ａから保存される遠隔制御装置ガス情報は、第３位置２０１ｃに到達した後から周期的に保存されてよい。遠隔制御装置ガス情報は、センサ分解能及び／または設定されたセンサの検出時間間隔に対応して保存される遠隔制御装置ガス情報の集合であってよい。
上述のガスセンサ２４８だけでなくセンサ２４５は、遠隔制御装置２００とユーザの顔との間の距離を測定し、遠隔制御装置２００の接近（または、出現）を検出する距離センサ（例えば、超音波センサ）またはユーザの遠隔制御装置２００の接近（または、出現）を検出する接近センサを含んでよい。
本発明の実施形態において、遠隔制御装置２００の制御部２１０は、ガスセンサ２４８を通じて「ユーザの発話意図あり」を決定することができる。遠隔制御装置２００の制御部２１０は、グリップセンサ２４７及びモーションセンサ２４６のいずれか一つによってトリガー（ｔｒｉｇｇｅｒ）された後、ガスセンサ２４８を介して「ユーザの発話意図あり」を決定することができる。なお、遠隔制御装置２００の制御部２１０は、連続するグリップセンサ２４７、モーションセンサ２４６及びガスセンサ２４８の組み合わせを通じて「ユーザの発話意図あり」を決定することができる。例えば、一実施形態によると、制御部２１０は、グリップセンサ２４７のみに基づいて、ユーザの発話意図があると判断することができる。一実施形態によれば、制御部２１０はモーションセンサ２４６のみに基づいてユーザの発話意図があると判断することができる。一実施形態によると、制御部２１０は、ガスセンサ２４８のみに基づいてユーザの発話意図があると判断することができる。一実施形態によると、制御部２１０は、グリップセンサ２４７、モーションセンサ２４６、ガスセンサ２４８の全てに基づいてユーザの発話意図があると判断することができる。一実施形態によると、制御部２１０は、グリップセンサ２４７、モーションセンサ２４６及びガスセンサ２４８のうち、任意の二つに基づいてユーザの発話意図があると判断することができる。
図４Ｅを参照すると、ディスプレイ装置１００にコンテント１０１及びポップアップ（例えば、環境設定ポップアップ）１０１ｂが表示されている。ユーザの発話意図は、遠隔制御装置２００の内部センサ２４５だけでなく、外部（例えば、ディスプレイ装置１００）から受信される制御情報によって決定されてよい。
ディスプレイ装置１００の制御部１１０は、ディスプレイ部１７０に表示されるコンテント及びコンテントに対応するユーザの使用パターン（または、発話履歴）を分析することができる。ディスプレイ装置１００の制御部１１０は、コンテント及びユーザの使用パターン（または、使用履歴）の分析結果を用いて、ユーザの発話意図（または、発話有無）を決定することができる。
ディスプレイ部１７０にコンテント１０１及びポップアップ（例えば、キーボードポップアップ）１０１ａが表示される場合、ディスプレイ装置１００の制御部１１０は、「ユーザの発話意図あり」を決定することができる。なお、ディスプレイ部１７０にコンテント１０１及びポップアップ（環境設定ポップアップ）１０１ｂが表示される場合、ディスプレイ装置１００の制御部１１０は、「ユーザの発話意図あり」を決定することができる。上述のポップアップ１０１ａ、１０１ｂは一つの実施形態であり、ユーザが音声を発話するようにするガイドするポップアップ（または画面）であればよい。
ディスプレイ装置１００の画面にポップアップが表示される場合、ディスプレイ装置１００の制御部１１０は、通信インターフェース１３０を用いて遠隔制御装置２００の通信インターフェース２３０に「ポップアップ表示」に対応する第１制御情報（例えば、第１－１パケット）を伝送することができる。
ディスプレイ装置１００の制御部１１０は、「ポップアップ表示」に対応する第１制御情報（例えば、第１－１パケット）を無線通信規に応じて遠隔制御装置２００で受信できるように伝送（または、変換して伝送）することができる。なお、ディスプレイ装置１０の制御部１１０は、「ポップアップ表示」に対応する第１－１パケットを伝送するように通信インターフェース１３０を制御することができる。パケットは、近距離通信の規格に応じたパケットであってよい。
上述のポップアップだけでなく、ディスプレイ部１７０にコンテントまたはスマートハブのホーム画面が表示される場合、ディスプレイ装置１００の制御部１１０は、ユーザの使用パターン（または、発話履歴）を用いて、「ユーザの以前発話」を確認することができる。
ディスプレイ部１７０にコンテントに含まれる複数の画面のうちの一つの画面またはスマートハブのホーム画面が表示される場合、ディスプレイ装置１００の制御部１１０は、「ユーザが以前に発話した」を確認することができる。「ユーザが以前に発話した」に総表示回数、ユーザ発話回数、発話比率（％）を含んでよい。ディスプレイ装置１００の画面にユーザの以前発話（又は、発話した）に対応する画面が表示される場合、ディスプレイ装置１００の制御部１１０は、通信インターフェース１３０を用いて遠隔制御装置２００の通信インターフェース２３０に「ユーザ以前発話」に対応する第１制御情報（例えば、第１－２パケット）を伝送することができる。
ディスプレイ装置１００の制御部１１０は、「ユーザ以前発話」に対応する第１制御情報（例えば、第１－２パケット）を無線通信規格によって遠隔制御装置２００で受信できるように伝送（または、変換して伝送）することができる。なお、ディスプレイ装置１００の制御部１１０は、「ユーザ以前発話」に対応する第１－２パケットを伝送するように通信インターフェース１３０を制御することができる。パケットは、近距離通信の規格に応じたパケットであってよい。
遠隔制御装置２００の制御部２１０は、センサ２４５及び外部から受信される第１制御情報の組み合わせを通じて、「ユーザの発話意図あり」を決定することができる。なお、遠隔制御装置２００の制御部２１０は、複数のセンサのうち少なくとも一つ及び外部から受信される第１制御情報の組み合わせを通じて「ユーザの発話意図確定」を決定することができる。
「ユーザの発話意図確定」は、遠隔制御装置２００だけでなく、ディスプレイ装置１００の制御部１１０でも決定することもできる。
図３のステップＳ３３０において、マイクオン（ｏｎ）及びディスプレイ装置の画面に音声認識ガイドインターフェース（ｕｓｅｒ ｉｎｔｅｒｆａｃｅ）が表示される。
図４Ｆを参照すると、ディスプレイ装置１００の画面に音声認識ガイドユーザインターフェース（または、Ｑ－サイン（ｃｕｅ ｓｉｇｎ））１０１ｃが表示される。遠隔制御装置２００の制御部２１０は、「ユーザの発話意図確定」に対応してマイク２４３に電源を供給することができる。なお、遠隔制御装置２００の制御部２１０は、「ユーザの発話意図確定」に対応してマイク２４３を動作（例えば、発話されたユーザ音声を受信可能）させることができる。マイク２４３が動作しない場合（または、マイク２４３に電源が供給されない場合）、ユーザが音声を発話するとしても、マイク２４３はユーザの音声を受信することができない。
遠隔制御装置２００の制御部２１０は、通信インターフェース２３０を用いて「ユーザの発話意図確定」に対応する第２制御情報をディスプレイ装置１００の通信インターフェース１３０に伝送することができる。
ディスプレイ装置１００の制御部１１０の第２制御情報の受信に対応し、画面に音声認識ガイドユーザインターフェース１０１ｃを表示することができる。
音声認識ガイドユーザインターフェース１０１ｃは、ユーザの発話をガイドするようにディスプレイ装置１０の画面に提供されるユーザインターフェース（ｕｓｅｒ ｉｎｔｅｒｆａｃｅ）を意味することができる。例えば、ユーザの発話意図が確定である場合、ディスプレイ装置１００の制御部２１０は、「ユーザの発話意図確定」に対応するテキスト、イメージ、ビデオまたはシンボルで構成される音声認識ガイドユーザインターフェース１０１ｃをユーザに提供することができる。音声認識ガイドユーザインターフェース１０１ｃは、画面に表示されるコンテント１０１と別個であってよい。
音声認識ガイドユーザインターフェース１０１ｃは、音声認識ガイドユーザインターフェース１０１ｃの一側に表示されるユーザガイド（例えば、テキスト（例えば、マイクオン（ｍｉｃ ｏｎ）１０１ｃ１、イメージ１０１ｃ２、ビデオまたはシンボル１０１ｄ３（図４Ｇを参照）など）を含んでよい。ユーザガイドは、テキスト、イメージ、ビデオ、シンボルのうちの一つまたは組み合わせを含んでよい。
音声認識ガイドユーザインターフェース１０１ｃは、ディスプレイ装置１００の画面の一側（例えば、上／下／左／右のうち一つ）に位置することができる。なお、音声認識ガイドユーザインターフェース１０１ｃは、ディスプレイ装置１００の画面に表示されるコンテント１０１と重なるように表示されてよい。
音声認識ガイドユーザインターフェース１０１ｃは、透明度（ｔｒａｎｓｐａｒｅｎｃｙ、例えば、０％ないし１００％）を有してよい。音声認識ガイドユーザインターフェース１０１ｃの透明度に応じて、コンテント１０１がぼんやりと表示されてよい。なお、本発明の実施形態において、音声認識ガイドユーザインターフェース１０１ｃは画面でコンテント１０１と区別できるように表示されてよい。
ユーザの遠隔制御装置２００の把持から別の音声認識ガイドユーザインターフェース１０１ｃの表示までの時間が短いほど、改善されたユーザ経験（ｕｓｅｒ ｅｘｐｅｒｉｅｎｃｅ）をユーザに提供することができる。例えば、遠隔制御装置２００の把持から別の音声認識ガイドユーザインターフェース１０１ｃの表示までの時間（Ｔ１）が１秒以下であってよい。なお、遠隔制御装置２００の把持から別の音声認識ガイドユーザインターフェース１０１ｃの表示までの時間（Ｔ１）が３秒以下であってよい。
図３のステップＳ３０４において、ユーザ音声が受信される。
図４Ｇを参照すると、ディスプレイ装置１００の制御部２１０は、別の音声認識ガイドユーザインターフェース１０１ｄを表示することができる。音声認識ガイドユーザインターフェース１０１ｃの後設定された時間（例えば、１００ｍｓ、変更可能）が経過する場合、ディスプレイ装置１００の制御部２１０は、ユーザ音声の受信可能に対応する別の音声認識ガイドユーザインターフェース１０１ｄを表示することができる。別の音声認識ガイドユーザインターフェース１０１ｄは、ユーザガイド（例えば、テキスト（例えば、ｓｐｅａｋ ｎｏｗ１０１ｄ１、イメージ１０１ｄ２、ビデオまたはシンボル１０１ｄ３（図４Ｇを参照）など）を含んでよい。
ディスプレイ装置１００の画面に別の音声認識ガイドユーザインターフェース１０１ｄが表示される場合、ユーザは把持した遠隔制御装置２００に音声を発話（例えば、「サッカー」）することができる。遠隔制御装置２００のマイク２４３はユーザの音声を受信（または、入力）することができる。マイク２４３は、受信されたユーザ音声に対応する信号（例えば、デジタル信号またはアナログ信号）に変換して制御部２１０に出力することができる。制御部２１０は、受信されたユーザ音声に対応する信号を保存部２８０に保存することができる。
ユーザの遠隔制御装置２００の把持から別の音声認識ガイドユーザインターフェース１０１ｄの表示までの時間が短いほど改善されたユーザ経験をユーザに提供することができる。例えば、遠隔制御装置２００の把持から別の音声認識ガイドユーザインターフェース１０１ｄの表示までの時間（Ｔ１）が１．５秒以下であってよい。なお、遠隔制御装置２００の把持から別の音声認識ガイドユーザインターフェース１０１ｄの表示までの時間（Ｔ１）が３．５秒以下であってよい。
図３のステップＳ３４０において、設定時間（例えば、５秒以下、変更可能）の間、ユーザ音声が受信されない場合、遠隔制御装置２００はマイク２４３に供給される電源を遮断し、ユーザ音声受信を終了することができる。
一方、ユーザの後続発話が予測される場合には、前記設定時間を可変したり、前記設定時間の経過有無によらず、マイクの電源供給を保持しつつユーザ音声受信を終了しなくてよい。ユーザの後続発話が予測されるか否かは、直前の発話内容、発話によるディスプレイ装置のユーザインターフェース表示内容、または発話によるディスプレイ装置の動作もしくは機能実行結果に基づいて判断することができる。
ユーザの後続発話が予想されるか否かの判断の主体は、ディスプレイ装置または対話型サーバであってよく、ディスプレイ装置は前記判断結果を含む特定信号（パケット）を遠隔制御装置に伝送し、マイクの電源供給を保持するか保持時間を可変するようにすることができる。
図３のステップＳ３５０において、ユーザ音声に対応する制御信号をディスプレイ装置に伝送する。
図４Ｈを参照すると、ディスプレイ装置１００の画面が発話されたユーザ音声（例えば、「サッカー」）に対応して変更されてよい。遠隔制御装置２００の制御部２１０は、保存されたユーザ音声に対応する電気的信号を通信インターフェース２３０を介してディスプレイ装置１００に伝送することができる。ユーザ音声に対応する電気的信号の一部が保存部２８０に保存される場合、遠隔制御装置２００の制御部２１０は、ユーザ音声に対応する信号の一部を通信インターフェース２３０を介して直接（または、直ちに、１００ｍｓ以下（変更可能））ディスプレイ装置１００に伝送することができる。
遠隔制御装置２００の制御部２１０は、保存されたユーザ音声に対応する電気的信号を無線通信規格によってディスプレイ装置１００で受信できるように伝送（または、変換して伝送）することができる。なお、遠隔制御装置２００の制御部２１０は、保存されたユーザ音声に対応する信号を含むパケット（ｐａｃｋｅｔ）を伝送するように通信インターフェース２３０を制御することができる。パケットは、近距離通信の規格に応じたパケットであってよい。
遠隔制御装置２００からパケットが受信される場合、ディスプレイ装置１００の制御部１１０は、受信されるパケットを保存部１８０に保存することができる。
ディスプレイ装置１００の制御部１１０は、受信されたパケットを分析（または、パーシング）することができる。分析の結果によって、ディスプレイ装置１００の制御部１１０は、ユーザ音声に対応する信号の受信を決定することができる。
ディスプレイ装置１００の制御部１１０は、受信されたパケットを通信インターフェース１３０を介して音声認識サーバに伝送することができる。ディスプレイ装置１００の制御部１１０は、受信されたパケットをそのまま、または、受信されたパケットを変換して音声認識サーバに伝送することもできる。
音声認識サーバの制御部は、受信されたパケットに対して音声認識アルゴリズムを用いて、音声認識を行う。音声認識アルゴリズムは、パケットを一定の長さを有する区間に区分し、それぞれの区間を音響分析して周波数スペクトラム及び音声パワーなどを含むパラメータ（ｐａｒａｍｅｔｅｒ）を抽出することができる。音声認識アルゴリズムは、パケットを音素（ｐｈｏｎｅｍｅｓ）単位に分割し、分割された音声単位のパラメータに基づいて音素を認識することができる。
音声認識サーバの保存部は、特定音素に対応する音素データベースを保存（アップデートも可能）することができる。音声認識サーバ３００の制御部は、認識された音素及び予め保存されたデータベースを用いて音声データを生成することができる。
音声認識サーバの制御部は、受信されたパケットの波形を音声認識して音声データを生成することができる。音声認識サーバの制御部は、音声データを用いて制御情報（例えば、制御命令語）に変換することができる。制御情報は、ディスプレイ装置１００の動作（または、機能）を制御することができる。音声認識サーバは、制御情報データベースを含んでよい。
音声認識サーバは、変換された音声データを制御情報データベースを用いてディスプレイ装置１００を制御する制御情報（例えば、ディスプレイ装置１００の制御部１１０がパーシング（ｐａｒｓｉｎｇ）可能な情報）に変換することもできる。例えば、ユーザの音声（例えば、「ボリューム上げて」に対応するアナログ波形）が受信される場合、ディスプレイ装置１００は通信インターフェースを介して音声に対応する電気的信号（例えば、デジタル信号、アナログ信号、またはパケット）を音声認識サーバに伝送することができる。音声認識サーバは、受信された電気的信号（または、パケット）を音声認識を通じて音声データ（例えば、「サッカー」）に変換することができる。音声認識サーバ３００は、音声データを用いて制御情報を変換（または、生成）することができる。
制御情報をディスプレイ装置１００で受信する場合、音声データに対応する制御情報によってディスプレイ装置１００の制御部１１０は、サッカーコンテント（または、サッカーチャネル）を表示することができる。
図３のステップＳ３５０において、ユーザ音声に対応する制御命令がディスプレイ装置に伝送される場合、遠隔制御装置のユーザ音声受信方法は終了する。
本発明の例示的な実施形態に係る方法は、多様なコンピュータ手段を通じて行うプログラム命令形態で実現され、コンピュータ読み取り可能な媒体に記録されてよい。前記コンピュータ読み取り可能な媒体は、プログラム命令、データファイル、データ構造などを単独でまたは組み合わせて含んでよい。例えば、前記コンピュータ読み取り可能な媒体は、削除可能または上書き可否に関係なく、ＲＯＭなどの保存装置のような揮発性または不揮発性保存装置、または、例えば、ＲＡＭ、メモリチップ、装置または集積回路のようなメモリ、または、例えばＣＤ、ＤＶＤ、磁気ディスクまたは磁気テープなどのような光学または磁気的に記録可能と同時に機械（または、コンピュータ）で読み取れる保存媒体に保存されてよい。
なお、コンピュータ読み取り可能なプログラムは、サーバのコンピュータ読み取り可能な保存媒体に保存され、前記コンピュータプログラムはネットワークを通じてコンピューティング装置にダウンロードされてよい。
遠隔制御装置及び／またはディスプレイ装置内に含まれるメモリは、本発明の実施形態を実現する指示を含むプログラムまたはプログラムを保存するに適する機械で読み取れる保存媒体の一例であることを知ることができる。前記媒体に記録されるプログラム命令は、本発明のために、特別に設計されて構成されたものであるか、コンピュータソフトウェア当業者に公知されて使用可能なものであってよい。
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明は以上の実施形態に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的趣旨の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
そのため、本発明の範囲は、説明された例示的実施例に制限されてはならず、後述の請求範囲だけでなく、請求範囲に等しいものによって決まるべきである。
１００ ディスプレイ装置
１１０ 制御部
１１１ プロセッサ
１１２ ＲＯＭ
１１３ ＲＡＭ
１２０ チューナ
１３０ 通信部
１３１ 有線イーサネット
１３２ 無線ＬＡＮ通信部
１３３ 近距離通信部
１４０ マイク
１４５ カメラ
１５０ 光受信部
１６０ 入／出力部
１６１ ＨＤＭＩ
１６２ コンポーネント
１６３ ＰＣ
１６４ ＵＳＢ
１７０ ディスプレイ部
１７５ オーディオ出力部
１７６ スピーカ
１７７ ヘッドフォン
１７８ Ｓ／ＰＤＩＦ
１８０ 保存部
１９０ 電源供給部
２００ 遠隔制御装置
２１０ 制御部
２１１ プロセッサ
２１２ ＲＯＭ
２１３ ＲＡＭ
２３０ 通信部
２３１ 無線ＬＡＮ通信部
２３２ 近距離通信部
２４０ 入力部
２４１ ボタン
２４２ タッチパッド
２４３ マイク
２４５ センサ
２４６ モーションセンサ
２４７ グリップセンサ
２４８ ガスセンサ
２５０ 光出力部
２７０ ディスプレイ部
２８０ 保存部
２９０ 電源供給部

Claims (12)

  1. 音声認識を用いて外部装置を制御できる遠隔制御装置において、
    マイクと、
    少なくとも一つのセンサと、
    通信インターフェースと、
    前記マイク、前記少なくとも一つのセンサ、及び前記通信インターフェースを制御するプロセッサと
    を含み、
    前記プロセッサは、
    前記遠隔制御装置の発話意図情報及び前記外部装置の発話意図情報を組み合わせてユーザ発話意図を識別し、前記遠隔制御装置の発話意図情報は、前記少なくとも一つのセンサによって識別された前記遠隔制御装置の状態または外部状態に基づいて、前記外部装置の発話意図情報は前記通信インターフェースを介して前記外部装置から受信され、
    前記ユーザ発話意図の識別結果に応じて、前記マイクの電源供給有無を制御し、
    前記マイクを介して受信されるユーザ音声に対応するデータを前記外部装置に伝送するように前記通信インターフェースを制御する遠隔制御装置。
  2. 前記少なくとも一つのセンサは、複数のセンサを含み、
    前記プロセッサは、前記遠隔制御装置とユーザの顔との間の距離に対応する、前記複数のセンサから検出された状態を組み合わせてユーザの発話意図を識別する
    ことを特徴とする請求項１に記載の遠隔制御装置。
  3. 前記少なくとも一つのセンサは、前記遠隔制御装置の把持を検出するグリップセンサと、前記遠隔制御装置の動きを検出するモーションセンサと、ユーザの呼気に含まれるガスを検出するガスセンサのうち、少なくとも一つを含む
    ことを特徴とする請求項１に記載の遠隔制御装置。
  4. 前記外部装置から受信した発話意図情報は、前記外部装置のディスプレイにユーザの音声発話をガイドするポップアップの表示有無に対する情報を含む
    ことを特徴とする請求項１に記載の遠隔制御装置。
  5. 前記外部装置から受信した発話意図情報は、前記外部装置のディスプレイに表示されるコンテントに対応するユーザの発話履歴に関する情報を含む
    ことを特徴とする請求項１に記載の遠隔制御装置。
  6. 前記外部装置から受信した発話意図情報は、ユーザの後続発話が予想されるか否かに対する情報を含む
    ことを特徴とする請求項１に記載の遠隔制御装置。
  7. 前記ユーザの後続発話が予想されるか否かに対する情報は、直前の発話内容、前記外部装置のディスプレイに表示されるユーザインターフェースの内容、及び直前の発話に応じた前記外部装置の動作または機能実行結果のうち、少なくとも一つに基づいて識別される
    ことを特徴とする請求項６に記載の遠隔制御装置。
  8. 前記プロセッサは、ユーザの発話意図があると識別される場合、前記マイクに電源を供給し、前記通信インターフェースを制御して前記発話意図情報を前記外部装置に伝送し、
    前記外部装置は、音声認識ガイドユーザインターフェースをディスプレイに表示する
    ことを特徴とする請求項１に記載の遠隔制御装置。
  9. 遠隔制御装置のユーザ音声受信方法であって、
    外部装置と接続するステップと、
    前記遠隔制御装置の発話意図情報及び前記外部装置の発話意図情報を組み合わせて、ユーザ発話意図を識別するステップと、
    前記遠隔制御装置の発話意図情報は、少なくとも一つのセンサによって識別された前記遠隔制御装置の状態または外部状態に基づいて、前記外部装置の発話意図情報は前記外部装置から受信されるステップと、
    前記ユーザ発話意図の識別結果に応じてマイクに電源を供給するステップと、
    前記マイクを介して受信されるユーザ音声に対応するデータを前記外部装置に伝送するステップとを含む遠隔制御装置のユーザ音声受信方法。
  10. 前記ユーザの発話意図を識別するステップは、
    前記遠隔制御装置の内部から前記遠隔制御装置の発話意図情報を受信し、前記遠隔制御装置の外部から前記外部装置の発話意図情報を受信する
    ことを特徴とする請求項９に記載の遠隔制御装置のユーザ音声受信方法。
  11. 前記遠隔制御装置の内部から前記遠隔制御装置の発話意図情報の受信は、少なくとも一つのセンサ及び前記マイクのうち一方を用いる
    ことを特徴とする請求項１０に記載の遠隔制御装置のユーザ音声受信方法。
  12. 前記遠隔制御装置の外部から前記外部装置の発話意図情報の受信は、前記外部装置に表示されるポップアップガイド及びユーザ発話履歴のうち一方を用いる
    ことを特徴とする請求項１０に記載の遠隔制御装置のユーザ音声受信方法。
JP2019546280A 2017-07-10 2018-05-29 遠隔制御装置及び遠隔制御装置のユーザ音声受信方法 Active JP7187468B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020170087167A KR102392087B1 (ko) 2017-07-10 2017-07-10 원격 조정 장치 및 원격 조정 장치의 사용자 음성 수신방법
KR10-2017-0087167 2017-07-10
PCT/KR2018/006081 WO2019013447A1 (en) 2017-07-10 2018-05-29 REMOTE CONTROL DEVICE AND METHOD FOR RECEIVING VOICE FROM AN ASSOCIATED USER

Publications (2)

Publication Number Publication Date
JP2020527734A JP2020527734A (ja) 2020-09-10
JP7187468B2 true JP7187468B2 (ja) 2022-12-12

Family

ID=62684632

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019546280A Active JP7187468B2 (ja) 2017-07-10 2018-05-29 遠隔制御装置及び遠隔制御装置のユーザ音声受信方法

Country Status (6)

Country Link
US (1) US11449307B2 (ja)
EP (1) EP3429215B1 (ja)
JP (1) JP7187468B2 (ja)
KR (1) KR102392087B1 (ja)
CN (1) CN109243463B (ja)
WO (1) WO2019013447A1 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190058897A (ko) * 2017-11-22 2019-05-30 삼성전자주식회사 원격 제어 장치 및 이의 제어 방법
KR20200091278A (ko) * 2019-01-22 2020-07-30 삼성전자주식회사 음성 입력과 관련된 비주얼 정보를 표시하는 방법 및 이를 지원하는 전자 장치
KR20200109140A (ko) * 2019-03-12 2020-09-22 삼성전자주식회사 전자 장치 및 전자 장치의 제어 방법
US11881220B2 (en) * 2019-05-15 2024-01-23 Lg Electronics Inc. Display device for providing speech recognition service and method of operation thereof
KR20210056094A (ko) * 2019-11-08 2021-05-18 엘지디스플레이 주식회사 디스플레이 장치
CN110931005B (zh) * 2019-11-20 2021-03-23 珠海格力电器股份有限公司 电器设备的语音自定义方法、装置、存储介质及电器设备
CN111641856A (zh) * 2020-05-22 2020-09-08 海信视像科技股份有限公司 显示设备中引导用户操作的提示信息显示方法及显示设备
CN112419693B (zh) * 2020-11-03 2023-05-12 深圳Tcl新技术有限公司 设备控制方法、装置、显示设备及计算机可读存储介质
CN113470643B (zh) * 2021-06-17 2024-03-29 歌尔股份有限公司 语音遥控器的控制方法、装置、设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003233392A (ja) 2002-02-08 2003-08-22 Altia Co Ltd 車両用音声入力装置
JP2010068478A (ja) 2008-09-12 2010-03-25 Panasonic Corp リモートコントロール装置
JP2010217754A (ja) 2009-03-18 2010-09-30 Toshiba Corp 音声入力装置、音声認識システム及び音声認識方法
JP2013025605A (ja) 2011-07-22 2013-02-04 Sony Corp 情報処理装置、情報処理方法及びプログラム
US20150100322A1 (en) 2013-10-07 2015-04-09 Samsung Electronics Co., Ltd. Remote control apparatus for inputting user voice and method thereof
JP2015201739A (ja) 2014-04-08 2015-11-12 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 複数機器の音声操作システム、音声操作方法及び、プログラム
WO2017057010A1 (ja) 2015-10-02 2017-04-06 シャープ株式会社 端末装置および制御サーバ

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100202425B1 (ko) 1992-08-27 1999-06-15 정호선 가전제품의 리모콘 명령어를 인식하기 위한 음성 인식 시스템
US5631669A (en) * 1994-02-04 1997-05-20 Stobbs; Gregory A. Pointing device with integral microphone
JP3893763B2 (ja) 1998-08-17 2007-03-14 富士ゼロックス株式会社 音声検出装置
JP2000338995A (ja) * 1999-05-31 2000-12-08 Toshiba Corp 音声認識装置及び音声認識用プログラムを記録したコンピュータ読み取り可能な記録媒体
JP2003029778A (ja) * 2001-07-16 2003-01-31 Fujitsu Ten Ltd ナビゲーションシステムにおける音声対話インターフェース処理方法
US20050202377A1 (en) * 2004-03-10 2005-09-15 Wonkoo Kim Remote controlled language learning system
GB2417107A (en) * 2004-06-08 2006-02-15 Pranil Ram Computer apparatus with added functionality
US20070132733A1 (en) * 2004-06-08 2007-06-14 Pranil Ram Computer Apparatus with added functionality
JP4650888B2 (ja) 2005-09-09 2011-03-16 株式会社豊田中央研究所 発話検出装置、方法及びプログラム
JP4992218B2 (ja) 2005-09-29 2012-08-08 ソニー株式会社 情報処理装置および方法、並びにプログラム
JP4131978B2 (ja) * 2006-02-24 2008-08-13 本田技研工業株式会社 音声認識機器制御装置
JP2008170817A (ja) * 2007-01-12 2008-07-24 Toyota Motor Corp 対話制御装置、対話制御方法及び対話制御プログラム
KR101581883B1 (ko) * 2009-04-30 2016-01-11 삼성전자주식회사 모션 정보를 이용하는 음성 검출 장치 및 방법
JP2011094874A (ja) * 2009-10-29 2011-05-12 Noritz Corp 操作装置及びこの操作装置を備えた給湯システム
US8886541B2 (en) * 2010-02-04 2014-11-11 Sony Corporation Remote controller with position actuatated voice transmission
JP5771002B2 (ja) * 2010-12-22 2015-08-26 株式会社東芝 音声認識装置、音声認識方法および音声認識装置を搭載したテレビ受像機
JP5039214B2 (ja) 2011-02-17 2012-10-03 株式会社東芝 音声認識操作装置及び音声認識操作方法
WO2012169679A1 (ko) * 2011-06-10 2012-12-13 엘지전자 주식회사 디스플레이 장치, 디스플레이 장치의 제어 방법 및 디스플레이 장치의 음성인식 시스템
EP2610862B1 (en) * 2011-12-30 2015-07-08 Samsung Electronics Co., Ltd. Electronic apparatus and method of controlling electronic apparatus
KR101420329B1 (ko) * 2012-06-11 2014-07-16 삼성디스플레이 주식회사 표시 장치
CN202871079U (zh) * 2012-09-24 2013-04-10 天津市泰益通科技有限公司 新式遥控器
CN102945672B (zh) 2012-09-29 2013-10-16 深圳市国华识别科技开发有限公司 一种多媒体设备语音控制系统及方法
KR101978743B1 (ko) * 2012-10-19 2019-08-29 삼성전자주식회사 디스플레이 장치, 상기 디스플레이 장치를 제어하는 원격 제어 장치, 디스플레이 장치 제어 방법, 서버 제어 방법 및 원격 제어 장치 제어 방법
KR20140093303A (ko) * 2013-01-07 2014-07-28 삼성전자주식회사 디스플레이 장치 및 그의 제어 방법
KR20140089863A (ko) * 2013-01-07 2014-07-16 삼성전자주식회사 디스플레이 장치, 및 이의 제어 방법, 그리고 음성 인식 시스템의 디스플레이 장치 제어 방법
US9292254B2 (en) * 2013-05-15 2016-03-22 Maluuba Inc. Interactive user interface for an intelligent assistant
KR101456974B1 (ko) * 2013-05-21 2014-10-31 삼성전자 주식회사 사용자 단말기, 음성인식 서버 및 음성인식 가이드 방법
KR102345611B1 (ko) 2013-11-18 2021-12-31 삼성전자주식회사 디스플레이 장치 및 제어 방법
KR20150092996A (ko) * 2014-02-06 2015-08-17 삼성전자주식회사 디스플레이 장치 및 이를 이용한 전자 장치의 제어 방법
KR102147329B1 (ko) * 2014-06-17 2020-08-24 엘지전자 주식회사 영상 표시 기기 및 그의 동작 방법
KR102147346B1 (ko) 2014-06-23 2020-08-24 엘지전자 주식회사 디스플레이 장치 및 그의 동작 방법
TWI562640B (en) 2014-08-28 2016-12-11 Hon Hai Prec Ind Co Ltd Method and system for processing video conference
KR102277749B1 (ko) * 2014-11-13 2021-07-16 엘지전자 주식회사 디스플레이 장치 및 그 제어 방법
KR20170010494A (ko) * 2015-07-20 2017-02-01 엘지전자 주식회사 이동 단말기 및 그 제어 방법
KR102328703B1 (ko) * 2015-07-24 2021-11-19 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 화면 제어방법
KR20170032114A (ko) * 2015-09-14 2017-03-22 삼성전자주식회사 음성 인식 장치 및 그의 제어방법
KR102349861B1 (ko) * 2015-09-16 2022-01-12 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 디스플레이 제어방법
US10015400B2 (en) * 2015-12-17 2018-07-03 Lg Electronics Inc. Mobile terminal for capturing an image and associated image capturing method
KR20170073257A (ko) * 2015-12-18 2017-06-28 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 제어방법
CN106043150B (zh) * 2016-08-04 2018-02-09 歌尔科技有限公司 一种带语音识别功能的车载投影系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003233392A (ja) 2002-02-08 2003-08-22 Altia Co Ltd 車両用音声入力装置
JP2010068478A (ja) 2008-09-12 2010-03-25 Panasonic Corp リモートコントロール装置
JP2010217754A (ja) 2009-03-18 2010-09-30 Toshiba Corp 音声入力装置、音声認識システム及び音声認識方法
JP2013025605A (ja) 2011-07-22 2013-02-04 Sony Corp 情報処理装置、情報処理方法及びプログラム
US20150100322A1 (en) 2013-10-07 2015-04-09 Samsung Electronics Co., Ltd. Remote control apparatus for inputting user voice and method thereof
JP2015201739A (ja) 2014-04-08 2015-11-12 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 複数機器の音声操作システム、音声操作方法及び、プログラム
WO2017057010A1 (ja) 2015-10-02 2017-04-06 シャープ株式会社 端末装置および制御サーバ

Also Published As

Publication number Publication date
US20190012137A1 (en) 2019-01-10
JP2020527734A (ja) 2020-09-10
KR20190006323A (ko) 2019-01-18
WO2019013447A1 (en) 2019-01-17
US11449307B2 (en) 2022-09-20
CN109243463A (zh) 2019-01-18
KR102392087B1 (ko) 2022-04-29
CN109243463B (zh) 2023-12-05
EP3429215A1 (en) 2019-01-16
EP3429215B1 (en) 2019-09-04

Similar Documents

Publication Publication Date Title
JP7187468B2 (ja) 遠隔制御装置及び遠隔制御装置のユーザ音声受信方法
US11330320B2 (en) Display device and method for controlling display device
US10939065B2 (en) Display apparatus and method for controlling display of display apparatus
US10678563B2 (en) Display apparatus and method for controlling display apparatus
CN107950030B (zh) 显示装置以及控制显示装置的方法
US20170180918A1 (en) Display apparatus and method for controlling display apparatus
EP3719631A1 (en) Display device and method for controlling same
KR102540001B1 (ko) 디스플레이 장치 및 디스플레이 장치의 화면 표시방법
EP3334172B1 (en) Display apparatus and method for acquiring channel information of a display apparatus
CN108141631B (zh) 显示装置和用于控制显示装置的方法
CN108513152B (zh) 图像显示设备及其操作方法
CN108353205B (zh) 电子设备和用于控制电子设备的方法
CN107801074B (zh) 显示系统及其控制方法
KR102428271B1 (ko) 전자 장치 및 전자 장치의 사운드 제어방법
KR20150066156A (ko) 디스플레이 장치 및 이의 제어 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201127

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211206

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211213

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220311

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220725

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221020

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221031

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221130

R150 Certificate of patent or registration of utility model

Ref document number: 7187468

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150