KR101324232B1 - Electronic apparatus and Method for controlling electronic apparatus thereof - Google Patents

Electronic apparatus and Method for controlling electronic apparatus thereof Download PDF

Info

Publication number
KR101324232B1
KR101324232B1 KR1020120058340A KR20120058340A KR101324232B1 KR 101324232 B1 KR101324232 B1 KR 101324232B1 KR 1020120058340 A KR1020120058340 A KR 1020120058340A KR 20120058340 A KR20120058340 A KR 20120058340A KR 101324232 B1 KR101324232 B1 KR 101324232B1
Authority
KR
South Korea
Prior art keywords
voice
user
task mode
electronic device
input
Prior art date
Application number
KR1020120058340A
Other languages
Korean (ko)
Other versions
KR20130079096A (en
Inventor
한상진
권용환
김정근
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to EP12187522.3A priority Critical patent/EP2610862B1/en
Priority to EP14200231.0A priority patent/EP2860726B1/en
Priority to US13/648,314 priority patent/US8650036B2/en
Priority to CN2012104254239A priority patent/CN103187063A/en
Priority to PCT/KR2012/009896 priority patent/WO2013100366A1/en
Priority to AU2012261686A priority patent/AU2012261686B2/en
Priority to JP2012267779A priority patent/JP5535298B2/en
Publication of KR20130079096A publication Critical patent/KR20130079096A/en
Application granted granted Critical
Publication of KR101324232B1 publication Critical patent/KR101324232B1/en
Priority to US14/152,011 priority patent/US20140129234A1/en
Priority to US14/247,328 priority patent/US9148688B2/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom

Abstract

전자 장치 및 그의 제어 방법이 제공된다. 본 전자 장치의 제어 방법은 입력된 음성 개시 명령이 제1 음성 개시 명령이면, 전자 장치의 음성 입력부에 입력된 사용자 음성에 따라 제어되는 제1 음성 태스크 모드로 전환하고, 입력된 음성 개시 명령이 제2 음성 개시 명령이면, 전자 장치와 연동하는 외부기기에 입력된 사용자 음성에 따라 제어되는 제2 음성 태스크 모드로 전환한다. 이에 의해, 사용자는 전자 장치에 구비된 마이크 또는 외부기기에 구비된 마이크를 이용하여 더욱 효율적으로 전자 장치를 제어할 수 있게 된다.An electronic apparatus and a control method thereof are provided. If the inputted voice start command is the first voice start command, the control method of the electronic device switches to the first voice task mode controlled according to a user voice input to the voice input unit of the electronic device, and the input voice start command is set to the first voice start command. If the command is a voice start command, the user enters a second voice task mode controlled according to a user voice input to an external device interworking with the electronic device. Accordingly, the user can more efficiently control the electronic device by using the microphone provided in the electronic device or the microphone provided in the external device.

Description

전자 장치 및 그의 제어 방법{Electronic apparatus and Method for controlling electronic apparatus thereof}[0001] DESCRIPTION [0002] ELECTRONIC APPARATUS AND METHOD FOR CONTROLLING THE SAME [0002]

본 발명은 전자 장치 및 그의 제어 방법에 관한 것으로, 더욱 상세하게는 음성 입력부를 통해 입력된 사용자 음성에 따라 제어되는 전자 장치 및 그의 제어 방법에 관한 것이다.The present invention relates to an electronic device and a control method thereof, and more particularly, to an electronic device and a control method thereof controlled according to a user voice input through a voice input unit.

전자 기술의 발달에 힘입어 다양한 종류의 전자 장치가 개발되어 보급되고 있다. 특히, 최근에는 TV를 비롯한 다양한 유형의 전자 장치들이 일반 가정에서 사용되고 있다. 이들 전자 장치들은 사용자의 요구에 따라 점차 다양한 기능을 구비하게 되었다. 특히, TV의 경우, 최근에는 인터넷과 연결되어 인터넷 서비스까지 지원하고 있다. 또한, 사용자는 TV를 통해 많은 수의 디지털 방송 채널까지 시청할 수 있게 되었다.Various types of electronic devices have been developed and spread by the development of electronic technology. Especially, in recent years, various types of electronic devices including TVs are used in general households. These electronic devices have gradually become various functions according to the demand of the user. Especially, in the case of TV, recently, it is connected to the Internet and supports Internet service. In addition, the user can view a large number of digital broadcasting channels through the TV.

이에 따라, 전자 장치의 다양한 기능들을 효율적으로 사용하기 위한 다양한 입력 방법이 요구되고 있다. 예를 들어, 리모컨을 이용한 입력 방법, 마우스를 이용한 입력 방법 및 터치 패드를 이용한 입력 방법 등이 전자 장치에 적용되고 있다. Accordingly, various input methods for efficiently using various functions of the electronic apparatus are required. For example, an input method using a remote controller, an input method using a mouse, and an input method using a touch pad have been applied to electronic devices.

하지만, 이러한 단순한 입력 방법만으로는, 전자 장치의 다양한 기능을 효과적으로 사용하기에는 어려움이 있었다. 가령, 전자 장치의 모든 기능들을 리모컨만으로 제어하도록 구현하게 되면, 리모컨의 버튼 수를 늘리는 것이 불가피하였다. 이 경우, 일반 사용자가 리모컨의 사용법을 익히는 것은 결코 용이하지 않은 일이었다. 또한, 다양한 메뉴들을 화면상에 표시하여 사용자가 해당 메뉴를 찾아서 선택하도록 하는 방법의 경우, 사용자가 복잡한 메뉴 트리를 일일이 확인하여, 자신이 원하는 메뉴를 선택하여야 한다는 번거로움이 있었다. However, with such a simple input method, it has been difficult to effectively use various functions of the electronic device. For example, if all the functions of the electronic device are controlled to be controlled by only the remote control, it is inevitable to increase the number of buttons of the remote control. In this case, it was never easy for ordinary users to learn how to use the remote control. In addition, in the method of displaying various menus on the screen and allowing the user to find and select the corresponding menu, the user has to check the complicated menu tree and select the menu desired by him.

따라서, 근래에는 전자 장치를 조금 더 편리하고 직관적으로 제어하기 위하여 음성 인식을 이용한 기술이 개발되고 있다. 음성 인식을 이용하여 전자 장치를 제어하는 방법은 전자 장치에 구비된 마이크를 이용하여 전자 장치를 제어하는 방법과 전자 장치와 연동하는 외부기기(예를 들어, 리모컨)에 구비된 마이크를 이용하여 전자 장치를 제어하는 방법이 존재한다.Therefore, in recent years, technology using voice recognition has been developed to control the electronic device more conveniently and intuitively. A method of controlling an electronic device using voice recognition includes a method of controlling an electronic device using a microphone provided in the electronic device and an electronic device using a microphone provided in an external device (for example, a remote controller) that interfaces with the electronic device. There is a way to control the device.

그러나, 전자 장치가 두 개의 음성 입력 방법을 동시에 사용하는 경우, 사용자는 어느 마이크를 이용하여 전자 장치를 제어해야 하는지 모르는 경우가 발생하는 문제점이 존재한다. 또한, 두 개의 음성 입력 방법을 이용하여 제어되는 전자 장치의 기능은 서로 상이하므로, 사용자에게 서로 다른 UI를 제공해야 할 필요성이 제공된다.However, when the electronic device uses two voice input methods at the same time, there is a problem that a user does not know which microphone to control the electronic device. In addition, since the functions of the electronic device controlled using the two voice input methods are different from each other, there is a need to provide a different UI to the user.

또한, 음성 인식 기술의 한계로 인해 100% 완벽하게 사용자의 음성을 인식할 수 없는 상황이 존재한다. 또한, 주변 환경 혹은 조작 미숙을 이유로 음성 인식의 오류가 발생하는 경우 역시 존재하게 된다. 따라서, 이러한 음성 인식 오류가 발생한 경우, 사용자에게 음성 인식 오류를 안내하기 위한 방안의 모색이 요청된다.In addition, due to the limitation of speech recognition technology, there is a situation in which the user's voice cannot be completely recognized. In addition, there is also a case where an error of speech recognition occurs due to the surrounding environment or immature operation. Therefore, when such a voice recognition error occurs, a search for a method for guiding the voice recognition error to the user is requested.

본 발명은 상술한 문제점을 해결하기 위해 안출된 것으로, 본 발명의 목적은 음성 개시 명령에 따라 서로 상이한 음성 태스크 모드를 제공하고, 각각의 음성 태스크 모드에 대응되는 음성 가이드 정보를 디스플레이하는 전자 장치 및 그의 제어 방법을 제공함에 있다.SUMMARY OF THE INVENTION The present invention has been made to solve the above-described problems, and an object of the present invention is to provide a voice task mode different from each other according to a voice initiation command, and to display voice guide information corresponding to each voice task mode; It is to provide a control method thereof.

본 발명의 또 다른 목적은, 음성 인식 오류가 발생된 경우, 음성 인식 오류 안내를 안내하기 위한 복수의 피드백 메시지 중 하나를 선택하여 디스플레이하는 전자 장치 및 이의 제어 방법을 제공함에 있다.Another object of the present invention is to provide an electronic device and a control method thereof that select and display one of a plurality of feedback messages for guiding a voice recognition error when a voice recognition error occurs.

상기 목적을 달성하기 위한 본 발명의 일 실시 예에 따른, 음성 인식이 가능한 전자 장치의 제어 방법은, 음성 개시 명령을 입력받는 단계; 및 상기 음성 개시 명령이 제1 음성 개시 명령이면, 상기 전자 장치의 음성 입력부에 입력된 사용자 음성에 따라 제어되는 제1 음성 태스크 모드로 전환하고, 상기 음성 개시 명령이 제2 음성 개시 명령이면, 상기 전자 장치와 연동하는 외부기기에 입력된 사용자 음성에 따라 제어되는 제2 음성 태스크 모드로 전환하는 단계를 포함한다.According to an aspect of the present disclosure, there is provided a control method of an electronic device capable of speech recognition, comprising: receiving a voice start command; And when the voice start command is a first voice start command, switch to a first voice task mode controlled according to a user voice input to a voice input unit of the electronic device, and when the voice start command is a second voice start command, And switching to a second voice task mode controlled according to a user voice input to an external device interworking with the electronic device.

그리고, 상기 전자 장치의 모드가 제1 음성 태스크 모드로 전환된 경우, 상기 제1 음성 태스크 모드에 대응되는 제1 음성 가이드 정보를 디스플레이하고, 상기 전자 장치의 모드가 제2 음성 태스크 모드로 전환된 경우, 상기 제2 음성 태스크 모드에 대응되는 제2 음성 가이드 정보를 디스플레이하는 단계;를 더 포함할 수 있다.When the mode of the electronic device is switched to the first voice task mode, the first voice guide information corresponding to the first voice task mode is displayed, and the mode of the electronic device is switched to the second voice task mode. In this case, the method may further include displaying second voice guide information corresponding to the second voice task mode.

또한, 상기 제1 음성 가이드 정보는, 상기 제1 음성 태스크 모드를 수행하기 위해 사용자 음성을 안내하는 복수 개의 음성 아이템을 포함하고, 상기 제2 음성 가이드 정보는, 상기 제2 음성 태스크 모드를 수행하기 위해 사용자 음성을 안내하는 복수 개의 음성 아이템을 포함하며, 상기 제2 음성 가이드 정보에 포함된 복수 개의 음성 아이템 중 일부 음성 아이템은 상기 제1 음성 가이드 정보에 포함된 복수 개의 음성 아이템과 상이할 수 있다.The first voice guide information may include a plurality of voice items for guiding a user voice to perform the first voice task mode, and the second voice guide information may be used to perform the second voice task mode. And a plurality of voice items for guiding a user voice, wherein some of the voice items included in the second voice guide information may be different from the plurality of voice items included in the first voice guide information. .

그리고, 상기 제1 음성 가이드 정보는 채널 업/다운 명령을 수행하기 위한 음성 아이템이 포함되고, 상기 제2 음성 가이드 정보는 채널 업/다운 명령을 수행하기 위한 음성 아이템이 포함되지 않고, 채널 리스트 제공을 위한 음성 아이템이 포함될 수 있다.The first voice guide information includes a voice item for performing a channel up / down command, and the second voice guide information does not include a voice item for performing a channel up / down command and provides a channel list. Voice items for may be included.

또한, 상기 제1 음성 가이드 정보는 상기 제1 음성 태스크 모드를 나타내는 아이콘 영역을 포함하고, 상기 제2 음성 가이드 정보는 상기 제2 음성 태스크 모드를 나타내는 아이콘 영역을 포함할 수 있다.The first voice guide information may include an icon area indicating the first voice task mode, and the second voice guide information may include an icon area indicating the second voice task mode.

그리고, 상기 제2 음성 태스크 모드는, 상기 외부기기의 기 설정된 제2 버튼이 눌러지고, 상기 외부기기에 입력된 사용자 음성에 의해 제어될 수 있다.The second voice task mode may be controlled by a user's voice input to the external device by pressing a preset second button of the external device.

또한, 상기 제1 음성 개시 명령은, 기 설정된 단어가 포함된 사용자의 음성 명령이며, 상기 제2 음성 개시 명령은, 상기 외부기기에 포함된 기 설정된 버튼이 눌러지는 사용자 명령일 수 있다.The first voice initiation command may be a voice command of a user including a preset word, and the second voice start command may be a user command in which a preset button included in the external device is pressed.

그리고, 상기 외부기기는 리모컨일 수 있다.The external device may be a remote controller.

한편, 상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른, 전자 장치는, 사용자 음성을 입력받는 음성 입력부; 및 음성 태스크 모드로 진입하기 위한 음성 개시 명령이 입력되면, 상기 음성 개시 명령의 종류를 판단하고, 상기 음성 개시 명령이 제1 음성 개시 명령이면, 상기 전자 장치의 음성 입력부에 입력된 사용자 음성에 따라 제어되는 제1 음성 태스크 모드로 전환하며, 상기 음성 개시 명령이 제2 음성 개시 명령이면, 상기 전자 장치와 연동하는 외부기기에 입력된 사용자 음성에 따라 제어되는 제2 음성 태스크 모드로 전환하는 제어부;를 포함한다.On the other hand, according to an embodiment of the present invention for achieving the above object, an electronic device, a voice input unit for receiving a user voice; And when a voice start command for entering a voice task mode is input, determine a type of the voice start command, and when the voice start command is a first voice start command, according to a user voice input to a voice input unit of the electronic device. A controller configured to switch to a controlled first voice task mode and to switch to a second voice task mode controlled according to a user voice input to an external device interworking with the electronic device if the voice start command is a second voice start command; It includes.

그리고, 디스플레이부;를 더 포함하며, 상기 제어부는, 상기 전자 장치의 모드가 제1 음성 태스크 모드로 전환된 경우, 상기 제1 음성 태스크 모드에 대응되는 제1 음성 가이드 정보를 디스플레이하고, 상기 전자 장치의 모드가 제2 음성 태스크 모드로 전환된 경우, 상기 제2 음성 태스크 모드에 대응되는 제2 음성 가이드 정보를 디스플레이하도록 상기 디스플레이부를 제어할 수 있다.The display apparatus may further include a display unit. When the mode of the electronic device is switched to the first voice task mode, the controller may display first voice guide information corresponding to the first voice task mode, When the mode of the device is switched to the second voice task mode, the display unit may be controlled to display second voice guide information corresponding to the second voice task mode.

또한, 상기 제1 음성 가이드 정보는, 상기 제1 음성 태스크 모드를 수행하기 위해 사용자 음성을 안내하는 복수 개의 음성 아이템을 포함하고, 상기 제2 음성 가이드 정보는, 상기 제2 음성 태스크 모드를 수행하기 위해 사용자 음성을 안내하는 복수 개의 음성 아이템을 포함하며, 상기 제2 음성 가이드 정보에 포함된 복수 개의 음성 아이템 중 일부 음성 아이템은 상기 제1 음성 가이드 정보에 포함된 복수 개의 음성 아이템과 상이할 수 있다.The first voice guide information may include a plurality of voice items for guiding a user voice to perform the first voice task mode, and the second voice guide information may be used to perform the second voice task mode. And a plurality of voice items for guiding a user voice, wherein some of the voice items included in the second voice guide information may be different from the plurality of voice items included in the first voice guide information. .

그리고, 상기 제1 음성 가이드 정보는 채널 업/다운 명령을 수행하기 위한 음성 아이템이 포함되고, 상기 제2 음성 가이드 정보는 채널 업/다운 명령을 수행하기 위한 음성 아이템이 포함되지 않고, 채널 리스트 제공을 위한 음성 아이템이 포함될 수 있다.The first voice guide information includes a voice item for performing a channel up / down command, and the second voice guide information does not include a voice item for performing a channel up / down command and provides a channel list. Voice items for may be included.

또한, 상기 제1 음성 가이드 정보는 상기 제1 음성 태스크 모드를 나타내는 아이콘 영역을 포함하고, 상기 제2 음성 가이드 정보는 상기 제2 음성 태스크 모드를 나타내는 아이콘 영역을 포함할 수 있다.The first voice guide information may include an icon area indicating the first voice task mode, and the second voice guide information may include an icon area indicating the second voice task mode.

그리고, 상기 제2 음성 태스크 모드는, 상기 외부기기의 기 설정된 제2 버튼이 눌러지고, 상기 외부기기에 입력된 사용자 음성에 의해 제어될 수 있다.The second voice task mode may be controlled by a user's voice input to the external device by pressing a preset second button of the external device.

또한, 상기 제1 음성 개시 명령은, 기 설정된 단어가 포함된 사용자의 음성 명령이며, 상기 제2 음성 개시 명령은, 상기 외부기기에 포함된 기 설정된 버튼이 눌러지는 사용자 명령일 수 있다.The first voice initiation command may be a voice command of a user including a preset word, and the second voice start command may be a user command in which a preset button included in the external device is pressed.

그리고, 상기 외부기기는 리모컨일 수 있다.The external device may be a remote controller.

한편, 상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른, 전자 장치의 제어 방법은, 음성 입력부를 통해 음성 개시 명령을 입력받는 단계; 상기 음성 개시 명령이 입력되면, 전자 장치의 모드를 음성 태스크 모드로 전환하는 단계;및 상기 음성 태스크 모드에서 음성 인식 오류가 발생된 경우, 음성 인식 오류 안내를 안내하기 위한 복수의 피드백 메시지 중 하나를 디스플레이하는 단계;를 포함한다.On the other hand, according to an embodiment of the present invention for achieving the above object, a control method of an electronic device, comprising: receiving a voice start command through a voice input unit; Switching a mode of the electronic device to a voice task mode when the voice start command is input; and when a voice recognition error occurs in the voice task mode, one of a plurality of feedback messages for guiding a voice recognition error guide. Including; displaying.

그리고, 상기 음성 태스크 모드에서 음성 인식 오류가 반복적으로 발생된 경우, 상기 복수의 피드백 메시지 중 하나를 랜덤하게 선택하여 디스플레이하는 단계;를 포함할 수 있다.And when a voice recognition error occurs repeatedly in the voice task mode, randomly selecting and displaying one of the plurality of feedback messages.

또한, 상기 음성 태스크 모드는, 상기 전자 장치의 음성 입력부에 입력된 사용자 음성에 따라 제어되는 제1 음성 태스크 모드 및 상기 전자 장치와 연동하는 외부기기에 입력된 사용자 음성에 따라 제어되는 제2 음성 태스크 모드를 포함할 수 있다.The voice task mode may include a first voice task mode controlled according to a user voice input to a voice input unit of the electronic device and a second voice task controlled according to a user voice input to an external device interoperating with the electronic device. It may include a mode.

그리고, 상기 복수의 피드백 메시지는, 상기 음성 태스크 모드의 종류에 따라 상이할 수 있다.The plurality of feedback messages may be different depending on the type of the voice task mode.

또한, 상기 복수의 피드백 메시지는, 상기 음성 인식 오류의 종류에 따라 상이할 수 있다.The plurality of feedback messages may be different according to the type of the speech recognition error.

그리고, 상기 음성 인식 오류는, 상기 음성 입력부를 통해 입력된 사용자 음성을 명확히 인지하지 못하는 오류, 사용자 음성을 입력한 후에 기설정된 시간 동안 외부기기의 인식 버튼을 기설정된 시간동안 누르고 있는 오류 및 상기 외부기기의 인식 버튼을 누른 후에 기설정된 시간 동안 사용자 음성이 입력되지 않은 오류 중 적어도 하나를 포함할 수 있다.The voice recognition error may include an error of not clearly recognizing a user voice input through the voice input unit, an error of pressing a recognition button of an external device for a preset time after inputting the user voice, and the external After pressing the recognition button of the device may include at least one of the error that the user voice is not input for a predetermined time.

또한, 상기 디스플레이하는 단계는, 상기 음성 인식 오류가 처음 발생된 경우, 디폴트(default)된 피드백 메시지를 디스플레이할 수 있다.The displaying may include displaying a default feedback message when the voice recognition error occurs for the first time.

한편, 상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른, 전자 장치는, 사용자 음성을 입력받는 음성 입력부; 디스플레이부; 및 상기 음성 입력부를 통해 음성 개시 명령이 입력되면, 전자 장치의 모드를 음성 태스크 모드로 전환하고, 상기 음성 태스크 모드에서 음성 인식 오류가 발생된 경우, 음성 인식 오류 안내를 안내하기 위한 복수의 피드백 메시지 중 하나를 상기 디스플레이부에 디스플레이하는 제어부;를 포함한다.On the other hand, according to an embodiment of the present invention for achieving the above object, an electronic device, a voice input unit for receiving a user voice; A display unit; And a plurality of feedback messages for guiding a voice recognition error guide when a voice start command is input through the voice input unit, switching a mode of the electronic device to a voice task mode, and when a voice recognition error occurs in the voice task mode. And a controller for displaying one of the display units.

그리고, 상기 제어부는, 상기 음성 태스크 모드에서 음성 인식 오류가 반복적으로 발생된 경우, 상기 복수의 피드백 메시지 중 하나를 랜덤하게 선택하여 디스플레이할 수 있다.The controller may randomly select and display one of the plurality of feedback messages when a voice recognition error occurs repeatedly in the voice task mode.

또한, 상기 음성 태스크 모드는, 상기 전자 장치의 음성 입력부에 입력된 사용자 음성에 따라 제어되는 제1 음성 태스크 모드 및 상기 전자 장치와 연동하는 외부기기에 입력된 사용자 음성에 따라 제어되는 제2 음성 태스크 모드를 포함할 수 있다.The voice task mode may include a first voice task mode controlled according to a user voice input to a voice input unit of the electronic device and a second voice task controlled according to a user voice input to an external device interoperating with the electronic device. It may include a mode.

그리고, 상기 복수의 피드백 메시지는, 상기 음성 태스크 모드의 종류에 따라 상이할 수 있다.The plurality of feedback messages may be different depending on the type of the voice task mode.

또한, 상기 복수의 피드백 메시지는, 상기 음성 인식 오류의 종류에 따라 상이할 수 있다.The plurality of feedback messages may be different according to the type of the speech recognition error.

그리고, 상기 음성 인식 오류는, 상기 음성 입력부를 통해 입력된 사용자 음성을 명확히 인지하지 못하는 오류, 사용자 음성을 입력한 후에 기설정된 시간 동안 외부기기의 인식 버튼을 기설정된 시간동안 누르고 있는 오류 및 상기 외부기기의 인식 버튼을 누른 후에 기설정된 시간 동안 사용자 음성이 입력되지 않은 오류 중 적어도 하나를 포함할 수 있다.The voice recognition error may include an error of not clearly recognizing a user voice input through the voice input unit, an error of pressing a recognition button of an external device for a preset time after inputting the user voice, and the external After pressing the recognition button of the device may include at least one of the error that the user voice is not input for a predetermined time.

또한, 상기 제어부는, 상기 음성 인식 오류가 처음 발생된 경우, 디폴트(default)된 피드백 메시지를 상기 디스플레이부에 디스플레이할 수 있다.In addition, when the voice recognition error occurs for the first time, the controller may display a default feedback message on the display unit.

상술한 바와 같은 본 발명의 다양한 실시 예에 의해, 음성 입력 방법에 따라 서로 다른 음성 태스크 모드를 제공받음으로써, 사용자는 전자 장치에 구비된 마이크 또는 외부기기에 구비된 마이크를 이용하여 더욱 효율적으로 전자 장치를 제어할 수 있게 된다.According to various embodiments of the present disclosure as described above, by being provided with a different voice task mode according to a voice input method, the user can more efficiently use the microphone provided in the electronic device or the microphone provided in the external device. The device can be controlled.

또한, 복수의 피드백 메시지가 음성 인식 오류별, 음성 태스크 모드별로 상이하게 제공됨으로써, 사용자는 음성인식의 오류를 정확하게 확인할 수 있게 된다. 또한, 전자 장치의 이용에 있어서 엔터테인먼트 요소가 증가할 수 있게 된다.In addition, since a plurality of feedback messages are differently provided for each voice recognition error and voice task mode, the user can accurately identify the error of the voice recognition. In addition, the entertainment factor may increase in the use of the electronic device.

도 1 내지 3은 본 발명의 다양한 실시 예에 따른, 전자 장치의 구성을 설명하기 위한 블럭도,
도 4는 본 발명의 일 실시 예에 따른, 전자 장치에 구비된 음성 입력부를 통해 사용자 음성이 입력되는 제1 음성 태스크 모드에서 디스플레이되는 제1 음성 가이드 정보를 도시한 도면,
도 5는 본 발명의 일 실시 예에 따른, 전자 장치와 연동하는 외부기기에 구비된 음성 입력부를 통해 사용자 음성이 입력되는 제2 음성 태스크 모드에서 디스플레이되는 제2 음성 가이드 정보를 도시한 도면,
도 6은 본 발명의 일 실시 예에 따른, 음성 입력 방법에 따라 상이한 음성 태스크 모드를 제공하는 방법을 설명하기 위한 흐름도,
도 7은 본 발명의 일 실시예에 따른, 음성 인식 오류가 발생한 경우, 피드백 메시지를 도시한 도면.
도 8 내지 도 11은 본 발명의 다양한 실시예에 따른, 음성 태스크 모드 및 음성 오류 종류에 따라 디스플레이되는 피드백 메시지를 도시한 도면, 그리고,
도 12는 본 발명의 일 실시예에 따른, 전자 장치의 제어 방법을 설명하기 위한 흐름도이다.1 to 3 are block diagrams illustrating a configuration of an electronic device according to various embodiments of the present disclosure;
4 is a diagram illustrating first voice guide information displayed in a first voice task mode in which a user voice is input through a voice input unit provided in an electronic device according to an embodiment of the present disclosure;
FIG. 5 is a diagram illustrating second voice guide information displayed in a second voice task mode in which a user voice is input through a voice input unit provided in an external device interworking with an electronic device according to an embodiment of the present disclosure;
6 is a flowchart illustrating a method of providing a different voice task mode according to a voice input method according to an embodiment of the present invention;
7 illustrates a feedback message when a voice recognition error occurs according to an embodiment of the present invention.
8 to 11 illustrate a feedback message displayed according to a voice task mode and a voice error type according to various embodiments of the present disclosure.
12 is a flowchart illustrating a control method of an electronic device according to an embodiment of the present disclosure.

도 1은 본 발명의 실시 예에 따른 전자 장치를 나타내는 개략적인 블럭도이다. 1 is a schematic block diagram illustrating an electronic device according to an embodiment of the present disclosure.

도 1을 참조하면, 전자 장치(100)는 음성 입력부(110), 저장부(130), 제어부(140) 및 디스플레이부(193)를 포함한다. 이때, 전자 장치(100)는 외부의 네트워크와 연결될 수 있는 스마트 TV, 셋탑박스, PC로, 또는 디지털 TV, 휴대폰 등으로 구현될 수 있으나, 이에 한정되는 것은 아니다. Referring to FIG. 1, the electronic device 100 includes a voice input unit 110, a storage unit 130, a controller 140, and a display unit 193. In this case, the electronic device 100 may be implemented as a smart TV, a set-top box, a PC, or a digital TV, a mobile phone, etc., which may be connected to an external network, but is not limited thereto.

음성 입력부(110)는 사용자가 발화(utterance)한 음성을 입력받는다. 음성 입력부(110)는 입력된 음성 신호를 전기 신호로 변환하여 제어부(140)로 출력한다. 예를 들어, 음성 입력부(110)는 마이크로폰으로 구현될 수 있다. 또한, 음성 입력부(110)는 전자 장치(100)와 일체형(all-in-one)뿐만 아니라 분리된 형태로 구현될 수 있다. 분리된 음성 입력부(110)는 전자 장치(100)와 유선 또는 무선 네트워크를 통하여 연결될 수 있다. The voice input unit 110 receives a voice uttered by the user. The voice input unit 110 converts the input voice signal into an electrical signal and outputs the electrical signal to the control unit 140. For example, the voice input unit 110 may be implemented as a microphone. In addition, the voice input unit 110 may be implemented as an all-in-one as well as an isolated form with the electronic device 100. The separated voice input unit 110 may be connected to the electronic device 100 via a wired or wireless network.

특히, 본 발명의 일 실시 예에 따른 음성 입력부(110)는 전자 장치(100)에 구비된 음성 입력부(예를 들어, 마이크) 및 전자 장치와 연동하는 외부기기(예를 들어, 리모컨)에 구비된 음성 입력부를 포함한다.In particular, the voice input unit 110 according to an embodiment of the present invention is provided in a voice input unit (for example, a microphone) provided in the electronic device 100 and an external device (for example, a remote controller) interoperating with the electronic device. A voice input unit.

저장부(130)는 전자 장치(100)를 구동하고 제어하기 위한 다양한 데이터 및 프로그램을 저장한다. 저장부(130)는 음성 입력부(110)를 통해 입력된 음성을 인식하기 위한 음성 인식 모듈 및 모션 입력부(120)를 통해 입력된 모션을 인식하기 위한 모션 인식 모듈을 저장한다.The storage unit 130 stores various data and programs for driving and controlling the electronic device 100. The storage unit 130 stores a voice recognition module for recognizing a voice input through the voice input unit 110 and a motion recognition module for recognizing a motion input through the motion input unit 120.

저장부(130)는 음성 데이터베이스 및 모션 데이터베이스를 포함할 수 있다. 음성 데이터베이스는 기 설정된 음성 및 기 설정된 음성에 매칭되는 음성 태스크가 기록된 데이터베이스를 의미한다. 모션 데이터베이스는 기 설정된 모션 및 기 설정된 모션에 매칭되는 모션 태스크가 기록된 데이터베이스를 의미한다. The storage unit 130 may include a voice database and a motion database. The voice database refers to a database in which a voice task matching the preset voice and the preset voice is recorded. The motion database refers to a database in which a preset motion and a motion task matching the preset motion are recorded.

디스플레이부(193)는 방송 수신부를 통해 수신된 방송 신호에 대응되는 영상을 표시한다. 디스플레이부(193)는 외부 단자 입력부를 통해 입력되는 영상 데이터(예를 들어, 동영상)를 표시할 수 있다. 디스플레이부(193)는 제어부(140)의 제어에 의해 음성 태스크를 수행하기 위한 음성 가이드 정보 및 모션 태스크를 수행하기 위한 모션 가이드 정보를 표시할 수 있다. The display unit 193 displays an image corresponding to the broadcast signal received through the broadcast receiver. The display unit 193 may display image data (eg, a video) input through the external terminal input unit. The display unit 193 may display voice guide information for performing the voice task and motion guide information for performing the motion task under the control of the controller 140.

제어부(140)는 음성 입력부(110), 저장부(130) 및 디스플레이부(193)를 제어한다. 여기서, 제어부(140)는 CPU(central processing unit) 및 전자 장치(100)를 제어하기 위한 모듈 및 데이터를 저장하는 ROM(Read Only Memory) 및 RAM(Random Access Memory)을 포함할 수 있다. The controller 140 controls the voice input unit 110, the storage unit 130, and the display unit 193. The controller 140 may include a central processing unit (CPU) and a read only memory (ROM) and a random access memory (RAM) for storing data and a module for controlling the electronic device 100.

제어부(140)는 음성 입력부(110)를 통해 음성이 입력되는 경우, 음성 인식 모듈 및 음성 데이터베이스를 이용하여 음성을 인식한다. 음성 인식(voice recognition)은 입력되는 음성의 형태에 따라, 각각의 단어를 구분하여 발화한 음성을 인식하는 고립단어 인식(isolated word recognition), 연속단어, 연속문장 및 대화체 음성을 인식하는 연속 음성 인식(continuous speech recognition) 및 고립단어 인식과 연속음성 인식의 중간형태로, 미리 정해진 핵심어를 검출하여 인식하는 핵심어 검출(keyword spotting)으로 구분될 수 있다. When a voice is input through the voice input unit 110, the controller 140 recognizes the voice using a voice recognition module and a voice database. Speech recognition is a method of recognizing speech by distinguishing words according to the type of input speech, including isolated word recognition, continuous speech recognition, continuous speech recognition, and continuous speech recognition (continuous speech recognition), and keyword spotting, which is an intermediate form of isolated word recognition and continuous speech recognition, and detects and recognizes predetermined keywords.

사용자 음성이 입력되는 경우, 제어부(140)는 입력된 음성 신호 내에서 사용자가 발화한 음성의 시작과 끝을 검출하여 음성 구간을 판단한다. 제어부(140)는 입력된 음성 신호의 에너지를 계산하고, 계산된 에너지에 따라 음성 신호의 에너지 레벨을 분류하여, 동적 프로그래밍을 통해 음성 구간을 검출할 수 있다. 제어부(140)는 검출된 음성 구간 내의 음성 신호에서 음향 모델(Acoustic Model)을 기초로 음성의 최소 단위인 음소를 검출하여 음소 데이터를 생성한다. 제어부(140)는 생성된 음소 데이터에 HMM(Hidden Markov Model) 확률 모델을 적용하여 텍스트 정보를 생성한다. 그러나, 상술한 바와 같이, 사용자의 음성을 인식하는 방법은 일 실시 예에 불과할 뿐, 다른 방법을 이용하여 사용자 음성을 인식할 수 있다. 이에 따라, 제어부(140)는 음성 신호 중에 포함된 사용자의 음성을 인식할 수 있다. When the user's voice is input, the controller 140 detects the beginning and end of the voice uttered by the user in the input voice signal to determine the voice section. The control unit 140 calculates the energy of the input speech signal, classifies the energy level of the speech signal according to the calculated energy, and detects the speech period through dynamic programming. The control unit 140 generates a phoneme data by detecting a phoneme as a minimum unit of speech based on an acoustic model in the speech signal in the detected speech interval. The control unit 140 generates text information by applying a HMM (Hidden Markov Model) probability model to the generated phoneme data. However, as described above, the method of recognizing the user's voice is only an embodiment, and the user's voice can be recognized using another method. Accordingly, the control unit 140 can recognize the voice of the user included in the voice signal.

제어부(140)는 상술한 바와 같이, 인식된 음성을 이용하여, 전자 장치(100)의 태스크(task)를 수행한다. 전자 장치(100)의 태스크는 채널 변경, 볼륨 조절, 컨텐츠(예를 들어, 동영상, 음악, 사진 등)의 재생 또는 인터넷 브라우징 등과 같이, 전자 장치(100)에 의해 수행될 수 있는 기능 중 적어도 하나를 포함한다. As described above, the controller 140 performs a task of the electronic device 100 by using the recognized voice. A task of the electronic device 100 may include at least one of the functions that may be performed by the electronic device 100, such as channel change, volume adjustment, playback of content (e.g., video, music, .

특히, 음성 개시 명령이 입력되면, 제어부(140)는 입력된 음성 개시 명령이 제1 음성 개시 명령인지 제2 음성 개시 명령인지 여부를 판단한다. 여기서, 음성 개시 명령이라 함은 전자 장치(100)의 모드를 음성 입력부(110)를 통해 입력되는 사용자 음성에 의해 제어되는 음성 태스크 모드로 진입하기 위한 명령이다. 특히, 제1 음성 개시 명령은 전자 장치(100)에 구비된 음성 입력부(110)를 통해 입력된 기설정된 단어가 포함된 사용자 음성 명령이고, 제2 음성 개시 명령은 전자 장치(100)와 연동하는 외부기기(예를 들어, 리모컨)에 포함된 기 설정된 버튼이 눌러지는 사용자 명령일 수 있다. 구체적으로 “하이 티비”와 같은 특정 사용자 음성이 음성 개시 명령으로 사용될 수 있으며, 음성 개시 명령은 사용자의 설정에 의해 변경 가능하다. 그러나, 상술한 제1 음성 개시 명령 및 제2 음성 개시 명령은 일 실시 예에 불과할 뿐, 다른 방법의 음성 개시 명령으로도 구현될 수 있다.In particular, when a voice start command is input, the controller 140 determines whether the input voice start command is a first voice start command or a second voice start command. Here, the voice start command is a command for entering the mode of the electronic device 100 into a voice task mode controlled by a user voice input through the voice input unit 110. In particular, the first voice initiation command is a user voice command including a preset word input through the voice input unit 110 provided in the electronic device 100, and the second voice initiation command is associated with the electronic device 100. It may be a user command that a predetermined button included in an external device (for example, a remote controller) is pressed. Specifically, a specific user voice such as “high TV” may be used as the voice start command, and the voice start command may be changed by the user's setting. However, the above-described first voice start command and the second voice start command are merely exemplary and may be implemented by other voice start commands.

음성 개시 명령이 제1 음성 개시 명령이라고 판단되면, 제어부(140)는 전자 장치(100)의 모드를 제1 음성 태스크 모드로 전환한다. 이때, 제1 음성 태스크 모드는 전자 장치(100)의 음성 입력부에 입력된 사용자 음성에 따라 제어되는 음성 태스크 모드이다. If it is determined that the voice start command is the first voice start command, the controller 140 switches the mode of the electronic device 100 to the first voice task mode. In this case, the first voice task mode is a voice task mode controlled according to a user voice input to the voice input unit of the electronic device 100.

그리고, 음성 개시 명령이 제2 음성 개시 명령이라고 판단되면, 제어부(140)는 전자 장치(100)의 모드를 제2 음성 태스크 모드로 전환한다. 제2 음성 태스크 모드는 전자 장치(100)와 연동하는 외부기기에 입력된 사용자 음성에 따라 제어되는 음성 태스크 모드이다. 특히, 제2 음성 태스크 모드에서는 외부기기에 구비된 음성 입력 버튼을 누르는 동안 사용자의 음성이 입력될 수 있다. 또는, 제2 음성 태스크 모드에서는 외부기기에 구비된 음성 입력 버튼을 한 번 누르고, 사용자 음성을 입력한 후, 다시 한번 음성 입력 버튼을 누름으로써, 사용자의 음성이 입력될 수 있다. 그러나, 이는 일 실시예에 불과할 뿐, 외부 기기의 버튼을 이용하여 음성을 인식하는 방법 이외에 다른 방법을 이용하여 외부기기를 통해 사용자 음성을 입력받을 수 있다. 예를 들어, 외부 기기에 구비된 스위치가 온(On) 된 경우에만 사용자 음성이 입력될 수 있다.If it is determined that the voice start command is the second voice start command, the controller 140 switches the mode of the electronic device 100 to the second voice task mode. The second voice task mode is a voice task mode that is controlled according to a user voice input to an external device interworking with the electronic device 100. In particular, in the second voice task mode, the user's voice may be input while the voice input button provided in the external device is pressed. Alternatively, in the second voice task mode, the user's voice may be input by pressing the voice input button provided on the external device once, inputting the user voice, and then pressing the voice input button again. However, this is only an example, and a user voice may be input through an external device using a method other than a method of recognizing a voice using a button of an external device. For example, the user voice may be input only when the switch provided in the external device is turned on.

특히, 제1 음성 태스크 모드에서는 외부기기에 의해 입력된 사용자의 음성에 의해 전자 장치(100)가 제어되지 않으며, 제2 음성 태스크 모드에서는 전자 장치(100)에 구비된 음성 입력부에 입력된 사용자 음성에 의해 전자 장치(100)가 제어되지 않을 수 있다.In particular, in the first voice task mode, the electronic device 100 is not controlled by the user's voice input by the external device, and in the second voice task mode, the user voice input to the voice input unit provided in the electronic device 100. The electronic device 100 may not be controlled by the electronic device 100.

전자 장치(100)의 모드가 음성 개시 모드로 전환되면, 제어부(140)는 전환된 음성 태스크 모드에 대응되는 음성 가이드 정보를 디스플레이한다. 여기서, 음성 가이드 정보는 전자 장치(100)의 특정 기능을 실행하기 위한 명령어를 안내하는 적어도 하나의 음성 아이템을 디스플레이한다.When the mode of the electronic device 100 is switched to the voice start mode, the controller 140 displays voice guide information corresponding to the switched voice task mode. Here, the voice guide information displays at least one voice item for guiding a command for executing a specific function of the electronic device 100.

특히, 전자 장치(100)의 모드가 제1 음성 태스크 모드로 전환되면, 제어부(140)는 제1 음성 태스크 모드에 대응되는 제1 음성 가이드 정보를 디스플레이한다. 그리고, 전자 장치(100)의 모드가 제2 음성 태스크 모드로 전환되면, 제어부(140)는 제2 음성 태스크 모드에 대응되는 제2 음성 가이드 정보를 디스플레이한다.In particular, when the mode of the electronic device 100 is switched to the first voice task mode, the controller 140 displays first voice guide information corresponding to the first voice task mode. When the mode of the electronic device 100 is switched to the second voice task mode, the controller 140 displays second voice guide information corresponding to the second voice task mode.

제1 음성 가이드 정보 및 제2 음성 가이드 정보에 대해서는 도 4 및 도 5를 참조하여 더욱 상세히 설명하기로 한다.The first voice guide information and the second voice guide information will be described in more detail with reference to FIGS. 4 and 5.

도 4는 본 발명의 일 실시 예에 따른, 제1 음성 가이드 정보를 도시한 도면이다.4 is a diagram illustrating first voice guide information according to an embodiment of the present invention.

도 4에 도시된 바와 같이, 제1 음성 가이드 정보(400)는 방송 영상이 디스플레이되는 화면 하단에 디스플레이된다. 또한, 제1 음성 가이드 정보(400)는 현재 디스플레이 장치의 모드가 제1 음성 태스크 모드임을 알리는 아이콘(410) 및 사용자의 음성을 안내하는 복수의 음성 아이템(421 내지 427)이 포함된다. 복수의 음성 아이템에는 전원끄기 음성 아이템(421), 외부입력 음성 아이템(422), 채널 바로가기 음성 아이템(423), 채널 올려/내려(UP/DOWN) 음성 아이템(424), 볼륨 올려/내려(UP/DOWN) 음성 아이템(425), 소리끄기 음성 아이템(426) 및 MORE 음성 아이템(427)이 포함된다. MORE 음성 아이템(427)은 디스플레이된 음성 아이템 이외의 음성 아이템을 더 보기 위한 아이템이다. As shown in FIG. 4, the first voice guide information 400 is displayed at the bottom of a screen on which a broadcast image is displayed. In addition, the first voice guide information 400 includes an icon 410 indicating that the mode of the current display apparatus is the first voice task mode and a plurality of voice items 421 to 427 for guiding the user's voice. The plurality of voice items include a power-off voice item 421, an external input voice item 422, a channel shortcut voice item 423, a channel up / down voice item 424, and a volume up / down ( UP / DOWN voice items 425, mute voice items 426, and MORE voice items 427. MORE voice item 427 is an item for viewing more voice items other than the displayed voice item.

이때, 제1 음성 태스크 모드임을 알리는 아이콘(410)은 도 4에 도시된 바와 같이, 마이크 형상일 수 있다. In this case, the icon 410 indicating the first voice task mode may have a microphone shape as shown in FIG. 4.

특히, 제1 음성 가이드 정보(400)는 리모컨에 구비된 버튼 중 한 번 누름으로써 실행할 수 있는 버튼에 대응되는 음성 아이템이 포함될 수 있다. 예를 들어, 제1 음성 가이드 정보(400)는 채널 올려/내려 음성 아이템(424), 볼륨 올려/내려 음성 아이템(425), 소리끄기 음성 아이템(426) 등이 포함될 수 있다.In particular, the first voice guide information 400 may include a voice item corresponding to a button that can be executed by pressing one of the buttons of the remote controller. For example, the first voice guide information 400 may include a channel up / down voice item 424, a volume up / down voice item 425, a mute voice item 426, and the like.

도 5는 본 발명의 일 실시 예에 따른, 제2 음성 가이드 정보(500)를 도시한 도면이다.5 is a diagram illustrating second voice guide information 500 according to an embodiment of the present invention.

도 5에 도시된 바와 같이, 제2 음성 가이드 정보(500)는 제1 음성 가이드 정보(500)가 디스플레이되는 영역과 동일한 영역인 방송 영상이 디스플레이되는 화면 하단에 디스플레이된다. 또한, 제2 음성 가이드 정보(500)는 현재 디스플레이 장치의 모드가 제2 음성 태스크 모드임을 알리는 아이콘(510) 및 사용자의 음성을 안내하는 복수의 음성 아이템(521 내지 527)이 포함된다. 복수의 음성 아이템에는 채널 바로가기 음성 아이템(521), 검색 음성 아이템(522), 외부입력 음성 아이템(523), 채널 리스트 음성 아이템(524), 즐겨찾기 음성 아이템(525) 및 MORE 음성 아이템(526)이 포함된다. 이때, 즐겨찾기 음성 아이템(525)은 사용자가 자주 사용하는 기능(예를 들어, 특정 어플리케이션 실행)을 포함하는 메뉴를 디스플레이하기 위한 음성 아이템이다.As illustrated in FIG. 5, the second voice guide information 500 is displayed at the bottom of a screen on which a broadcast image, which is the same area as the area where the first voice guide information 500 is displayed, is displayed. In addition, the second voice guide information 500 includes an icon 510 indicating that the mode of the current display apparatus is the second voice task mode, and a plurality of voice items 521 to 527 for guiding the user's voice. The plurality of voice items include a channel shortcut voice item 521, a search voice item 522, an external input voice item 523, a channel list voice item 524, a favorite voice item 525, and a MORE voice item 526. ) Is included. In this case, the favorite voice item 525 is a voice item for displaying a menu including a function frequently used by a user (for example, executing a specific application).

이때, 제2 음성 태스크 모드임을 알리는 아이콘(510)은 도 4에 도시된 제1 음성 태스크 모드를 알리는 아이콘(410)과 상이한 리모컨 형상일 수 있다. 따라서, 음성 가이드 정보(400,500)에 포함된 아이콘(410,510)을 통해 사용자는 현재 음성 태스크 모드가 제1 음성 태스크 모드인지 제2 음성 태스크 모드인지 확인할 수 있게 된다. In this case, the icon 510 indicating the second voice task mode may have a remote controller shape different from the icon 410 indicating the first voice task mode shown in FIG. 4. Therefore, the user may check whether the current voice task mode is the first voice task mode or the second voice task mode through the icons 410 and 510 included in the voice guide information 400 and 500.

그리고, 제2 음성 가이드 정보(500)에 포함된 복수의 음성 아이템은 제1 음성 가이드 정보(400)에 포함된 복수의 음성 아이템과 일부 상이할 수 있다. 특히, 제2 음성 가이드 정보(500)는 리모컨에 구비된 버튼 중 한 번 누름으로써 실행될 수 있는 버튼에 대응되는 음성 아이템을 포함하지 않을 수 있다. 예를 들어, 제2 음성 가이드 정보(500)는 채널 올려/내려 음성 아이템(424), 볼륨 올려/내려 음성 아이템(425), 소리끄기 음성 아이템(426) 등이 포함되지 않을 수 있다. 이는 제2 음성 태스크 모드에서 리모컨을 사용자가 쥐고 있으므로, 사용자가 말하는 것보다는 리모컨 버튼을 누르는 것이 더욱 편리할 수 있기 때문이다.The plurality of voice items included in the second voice guide information 500 may be partially different from the plurality of voice items included in the first voice guide information 400. In particular, the second voice guide information 500 may not include a voice item corresponding to a button that may be executed by pressing one of the buttons of the remote controller. For example, the second voice guide information 500 may not include a channel up / down voice item 424, a volume up / down voice item 425, a mute voice item 426, and the like. This is because the user holds the remote control in the second voice task mode, so it may be more convenient to press the remote control button than the user speaks.

그 대신, 제2 음성 가이드 정보(500)에는 검색 음성 아이템(522), 외부입력 음성 아이템(523), 채널 리스트 음성 아이템(524) 및 즐겨찾기 음성 아이템(525)과 같이, 뎁스가 존재하는 음성 아이템이 포함될 수 있다. Instead, the second voice guide information 500 includes a voice having a depth such as a search voice item 522, an external input voice item 523, a channel list voice item 524, and a favorite voice item 525. Items may be included.

즉, 상술한 바와 같이, 제1 음성 태스크 모드 및 제2 음성 태스크 모드에 따라 상이한 음성 가이드 정보를 제공함으로써, 사용자는 복수의 음성 태스크 모드에 따라, 효율적이고 편리하게 전자 장치(100)를 제어할 수 있게 된다.That is, as described above, by providing different voice guide information according to the first voice task mode and the second voice task mode, the user can efficiently and conveniently control the electronic device 100 according to the plurality of voice task modes. It becomes possible.

제1 음성 가이드 정보(400) 및 제2 음성 가이드 정보(500) 중 하나가 디스플레이되면, 제어부(140)는 해당되는 음성 태스크 모드에서 음성 입력부(110)에 입력된 사용자 입력에 따라 전자 장치(100)를 제어한다. 예를 들어, 제1 음성 가이드 정보(400)가 디스플레이된 상태에서 음성 입력부(110)를 통해 "소리끄기"라는 사용자 음성이 입력되면, 제어부(140)는 전자 장치(100)의 볼륨 레벨을 "O"으로 설정할 수 있다. 또한, 제2 음성 가이드 정보(400)가 디스플레이된 상태에서 음성 입력부(110)를 통해 "채널리스트"라는 사용자 음성이 입력되면, 제어부(140)는 디스플레이부(193)에 채널리스트를 디스플레이할 수 있다.When one of the first voice guide information 400 and the second voice guide information 500 is displayed, the controller 140 may display the electronic device 100 according to a user input input to the voice input unit 110 in a corresponding voice task mode. ). For example, when a user voice of “mute off” is input through the voice input unit 110 while the first voice guide information 400 is displayed, the controller 140 may adjust the volume level of the electronic device 100 to “. O "can be set. In addition, when a user voice of "channel list" is input through the voice input unit 110 while the second voice guide information 400 is displayed, the controller 140 may display the channel list on the display unit 193. have.

도 2는 본 발명의 또 다른 실시 예에 따른, 전자 장치(100)의 구성을 나타내는 블럭도를 도시한 도면이다. 도 2를 참조하면, 전자 장치(100)는 음성 입력부(110), 모션 입력부(120), 저장부(130), 제어부(140), 방송 수신부(150), 외부단자 입력부(160), 리모컨 신호 수신부(170), 네트워크 인터페이스부(180) 및 영상 출력부(190)를 포함한다. 도 2에 도시된 전자 장치(100)는 셋탑박스(set-top box)로 구현될 수 있다. 2 is a block diagram showing a configuration of an electronic device 100 according to another embodiment of the present invention. 2, the electronic device 100 includes an audio input unit 110, a motion input unit 120, a storage unit 130, a control unit 140, a broadcast receiving unit 150, an external terminal input unit 160, A receiving unit 170, a network interface unit 180, and a video output unit 190. The electronic device 100 shown in FIG. 2 may be implemented as a set-top box.

한편, 도 2에 도시된 음성 입력부(110), 저장부(130) 및 제어부(140)에 대한 설명은 도 1에서 설명한 음성 입력부(110), 저장부(130) 및 제어부(140)에 대한 설명과 같으므로, 자세한 설명은 생략한다.Meanwhile, the description of the voice input unit 110, the storage unit 130, and the controller 140 illustrated in FIG. 2 is the description of the voice input unit 110, the storage unit 130, and the controller 140 described with reference to FIG. 1. Since the description is the same, detailed description is omitted.

모션 입력부(120)는 사용자의 모션을 촬상한 영상 신호(예를 들어, 연속되는 프레임)를 입력받아 제어부(140)로 제공한다. 예를 들어, 모션 입력부(120)는 렌즈 및 이미지센서로 구성되는 유닛으로 구현될 수 있다. 또한, 모션 입력부(120)는 전자 장치(100)와 일체형뿐만 아니라 분리된 형태로 구현될 수 있다. 분리된 모션 입력부(120)는 전자 장치(100)와 유선 또는 무선 네트워크를 통하여 연결될 수 있다. The motion input unit 120 receives a video signal (for example, a continuous frame) of the user's motion and provides the video signal to the control unit 140. For example, the motion input unit 120 may be implemented as a unit consisting of a lens and an image sensor. In addition, the motion input unit 120 may be implemented in a separate form as well as integrated with the electronic device 100. The separated motion input unit 120 may be connected to the electronic device 100 via a wired or wireless network.

방송 수신부(150)는 유, 무선으로 외부로부터 방송 신호를 수신한다. 방송 신호는 영상(video), 오디오(audio) 및 부가 데이터(예를 들어, EPG)를 포함한다. 방송 수신부(150)는 지상파 방송, 케이블 방송, 위성 방송, 인터넷 방송 등과 같이 다양한 소스로부터 방송 신호를 수신할 수 있다.The broadcast receiving unit 150 receives a broadcast signal from an external source. The broadcast signal includes video, audio, and additional data (e.g., EPG). The broadcast receiver 150 can receive broadcast signals from various sources such as terrestrial broadcast, cable broadcast, satellite broadcast, internet broadcast, and the like.

외부단자 입력부(160)는 전자 장치(100)의 외부로부터 영상 데이터(예를 들어, 동영상 사진 등), 오디오 데이터(예를 들어, 음악 등) 등을 수신한다. 외부 단자 입력부(160)는 HDMI입력 단자(High-Definition Multimedia Interface input), 컴포넌트 입력 단자, PC 입력 단자, 또는 USB 입력 단자 중 적어도 하나를 포함할 수 있다. 리모컨 신호 수신부(170)는 외부의 리모컨으로부터 입력되는 리모컨 신호를 수신한다. 리모컨 신호 수신부(170)는 전자 장치(100)가 음성 태스크 모드이거나 모션 태스크 모드에서도 리모컨 신호를 수신할 수 있다. The external terminal input unit 160 receives video data (for example, moving pictures, etc.), audio data (e.g., music, etc.) from the outside of the electronic device 100, The external terminal input unit 160 may include at least one of a high-definition multimedia interface input, a component input terminal, a PC input terminal, and a USB input terminal. The remote control signal receiving unit 170 receives a remote control signal input from an external remote control. The remote control signal receiving unit 170 can receive the remote control signal even when the electronic device 100 is in the audio task mode or the motion task mode.

네트워크 인터페이스부(180)는 제어부(140)의 제어에 의해 전자 장치(100)와 외부 장치(예를 들어, 서버)를 연결할 수 있다. 제어부(140)는 네트워크 인터페이스부(180)를 통해 연결된 외부 장치로부터 어플리케이션을 다운로드 하거나 웹 브라우징을 할 수 있다. 네트워크 인터페이스부(180)는 이더넷(Ethernet), 무선랜(182) 및 블루투스(bluetooth) 중 적어도 하나를 제공할 수 있다. The network interface unit 180 may connect the electronic device 100 and an external device (e.g., a server) under the control of the control unit 140. [ The control unit 140 can download an application or browse the web from an external device connected through the network interface unit 180. [ The network interface unit 180 may provide at least one of Ethernet, wireless LAN 182, and bluetooth.

영상 출력부(190)는 방송 수신부(150)를 통해 수신되는 외부의 방송 신호, 또는 외부단자 입력부(160)에서 입력되는 영상 데이터, 또는 저장부(130)에 저장된 영상 데이터를 외부의 전자 장치(예를 들어, 모니터, TV)로 출력한다.The video output unit 190 outputs an external broadcast signal received through the broadcast receiving unit 150 or video data input from the external terminal input unit 160 or video data stored in the storage unit 130 to an external electronic device For example, a monitor, TV).

제어부(140)는 모션 입력부(120)를 통해 모션이 입력되는 경우, 모션 감지 모듈 및 모션 데이터베이스를 이용하여 모션을 인식한다. 모션 인식(motion recognition)은 모션 입력부(120)를 통해 입력되는 사용자의 모션에 대응되는 영상(예를 들어, 연속되는 프레임)을 모션 인식 모듈을 이용하여 주위 배경과 손(예를 들어, 손가락을 펴거나 손가락을 오므려 주먹을 쥐는) 영역으로 분리하고, 연속되는 손의 움직임을 인식할 수 있다. 사용자 모션이 입력되는 경우, 제어부(140)는 수신된 영상을 프레임 단위로 저장하고, 저장된 프레임을 이용하여 사용자 모션의 대상인 오브젝트(예를 들어, 사용자의 손)를 감지한다. 제어부(140)는 프레임에 포함된 오브젝트의 형태, 색깔, 움직임 중 적어도 하나를 감지하여 오브젝트를 검출한다. 제어부(140)는 복수 개의 프레임에 포함된 각각의 오브젝트의 위치를 이용하여 검출된 오브젝트의 움직임을 추적할 수 있다. When the motion is input through the motion input unit 120, the controller 140 recognizes the motion by using the motion detection module and the motion database. Motion recognition is a process of recognizing an image (e.g., a continuous frame) corresponding to a motion of a user input through the motion input unit 120 using a motion recognition module, Or stretching his fingers to hold his fist), and recognize the movement of successive hands. When the user motion is input, the controller 140 stores the received image frame by frame, and detects an object (e.g., a user's hand) of the user motion using the stored frame. The controller 140 detects at least one of the type, the color, and the motion of the object included in the frame to detect the object. The control unit 140 can track the movement of the detected object using the position of each object included in the plurality of frames.

제어부(140)는 추적된 오브젝트의 형태 및 움직임에 따라 모션을 판단한다. 예를 들어, 제어부(140)는 오브젝트의 형태의 변화, 속도, 위치, 방향 중 적어도 하나를 이용하여 사용자의 모션을 판단한다. 사용자의 모션은 손을 쥐는 모션인 그랩(grab), 표시된 커서를 손으로 이동시키는 모션인 포인팅 이동(pointing move), 손을 일정 속도 이상으로 한쪽 방향으로 움직이는 모션인 슬랩(slap), 손을 좌/우 또는 상/하로 흔드는 모션인 쉐이크(shake) 및 손을 회전하는 모션인 회전을 포함한다. 상술한 실시 예에 이외의 다른 모션에도 본 발명의 기술적 사상이 적용될 수 있다. 예를 들어, 쥐어진 손을 펴는 스프레드(spread) 모션 등이 더 포함될 수 있다. The controller 140 determines the motion according to the shape and motion of the tracked object. For example, the controller 140 determines the motion of the user using at least one of a change in shape, speed, position, and orientation of the object. The user's motion includes a grab that is a motion of a hand, a pointing movement that is a motion that moves a displayed cursor by hand, a slap that is a motion that moves the hand in one direction beyond a certain speed, A shake that is a motion that swings up / down or up / down, and a rotation that is a motion of rotating the hand. The technical idea of the present invention can be applied to motions other than the above-described embodiments. For example, a spread motion that stretches a hand may be further included.

제어부(140)는 사용자의 모션이 포인팅 이동인지, 슬랩인지 여부를 판단하기 위해, 오브젝트가 결정된 시간(예를 들어, 800ms) 내에 결정된 영역(예를 들어, 40cm x 40cm의 사각형)을 벗어났는지를 판단한다. 오브젝트가 결정된 시간 내에 결정된 영역을 벗어나지 않는 경우, 제어부(140)는 사용자의 모션을 포인팅 이동으로 판단할 수 있다. 오브젝트가 결정된 시간 내에 결정된 영역을 벗어난 경우, 제어부(140)는 사용자의 모션을 슬랩으로 판단할 수 있다. 다른 일 예로, 오브젝트의 속도가 기설정된 속도(예를 들어, 30 cm/s) 이하인 것으로 판단된 경우, 제어부(140)는 사용자의 모션을 포인팅 이동으로 판단한다. 오브젝트의 속도가 기설정된 속도 초과인 것으로 판단되는 경우, 제어부(140)는 사용자의 모션을 슬랩으로 판단한다.The control unit 140 determines whether the object is out of the determined area (for example, a square of 40 cm x 40 cm) within the determined time (for example, 800 ms) to determine whether the motion of the user is a pointing movement or a slap . If the object does not deviate from the determined area within the determined time, the control unit 140 can determine the user's motion as a pointing movement. If the object is out of the determined area within the determined time, the control unit 140 may determine the motion of the user as a slab. In another example, when it is determined that the velocity of the object is equal to or less than a predetermined velocity (for example, 30 cm / s), the control unit 140 determines the motion of the user as a pointing movement. If it is determined that the speed of the object exceeds the predetermined speed, the controller 140 determines the motion of the user as a slap.

도 3은 본 발명의 또 다른 실시 예에 따른, 전자 장치(100)의 블럭도를 도시한 도면이다. 도 3에 도시된 바와 같이, 전자 장치(100)는 음성 입력부(110), 모션 입력부(120), 저장부(130), 제어부(140), 방송 수신부(150), 외부단자 입력부(160), 리모컨 신호 수신부(170), 네트워크 인터페이스부(180), 디스플레이부(193) 및 오디오 출력부(196)를 포함한다. 이때, 전자 장치(100)는 디지털 TV일 수 있으나, 이에 한정되는 것은 아니다.Figure 3 is a block diagram of an electronic device 100, in accordance with another embodiment of the present invention. 3, the electronic device 100 includes an audio input unit 110, a motion input unit 120, a storage unit 130, a control unit 140, a broadcast receiving unit 150, an external terminal input unit 160, A remote control signal receiving unit 170, a network interface unit 180, a display unit 193, and an audio output unit 196. At this time, the electronic device 100 may be a digital TV, but is not limited thereto.

한편, 도 3에서 음성 입력부(110), 모션 입력부(120), 저장부(130), 제어부(140), 방송 수신부(150), 외부단자 입력부(160), 리모컨신호 수신부(170), 네트워크 인터페이스부(180) 및 디스플레이부(193)에 대한 설명은 도 1 및 도 2에서 동일한 참조번호를 가지는 구성에 대한 설명과 같으므로, 자세한 설명은 생략한다.3, a voice input unit 110, a motion input unit 120, a storage unit 130, a control unit 140, a broadcast receiving unit 150, an external terminal input unit 160, a remote control signal receiving unit 170, The description of the unit 180 and the display unit 193 is the same as that of the configuration having the same reference numerals in FIG. 1 and FIG. 2, and a detailed description thereof will be omitted.

오디오 출력부(196)는 제어부(140)의 제어에 의해 방송 신호에 대응되는 음성을 출력한다. 오디오 출력부(196)는 스피커(196a), 헤드폰 출력 단자(196b) 또는 S/PDIF 출력 단자(163c) 중 적어도 하나를 포함할 수 있다. The audio output unit 196 outputs the audio corresponding to the broadcast signal under the control of the control unit 140. [ The audio output unit 196 may include at least one of a speaker 196a, a headphone output terminal 196b, or an S / PDIF output terminal 163c.

한편, 저장부(130)는 도 3에 도시된 바와 같이, 전원 제어 모듈(130a), 채널 제어 모듈(130b), 볼륨 제어 모듈(130c), 외부입력 제어 모듈(130d), 화면 제어 모듈(130e), 오디오 제어 모듈(130f), 인터넷 제어 모듈(130g), 어플리케이션 모듈(130h), 검색 제어 모듈(130i), UI 처리 모듈(130j), 음성 인식 모듈(130k), 모션 인식 모듈(130l), 음성 데이터베이스(130m) 및 모션 데이터베이스(130n)를 포함한다. 이들 모듈들(130a 내지 130n)은 각각 전원 제어 기능, 채널 제어 기능, 볼륨 제어 기능, 외부 입력 제어 기능, 화면 제어 기능, 오디오 제어 기능, 인터넷 제어 기능, 어플리케이션 실행 기능, 검색 제어 기능, UI 처리 기능을 수행하기 위하여 소프트웨어로 구현될 수 있다. 제어부(140)는 저장부(130)에 저장된 이들 소프트웨어를 실행시켜 해당 기능을 수행할 수 있다.Meanwhile, as illustrated in FIG. 3, the storage unit 130 may include a power control module 130a, a channel control module 130b, a volume control module 130c, an external input control module 130d, and a screen control module 130e. ), Audio control module 130f, internet control module 130g, application module 130h, search control module 130i, UI processing module 130j, voice recognition module 130k, motion recognition module 130l, Voice database 130m and motion database 130n. These modules 130a to 130n each have a power control function, a channel control function, a volume control function, an external input control function, a screen control function, an audio control function, an internet control function, an application execution function, a search control function, and a UI processing function, respectively. It may be implemented in software to perform the. The controller 140 may execute these software stored in the storage 130 to perform a corresponding function.

이하에서는 도 6을 참조하여, 음성 입력 방식에 따라 상이한 음성 태스크 모드를 제공하는 방법에 대해 더욱 상세히 설명하기로 한다. Hereinafter, a method of providing a different voice task mode according to a voice input method will be described in more detail with reference to FIG. 6.

우선, 전자 장치(100)는 음성 개시 명령을 입력받는다(S610). 이때, 여기서, 음성 개시 명령이라 함은 전자 장치(100)의 모드를 음성 입력부(110)를 통해 입력되는 사용자 음성에 의해 제어되는 음성 태스크 모드로 진입하기 위한 명령이다. 특히, 제1 음성 개시 명령은 전자 장치(100)에 구비된 음성 입력부(110)를 통해 입력된 기설정된 단어가 포함된 사용자 음성 명령이고, 제2 음성 개시 명령은 전자 장치(100)와 연동하는 외부기기(예를 들어, 리모컨)에 포함된 기 설정된 버튼이 눌러지는 사용자 명령일 수 있다. First, the electronic device 100 receives a voice start command (S610). In this case, the voice initiation command is a command for entering the mode of the electronic device 100 into a voice task mode controlled by a user voice input through the voice input unit 110. In particular, the first voice initiation command is a user voice command including a preset word input through the voice input unit 110 provided in the electronic device 100, and the second voice initiation command is associated with the electronic device 100. It may be a user command that a predetermined button included in an external device (for example, a remote controller) is pressed.

그리고, 전자 장치(100)는 입력된 음성 개시 명령이 제1 음성 개시 명령인지 여부를 판단한다(S620).In operation S620, the electronic device 100 determines whether the input voice start command is the first voice start command.

입력된 음성 개시 명령이 제1 음성 개시 명령이라면(S620-Y), 전자 장치(100)는 전자 장치(100)의 모드를 제1 음성 태스크 모드로 전환한다(S630). 여기서, 제1 음성 태크스 모드는 전자 장치(100)에 구비된 음성 입력부(110)를 통해 입력되는 사용자 음성에 따라 전자 장치(100)를 제어하는 모드이다.If the input voice start command is the first voice start command (S620-Y), the electronic device 100 switches the mode of the electronic device 100 to the first voice task mode (S630). Here, the first voice tag mode is a mode for controlling the electronic device 100 according to a user voice input through the voice input unit 110 provided in the electronic device 100.

특히, 제1 음성 태스크 모드로 전환되면, 전자 장치(100)는 제1 음성 가이드 정보를 디스플레이한다(S640). 여기서 제1 음성 가이드 정보에는 현재 전자 장치(100)의 모드가 제1 음성 태스크 모드임을 안내하는 아이콘 및 제1 음성 태스크 모드를 수행하기 위한 복수의 음성 아이템이 포함될 수 있다. 이때, 제1 음성 가이드 정보에 포함된 복수의 아이템에는 "채널 올려/내려 음성 아이콘", "볼륨 올려/내려 음성 아이콘" 및 "소리 끄리 음성 아이콘"과 같이, 사용자의 음성이 입력되면 전자 장치(100)의 기능이 바로 실행될 수 있는 음성 아이템이 포함될 수 있다.In particular, when it is switched to the first voice task mode, the electronic device 100 displays first voice guide information in operation S640. Here, the first voice guide information may include an icon indicating that the mode of the electronic device 100 is the first voice task mode and a plurality of voice items for performing the first voice task mode. In this case, the plurality of items included in the first voice guide information may be inputted to the plurality of items such as "channel up / down voice icon", "volume up / down voice icon", and "voice off voice icon". A voice item that may immediately execute the function of 100) may be included.

그리고, 전자 장치(100)는 제1 음성 가이드 정보를 이용하여 음성 태스크를 수행한다(S680).In operation S680, the electronic device 100 performs a voice task using the first voice guide information.

그러나, 음성 개시 명령이 제1 음성 개시 명령이 아니라면(S620-N), 전자 장치(100)는 입력된 음성 개시 명령이 제2 음성 개시 명령이라고 판단한다(S650). However, if the voice start command is not the first voice start command (S620-N), the electronic device 100 determines that the input voice start command is the second voice start command (S650).

그리고, 전자 장치(100)는 전자 장치(100)의 모드를 제2 음성 태크스 모드로 전환한다(S660). 이때, 제2 음성 태스크 모드는 전자 장치(100)와 연동하는 외부기기(예를 들어, 리모컨)에 포함된 음성 입력부(110)를 통해 입력된 사용자 음성에 따라 전자 장치(100)를 제어하는 모드이다. 특히, 제2 음성 태스크 모드에서는 외부기기의 기 설정된 제2 버튼(예를 들어, 음성 입력 버튼)이 눌러진 후, 외부기기에 입력된 사용자 음성에 의해 제어될 수 있다.In operation S660, the electronic device 100 switches the mode of the electronic device 100 to the second voice tag mode. In this case, the second voice task mode is a mode for controlling the electronic device 100 according to a user voice input through the voice input unit 110 included in an external device (for example, a remote controller) interoperating with the electronic device 100. to be. In particular, in the second voice task mode, the preset second button (for example, a voice input button) of the external device is pressed and then controlled by a user voice input to the external device.

제2 음성 태스크 모드로 전환되면, 전자 장치(100)는 제2 음성 가이드 정보를 디스플레이한다(S670). 여기서, 제2 음성 가이드 정보에는 현재 전자 장치(100)의 모드가 제2 음성 태스크 모드임을 안내하는 아이콘 및 제2 음성 태스크를 수행하기 위한 복수의 음성 아이템이 포함될 수 있다. 이때, 제2 음성 태스크 모드임을 안내하는 아이콘은 제1 음성 태스크 모드임을 알리는 아이콘과는 상이하다. 그리고, 제2 음성 가이드 정보에 포함된 복수의 아이템에는 "외부입력 음성 아이콘", "채널리스트 음성 아이콘" 및 "즐겨찾기 음성 아이콘"과 같이, 뎁스가 존재하는 음성 아이템이 포함될 수 있다.When the mobile device enters the second voice task mode, the electronic device 100 displays second voice guide information in operation S670. Here, the second voice guide information may include an icon indicating that the mode of the current electronic device 100 is the second voice task mode and a plurality of voice items for performing the second voice task. In this case, the icon indicating the second voice task mode is different from the icon indicating the first voice task mode. Also, the plurality of items included in the second voice guide information may include voice items having a depth such as "external input voice icon", "channel list voice icon", and "favorite voice icon".

그리고, 전자 장치(100)는 제2 음성 가이드 정보를 이용하여 음성 태스크를 수행한다(S680).In operation S680, the electronic device 100 performs a voice task using the second voice guide information.

상술한 바와 같은 전자 장치(100)의 제어 방법에 의해, 사용자는 서로 다른 음성 입력 방식을 이용하여 전자 장치(100)를 더욱 효율적으로 제어할 수 있게 된다.
By the control method of the electronic device 100 as described above, the user can more efficiently control the electronic device 100 by using a different voice input method.

이하에서는 도 7 내지 도 12를 참조하여, 음성 입력시 음성 인식의 오류가 발생할 경우, 피드백 메시지를 출력하는 방법을 설명하기로 한다.Hereinafter, a method of outputting a feedback message when an error of voice recognition occurs during voice input will be described with reference to FIGS. 7 to 12.

구체적으로, 음성 개시 명령이 입력되면, 제어부(140)는 전자 장치(100)의 모드를 음성 태스크 모드로 전환한다. 이때, 음성 태스크 모드는 전자 장치(100)가 음성 입력부(110)를 통해 입력된 사용자 음성에 의해 제어되는 모드이다. In detail, when a voice start command is input, the controller 140 switches the mode of the electronic device 100 to the voice task mode. In this case, the voice task mode is a mode in which the electronic device 100 is controlled by a user voice input through the voice input unit 110.

그리고, 음성 개시 명령은 앞서 설명한 바와 같이, 전자 장치(100)에 구비된 음성 입력부(110)를 통해 입력된 기설정된 단어가 포함된 사용자 음성 명령(이하 "제1 음성 개시 명령"이라고 함)이거나 전자 장치(100)와 연동하는 외부기기(예를 들어, 리모컨)에 포함된 기 설정된 버튼이 눌러지는 사용자 명령(이하 "제2 음성 개시 명령이라고 함)일 수 있다. 특히, 제1 음성 개시 명령이 입력되면, 제어부(140)는 전자 장치(100)의 모드를 제1 음성 태스크 모드로 전환한다. 이때, 제1 음성 태스크 모드는 전자 장치(100)의 음성 입력부에 입력된 사용자 음성에 따라 제어되는 음성 태스크 모드이다. 제2 음성 개시 명령이 입력되면, 제어부(140)는 전자 장치(100)의 모드를 제2 음성 태스크 모드로 전환한다. 제2 음성 태스크 모드는 전자 장치(100)와 연동하는 외부기기에 입력된 사용자 음성에 따라 제어되는 음성 태스크 모드이다. 특히, 제2 음성 태스크 모드에서는 외부기기에 구비된 음성 입력 버튼을 누르는 동안 사용자의 음성이 입력될 수 있다.As described above, the voice initiation command may be a user voice command (hereinafter referred to as a “first voice start command”) including a preset word input through the voice input unit 110 provided in the electronic device 100. It may be a user command (hereinafter, referred to as a “second voice start command”) in which a preset button included in an external device (for example, a remote controller) interworking with the electronic device 100 is pressed. When this is input, the controller 140 switches the mode of the electronic device 100 to the first voice task mode, in which the first voice task mode is controlled according to a user voice input to the voice input unit of the electronic device 100. When the second voice start command is input, the controller 140 switches the mode of the electronic device 100 to the second voice task mode, which is linked with the electronic device 100. Input to external device A voice task mode that is controlled according to the user's voice. In particular, in the second audio task mode, the user's voice can be inputted while pressing a speech input button provided in the external device.

전자 장치(100)의 모드가 제1 음성 태스크 모드 및 제2 음성 태스크 중 하나로 전환되면, 제어부(140)는 음성 태스크 모드를 수행하기 위한 사용자 음성을 안내하는 음성 가이드 정보를 디스플레이하도록 디스플레이부(193)를 제어한다. 이때, 음성 가이드 정보는 도 4에 도시된 바와 같은 제1 음성 가이드 정보(400) 및 도 5에 도시된 바와 같은 제2 음성 가이드 정보(500) 중 하나일 수 있다. When the mode of the electronic device 100 is switched to one of the first voice task mode and the second voice task, the controller 140 displays the voice guide information for guiding a user voice for performing the voice task mode. ). In this case, the voice guide information may be one of the first voice guide information 400 as shown in FIG. 4 and the second voice guide information 500 as shown in FIG. 5.

음성 가이드 정보를 이용하여 음성 태스크를 수행하는 도중 음성 인식 오류가 발생되면, 제어부(140)는 도 7에 도시된 바와 같이, 음성 인식 오류를 안내하는 피드백 메시지(750)를 디스플레이한다. 여기서 음성 인식 오류가 발생하는 경우에는 음성 입력부(110)를 통해 입력된 사용자의 음성이 너무 작은 경우, 음성 입력부(110)를 통해 입력된 사용자의 음성을 인식한 결과 음성 데이터베이스에 매칭되는 명령어가 없는 경우 및 사용자의 조작 미숙인 경우 중 적어도 하나를 포함할 수 있다.When a voice recognition error occurs while performing a voice task using the voice guide information, as shown in FIG. 7, the controller 140 displays a feedback message 750 for guiding the voice recognition error. In this case, when a voice recognition error occurs, when the user's voice input through the voice input unit 110 is too small, the voice input unit 110 recognizes the user's voice and there is no command matching the voice database. And at least one of a user's operation immaturity.

특히, 제어부(140)는 저장부(130)에 저장된 복수의 피드백 메시지 중 하나를 디스플레이할 수 있다. 구체적으로, 제어부(140)는 음성 태스크의 모드 및 음성 인식 오류의 종류에 따라 상이하게 피드백 메시지(750)를 디스플레이할 수 있다.In particular, the controller 140 may display one of a plurality of feedback messages stored in the storage 130. In detail, the controller 140 may display the feedback message 750 differently according to the mode of the voice task and the type of the voice recognition error.

구체적으로, 제어부(140)는 제1 음성 태스크 모드에서 음성 인식 오류가 발생한 경우와 제2 음성 태스크 모드에서 음성 인식 오류가 발생한 경우에 따라 상이하게 피드백 메시지를 디스플레이할 수 있다. 예를 들어, 제1 음성 태스크 모드에서의 음성 인식 오류인 경우, 제어부(140)는 도 8에 도시된 복수의 피드백 메시지(801 내지 813) 중 하나를 디스플레이할 수 있다. 제2 음성 태스크 보드에서의 음성 인식 오류인 경우, 제어부(140)는 도 9 내지 도 11에 도시된 바와 같은 복수의 피드백 메시지(901 내지 915, 1001 내지 1007, 1101 내지 1106) 중 하나를 디스플레이할 수 있다..In detail, the controller 140 may display a feedback message differently according to a case where a voice recognition error occurs in the first voice task mode and a case where a voice recognition error occurs in the second voice task mode. For example, in the case of a voice recognition error in the first voice task mode, the controller 140 may display one of the plurality of feedback messages 801 to 813 illustrated in FIG. 8. In the case of the voice recognition error in the second voice task board, the controller 140 may display one of the plurality of feedback messages 901 to 915, 1001 to 1007, and 1101 to 1106 as shown in FIGS. 9 to 11. You can ..

또한, 제어부(140)는 제2 음성 태스크 모드에서 음성 인식 오류의 종류에 따라 상이하게 피드백 메시지(750)를 디스플레이할 수 있다. 예를 들어, 음성 입력부(110)를 통해 입력된 사용자 음성의 인식 결과가 음성 데이터베이스에 매칭되는 명령어가 없거나 사용자의 목소리가 기 설정된 값보다 작아 사용자 음성을 인식할 수 없는 경우, 제어부(140)는 도 9에 도시된 복수의 피드백 메시지(901 내지 915) 중 하나를 디스플레이할 수 있다. 사용자 음성이 입력된 후에도 계속해서 외부기기의 음성 입력 버튼을 누르고 있는 경우, 제어부(140)는 도 10에 도시된 복수의 피드백 메시지(1001 내지 1007) 중 하나를 디스플레이할 수 있다. 외부기기의 음성 입력 버튼을 누른 후 기설정된 시간동안 사용자 음성이 입력되지 않는 경우, 제어부(140)는 도 11에 도시된 바와 같은 복수의 피드백 메시지(1101 내지 1106) 중 하나를 디스플레이할 수 있다.In addition, the controller 140 may display the feedback message 750 differently according to the type of speech recognition error in the second voice task mode. For example, when the recognition result of the user's voice input through the voice input unit 110 does not have a command matching the voice database or the user's voice is smaller than the preset value, the controller 140 may not recognize the user's voice. One of the plurality of feedback messages 901 to 915 illustrated in FIG. 9 may be displayed. If the voice input button of the external device is continuously pressed even after the user voice is input, the controller 140 may display one of the plurality of feedback messages 1001 to 1007 illustrated in FIG. 10. When the user's voice is not input for a preset time after the voice input button of the external device is pressed, the controller 140 may display one of the plurality of feedback messages 1101 to 1106 as shown in FIG. 11.

또한, 제어부(140)는 최초 음성 인식 발생시에 음성 태스크 모드 및 음성 인식 오류의 종류에 따라 디폴트(default)된 피드백 메시지를 디스플레이할 수 있다. 예를 들어, 제1 음성 태스크 모드에서 음성 인식 오류가 발생한 경우, 제어부(140)는 도 8에 도시된 복수의 피드백 메시지 중 제1 피드백 메시지(801)인 "다시 한 번 말씀해 주세요"를 디스플레이할 수 있다. 제2 음성 태스크 모드에서 입력된 사용자 음성이 인식되지 못한 경우, 제어부(140)는 도 9에 도시된 복수의 피드백 메시지 중 제1 피드백 메시지(901)인 "다시 한 번 말씀해 주세요"를 디스플레이할 수 있다. 제2 음성 태스크 모드에서 사용자 음성 입력 후에도 기설정된 시간동안 음성 입력 버튼을 누르는 경우, 제어부(140)는 도 10에 도시된 복수의 피드백 메시지 중 제1 피드백 메시지(1001)인 "버튼에서 손을 떼 주세요."를 디스플레이할 수 있다.제2 음성 태스크 모드에서 음성 입력 버튼을 누른 후 기설정된 시간동안 사용자 음성이 입력되지 않으면, 제어부(140)는 도 11에 도시된 복수의 피드백 메시지 중 제1 피드백 메시지(1101)인 "원하시는 명령을 말씀하세요."를 디스플레이할 수 있다.In addition, the controller 140 may display a feedback message defaulted according to the voice task mode and the type of the voice recognition error when the first voice recognition occurs. For example, when a voice recognition error occurs in the first voice task mode, the controller 140 displays the first feedback message 801 of the plurality of feedback messages illustrated in FIG. Can be. When the user's voice input in the second voice task mode is not recognized, the controller 140 may display the first feedback message 901 of the plurality of feedback messages illustrated in FIG. 9. have. When the voice input button is pressed for a preset time even after the user voice input in the second voice task mode, the controller 140 releases the "button" that is the first feedback message 1001 among the plurality of feedback messages shown in FIG. 10. Please input. ”If the user's voice is not input for a preset time after the voice input button is pressed in the second voice task mode, the controller 140 returns the first feedback among the plurality of feedback messages shown in FIG. 11. Message 1101, " speak the desired command. &Quot;

한편, 상술한 바와 같이, 음성 태스크 모드 및 음성 인식 오류의 종류에 따라 디폴트된 피드백 메시지는 제조시에 설정될 수 있으며, 사용자의 조작에 의해 변경될 수 있다.Meanwhile, as described above, the default feedback message according to the voice task mode and the type of the voice recognition error may be set at the time of manufacture, and may be changed by a user's operation.

그리고, 반복적으로 음성 인식 오류가 발생되면, 제어부(140)는 디폴트된 피드백 메시지를 제외한 나머지 메시지 중 하나를 랜덤하게 디스플레이할 수 있다. 예를 들어, 제1 음성 태스크 모드에서 반복적으로 음성 인식 오류가 발생하면, 제어부(140)는 도 8에 도시된 제1 피드백 메시지(801)를 제외한 나머지 피드백 메시지(802 내지 813) 중 하나를 랜덤하게 디스플레이할 수 있다. 그리고, 제2 음성 태스크 모드에서 입력된 사용자 음성이 반복적으로 인식되지 못한 경우, 제어부(140)는 도 9에 도시된 제1 피드백 메시지(901)를 제외한 나머지 피드백 메시지(902 내지 915) 중 하나를 디스플레이할 수 있다. 제2 음성 태스크 모드에서 사용자 음성 입력 후에도 계속해서 음성 입력 버튼을 누르는 경우, 제어부(140)는 도 10에 도시된 제1 피드백 메시지(1001)를 제외한 나머지 피드백 메시지 중 하나(1002 내지 1007)를 기설정된 시간(예를 들어, 10초)마다 랜덤하게 디스플레이할 수 있다. 제2 음성 태스크 모드에서 음성 입력 버튼을 누른 후 기설정된 시간동안 계속해서 사용자 음성이 입력되지 않으면, 제어부(140)는 도 11에 도시된 제1 피드백 메시지(1101)를 제외한 나머지 피드백 메시지(1102 내지 1106) 중 하나를 기설정된 시간(예를 들어, 10초)마다 랜덤하게 디스플레이할 수 있다.When the voice recognition error occurs repeatedly, the controller 140 may randomly display one of the remaining messages except the default feedback message. For example, when a voice recognition error occurs repeatedly in the first voice task mode, the controller 140 randomizes one of the feedback messages 802 to 813 except for the first feedback message 801 shown in FIG. 8. Can be displayed. In addition, when the user voice input in the second voice task mode is not repeatedly recognized, the controller 140 may delete one of the feedback messages 902 to 915 except for the first feedback message 901 shown in FIG. 9. Can be displayed. When the voice input button is continuously pressed after the user voice input in the second voice task mode, the controller 140 may read one of the feedback messages 1002 to 1007 except for the first feedback message 1001 shown in FIG. 10. It can be displayed randomly every set time (for example, 10 seconds). If the user's voice is not input for a predetermined time after the voice input button is pressed in the second voice task mode, the controller 140 controls the feedback messages 1102 through 1 except for the first feedback message 1101 shown in FIG. 11. 1106 may be randomly displayed every predetermined time (for example, 10 seconds).

상술한 바와 같이, 복수의 피드백 메시지가 음성 인식 오류별, 음성 태스크 모드별로 상이하게 제공됨으로써, 사용자는 음성인식의 오류를 정확하게 확인할 수 있게 된다. 또한, 사용자가 마치 전자 장치와 대화하는 듯한 효과를 얻을 수 있어, 엔터테인먼트 요소가 증가될 수 있게 된다.As described above, the plurality of feedback messages are differently provided for each voice recognition error and voice task mode, so that the user can accurately check the error of the voice recognition. In addition, it is possible to obtain an effect as if the user is talking to the electronic device, so that the entertainment element can be increased.

이하에서는 도 12를 참조하여, 전자 장치(100)에서 음성 인식 오류가 발생한 경우, 피드백 메시지를 제공하는 방법에 대해 더욱 상세히 설명하기로 한다.Hereinafter, a method of providing a feedback message when a voice recognition error occurs in the electronic device 100 will be described in more detail with reference to FIG. 12.

우선, 전자 장치(100)는 음성 개시 명령이 입력되었는지 여부를 판단한다(S1210). 이때, 음성 개시 명령은 전자 장치(100)의 모드를 음성 태스크 모드로 전환하기 위한 사용자 명령으로, 전자 장치(100)에 구비된 음성 입력부(110)를 통해 입력된 기설정된 단어가 포함된 사용자 음성 명령인 제1 음성 개시 명령 및 전자 장치(100)와 연동하는 외부기기(예를 들어, 리모컨)에 포함된 기 설정된 버튼이 눌러지는 사용자 명령인 제2 음성 개시 명령이 포함될 수 있다.First, the electronic device 100 determines whether a voice start command is input (S1210). In this case, the voice initiation command is a user command for switching the mode of the electronic device 100 to the voice task mode, and includes a user voice including a predetermined word input through the voice input unit 110 provided in the electronic device 100. The command may include a first voice start command, which is a command, and a second voice start command, which is a user command of pressing a preset button included in an external device (for example, a remote controller) that cooperates with the electronic device 100.

음성 개시 명령이 입력되면(S1210-Y), 전자 장치(100)는 전자 장치(100)의 모드를 음성 태스크 모드로 전환한다(S1220). 이때, 입력된 음성 개시 명령이 제1 음성 개시 명령인 경우, 전자 장치(100)는 전자 장치(100)의 음성 입력부(110)를 통해 입력된 사용자 음성에 의해 제어되는 제1 음성 태스크 모드로 전환한다. 그리고, 입력된 음성 개시 명령이 제2 음성 개시 명령인 경우, 전자 장치(100)는 외부기기의 음성 입력부(110)를 통해 입력된 사용자 음성에 의해 제어되는 제2 음성 태스크 모드로 전환한다.When the voice start command is input (S1210-Y), the electronic device 100 switches the mode of the electronic device 100 to the voice task mode (S1220). In this case, when the input voice start command is the first voice start command, the electronic device 100 switches to the first voice task mode controlled by the user voice input through the voice input unit 110 of the electronic device 100. do. When the input voice start command is the second voice start command, the electronic device 100 switches to the second voice task mode controlled by the user voice input through the voice input unit 110 of the external device.

음성 태스크 모드 수행하는 동안, 전자 장치(100)는 음성 인식 오류가 발생하였는지 여부를 판단한다(S1230). 이때, 음성 인식 오류가 발생하는 경우에는 음성 입력부(110)를 통해 입력된 사용자의 음성이 기 설정된 값보다 작은 경우, 음성 입력부(110)를 통해 입력된 사용자의 음성을 인식한 결과 음성 데이터베이스에 매칭되는 명령어가 없는 경우 및 사용자의 조작 미숙인 경우 중 적어도 하나를 포함할 수 있다.While performing the voice task mode, the electronic device 100 determines whether a voice recognition error has occurred (S1230). In this case, when a voice recognition error occurs, when the voice of the user input through the voice input unit 110 is smaller than a preset value, the voice of the user input through the voice input unit 110 is recognized and matched with the voice database. At least one of a case in which there is no command and a case in which an operation of a user is immature may be included.

음성 인식 오류가 발생되면(S1230-Y), 전자 장치(100)는 복수의 피드백 메시지 중 하나를 디스플레이한다(S1240). 이때, 피드백 메시지는 음성 태스크 모드 별, 음성 인식 오류별로 상이하게 디스플레이될 수 있다. 예를 들어, 제1 음성 태스크 모드에서 음성 인식 오류가 발생한 경우, 전자 장치(100)는 도 8에 도시된 복수의 피드백 메시지(801 내지 813) 중 하나를 디스플레이한다. 또는 제2 음성 태스크 모드에서 음성 인식 오류가 발생한 경우, 전자 장치(100)는 도 9 내지 도 11에 도시된 복수의 피드백 메시지(901 내지 915, 1001 내지 1007, 1101 내지 1106) 중 하나를 디스플레이할 수 있다. 이때, 최초로 음성 인식 오류가 발생된 경우, 전자 장치(100)는 복수의 피드백 메시지 중 디폴트된 피드백 메시지를 디스플레이할 수 있다.When a voice recognition error occurs (S1230-Y), the electronic device 100 displays one of the plurality of feedback messages (S1240). In this case, the feedback message may be displayed differently for each voice task mode and for each voice recognition error. For example, when a voice recognition error occurs in the first voice task mode, the electronic device 100 displays one of the plurality of feedback messages 801 to 813 illustrated in FIG. 8. Alternatively, when a voice recognition error occurs in the second voice task mode, the electronic device 100 may display one of the plurality of feedback messages 901 to 915, 1001 to 1007, and 1101 to 1106 illustrated in FIGS. 9 to 11. Can be. In this case, when a voice recognition error occurs for the first time, the electronic device 100 may display a default feedback message among the plurality of feedback messages.

그리고, 전자 장치(100)는 음성 인식 오류가 반복적으로 발생하였는지 여부를 판단한다(S1250). In operation S1250, the electronic device 100 determines whether a voice recognition error occurs repeatedly.

음성 인식 오류가 반복적으로 발생되면(S1250-Y), 전자 장치(100)는 복수의 피드백 메시지 중 다른 피드백 메시지를 랜덤하게 디스플레이할 수 있다(S1260).예를 들어, 제1 음성 태스크 모드에서 반복적으로 음성 인식 오류가 발생하면, 전자 장치(100)는 도 8에 도시된 제1 피드백 메시지(801)를 제외한 나머지 피드백 메시지(802 내지 813) 중 하나를 랜덤하게 디스플레이할 수 있다. 그리고, 제2 음성 태스크 모드에서 입력된 사용자 음성이 반복적으로 인식되지 못한 경우, 전자 장치(100)는 도 9에 도시된 제1 피드백 메시지(901)를 제외한 나머지 피드백 메시지(902 내지 915) 중 하나를 디스플레이할 수 있다. 제2 음성 태스크 모드에서 사용자 음성 입력 후에도 계속해서 음성 입력 버튼을 누르는 경우, 전자 장치(100)는 도 10에 도시된 제1 피드백 메시지(1001)를 제외한 나머지 피드백 메시지(1002 내지 1007) 중 하나를 기설정된 시간(예를 들어, 10초)마다 랜덤하게 디스플레이할 수 있다. 제2 음성 태스크 모드에서 음성 입력 버튼을 누른 후 기설정된 시간동안 계속해서 사용자 음성이 입력되지 않으면, 전자 장치(100)는 도 11에 도시된 제1 피드백 메시지(1101)를 제외한 나머지 피드백 메시지(1102 내지 1106) 중 하나를 기설정된 시간(예를 들어, 10초)마다 랜덤하게 디스플레이할 수 있다.If the voice recognition error occurs repeatedly (S1250-Y), the electronic device 100 may randomly display another feedback message among the plurality of feedback messages (S1260). For example, the voice recognition mode may be repeatedly performed in the first voice task mode. When the voice recognition error occurs, the electronic device 100 may randomly display one of the feedback messages 802 to 813 except for the first feedback message 801 illustrated in FIG. 8. If the user's voice input in the second voice task mode is not recognized repeatedly, the electronic device 100 may select one of the remaining feedback messages 902 to 915 except for the first feedback message 901 shown in FIG. 9. Can be displayed. When the voice input button is continuously pressed even after the user voice input in the second voice task mode, the electronic device 100 receives one of the remaining feedback messages 1002 to 1007 except for the first feedback message 1001 shown in FIG. 10. Random display may be performed every predetermined time (for example, 10 seconds). If the user's voice is not input for a predetermined time after the voice input button is pressed in the second voice task mode, the electronic device 100 receives the remaining feedback message 1102 except for the first feedback message 1101 shown in FIG. 11. 1106 may be randomly displayed every predetermined time (for example, 10 seconds).

상술한 바와 같이, 복수의 피드백 메시지가 음성 인식 오류별, 음성 태스크 모드별로 상이하게 제공됨으로써, 사용자는 음성인식의 오류를 정확하게 확인할 수 있게 된다. 또한, 사용자가 마치 전자 장치와 대화하는 듯한 효과를 얻을 수 있어, 엔터테인먼트적인 요소가 증가될 수 있게 된다.As described above, the plurality of feedback messages are differently provided for each voice recognition error and voice task mode, so that the user can accurately check the error of the voice recognition. In addition, it is possible to obtain an effect as if the user is talking to the electronic device, thereby increasing the entertainment factor.

이상과 같은 다양한 실시 예에 따른 제어 방법을 수행하기 위한 프로그램 코드는 다양한 유형의 기록 매체에 저장될 수 있다. 구체적으로는, RAM(Random Access Memory), 플레시메모리, ROM(Read Only Memory), EPROM(Erasable Programmable ROM), EEPROM(Electronically Erasable and Programmable ROM), 레지스터, 하드디스크, 리무버블 디스크, 메모리 카드, USB 메모리, CD-ROM 등과 같이, 단말기에서 판독 가능한 다양한 유형의 기록 매체에 저장되어 있을 수 있다.The program code for performing the control method according to the above various embodiments may be stored in various types of recording media. More specifically, it may be a random access memory (RAM), a flash memory, a ROM (Read Only Memory), an EPROM (Erasable Programmable ROM), an Electrically Erasable and Programmable ROM (EEPROM), a register, a hard disk, a removable disk, And may be stored in various types of recording media readable by a terminal, such as a memory, a CD-ROM, and the like.

이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is clearly understood that the same is by way of illustration and example only and is not to be construed as limiting the scope of the invention as defined by the appended claims. It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention.

110: 음성 입력부 120: 모션 입력부
130: 저장부 140: 제어부
150: 방송 수신부 160: 외부단자 입력부
170: 리모컨 신호 수신부 180: 네트워크 인터페이스부
190: 영상 출력부 193: 디스플레이부
196: 오디오 출력부110: voice input unit 120: motion input unit
130: storage unit 140:
150: broadcast receiver 160: external terminal input
170: Remote control signal receiving unit 180: Network interface unit
190: video output unit 193: display unit
196: Audio output section

Claims (30)

음성 인식이 가능한 전자 장치의 제어 방법에 있어서,
음성 개시 명령을 입력받는 단계; 및
상기 음성 개시 명령이 제1 음성 개시 명령이면, 상기 전자 장치의 음성 입력부에 입력된 사용자 음성에 따라 제어되는 제1 음성 태스크 모드로 전환하고, 상기 음성 개시 명령이 제2 음성 개시 명령이면, 상기 전자 장치와 연동하는 외부기기에 입력된 사용자 음성에 따라 제어되는 제2 음성 태스크 모드로 전환하는 단계를 포함하며,
상기 제1 음성 개시 명령은,
기 설정된 단어가 포함된 사용자의 음성 명령이며,
상기 제2 음성 개시 명령은,
상기 외부기기에 포함된 기 설정된 버튼이 눌러지는 사용자 명령인 것을 특징으로 하는 제어 방법.In the control method of an electronic device capable of speech recognition,
Receiving a voice start command; And
If the voice start command is a first voice start command, the electronic device switches to a first voice task mode controlled according to a user voice input to a voice input unit of the electronic device, and if the voice start command is a second voice start command, the electronic Switching to a second voice task mode controlled according to a user voice input to an external device interworking with the device,
The first voice start command,
Voice commands from the user with preset words.
The second voice start command is
And a user command of pressing a predetermined button included in the external device. 제1항에 있어서,
상기 전자 장치의 모드가 제1 음성 태스크 모드로 전환된 경우, 상기 제1 음성 태스크 모드에 대응되는 제1 음성 가이드 정보를 디스플레이하고, 상기 전자 장치의 모드가 제2 음성 태스크 모드로 전환된 경우, 상기 제2 음성 태스크 모드에 대응되는 제2 음성 가이드 정보를 디스플레이하는 단계;를 더 포함하는 제어 방법.The method of claim 1,
When the mode of the electronic device is switched to the first voice task mode, when the first voice guide information corresponding to the first voice task mode is displayed, and when the mode of the electronic device is switched to the second voice task mode, And displaying second voice guide information corresponding to the second voice task mode. 제2항에 있어서,
상기 제1 음성 가이드 정보는,
상기 제1 음성 태스크 모드를 수행하기 위해 사용자 음성을 안내하는 복수 개의 음성 아이템을 포함하고,
상기 제2 음성 가이드 정보는,
상기 제2 음성 태스크 모드를 수행하기 위해 사용자 음성을 안내하는 복수 개의 음성 아이템을 포함하며,
상기 제2 음성 가이드 정보에 포함된 복수 개의 음성 아이템 중 일부 음성 아이템은 상기 제1 음성 가이드 정보에 포함된 복수 개의 음성 아이템과 상이한 것을 특징으로 하는 제어 방법.3. The method of claim 2,
The first voice guide information,
A plurality of voice items for guiding a user voice to perform the first voice task mode,
The second voice guide information,
A plurality of voice items for guiding a user voice to perform the second voice task mode,
And some voice items of the plurality of voice items included in the second voice guide information are different from a plurality of voice items included in the first voice guide information. 제3항에 있어서,
상기 제1 음성 가이드 정보는 채널 업/다운 명령을 수행하기 위한 음성 아이템이 포함되고,
상기 제2 음성 가이드 정보는 채널 업/다운 명령을 수행하기 위한 음성 아이템이 포함되지 않고, 채널 리스트 제공을 위한 음성 아이템이 포함되는 것을 특징으로 하는 제어 방법.The method of claim 3,
The first voice guide information includes a voice item for performing a channel up / down command.
The second voice guide information does not include a voice item for performing a channel up / down command, but a voice item for providing a channel list. 제2항에 있어서,
상기 제1 음성 가이드 정보는 상기 제1 음성 태스크 모드를 나타내는 아이콘 영역을 포함하고,
상기 제2 음성 가이드 정보는 상기 제2 음성 태스크 모드를 나타내는 아이콘 영역을 포함하는 것을 특징으로 하는 제어 방법.3. The method of claim 2,
The first voice guide information includes an icon area indicating the first voice task mode.
And the second voice guide information includes an icon area indicating the second voice task mode. 제1항에 있어서,
상기 제2 음성 태스크 모드는,
상기 외부기기의 기 설정된 제2 버튼이 눌러지고, 상기 외부기기에 입력된 사용자 음성에 의해 제어되는 것을 특징으로 하는 제어 방법.The method of claim 1,
The second voice task mode,
And a predetermined second button of the external device is pressed and controlled by a user voice input to the external device. 삭제delete 제1항에 있어서,
상기 외부기기는 리모컨인 것을 특징으로 하는 제어 방법.The method of claim 1,
The external device is a control method, characterized in that the remote control. 전자 장치에 있어서,
사용자 음성을 입력받는 음성 입력부; 및
음성 태스크 모드로 진입하기 위한 음성 개시 명령이 제1 음성 개시 명령이면, 상기 전자 장치의 음성 입력부에 입력된 사용자 음성에 따라 제어되는 제1 음성 태스크 모드로 전환하며, 상기 음성 개시 명령이 제2 음성 개시 명령이면, 상기 전자 장치와 연동하는 외부기기에 입력된 사용자 음성에 따라 제어되는 제2 음성 태스크 모드로 전환하는 제어부;를 포함하며,
상기 제1 음성 개시 명령은,
기 설정된 단어가 포함된 사용자의 음성 명령이며,
상기 제2 음성 개시 명령은,
상기 외부기기에 포함된 기 설정된 버튼이 눌러지는 사용자 명령인 것을 특징으로 하는 전자 장치.In an electronic device,
A voice input unit for receiving a user voice; And
If the voice initiation command for entering the voice task mode is a first voice initiation command, the user enters a first voice task mode controlled according to a user voice input to a voice input unit of the electronic device, and the voice initiation command is a second voice initiation command. And a control unit for switching to a second voice task mode controlled according to a user voice input to an external device interworking with the electronic device if the command is a start command.
The first voice start command,
Voice commands from the user with preset words.
The second voice start command is
And a user command that a predetermined button included in the external device is pressed. 제9항에 있어서,
디스플레이부;를 더 포함하며,
상기 제어부는,
상기 전자 장치의 모드가 제1 음성 태스크 모드로 전환된 경우, 상기 제1 음성 태스크 모드에 대응되는 제1 음성 가이드 정보를 디스플레이하고, 상기 전자 장치의 모드가 제2 음성 태스크 모드로 전환된 경우, 상기 제2 음성 태스크 모드에 대응되는 제2 음성 가이드 정보를 디스플레이하도록 상기 디스플레이부를 제어하는 것을 특징으로 하는 전자 장치.10. The method of claim 9,
And a display unit,
The control unit,
When the mode of the electronic device is switched to the first voice task mode, when the first voice guide information corresponding to the first voice task mode is displayed, and when the mode of the electronic device is switched to the second voice task mode, And control the display unit to display second voice guide information corresponding to the second voice task mode. 제10항에 있어서,
상기 제1 음성 가이드 정보는,
상기 제1 음성 태스크 모드를 수행하기 위해 사용자 음성을 안내하는 복수 개의 음성 아이템을 포함하고,
상기 제2 음성 가이드 정보는,
상기 제2 음성 태스크 모드를 수행하기 위해 사용자 음성을 안내하는 복수 개의 음성 아이템을 포함하며,
상기 제2 음성 가이드 정보에 포함된 복수 개의 음성 아이템 중 일부 음성 아이템은 상기 제1 음성 가이드 정보에 포함된 복수 개의 음성 아이템과 상이한 것을 특징으로 하는 전자 장치.The method of claim 10,
The first voice guide information,
A plurality of voice items for guiding a user voice to perform the first voice task mode,
The second voice guide information,
A plurality of voice items for guiding a user voice to perform the second voice task mode,
And some voice items of the plurality of voice items included in the second voice guide information are different from a plurality of voice items included in the first voice guide information. 제11항에 있어서,
상기 제1 음성 가이드 정보는 채널 업/다운 명령을 수행하기 위한 음성 아이템이 포함되고,
상기 제2 음성 가이드 정보는 채널 업/다운 명령을 수행하기 위한 음성 아이템이 포함되지 않고, 채널 리스트 제공을 위한 음성 아이템이 포함되는 것을 특징으로 하는 전자 장치.12. The method of claim 11,
The first voice guide information includes a voice item for performing a channel up / down command.
The second voice guide information does not include a voice item for performing a channel up / down command, but includes a voice item for providing a channel list. 제10항에 있어서,
상기 제1 음성 가이드 정보는 상기 제1 음성 태스크 모드를 나타내는 아이콘 영역을 포함하고,
상기 제2 음성 가이드 정보는 상기 제2 음성 태스크 모드를 나타내는 아이콘 영역을 포함하는 것을 특징으로 하는 전자 장치.The method of claim 10,
The first voice guide information includes an icon area indicating the first voice task mode.
The second voice guide information includes an icon area indicating the second voice task mode. 제9항에 있어서,
상기 제2 음성 태스크 모드는,
상기 외부기기의 기 설정된 제2 버튼이 눌러지고, 상기 외부기기에 입력된 사용자 음성에 의해 제어되는 것을 특징으로 하는 전자 장치.10. The method of claim 9,
The second voice task mode,
And a predetermined second button of the external device is pressed and controlled by a user voice input to the external device. 삭제delete 제9항에 있어서,
상기 외부기기는 리모컨인 것을 특징으로 하는 전자 장치.10. The method of claim 9,
The external device is a remote control device, characterized in that. 전자 장치의 제어 방법에 있어서,
음성 입력부를 통해 음성 개시 명령을 입력받는 단계;
상기 음성 개시 명령이 입력되면, 전자 장치의 모드를 음성 태스크 모드로 전환하는 단계;및
상기 음성 태스크 모드에서 음성 인식 오류가 발생된 경우, 음성 인식 오류 안내를 안내하기 위한 복수의 피드백 메시지 중 하나를 디스플레이하는 단계;를 포함하며,
상기 음성 태스크 모드는,
상기 전자 장치의 음성 입력부에 입력된 사용자 음성에 따라 제어되는 제1 음성 태스크 모드 및 상기 전자 장치와 연동하는 외부기기에 입력된 사용자 음성에 따라 제어되는 제2 음성 태스크 모드를 포함하고,
상기 복수의 피드백 메시지는,
상기 음성 태스크 모드의 종류에 따라 상이한 것을 특징으로 하는 제어 방법.A method of controlling an electronic device,
Receiving a voice start command through a voice input unit;
Switching the mode of the electronic device to a voice task mode when the voice start command is input; and
And displaying one of a plurality of feedback messages for guiding a voice recognition error when a voice recognition error occurs in the voice task mode.
The voice task mode,
A first voice task mode controlled according to a user voice input to a voice input unit of the electronic device and a second voice task mode controlled according to a user voice input to an external device interoperating with the electronic device;
The plurality of feedback messages,
And a control method according to the type of the voice task mode. 제17항에 있어서,
상기 음성 태스크 모드에서 음성 인식 오류가 반복적으로 발생된 경우, 상기 복수의 피드백 메시지 중 하나를 랜덤하게 선택하여 디스플레이하는 단계;를 포함하는 것을 특징으로 하는 제어 방법.18. The method of claim 17,
And randomly selecting and displaying one of the plurality of feedback messages when a voice recognition error occurs repeatedly in the voice task mode. 삭제delete 삭제delete 제17항에 있어서,
상기 복수의 피드백 메시지는,
상기 음성 인식 오류의 종류에 따라 상이한 것을 특징으로 하는 제어 방법.18. The method of claim 17,
The plurality of feedback messages,
And a control method according to the type of the voice recognition error. 제17항에 있어서,
상기 음성 인식 오류는,
상기 음성 입력부를 통해 입력된 사용자 음성을 명확히 인지하지 못하는 오류, 사용자 음성을 입력한 후에 기설정된 시간 동안 외부기기의 인식 버튼을 기설정된 시간동안 누르고 있는 오류 및 상기 외부기기의 인식 버튼을 누른 후에 기설정된 시간 동안 사용자 음성이 입력되지 않은 오류 중 적어도 하나를 포함하는 것을 특징으로 하는 제어 방법.18. The method of claim 17,
The speech recognition error,
Errors that do not clearly recognize the user's voice input through the voice input unit, an error of pressing the recognition button of the external device for a preset time after inputting the user's voice, and after pressing the recognition button of the external device. And at least one of an error in which the user's voice is not input for a predetermined time. 제17항에 있어서,
상기 디스플레이하는 단계는,
상기 음성 인식 오류가 처음 발생된 경우, 디폴트(default)된 피드백 메시지를 디스플레이하는 것을 특징으로 하는 제어 방법.18. The method of claim 17,
Wherein the displaying comprises:
And displaying a default feedback message when the speech recognition error occurs for the first time. 전자 장치에 있어서,
사용자 음성을 입력받는 음성 입력부;
디스플레이부; 및
상기 음성 입력부를 통해 음성 개시 명령이 입력되면, 전자 장치의 모드를 음성 태스크 모드로 전환하고, 상기 음성 태스크 모드에서 음성 인식 오류가 발생된 경우, 음성 인식 오류 안내를 안내하기 위한 복수의 피드백 메시지 중 하나를 상기 디스플레이부에 디스플레이하는 제어부;를 포함하며,
상기 음성 태스크 모드는,
상기 전자 장치의 음성 입력부에 입력된 사용자 음성에 따라 제어되는 제1 음성 태스크 모드 및 상기 전자 장치와 연동하는 외부기기에 입력된 사용자 음성에 따라 제어되는 제2 음성 태스크 모드를 포함하고,
상기 복수의 피드백 메시지는,
상기 음성 태스크 모드의 종류에 따라 상이한 것을 특징으로 하는 전자 장치.In an electronic device,
A voice input unit for receiving a user voice;
A display unit; And
When a voice initiation command is input through the voice input unit, a mode of the electronic device is switched to a voice task mode, and when a voice recognition error occurs in the voice task mode, a plurality of feedback messages for guiding voice recognition error guidance are provided. And a controller for displaying one to the display unit.
The voice task mode,
A first voice task mode controlled according to a user voice input to a voice input unit of the electronic device and a second voice task mode controlled according to a user voice input to an external device interoperating with the electronic device;
The plurality of feedback messages,
The electronic device may vary according to the type of the voice task mode. 제24항에 있어서,
상기 제어부는,
상기 음성 태스크 모드에서 음성 인식 오류가 반복적으로 발생된 경우, 상기 복수의 피드백 메시지 중 하나를 랜덤하게 선택하여 디스플레이하는 것을 특징으로 하는 전자 장치.25. The method of claim 24,
The control unit,
And when a voice recognition error occurs repeatedly in the voice task mode, randomly select and display one of the plurality of feedback messages. 삭제delete 삭제delete 제24항에 있어서,
상기 복수의 피드백 메시지는,
상기 음성 인식 오류의 종류에 따라 상이한 것을 특징으로 하는 전자 장치.25. The method of claim 24,
The plurality of feedback messages,
The electronic device according to the type of the speech recognition error, characterized in that different. 제24항에 있어서,
상기 음성 인식 오류는,
상기 음성 입력부를 통해 입력된 사용자 음성을 명확히 인지하지 못하는 오류, 사용자 음성을 입력한 후에 기설정된 시간 동안 외부기기의 인식 버튼을 기설정된 시간동안 누르고 있는 오류 및 상기 외부기기의 인식 버튼을 누른 후에 기설정된 시간 동안 사용자 음성이 입력되지 않은 오류 중 적어도 하나를 포함하는 것을 특징으로 하는 전자 장치.25. The method of claim 24,
The speech recognition error,
Errors that do not clearly recognize the user's voice input through the voice input unit, an error of pressing the recognition button of the external device for a preset time after inputting the user's voice, and after pressing the recognition button of the external device. And at least one of an error in which a user voice is not input for a set time. 제24항에 있어서,
상기 제어부는,
상기 음성 인식 오류가 처음 발생된 경우, 디폴트(default)된 피드백 메시지를 상기 디스플레이부에 디스플레이하는 것을 특징으로 하는 전자 장치.25. The method of claim 24,
The control unit,
And displaying a default feedback message on the display unit when the voice recognition error occurs for the first time.
KR1020120058340A 2011-12-30 2012-05-31 Electronic apparatus and Method for controlling electronic apparatus thereof KR101324232B1 (en)

Priority Applications (9)

Application Number Priority Date Filing Date Title
EP12187522.3A EP2610862B1 (en) 2011-12-30 2012-10-05 Electronic apparatus and method of controlling electronic apparatus
EP14200231.0A EP2860726B1 (en) 2011-12-30 2012-10-05 Electronic apparatus and method of controlling electronic apparatus
US13/648,314 US8650036B2 (en) 2011-12-30 2012-10-10 Electronic apparatus and method of controlling electronic apparatus
CN2012104254239A CN103187063A (en) 2011-12-30 2012-10-30 Electronic apparatus and method of controlling electronic apparatus
PCT/KR2012/009896 WO2013100366A1 (en) 2011-12-30 2012-11-22 Electronic apparatus and method of controlling electronic apparatus
AU2012261686A AU2012261686B2 (en) 2011-12-30 2012-12-07 Electronic apparatus and method of controlling electronic apparatus
JP2012267779A JP5535298B2 (en) 2011-12-30 2012-12-07 Electronic device and control method thereof
US14/152,011 US20140129234A1 (en) 2011-12-30 2014-01-10 Electronic apparatus and method of controlling electronic apparatus
US14/247,328 US9148688B2 (en) 2011-12-30 2014-04-08 Electronic apparatus and method of controlling electronic apparatus

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR20110147488 2011-12-30
KR20110147453 2011-12-30
KR1020110147453 2011-12-30
KR1020110147488 2011-12-30

Publications (2)

Publication Number Publication Date
KR20130079096A KR20130079096A (en) 2013-07-10
KR101324232B1 true KR101324232B1 (en) 2013-11-01

Family

ID=48991913

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120058340A KR101324232B1 (en) 2011-12-30 2012-05-31 Electronic apparatus and Method for controlling electronic apparatus thereof

Country Status (1)

Country Link
KR (1) KR101324232B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020045927A1 (en) * 2018-08-30 2020-03-05 Samsung Electronics Co., Ltd. Electronic device and method for generating short cut of quick command

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023068405A1 (en) * 2021-10-21 2023-04-27 엘지전자 주식회사 Display device

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080038896A (en) * 2006-10-31 2008-05-07 삼성전자주식회사 Method and apparatus for alarming of speech-recognition error
KR20100011786A (en) * 2008-07-25 2010-02-03 엘지전자 주식회사 Mobile terminal and method for recognition voice command thereof

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080038896A (en) * 2006-10-31 2008-05-07 삼성전자주식회사 Method and apparatus for alarming of speech-recognition error
KR20100011786A (en) * 2008-07-25 2010-02-03 엘지전자 주식회사 Mobile terminal and method for recognition voice command thereof

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020045927A1 (en) * 2018-08-30 2020-03-05 Samsung Electronics Co., Ltd. Electronic device and method for generating short cut of quick command
US11188298B2 (en) 2018-08-30 2021-11-30 Samsung Electronics Co., Ltd. Electronic device and method for generating short cut of quick command
US11868680B2 (en) 2018-08-30 2024-01-09 Samsung Electronics Co., Ltd. Electronic device and method for generating short cut of quick command

Also Published As

Publication number Publication date
KR20130079096A (en) 2013-07-10

Similar Documents

Publication Publication Date Title
JP5535298B2 (en) Electronic device and control method thereof
KR102003267B1 (en) Electronic apparatus and Method for controlling electronic apparatus thereof
KR20130078486A (en) Electronic apparatus and method for controlling electronic apparatus thereof
KR101262700B1 (en) Method for Controlling Electronic Apparatus based on Voice Recognition and Motion Recognition, and Electric Apparatus thereof
JP5746111B2 (en) Electronic device and control method thereof
JP5819269B2 (en) Electronic device and control method thereof
JP6111030B2 (en) Electronic device and control method thereof
JP2013037689A (en) Electronic equipment and control method thereof
JP2014532933A (en) Electronic device and control method thereof
KR101237472B1 (en) Electronic apparatus and method for controlling electronic apparatus thereof
KR101324232B1 (en) Electronic apparatus and Method for controlling electronic apparatus thereof
KR20140085055A (en) Electronic apparatus and Method for controlling electronic apparatus thereof
KR20130078483A (en) Electronic apparatus and method for controlling electronic apparatus thereof
KR20130080380A (en) Electronic apparatus and method for controlling electronic apparatus thereof
KR102066564B1 (en) Electronic apparatus and Method for controlling electronic apparatus thereof
KR20130078490A (en) Electronic apparatus and method for controlling electronic apparatus thereof
KR20140089238A (en) Electronic apparatus and Method for controlling electronic apparatus thereof
KR20130078489A (en) Electronic apparatus and method for setting angle of view thereof

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20160929

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20170927

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20180921

Year of fee payment: 6