KR20170054367A - Electronic apparatus and control method thereof - Google Patents

Electronic apparatus and control method thereof Download PDF

Info

Publication number
KR20170054367A
KR20170054367A KR1020170057482A KR20170057482A KR20170054367A KR 20170054367 A KR20170054367 A KR 20170054367A KR 1020170057482 A KR1020170057482 A KR 1020170057482A KR 20170057482 A KR20170057482 A KR 20170057482A KR 20170054367 A KR20170054367 A KR 20170054367A
Authority
KR
South Korea
Prior art keywords
voice
identification tag
user
display
tag
Prior art date
Application number
KR1020170057482A
Other languages
Korean (ko)
Inventor
박은희
유소연
한상진
김재권
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020170057482A priority Critical patent/KR20170054367A/en
Publication of KR20170054367A publication Critical patent/KR20170054367A/en

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Databases & Information Systems (AREA)
  • Acoustics & Sound (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

An electronic device is disclosed. The electronic device comprises: a voice input unit configured to receive a user voice; a display unit configured to provide a UI screen including at least one object; and a control unit configured to determine whether it is possible to call the object by the user voice, assign an identification tag to the object and display the object wherein the identification tag is to identify the object based on a determination result.

Description

전자 장치 및 그 제어 방법 { ELECTRONIC APPARATUS AND CONTROL METHOD THEREOF }ELECTRONIC APPARATUS AND CONTROL METHOD THEREOF FIELD OF THE INVENTION [0001]

본 발명은 전자 장치 및 그 제어 방법에 관한 것으로 더욱 상세하게는 사용자의 음성에 따라 제어되는 전자 장치 및 그 제어 방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an electronic device and a control method thereof, and more particularly, to an electronic device controlled according to a user's voice and a control method thereof.

전자 기술의 발달에 힘입어 다양한 종류의 전자 장치가 개발되어 보급되고 사용자의 요구에 따라 점차 다양한 기능을 구비하게 되었다. 특히, TV의 경우, 최근에는 인터넷과 연결되어 인터넷 서비스까지 지원하고, 사용자는 TV를 통해 많은 수의 디지털 방송 채널까지 시청할 수 있게 되었다. Due to the development of electronic technology, various kinds of electronic devices have been developed and distributed, and various functions have gradually been provided according to the needs of users. Especially, in the case of TV, recently, it is connected to the Internet to support Internet service, and users can view a large number of digital broadcasting channels through the TV.

한편, 최근에는 전자 장치를 조금 더 편리하고 직관적으로 제어하기 위하여 음성 인식을 이용한 기술이 개발되고 있다. 특히, TV의 경우, 사용자의 음성을 인식하고, 볼륨 조절 또는 채널 변경과 같이 사용자의 음성에 대응되는 기능을 수행할 수 있게 되었다.In recent years, technologies using speech recognition have been developed to control electronic devices more conveniently and intuitively. Particularly, in the case of TV, it is possible to recognize a voice of a user and to perform a function corresponding to the user's voice, such as volume control or channel change.

하지만 종래의 음성 인식을 이용한 제어 방법에 따르면, 제한된 네비게이션 명령어를 이용하여 포커스로 화면 상의 메뉴를 일일이 탐색하여야 하므로 사용성이 떨어진다는 문제점이 있었다. However, according to the conventional control method using speech recognition, there is a problem that usability is deteriorated because a menu on the screen is searched for by using a limited navigation command.

본 발명은 상술한 필요성에 따른 것으로, 본 발명의 목적은 음성 인식 기술을 이용한 객체 호출을 용이하게 하는 전자 장치 및 그 제어 방법을 제공함에 있다.It is an object of the present invention to provide an electronic device and a control method thereof facilitating object calling using a speech recognition technology.

이상과 같은 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 사용자의 음성에 의해 제어되는 전자 장치는, 사용자 음성을 입력받는 음성 입력부, 적어도 하나의 객체를 포함하는 UI 화면을 제공하는 디스플레이부 및, 상기 객체에 대해 상기 사용자 음성에 의한 호출 가능 여부를 판단하고, 상기 판단 결과에 기초하여 상기 객체를 식별하기 위한 식별 태그를 상기 객체에 부여하여 디스플레이하는 제어부를 포함한다. According to another aspect of the present invention, there is provided an electronic device controlled by a user's voice, comprising: a voice input unit for inputting a user voice; a display unit for providing a UI screen including at least one object; And a controller for determining whether or not the object can be called by the user's voice and displaying an identification tag for identifying the object on the basis of the determination result.

또한, 상기 제어부는, 객체에 대한 음성 호출이 가능하도록 하는 텍스트 항목이 상기 객체에 태깅되어 있지 않은 경우, 상기 식별 태그를 부여하여 디스플레이할 수 있다. In addition, the control unit can display and provide the identification tag when a text item enabling a voice call to the object is not tagged to the object.

이 경우, 상기 텍스트 항목이 태깅되어 있지 않은 객체는, 썸네일 속성 또는 리스트 속성을 갖는 객체가 될 수 있다. In this case, the object to which the text item is not tagged may be an object having a thumbnail attribute or a list attribute.

또한, 상기 제어부는, 상기 사용자 음성에 의해 상기 식별 태그가 호출되면, 상기 식별 태그가 부여된 객체에 대한 태스크를 수행할 수 있다. In addition, when the identification tag is called by the user's voice, the control unit may perform a task on the object to which the identification tag is attached.

또한, 상기 제어부는, 상기 UI 화면 상에서 상기 객체가 디스플레이된 순서에 기초하여 순차적으로 상기 식별 태그를 부여하여 디스플레이할 수 있다. In addition, the control unit may sequentially display the identification tags by assigning the identification tags based on the order in which the objects are displayed on the UI screen.

이 경우, 상기 식별 태그는, 기설정된 순서를 갖는 숫자 태그 및 알파벳 태그 중 적어도 하나가 될 수 있다. In this case, the identification tag may be at least one of a numeric tag and an alphabet tag having a preset order.

또한, 상기 제어부는, 상기 식별 태그 및 상기 사용자 음성에 의해 호출이 가능한 텍스트 항목 중 적어도 하나에 음성 호출이 가능함을 나타내는 기설정된 GUI를 부가하여 디스플레이할 수 있다. In addition, the control unit may display at least one of the identification tag and the text item that can be called by the user voice, in addition to a predetermined GUI indicating that the voice call is possible.

한편, 본 발명의 일 실시 예에 따른 사용자의 음성에 의해 제어되는 전자 장치의 제어 방법은, 적어도 하나의 객체를 포함하는 UI 화면을 제공하기 위한 사용자 명령을 입력받는 단계, 상기 객체에 대해 사용자 음성에 의한 호출 가능 여부를 판단하는 단계 및, 상기 판단 결과에 기초하여 상기 객체를 식별하기 위한 식별 태그를 상기 객체에 부여하여 디스플레이하는 단계를 포함한다. According to another aspect of the present invention, there is provided a method of controlling an electronic device controlled by a user's voice, the method comprising: receiving a user command for providing a UI screen including at least one object; Determining whether or not a call can be made by the display device, and displaying and providing an identification tag for identifying the object based on the determination result to the object.

이 경우, 상기 호출 가능 여부를 판단하는 단계는, 객체에 대한 음성 호출이 가능하도록 하는 텍스트 항목이 상기 객체에 태깅되어 있지 않은 경우 호출이 불가능하다고 판단하고, 상기 디스플레이하는 단계는, 상기 호출이 불가능하다고 판단된 객체에 상기 식별 태그를 부여하여 디스플레이할 수 있다. In this case, the step of determining whether or not the call is possible determines that a call is not possible if a text item enabling a voice call to the object is not tagged to the object, It is possible to display the identification tag by assigning the identification tag to the object.

여기서, 상기 텍스트 항목이 태깅되어 있지 않은 객체는, 썸네일 속성 또는 리스트 속성을 갖는 객체가 될 수 있다. Here, the object to which the text item is not tagged may be an object having a thumbnail attribute or a list attribute.

또한, 상기 사용자 음성에 의해 상기 식별 태그가 호출되면, 상기 식별 태그가 부여된 객체에 대한 태스크를 수행하는 단계를 더 포함할 수 있다. The method may further include performing a task on the object to which the identification tag is attached when the identification tag is called by the user voice.

또한, 상기 디스플레이하는 단계는, 상기 UI 화면 상에서 상기 객체가 디스플레이된 순서에 기초하여 순차적으로 상기 식별 태그를 부여하여 디스플레이할 수 있다. In addition, the displaying step may sequentially display the identification tags by assigning the identification tags based on the order in which the objects are displayed on the UI screen.

이 경우, 상기 식별 태그는, 기설정된 순서를 갖는 숫자 태그 및 알파벳 태그 중 적어도 하나가 될 수 있다. In this case, the identification tag may be at least one of a numeric tag and an alphabet tag having a preset order.

또한, 상기 디스플레이하는 단계는, 상기 식별 태그 및 상기 사용자 음성에 의해 호출이 가능한 텍스트 항목 중 적어도 하나에 음성 호출이 가능함을 나타내는 기설정된 GUI를 부가하여 디스플레이할 수 있다. In addition, the displaying step may display a predetermined GUI, which indicates that a voice call can be made to at least one of the identification tag and the text item which can be called by the user's voice.

이상과 같은 본 발명의 다양한 실시 예에 따르면, 음성 인식 기술을 이용하여 전자 장치를 편리하게 제어할 수 있게 된다. According to various embodiments of the present invention as described above, it becomes possible to conveniently control the electronic device using the speech recognition technology.

도 1은 본 발명의 일 실시 예에 따른 전자 장치의 구성을 나타내는 블럭도이다.
도 2는 본 발명의 다른 실시 예에 따른, 전자 장치의 구성을 나타내는 블럭도를 도시한 도면이다.
도 3은 본 발명의 일 실시 예에 따른 저장부에 저장된 소프트웨어 구성을 설명하기 위한 도면이다.
도 4는 본 발명의 일 실시 예에 따른 대화형 시스템을 설명하기 위한 도면이다.
도 5 내지 7은 본 발명의 다양한 실시 예에 따른 UI 제공 방법에 대해 설명하기 위한 도면들이다.
도 8은 본 발명의 일 실시 예에 따른 전자 장치의 제어 방법을 설명하기 위한 흐름도이다. 1 is a block diagram showing the configuration of an electronic device according to an embodiment of the present invention.
2 is a block diagram showing the configuration of an electronic device according to another embodiment of the present invention.
3 is a diagram for explaining a software configuration stored in a storage unit according to an embodiment of the present invention.
4 is a view for explaining an interactive system according to an embodiment of the present invention.
5 to 7 are views for explaining a UI providing method according to various embodiments of the present invention.
8 is a flowchart illustrating a method of controlling an electronic device according to an embodiment of the present invention.

이하에서는 첨부된 도면을 참조하여 본 발명을 보다 상세하게 설명한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS The present invention will now be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시 예에 따른 전자 장치의 구성을 나타내는 블럭도이다. 1 is a block diagram showing the configuration of an electronic device according to an embodiment of the present invention.

도 1에 따르면, 전자 장치(100)는 음성 입력부(110), 디스플레이부(120) 및 제어부(130)를 포함한다.Referring to FIG. 1, an electronic device 100 includes a voice input unit 110, a display unit 120, and a control unit 130.

전자 장치(100)는 스마트 TV일 수 있으나, 이는 일 실시 예에 불과할 뿐 스마트 폰, 태블릿 PC, 노트북 PC 등과 같은 다양한 전자 장치로 구현될 수 있다.The electronic device 100 may be a smart TV, but it may be implemented in a variety of electronic devices such as smart phones, tablet PCs, notebook PCs, and the like, and is merely an example.

전자 장치(100)는 사람의 자연스러운 발성에 의한 음성을 인식하여 실행 명령어로서 받아들이는 음성 인식 기능을 수행하도록 구현될 수 있다. 여기서, 음성 인식이란, 자동적 수단에 의하여 음성으로부터 언어적 의미 내용을 식별하는 것으로, 구체적으로 음성 파형을 입력하여 단어나 단어열을 식별하고 의미를 추출하는 처리 과정이며, 크게 음성 분석, 음소 인식, 단어 인식, 문장 해석, 의미 추출하는 과정에 의해 수행될 수 있는데 이에 대한 자세한 설명은 생략하도록 한다. The electronic device 100 can be implemented to perform a voice recognition function that recognizes a voice due to human natural voice utterance and accepts the voice as an execution command. Here, speech recognition is a process of recognizing verbally meaningful contents from speech by automatic means, specifically, a process of identifying a word or a word sequence by inputting a speech waveform and extracting a meaning, and is largely classified into speech analysis, phoneme recognition, Word recognition, sentence interpretation, and semantic extraction, but a detailed description thereof will be omitted.

음성 입력부(110)는 사용자가 발화(utterance)한 음성을 입력받는다. 음성 입력부(110)는 입력된 음성 신호를 전기 신호로 변환하여 제어부(130)로 출력한다. 예를 들어, 음성 입력부(110)는 마이크로폰으로 구현될 수 있다. 또한, 음성 입력부(110)는 전자 장치(100)와 일체형(all-in-one)뿐만 아니라 분리된 형태로 구현될 수 있다. 분리된 음성 입력부(110)는 전자 장치(100)와 유선 또는 무선 네트워크를 통하여 연결될 수 있다. The voice input unit 110 receives a voice uttered by the user. The voice input unit 110 converts the input voice signal into an electric signal and outputs the electric signal to the controller 130. For example, the voice input unit 110 may be implemented as a microphone. In addition, the voice input unit 110 may be implemented as an all-in-one as well as an isolated form with the electronic device 100. The separated voice input unit 110 may be connected to the electronic device 100 via a wired or wireless network.

디스플레이부(120)는 방송 수신부를 통해 수신된 방송 신호에 대응되는 영상을 표시한다. 디스플레이부(120)는 외부 단자 입력부를 통해 입력되는 영상 데이터(예를 들어, 동영상)를 표시할 수 있다. The display unit 120 displays an image corresponding to the broadcast signal received through the broadcast receiver. The display unit 120 may display image data (e.g., moving image) input through the external terminal input unit.

특히, 디스플레이부(120)는 다양한 객체를 포함하는 UI 화면을 디스플레이할 수 있다. 예를 들어, 디스플레이부(120)는 복수의 영화 컨텐츠를 제공하는 UI 화면에서 영화 컨텐츠 각각에 대응되는 복수의 썸네일을 포함하는 UI 화면을 디스플레이할 수 있다. In particular, the display unit 120 may display a UI screen including various objects. For example, the display unit 120 may display a UI screen including a plurality of thumbnails corresponding to respective movie contents on a UI screen providing a plurality of movie contents.

제어부(130)는 음성 입력부(110) 및 디스플레이부(120)를 제어한다. 여기서, 제어부(130)는 CPU(central processing unit) 및 전자 장치(100)를 제어하기 위한 모듈 및 데이터를 저장하는 ROM(Read Only Memory) 및 RAM(Random Access Memory)을 포함할 수 있다. The control unit 130 controls the voice input unit 110 and the display unit 120. The control unit 130 may include a ROM (Read Only Memory) and a RAM (Random Access Memory) for storing a module for controlling the CPU (central processing unit) and the electronic device 100, and data.

특히, 제어부(130)는 디스플레이부(120)에 디스플레이되는 객체에 대해 사용자 음성에 의한 호출 가능 여부를 판단하고 판단 결과에 기초하여 객체를 식별하기 위한 식별 태그를 객체에 부여하여 디스플레이할 수 있다. In particular, the control unit 130 may determine whether the object displayed on the display unit 120 can be called by the user's voice, display an identification tag for identifying the object based on the determination, and display the identification tag on the object.

구체적으로, 제어부(130)는 객체에 대한 음성 호출이 가능하도록 하는 텍스트 항목이 객체에 태깅되어 있지 않은 경우, 사용자 음성에 의한 호출이 불가능하다고 판단하고 식별 태그를 부여하여 디스플레이할 수 있다. Specifically, if the text item enabling the voice call to the object is not tagged to the object, the control unit 130 determines that the call can not be made by the user's voice and can display and display the identification tag.

예를 들어, 썸네일 속성을 갖는 객체나 리스트 속성을 갖는 객체는 일반적으로 사용자가 이를 음성으로 호출할 수 있는 텍스트 항목을 갖지 못한다. 이에 따라 사용자가 이를 식별하여 호출할 수 있는 식별 태그를 부여하여 사용자의 음성 호출이 가능하도록 할 수 있다. For example, an object with a thumbnail attribute or an object with a list attribute typically does not have a text item that the user can call it by voice. Accordingly, a user can identify and call an identification tag that can be called so that the user can make a voice call.

이 경우, 제어부(130)는 UI 화면 상에서 객체가 디스플레이된 순서에 기초하여 순차적으로 식별 태그를 부여하여 디스플레이할 수 있다. 여기서, 식별 태그는 식별 태그는, 기설정된 순서를 갖는 숫자 태그 및 알파벳 태그 중 적어도 하나가 될 수 있지만, 이에 한정되는 것은 아니다. In this case, the control unit 130 may sequentially assign and display the identification tag based on the order in which the objects are displayed on the UI screen. Here, the identification tag may be at least one of a numeric tag and an alphabet tag having a predetermined order, but the present invention is not limited thereto.

예를 들어, 화면 상에 5개의 영화 썸네일이 디스플레이되는 경우 디스플레이된 순서에 따라 1 내지 5의 식별 태그를 부여하여 사용자가 식별 태그를 이용하여 원하는 영화 썸네일을 음성으로 호출가능하도록 할 수 있다. For example, when five movie thumbnails are displayed on the screen, identification tags of 1 to 5 may be assigned according to the displayed order so that a user can voice-call a desired movie thumbnail using the identification tag.

또한, 제어부(130)는 음성 호출이 가능한 호출 텍스트에 호출이 가능함을 나타내는 기설정된 GUI를 부가하여 디스플레이할 수 있다. 이 경우, 음성 호출이 가능한 텍스트 항목에는 상술한 식별 태그가 포함될 수 있음은 물론이다. 하지만, 식별 태그 외에도 음성 호출이 가능한 다른 텍스트 항목들이 포함될 수 있음은 물론이다.In addition, the control unit 130 can display a call text capable of making a voice call by adding a predetermined GUI indicating that the call can be made. In this case, it is a matter of course that the above-mentioned identification tag may be included in the text item in which the voice call is possible. However, it is needless to say that other text items capable of voice call may be included in addition to the identification tag.

예를 들어, 특정 메뉴 항목이 음성 호출이 가능한 "Sub category" 라는 텍스트로 구성되는 경우 해당 텍스트에 기설정된 GUI를 부가하여 디스플레이할 수 있다. 여기서, 호출이 가능함을 나타내는 기설정된 GUI는, 따옴표 형태의 GUI가 될 수 있으나, 이에 한정되는 것은 아니다. 예를 들어, 말풍선 형태의 GUI와 같은 사용자에게 호출가능함을 인식시킬 수 있는 GUI라면 이에 한정되지 않고 적용가능하다.For example, when a specific menu item is composed of a text called "Sub category " in which a voice call is possible, a predetermined GUI may be added to the text and displayed. Here, the predetermined GUI indicating that the call is possible may be a GUI in the form of a quote, but is not limited thereto. For example, the present invention is not limited to this, as long as it is a GUI capable of recognizing that a call is available to a user such as a speech ball type GUI.

또한, 제어부(130)는 음성 입력부(110)를 통해 입력된 사용자의 음성에 의해 식별 태그가 호출되면 식별 태그가 부여된 객체를 호출하도록 제어할 수 있다. 예를 들어, 제어부(130)는 사용자 음성에 의해 "1"이 호출되면, "1"이라는 식별 태그가 부여된 객체가 호출된 것으로 판단하고 해당 객체에 대응되는 태스크를 수행할 수 있다. 여기서, 해당 객체에 대응되는 태스크는 해당 객체를 호출함에 의해 기기에 의해 수행 가능한 기 정의된 작업으로 예를 들어, "1"이라는 식별 태그가 부여된 컨텐츠가 동영상 컨텐츠인 경우 해당 컨텐츠를 재생하거나, 해당 컨텐츠의 세부 항목을 디스플레이하는 작업이 될 수 있다. In addition, the control unit 130 may control the calling of the object to which the identification tag is assigned when the identification tag is called by the user's voice inputted through the voice input unit 110. [ For example, when the "1" is called by the user's voice, the control unit 130 determines that the object having the identification tag "1 " is called and can perform the task corresponding to the object. Here, the task corresponding to the object is a predefined task that can be performed by the apparatus by calling the corresponding object. For example, if the content to which the identification tag "1" And displaying a detailed item of the content.

이하에서는 제어부(130)가 음성 입력부(110)를 통해 입력된 사용자 음성을 인식하는 방법에 대해 간략히 설명하도록 한다. Hereinafter, a method for the control unit 130 to recognize the user's voice input through the voice input unit 110 will be briefly described.

제어부(130)는 음성 입력부(110)를 통해 음성이 입력되는 경우, 음성 인식 모듈 및 음성 데이터베이스를 이용하여 음성을 인식한다. 음성 인식(voice recognition)은 입력되는 음성의 형태에 따라, 각각의 단어를 구분하여 발화한 음성을 인식하는 고립단어 인식(isolated word recognition), 연속단어, 연속문장 및 대화체 음성을 인식하는 연속 음성 인식(continuous speech recognition) 및 고립단어 인식과 연속음성 인식의 중간형태로, 미리 정해진 핵심어를 검출하여 인식하는 핵심어 검출(keyword spotting)으로 구분될 수 있다. When a voice is input through the voice input unit 110, the control unit 130 recognizes the voice using the voice recognition module and the voice database. Speech recognition is a method of recognizing speech by distinguishing words according to the type of input speech, including isolated word recognition, continuous speech recognition, continuous speech recognition, and continuous speech recognition (continuous speech recognition), and keyword spotting, which is an intermediate form of isolated word recognition and continuous speech recognition, and detects and recognizes predetermined keywords.

사용자 음성이 입력되는 경우, 제어부(130)는 입력된 음성 신호 내에서 사용자가 발화한 음성의 시작과 끝을 검출하여 음성 구간을 판단한다. 제어부(130)는 입력된 음성 신호의 에너지를 계산하고, 계산된 에너지에 따라 음성 신호의 에너지 레벨을 분류하여, 동적 프로그래밍을 통해 음성 구간을 검출할 수 있다. 제어부(140)는 검출된 음성 구간 내의 음성 신호에서 음향 모델(Acoustic Model)을 기초로 음성의 최소 단위인 음소를 검출하여 음소 데이터를 생성한다. 제어부(130)는 생성된 음소 데이터에 HMM(Hidden Markov Model) 확률 모델을 적용하여 텍스트 정보를 생성한다. 그러나, 상술한 바와 같이, 사용자의 음성을 인식하는 방법은 일 실시 예에 불과할 뿐, 다른 방법을 이용하여 사용자 음성을 인식할 수 있다. 이에 따라, 제어부(130)는 음성 신호 중에 포함된 사용자의 음성을 인식할 수 있다. 제어부(130)는 상술한 바와 같이, 인식된 음성을 이용하여, 전자 장치(100)의 태스크(task)를 수행하게 된다. When the user's voice is input, the controller 130 detects the beginning and end of the voice uttered by the user in the input voice signal to determine the voice section. The control unit 130 may calculate the energy of the input speech signal, classify the energy level of the speech signal according to the calculated energy, and detect the speech period through dynamic programming. The control unit 140 generates a phoneme data by detecting a phoneme as a minimum unit of speech based on an acoustic model in the speech signal in the detected speech interval. The control unit 130 generates text information by applying a HMM (Hidden Markov Model) probability model to the generated phoneme data. However, as described above, the method of recognizing the user's voice is only an embodiment, and the user's voice can be recognized using another method. Accordingly, the control unit 130 can recognize the voice of the user included in the voice signal. The control unit 130 performs a task of the electronic device 100 using the recognized voice, as described above.

도 2는 본 발명의 다른 실시 예에 따른, 전자 장치의 구성을 나타내는 블럭도를 도시한 도면이다. 도 2를 참조하면, 전자 장치(100')는 음성 입력부(110), 디스플레이부(120), 제어부(130), 저장부(140), 방송 수신부(150), 외부단자 입력부(160), 리모컨 신호 수신부(170), 통신부(180), 음성 입력부(190) 및 오디오 출력부(195)를 포함한다. 2 is a block diagram showing the configuration of an electronic device according to another embodiment of the present invention. 2, the electronic device 100 'includes a voice input unit 110, a display unit 120, a control unit 130, a storage unit 140, a broadcast receiving unit 150, an external terminal input unit 160, A signal receiving unit 170, a communication unit 180, a voice input unit 190, and an audio output unit 195.

한편, 도 2에 도시된 구성요소 중 도 1에 도시된 구성요소와 중복되는 부분에 대해서는 자세한 설명을 생략하도록 한다. 2 will not be described in detail. As shown in FIG.

제어부(130)는 RAM(131), ROM(132), 메인 CPU(133), 그래픽 처리부(134), 제1 내지 n 인터페이스(135-1 ~ 135-n), 버스(136)를 포함한다.The control unit 130 includes a RAM 131, a ROM 132, a main CPU 133, a graphics processing unit 134, first through n interfaces 135-1 through 135-n,

RAM(131), ROM(132), 메인 CPU(133), 그래픽 처리부(134), 제1 내지 n 인터페이스(135-1 ~ 135-n) 등은 버스(136)를 통해 서로 연결될 수 있다. The RAM 131, the ROM 132, the main CPU 133, the graphics processing unit 134, the first to n interfaces 135-1 to 135-n, etc. may be connected to each other via the bus 136. [

제1 내지 n 인터페이스(135-1 내지 135-n)는 상술한 각종 구성요소들과 연결된다. 인터페이스들 중 하나는 네트워크를 통해 외부 장치와 연결되는 네트워크 인터페이스가 될 수도 있다.The first to n-th interfaces 135-1 to 135-n are connected to the various components described above. One of the interfaces may be a network interface connected to an external device via a network.

메인 CPU(133)는 저장부(140)에 액세스하여, 저장부(140)에 저장된 O/S를 이용하여 부팅을 수행한다. 그리고, 저장부(140)에 저장된 각종 프로그램, 컨텐츠, 데이터 등을 이용하여 다양한 동작을 수행한다. The main CPU 133 accesses the storage unit 140 and performs booting using the O / S stored in the storage unit 140. [ Various operations are performed using various programs, contents, data, and the like stored in the storage unit 140.

ROM(132)에는 시스템 부팅을 위한 명령어 세트 등이 저장된다. 턴온 명령이 입력되어 전원이 공급되면, 메인 CPU(133)는 ROM(132)에 저장된 명령어에 따라 저장부(140)에 저장된 O/S를 RAM(131)에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, 메인 CPU(133)는 저장부(140)에 저장된 각종 어플리케이션 프로그램을 RAM(131)에 복사하고, RAM(131)에 복사된 어플리케이션 프로그램을 실행시켜 각종 동작을 수행한다. The ROM 132 stores a command set for booting the system and the like. When the turn-on command is input and power is supplied, the main CPU 133 copies the O / S stored in the storage unit 140 to the RAM 131 according to the instruction stored in the ROM 132, executes O / S Boot the system. When the booting is completed, the main CPU 133 copies various application programs stored in the storage unit 140 to the RAM 131, executes the application program copied to the RAM 131, and performs various operations.

그래픽 처리부(134)는 연산부(미도시) 및 렌더링부(미도시)를 이용하여 아이콘, 이미지, 텍스트 등과 같은 다양한 객체를 포함하는 화면을 생성한다. 연산부(미도시)는 화면의 레이아웃에 따라 각 객체들이 표시될 좌표값, 형태, 크기, 컬러 등과 같은 속성값을 연산한다. 렌더링부(미도시)는 연산부(미도시)에서 연산한 속성값에 기초하여 객체를 포함하는 다양한 레이아웃의 화면을 생성한다. 렌더링부(미도시)에서 생성된 화면은 디스플레이부(110)의 디스플레이 영역 내에 표시된다.The graphic processing unit 134 generates a screen including various objects such as an icon, an image, and a text using an operation unit (not shown) and a rendering unit (not shown). The operation unit (not shown) calculates an attribute value such as a coordinate value, a shape, a size, and a color to be displayed by each object according to the layout of the screen. The rendering unit (not shown) creates screens of various layouts including the objects based on the attribute values calculated by the operation unit (not shown). The screen generated in the rendering unit (not shown) is displayed in the display area of the display unit 110.

저장부(140)는 전자 장치(100')를 구동하고 제어하기 위한 다양한 데이터 및 프로그램을 저장한다. 저장부(140)는 음성 입력부(110)를 통해 입력된 음성을 인식하기 위한 음성 인식 모듈 및 음성 데이터베이스를 포함할 수 있다. 여기서, 음성 데이터베이스는 기 설정된 음성 및 기 설정된 음성에 매칭되는 음성 태스크가 기록된 데이터베이스를 의미한다. The storage unit 140 stores various data and programs for driving and controlling the electronic device 100 '. The storage unit 140 may include a voice recognition module and a voice database for recognizing voice input through the voice input unit 110. [ Here, the voice database refers to a database in which a voice task that matches a predetermined voice and a predetermined voice is recorded.

방송 수신부(150)는 유, 무선으로 외부로부터 방송 신호를 수신한다. 방송 신호는 영상(video), 오디오(audio) 및 부가 데이터(예를 들어, EPG)를 포함한다. 방송 수신부(150)는 지상파 방송, 케이블 방송, 위성 방송, 인터넷 방송 등과 같이 다양한 소스로부터 방송 신호를 수신할 수 있다.The broadcast receiving unit 150 receives a broadcast signal from an external source. The broadcast signal includes video, audio, and additional data (e.g., EPG). The broadcast receiver 150 can receive broadcast signals from various sources such as terrestrial broadcast, cable broadcast, satellite broadcast, internet broadcast, and the like.

외부단자 입력부(160)는 전자 장치(100')의 외부로부터 영상 데이터(예를 들어, 동영상 사진 등), 오디오 데이터(예를 들어, 음악 등) 등을 수신한다. 외부 단자 입력부(160)는 HDMI입력 단자(High-Definition Multimedia Interface input), 컴포넌트 입력 단자, PC 입력 단자, 또는 USB 입력 단자 중 적어도 하나를 포함할 수 있다. 리모컨 신호 수신부(170)는 외부의 리모컨으로부터 입력되는 리모컨 신호를 수신한다. 리모컨 신호 수신부(170)는 전자 장치(100')가 음성 태스크 모드이거나 모션 태스크 모드에서도 리모컨 신호를 수신할 수 있다. The external terminal input unit 160 receives image data (for example, moving pictures) and audio data (e.g., music) from the outside of the electronic device 100 '. The external terminal input unit 160 may include at least one of a high-definition multimedia interface input, a component input terminal, a PC input terminal, and a USB input terminal. The remote control signal receiving unit 170 receives a remote control signal input from an external remote control. The remote control signal receiving unit 170 can receive the remote control signal even when the electronic device 100 'is in the audio task mode or the motion task mode.

통신부(180)는 제어부(140)의 제어에 의해 전자 장치(100')와 외부 장치(미도시)를 연결할 수 있다. 구체적으로, 통신부(180)는 이더넷(Ethernet)(181), 무선랜(182) 및 블루투스(bluetooth)(183) 등의 통신 방식을 제공할 수 있으나, 이에 한정되는 것은 아니다. The communication unit 180 may connect the electronic device 100 'and an external device (not shown) under the control of the control unit 140. [ Specifically, the communication unit 180 may provide a communication method such as an Ethernet 181, a wireless LAN 182, and a Bluetooth 183, but is not limited thereto.

여기서, 외부 장치는 대화형 서비스를 제공하기 위한 ASR(Automathic Speech Recognition) 서버 및 대화형 서버 등으로 구현 가능하다. Here, the external device may be implemented as an ASR (Automated Speech Recognition) server and an interactive server for providing an interactive service.

즉, 본 발명에 따른 전자 장치(100')는 단순히 음성 인식에 따른 태스크 수행 뿐 아니라, 다양한 대화형 서비스를 제공하도록 구현될 수 있는데 이에 대해서는 도 4를 참고하여 후술하도록 한다. That is, the electronic device 100 'according to the present invention can be implemented not only to perform a task according to speech recognition, but also to provide various interactive services, which will be described later with reference to FIG.

또한, 외부 장치는 어플리케이션을 다운로드 하거나 웹 브라우징을 할 수 있는 서버로 구현되는 것도 가능하다. Also, the external device can be implemented as a server capable of downloading an application or browsing the web.

오디오 출력부(190)는 제어부(130)의 제어에 의해 방송 신호에 대응되는 음성을 출력한다. 오디오 출력부(190)는 스피커(191), 헤드폰 출력 단자(192) 또는 S/PDIF 출력 단자(193) 중 적어도 하나를 포함할 수 있다. The audio output unit 190 outputs a voice corresponding to the broadcast signal under the control of the control unit 130. [ The audio output unit 190 may include at least one of a speaker 191, a headphone output terminal 192, or an S / PDIF output terminal 193. [

도 3은 본 발명의 일 실시 예에 따른 저장부에 저장된 소프트웨어 구성을 설명하기 위한 도면이다. 3 is a diagram for explaining a software configuration stored in a storage unit according to an embodiment of the present invention.

저장부(140)는 도 3에 도시된 바와 같이, 전원 제어 모듈(140a), 채널 제어 모듈(140b), 볼륨 제어 모듈(140c), 외부입력 제어 모듈(140d), 화면 제어 모듈(140e), 오디오 제어 모듈(140f), 인터넷 제어 모듈(140g), 어플리케이션 모듈(140h), 검색 제어 모듈(140i), UI 처리 모듈(140j), 음성 인식 모듈(140k), 음성 데이터베이스(140l)를 포함한다. 이들 모듈들(140a 내지 140l)은 각각 전원 제어 기능, 채널 제어 기능, 볼륨 제어 기능, 외부 입력 제어 기능, 화면 제어 기능, 오디오 제어 기능, 인터넷 제어 기능, 어플리케이션 실행 기능, 검색 제어 기능, UI 처리 기능을 수행하기 위하여 소프트웨어로 구현될 수 있다. 제어부(130)는 저장부(140)에 저장된 이들 소프트웨어를 실행시켜 해당 기능을 수행할 수 있다. 예를 들어, 제어부(130)는 음성 인식 모듈(140k) 및 음성 데이터베이스(140l)를 이용하여 사용자 음성을 인식하고 그에 대응되는 태스크를 수행할 수 있다. 3, the storage unit 140 includes a power control module 140a, a channel control module 140b, a volume control module 140c, an external input control module 140d, a screen control module 140e, An audio control module 140f, an internet control module 140g, an application module 140h, a search control module 140i, a UI processing module 140j, a voice recognition module 140k and a voice database 140l. Each of the modules 140a to 140l includes a power control function, a channel control function, a volume control function, an external input control function, a screen control function, an audio control function, an internet control function, an application execution function, May be implemented in software. The control unit 130 may execute the software stored in the storage unit 140 to perform the corresponding function. For example, the controller 130 can recognize the user's voice using the voice recognition module 140k and the voice database 1401, and perform a task corresponding thereto.

도 4는 본 발명의 일 실시 예에 따른 대화형 시스템(1000)을 설명하기 위한 도면이다. 도 1에 도시된 바와 같이, 대화형 시스템은 전자 장치(100'), 제1 서버(200) 및 제2 서버(300)를 포함한다. 4 is a diagram for explaining an interactive system 1000 according to an embodiment of the present invention. 1, an interactive system includes an electronic device 100 ', a first server 200, and a second server 300. As shown in FIG.

전자 장치(100')는 도 2에 도시된 전자 장치(100')로 구현 가능하며, 사용자 음성에 따라 다양한 태스크를 수행할 수 있다. The electronic device 100 'can be implemented as the electronic device 100' shown in FIG. 2, and can perform various tasks according to the user's voice.

구체적으로, 전자 장치(100')는 사용자의 음성에 대응되는 응답 메시지를 출력하거나, 사용자의 음성에 대응되는 태스크를 수행할 수 있다. Specifically, the electronic device 100 'may output a response message corresponding to the user's voice, or may perform a task corresponding to the user's voice.

이를 위해, 필요한 경우 전자 장치(100')는 수집된 사용자의 음성을 제1 서버(200)(예를 들어, ASR 서버)로 전송한다. 제1 서버(200)는 전자 장치(100')로부터 사용자의 음성이 수신되면 수신된 사용자의 음성을 텍스트 정보(또는, 텍스트)로 변환하고, 텍스트 정보를 전자 장치(100')로 전송한다.To this end, the electronic device 100 ', if necessary, transmits the collected user's voice to the first server 200 (e.g., the ASR server). When the user's voice is received from the electronic device 100 ', the first server 200 converts the received user's voice into text information (or text), and transmits the text information to the electronic device 100'.

그리고, 전자 장치(100')는 제1 서버(200)로부터 수신된 텍스트 정보를 제2 서버(300)로 전송한다. 제2 서버(300)(예를 들어, 대화형 서버)는 전자 장치(100')로부터 텍스트 정보가 수신되면 수신된 텍스트 정보에 대응되는 응답 정보를 생성하여 전자 장치(100)로 전송한다.Then, the electronic device 100 'transmits the text information received from the first server 200 to the second server 300'. When text information is received from the electronic device 100 ', the second server 300 (e.g., an interactive server) generates response information corresponding to the received text information and transmits the response information to the electronic device 100.

전자 장치(100')는 제2 서버(300)로부터 수신된 응답 정보에 기초하여, 다양한 동작을 수행할 수 있다. The electronic device 100 'may perform various operations based on the response information received from the second server 300.

구체적으로, 전자 장치(100')는 사용자의 음성에 대응되는 응답 메시지를 출력할 수 있다. 여기에서, 응답 메시지는 음성 및 텍스트 중 적어도 하나로 출력될 수 있다. 예를 들어, 전자 장치(100')는 특정 프로그램의 방송 시간을 문의하는 사용자의 음성이 입력되면, 해당 프로그램의 방송 시간을 음성 또는 텍스트 형태로 출력하거나, 이들의 조합으로 출력할 수 있다. Specifically, the electronic device 100 'may output a response message corresponding to the user's voice. Here, the response message may be output as at least one of voice and text. For example, when a voice of a user querying a broadcast time of a specific program is inputted, the electronic device 100 'can output the broadcast time of the program in voice or text form or a combination thereof.

또한, 전자 장치(100')는 사용자의 음성에 대응되는 태스크를 수행할 수 있다. 예를 들어, 전자 장치(100)는 채널 변경을 위한 사용자의 음성이 입력되면, 해당 채널을 선국하여 디스플레이할 수 있다. Also, the electronic device 100 'may perform a task corresponding to the user's voice. For example, when the user's voice for channel change is input, the electronic device 100 can select and display the corresponding channel.

이 경우, 전자 장치(100')는 해당 태스크에 대응되는 응답 메시지를 함께 제공할 수도 있다. 즉, 전자 장치(100')는 사용자의 음성에 따라 수행된 태스크에 대한 정보를 음성 또는 텍스트 형태로 출력하거나, 이들의 조합으로 출력할 수 있다. 상술한 예의 경우, 전자 장치(100')는 변경된 채널에 대한 정보 또는 채널 변경이 완료되었음을 나타내는 메시지를 음성 및 텍스트 중 적어도 하나로 출력할 수 있다. In this case, the electronic device 100 'may also provide a response message corresponding to the task. That is, the electronic device 100 'may output information on a task performed in accordance with a user's voice in voice or text form, or may output in a combination thereof. In the above example, the electronic device 100 'may output information on the changed channel or a message indicating that the channel change is completed to at least one of voice and text.

이하에서는 도 5 내지 7을 참고하여 본 발명의 다양한 실시 예에 따른 UI 제공 방법에 대해 설명하도록 한다. Hereinafter, a UI providing method according to various embodiments of the present invention will be described with reference to FIGS.

도 5는 본 발명의 일 실시 예에 따른 UI 제공 방법을 설명하기 위한 도면이다. 5 is a diagram for explaining a UI providing method according to an embodiment of the present invention.

도 5(a)와 같이 화면 상에 복수의 객체(511 내지 518)를 포함하는 UI 화면이 디스플레이될 수 있다. As shown in FIG. 5A, a UI screen including a plurality of objects 511 to 518 may be displayed on the screen.

도시된 UI 화면에서 영화 썸네일을 나타내는 객체 511 내지 517은 음성 호출이 가능하도록 하는 호출 텍스트가 태깅되어 있지 않은 객체이며 특정 메뉴 항목을 나타내는 객체 518은 음성 호출이 가능하도록 하는 호출 텍스트가 태깅된 경우로 가정하도록 한다. In the illustrated UI screen, the objects 511 to 517 representing the movie thumbnails are objects in which the calling text is not tagged, and the object 518, which indicates a specific menu item, is the case where the calling text for voice calling is tagged .

이 경우, 영화 썸네일을 나타내는 객체 511 내지 517에는 해당 객체들을 식별하기 위한 식별 태그(511-1 내지 517-1)가 부여될 수 있다. 여기서, 식별 태그는 음성으로 해당 객체들을 식별하기 위한 태그로서 사용자에게 용이하게 인식 가능한 숫자 형태로 부여될 수 있지만, 이에 한정되는 것은 아니다. In this case, the identification tags 511-1 to 517-1 for identifying the objects may be given to the objects 511 to 517 indicating the movie thumbnails. Here, the identification tag may be given as a tag for identifying the objects by voice, and may be given in the form of an easily recognizable number to the user, but the present invention is not limited thereto.

한편, 특정 메뉴 항목을 나타내는 객체 518은 Sub category 라는 호출 텍스트가 태깅된 경우로서 별도의 식별 태그가 부여되지 않을 수 있다. On the other hand, the object 518 indicating the specific menu item may be a case where the calling text called " Sub category " is tagged, and a separate identification tag may not be given.

도 5(b)는 도 5(a)에 도시된 UI 페이지에서 다음 UI 페이지를 디스플레이하기 위한 아이템(520) 선택에 의해 다음 UI 페이지가 디스플레이된 상태를 도시한다. 5 (b) shows a state in which the next UI page is displayed by the selection of the item 520 for displaying the next UI page in the UI page shown in Fig. 5 (a).

도 5(b)에 도시된 UI 페이지 상에서 도 5(a)에 도시된 UI 페이지 상에 디스플레이된 복수의 영화 썸네일 객체들(511 내지 517)과 다른 영화 썸네일 객체(521 내지 527)가 디스플레이될 수 있다. A plurality of movie thumbnail objects 511 to 517 and other movie thumbnail objects 521 to 527 displayed on the UI page shown in Fig. 5 (a) can be displayed on the UI page shown in Fig. 5 (b) have.

이 경우, 해당 썸네일 객체(521 내지 527) 상에도 해당 객체들을 식별하기 위한 식별 태그가 부여될 수 있다. 도시된 바와 같이 식별 태그는 도 5(a)에 도시된 식별 태그와 동일한 형태인 1 내지 7의 숫자 태그가 될 수 있다. 이는 식별 태그는 단순히 현재 디스플레이된 화면 상에서 디스플레이된 객체들을 음성으로 호출이 용이하도록 식별하기 위한 것이므로 이전에 디스플레이된 화면에서 사용된 식별 태그인지 여부와 관계없이 할지라도 다시 사용될 수 있기 때문이다. In this case, an identification tag for identifying the objects may also be given on the corresponding thumbnail objects 521 to 527. As shown in the figure, the identification tag may be a numeric tag of 1 to 7 in the same form as the identification tag shown in Fig. 5 (a). This is because the identification tag simply identifies the objects displayed on the currently displayed screen so as to be easily voice-activated, so that it can be used again regardless of whether or not the identification tag is used in the previously displayed screen.

다만, 이는 일 실시 예에 불과하며, 경우에 따라서는 해당 썸네일 객체(521 내지 527) 상에는 도 5(a)에 도시된 식별 태그의 다음 순서인 8 내지 14의 숫자 태그가 부여되는 것도 가능하다. However, this is merely an example, and in some cases, it is possible that numeric tags 8 to 14 next to the identification tag shown in FIG. 5 (a) are given on the corresponding thumbnail objects 521 to 527.

도 6은 본 발명의 다른 실시 예에 따른 UI 제공 방법을 설명하기 위한 도면이다. 6 is a view for explaining a UI providing method according to another embodiment of the present invention.

도 6에 도시된 바에 따르면, 호출할 수 있는 텍스트 항목에는 해당 텍스트가 호출가능함을 나타내는 기설정된 GUI 가 부가될 수 있다. As shown in FIG. 6, a predetermined GUI indicating that the text can be called can be added to the text item that can be called.

예를 들어 도시된 바와 같이 각 썸네일 객체(511 내지 517)에 부가된 식별 태그에는 쌍따옴표 형태의 GUI가 부가(611 내지 617)될 수 있다. 이에 따라 사용자는 해당 식별 태그가 음성으로 호출 가능한 텍스트임을 직관적으로 인식할 수 있게 된다. For example, a GUI in the form of a double quote may be added (611 to 617) to the identification tag added to each of the thumbnail objects 511 to 517 as shown. Accordingly, the user can intuitively recognize that the corresponding identification tag is text that can be called by voice.

또한, Sub category라는 호출 텍스트가 태깅된 특정 메뉴 항목을 나타내는 객체 518의 경우에도 Sub category가 호출가능한 텍스트임을 나타내도록 "Sub category"의 형태로 디스플레이될 수 있다. In addition, even in the case of the object 518 representing the specific menu item to which the call text Sub category is tagged, it can also be displayed in the form of "Sub category " to indicate that the Sub category is callable text.

도 7은 본 발명의 또 다른 실시 예에 따른 UI 제공 방법을 설명하기 위한 도면이다. 7 is a diagram for explaining a UI providing method according to another embodiment of the present invention.

도 7에 도시된 바와 같이 음성 호출이 가능하도록 하는 호출 텍스트가 태깅되어 있지 않은 썸네일 객체에 알파벳 태그를 부여하여 음성 호출이 가능하도록 할 수 있다. As shown in FIG. 7, an alphabet tag may be assigned to a thumbnail object to which a call text enabling voice call is not tagged, so that a voice call can be made.

즉, 객체에 부가되는 식별 태그는 사용자에게 쉽게 인식될 수 있는 것이라면 숫자에 한정되지 않게 다양한 형태로 적용될 수 있다. That is, the identification tag added to the object can be applied in various forms not limited to the number as long as it can be easily recognized by the user.

한편, 상술한 실시 예들에서는 썸네일 이미지를 사용자 음성에 의해 호출이 불가능한 객체의 예로써 설명하였지만, 이는 일 실시 예에 불과하며 리스트 등과 같이 사용자 호출이 불가능한 다른 객체에도 본 발명이 적용될 수 있음을 물론이다. In the above-described embodiments, the thumbnail image has been described as an example of an object that can not be called by the user's voice. However, the present invention is also applicable to other objects that can not be called by the user, such as a list .

도 8은 본 발명의 일 실시 예에 따른 전자 장치의 제어 방법을 설명하기 위한 흐름도이다. 8 is a flowchart illustrating a method of controlling an electronic device according to an embodiment of the present invention.

도 8에 도시된 전자 장치의 제어 방법에 따르면, 우선, 한편, 본 발명의 일 실시 예에 따른 사용자의 음성에 의해 제어되는 전자 장치의 제어 방법은, 우선 적어도 하나의 객체를 포함하는 UI 화면을 제공하기 위한 사용자 명령을 수신한다(S810),According to a control method of an electronic device shown in FIG. 8, first, a control method of an electronic device controlled by a user's voice according to an embodiment of the present invention includes a UI screen including at least one object (S810), and transmits the user command

이어서, UI 화면에 포함된 객체에 대해 사용자 음성에 의한 호출 가능 여부를 판단한다(S820).Then, it is determined whether or not the object included in the UI screen can be called by the user's voice (S820).

이 후 S820 단계의 판단 결과에 기초하여 객체를 식별하기 위한 식별 태그를 객체에 부여하여 디스플레이한다(S830).Thereafter, an identification tag for identifying the object is given to the object based on the determination result of step S820 and displayed (S830).

이 경우, 호출 가능 여부를 판단하는 S820 단계에서는, 객체에 대한 음성 호출이 가능하도록 하는 텍스트 항목이 객체에 태깅되어 있지 않은 경우 호출이 불가능하다고 판단할 수 있다. 여기서, 텍스트 항목이 태깅되어 있지 않은 객체는, 썸네일 속성 또는 리스트 속성을 갖는 객체가 될 수 있다. In this case, in step S820 of determining whether or not the call can be made, it can be determined that the call is not possible if the text item that enables the voice call to the object is not tagged to the object. Here, an object in which a text item is not tagged may be an object having a thumbnail attribute or a list attribute.

또한, 디스플레이하는 S830 단계에서는, S820 단계에서 호출이 불가능하다고 판단된 객체에 식별 태그를 부여하여 디스플레이할 수 있다. Also, in step S830 of displaying, it is possible to assign and display an identification tag to the object determined to be impossible to call in step S820.

구체적으로, UI 화면 상에서 객체가 디스플레이된 순서에 기초하여 순차적으로 식별 태그를 부여하여 디스플레이할 수 있다. 이 경우, 식별 태그는, 기설정된 순서를 갖는 숫자 태그 및 알파벳 태그 중 적어도 하나가 될 수 있다. Specifically, an identification tag can be sequentially assigned and displayed based on the order in which the objects are displayed on the UI screen. In this case, the identification tag may be at least one of a numeric tag and an alphabetical tag having a predetermined order.

또한, 사용자 음성에 의해 객체에 부여된 식별 태그가 호출되면, 식별 태그가 부여된 객체가 호출된 것으로 판단하고, 해당 객체에 대한 태스크를 수행할 수 있다. When the identification tag assigned to the object is called by the user's voice, it is determined that the object to which the identification tag is assigned has been called, and the task for the corresponding object can be performed.

또한, 디스플레이하는 S830 단계에서는, 객체에 부여된 식별 태그 및 사용자 음성에 의해 호출이 가능한 텍스트 항목 중 적어도 하나에 음성 호출이 가능함을 나타내는 기설정된 GUI를 부가하여 디스플레이할 수 있다. 여기서, 사용자 음성에 의해 호출이 가능한 텍스트 항목이란, 음성 인식이 가능한 텍스트 항목을 의미하는 것으로 예를 들어, 기설정된 메뉴 항목에 부여된 메뉴 타이틀 항목 등이 이에 해당될 수 있다. Further, in step S830 of displaying, it is possible to display a predetermined GUI added to at least one of the identification tag given to the object and the text item which can be called by the user's voice, which indicates that the voice call is possible. Here, the text item that can be called by the user voice means a text item capable of voice recognition. For example, the text item may be a menu title item assigned to a predetermined menu item.

이에 따라 음성 인식을 통한 객체 선택시 추가적인 포커스 조작 없이 원하는 객체를 선택할 수 있게 된다. Accordingly, when selecting an object through voice recognition, a desired object can be selected without any additional focus operation.

한편, 상술한 다양한 실시 예에 따른 전자 장치의 제어 방법은 프로그램으로 구현되어 전자 장치에 제공될 수 있다.On the other hand, the control method of the electronic device according to the various embodiments described above can be implemented by a program and provided to the electronic device.

일 예로, 적어도 하나의 객체를 포함하는 UI 화면을 제공하기 위한 사용자 명령을 수신하면 객체에 대해 사용자 음성에 의한 호출 가능 여부를 판단하고, 판단 결과에 기초하여 객체를 식별하기 위한 식별 태그를 객체에 부여하여 디스플레이하는 구성을 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다. For example, when a user command for providing a UI screen including at least one object is received, it is determined whether or not the object can be called by the user's voice, and an identification tag for identifying the object based on the determination result is displayed on the object A non-transitory computer readable medium may be provided which stores a program for performing a configuration to display and display a program.

비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.A non-transitory readable medium is a medium that stores data for a short period of time, such as a register, cache, memory, etc., but semi-permanently stores data and is readable by the apparatus. In particular, the various applications or programs described above may be stored on non-volatile readable media such as CD, DVD, hard disk, Blu-ray disk, USB, memory card, ROM,

또한, 전자 장치에 대해 도시한 상술한 블록도에서는 버스(bus)를 미도시하였으나, 전자 장치에서 각 구성요소 간의 통신은 버스를 통해 이루어질 수도 있다. 또한, 각 디바이스에는 상술한 다양한 단계를 수행하는 CPU, 마이크로 프로세서 등과 같은 프로세서가 더 포함될 수도 있다. In addition, although a bus is not shown in the above-described block diagram of the electronic apparatus, the communication between the respective components in the electronic apparatus may be performed via the bus. Further, each device may further include a processor such as a CPU, a microprocessor, or the like that performs the various steps described above.

또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, It will be understood by those skilled in the art that various changes in form and detail may be made therein without departing from the spirit and scope of the present invention.

100 : 전자 장치 110 : 음성 입력부
120 : 디스플레이부 130 : 제어부100: electronic device 110: voice input unit
120: display unit 130:

Claims (10)

사용자의 음성에 의해 제어되는 전자 장치에 있어서,
사용자 음성을 입력받는 음성 입력부;
적어도 하나의 객체를 포함하는 UI 화면을 제공하는 디스플레이부; 및
상기 적어도 하나의 객체 각각의 속성을 판단하고, 상기 판단 결과에 기초하여 상기 적어도 하나의 객체 중 텍스트 속성을 가지는 객체에 대해서는 별도의 식별 태그를 부가하지 않고 기설정된 GUI 를 부가하여 표시하고, 상기 적어도 하나의 객체 중 썸네일 속성 또는 리스트 속성을 가지는 객체에 대해서는 객체를 식별하기 위한 식별 태그를 부가하여 표시하도록 상기 디스플레이를 제어하는 제어부;를 포함하는 전자 장치.1. An electronic device controlled by a user's voice,
A voice input unit for receiving a user voice;
A display unit for providing a UI screen including at least one object; And
Determining at least one attribute of each of the at least one object based on the determination result, adding a predetermined GUI to an object having a text attribute of the at least one object without adding a separate identification tag, And controlling the display to display an identification tag for identifying an object with respect to an object having a thumbnail attribute or a list attribute among the objects. 제1항에 있어서,
상기 제어부는,
상기 사용자 음성에 의해 상기 식별 태그가 호출되면, 상기 식별 태그가 부여된 객체에 대한 태스크를 수행하는 것을 특징으로 하는 전자 장치. The method according to claim 1,
Wherein,
And when the identification tag is called by the user voice, performs a task on the object to which the identification tag is assigned. 제1항에 있어서,
상기 제어부는,
상기 UI 화면 상에서 상기 객체가 표시된 순서에 기초하여 순차적으로 상기 식별 태그를 부여하여 표시하도록 상기 디스플레이를 제어하는 것을 특징으로 하는 전자 장치. The method according to claim 1,
Wherein,
And controls the display to sequentially display the identification tag on the basis of the order in which the objects are displayed on the UI screen. 제3항에 있어서,
상기 식별 태그는,
기설정된 순서를 갖는 숫자 태그 및 알파벳 태그 중 적어도 하나인 것을 특징으로 하는 전자 장치. The method of claim 3,
Wherein the identification tag comprises:
Wherein the electronic tag is at least one of a numeric tag and an alphabetical tag having a predetermined order. 제1항에 있어서,
상기 제어부는,
상기 식별 태그에 음성 호출이 가능함을 나타내는 기설정된 GUI를 부가하여 표시하도록 상기 디스플레이를 제어하는 것을 특징으로 하는 전자 장치. The method according to claim 1,
Wherein,
And controls the display to additionally display a predetermined GUI indicating that a voice call is possible to the identification tag. 사용자의 음성에 의해 제어되는 전자 장치의 제어 방법에 있어서,
적어도 하나의 객체를 포함하는 UI 화면을 제공하기 위한 사용자 명령을 수신하는 단계;
상기 객체 각각에 대해 사용자 음성에 의한 호출 가능 여부를 판단하는 단계; 및
상기 적어도 하나의 객체 각각의 속성을 판단하고, 상기 판단 결과에 기초하여 상기 적어도 하나의 객체 중 텍스트 속성을 가지는 객체에 대해서는 별도의 식별 태그를 부가하지 않고 기설정된 GUI를 부가하여 표시하고, 상기 적어도 하나의 객체 중 썸네일 속성 또는 리스트 속성을 가지는 객체에 대해서는 객체를 식별하기 위한 식별 태그를 부가하여 표시하는 단계;를 포함하는 제어 방법.A control method of an electronic device controlled by a user's voice,
Receiving a user command for providing a UI screen including at least one object;
Determining whether a call can be made by a user voice for each of the objects; And
Determining at least one attribute of each of the at least one object based on the determination result, adding a predetermined GUI to an object having a text attribute of the at least one object without adding a separate identification tag, And displaying an object having a thumbnail attribute or a list attribute of one object by adding an identification tag for identifying the object. 제6항에 있어서,
상기 사용자 음성에 의해 상기 식별 태그가 호출되면, 상기 식별 태그가 부여된 객체에 대한 태스크를 수행하는 단계;를 더 포함하는 것을 특징으로 하는 제어 방법. The method according to claim 6,
And performing a task on the object to which the identification tag is assigned when the identification tag is called by the user voice. 제6항에 있어서,
상기 표시하는 단계는,
상기 UI 화면 상에서 상기 객체가 표시된 순서에 기초하여 순차적으로 상기 식별 태그를 부여하여 표시하는 것을 특징으로 하는 제어 방법. The method according to claim 6,
Wherein the displaying comprises:
Wherein the identification tag is sequentially assigned and displayed based on the order in which the objects are displayed on the UI screen. 제8항에 있어서,
상기 식별 태그는,
기설정된 순서를 갖는 숫자 태그 및 알파벳 태그 중 적어도 하나인 것을 특징으로 하는 제어 방법.9. The method of claim 8,
Wherein the identification tag comprises:
And a numeric tag and an alphabet tag having a predetermined order. 제6항에 있어서,
상기 표시하는 단계는,
상기 식별 태그에 음성 호출이 가능함을 나타내는 기설정된 GUI를 부가하여 표시하는 것을 특징으로 하는 제어 방법.
The method according to claim 6,
Wherein the displaying comprises:
Wherein said identification tag is displayed by adding a predetermined GUI indicating that voice call is possible.
KR1020170057482A 2017-05-08 2017-05-08 Electronic apparatus and control method thereof KR20170054367A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170057482A KR20170054367A (en) 2017-05-08 2017-05-08 Electronic apparatus and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170057482A KR20170054367A (en) 2017-05-08 2017-05-08 Electronic apparatus and control method thereof

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020130001776A Division KR20140089847A (en) 2013-01-07 2013-01-07 electronic apparatus and control method thereof

Publications (1)

Publication Number Publication Date
KR20170054367A true KR20170054367A (en) 2017-05-17

Family

ID=59048507

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170057482A KR20170054367A (en) 2017-05-08 2017-05-08 Electronic apparatus and control method thereof

Country Status (1)

Country Link
KR (1) KR20170054367A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020045927A1 (en) * 2018-08-30 2020-03-05 Samsung Electronics Co., Ltd. Electronic device and method for generating short cut of quick command

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020045927A1 (en) * 2018-08-30 2020-03-05 Samsung Electronics Co., Ltd. Electronic device and method for generating short cut of quick command
US11188298B2 (en) 2018-08-30 2021-11-30 Samsung Electronics Co., Ltd. Electronic device and method for generating short cut of quick command
US11868680B2 (en) 2018-08-30 2024-01-09 Samsung Electronics Co., Ltd. Electronic device and method for generating short cut of quick command

Similar Documents

Publication Publication Date Title
KR20140089847A (en) electronic apparatus and control method thereof
US12010373B2 (en) Display apparatus, server apparatus, display system including them, and method for providing content thereof
CN117056622A (en) Voice control method and display device
KR20130016024A (en) Electronic apparatus and method for providing user interface thereof
KR20150089145A (en) display apparatus for performing a voice control and method therefor
US20180151178A1 (en) Interactive question-answering apparatus and method thereof
KR20240124243A (en) Electronic apparatus and control method thereof
KR101713784B1 (en) Electronic apparatus and Method for controlling electronic apparatus thereof
KR20180059347A (en) Interactive question-anwering apparatus and method thereof
KR20170054367A (en) Electronic apparatus and control method thereof
CN113490057B (en) Display device and media asset recommendation method
CN112380871A (en) Semantic recognition method, apparatus, and medium
TW202001541A (en) Human-computer interaction and television operation control method, apparatus and device, and storage medium
KR102463066B1 (en) Display device, server device, display system comprising them and methods thereof
KR102326067B1 (en) Display device, server device, display system comprising them and methods thereof
CN113076427B (en) Media resource searching method, display equipment and server
CN114296842B (en) Display device and scroll text detection method
US20140195014A1 (en) Electronic apparatus and method for controlling electronic apparatus
KR20160022326A (en) Display apparatus and method for controlling the display apparatus
CN118445485A (en) Display device and voice searching method
KR20220129927A (en) Electronic apparatus and method for providing voice recognition service
CN117809633A (en) Display device and intention recognition method
CN115862615A (en) Display device, voice search method and storage medium
KR20150136315A (en) Display apparatus and Method for controlling display apparatus thereof
CN118331531A (en) Display equipment and multi-category instruction response method

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment