KR20190091782A - 디스플레이 장치 및 디스플레이 장치의 화면 표시방법 - Google Patents

디스플레이 장치 및 디스플레이 장치의 화면 표시방법 Download PDF

Info

Publication number
KR20190091782A
KR20190091782A KR1020180010763A KR20180010763A KR20190091782A KR 20190091782 A KR20190091782 A KR 20190091782A KR 1020180010763 A KR1020180010763 A KR 1020180010763A KR 20180010763 A KR20180010763 A KR 20180010763A KR 20190091782 A KR20190091782 A KR 20190091782A
Authority
KR
South Korea
Prior art keywords
voice
voice recognition
display apparatus
user
display
Prior art date
Application number
KR1020180010763A
Other languages
English (en)
Other versions
KR102540001B1 (ko
Inventor
유영준
김명재
문지범
이계림
이은진
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020180010763A priority Critical patent/KR102540001B1/ko
Priority to CN201880087969.3A priority patent/CN111656793A/zh
Priority to EP18902137.1A priority patent/EP3704862A4/en
Priority to PCT/KR2018/004960 priority patent/WO2019146844A1/en
Priority to US16/022,058 priority patent/US20190237085A1/en
Publication of KR20190091782A publication Critical patent/KR20190091782A/ko
Application granted granted Critical
Publication of KR102540001B1 publication Critical patent/KR102540001B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/28—Constructional details of speech recognition systems
    • G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G10L17/22—Interactive procedures; Man-machine interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42222—Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4314—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for fitting data in a restricted space on the screen, e.g. EPG data in a rectangular grid
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4753—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for user identification, e.g. by entering a PIN or password
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Theoretical Computer Science (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

디스플레이 장치 및 디스플레이 장치의 화면 표시방법이 제공된다. 보다 상세하게는 음성 인식을 통해 디스플레이 장치의 화면을 제어 가능한 디스플레이 장치 및 디스플레이 장치의 화면 표시방법이 개시된다. 개시된 실시예 중 일부는 음성 인식 결과 및 이력 정보에 대응되는 다른 추천 가이드를 화면에 표시하는 디스플레이 장치 및 디스플레이 장치의 화면 표시방법을 제공한다.

Description

디스플레이 장치 및 디스플레이 장치의 화면 표시방법{DISPLAY APPARATUS AND METHOD FOR DISPLAYLING A SCREEN OF DISPLAY APPARATUS}
아래 실시예들은 디스플레이 장치 및 디스플레이 장치의 화면 표시방법에 관한 것으로, 상세하게는 음성 인식에 대응하여 능동적인 사용자 가이드를 제공하는 디스플레이 장치 및 디스플레이 장치의 화면 표시방법에 관한 것이다.
방송뿐만 아니라 콘텐트를 출력가능한 디스플레이 장치와 사용자 사이의 인터페이스로 디스플레이 장치의 패널 키(panel key) 또는 원격 조정 장치(remotely controller)가 많이 이용된다. 또한, 디스플레이 장치와 사용자 사이의 인터페이스로 사용자 음성(voice) 또는 사용자 모션(motion)이 이용될 수 있다.
기술의 발전으로 디스플레이 장치의 기능은 복잡(예를 들어, 다양한 어플리케이션 실행, 게임 실행 등)하고, 다양하게 되어 외부에서 다운로드 받은 동영상과 같은 콘텐트를 실행하거나 인터넷 브라우징도 가능하게 되었다.
복잡하고 다양해지는 디스플레이 장치에 대응하여 사용자의 음성 명령어 개수도 증가되고 있다. 음성 입력이 가능한 고 성능의 디스플레이 장치의 동작에 적절한 능동적인 사용자 가이드 제공에 대한 필요성이 대두되고 있다.
본 발명의 실시예에 따른 디스플레이 장치는, 콘텐트를 표시하는 디스플레이부, 원격 조정 장치 및 음성 인식 서버와 연결되는 통신부, 및 상기 디스플레이부, 및 상기 통신부를 제어하는 제어부를 포함하고, 상기 제어부는, 상기 통신부를 통해 상기 원격 조정 장치에서부터 수신되는 사용자 음성에 대응되는 신호를 상기 음성 인식 서버로 전송하고, 상기 음성 인식 서버에서부터 수신되는 음성 인식 결과에 대응하여 상기 디스플레이부에 다른 추천 가이드를 표시하도록 제어한다.
본 발명의 일측에 따르면, 사용자의 음성 발화 이력에 대응되는 이력 정보를 저장하는 저장부를 더 포함하고, 상기 제어부는 상기 음성 인식 결과 및 상기 이력 정보를 이용하여 상기 디스플레이부에 상기 다른 추천 가이드를 표시하도록 제어할 수 있다.
본 발명의 일측에 따르면, 동일한 음성 인식 결과가 상기 음성 인식 서버에서 수신되는 경우, 상기 제어부는 상기 이력 정보에 대응하여 상기 다른 추천 가이드를 표시하도록 제어할 수 있다.
본 발명의 일측에 따르면, 동일한 음성 인식 결과가 상기 음성 인식 서버에서 수신되는 경우, 상기 제어부는 상기 이력 정보에 대응하여 인증된 사용자에 따라 상기 다른 추천 가이드를 표시하도록 제어할 수 있다.
본 발명의 실시예에 따른 디스플레이 장치의 화면 표시방법은 원격 조정 장치 및 음성 인식 서버와 연결되는 디스플레이 장치에서, 상기 원격 조정 장치에서 수신되는 음성 버튼의 선택에 대응되는 제1 음성 유저 인터페이스를 화면에 표시하는 단계, 상기 원격 조정 장치에서부터 사용자 음성에 대응되는 신호를 수신하는 단계, 상기 신호에 대응되는 패킷을 상기 음성 인식 서버로 전송하는 단계, 상기 음성 인식 서버에서부터 수신된 음성 인식 결과를 제2 음성 유저 인터페이스에 표시하는 단계, 상기 음성 인식 결과에 대응하여 상기 디스플레이 장치의 동작 및 기능 중 하나를 변경하는 단계, 및 상기 음성 인식 결과에 대응하여 다른 추천 가이드를 제공하는 제3 음성 유저 인터페이스를 표시하는 단계를 포함한다.
본 발명의 일측에 따르면, 상기 수신된 음성 인식 결과 및 저장된 사용자의 음성 발화 이력에 대응되는 이력 정보를 이용하여 상기 다른 추천 가이드를 제공하는 제3 음성 유저 인터페이스를 표시하는 단계를 더 포함할 수 있다.
사용자 음성 인식 결과를 통해 디스플레이 장치의 화면에 음성 인식 결과에 대응되는 추천 가이드를 표시하는 디스플레이 장치 및 디스플레이 장치의 화면 표시방법이 제공될 수 있다.
사용자 음성 인식 결과에 따른 사용자 음성 데이터 발화 이력 정보를 이용하여 추천 가이드를 표시하는 디스플레이 장치 및 디스플레이 장치의 화면 표시방법이 제공될 수 있다.
사용자 음성 인식 결과 및 사용자 음성 인식 결과에 따른 사용자 음성 데이터 발화 이력 정보를 이용하여 추천 가이드를 표시하는 디스플레이 장치 및 디스플레이 장치의 화면 표시방법이 제공될 수 있다.
이에 한정되지 않고 본 발명의 다양한 실시예에 따르면, 음성 인식 결과에 대응되는 다양한 추천 가이드를 제공하는 디스플레이 장치 및 디스플레이 장치의 화면 표시방법이 제공될 수 있다.
도 1은 본 발명의 실시예에 따른 디스플레이 장치, 원격 조정 장치 및 서버 사이의 동작을 나타내는 개략적인 도면이다.
도 2는 본 발명의 실시예에 따른 디스플레이 장치 및 원격 조정 장치를 나타내는 블록도이다.
도 3은 본 발명의 실시예에 따른 디스플레이 장치의 화면 표시방법을 나타내는 개략적인 순서도이다.
도 4a 내지 도 4i는 본 발명의 실시예에 따른 디스플레이 장치의 화면 제어방법의 예를 나타내는 개략적인 도면이다.
도 5는 본 발명의 실시예에 따른 음성 데이터에 대응되는 추천 음성 데이터 목록의 예를 나타내는 개략적인 도면이다.
도 6a 내지 도 6f는 본 발명의 다른 실시예에 따른 디스플레이 장치의 화면 제어방법의 예를 나타내는 개략적인 도면이다.
이하, 첨부된 도면들에 기재된 내용들을 참조하여 본 발명에 따른 예시적 실시예를 상세하게 설명한다. 또한, 첨부된 도면들에 기재된 내용들을 참조하여 본 발명의 실시예에 따른 전자 장치를 제조하고 사용하는 방법을 상세히 설명한다. 각 도면에서 제시된 동일한 참조번호 또는 부호는 실질적으로 동일한 기능을 수행하는 부품 또는 구성요소를 나타낸다.
"제1", "제2" 등과 같이 서수를 포함하는 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 구성 요소들은 용어들에 의해 한정되지는 않는다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. "및/또는" 이라는 용어는 복수의 관련된 항목들의 조합 또는 복수의 관련된 항목들 중의 어느 하나의 항목을 포함한다.
본 발명의 실시예에서, 원격 조정 장치(remotely controller, 200, 도1 참조)에 있는 "버튼(또는 키)의 선택"은 버튼(또는 키)의 눌림 또는 버튼(또는 키)의 터치를 의미하는 용어로 사용될 수 있다. 또한, "사용자 입력"은 예를 들어, 사용자의 버튼(또는 키) 선택, 사용자의 버튼(또는 키)의 눌림, 사용자의 버튼 터치, 사용자의 터치 제스처, 사용자의 음성 또는 사용자의 모션을 포함하는 용어로 사용될 수 있다.
본 발명의 실시예에서, "디스플레이 장치의 화면"은 디스플레이 장치의 디스플레이부를 포함하는 의미로 사용될 수 있다.
본 출원서에서 사용한 용어는 실시예를 설명하기 위해 사용된 것으로, 본 발명을 제한 및/또는 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
각 도면에 제시된 동일한 참조부호는 실질적으로 동일한 기능을 수행하는 부재를 나타낸다.
도 1은 본 발명의 실시예에 따른 디스플레이 장치, 원격 조정 장치 및 서버 사이의 동작을 나타내는 개략적인 도면이다.
도 1을 참조하면, 디스플레이 장치, 원격 조정 장치 및 하나 또는 복수의 서버가 표시된다.
수신된 방송뿐만 아니라 콘텐트를 출력가능한 디스플레이 장치(200)는 내장되거나 또는 연결가능한 마이크(240, 도 2 참조)를 이용하여 사용자의 음성을 수신할 수 있다. 또한, 원격 조정 장치(100)는 마이크(163, 도 2 참조)를 이용하여 사용자의 음성을 수신할 수 있다.
원격 조정 장치(100)는 적외선(infrared) 또는 근거리 통신(예를 들어, 블루투스(bluetooth) 등)을 통해 제어 명령을 출력(또는, 전송)하여 디스플레이 장치(200)를 제어할 수 있다. 또한, 원격 조정 장치(100)는 적외선 또는 근거리 통신(예를 들어, 블루투스 등)을 통해 수신된 음성을 변환하여 디스플레이 장치(200)로 전송할 수 있다.
사용자는 원격 조정 장치(100)에 있는 키(버튼을 포함)의 선택 및 사용자의 입력(예를 들어, 터치 패드(touchpad)를 통한 터치(제스처), 마이크(163)를 통한 음성 인식, 또는 센서(164, 도 2 참조)를 통한 모션 인식)을 이용하여 디스플레이 장치(200)를 제어(예를 들어, 전원 온/오프, 부팅(booting), 채널 변경, 음량 조정 또는, 콘텐트 재생 등)할 수 있다.
사용자는 음성을 이용하여 디스플레이 장치(200)를 제어할 수 있다. 원격 조정 장치(100)의 마이크(163)는 디스플레이 장치(200)의 제어에 대응되는 사용자 음성을 수신할 수 있다. 원격 조정 장치(100)는 수신된 음성을 전기적 신호(예를 들어, 디지털 신호, 디지털 데이터, 또는 패킷)로 변환하여 디스플레이 장치(200)로 전송할 수 있다.
사용자는 디스플레이 장치에 부착된 카메라(245, 도 2 참조)를 통한 모션 인식으로 디스플레이 장치(200)를 제어(예를 들어, 전원 온/오프, 부팅, 채널 변경, 음량 조정 또는, 콘텐트 재생 등)할 수도 있다. 또한, 사용자는 원격 조정 장치(200)의 움직임(예를 들어, 원격 조정 장치(200)를 파지(grip)하거나 또는 이동)을 이용하여 디스플레이 장치(200)의 화면을 제어할 수 있다.
도 1을 참조하면, 원격 조정 장치(100)는 디스플레이 장치(200)의 기능 및/또는 동작에 대응되는 버튼(또는 키, 161)을 포함한다. 버튼(161)은 물리 버튼 또는 터치 버튼을 포함할 수 있다. 또한, 원격 조정 장치(100)는 디스플레이 장치(200)에서 실행되는 기능에 대응되는 단일 기능 버튼(예를 들어, 161a 내지 162g) 및/또는 멀티 기능 버튼(161h)을 포함할 수 있다.
원격 조정 장치(200)의 단일 기능 버튼(예를 들어, 전원 버튼(261a), 포인터 키(261e))은 디스플레이 장치(200)에서 실행되는 복수의 기능 중 하나의 기능에 대한 제어에 대응되는 키를 지칭하는 용어로 사용될 수 있다. 원격 조정 장치(200)에 있는 키는 대부분 단일 기능 키일 수 있다.
원격 조정 장치(100)의 버튼의 배열 순서 및/또는 개수는 디스플레이 장치(200)의 기능에 대응하여 추가, 변경 또는 삭제될 수도 있다.
음성 인식 서버(300)는 원격 조정 장치(100) 또는 디스플레이 장치(200)에서 입력된 사용자 음성에 대응되는 전기적 신호(또는, 전기적 신호에 대응되는 패킷)를 음성 인식을 통해 생성되는 음성 데이터(예를 들어, 텍스트, 코드 등)로 변환할 수 있다. 변환된 음성 데이터는 디스플레이 장치(200)를 거쳐 제2 서버(도시되지 아니함)로 전송되거나 또는 제2 서버(도시되지 아니함)로 바로 전송될 수 있다.
대화형 서버(도시되지 아니함)는 변환된 음성 데이터를 디스플레이 장치(200)에서 인식가능한 제어 정보(예를 들어, 디스플레이 장치(200)를 제어하는 제어 명령어)로 변환할 수 있다. 변환된 제어 정보는 디스플레이 장치(200)로 전송될 수 있다.
음성 인식 서버(300) 및 대화형 서버(도시되지 아니함)에 대한 상세한 설명은 후술된다.
도 2는 본 발명의 실시예에 따른 디스플레이 장치, 원격 조정 장치 및 서버를 나타내는 블록도이다.
도 2를 참조하면, 원격 조정 장치(100)에서부터 사용자 음성에 대응되는 전기적 신호를 수신하는 디스플레이 장치(200)는 통신부(230) 또는 입/출력부(260)을 이용하여 외부 장치(예를 들어, 서버(300))와 유선 또는 무선으로 연결될 수 있다.
원격 조정 장치(100)에서부터 사용자 음성에 대응되는 전기적 신호를 수신하는 디스플레이 장치(200)는 통신부(230) 또는 입/출력부(260)을 이용하여 수신된 전기적 신호(또는 전기적 신호에 대응되는 패킷)를 유선 또는 무선으로 연결된 외부 장치(예를 들어, 서버(300 등)로 전송할 수 있다. 또한, 디스플레이 장치(200)는 마이크(245)를 통해 수신된 사용자 음성에 대응되는 전기적 신호(또는 전기적 신호에 대응되는 패킷)를 통신부(230) 또는 입/출력부(260)을 이용하여 유선 또는 무선으로 연결된 외부 장치(예를 들어, 서버(300)로 전송할 수 있다. 외부 장치는 휴대폰(도시되지 아니함), 스마트폰(도시되지 아니함), 태블릿 PC(도시되지 아니함), 및 PC(도시되지 아니함)를 포함할 수 있다.
디스플레이 장치(200)는 디스플레이부(270)를 포함하고, 추가로 튜너(220), 통신부(230), 및 입/출력부(260) 중 하나를 포함할 수 있다. 디스플레이 장치(200)는 디스플레이부(270)를 포함하고, 추가로 튜너(220), 통신부(230), 및 입/출력부(260)의 조합을 포함할 수 있다. 또한, 디스플레이부(270)을 가지는 디스플레이 장치(200)는 튜너(도시되지 아니함)를 가지는 별도의 전자 장치(도시되지 아니함)와 전기적으로 연결될 수 있다.
디스플레이 장치(200)는 예를 들어 아날로그 TV, 디지털 TV, 3D-TV, 스마트 TV, LED TV, OLED TV, 플라즈마 TV, 모니터, 고정 곡률(curvature)인 화면(또는 디스플레이부)을 가지는 커브드(curved) TV, 고정 곡률인 화면을 가지는 플렉시블(flexible) TV, 고정 곡률인 화면을 가지는 벤디드(bended) TV, 및/또는 수신되는 사용자 입력에 의해 현재 화면의 곡률을 변경가능한 곡률 가변형 TV 등으로 구현될 수 있으나, 이에 한정되지 않는다는 것은 당해 기술 분야의 통상의 지식을 가진 자에게 용이하게 이해될 것이다.
디스플레이 장치(200)는 튜너(tuner, 220), 통신부(130), 마이크(240), 카메라(245), 광 수신부(250), 입/출력부(260), 디스플레이부(270), 오디오 출력부(275), 저장부(280) 및 전원 공급부(290)을 포함한다. 디스플레이 장치(200)는 디스플레이 장치(200)의 내부 상태, 또는 외부 상태를 검출하는 센서(예를 들어, 조도 센서, 온도 센서 등, 도시되지 아니함)를 포함할 수 있다.
제어부(210)는 프로세서(processor, 211), 디스플레이 장치(200)의 제어를 위한 제어 프로그램이 저장된 롬(ROM, 또는 비 휘발성 메모리, 212) 및 디스플레이 장치(200)의 외부에서부터 입력되는 신호 또는 데이터를 저장하거나, 디스플레이 장치(200)에서 수행되는 다양한 작업에 대응되는 저장 영역으로 사용되는 램(RAM, 또는 휘발성 메모리, 213)을 포함할 수 있다.
제어부(210)는 디스플레이 장치(200)의 전반적인 동작 및 디스플레이 장치(200)의 내부 구성요소들(210 내지 290)사이의 신호 흐름을 제어하고, 데이터를 처리하는 기능을 수행한다. 제어부(210)는 전원 공급부(290)에서부터 내부 구성요소들(210 내지 290)에게 공급되는 전원을 제어한다. 또한, 사용자의 입력이 있거나 기 설정되어 저장된 조건을 만족하는 경우, 제어부(210)는 저장부(280)에 저장된 OS(Operating System) 또는 다양한 어플리케이션을 실행할 수 있다.
프로세서(211)는 화상(image) 또는 비디오(video)에 대응되는 그래픽 처리를 위한 그래픽 프로세서(graphic processing unit, 도시되지 아니함)를 더 포함할 수 있다. 프로세서(211)는 그래픽 프로세서(도시되지 아니함)를 포함하거나 또는 별개로 구현될 수 있다. 프로세서(211)는 코어(core, 도시되지 아니함)와 그래픽 프로세서(도시되지 아니함)를 포함하는 SoC(system on chip)로 구현될 수 있다. 또한, 프로세서(211)는 롬(212) 및 램(213) 중 적어도 하나를 포함하는 SOC로 구현될 수도 있다. 프로세서(211)는 싱글 코어, 듀얼 코어, 트리플 코어, 쿼드 코어 및 그 배수의 코어를 포함할 수 있다.
디스플레이 장치(200)의 프로세서(211)는 복수의 프로세서를 포함할 수 있다. 복수의 프로세서는 메인 프로세서(main processor, 도시되지 아니함) 및 디스플레이 장치(200)의 상태 중 하나인 화면 오프(또는 전원 오프) 및/또는 준비 모드에서 동작하는 서브 프로세서(sub processor, 도시되지 아니함)를 포함할 수 있다. 또한, 복수의 프로세서는 센서(도시되지 아니함)를 제어하는 센서 프로세서(sensor processor, 도시되지 아니함)를 더 포함할 수 있다.
프로세서(211), 롬(212) 및 램(213)은 내부 버스(bus)를 통해 상호 연결될 수 있다.
제어부(210)는 콘텐트를 표시하는 디스플레이부 및 원격 조정 장치 및 음성 인식 서버와 연결되는 통신부를 제어하고, 상기 통신부를 통해 상기 원격 조정 장치에서부터 수신되는 사용자 음성에 대응되는 신호를 상기 음성 인식 서버로 전송하고, 상기 음성 인식 서버에서부터 수신되는 음성 인식 결과 및 이력 정보에 대응하여 상기 디스플레이부에 다른 추천 가이드를 표시하도록 제어한다.
동일한 음성 인식 결과가 상기 음성 인식 서버에서 수신되는 경우, 제어부(210)는 상기 이력 정보에 대응하여 상기 다른 추천 가이드를 표시하도록 제어할 수 있다.
동일한 음성 인식 결과가 상기 음성 인식 서버에서 수신되는 경우, 제어부(210)는 상기 이력 정보에 대응하여 인증된 사용자에 따라 상기 다른 추천 가이드를 표시하도록 제어할 수 있다.
제어부(210)는 상기 사용자 음성에 대응되는 신호의 수신, 수신된 상기 신호의 음성 인식 서버로 전송 및 상기 음성 인식 결과의 수신에 대응하여 각각 다른 음성 유저 인터페이스를 상기 디스플레이부에 표시하도록 제어할 수 있다.
제어부(210)는 마이크를 통해 수신된 사용자 음성에 대응되는 신호를 상기 통신부를 통해 상기 음성 인식 서버로 전송하도록 제어할 수 있다.
제어부(210)는 상기 음성 유저 인터페이스를 상기 콘텐트와 구별되게 표시하도록 제어할 수 있다.
본 발명의 실시예에서 "디스플레이 장치(200)의 제어부"라는 용어는 디스플레이 장치(200)의 프로세서(211), 롬(212) 및 램(213)을 포함하는 의미일 수 있다. 본 발명의 실시예에서 "디스플레이 장치(200)의 제어부"라는 용어는 디스플레이 장치(200)의 프로세서(211)를 의미할 수 있다. 또한, "디스플레이 장치(200)의 제어부"라는 용어는 디스플레이 장치(200)의 메인 프로세서, 서브 프로세서 롬(212) 및 램(213)을 포함하는 의미일 수 있다.
제어부(210)의 구성 및 동작은 실시예에 따라 다양하게 구현될 수 있다는 것은 당해 기술 분야에서 통상의 지식을 가지는 자에게 용이하게 이해될 것이다.
튜너(220)는 유선 또는 무선으로 수신되는 방송 신호를 증폭(amplification), 혼합(mixing), 공진(resonance) 등을 통하여 많은 전파 성분 중에서 디스플레이 장치(200)에서 수신하고자 하는 채널의 주파수만을 튜닝(tuning)시켜 선택할 수 있다. 방송 신호는 비디오(video), 오디오(audio) 및 부가 데이터(예를 들어, EPG(electronic program guide))를 포함한다.
튜너(220)는 사용자 입력(예를 들어, 음성, 모션, 버튼 입력, 터치 입력 등)에 대응되는 채널 번호(예를 들어, 케이블 방송 채널 506번)에 대응되는 주파수 대역에서 비디오, 오디오 및 데이터를 수신할 수 있다.
튜너(220)는 지상파 방송, 케이블 방송, 위성 방송, 인터넷 방송 등과 같이 다양한 소스로부터 방송 신호를 수신할 수 있다.
튜너(220)는 디스플레이 장치(200)와 일체형(all-in-one)으로 구현되거나 또는 디스플레이 장치(200)와 전기적으로 연결되는 튜너(도시되지 아니함), 또는 튜너(도시되지 아니함)를 가지는 별개의 전자 장치(예를 들어, 셋탑 박스(set-top box), 또는, 원 커넥트(one connect), 도시되지 아니함))로 구현될 수 있다.
통신부(230)는 제어부(210)의 제어에 의해 디스플레이 장치(200)를 원격 조정 장치(200), 또는, 외부 장치(300)와 연결할 수 있다. 통신부(230)는 제어부(210)의 제어에 의해 사용자 음성에 대응되는 전기적 신호(또는 전기적 신호에 대응되는 패킷)를 제1 서버(300)로 전송하거나 또는 제1 서버(300)에서부터 전기적 신호(또는 전기적 신호에 대응되는 패킷)에 대응되는 음성 데이터를 수신할 수 있다. 또한, 통신부(230)는 제어부(210)의 제어에 의해 수신된 음성 데이터를 제2 서버(도시되지 아니함)로 전송하거나 또는 제2 서버(도시되지 아니함)에서부터 음성 데이터에 대응되는 제어 정보를 수신할 수 있다.
통신부(230)는 제어부(210)의 제어에 의해 외부에서부터 어플리케이션을 다운로드 하거나 또는 웹 브라우징을 할 수 있다.
통신부(230)는 디스플레이 장치(200)의 성능 및 구조에 대응하여 유선 이더넷(Ethernet, 231), 무선랜 통신부(232) 및 근거리 통신부(233) 중 하나를 포함할 수 있다. 또한, 통신부(230)은 이더넷(232), 무선랜 통신부(232) 및 근거리 통신부(233)의 조합을 포함할 수 있다.
무선랜 통신부(232)는 제어부(210)의 제어에 의해 AP가 설치된 장소에서 무선을 이용하여 AP와 연결될 수 있다. 무선랜 통신부(232)는 예를 들어, 와이파이(Wi-Fi)를 포함할 수 있다. 무선랜 통신부(232)는 미국전기전자학회(IEEE)의 무선랜 규격(IEEE802.11x)을 지원한다. 또한, 근거리 통신부(233)는 제어부(210)의 제어에 의해 AP없이 무선으로 원격 조정 장치(100)와 외부 장치 사이에 근거리 통신을 할 수 있다. 근거리 통신은 예를 들어, 블루투스(bluetooth), 블루투스 저 에너지(bluetooth low energy), 적외선 통신(IrDA, infrared data association), UWB(Ultra Wideband), 또는, NFC(Near Field Communication) 등을 포함할 수 있다.
본 발명의 실시예에 따른 통신부(230)는 원격 조정 장치(100)에서부터 전송되는 제어 신호를 수신할 수 있다. 또한, 근거리 통신부(233)는 제어부(210)의 제어에 의해 원격 조정 장치(200)에서부터 전송되는 제어 신호를 수신할 수 있다.
마이크(240)는 사용자의 발화(utterance)된 음성을 수신한다. 마이크(240)는 수신된 음성을 전기적 신호로 변환하여 제어부(210)로 출력할 수 있다. 사용자 음성은 예를 들어, 디스플레이 장치(200)의 사용자 가이드, 메뉴 또는 기능의 제어에 대응되는 음성일 수 있다. 마이크(240)의 인식 범위는 사용자 목소리의 크기와 주변 환경(예를 들어, 스피커 소리, 주변 소음)에 대응하여 달라질 수 있다.
마이크(240)는 디스플레이 장치(200)와 일체형으로 구현되거나 또는 분리될 수 있다. 분리된 마이크(240)는 통신부(230) 또는 입/출력부(260)을 통해 디스플레이 장치(200)와 전기적으로 연결될 수 있다.
카메라(245)는 카메라 인식 범위에서 사용자의 모션에 대응되는 비디오(예를 들어, 연속되는 프레임)를 촬영한다. 사용자 모션은 예를 들어, 사용자의 출현(presence, 예를 들어, 사용자가 카메라 인식 범위 내 나타남), 사용자의 얼굴, 표정, 손, 주먹, 손가락과 같은 사용자의 신체 일부분 또는 사용자 신체 일부분의 모션 등을 포함할 수 있다. 카메라(245)는 렌즈(도시되지 아니함) 및 이미지센서(도시되지 아니함)로 구성될 수 있다.
카메라(245)는 디스플레이 장치(200)의 상단, 하단, 좌측 및 우측 중 하나에 위치할 수 있다.
카메라(245)는 촬영된 연속적인 프레임을 변환하여 제어부(210)로 출력할 수 있다. 제어부(210)는 촬영된 연속적인 프레임을 분석하여, 사용자의 모션을 인식할 수 있다. 제어부(210)는 모션 인식 결과를 이용하여 디스플레이 장치(200)에 가이드를 표시, 메뉴를 표시하거나 모션 인식 결과에 대응되는 제어(예를 들어, 채널 조정, 또는, 음량 조정 등)를 할 수 있다.
카메라(245)가 복수인 경우, 제어부(210)는 복수의 카메라(245)를 통해 3차원 정지 이미지 또는 3차원 모션을 수신할 수 있다.
카메라(245)는 디스플레이 장치(200)와 일체형으로 구현되거나 또는 분리될 수 있다. 분리된 카메라(도시되지 아니함)를 포함하는 전자 장치(도시되지 아니함)는 통신부(230) 또는 입/출력부(260)을 통해 디스플레이 장치(200)와 전기적으로 연결될 수 있다.
광 수신부(250)는 원격 조정 장치(100)에서부터 출력되는 광 신호(제어 신호를 포함)를 광창(도시되지 아니함)을 통해 수신한다.
광 수신부(250)는 원격 조정 장치(100)에서부터 사용자 입력(예를 들어, 터치, 눌림, 터치 제스처, 음성, 또는 모션)에 대응되는 광 신호를 수신할 수 있다. 수신된 광 신호에서 제어 신호가 추출될 수 있다. 수신된 광 신호 및/또는 추출된 제어 신호는 제어부(210)로 전송될 수 있다.
입/출력부(260)는 제어부(210)의 제어에 의해 디스플레이 장치(200)의 외부에서부터 콘텐트를 수신한다. 콘텐트는 예를 들어, 비디오, 이미지, 텍스트 또는 웹 문서를 포함할 수 있다.
입/출력부(260)은 콘텐트 수신에 대응되는 HDMI 입력 포트(high-definition multimedia interface port, 261), 컴포넌트 입력 잭(jack, 262), PC 입력 포트(port, 263), 및 USB 입력 잭(jack, 264) 중 하나를 포함할 수 있다. 입/출력부(260)는 HDMI 입력 포트(262), 컴포넌트 입력 잭(262), PC 입력 포트(263), 및 USB 입력 잭(264)의 조합을 포함할 수 있다. 입/출력부(260)는 디스플레이 장치(200)의 성능 및 구조에 따라 추가, 삭제 및/또는 변경될 수 있다는 것은 당해 기술 분야에서 통상의 지식을 가지는 자에게 용이하게 이해될 것이다
디스플레이부(270)는 제어부(210)의 제어에 의해 튜너(220)를 통해 수신되는 방송 신호에 포함된 비디오를 표시한다. 디스플레이부(270)는 통신부(230) 또는 입/출력부(260)을 통해 입력되는 콘텐트(예를 들어, 비디오)를 표시할 수 있다. 디스플레이부(270)는 제어부(210)의 제어에 의해 저장부(280)에 저장된 콘텐트를 출력할 수 있다. 또한, 디스플레이부(270)는 음성 인식에 대응되는 음성 인식 태스크를 수행하기 위한 음성 UI(user interface) 또는 모션 인식에 대응되는 모션 인식 태스크를 수행하기 위한 모션 UI를 표시할 수 있다. 예를 들어, 음성 UI는 음성 명령어 가이드(예를 들어, 추천 음성 데이터 또는 추천 가이드)를 포함하고, 모션 UI는 모션 명령어 가이드를 포함할 수 있다.
본 발명의 실시예에 따른 디스플레이 장치(200)의 화면은 디스플레이 장치(200)의 디스플레이부(270)를 포함하는 의미로 사용될 수 있다.
본 발명의 실시 예에 따른 디스플레이부(270)는 제어부(210)의 제어에 의해 추천 가이드의 표시에 대응되는 시각 피드백을 표시할 수 있다.
본 발명의 다른 실시예에 따른 디스플레이부(270)는 디스플레이 장치(200)와 분리될 수 있다. 디스플레이 장치(200)의 입/출력부(260)를 통해 디스플레이부(270)는 디스플레이 장치(200)와 전기적으로 연결될 수도 있다.
오디오 출력부(275)는 제어부(210)의 제어에 의해 튜너(220)를 통해 수신된 방송 신호에 포함된 오디오를 출력한다. 오디오 출력부(275)는 통신부(230) 또는 입/출력부(260)를 통해 입력되는 오디오(예를 들어, 음성 또는 사운드에 대응되는)를 출력할 수 있다. 또한, 오디오 출력부(275)은 제어부(210)의 제어에 의해 저장부(280)에 저장된 오디오 파일을 출력할 수 있다.
오디오 출력부(275)는 스피커(276), 헤드폰 출력 단자(277) 또는 S/PDIF 출력 단자(278) 중 하나 또는, 스피커(276), 헤드폰 출력 단자(277) 및 S/PDIF 출력 단자(278)의 조합을 포함할 수 있다.
본 발명의 실시예에 따른 오디오 출력부(275)는 디스플레이 장치(200)의 제어부(210)의 제어에 의해 추천 가이드의 표시에 대응되는 청각 피드백을 출력할 수 있다.
저장부(280)는 제어부(210)의 제어에 의해 디스플레이 장치(200)를 구동하고 제어하기 위한 다양한 데이터, 프로그램 또는 어플리케이션을 저장할 수 있다. 저장부(280)는 튜너(220), 통신부(230), 마이크(240), 카메라(245), 광 수신부(250), 입/출력부(260), 디스플레이부(270), 오디오 출력부(275) 및 전원 공급부(290)의 구동에 대응되는 입력/출력되는 신호 또는 데이터를 저장할 수 있다.
저장부(280)는 디스플레이 장치(200) 및 제어부(210)의 제어를 위한 제어 프로그램, 제조사에서 최초 제공되거나 외부에서부터 다운로드 받은 어플리케이션, 어플리케이션과 관련된 GUI(graphical user interface, 이하에서는 "GUI'라고 칭한다), GUI를 제공하기 위한 오브젝트(예를 들어, 이미지 텍스트, 아이콘, 버튼 등), 사용자 정보, 문서, 음성 데이터 베이스. 모션 데이터 베이스 또는 관련 데이터들을 저장할 수 있다.
저장부(280)는 도시되지 아니한 방송 수신 모듈, 채널 제어 모듈, 음량 제어 모듈, 통신 제어 모듈, 음성 인식 모듈, 모션 인식 모듈, 광 수신 모듈, 디스플레이 제어 모듈, 오디오 제어 모듈, 외부 입력 제어 모듈, 전원 제어 모듈, 음성 데이터베이스(DB), 또는 모션 데이터베이스(DB)을 포함할 수 있다.
저장부에 도시되지 아니한 모듈들 및 데이터 베이스는 디스플레이 장치(200)에서 방송 수신의 제어 기능, 채널 제어 기능, 음량 제어 기능, 통신 제어 기능, 음성 인식 기능, 모션 인식 기능, 광 수신 제어 기능, 디스플레이 제어 기능, 오디오 제어 기능, 외부 입력 제어 기능, 또는 전원 제어 기능을 수행하기 위하여 소프트웨어 형태로 구현될 수 있다. 제어부(210)는 저장부(280)에 저장된 상기 소프트웨어를 이용하여 디스플레이 장치(200)의 동작 및/또는 기능을 수행할 수 있다.
저장부(280)는 음성 인식 서버(300)에서부터 수신된 음성 데이터를 저장할 수 있다. 저장부(280)는 음성 인식 서버(300)에서부터 수신된 제어 정보를 저장할 수 있다. 저장부(280)는 대화형 서버(도시되지 아니함)에서부터 수신된 제어 정보를 저장할 수도 있다.
저장부(280)는 사용자 음성에 대응되는 음소에 대응되는 데이터 베이스를 저장할 수 있다. 또한, 저장부(280)는 음성 데이터에 대응되는 제어 정보 데이터 베이스를 저장할 수 있다.
저장부(280)는 시각 피드백에 대응되는 동영상, 이미지 또는 텍스트를 저장할 수 있다.
저장부(280)는 청각 피드백에 대응되는 사운드를 저장할 수 있다.
저장부(280)는 사용자에게 제공되는 피드백의 피드백 제공 시간(예를 들어, 300 ㎳)을 저장할 수 있다.
본 발명의 실시예에서 "저장부"라는 용어는 저장부(280), 제어부(210)의 롬(212), 램(213), SoC(도시되지 아니함)로 구현되는 저장부(도시되지 아니함), 디스플레이 장치(200)에 장착되는 메모리 카드(예를 들어, micro SD 카드, USB 메모리, 도시되지 아니함), 또한 입/출력부(260)의 USB 포트(264)에 연결가능한 외부 저장부(예를 들어, USB 메모리 등, 도시되지 아니함)를 포함하는 용어로 사용될 수 있다. 또한, 저장부는 비휘발성 메모리, 휘발성 메모리, 하드 디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD)를 포함할 수 있다.
전원 공급부(290)는 제어부(210)의 제어에 의해 디스플레이 장치(200) 내부의 구성 요소들(210 내지 290)에게 외부 전원 소스에서부터 입력되는 전원을 공급한다. 전원 공급부(290)은 제어부(210)의 제어에 의해 디스플레이 장치(200) 내부에 위치하는 하나 또는 둘 이상의 배터리(도시되지 아니함)에서부터 입력되는 전원을 내부의 구성 요소들(210 내지 290)에게 공급할 수 있다.
전원 공급부(290)는 전원 오프(단, 전원 플러그가 전원 콘센트에 연결)된 디스플레이 장치(200)의 카메라(245)에 전원을 공급하는 배터리(도시되지 아니함)를 포함할 수 있다.
도 1 및 도 2의 디스플레이 장치(200)에 도시된 구성 요소들(예를 들어, 210 내지 290)은 디스플레이 장치(200)의 성능 및/또는 종류에 대응하여 적어도 하나의 구성 요소의 추가, 변경되거나 삭제(예를 들어, 점선으로 도시된 박스 중 적어도 하나)될 수 있다. 또한, 구성 요소들의 위치(예를 들어, 210 내지 290)는 디스플레이 장치(200)의 성능 또는 구조에 대응하여 변경될 수 있다는 것은 당해 기술 분야에서 통상의 지식을 가지는 자에게 용이하게 이해될 것이다.
이하에서는 디스플레이 장치의 화면을 제어하는 경우에 대하여 예를 들어 구체적으로 설명한다.
도 2를 참조하면, 디스플레이 장치(200)를 원격으로 제어하는 원격 조정 장치(100)는 제어부(110), 통신부(130), 입력부(160), 광 출력부(150), 디스플레이부(170), 저장부(180) 및 전원 공급부(190)를 포함한다. 원격 조정 장치(100)는 통신부(130) 및 광 출력부(150) 중 하나를 포함할 수 있다. 또한, 원격 조정 장치(100)는 통신부(130) 및 광 출력부(150) 중 모두 포함할 수 있다.
원격 조정 장치(100)는 디스플레이 장치(200)를 원격에서 제어가능한 전자 장치를 지칭하는 용어로 사용될 수 있다. 또한, 원격 조정 장치(100)는 디스플레이 장치(200)의 제어를 위한 어플리케이션(도시되지 아니함)을 설치가능한(또한, 외부에서 다운로드 가능한) 전자 장치를 포함할 수 있다.
디스플레이 장치(200)의 제어를 위한 어플리케이션(도시되지 아니함)을 설치가능한 전자 장치는 디스플레이부(예를 들어, 터치 스크린 또는 터치 패널 없이 디스플레이 패널만 있는)를 가질 수 있다. 예를 들어, 디스플레이부를 가지는 전자 장치는 휴대폰(도시되지 아니함), 스마트 폰(도시되지 아니함), 태블릿 PC(도시되지 아니함), 노트 PC(도시되지 아니함), 다른 디스플레이 장치(도시되지 아니함) 또는 가전 장치(예를 들어, 냉장고, 세탁기 또는 청소기 등)를 포함할 수 있다.
사용자는 실행되는 어플리케이션에서 제공되는 그래픽 유저 인터페이스(GUI, 도시되지 아니함)에서 버튼(예를 들어, 채널 변경 버튼, 도시되지 아니함)을 이용하여 디스플레이 장치(200)를 제어할 수 있다.
제어부(110)는 프로세서(Processor, 111), 원격 조정 장치(100)의 제어를 위한 제어 프로그램이 저장된 롬(ROM, 또는 비휘발성 메모리, 112) 및 원격 조정 장치(100)의 외부로부터 입력되는 신호 또는 데이터를 저장하거나, 원격 조정 장치(100)에서 수행되는 다양한 작업에 대한 저장 영역으로 사용되는 램(RAM, 또는 휘발성 메모리, 113)을 포함할 수 있다.
제어부(110)는 원격 조정 장치(100)의 전반적인 동작 및 내부 구성 요소들(110 내지 190) 간의 신호 흐름을 제어하고, 데이터를 처리하는 기능을 수행한다. 제어부(110)는 전원부(190)을 이용하여 내부 구성 요소들(110 내지 190)에게 전원 공급을 제어한다.
본 발명의 실시예에서 "제어부(110)"라는 용어는 원격 조정 장치(100)의 프로세서(111), 롬(112) 및 램(113)을 포함할 수 있다.
통신부(130)는 제어부(110)의 제어에 의해 사용자 입력(예를 들어, 터치, 눌림, 터치 제스처, 음성, 또는 모션)에 대응되는 제어 신호(예를 들어, 전원 온에 대응되는 제어 신호, 또는, 음량 조정에 대응되는 제어 신호 등)를 제어 대상인 디스플레이 장치(200)로 전송할 수 있다.
통신부(130)는 제어부(110)의 제어에 의해 디스플레이 장치(200)와 무선으로 연결될 수 있다. 통신부(130)는 무선랜 통신부(131)과 근거리 통신부(132) 중 적어도 하나(예를 들어, 무선랜 통신부(131) 및 근거리 통신부(132) 중 하나, 또는 무선랜 통신부(131)과 근거리 통신부(132) 모두)를 포함할 수 있다.
원격 조정 장치(100)의 통신부(130)는 디스플레이 장치(200)의 통신부(230)와 실질적으로 유사하므로 중복되는 설명을 생략한다.
입력부(160)는 디스플레이 장치(200)의 제어를 위한 사용자의 입력(예를 들어, 터치 또는 눌림)이 수신하는 버튼(161) 또는 터치 패드(162)를 포함할 수 있다. 입력부(160)는 발화된 사용자 음성을 수신하는 마이크(163), 원격 조정 장치(100)의 움직임(motion)을 검출하는 센서(164) 또는 햅틱 피드백을 제공하는 진동 모터(도시되지 아니함)를 포함할 수 있다.
입력부(160)는 수신된 사용자 입력(예를 들어, 터치, 눌림, 터치 제스처, 음성, 또는 모션)에 대응되는 전기적인 신호(예를 들어, 아날로그 신호 또는 디지털 신호)를 제어부(110)로 출력할 수 있다.
버튼(261)는 도 1의 버튼(161a 내지 161h)를 포함할 수 있다. 터치 패드(162)는 사용자의 터치 또는 사용자의 터치 제스처를 수신할 수 있다. 터치 패드(162)는 방향 키 및 엔터 키로 구현될 수 있다. 또한, 터치 패드(162)는 원격 조정 장치(100)의 전면에 위치할 수도 있다.
마이크(163)는 사용자의 발화된 음성을 수신한다. 마이크(163)는 수신된 음성을 변환하여 제어부(110)로 출력할 수 있다 제어부(210)는 사용자 음성에 대응되는 제어 신호(또는, 전기적 신호)를 생성하여 통신부(130)를 통해 디스플레이 장치(200)로 전송할 수 있다.
센서(164)는 원격 조정 장치(100)의 내부 상태 및/또는 외부 상태를 검출할 수 있다. 예를 들어, 센서(164)는 모션 센서(도시되지 아니함), 자이로 센서(도시되지 아니함), 가속도 센서(도시되지 아니함), 또는 중력 센서(도시되지 아니함)를 포함할 수 있다. 센서(164)는 원격 조정 장치(100)의 운동 가속도 또는 중력 가속도를 각각 측정할 수 있다.
진동 모터(도시되지 아니함)는 제어부(210)의 제어에 따라 신호를 기계적 진동으로 변환할 수 있다. 예를 들어, 진동 모터(도시되지 아니함)는 리니어 진동 모터, 바 타입 진동 모터, 코인 타입 진동 모터 또는 압전 소자 진동 모터를 포함할 수 있다. 진동모터(도시되지 아니함)는 원격 조정 장치(200) 내부에 하나 또는 복수로 위치할 수 있다.
광 출력부(150)는 제어부(110)의 제어에 의해 사용자 입력(예를 들어, 터치, 눌림, 터치 제스처, 음성, 또는 모션)에 대응되는 광 신호(예를 들어, 제어 신호를 포함)를 출력한다. 출력된 광 신호는 디스플레이 장치(200)의 광 수신부(250)에서 수신될 수 있다. 원격 조정 장치(100)에서 사용되는 리모컨 코드 포맷은 제조사 전용인 리모컨 코드 포맷 및 상용 리모컨 코드 포맷 중 하나를 사용할 수 있다. 리모컨 코드 포맷은 리더 코드(leader code) 및 데이터 영역(data word)를 포함할 수 있다. 출력되는 광 신호는 반송파(carrier wave)에 변조되어 출력될 수 있다. 제어 신호는 저장부(180)에 저장되어 있거나 또는 제어부(110)에 의해 생성될 수도 있다. 원격 조정 장치(100)는 IR-LED(infrared-laser emitting diode)를 포함할 수 있다.
원격 조정 장치(100)는 디스플레이 장치(200)로 제어 신호를 전송 가능한 통신부(130) 및 광 출력부(150) 중 하나 또는 모두를 포함할 수 있다.
제어부(110)는 사용자 음성에 대응되는 제어 신호를 통신부(130) 및 광 출력부(150) 중 적어도 하나를 통해 디스플레이 장치(200)로 출력할 수 있다. 제어부(110)는 사용자 음성에 대응되는 제어 신호를 통신부(130) 및 광 출력부(150) 중 하나(예를 들어, 통신부(130))를 통해 우선(prior)적으로 디스플레이 장치(200)로 전송할 수 있다.
디스플레이부(170)는 디스플레이 장치(200)에 표시되는 방송 채널 번호, 방송 채널 이름 및/또는 디스플레이 장치의 상태(예를 들어, 화면 오프, 준비 모드, 웰컴 모드 및/또는 일반 모드)등을 표시할 수 있다.
원격 조정 장치(200)에서부터 디스플레이 장치(200)로 광 신호가 출력되는 경우, 디스플레이부(170)는 제어부(110)의 제어에 의해 디스플레이 장치(200)의 전원을 켜는 "TV on", 디스플레이 장치(200)의 전원을 오프하는 "TV off", 선국된 채널 번호를 표시하는 "Ch No." 또는, 조정되는 음량을 나타내는 "Vol 값" 에 대응되는 텍스트, 아이콘 또는 심볼을 표시할 수 있다.
디스플레이부(170)는 예를 들어, LCD(liquid crystal display) 방식, OLED(Organic Light Emitting Diodes) 방식, 또는 VFD(Vacuum fluorescent display) 방식의 디스플레이를 포함할 수 있다.
저장부(180)는 제어부(110)의 제어에 의해 원격 조정 장치(100)를 구동하고 제어하기 위한 다양한 데이터, 프로그램 또는 어플리케이션을 저장할 수 있다. 저장부(180)은 통신부(130), 광 출력부(150), 및 전원 공급부(190)의 구동에 대응되는 입력, 또는 출력되는 신호 또는 데이터를 저장할 수 있다.
저장부(180)은 제어부(110)의 제어에 의해 수신된 사용자 입력(예를 들어, 터치, 눌림, 터치 제스처, 음성, 또는 모션)에 대응되는 제어 정보 및/또는 원격 조정 장치(100)의 움직임에 대응되는 제어 정보를 저장할 수 있다.
저장부(180)는 원격 조정 장치(100)에 대응되는 원격 조정 장치 정보를 저장할 수 있다. 원격 조정 장치 정보는 모델명, 고유의 장치 ID(device ID), 메모리 잔량, 객체데이터 유무, 블루투스 버전 또는 블루투스 프로파일을 포함할 수 있다.
전원 공급부(190)는 제어부(110)의 제어에 의해 원격 조정 장치(100)의 구성 요소(110 내지 190)에 전원을 공급한다. 전원 공급부(190)는 원격 조정 장치(100)에 위치하는 하나 또는 둘 이상의 배터리(도시되지 아니함)에서부터 전원을 구성 요소(110 내지 190)에게 공급할 수 있다. 배터리는 원격 조정 장치(200)의 표면(예를 들어, 버튼(161) 또는 터치 패드(2162)가 있는)과 후면(도시되지 아니함) 사이의 내부에 위치할 수 있다.
도 1 및 도 2의 원격 조정 장치(100)에 도시된 구성 요소들은 원격 조정 장치(100)의 성능에 대응하여 적어도 하나의 구성 요소가 추가되거나 삭제(예를 들어, 점선으로 도시된 박스 중 적어도 하나)될 수 있다. 또한, 구성 요소들의 위치는 원격 조정 장치(100)의 성능 또는 구조에 대응하여 변경될 수 있다는 것은 당해 기술분야에서 통상의 지식을 가진 자에게 용이하게 이해될 것이다.
음성 인식 서버(300)는 원격 조정 장치(100) 또는 디스플레이 장치(200)에서 입력된 사용자 음성에 대응되는 패킷을 통신부(도시되지 아니함)를 통해 수신한다. 음성 인식 서버(300)의 제어부(도시되지 아니함)는 음성 인식부(도시되지 아니함) 및 음성 인식 알고리즘을 이용하여 수신된 패킷을 분석하여 음성 인식을 수행한다.
음성 인식 서버(300)의 제어부(도시되지 아니함)는 음성 인식 알고리즘을 이용하여 수신된 전기적 신호(또는 전기적 신호에 대응되는 패킷)를 단어 또는 문장 형태의 텍스트를 포함하는 음성 인식 데이터로 변환할 수 있다.
음성 인식 서버(300)의 제어부(도시되지 아니함)는 음성 데이터를 통신부(도시되지 아니함)를 통해 디스플레이 장치(200)로 전송할 수 있다.
음성 인식 서버(300)의 제어부(도시되지 아니함)는 음성 데이터를 이용하여 제어 정보(예를 들어, 제어 명령어)로 변환할 수 있다. 제어 정보는 디스플레이 장치(200)의 동작(또는 기능)을 제어할 수 있다.
음성 인식 서버(300)는 제어 정보 데이터 베이스를 포함할 수 있다. 음성 인식 서버(300)의 제어부(도시되지 아니함)는 저장된 제어 정보 데이터 베이스를 이용하여 변환된 음성 데이터에 대응되는 제어 정보를 결정할 수 있다.
음성 인식 서버(300)는 변환된 음성 데이터를 제어 정보 데이터 베이스를 이용하여 디스플레이 장치(200)를 제어하는 제어 정보(예를 들어, 디스플레이 장치(200)의 제어부(210)가 파싱(parsing)하는)로 변환할 수도 있다.
음성 인식 서버(300)의 제어부(도시되지 아니함)는 통신부(도시되지 아니함)를 통해 제어 정보를 디스플레이 장치(200)로 전송할 수 있다.
본 발명의 실시예에서, 음성 인식 서버(300)는 디스플레이 장치(200)와 일체형(200')일 수 있다. 음성 인식 서버(300)는 디스플레이 장치(200)의 구성 요소(210 내지 290)와 별개인 구성 요소로 디스플레이 장치(200)에 포함(200')될 수 있다. 음성 인식 서버(300)는 디스플레이 장치(200)의 저장부(280)에 내장(embedded)되거나 또는 별도의 저장부(도시되지 아니함)에 구현될 수도 있다.
본 발명의 실시예에서, 음성 인식 서버(300)와 별개로 대화형 서버(도시되지 아니함)가 구현될 수 있다. 대화형 서버(도시되지 아니함)는 음성 인식 서버(300)에서 변환된 음성 데이터를 제어 정보로 변환할 수 있다. 대화형 서버(도시되지 아니함)는 음성 인식 서버(300) 및 디스플레이 장치(200) 중 하나에서부터 수신되는 음성 데이터를 제어 정보로 변환할 수 있다. 대화형 서버(도시되지 아니함)는 변환된 제어 정보를 디스플레이 장치(200)로 전송할 수 있다.
도 1 및 도 2의 음성 인식 서버(300)에 도시된 구성 요소들은 음성 인식 서버(300)의 성능에 대응하여 적어도 하나의 구성 요소가 추가되거나 삭제될 수 있다.
도 3은 본 발명의 실시예에 따른 디스플레이 장치의 화면 표시방법을 나타내는 개략적인 순서도이다.
도 4a 내지 도 4h는 본 발명의 실시예에 따른 디스플레이 장치의 화면 제어방법의 예를 나타내는 개략적인 도면이다.
도 3의 단계(S310)에서, 디스플레이 장치에 콘텐트가 표시된다.
도 4a를 참조하면, 디스플레이 장치(200)에 콘텐트(예를 들어, 방송 신호, 또는 비디오 등, 201)가 표시된다. 디스플레이 장치(200)는 원격 조정 장치(100)와 무선(예를 들어, 무선랜 통신부(231) 또는 근거리 통신부(232))으로 연결된다. 또한, 디스플레이 장치(200)는 음성 인식 서버(300)와 유선 또는 무선으로 연결될 수 있다.
디스플레이 장치(200)와 원격 조정 장치(100)가 최초 연결인 경우, 원격 조정 장치(100)의 제어부(110)는 근거리 통신부(예를 들어, 블루투스 또는 블루투스 저 에너지, 132)를 이용하여 디스플레이 장치(200)를 검색할 수 있다. 원격 조정 장치(100)의 제어부(110)는 디스플레이 장치(200)를 조회(inquiry)하고 및 조회된 디스플레이 장치(200)에 대해 연결 요청(page)을 할 수 있다.
도 3의 단계(S320)에서, 원격 조정 장치의 음성 버튼이 선택된다.
도 4b를 참조하면, 사용자는 원격 조정 장치(100)의 음성 버튼(161b)을 선택한다. 제어부(110)는 사용자의 음성 버튼(161b) 선택에 대응하여 마이크(163)를 동작되게 제어할 수 있다. 또한, 제어부(110)는 사용자의 음성 버튼(161b) 선택에 대응하여 마이크(163)에 전원을 공급되도록 제어할 수 있다.
제어부(110)는 통신부(130)를 통해 디스플레이 장치(200)로 마이크(163)의 동작의 시작에 대응되는 신호를 전송할 수도 있다.
도 3의 단계(S330)에서, 디스플레이 장치의 화면에 음성 UI가 표시된다.
도 4b 및 도 4c를 참조하면, 디스플레이 장치(200)의 화면에 제어부(210)의 제어에 의해 마이크(163)의 동작에 대응하여 음성 UI(202)가 표시된다. 원격 조정 장치(100)에서 음성 버튼(161b)의 선택에 대응되는 디스플레이 장치(200)에서 음성 UI(202)를 표시하는 시간 사이의 간격이 짧을수록 사용자에게 개선된 사용자 경험(user experience)를 제공할 수 있다. 음성 UI(202)는 원격 조정 장치(100)에서 음성 버튼(161b)의 선택 시점을 기준으로 500㎳(변경 가능) 이하로 표시될 수 있다.
음성 UI(202)의 표시 시간은 디스플레이 장치(200)의 성능 및/또는 원격 조정 장치(100)와 디스플레이 장치(200) 사이의 통신 상태에 따라 변경될 수 있다.
음성 UI(202)는 사용자의 발화에 대응되게 사용자에게 제공되는 가이드 유저 인터페이스(user interface)를 의미한다. 예를 들어, 사용자가 발화하는 경우, 디스플레이 장치(200)의 제어부(210)는 사용자 발화에 대응되는 텍스트, 이미지, 비디오 또는 심볼로 구성되는 음성 가이드용 유저 인터페이스를 사용자에게 제공할 수 있다. 음성 UI(202)는 화면에 표시되는 콘텐트(201)와 별개로 표시될 수 있다.
또한, 음성 UI(202)는 디스플레이 장치(200)의 화면의 일 측에 표시되는 사용자 가이드(예를 들어, 텍스트(202a), 이미지(202b), 비디오(도시되지 아니함) 또는 심볼(202d) 등)를 포함할 수 있다. 사용자 가이드는 텍스트, 이미지, 비디오, 심볼 중 하나 또는 조합을 표시할 수 있다.
음성 UI(202)는 디스플레이 장치(200)의 화면 일 측에 위치할 수 있다. 또한, 음성 UI(202)는 디스플레이 장치(200)의 화면에 표시되는 콘텐트(201)와 겹쳐져 표시될 수 있다. 음성 UI(202)는 투명도(transparency, 예를 들어, 0% 내지 100%)를 가질 수 있다. 음성 UI(202)의 투명도에 따라 흐릿하게 콘텐트(201)가 흐릿하게 표시될 수도 있다. 또한, 본 발명의 실시예에서 음성 UI는 화면에서 콘텐트(201)와 구별되게 표시될 수 있다.
설정된 시간(예를 들어, 100 ㎳, 변경 가능)이 경과되는 경우, 디스플레이 장치(200)의 제어부(210)는 다른 음성 UI(203)를 표시할 수 있다. 음성 UI(202)의 면적은 다른 음성 UI(203)의 면적과 다를(예를 들어, 이미지(203b)에 의해) 수 있다. 음성 UI(203)는 디스플레이 장치(200)의 화면의 일 측에 표시되는 사용자 가이드(예를 들어, 텍스트(203a), 이미지(203b) 및 심볼(203d) 등)를 포함할 수 있다.
디스플레이 장치(200)의 제어부(210)는 통신부(230)를 통해 음성 인식 서버(300)로 원격 조정 장치(100)에서 음성 버튼(163)의 선택에 대응되는 신호(예를 들어, 음성 인식 서버(300)에서 음성 인식부(도시되지 아니함)의 동작 준비에 대응되는)를 전송할 수도 있다.
도 3의 단계(S340)에서, 원격 조정 장치에서 사용자 음성이 입력된다.
도 4c를 참조하면, 사용자는 디스플레이 장치(200)의 제어를 위하여 발화(또는, 음성, 예를 들어, '볼륨 올려(volume up)')한다. 원격 조정 장치(100)의 마이크(163)는 사용자의 음성을 수신(또는 입력)할 수 있다. 마이크(163)는 수신된 사용자 음성에 대응되는 신호(예를 들어, 디지털 신호 또는 아날로그 신호)로 변환하여 제어부(110)로 출력할 수 있다.
제어부(110)는 수신된 사용자 음성에 대응되는 신호를 저장부(180)에 저장할 수 있다.
본 발명의 다른 실시예에서, 사용자 음성은 디스플레이 장치(200)의 마이크(240)를 통해 입력될 수 있다. 예를 들어, 사용자는 원격 조정 장치(100)의 음성 버튼(161b)을 선택하지 않고, 직접 디스플레이 장치(200)의 전면(예를 들어, 디스플레이부(270)가 노출되는)을 향해 발화 예를 들어, '볼륨 올려(volume up)')할 수도 있다. 사용자 음성이 직접 디스플레이 장치(200)로 입력되어도 디스플레이 장치(200) 및 음성 인식 서버(300)의 동작은 원격 조정 장치(100)를 통한 음성 입력과 실질적으로 유사(예를 들어, 음성 입력의 경로 차이)할 수 있다.
도 3의 단계(S350)에서, 사용자 음성에 대응되는 신호가 디스플레이 장치로 전송된다.
도 4d를 참조하면, 원격 조정 장치(100)의 제어부(110)는 저장된 사용자 음성에 대응되는 신호를 통신부(130)를 통해 디스플레이 장치(200)로 전송할 수 있다. 사용자 음성에 대응되는 신호의 일부가 저장부(180)에 저장되는 경우, 원격 조정 장치(100)의 제어부(110)는 사용자 음성에 대응되는 신호의 일부를 통신부(130)를 통해 직접(또는, 바로, 100 ㎳ 이하(변경 가능)의 지연되는) 디스플레이 장치(200)로 전송할 수 있다.
원격 조정 장치(100)의 제어부(110)는 저장된 사용자 음성에 대응되는 신호를 무선 통신 규격에 따라 디스플레이 장치(200)에서 수신할 수 있도록 전송(또는, 변환하여 전송)할 수 있다. 또한, 원격 조정 장치(100)의 제어부(110)는 저장된 사용자 음성에 대응되는 신호를 포함하는 패킷(packet)을 전송하도록 통신부(130)를 제어할 수 있다. 패킷은 근거리 통신의 규격을 따르는 패킷일 수 있다.
원격 조정 장치(100)에서부터 패킷이 수신되는 경우, 디스플레이 장치(200)의 제어부(210)는 수신되는 패킷을 저장부(280)에 저장할 수 있다.
디스플레이 장치(200)의 제어부(210)는 수신된 패킷을 분석(또는, 파싱)할 수 있다. 분석 결과에 따라, 디스플레이 장치(200)의 제어부(210)는 사용자 음성에 대응되는 신호의 수신을 결정할 수 있다.
디스플레이 장치(200)의 제어부(210)는 패킷 수신에 대응되는 다른 음성 UI(204)를 표시한다. 음성 UI(204)는 패킷 수신에 대응되는 텍스트(204a) 및 비디오(204c)를 포함할 수 있다.
음성 UI(204)는 음성 UI(202)와 실질적으로 유사(예를 들어, 텍스트 차이, 이미지 및 비디오의 차이 등)하므로 중복되는 설명은 생략된다.
디스플레이 장치(200)의 제어부(210)는 수신된 패킷을 통신부(230)를 통해 음성 인식 서버(300)로 전송할 수 있다. 디스플레이 장치(200)의 제어부(210)는 수신된 패킷을 그대로 또는 수신된 패킷을 변환하여 음성 인식 서버(300)로 전송할 수도 있다.
도 3의 단계(S360)에서, 음성 인식이 수행된다.
음성 인식 서버(300) 제어부(도시되지 아니함)는 수신된 패킷에 대해 음성 인식 알고리즘을 이용하여 음성 인식을 수행한다. 음성 인식 알고리즘은 패킷을 일정한 길이를 가지는 구간으로 구분하고, 각각의 구간을 음향 분석하여 주파수 스펙트럼 및 음성 파워 등을 포함하는 파라미터(parameter)를 추출할 수 있다. 음성 인식 알고리즘은 패킷을 음소(phonemes) 단위로 분할하고, 분할된 음소 단위의 파라미터를 기초로 하여 음소를 인식할 수 있다.
음성 인식 서버(300)의 저장부(도시되지 아니함)는 특정 음소에 대응되는 음소 데이터 베이스를 저장(업데이트도 가능)할 수 있다. 음성 인식 서버(300)의 제어부(도시되지 아니함)는 인식된 음소 및 기 저장된 데이터 베이스를 이용하여 음성 데이터를 생성할 수 있다.
음성 인식 서버(300)의 제어부(도시되지 아니함)는 단어 또는 문장 형태인 음성 인식 데이터를 생성할 수 있다. 상술된 음성 인식 알고리즘은 예를 들어, 히든 마코프 모델(hidden markov model 등을 포함할 수 있다.
음성 인식 서버(300)의 제어부(도시되지 아니함)는 수신된 패킷의 파형을 음성 인식하여 음성 데이터를 생성할 수 있다.
음성 인식 서버(300)의 제어부(도시되지 아니함)는 생성된 음성 데이터를 저장부(도시되지 아니함)에 저장할 수 있다. 음성 인식 서버(300)의 제어부(도시되지 아니함)는 음성 데이터를 제어 정보보다 먼저 통신부(도시되지 아니함)를 통해 디스플레이 장치(200)로 전송할 수 있다.
음성 인식 서버(300)의 제어부(도시되지 아니함)는 음성 데이터를 이용하여 제어 정보(예를 들어, 제어 명령어)로 변환할 수 있다. 제어 정보는 디스플레이 장치(200)의 동작(또는 기능)을 제어할 수 있다.
음성 인식 서버(300)는 제어 정보 데이터 베이스를 포함할 수 있다. 음성 인식 서버(300)의 제어부(도시되지 아니함)는 저장된 제어 정보 데이터 베이스를 이용하여 변환된 음성 데이터에 대응되는 제어 정보를 결정할 수 있다.
음성 인식 서버(300)는 변환된 음성 데이터를 제어 정보 데이터 베이스를 이용하여 디스플레이 장치(200)를 제어하는 제어 정보(예를 들어, 디스플레이 장치(200)의 제어부(210)가 파싱(parsing)하는)로 변환할 수도 있다.
예를 들어, 사용자의 음성(예를 들어, '볼륨 올려'에 대응되는 아날로그 파형)이 수신되는 경우, 디스플레이 장치(200)는 통신부를 통해 음성에 대응되는 전기적 신호(예를 들어, 디지털 신호, 아날로그 신호, 또는, 패킷)를 음성 인식 서버(300)로 전송할 수 있다. 음성 인식 서버(300)는 수신된 전기적 신호(또는 패킷)를 음성 인식을 통해 음성 데이터(예를 들어, '볼륨 올려')로 변환할 수 있다. 음성 인식 서버(300)는 음성 데이터를 이용하여 제어 정보를 변환(또는, 생성)할 수 있다.
제어 정보를 디스플레이 장치(200)에서 수신하는 경우, 음성 데이터에 대응되는 제어 정보에 의해 디스플레이 장치(200)의 제어부(210)는 볼륨을 증가시킬 수 있다.
음성 인식 서버(300)의 제어부(도시되지 아니함)는 통신부(도시되지 아니함)를 통해 제어 정보를 디스플레이 장치(200)로 전송할 수 있다.
음성 인식 서버(300)에서 음성 인식이 수행되는 경우, 디스플레이 장치(200)의 화면에 음성 UI(205)가 표시된다. 음성 UI(205)는 음성 인식 서버(300)의 음성 인식에 대응되는 텍스트(205a) 및 비디오(204c)를 포함할 수 있다. 음성 인식에 대응되는 비디오(204c)는 이미지 또는 심볼일 수도 있다.
도 3의 단계(S370)에서, 음성 인식 결과가 음성 UI에 표시된다.
도 4f를 참조하면, 디스플레이 장치(200)의 제어부(210)는 통신부(230)를 통해 음성 인식 서버(300)에서부터 음성 데이터를 수신할 수 있다. 또한, 디스플레이 장치(200)의 제어부(210)는 통신부(230)를 통해 음성 인식 서버(300)에서부터 제어 정보를 수신할 수 있다.
디스플레이 장치(200)의 제어부(210)는 음성 데이터의 수신에 대응하여 음성 UI(206)를 표시할 수 있다. 디스플레이 장치(200)의 제어부(210)는 수신된 음성 데이터(206s)를 음성 UI(206)에 표시할 수 있다. 음성 UI(206)은 음성 데이터의 수신에 대응되는 텍스트(206s), 이미지(206b) 및 심볼(206d)을 포함할 수 있다. 음성 UI(206)의 면적은 기 표시된 음성 UI(201 내지 205) 중 하나의 면적과 다를 수 있다.
제어부(210)는 수신된 음성 데이터(206s)를 음성 UI(206)에 표시할 수 있다. 음성 UI(206)은 음성 데이터의 수신에 대응되는 텍스트(206s), 이미지(206b) 및 심볼(206d)을 포함할 수 있다. 음성 UI(206)의 면적은 기 표시된 음성 UI(201 내지 205) 중 하나의 면적과 다를 수 있다.
디스플레이 장치(200)의 제어부(210)는 제어 정보의 수신에 대응하여 시각 가이드(271)를 화면 일 측에 표시할 수 있다. 디스플레이 장치(200)의 화면 일 측에 표시되는 시각 정보는 현재 디스플레이 장치(200)의 볼륨 값(예를 들어, '15', 271a) 및 볼륨의 증가/감소에 대응되는 볼륨 키(271b, 271c) 중 적어도 하나를 포함할 수 있다.
시각 가이드(271)에서, 볼륨의 증가 또는 볼륨의 감소에 따라 볼륨 키(271b, 271c)는 구별되게 표시될 수 있다. 예를 들어, 볼륨이 증가되는 경우, 도 4f와 같이 시각 가이드(271)가 표시될 수 있다.
음성 UI(206) 및 시각 가이드(271)는 우선 순위에 의해 표시될 수 있다. 예를 들어, 음성 UI(206)이 표시된 후, 제어부(210)는 시각 가이드(271)를 표시할 수 있다. 또한, 제어부(210)는 음성 UI(206) 및 시각 가이드(271)를 함께 표시할 수 있다.
도 4h를 참조하면, 본 발명의 다른 실시예(예를 들어, 음성 데이터가 '채널 증가')에 따른 음성 UI에 표시된다.
음성 데이터가 채널 증가인 경우의 도 3의 단계(S310 내지 S360)는 음성 데이터가 볼륨 증가인 경우의 도 3의 단계(S310 내지 S360)와 실질적으로 유사(예를 들어, 음성 데이터의 차이)하므로 중복되는 설명은 생략된다.
도 4h를 참조하면, 디스플레이 장치(200)의 제어부(210)는 통신부(230)를 통해 음성 인식 서버(300)에서부터 음성 데이터(예를 들어, '채널 증가')를 수신할 수 있다. 또한, 디스플레이 장치(200)의 제어부(210)는 통신부(230)를 통해 음성 인식 서버(300)에서부터 '채널 증가'에 대응되는 제어 정보를 수신할 수 있다.
디스플레이 장치(200)의 제어부(210)는 음성 데이터의 수신에 대응하여 음성 UI(206')를 표시할 수 있다. 디스플레이 장치(200)의 제어부(210)는 수신된 음성 데이터(206s')를 음성 UI(206')에 표시할 수 있다. 음성 UI(206')은 음성 데이터의 수신에 대응되는 텍스트(예를 들어, 'Channel up', 206s'), 이미지(206b') 및 심볼(206d')을 포함할 수 있다.
음성 데이터(예를 들어, '채널 증가')에 대응되는 음성 UI(206')는 음성 데이터(예를 들어, '볼륨 올려')와 실질적으로 유사하므로 중복되는 설명은 생략된다.
디스플레이 장치(200)의 제어부(210)는 제어 정보의 수신에 대응하여 시각 가이드(도시되지 아니함)를 화면 일 측에 표시할 수 있다. 디스플레이 장치(200)의 화면 일 측에 표시되는 시각 정보는 현재 디스플레이 장치(200)의 현재 채널 번호(예를 들어, '120', 도시되지 아니함) 및 채널의 증가/감소에 대응되는 채널 키(도시되지 아니함) 중 적어도 하나를 포함할 수 있다.
도 3의 단계(S380)에서, 음성 인식 결과에 대응하여 디스플레이 장치가 변경된다.
도 4g를 참조하면, 음성 인식 결과에 대응하여 디스플레이 장치(또는, 디스플레이 장치의 설정, 200)가 변경된다. 음성 인식 결과에 대응하여 디스플레이 장치(200)의 제어부(210)는 설정된 현재 볼륨을 변경(예를 들어, 스피커(276)의 출력을 변경('15' → '16'))할 수 있다. 음성 인식 결과에 대응하여 변경되는 디스플레이 장치(200)의 항목은 원격 조정 장치(100)를 통해 변경가능한 디스플레이 장치(200)의 항목일 수 있다.
음성 인식 결과에 대응하여 제어부(210)는 설정된 현재 볼륨의 변경(예를 들어, '15' → '16')에 대응되는 시각 가이드(271a1)를 표시할 수 있다. 제어부(210)는 스피커(276)의 출력을 변경('15' → '16')되도록 제어한 후에 시각 가이드(271a)를 표시되도록 제어할 수 있다.
도 4i를 참조하면, 본 발명의 다른 실시예에 따른 음성 인식 결과에 대응하여 디스플레이 장치(또는, 디스플레이 장치의 설정, 200)가 변경된다. 음성 인식 결과에 대응하여 디스플레이 장치(200)의 제어부(210)는 화면에 표시되는 현재 채널 번호를 변경(예를 들어, 채널 번호를 120 → 121)할 수 있다.
상술된 볼륨 변경은 본 발명의 실시예이며, 이에 한정되지 않는다. 예를 들어, 음성 인식을 통해 실행 가능한 디스플레이 장치(200)의 전원 온/오프, 채널 변경, 스마트 허브 실행, 게임 실행, 어플리케이션 실행, 웹 브라우저 실행, 또는 콘텐트 실행 등에도 적용될 수 있다는 것은 해당 기술 분양에서 통상의 지식을 가지는 자에게 용이하게 이해될 수 있다.
도 5는 본 발명의 실시예에 따른 음성 데이터에 대응되는 추천 음성 데이터 목록의 예를 나타내는 개략적인 도면이다.
도 3의 단계(S390)에서, 음성 인식 결과에 대응하여 추천 가이드가 음성 UI에 표시된다.
도 4g를 참조하면, 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 추천 가이드(207s)를 화면에 표시할 수 있다. 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 추천 가이드(207s)를 음성 UI(207)에 표시할 수 있다.
추천 가이드(207s)는 사용자의 발화 가능한 음성(예를 들어, 볼륨 올려 등)에 대응되는 추천 음성 데이터(207s1)을 포함할 수 있다. 사용자가 추천 가이드(예를 들어, 'To set volume directly to what you want, Say, "Set volume to Sixteen"', 207s)에서 추천 음성 데이터(예를 들어, '볼륨을 16으로(set volume to sixteen)', 207s1)를 발화하는 경우, 음성 인식에 의해 디스플레이 장치(200)의 동작 또는 기능이 변경될 수 있다.
사용자가 추천 가이드(207s)에서 추천 음성 데이터(207s1)의 일부를 발화하는 경우, 음성 인식에 의해 디스플레이 장치(200)의 동작 또는 기능이 변경될 수 있다. 본 발명의 실시예에서, 추천 가이드(207s)는 추천 음성 데이터(207s1)와 동일한 의미일 수 있다.
추천 가이드(207s)와 음성 데이터(예를 들어, '볼륨 올려')에 의해 디스플레이 장치(200)의 동작(예를 들어, 볼륨, 채널, 검색 등)이 변경될 수 있다. 추천 가이드(예를 들어, '볼륨을 16으로(set volume to sixteen)', 207s)와 음성 데이터(예를 들어, '볼륨 올려')에 의해 디스플레이 장치(200)의 볼륨은 변경될 수 있다. 디스플레이 장치(200)의 제어부(210)는 인식된 음성 데이터 또는 추천 가이드에 따라 현재 볼륨을 변경할 수 있다.
도 5를 참조하면, 음성 데이터 및 추천 음성 데이터 목록의 예시가 표시된다. 디스플레이 장치(200)의 설정 중 메뉴(400a)에서 볼륨 변경에 대응되는 음성 데이터 및 추천 음성 데이터 목록(400)의 일부가 표시된다. 상술된 음성 데이터 및 추천 음성 데이터 목록은 저장부(280)에 저장되거나 또는 음성 인식 서버(300)의 저장부(도시되지 아니함)에 저장될 수 있다.
디스플레이 장치(200)의 볼륨 변경을 위해, 사용자는 메뉴 뎁스(400b)에서 메뉴 뎁스1(depth1, 410) 음성 데이터, 뎁스2 음성 데이터(411a 내지 411f), 또는 뎁스3 음성 데이터(412a, 412b)를 발화할 수 있다. 상술된 뎁스1 음성 데이터 내지 뎁스3 음성 데이터는 하나의 실시예이며, 뎁스4 음성 데이터(도시되지 아니함), 뎁스5 음성 데이터(도시되지 아니함), 또는, 뎁스6 음성 데이터(또는 그 이상)도 포함될 수 있다.
상술된 음성 데이터 및 추천 음성 데이터 목록(400)은 볼륨뿐만 아니라 디스플레이 장치(200)를 제어 가능한 메뉴에 적용될 수 있다.
디스플레이 장치(200)의 볼륨 변경을 위해 사용자가 뎁스1의 음성 데이터(예를 들어, 볼륨 올려, 410a)를 발화하는 경우, 디스플레이 장치(200)의 제어부(210)는 사용자의 음성 데이터 발화 이력(예를 들어, 뎁스1 음성 데이터 발화 이력, 뎁스2 음성 데이터 발화 이력, 또는 뎁스3 음성 데이터 발화 이력)를 저장하고 갱신할 수 있다. 제어부(210)는 사용자의 음성 데이터 발화 이력에 대응되는 음성 데이터 발화 이력 정보(또는, '이력 정보'라고도 함)를 저장부(280)에 저장할 수 있다. 음성 데이터 발화 이력 정보는 사용자에 대응되어 각각 저장될 수 있다. 또한, 제어부(210)는 이력 정보를 음성 인식 서버(300)로 전송할 수 있다. 음성 인식 서버(300)는 수신된 이력 정보를 저장부(도시되지 아니함)에 저장할 수 있다.
제어부(210)는 사용자의 음성 데이터 발화 이력을 이용하여 사용자의 자주 사용하는 음성 데이터를 결정(예를 들어, 발화 횟수가 10 초과, 변경 가능)할 수 있다. 예를 들어, 사용자가 디스플레이 장치(200)의 볼륨 변경을 위해 뎁스1 음성 데이터(410a)를 많이(자주) 사용하는 경우, 디스플레이 장치(200)의 제어부(210)는 음성 UI(207)에 추천 음성 데이터(207d)로 뎁스2 음성 데이터(411a 내지 411f) 및 뎁스3 음성 데이터(412a, 412b) 중 하나를 표시할 수 있다.
사용자가 디스플레이 장치(200)의 볼륨 변경을 위해 뎁스1 음성 데이터(410a) 및 뎁스2 음성 데이터(411b)를 많이(자주) 사용하는 경우, 디스플레이 장치(200)의 제어부(210)는 음성 UI(207)에 추천 음성 데이터(207d)로 뎁스2 음성 데이터(411a, 411c 내지 411f) 및 뎁스3 음성 데이터(412a, 412b) 중 하나를 표시할 수 있다.
제어부(210)는 사용자의 음성 데이터 발화 이력 정보를 이용하여 사용자에 따라 다른 추천 가이드를 제공할 수 있다.
제어부(210)는 사용자 인증을 통해 사용자 별 음성 데이터 발화 이력 정보를 저장부(280)에 저장할 수 있다. 예를 들어, 저장부(280)는 제어부(210)의 제어에 의해 제1 사용자 별 음성 데이터 발화 이력 정보, 제2 사용자 별 음성 데이터 발화 이력 정보 또는 제3 사용자 별 음성 데이터 발화 이력 정보를 저장할 수 있다.
제어부(210)는 인증된 사용자에 대응되는 사용자 음성 데이터 발화 이력 정보에 대응하여 다른 추천 가이드를 제공(또는 표시)할 수 있다. 예를 들어, 동일한 음성 인식 결과를 수신하는 경우, 제어부(210)는 사용자 별 음성 데이터 발화 이력 정보를 이용하여 사용자에 따라 각각 다른 추천 가이드를 제공할 수 있다.
음성 UI(207)은 추천 가이드의 제공에 대응되는 텍스트(207s1)를 포함할 수 있다. 또한, 음성 UI(207)은 추천 가이드의 제공에 대응되는 이미지(207b) 또는 심볼(207)을 더 포함할 수 있다. 음성 UI(207)의 면적은 기 표시된 음성 UI(201 내지 206) 중 하나의 면적과 다를 수 있다.
사용자는 표시된 추천 음성 데이터(207d)를 확인할 수 있다. 또한, 사용자는 표시된 추천 음성 데이터(207d)에 따라 발화할 수도 있다.
도 4i를 참조하면, 본 발명의 다른 실시예(예를 들어, 음성 데이터가 '채널 증가')에 따른 디스플레이 장치의 변경 및 추천 가이드가 표시된다.
도 4i를 참조하면, 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 추천 가이드(207s')를 화면에 표시할 수 있다. 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 추천 가이드(207s')를 음성 UI(207')에 표시할 수 있다.
추천 가이드(207s')는 사용자의 발화 가능한 음성(예를 들어, 채널 증가 등)에 대응되는 추천 음성 데이터(207s1')을 포함할 수 있다. 사용자가 추천 가이드(예를 들어, 'To change channel directly to what you want, Say, "Change channel to Ch 121"', 207s')에서 추천 음성 데이터(예를 들어, ' 채널 121로(Change channel to ch 121)', 207s1')를 발화하는 경우, 음성 인식에 의해 디스플레이 장치(200)의 동작 또는 기능이 변경될 수 있다.
사용자가 추천 가이드(207s')에서 추천 음성 데이터(207s1')의 일부를 발화하는 경우, 음성 인식에 의해 디스플레이 장치(200)의 동작 또는 기능이 변경될 수 있다. 본 발명의 실시예에서, 추천 가이드(207s')는 추천 음성 데이터(207s1')와 동일한 의미일 수 있다.
본 발명의 다른 실시예(예를 들어, '채널 증가', 320a)에 대응되는 음성 데이터 및 추천 음성 데이터의 목록은 본 발명의 실시예(예를 들어, '볼륨 올려')에 대응되는 음성 데이터 및 추천 음성 데이터의 목록과 실질적으로 유사하므로 중복되는 설명은 생략된다.
도 6a 내지 도 6f는 본 발명의 다른 실시예에 따른 디스플레이 장치의 화면 제어방법의 예를 나타내는 개략적인 도면이다.
도 6a를 참조하면, 본 발명의 다른 실시예(예를 들어, 음성 데이터가 '볼륨')에 따른 음성 UI가 표시된다. 도 3의 단계(S310 내지 S340)를 통해 사용자는 원격 조정 장치(100)를 이용하여 사용자 음성(예를 들어, 볼륨(volume))을 입력할 수 있다.
도 3의 단계(S350 내지 S390)을 통해 디스플레이 장치(200)의 제어부(210)는 음성 인식 서버(300)에서부터 수신된 음성 데이터에 대응하여 음성 UI(예를 들어, 음성 UI에 음성 데이터("volume", 306s)로 표시)를 표시할 수 있다. 또한, 디스플레이 장치(200)의 제어부(210)는 통신부(230)를 통해 음성 인식 서버(300)에서부터 '볼륨'에 대응되는 제어 정보를 수신할 수 있다.
음성 인식 결과에 따라 디스플레이 장치(또는, 디스플레이 장치의 설정, 200)가 변경되기 전(예를 들어, 단계(S380)를 진행하지 않고), 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 추천 가이드(307s)를 화면에 표시할 수 있다. 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 추천 가이드(307s)를 음성 UI(307)에 표시할 수 있다.
추천 가이드(307s)는 사용자의 발화 가능한 음성(예를 들어, 볼륨 등)에 대응되는 디스플레이 장치(100)의 현재 설정 값(307s2) 및 추천 음성 데이터(307s1)을 포함할 수 있다. 추천 가이드(307s)는 예를 들어, 'The current volume is 10. To change the volume, you can say: "Volume 15(fifteen)"'를 포함할 수 있다. 추천 음성 데이터("Volume 15(fifteen)", 307s1)는 디스플레이 장치(200)의 제어부(210)에 의해 랜덤(random)하게 표시될 수 있다.
사용자가 추천 가이드(예를 들어, 'The current volume is 10. To change the volume, you can say: "Volume 15(fifteen)"', 307s)에서 추천 음성 데이터(예를 들어, '볼륨 15(volume 15)', 307s1)를 발화하는 경우, 도 3의 단계(S340 내지 S360)를 통한 음성 인식에 의해 디스플레이 장치(200)의 동작 또는 기능이 변경될 수 있다.
도 6a에서, 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 음성 데이터(예를 들어, "volume", 306s)를 표시하지 않는 추천 가이드(도시되지 아니함)를 음성 UI(307)에 표시할 수도 있다. 또한, 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 음성 데이터(306s) 및 디스플레이 장치(100)의 현재 설정 값(307s2)을 모두 표시하지 않는 추천 가이드(도시되지 아니함)를 음성 UI(307)에 표시할 수도 있다.
음성 인식 결과에 대응하여 제어부(210)는 현재 볼륨의 변경(예를 들어, '15' → '16')에 대응되는 시각 가이드(도시되지 아니함)를 표시할 수 있다.
도 6b를 참조하면, 본 발명의 다른 실시예(예를 들어, 음성 데이터가 '볼륨')에 따른 음성 UI가 표시된다. 도 6b는 도 6a와 일부 항목이 다를 수 있다. 예를 들어, 도 6의 음성 UI(307)에서 사용자의 발화 가능한 음성(예를 들어, 볼륨 등)에 대응되는 디스플레이 장치(100)의 현재 설정 값(307s2)이 표시되지 않을 수 있다.
디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 추천 가이드(307s')를 음성 UI(307)에 표시할 수 있다. 추천 가이드(307s)는 사용자의 발화 가능한 음성(예를 들어, 볼륨 등)에 대응되는 추천 음성 데이터(307s1)만을 포함할 수 있다.
사용자가 추천 가이드(예를 들어, 'To change the volume, you can say: "Volume 15(fifteen)"', 307s')에서 추천 음성 데이터(예를 들어, '볼륨을 15(volume 15)', 307s1)를 발화하는 경우, 도 3의 단계(S340 내지 S360)를 통한 음성 인식에 의해 디스플레이 장치(200)의 동작 또는 기능이 변경될 수 있다.
도 6c를 참조하면, 본 발명의 다른 실시예(예를 들어, 음성 데이터가 '채널 증가')에 따른 음성 UI에 표시된다.
도 3의 단계(S310 내지 S340)를 통해 사용자는 원격 조정 장치(100)를 이용하여 사용자 음성(예를 들어, 채널 증가(channel up))을 입력할 수 있다.
도 3의 단계(S350 내지 S390)을 통해 디스플레이 장치(200)의 제어부(210)는 음성 인식 서버(300)에서부터 수신된 음성 데이터에 대응하여 음성 UI(예를 들어, 음성 UI에 음성 데이터("channel up", 316s)로 표시)를 표시할 수 있다. 또한, 디스플레이 장치(200)의 제어부(210)는 통신부(230)를 통해 음성 인식 서버(300)에서부터 '채널 증가'에 대응되는 제어 정보를 수신할 수 있다.
디스플레이 장치(200)의 제어부(210)는 수신된 음성 데이터(316s)를 음성 UI(317)에 표시할 수 있다. 음성 UI(317)는 음성 데이터의 수신에 대응되는 텍스트(예를 들어, 'Channel up', 316s)를 포함할 수 있다.
디스플레이 장치(200)의 제어부(210)는 음성 데이터 및 제어 정보의 수신에 대응하여 디스플레이 장치(100)의 동작 또는 기능을 변경(예를 들어, 채널 변경)할 수 있다. 음성 인식 결과에 따라 디스플레이 장치(또는, 디스플레이 장치의 설정, 200)가 변경(예를 들어, 채널 증가(또는, 변경))되는 경우, 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 추천 가이드(317s)를 음성 UI(317)에 표시할 수 있다.
추천 가이드(317s)는 사용자의 발화 가능한 음성(예를 들어, 채널 증가 등)에 대응되는 추천 음성 데이터(317s1 및 317s2 중 적어도 하나)을 포함할 수 있다. 추천 가이드(317s)는 예를 들어, You can change channels quicker by saying: "HBO", "Channel 55"')를 포함할 수 있다. 추천 음성 데이터("HBO", 317s1, "Channel 55", 317s2)는 디스플레이 장치(200)의 제어부(210)에 의해 랜덤(random)하게 표시될 수 있다.
사용자가 추천 가이드(예를 들어, You can change channels quicker by saying: "HBO", "Channel 55"', 317s)에서 추천 음성 데이터(예를 들어, "HBO", 317s1, "Channel 55", 317s2) 중 하나를 발화하는 경우, 도 3의 단계(S340 내지 S360)를 통한 음성 인식에 의해 디스플레이 장치(200)의 동작 또는 기능이 변경될 수 있다.
도 6c에서, 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 음성 데이터(예를 들어, "Channel up", 316s)를 표시하지 않는 추천 가이드(도시되지 아니함)를 음성 UI(307)에 표시할 수도 있다. 또한, 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 음성 데이터(316s)를 표시하지 않고, 디스플레이 장치(100)의 현재 설정 값(예를 들어, The current channel is 10, 도시되지 아니함)을 표시하는 추천 가이드(도시되지 아니함)를 음성 UI(307)에 표시할 수도 있다.
디스플레이 장치(200)의 제어부(210)는 제어 정보의 수신에 대응하여 시각 가이드(예를 들어, 변경된 채널 번호, 채널 이름 등을 포함하는 채널 정보)를 화면 일 측에 표시할 수 있다. 또한, 디스플레이 장치(200)의 화면 일 측에 표시되는 채널 정보는 현재 디스플레이 장치(200)의 현재 채널 번호(예를 들어, '11', 도시되지 아니함) 및 채널의 증가/감소에 대응되는 채널 키(도시되지 아니함) 중 적어도 하나를 포함할 수 있다.
도 6a 내지 도 6c를 참조하면, 화면(또는 기능) 변경에 대응되는 음성 데이터는 디스플레이 장치(200)의 채널 변경 또는 볼륨을 변경에 대응되는 실시예이며, 디스플레이 장치의 화면(또는 채널 등)이 변경되는 실시예(예를 들어, 스마트 허브 실행, 게임 실행, 어플리케이션 실행, 또는 입력 소스 변경 등)에도 구현될 수 있다.
도 6d를 참조하면, 본 발명의 다른 실시예(예를 들어, 설정(settings)에 대응되는 음성 데이터가 '콘트라스트')에 따른 음성 UI가 표시된다. 도 3의 단계(S310 내지 S340)를 통해 사용자는 원격 조정 장치(100)를 이용하여 사용자 음성(예를 들어, 콘트라스트(contrast))을 입력할 수 있다.
도 3의 단계(S350 내지 S390)을 통해 디스플레이 장치(200)의 제어부(210)는 음성 인식 서버(300)에서부터 수신된 음성 데이터에 대응하여 음성 UI(예를 들어, 음성 UI에 음성 데이터("contrast", 326s)로 표시)를 표시할 수 있다. 또한, 디스플레이 장치(200)의 제어부(210)는 통신부(230)를 통해 음성 인식 서버(300)에서부터 '콘트라스트'에 대응되는 제어 정보를 수신할 수 있다.
음성 인식 결과에 따라 디스플레이 장치(또는, 디스플레이 장치의 설정, 200)가 변경되기 전(예를 들어, 단계(S380)를 진행하지 않고), 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 추천 가이드(327s)를 화면에 표시할 수 있다. 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 추천 가이드(327s)를 음성 UI(307)에 표시할 수 있다.
추천 가이드(327s)는 사용자의 발화 가능한 음성(예를 들어, 콘트라스트 등)에 대응되는 디스플레이 장치(100)의 현재 설정 값(327s2) 및 추천 음성 데이터(327s1)을 포함할 수 있다. 추천 가이드(327s)는 예를 들어, 'Contrast is currently 88. To change the setting, you can say: "Set Contrast to 85"(0~100)'를 포함할 수 있다. 추천 음성 데이터("Set Contrast to 85)", 327s1)는 디스플레이 장치(200)의 제어부(210)에 의해 랜덤(random)하게 표시될 수 있다.
사용자가 추천 가이드(예를 들어, Contrast is currently 88. To change the setting, you can say: "Set Contrast to 85"(0~100)', 327s)에서 추천 음성 데이터(예를 들어, 'Set Contrast to 85', 327s1)를 발화하는 경우, 도 3의 단계(S340 내지 S360)를 통한 음성 인식에 의해 디스플레이 장치(200)의 동작 또는 기능이 변경될 수 있다.
도 6d에서, 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 음성 데이터(예를 들어, "contrast", 326s)를 표시하지 않는 추천 가이드(도시되지 아니함)를 음성 UI(307)에 표시할 수도 있다. 또한, 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 음성 데이터(326s) 및 디스플레이 장치(100)의 현재 설정 값(327s2)을 모두 표시하지 않는 추천 가이드(도시되지 아니함)를 음성 UI(307)에 표시할 수도 있다.
도 6d를 참조하면, 음성 인식에 대응되는 음성 데이터는 디스플레이 장치(100)의 설정(settings)에 대응되는 실시예이며, 디스플레이 장치(100)의 설정(settings)에 포함되는 항목(예를 들어, 픽쳐(picture), 사운드(sound), 네트워크(network) 등)이면 충분하며, 각각의 항목으로 구현될 수 있다.
도 6e를 참조하면, 본 발명의 다른 실시예(예를 들어, 토클링(toggling)에 대응되는 음성 데이터가 '축구 모드')에 따른 음성 UI가 표시된다. 도 3의 단계(S310 내지 S340)를 통해 사용자는 원격 조정 장치(100)를 이용하여 사용자 음성(예를 들어, 축구 모드(Soccer mode))을 입력할 수 있다.
도 3의 단계(S350 내지 S390)을 통해 디스플레이 장치(200)의 제어부(210)는 음성 인식 서버(300)에서부터 수신된 음성 데이터에 대응하여 음성 UI(예를 들어, 음성 UI에 음성 데이터("Soccer mode", 336s)로 표시)를 표시할 수 있다. 또한, 디스플레이 장치(200)의 제어부(210)는 통신부(230)를 통해 음성 인식 서버(300)에서부터 '축구 모드'에 대응되는 제어 정보를 수신할 수 있다.
음성 인식 결과에 따라 디스플레이 장치(또는, 디스플레이 장치의 설정, 200)가 변경(예를 들어, 단계(S380)를 진행) 후, 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 추천 가이드(337s)를 화면에 표시할 수 있다. 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 추천 가이드(337s)를 음성 UI(307)에 표시할 수 있다.
추천 가이드(337s)는 사용자의 발화 가능한 음성(예를 들어, 콘트라스트 등)에 대응되는 디스플레이 장치(100)의 현재 설정 값(337s2) 및 추천 음성 데이터(337s1)을 포함할 수 있다. 추천 가이드(337s)는 예를 들어, 'Soccer mode is turned on. You can turn it off by saying: "Turn off soccer mode'를 포함할 수 있다. 추천 음성 데이터('Turn off soccer mode', 337s1)는 디스플레이 장치(200)의 제어부(210)에 의해 선택적으로(toggling) 표시될 수 있다.
사용자가 추천 가이드(예를 들어, 'Soccer mode is turned on. You can turn it off by saying: "Turn off soccer mode', 337s)에서 추천 음성 데이터(예를 들어, 'Turn off soccer mode', 337s1)를 발화하는 경우, 도 3의 단계(S340 내지 S360)를 통한 음성 인식에 의해 디스플레이 장치(200)의 동작 또는 기능이 변경될 수 있다.
도 6e에서, 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 음성 데이터(예를 들어, 'soccer mode', 336s)를 표시하지 않는 추천 가이드(도시되지 아니함)를 음성 UI(307)에 표시할 수도 있다. 또한, 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 음성 데이터(336s) 및 디스플레이 장치(100)의 현재 설정 값(337s2)을 모두 표시하지 않는 추천 가이드(도시되지 아니함)를 음성 UI(307)에 표시할 수도 있다.
도 6e를 참조하면, 음성 인식에 대응되는 음성 데이터는 디스플레이 장치(100)의 모드 변경(또는, 토글링(toggling)되는)에 대응되는 실시예이며, 디스플레이 장치(100)의 모드 변경에 포함되는 항목(예를 들어, 영화 모드, 스포츠 모드 등)이면 충분하며, 각각의 항목으로 구현될 수 있다.
도 6f를 참조하면, 본 발명의 다른 실시예(예를 들어, 음성 데이터가 '취침 시계')에 따른 음성 UI가 표시된다. 도 3의 단계(S310 내지 S340)를 통해 사용자는 원격 조정 장치(100)를 이용하여 사용자 음성(예를 들어, 취침 시계(Sleep timer))을 입력할 수 있다.
도 3의 단계(S350 내지 S390)을 통해 디스플레이 장치(200)의 제어부(210)는 음성 인식 서버(300)에서부터 수신된 음성 데이터에 대응하여 음성 UI(예를 들어, 음성 UI에 음성 데이터("Sleep timer", 346s)로 표시)를 표시할 수 있다. 또한, 디스플레이 장치(200)의 제어부(210)는 통신부(230)를 통해 음성 인식 서버(300)에서부터 '취침 시계'에 대응되는 제어 정보를 수신할 수 있다.
음성 인식 결과에 따라 디스플레이 장치(또는, 디스플레이 장치의 설정, 200)가 변경(예를 들어, 단계(S380)를 진행) 없이, 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 추천 가이드(347s)를 화면에 표시할 수 있다. 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 추천 가이드(347s)를 음성 UI(307)에 표시할 수 있다.
추천 가이드(347s)는 사용자의 발화 가능한 음성(예를 들어, 취침 시계 등)에 대응되는 추천 음성 데이터(337s1)을 포함할 수 있다. 추천 가이드(347s)는 예를 들어, 'The sleep timer has been set for [remaining time] minutes. To change the sleep timer, you can say: "Set a sleep timer for [N] minutes'를 포함할 수 있다. 추천 음성 데이터('Set a sleep timer for [N] minutes', 347s1)는 디스플레이 장치(200)의 제어부(210)에 표시될 수 있다.
사용자가 추천 가이드(예를 들어, 'The sleep timer has been set for [remaining time] minutes. To change the sleep timer, you can say: "Set a sleep timer for [N] minutes', 347s)에서 추천 음성 데이터(예를 들어, 'Set a sleep timer for [N] minutes', 347s1)를 발화하는 경우, 도 3의 단계(S340 내지 S360)를 통한 음성 인식에 의해 디스플레이 장치(200)의 동작 또는 기능이 변경될 수 있다.
도 6f에서, 디스플레이 장치(200)의 제어부(210)는 음성 인식 결과에 대응하여 음성 데이터(예를 들어, 'sleep timer', 346s)를 표시하지 않는 추천 가이드(도시되지 아니함)를 음성 UI(307)에 표시할 수도 있다.
도 3의 단계(S390)에서, 음성 인식 결과에 대응하여 추천 가이드를 음성 UI에 표시하는 경우, 디스플레이 장치의 화면 표시방법은 종료된다.
본 발명의 예시적 실시예에 따른 방법들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 예를 들어, 컴퓨터 판독 가능 매체는 삭제 가능 또는 재기록 가능 여부와 상관없이, ROM 등의 저장 장치와 같은 휘발성 또는 비휘발성 저장 장치, 또는 예를 들어, RAM, 메모리 칩, 장치 또는 집적 회로와 같은 메모리, 또는 예를 들어 CD, DVD, 자기 디스크 또는 자기 테이프 등과 같은 광학 또는 자기적으로 기록 가능함과 동시에 기계(예를 들어, 컴퓨터)로 읽을 수 있는 저장 매체에 저장될 수 있다. 디스플레이 장치 내에 포함될 수 있는 메모리는 본 발명의 실시예들을 구현하는 지시들을 포함하는 프로그램 또는 프로그램들을 저장하기에 적합한 기계로 읽을 수 있는 저장 매체의 한 예임을 알 수 있을 것이다. 기록 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.
이상과 같이 본 발명은 비록 한정된 예시적 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 예시적 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
그러므로, 본 발명의 범위는 설명된 예시적 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
100: 원격 조정 장치 110: 원격 조정 장치의 제어부
130: 통신부 150: 광 출력부
161b: 음성 버튼 163: 마이크
200: 디스플레이 장치 210: 디스플레이 장치의 제어부
230: 통신부 270: 디스플레이부
300: 음성 인식 서버

Claims (18)

  1. 콘텐트를 표시하는 디스플레이부;
    원격 조정 장치 및 음성 인식 서버와 연결되는 통신부;
    상기 디스플레이부; 및
    상기 통신부를 제어하는 제어부;를 포함하고,
    상기 제어부는,
    상기 통신부를 통해 상기 원격 조정 장치에서부터 수신되는 사용자 음성에 대응되는 신호를 상기 음성 인식 서버로 전송하고, 상기 음성 인식 서버에서부터 수신되는 음성 인식 결과에 대응하여 상기 디스플레이부에 다른 추천 가이드를 표시하도록 제어하는 디스플레이 장치.
  2. 제1항에 있어서,
    상기 추천 가이드는, 상기 콘텐트를 표시하는 상기 디스플레이부의 음성 유저 인터페이스에서 표시되는 디스플레이 장치.
  3. 제1항에 있어서,
    사용자의 음성 발화 이력에 대응되는 이력 정보를 저장하는 저장부;를 더 포함하고,
    상기 제어부는, 상기 음성 인식 결과 및 상기 이력 정보를 이용하여 상기 디스플레이부에 상기 다른 추천 가이드를 표시하도록 제어하는 디스플레이 장치.
  4. 제3항에 있어서,
    상기 제어부는,
    동일한 음성 인식 결과가 상기 음성 인식 서버에서 수신되는 경우, 상기 제어부는 상기 이력 정보에 대응하여 상기 다른 추천 가이드를 표시하도록 제어하는 디스플레이 장치.
  5. 제3항에 있어서,
    상기 제어부는,
    동일한 음성 인식 결과가 상기 음성 인식 서버에서 수신되는 경우, 상기 제어부는 상기 이력 정보에 대응하여 인증된 사용자에 따라 상기 다른 추천 가이드를 표시하도록 제어하는 디스플레이 장치.
  6. 제3항에 있어서,
    상기 제어부는,
    상기 사용자 음성에 대응되는 신호의 수신, 수신된 상기 신호의 음성 인식 서버로 전송 및 상기 음성 인식 결과의 수신에 대응되는 각각 다른 음성 유저 인터페이스를 상기 디스플레이부에 표시하도록 제어하는 디스플레이 장치.
  7. 제1항에 있어서,
    사용자 음성을 수신하는 마이크;를 더 포함하고,
    상기 제어부는,
    수신된 사용자 음성에 대응되는 신호를 상기 통신부를 통해 상기 음성 인식 서버로 전송하도록 제어하는 디스플레이 장치.
  8. 제1항에 있어서,
    상기 제어부는,
    상기 음성 유저 인터페이스를 상기 콘텐트와 구별되게 표시하도록 제어하는 디스플레이 장치.
  9. 제1항에 있어서,
    상기 제어부는,
    동일한 음성 인식 결과가 상기 음성 인식 서버에서 수신되는 경우, 상기 제어부는 상기 동일한 음성 인식 결과에 대응하여 상기 다른 추천 가이드를 표시하도록 제어하는 디스플레이 장치.
  10. 제1항에 있어서,
    상기 제어부는,
    동일한 음성 인식 결과가 상기 음성 인식 서버에서 수신되는 경우, 상기 제어부는 상기 동일한 음성 인식 결과에 대응하여 인증된 사용자에 따라 상기 다른 추천 가이드를 표시하도록 제어하는 디스플레이 장치.
  11. 제1항에 있어서,
    상기 제어부는,
    상기 사용자 음성에 대응되는 신호의 수신, 수신된 상기 신호의 음성 인식 서버로 전송 및 상기 음성 인식 결과의 수신에 대응되는 각각 다른 음성 유저 인터페이스를 상기 디스플레이부에 표시하도록 제어하는 디스플레이 장치.
  12. 원격 조정 장치 및 음성 인식 서버와 연결되는 디스플레이 장치에서, 상기 원격 조정 장치에서 수신되는 음성 버튼의 선택에 대응되는 제1 음성 유저 인터페이스를 화면에 표시하는 단계;
    상기 원격 조정 장치에서부터 사용자 음성에 대응되는 신호를 수신하는 단계;
    상기 신호에 대응되는 패킷을 상기 음성 인식 서버로 전송하는 단계;
    상기 음성 인식 서버에서부터 수신된 음성 인식 결과를 제2 음성 유저 인터페이스에 표시하는 단계;
    상기 음성 인식 결과에 대응하여 상기 디스플레이 장치의 동작 및 기능 중 하나를 변경하는 단계; 및
    상기 음성 인식 결과에 대응하여 다른 추천 가이드를 제공하는 제3 음성 유저 인터페이스를 표시하는 단계;를 포함하는 디스플레이 장치의 화면 표시방법.
  13. 제12항에 있어서,
    상기 추천 가이드는 상기 화면의 일 측에 표시되는, 디스플레이 장치의 화면 표시방법.
  14. 제12항에 있어서,
    상기 수신된 음성 인식 결과 및 저장된 사용자의 음성 발화 이력에 대응되는 이력 정보를 이용하여 상기 다른 추천 가이드를 제공하는 제3 음성 유저 인터페이스를 표시하는 단계;를 더 포함하는 디스플레이 장치의 화면 표시방법.
  15. 제12항에 있어서,
    상기 추천 가이드는 수신된 동일한 음성 인식 결과 및 이력 정보에 대응하여 각각 다르게 제공되는, 디스플레이 장치의 화면 표시방법.
  16. 제12항에 있어서,
    상기 추천 가이드는 인증된 사용자에 따라 각각 다르게 제공되는 디스플레이 장치의 화면 표시방법.
  17. 제12항에 있어서,
    상기 음성 유저 인터페이스는 상기 콘텐트와 겹쳐지게 표시되는, 디스플레이 장치의 화면 표시방법.
  18. 제12항에 있어서,
    상기 추천 가이드는 추천 음성 데이터를 더 포함하고,
    상기 추천 음성 데이터는 사용자에 의해 발화 가능한 디스플레이 장치의 화면 표시방법.
KR1020180010763A 2018-01-29 2018-01-29 디스플레이 장치 및 디스플레이 장치의 화면 표시방법 KR102540001B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020180010763A KR102540001B1 (ko) 2018-01-29 2018-01-29 디스플레이 장치 및 디스플레이 장치의 화면 표시방법
CN201880087969.3A CN111656793A (zh) 2018-01-29 2018-04-27 显示装置和用于显示显示装置的屏幕的方法
EP18902137.1A EP3704862A4 (en) 2018-01-29 2018-04-27 DISPLAY DEVICE AND METHOD OF CONTROLLING A SCREEN OF THE DISPLAY DEVICE
PCT/KR2018/004960 WO2019146844A1 (en) 2018-01-29 2018-04-27 Display apparatus and method for displaying screen of display apparatus
US16/022,058 US20190237085A1 (en) 2018-01-29 2018-06-28 Display apparatus and method for displaying screen of display apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180010763A KR102540001B1 (ko) 2018-01-29 2018-01-29 디스플레이 장치 및 디스플레이 장치의 화면 표시방법

Publications (2)

Publication Number Publication Date
KR20190091782A true KR20190091782A (ko) 2019-08-07
KR102540001B1 KR102540001B1 (ko) 2023-06-05

Family

ID=67393602

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180010763A KR102540001B1 (ko) 2018-01-29 2018-01-29 디스플레이 장치 및 디스플레이 장치의 화면 표시방법

Country Status (5)

Country Link
US (1) US20190237085A1 (ko)
EP (1) EP3704862A4 (ko)
KR (1) KR102540001B1 (ko)
CN (1) CN111656793A (ko)
WO (1) WO2019146844A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021071797A (ja) * 2019-10-29 2021-05-06 富士通クライアントコンピューティング株式会社 表示装置および情報処理装置

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110570837B (zh) * 2019-08-28 2022-03-11 卓尔智联(武汉)研究院有限公司 一种语音交互方法、装置及存储介质
JP7404974B2 (ja) * 2020-03-31 2023-12-26 ブラザー工業株式会社 情報処理装置及びプログラム
CN111601168B (zh) * 2020-05-21 2021-07-16 广州欢网科技有限责任公司 一种电视节目市场表现分析方法及系统
CN112511882B (zh) * 2020-11-13 2022-08-30 海信视像科技股份有限公司 一种显示设备及语音唤起方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130253937A1 (en) * 2012-02-17 2013-09-26 Lg Electronics Inc. Method and apparatus for smart voice recognition
US20140191949A1 (en) * 2013-01-07 2014-07-10 Samsung Electronics Co., Ltd. Display apparatus and method of controlling a display apparatus in a voice recognition system
US20140350925A1 (en) * 2013-05-21 2014-11-27 Samsung Electronics Co., Ltd. Voice recognition apparatus, voice recognition server and voice recognition guide method

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3842497B2 (ja) * 1999-10-22 2006-11-08 アルパイン株式会社 音声処理装置
TWI278762B (en) * 2005-08-22 2007-04-11 Delta Electronics Inc Method and apparatus for speech input
CN101516005A (zh) * 2008-02-23 2009-08-26 华为技术有限公司 一种语音识别频道选择系统、方法及频道转换装置
US11012732B2 (en) * 2009-06-25 2021-05-18 DISH Technologies L.L.C. Voice enabled media presentation systems and methods
US9363464B2 (en) * 2010-06-21 2016-06-07 Echostar Technologies L.L.C. Systems and methods for history-based decision making in a television receiver
WO2013012107A1 (ko) * 2011-07-19 2013-01-24 엘지전자 주식회사 전자 기기 및 그 제어 방법
US8949903B2 (en) * 2011-08-18 2015-02-03 Verizon Patent And Licensing Inc. Feature recommendation for television viewing
CN103037250B (zh) * 2011-09-29 2016-06-22 幸琳 交互式地使用遥控器控制电视机获取多媒体信息服务的方法及系统
KR102022318B1 (ko) * 2012-01-11 2019-09-18 삼성전자 주식회사 음성 인식을 사용하여 사용자 기능을 수행하는 방법 및 장치
KR20140089861A (ko) * 2013-01-07 2014-07-16 삼성전자주식회사 디스플레이 장치 및 그의 제어 방법
KR101732137B1 (ko) 2013-01-07 2017-05-02 삼성전자주식회사 원격 제어 장치 및 전력 제어 방법
KR102019719B1 (ko) * 2013-01-17 2019-09-09 삼성전자 주식회사 영상처리장치 및 그 제어방법, 영상처리 시스템
US9338493B2 (en) * 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10348658B2 (en) * 2017-06-15 2019-07-09 Google Llc Suggested items for use with embedded applications in chat conversations

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130253937A1 (en) * 2012-02-17 2013-09-26 Lg Electronics Inc. Method and apparatus for smart voice recognition
US20140191949A1 (en) * 2013-01-07 2014-07-10 Samsung Electronics Co., Ltd. Display apparatus and method of controlling a display apparatus in a voice recognition system
US20140350925A1 (en) * 2013-05-21 2014-11-27 Samsung Electronics Co., Ltd. Voice recognition apparatus, voice recognition server and voice recognition guide method

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021071797A (ja) * 2019-10-29 2021-05-06 富士通クライアントコンピューティング株式会社 表示装置および情報処理装置

Also Published As

Publication number Publication date
WO2019146844A1 (en) 2019-08-01
KR102540001B1 (ko) 2023-06-05
CN111656793A (zh) 2020-09-11
EP3704862A4 (en) 2020-12-02
US20190237085A1 (en) 2019-08-01
EP3704862A1 (en) 2020-09-09

Similar Documents

Publication Publication Date Title
KR102540001B1 (ko) 디스플레이 장치 및 디스플레이 장치의 화면 표시방법
JP6824316B2 (ja) 映像処理装置及びその制御方法、並びに映像処理システム
KR102392087B1 (ko) 원격 조정 장치 및 원격 조정 장치의 사용자 음성 수신방법
US11330320B2 (en) Display device and method for controlling display device
US10678563B2 (en) Display apparatus and method for controlling display apparatus
KR102349861B1 (ko) 디스플레이 장치 및 디스플레이 장치의 디스플레이 제어방법
EP3719631B1 (en) Display device and method for controlling same
US20170180918A1 (en) Display apparatus and method for controlling display apparatus
KR102614697B1 (ko) 디스플레이 장치 및 디스플레이 장치의 채널 정보 획득 방법
KR102328703B1 (ko) 디스플레이 장치 및 디스플레이 장치의 화면 제어방법
KR20140092634A (ko) 전자장치와 그 제어방법
US10110843B2 (en) Image display device and operating method of the same
KR102269848B1 (ko) 영상표시기기 및 그의 원거리 음성 인식율 향상 방법
US10326960B2 (en) Display apparatus and method for controlling of display apparatus
US10720047B2 (en) Electronic apparatus and method for controlling the same
CN111316226B (zh) 电子装置及其控制方法
KR102428271B1 (ko) 전자 장치 및 전자 장치의 사운드 제어방법
KR20230024712A (ko) 발화 의도를 고려하여 검색하는 디스플레이 장치 및 방법
KR20170101077A (ko) 서버, 영상 표시 장치 및 그 동작 방법

Legal Events

Date Code Title Description
AMND Amendment
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
GRNT Written decision to grant