KR20150012464A - 디스플레이 장치 및 개인화 서비스 제공 방법 - Google Patents

디스플레이 장치 및 개인화 서비스 제공 방법 Download PDF

Info

Publication number
KR20150012464A
KR20150012464A KR1020130088004A KR20130088004A KR20150012464A KR 20150012464 A KR20150012464 A KR 20150012464A KR 1020130088004 A KR1020130088004 A KR 1020130088004A KR 20130088004 A KR20130088004 A KR 20130088004A KR 20150012464 A KR20150012464 A KR 20150012464A
Authority
KR
South Korea
Prior art keywords
user
voice
display device
received
unit
Prior art date
Application number
KR1020130088004A
Other languages
English (en)
Inventor
김현우
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020130088004A priority Critical patent/KR20150012464A/ko
Priority to EP14153171.5A priority patent/EP2830321A1/en
Priority to US14/176,503 priority patent/US20150029089A1/en
Publication of KR20150012464A publication Critical patent/KR20150012464A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/441—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card
    • H04N21/4415—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card using biometric characteristics of the user, e.g. by voice recognition or fingerprint scanning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42222—Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4753—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for user identification, e.g. by entering a PIN or password
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program

Abstract

디스플레이 장치가 개시된다. 본 장치는 복수의 사용자의 음성 패턴 및 복수의 사용자 각각에 대해 개별적으로 설정된 개인화 정보가 저장된 저장부, 사용자 음성을 수신하는 입력부, 및 사용자 음성의 음성 패턴에 대응되는 개인화 정보를 저장부로부터 검출하고, 검출된 개인화 정보에 따라 디스플레이 장치의 기능을 제어하는 제어부를 포함한다.

Description

디스플레이 장치 및 개인화 서비스 제공 방법{DISPLAY APPARATUS AND METHOD FOR PROVIDING PERSONALIZED SERVICE THEREOF}
본 발명은 디스플레이 장치 및 개인화 서비스 제공 방법에 관한 것으로서, 더욱 상세하게는 사용자의 음성에 의해 제어되는 디스플레이 장치 및 개인화 서비스 제공 방법에 관한 것이다.
최근 기술이 발전함에 따라 다양한 기능을 채택한 디스플레이 장치가 출시되고 있다. 사용자는 디스플레이 장치를 통해 컨텐츠만을 시청할 수 있을 뿐만 아니라, 인터넷 등과의 결합을 통해 더욱 다양한 컨텐츠, 어플리케이션 등을 경험할 수 있다. 이러한 다양한 기능을 제공하는 장치의 예로, 스마트 TV를 들 수 있다.
스마트 TV가 다양한 기능을 포함하는 것에 비례하여, 이러한 기능을 사용함에 필요한 제어 장치 역시 복잡해지게 된다. 따라서, 복잡한 제어 장치로 인해 다양한 기능의 사용에 대한 장벽을 낮추기 위하여, 스마트 TV에 사용되는 제어 장치 및 이에 따른 제어 방법은 단순화될 필요가 있다.
휴대폰이나 태블릿 PC 등과 같은 개인용 단말기는 한 명의 사용자가 사용하는 것이므로, 개인별로 기능을 설정할 수 있다. 이에 반해, 스마트 TV는 다수의 사용자가 공동으로 사용하는 것이 일반적이므로, 개인별로 기능을 설정하는 것이 불가능하다. 따라서, TV와 같은 디스플레이 장치를 사용함에 있어서, 각 사용자는 자신이 원하는 컨텐츠를 검색하거나, 자신이 원하는 제어 메뉴로 화면을 구성하기 어렵다는 문제점이 있었다.
이에 따라, 공동으로 사용하는 각종 디스플레이 장치에 대해 개인별 맞춤 서비스가 제공될 필요가 있다.
본 발명은 상술한 필요성에 따른 것으로, 본 발명의 목적은 사용자의 음성 명령에 의해 개인화 서비스를 제공할 수 있는 디스플레이 장치 및 그 개인화 서비스 제공 방법을 제공함에 있다.
상기의 목적을 달성하기 위해, 본 발명의 일 실시 예에 따른 디스플레이 장치는 복수의 사용자의 음성 패턴 및 복수의 사용자 각각에 대해 개별적으로 설정된 개인화 정보가 저장된 저장부, 사용자 음성을 수신하는 입력부, 및 사용자 음성의 음성 패턴에 대응되는 개인화 정보를 저장부로부터 검출하고, 검출된 개인화 정보에 따라 디스플레이 장치의 기능을 제어하는 제어부를 포함한다.
또한, 개인화 정보는 복수의 사용자 각각에 대한 식별 정보를 포함하며, 제어부는 디스플레이 장치를 턴-온하기 위한 사용자 음성이 수신되면, 디스플레이 장치를 턴-온시키고, 사용자 음성에 대응되는 식별 정보를 이용하여 적어도 하나의 사용자 계정에 대해 자동 로그인을 수행할 수 있다.
또한, 제어부는 디스플레이 장치를 턴-오프하기 위한 사용자 음성이 수신되면, 디스플레이 장치를 턴-오프시키고, 적어도 하나의 사용자 계정에 대해 자동 로그아웃을 수행할 수 있다.
또한, 적어도 하나의 메뉴를 디스플레이하는 디스플레이부를 더 포함하며, 제어부는 검출된 개인화 정보에 따라 적어도 하나의 메뉴의 형태, 크기, 위치, 컬러, 메뉴 표시 순서 중 적어도 하나를 조정할 수 있다.
또한, 제어부는 검출된 개인화 정보에 대응되는 어플리케이션을 자동 실행시키는 개인 어플리케이션 서비스, 검출된 개인화 정보에 대응되는 메뉴를 추천하는 추천 서비스, 검출된 개인화 정보에 대응되는 커뮤니케이션 화면을 디스플레이하는 커뮤니케이션 서비스, 검출된 개인화 정보에 대응되는 방송 채널을 선국하는 채널 선국 서비스 중 적어도 하나를 제공할 수 있다.
또한, 디스플레이부, 및 사용자 시선을 감지하기 위한 감지부를 더 포함하고, 제어부는 사용자 시선이 기 설정된 시간 동안 디스플레이부를 향하지 않는 것으로 판단되면, 스탠바이 모드로 전환할 수 있다.
또한, 제어부는 감지부에 의해 복수의 사용자 시선이 감지되면, 기 저장된 디폴트 설정에 따라 디스플레이 장치의 기능을 제어하는 공용 모드(Common mode)로 전환할 수 있다.
또한, 제어부는 저장부에 저장된 음성 패턴과 상이한 음성 패턴을 가지는 사용자 음성이 수신되면, 기 저장된 디폴트 설정에 따라 디스플레이 장치의 기능을 제어하는 공용 모드(Common mode)로 전환할 수 있다.
한편, 본 발명의 일 실시 예에 따른 개인화 서비스 제공 방법은 복수의 사용자의 음성 패턴 및 복수의 사용자 각각에 대해 개별적으로 설정된 개인화 정보를 저장하는 단계, 사용자 음성을 수신하는 단계, 및 사용자 음성의 음성 패턴에 대응되는 개인화 정보를 검출하고, 검출된 개인화 정보에 따라 디스플레이 장치의 기능을 제어하는 단계를 포함한다.
또한, 개인화 정보는 복수의 사용자 각각에 대한 식별 정보를 포함하며, 제어하는 단계는 디스플레이 장치를 턴-온하기 위한 사용자 음성이 수신되면, 디스플레이 장치를 턴-온시키는 단계, 및 사용자 음성에 대응되는 식별 정보를 이용하여 적어도 하나의 사용자 계정에 대해 자동 로그인을 수행하는 단계를 포함할 수 있다.
또한, 제어하는 단계는 디스플레이 장치를 턴-오프하기 위한 사용자 음성이 수신되면, 디스플레이 장치를 턴-오프시키는 단계, 및 적어도 하나의 사용자 계정에 대해 자동 로그아웃을 수행하는 단계를 더 포함할 수 있다.
또한, 제어하는 단계는 디스플레이된 메뉴의 형태, 크기, 위치, 컬러, 메뉴 표시 순서 중 적어도 하나를 검출된 개인화 정보에 따라 조정하는 단계를 포함할 수 있다.
또한, 제어하는 단계는 검출된 개인화 정보에 대응되는 개인화 서비스를 제공하는 단계를 포함하며, 개인화 서비스는 검출된 개인화 정보에 대응되는 어플리케이션을 자동 실행시키는 개인 어플리케이션 서비스, 검출된 개인화 정보에 대응되는 메뉴를 추천하는 추천 서비스, 검출된 개인화 정보에 대응되는 커뮤니케이션 화면을 디스플레이하는 커뮤니케이션 서비스, 검출된 개인화 정보에 대응되는 방송 채널을 선국하는 채널 선국 서비스 중 적어도 하나를 포함할 수 있다.
또한, 사용자 시선을 감지하는 단계, 및 사용자 시선이 기 설정된 시간 동안 디스플레이 장치를 향하지 않는 것으로 판단되면, 스탠바이 모드로 전환하는 단계를 더 포함할 수 있다.
또한, 복수의 사용자 시선이 감지되면, 기 저장된 디폴트 설정에 따라 디스플레이 장치의 기능을 제어하는 공용 모드(Common mode)로 전환하는 단계를 더 포함할 수 있다.
또한, 기 저장된 음성 패턴과 상이한 음성 패턴을 가지는 사용자 음성이 수신되면, 기 저장된 디폴트 설정에 따라 디스플레이 장치의 기능을 제어하는 공용 모드(Common mode)로 전환하는 단계를 더 포함할 수 있다.
이상과 같은 본 발명의 다양한 실시 예에 따르면, 사용자는 자신의 음성을 이용하여 개인화된 서비스를 이용할 수 있다.
도 1은 본 발명의 일 실시 예에 따른 디스플레이 장치의 블럭도의 일 예,
도 2는 본 발명의 일 실시 예에 따른 개인화 서비스 제공 방법의 순서도의 일 예,
도 3 내지 도 5는 본 발명의 일 실시 예에 따른 디스플레이 장치에 대한 사용자 등록의 일 예,
도 6 내지 도 9는 본 발명에 따른 디스플레이 장치에 대한 다양한 실시 예,
도 10은 본 발명의 다른 실시 예에 따른 디스플레이 장치의 블럭도의 일 예,
도 11은 본 발명의 다른 실시 예에 따른 개인화 서비스 제공 방법의 순서도의 일 예,
도 12는 본 발명의 일 실시 예에 따른 제어부의 블럭도의 일 예,
도 13은 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 종합적으로 설명하기 위한 블럭도의 일 예,
도 14는 본 발명의 일 실시 예에 따른 디스플레이 장치가 사용하는 소프트웨어 구조의 블럭도의 일 예.
이하에서는 도면을 참조하여, 본 발명에 대해 자세히 설명하기로 한다.
도 1은 본 발명의 일 실시 예에 따른 디스플레이 장치(100)의 블럭도의 일 예이다. 도 1을 참조하면, 본 발명의 일 실시 예에 따른 디스플레이 장치(100)는 입력부(110), 제어부(140), 저장부(160)를 포함한다.
입력부(110)는 사용자의 음성을 수신한다. 이 경우, 사용자의 음성에는 언어 정보, 음성 패턴, 감정 상태, 발성 환경 등과 같은 여러 가지 정보를 포함된다. 여기서, 언어 정보라 함은 언어로써 표시하고자 하는 의사를 의미할 수 있다. 또한, 음성 패턴이라 함은 입력부(110)가 수신한 음성에 관련된 다양한 정보(예를 들어, 음성 주파수, 음성 진폭 등)를 의미할 수 있다. 즉, 사용자의 음성은 개개인마다 다른 패턴을 가지게 되므로, 다수의 사용자가 존재한다고 하더라도 그 음성 패턴에 의해 각 사용자를 구분할 수 있다. 또한, 감정 상태나 발성 환경 등에 따라서도 사용자의 음성이 달라질 수 있다. 입력부(110)는 이와 같이 다양한 정보를 담은 사용자의 음성을 입력받을 수 있다. 입력부(110)는 마이크(Microphone)로 구현될 수 있다.
저장부(160)는 등록된 사용자의 음성을 저장할 수 있다. 구체적으로, 특정 사용자의 음성 패턴 및 개인화 정보인 언어 정보 등을 저장할 수 있다. 따라서, 저장부(160)는 특정 사용자의 음성 주파수, 음성 진폭 등을 저장할 수 있다. 또한, 저장부(160)는 특정 사용자의 언어 정보(예를 들어, 적어도 하나의 명령어)를 포함하는 개인화 정보를 저장할 수 있다. 여기서, 개인화 정보는 사용자 개인에 특화된 정보를 의미한다. 구체적으로는 사용자 본인이 고유하게 설정한 음성 명령어, 음성 명령어에 대응되는 디스플레이 장치(100)의 동작, 사용자의 ID 및 패스워드 기타 개인 정보, 사용자가 자주 이용하는 서비스, 자주 실행시키는 프로그램 명, 방송 채널, 웹 사이트, 메일 주소, SNS 주소 등과 같은 다양한 정보를 포함할 수 있다.
한편, 저장부(160)는 수신된 사용자의 음성을 저장하고, 이에 따라 이미 등록된 사용자의 음성을 갱신할 수 있다. 즉, 저장부(160)는 미리 정해진 기간 동안 사용자가 입력한 사용자 음성(음성 패턴 및 개인화 정보 등)을 순서대로 저장할 수 있고, 제어부에 의해 현재 수신된 사용자 음성은 이전에 수신되어 저장부(160)에 저장된 사용자 음성과 비교될 수 있다. 비교 결과, 현재 수신된 사용자 음성 패턴과 이전에 수신되어 저장부(160)에 저장된 사용자 음성 패턴이 동일한 것으로 판단되면, 현재 수신된 사용자 음성 패턴은 저장부(160)에 저장된다. 이 경우, 가장 최근에 수신되어 저장된 사용자 음성 패턴과 현재 수신된 사용자 음성 패턴을 비교하는 것이 바람직하다.
한편, 저장부(160)는 미리 정해진 기간 동안 수신된 사용자 음성을 저장할 수 있다. 제어부(140)는 현재 수신된 사용자 음성과 저장부(160)에 저장된 사용자 음성을 비교할 수 있다. 따라서, 저장부(160)에 저장된 사용자 음성과 현재 수신된 사용자 음성이 동일한 것으로 판단되면, 제어부(140)는 개인 모드로 전환된다. 개인 모드란 사용자별로 저장된 개인화 정보에 따라 각종 기능을 수행하는 모드를 의미한다. 개인 모드에 대한 구체적인 설명은 후술하기로 한다. 또한, 저장부(160)에는 복수의 사용자의 음성 패턴 및 복수의 사용자 각각에 대해 개별적으로 설정된 개인화 정보가 저장될 수도 있다.
제어부(140)는 입력부(110)에서 수신된 음성에 따라 디스플레이 장치(100)를 제어할 수 있다. 여기서, 제어부(140)에 의해 사용자 음성은 시간 파형, 스펙트로그램, 주파수 스펙트럼, 진폭 포락선 등으로 분석되고, 이러한 분석에 의해, 입력부(110)가 수신한 사용자의 음성은 등록된 사용자의 음성과 동일한지 여부가 판단된다. 음성 분석에 의해 화자의 정보를 추출하는 것으로서 화자 인식(Speaker recognition), 화자 식별(Speaker identification), 화자 확인(Speaker verification) 등이 있는데, 어떠한 발성이 있는 경우에 미리 등록된 음성과 일치하는지 또는 등록된 복수의 사용자 중에서 누구의 음성에 관한 것인지를 알아낼 수 있다. 구체적으로는, 입력부(110)에 입력된 음성 신호는 A/D 변환기에 의해 샘플링되어 디지털 신호로 변환된다. 제어부(140)는 변환된 디지털 신호에서 잡음 신호가 제거된 특징 신호를 미리 등록되어 저장부(160)에 저장된 음성과 비교하여, 특징 신호와 가장 유사한 등록 음성을 추출한다.
따라서, 제어부(140)는 사용자 음성의 음성 패턴에 대응되는 개인화 정보를 저장부(160)로부터 검출할 수 있다. 즉, 제어부(140)는 입력부(110)에 수신된 사용자의 음성 패턴과 저장부(160)에 저장된 사용자의 음성 패턴을 비교한다. 이들 음성 패턴이 서로 동일하다고 판단되면, 제어부(140)는 입력부(110)에 수신된 언어 정보와 저장부(160)에 저장된 언어 정보를 비교한다. 이들 언어 정보가 동일하다고 판단되면, 제어부(140)는 입력부(110)에 수신된 언어 정보에 따른 제어 동작을 수행하게 된다. 즉, 입력부(110)에 수신된 사용자 음성과 저장부(160)에 저장된 개인화 정보가 동일하다고 판단되면, 제어부(140)는 검출된 개인화 정보에 따라 디스플레이 장치(100)의 기능을 제어할 수 있다.
한편, 저장부(160)는 복수의 사용자의 음성을 저장할 수도 있다. 따라서, 제어부(140)는 입력부(110)에 수신된 사용자의 음성 패턴과 저장부(160)에 저장된 복수의 사용자의 음성 패턴을 비교한다. 수신된 사용자의 음성 패턴이 저장된 복수의 사용자의 음성 패턴 중 하나와 동일하다고 판단되면, 제어부(140)는 수신된 언어 정보와 저장부(160)에 저장된 언어 정보를 비교한다. 이들 언어 정보가 동일하다고 판단되면, 제어부(140)는 수신된 언어 정보에 따른 제어 동작을 수행하게 된다.
복수의 사용자들은 자신의 개성에 맞는 음성 명령어를 개별적으로 저장해둘 수 있다. 가령, TV를 켜는 동작에 대해서 제1 사용자는 "TV 켜"라는 음성 명령어를 설정하고, 제2 사용자는 "헬로우 TV"라는 음성 명령어를 설정할 수 있다. 이 경우, 제어부(140)는 제1 사용자가 "헬로우 TV"라고 말하면 아무런 동작을 수행하지 않고, 제2 사용자가 "헬로우 TV"라고 할 때에만 TV를 켜게 된다. 반면, 제2 사용자가 "TV 켜"라고 말하면 아무런 동작을 수행하지 않고 제1 사용자가 "TV 켜"라고 말하면 TV를 켜게 된다. 이 밖에도, 제1 사용자가 AAA 웹사이트를 자주 액세스하고, BBB 게임을 자주 실행시키는 경우, 제1 사용자의 개인 모드에서 제어부(140)는 AAA 웹사이트 및 BBB 게임에 대하여 자동 로그인을 할 수 있다. 즉, 제1 사용자가 "TV 켜"라고 말하면, TV가 켜짐과 동시에 AAA 웹사이트 및 BBB 게임에 대한 자동 로그인이 이루어질 수 있다.
도 2는 본 발명의 일 실시 예에 따른 개인화 서비스 제공 방법의 순서도의 일 예이다.
먼저, 디스플레이 장치는 사용자 음성 패턴 및 개인화 정보를 저장한다(S210). 사용자 음성 패턴 및 개인화 정보에 대해서는 전술한 바와 같다. 또한, 디스플레이 장치는 마이크를 포함할 수 있으며, 사용자 음성은 마이크를 통해 수신될 수 있다. 따라서, 디스플레이 장치는 사용자의 음성에 포함된 음성 패턴 및 언어 정보 등을 저장하고, 저장된 사용자 음성은 특정 사용자의 음성으로 등록될 수 있다.
이 경우, 언어 정보는 사용자가 언어로써 표시하고자 하는 의사를 의미할 수 있다. 따라서, 일상 생활에서 사용자가 발화하는 모든 음성이 언어 정보에 포함될 수 있다. 이러한 언어 정보 중에서 디스플레이 장치를 제어하는 음성 명령어를 저장할 수 있다. 예를 들어, TV를 턴-온하는 동작에 대한 제어를 하고자 하는 경우에는 “TV 켜”라는 음성 명령어를 저장할 수 있다.
한편, 디스플레이 장치는 복수의 사용자 음성을 등록할 수 있다. 따라서, 디스플레이 장치에 저장되는 음성 패턴은 복수 개일 수 있다. 또한, 디스플레이 장치에 저장되는 음성 명령어는 등록된 복수의 사용자마다 서로 같을 수도 있고, 다를 수도 있다. 예를 들어, TV를 턴-온하는 동작에 대한 제어에 있어서, 제1 사용자는 “TV 켜”라는 음성 명령어를 저장할 수 있으나, 제2 사용자는 “TV 꺼”라는 음성 명령어를 저장할 수 있으며, 제3 사용자는 “사랑해”라는 음성 명령어를 저장할 수도 있다.
이 후, 디스플레이 장치는 사용자 음성을 수신한다(S220). 전술한 바와 같이, 사용자 음성은 마이크를 통해 수신될 수 있다. 또한, 수신된 음성은 사용자 음성 패턴 및 개인화 정보를 포함한다.
이 후, 디스플레이 장치는 마이크를 통해 수신된 사용자 음성과 미리 저장된 등록 사용자의 음성을 비교할 수 있다. 구체적으로, 수신된 음성 패턴과 저장된 음성 패턴을 비교한다. 비교 결과, 수신된 음성 패턴과 저장된 음성 패턴이 동일하다고 판단되면, 수신된 사용자 음성은 디스플레이 장치에 등록된 사용자 음성으로 판단된다. 만약, 수신된 음성 패턴과 저장된 음성 패턴이 다르다고 판단되면, 수신된 사용자 음성은 디스플레이 장치에 등록되지 않은 사용자 음성으로 판단된다.
수신된 사용자 음성이 등록된 사용자 음성이 아닌 것으로 판단되면, 디스플레이 장치는 등록된 음성 명령어와 동일한 음성 명령어가 수신되더라도 그에 따른 동작을 수행하지 않을 수 있다. 이 경우, 수신된 사용자 음성에 관계없이, 디스플레이 장치는 현재의 상태를 유지할 수 있다. 여기서, 디스플레이 장치가 현재의 상태를 유지한다는 것은 디스플레이 장치가 수신된 사용자 음성에 의한 영향을 받지 않는다는 것을 의미한다. 즉, 디스플레이 장치가 턴-오프인 상태라면 계속 턴-오프 상태를 유지하게 된다.
수신된 사용자 음성이 등록된 사용자 음성으로 판단되면, 수신된 사용자 음성에 따라 개인화 정보를 검출하고, 검출된 개인화 정보에 따라 디스플레이 장치의 기능을 제어한다(S230).
상술한 바와 같이, 개인화 정보는 사용자에 대한 식별 정보인 음성 명령어, 음성 명령어에 대응되는 디스플레이 장치의 동작, 사용자의 ID 및 패스워드 기타 개인 정보 등을 포함할 수 있다.
구체적으로, 수신된 사용자 음성이 등록된 사용자 음성으로 판단되면, 디스플레이 장치는 수신된 사용자 음성에 포함된 음성 명령어를 분석한다. 수신된 음성 명령어가 저장된 음성 명령어와 동일한 것으로 판단되면, 그에 따른 동작을 수행한다. 예를 들어, TV를 턴-온하기 위해 저장된 음성 명령어가 “TV 켜”이고, 수신된 음성 명령어가 “TV 켜”라면 디스플레이 장치를 턴-온하기 위한 제어 동작이 수행될 수 있다. 이 경우, 수신된 음성 명령어가 “사랑해”이고, “사랑해”라는 음성 명령어에 대한 제어 동작이 저장되지 않았다면 디스플레이 장치는 현재의 상태를 유지할 수 있다. 또한, “채널 10번”이라는 음성 명령어는 TV의 10번 채널을 출력하도록 미리 저장되고, TV가 턴-오프 상태 또는 대기 모드 상태인 경우에, 수신된 음성 명령어가 “채널 10번”이라면 턴-온 상태로 변경되어 10번 채널을 출력할 수 있다.
또한, 수신된 음성 명령어에 의한 동작이 사용자 인증을 필요로 하는 경우에도 동일하게 적용된다. 이 경우, 사용자 인증에 필요한 정보가 미리 저장되어 있어야 함은 물론이다. 예를 들어, 디스플레이 장치가 턴-온된 상태에서, 사용자는 이메일 메인 페이지에 엑세스(access)한다. 이메일 메인 페이지에서 사용자는 원격 제어 장치 또는 디스플레이 장치의 화면에 디스플레이된 터치 패드 등을 이용하여 ID 및 패스워드를 입력함으로써 로그인을 한다. 사용자는 디스플레이 장치를 통해 이메일을 확인하는 제어 동작에 관한 음성 명령어를 “이메일”로 설정하여 저장할 수 있다. 즉, 사용자는 이메일을 확인하는 제어 동작을 설정한 상태에서 “이메일”이라고 발화하면, “이메일”이라는 사용자 음성 패턴 및 음성 명령어를 저장하게 된다. 따라서, 디스플레이 장치가 턴-오프된 상태이거나 동영상을 출력하고 있는 상태에서 사용자가 “이메일”이라고 발화하면, 디스플레이 장치는 저장된 이메일 접속 ID 및 패스워드를 자동으로 입력함으로써 로그인된 상태의 이메일 페이지를 디스플레이할 수 있다. 이상은 사용자 계정에 대해 자동 로그인을 하는 경우에 대해 설명하였으나, 이에 한정되는 것은 아니다. 즉, 사용자 계정에 대해 자동 로그아웃하는 경우에도 동일한 방식이 적용될 수 있다.
이상에서 설명한 바와 같이, 디스플레이 장치에 등록된 사용자는 저장된 음성 패턴 및 개인화 정보로써 디스플레이 장치를 통해 개인화 서비스를 제공받을 수 있다. 또한, 복수의 사용자 각각의 음성 패턴 및 개인화 정보를 저장함으로써, 하나의 디스플레이 장치를 통해 복수의 사용자가 개인화 서비스를 제공받을 수 있다. 한편, 이상에서는 특정한 예로써 개인 모드에 대해 설명하였으나, 이에 한정되지 않는다.
도 3 내지 도 5는 본 발명의 일 실시 예에 따른 디스플레이 장치(100)에 대한 사용자 등록의 일 예이다.
도 3을 참조하면, 디스플레이 장치(100)가 턴-온된 상태에서, 사용자는 사용자 음성을 등록하기 위한 개인 페이지로 엑세스할 수 있다. 이 경우, 사용자가 디스플레이 장치(100)를 턴-온하거나 개인 페이지로 엑세스 등을 하기 위해서는 원격 제어 장치(400) 또는 디스플레이 장치(100)를 사용할 수 있다. 예를 들어, 원격 제어 장치(400)에 포함된 터치 패널 또는 디스플레이 장치(100)의 패널에 디스플레이되는 터치 패널을 사용하여 디스플레이 장치(100)를 턴-온 또는 턴-오프하거나, 개인화 정보를 등록하거나, 개인 페이지에 엑세스 등을 할 수도 있다.
한편, 개인 페이지에 엑세스하기 위해서는 사용자 인증을 위한 로그인 페이지에 엑세스할 수 있다. 예를 들어, 도 3에 도시된 바와 같은 로그인 페이지에 사용자 ID 및 패스워드를 입력함으로써 개인 페이지에 엑세스할 수 있다. 이 경우, 디스플레이 장치(100)는 개인화 정보를 미리 저장하고 있어야 함은 물론이다. 즉, 디스플레이 장치(100)에 미리 저장된 개인화 정보 중 사용자의 ID 및 패스워드를 입력하면 개인 페이지에 로그인할 수 있다.
사용자가 로그인 페이지에서 로그인을 하여 사용자 인증을 하면, 디스플레이 장치(100)를 제어하기 위한 제어 목록 페이지가 디스플레이될 수 있다. 즉, 제어 목록 페이지에는 복수 개의 제어 목록이 디스플레이되며, 사용자는 디스플레이된 복수 개의 제어 목록 중 하나의 항목을 선택할 수 있다. 예를 들어, 사용자는 디스플레이된 복수 개의 제어 목록 중 디스플레이 장치(100)를 턴-온하는 제어 항목을 선택할 수 있다.
사용자가 복수 개의 제어 목록 중 하나의 제어 항목을 선택하면, 도 4에 도시된 바와 같은 음성 등록 페이지가 디스플레이되며, 음성 등록 페이지에서 사용자 음성을 등록할 수 있다. 즉, 음성 등록 페이지에서는 제어 목록 페이지에서 선택된 하나의 제어 항목에 대한 사용자의 음성 패턴 및 음성 명령어를 저장할 수 있다. 따라서, 음성 등록 페이지에서는 디스플레이 장치(100)를 제어하는 명령어인 음성 명령어를 음성 패턴과 함께 저장하게 된다. 앞선 제어 목록 페이지에서, 사용자는 디스플레이 장치(100)를 턴-온하는 제어 항목을 선택하였고, 도 4에 도시된 바와 같이 음성 등록 페이지에서는 사용자 음성을 입력하는 메시지가 디스플레이될 수 있다. 이 경우, 사용자 음성을 입력하도록 하는 사운드가 디스플레이될 수도 있다.
이 후, 도 5에 도시된 바와 같이, 사용자는 “TV 켜”라고 발화할 수 있다. 사용자가 이와 같은 발화를 하면, 디스플레이 장치(100)는 사용자의 음성을 수신하여 저장 및 등록할 수 있다. 즉, 사용자는 특정한 제어 명령에 대한 발화를 함으로써, 디스플레이 장치(100)는 발화된 음성을 특정한 제어 명령으로 설정 및 등록할 수 있다. 앞선 예시에서, 사용자는 디스플레이 장치(100)를 턴-온하는 제어 항목을 선택하였고, 이에 대해 사용자는 “TV 켜”라고 발화를 하였으므로, 디스플레이 장치(100)는 “TV 켜”를 디스플레이 장치(100)를 턴-온하는 제어 명령으로 저장 및 등록할 수 있다. 또한, 제어 명령이 저장 및 등록되었음을 사용자에게 알리는 메시지를 디스플레이하거나, 사운드를 출력할 수 있다.
이 경우, 디스플레이 장치(100)는 저장 및 등록된 음성 명령어를 사용자에게 확인할 수 있다. 앞선 예시에서, 디스플레이 장치(100)는 “입력하신 명령이 'TV 켜'가 맞습니까?”라는 사운드를 출력함과 동시에 “예” 및 “아니오” 화면을 디스플레이할 수 있다. 이 후, 사용자가 “예” 화면을 선택하면 최종 등록이 완료되고, “아니오" 화면을 선택하면 음성 명령어를 다시 입력하거나 음성 명령어 등록을 취소할 수 있다.
도 6 내지 도 9는 본 발명에 따른 디스플레이 장치(100)에 대한 다양한 실시 예이다.
도 6은 디스플레이 장치(100)가 턴-오프된 상태를 도시하였다. 사용자는 디스플레이 장치(100)를 사용하지 않을 때, 디스플레이 장치(100)에 공급되는 전원을 오프시키게 된다. 여기서, 디스플레이 장치(100)에 마련된 파워 버튼을 눌러 전원을 오프시킬 수 있다. 또한, 원격 제어 장치(400)에 마련된 파워 버튼을 누르거나, 원격 제어 장치(400)에 마련된 터치 패드(410)를 조작하여 전원을 오프시킬 수도 있다. 이러한 방식에 따라 디스플레이 장치(100)에 공급되는 전원을 오프시키는 방식을 소프트 파워 오프라고 한다. 또한, 디스플레이 장치(100)에 연결된 전원 케이블을 전원 공급부로부터 분리시킴으로써 전원을 오프시킬 수 있는데, 이를 하드 파워 오프라고 한다. 도 6에서는 디스플레이 장치(100)가 소프트 파워 오프인 상태를 도시한 것이다.
한편, 전술한 바와 같이, 본 발명의 일 실시 예에 따른 디스플레이 장치(100)는 입력부를 포함한다. 즉, 입력부는 사용자 음성을 수신하고, 제어부는 수신된 사용자 음성에 따라 디스플레이 장치(100)의 제어 여부를 판단하게 된다. 여기서, 입력부는 디스플레이 장치(100)가 턴-온된 상태뿐만 아니라, 턴-오프된 상태에서도 사용자 음성을 수신할 필요가 있다. 즉, 디스플레이 장치(100)가 턴-오프된 상태에서, 디스플레이 장치(100)는 사용자로부터 디스플레이 장치(100)를 턴-온하는 음성 명령어를 수신하거나, 특정 컨텐츠 또는 특정 어플리케이션 등을 디스플레이하도록 하는 음성 명령어를 수신할 수 있다. 따라서, 입력부 및 제어부는 디스플레이 장치(100)가 소프트 파워 오프인 경우에도 턴-온 상태를 유지할 수 있다. 또한, 입력부가 사용자 음성을 수신하고, 수신된 사용자 음성이 등록된 음성 패턴 및 음성 명령어와 동일한 것으로 판단되면, 제어부는 디스플레이 장치(100)의 나머지 부분을 턴-온시키기 위한 웨이크-업(wake up) 신호를 출력할 수 있다. 수신된 사용자 음성이 등록된 음성 패턴 및 음성 명령어와 동일한 것으로 판단된 경우에 대해서는 도 7 내지 도 9에서 설명하기로 한다.
도 6에서 도시된 바와 같은 디스플레이 장치(100)의 소프트 파워 오프인 상태에서, 사용자는 디스플레이 장치(100)를 턴-온하기 위한 명령을 발화할 수 있다. 따라서, 도 7에 도시된 바와 같이, 사용자가 “TV 켜”라고 발화하면, 입력부는 이를 수신하여 제어부로 전송하고, 제어부는 수신된 사용자 음성과 저장된 사용자 음성을 비교한다. 즉, 제어부는 수신된 사용자 음성 패턴과 저장된 사용자 음성 패턴을 비교한다. 비교 결과, 동일한 음성 패턴인 것으로 판단하면, 수신된 음성 명령어와 저장된 음성 명령어를 비교한다. 또한, 동일한 음성 명령어인 것으로 판단하면, 제어부는 수신된 음성 명령어에 대응되도록 디스플레이 장치(100)를 제어할 수 있다. 즉, 도 7에 도시된 바와 같이, 디스플레이 장치(100)는 수신된 “TV 켜”에 대응되는 제어 명령인 디스플레이 장치(100)의 턴-온 제어를 수행할 수 있다.
한편, 수신된 사용자 음성 패턴이 등록된 음성 패턴과 동일하고, 수신된 음성 명령어가 등록된 음성 명령어와 동일하면 디스플레이 장치(100)는 개인 모드(Personal mode 또는 Private mode)로 전환된다. 즉, 개인 모드는 디스플레이 장치(100)가 개인화된 상태를 의미하는 것으로서, 등록된 음성과 동일한 음성을 발화한 사용자가 설정한 대로 디스플레이 장치(100)가 동작하는 것을 말한다.
예를 들어, 적어도 하나의 메뉴를 디스플레이하는 디스플레이부에 대해 등록된 사용자인 제1 사용자가 도 7에 도시된 바와 같은 메뉴 배치를 하였다면, 제1 사용자의 개인 모드에서는 도 7에 도시된 바와 같은 메뉴가 디스플레이부에 디스플레이될 수 있다. 이 경우, 등록된 사용자는 적어도 하나의 메뉴에 대한 형태, 크기, 위치, 컬러, 표시 순서 등을 조정할 수 있다. 즉, 제1 사용자는 디스플레이부에 디스플레이된 메뉴를 기호에 따라 설정할 수 있고, 이 후 제1 사용자에 대한 개인 모드로 전환될 경우에는 이전에 제1 사용자가 설정한 상태의 메뉴를 디스플레이할 수 있다.
한편, 도 7에 도시된 바와 같이, 제어부는 다양한 메뉴를 디스플레이하도록 제어할 수 있다. 즉, 디스플레이부에 디스플레이되는 메뉴에는 개인 어플리케이션 서비스, 추천 서비스, 커뮤니케이션 서비스, 채널 선국 서비스 등이 있을 수 있다.
개인 어플리케이션 서비스는 등록된 사용자의 개인 어플리케이션을 자동으로 실행시키는 것이다. 즉, 등록된 사용자의 개인 모드에서 개인 어플리케이션은 자동으로 로그인될 수 있다. 이 경우, 복수의 개인 어플리케이션 중 하나를 선택하면, 선택된 개인 어플리케이션은 실행될 수 있다.
추천 서비스는 등록된 사용자에 대해 메뉴를 추천하는 것이다. 즉, 등록된 사용자는 자주 사용하는 메뉴를 순서대로 나열하도록 추천 서비스에 설정할 수 있다. 따라서, 등록된 사용자의 개인 모드에서는 기 설정된 상태의 메뉴가 추천 서비스에 디스플레이될 수 있다.
커뮤니케이션 서비스는 등록된 사용자의 개인 커뮤니케이션 서비스 화면을 디스플레이하는 것이다. 즉, 등록된 사용자의 개인 모드에서 커뮤니케이션 서비스는 자동으로 로그인될 수 있다. 이 경우, 복수의 커뮤니케이션 서비스 중 하나를 선택하면, 선택된 커뮤니케이션 서비스는 실행될 수 있다.
채널 선국 서비스는 방송 채널을 선국하여, 선국된 채널에 해당하는 방송을 디스플레이하는 것이다. 즉, 등록된 사용자는 자주 시청하는 방송 채널을 순서대로 나열하도록 채널 선국 서비스에 설정할 수 있다. 따라서, 등록된 사용자의 개인 모드에서는 기 설정된 상태의 방송 채널이 채널 선국 서비스에 디스플레이될 수 있다.
한편, 수신된 사용자 음성 패턴과 저장된 사용자 음성 패턴이 다른 것으로 판단되면, 디스플레이 장치(100)는 수신된 음성 명령어와 저장된 음성 명령어를 비교하지 않을 수 있다. 즉, 수신된 사용자 음성 패턴과 저장된 사용자 음성 패턴이 다른 경우에는 수신된 사용자 음성 명령어와 저장된 음성 명령어가 동일하더라도, 디스플레이 장치(100)는 수신된 음성 명령어에 대응되는 제어 명령을 수행하지 않을 수 있다. 따라서, 디스플레이 장치(100)는 현재의 상태를 유지할 수 있다.
또한, 수신된 사용자 음성 패턴과 저장된 사용자 음성 패턴이 다른 것으로 판단되더라도, 디스플레이 장치(100)는 수신된 음성 명령어와 저장된 음성 명령어를 비교할 수도 있다. 비교 결과, 수신된 음성 명령어가 저장된 음성 명령어와 다른 것으로 판단되면, 디스플레이 장치(100)는 수신된 음성 명령어에 대응되는 제어 명령을 수행하지 않을 수 있다. 즉, 디스플레이 장치(100)는 현재의 상태를 유지할 수 있다. 그러나, 수신된 음성 명령어가 저장된 음성 명령어와 동일한 것으로 판단되면, 디스플레이 장치(100)는 수신된 음성 명령어에 대응되는 제어 명령을 수행할 수 있다. 다만, 이러한 경우에는 수신된 음성 패턴이 저장된 음성 패턴과 다르므로, 미등록된 사용자에 의한 음성 명령이 수신된 경우이다. 따라서, 이러한 경우에는 공용 모드(Common mode)로 전환된다. 뿐만 아니라, 등록된 사용자 또는 미등록된 사용자가 디스플레이 장치(100)에 배치된 전원 버튼을 사용하여 디스플레이 장치(100)를 턴-온하거나, 원격 제어 장치(400)에 배치된 전원 버튼을 사용하여 디스플레이 장치(100)를 턴-온하는 경우에도 공용 모드로 전환될 수 있다.
공용 모드는 게스트 모드(Guest mode)라고도 하며, 전술한 개인 모드에 대응되는 것으로서, 개인 모드와 달리 개인화되지 않은 상태에서 디스플레이 장치(100)가 동작하는 것을 말한다. 즉, 수신된 사용자 음성 패턴과 저장된 음성 패턴이 다르거나 또는 수신된 사용자 음성 명령어와 저장된 음성 명령어가 다르면 디스플레이 장치(100)는 공용 모드로 전환된다. 앞선 예시에서, 미등록된 사용자인 제2 사용자가 디스플레이 장치(100)를 턴-온하면, 등록된 사용자인 제1 사용자가 설정한 상태의 메뉴는 디스플레이되지 않는다. 이 경우, 미등록된 사용자인 제2 사용자가 턴-온한 디스플레이 장치(100)는 공용 모드로 전환되며, 공용 모드는 디스플레이 장치(100)의 디폴트 설정에 따른 상태를 디스플레이하게 된다.
한편, 사용자는 디스플레이 장치(100)로부터 개인 이메일을 확인할 수 있다. 이메일을 확인하기 위한 사용자 음성 설정에 대해서는 전술한 바와 같다. 도 8에 도시된 바와 같이, 사용자는 이메일 확인을 위한 음성 명령어인 “이메일”을 발화할 수 있다. 디스플레이 장치(100)는 사용자가 발화한 “이메일”을 수신하여, 수신된 사용자 음성 패턴과 등록된 음성 패턴을 비교한다. 비교 결과, 동일하다고 판단되면 수신된 음성 명령어와 등록된 음성 명령어를 비교한다. 비교 결과, 동일하다고 판단되면 자동 로그인된 상태의 사용자 이메일 페이지를 디스플레이할 수 있다.
전술한 바와 같은 이메일 확인은 디스플레이 장치(100)가 턴-오프된 상태 또는 컨텐츠가 디스플레이되는 상태 등 다양한 상태에서 수행될 수 있다. 즉, 디스플레이 장치(100)가 턴-오프된 상태에서 “이메일”을 발화하면, 디스플레이 장치(100)가 턴-온됨과 동시에 자동 로그인된 상태의 이메일 페이지가 디스플레이될 수 있다. 또한, 컨텐츠가 디스플레이되는 상태에서 “이메일”을 발화하면, 자동 로그인된 상태의 이메일 페이지가 디스플레이될 수 있다.
한편, 사용자는 디스플레이 장치(100)로부터 컨텐츠 이어 보기를 할 수 있다. 이하에서는 도 9를 참조하여 설명하기로 한다.
예를 들어, 사용자는 "동물의 세계"라는 컨텐츠 제목을 디스플레이하도록 하는 음성 명령어를 “동물의 세계”라고 디스플레이 장치(100)에 저장 및 등록할 수 있다. 따라서, 사용자가 “동물의 세계”라고 발화하면, 이에 대응되는 컨텐츠가 디스플레이될 수 있다. 개인 모드인 디스플레이 장치(100)가 동물의 세계를 디스플레이하는 상태에서 사용자가 해당 컨텐츠가 종료하기 전 다른 컨텐츠를 감상하거나 디스플레이 장치(100)를 턴-오프할 수 있다. 이 경우, 개인 모드 상태의 디스플레이 장치(100)는 다른 컨텐츠가 디스플레이되거나 디스플레이 장치(100)가 턴-오프된 시점에 대한 해당 컨텐츠의 종료 시점을 저장할 수 있다. 따라서, 해당 사용자가 동물의 세계를 감상하는 도중에 다른 컨텐츠를 감상하거나 디스플레이 장치(100)를 턴-오프한 후 다시 “동물의 세계”라고 발화하면 도 9에 도시된 바와 같이 디스플레이될 수 있다. 즉, 디스플레이 장치(100)는 해당 컨텐츠의 종료 시점부터 이어 보기를 하도록 하거나, 처음부터 다시 보기를 하도록 할 수 있다. 따라서, 개인 모드에서 사용자는 처음부터 보기 또는 이어 보기를 선택할 수 있다. 사용자가 처음부터 보기를 선택하면 디스플레이 장치(100)는 해당 컨텐츠를 처음부터 디스플레이하고, 사용자가 이어 보기를 선택하면 디스플레이 장치(100)는 해당 컨텐츠를 이전의 컨텐츠 종료 시점부터 디스플레이할 수 있다.
도 10은 본 발명의 다른 실시 예에 따른 디스플레이 장치(100A)의 블럭도의 일 예이다. 도 10을 참조하면, 본 발명의 다른 실시 예에 따른 디스플레이 장치(100A)는 입력부(110), 제어부(140), 저장부(160), 감지부(120), 및 디스플레이부(130)를 포함한다.
입력부(110), 제어부(140), 저장부(160), 디스플레이부(130)에 대해서는 전술한 바와 같으므로, 이에 대한 설명은 생략하도록 한다. 한편, 감지부(120)는 사용자의 시선을 감지하고, 감지 결과를 제어부(140)로 전송할 수 있다. 이 경우, 감지부(120)는 카메라일 수 있다.
사용자는 개인 모드에서 개인화된 디스플레이 장치(100A)를 경험하게 된다. 공용 모드와 달리 개인 모드에서는 사용자 개인화 정보에 대한 엑세스가 용이하다. 따라서, 개인 모드를 종료하기 위해서는 사용자는 개인 모드를 해제하여 공용 모드로 설정하거나, 디스플레이 장치(100A)를 턴-오프할 수 있다. 그러나, 개인 모드에서 사용자가 개인 모드 해제를 하지 않거나, 디스플레이 장치(100A)를 턴-오프하지 않은 상태에서 다른 사용자가 디스플레이 장치(100A)를 제어할 수 있다. 이 경우, 해당 개인 모드에 대한 사용자의 정보는 다른 사용자에 의해 훼손되거나 개인화 정보가 유출되는 문제가 발생할 수 있다.
따라서, 감지부(120)는 개인 모드에서 사용자의 시선을 감지하고, 사용자의 시선이 디스플레이부(130)를 향하는 것으로 판단되면 개인 모드를 유지할 수 있다. 이 경우, 사용자가 디스플레이 장치(100A)를 턴-오프하거나, 개인 모드를 해제하고 공용 모드를 설정하지 않는 이상 개인 모드는 유지될 수 있다. 감지부(120)가 사용자의 시선을 감지하는 구체적인 수단은 이미 공지된 바 있으므로, 상세는 생략하기로 한다.
한편, 감지부(120)는 개인 모드에서 사용자 시선이 미리 정해진 시간 동안 디스플레이부(130)를 향하지 않는 것으로 판단되면, 개인 모드를 해제하거나 스탠바이 모드(Standby mode)로 전환할 수 있다. 즉, 개인 모드인 상태에서, 감지부(120)가 미리 정해진 시간 동안 해당 사용자의 시선을 감지하지 못하거나, 미리 정해진 시간 동안 해당 사용자의 시선이 디스플레이부(130)를 향하지 않는 것으로 판단하면 제어부(140)는 디스플레이 장치(100A)를 스탠바이 모드로 전환할 수 있다. 이 경우, 사용자는 스탠바이 모드로 전환하기 위한 사용자 시선 미감지 시간을 설정할 수 있다. 예를 들어, 개인 모드에서, 해당 사용자가 컨텐츠를 감상하는 도중에 잠이 들거나, 다른 장소로 이동한 경우 등이 이에 해당할 수 있다. 스탠바이 모드에서, 사용자는 미리 저장된 음성 명령어를 발화함으로써, 디스플레이 장치(100A)를 턴-온 또는 턴-오프 등을 할 수 있다.
한편, 감지부(120)는 복수의 사용자 시선을 감지할 수 있다. 이 경우, 감지부(120)가 복수의 사용자 시선을 감지하면, 제어부(140)는 미리 저장된 디폴트 설정에 따라 디스플레이 장치(100A)를 공용 모드로 전환할 수 있다. 즉, 개인 모드인 상태에서, 감지부(120)가 다른 사용자의 시선을 감지한 경우 제어부(140)는 디스플레이 장치(100A)를 공용 모드로 전환할 수 있다. 예를 들어, 개인 모드에서, 해당 사용자가 컨텐츠를 감상하거나 이메일을 확인하는 도중에 다른 사용자가 디스플레이부(130)를 향해 시선을 향하는 경우 등이 이에 해당할 수 있다. 공용 모드에서, 사용자는 미리 저장된 음성 명령어를 발화함으로써, 디스플레이 장치(100A)를 턴-온 또는 턴-오프 등을 할 수 있다.
도 11은 본 발명의 다른 실시 예에 따른 개인화 서비스 제공 방법의 순서도의 일 예이다. 이하에서는 도 10에 대한 설명과 중복되는 부분에 대한 설명은 생략하기로 한다.
먼저, 디스플레이 장치는 사용자 음성 패턴 및 개인화 정보를 미리 저장한다(S1110). 이 후, 디스플레이 장치는 사용자 음성을 수신한다(S1115). 이 후, 디스플레이 장치는 마이크를 통해 수신된 사용자 음성과 미리 저장된 등록 사용자의 음성을 비교할 수 있다(S1120). 이러한 단계에 대해서는 도 2에 대한 설명과 동일하므로, 중복된 부분에 대한 설명은 생략하기로 한다. 수신된 사용자 음성과 미리 저장된 사용자의 음성이 동일한 것으로 판단되면 개인 모드로 전환되고(S1125), 다른 것으로 판단되면 공용 모드로 전환된다(S1140).
개인 모드(S1125)에서, 디스플레이 장치는 사용자의 시선을 감지할 수 있다(S1130). 사용자의 시선이 디스플레이부를 향하는 것으로 판단되면(S1130_Y) 개인 모드는 유지될 수 있다. 또한, 사용자의 시선이 디스플레이부를 향하지 않는 것으로 판단되면(S1130_N) 스탠바이 모드로 전환될 수 있다.
한편, 도 11에 도시하지는 않았으나, 디스플레이 장치는 복수의 사용자 시선을 감지할 수 있다. 개인 모드(S1125)에서, 다른 사용자의 시선을 감지하면, 디스플레이 장치는 미리 저장된 디폴트 설정에 따라 공용 모드로 전환될 수 있다.
도 12는 본 발명의 일 실시 예에 따른 제어부의 세부 구성을 설명하기 위한 블럭도이다.
도 12를 참조하면, 제어부(140)는 디스플레이 장치(100)의 전반적인 동작을 제어한다. 제어부(140)는 RAM(141), ROM(142), CPU(143), GPU(144), 버스(145)를 포함한다. RAM(141), ROM(142), CPU(143), GPU(144) 등은 버스(145)를 통해 서로 연결될 수 있다.
CPU(143)는 저장부에 액세스하여, 저장부에 저장된 O/S를 이용하여 부팅을 수행한다. 그리고, 저장부에 저장된 각종 프로그램, 컨텐츠, 데이터 등을 이용하여 다양한 동작을 수행한다. 뿐만 아니라, 필기 궤적을 분석하여, 이에 대응되는 텍스트를 저장부로부터 추출한다.
ROM(142)에는 시스템 부팅을 위한 명령어 세트 등이 저장된다. 턴-온 명령이 입력되어 전원이 공급되면, CPU(143)는 ROM(142)에 저장된 명령어에 따라 저장부에 저장된 O/S를 RAM(141)에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, CPU(143)는 저장부에 저장된 각종 프로그램을 RAM(141)에 복사하고, RAM(141)에 복사된 프로그램을 실행시켜 각종 동작을 수행한다.
GPU(144)는 디스플레이 장치(100)의 부팅이 완료되면, 아이템 화면, 컨텐츠 화면, 또는 검색 결과 화면 등을 디스플레이한다. 구체적으로는, GPU(144)는 연산부(미도시) 및 렌더링부(미도시)를 이용하여 아이콘, 이미지, 텍스트 등과 같은 다양한 객체를 포함하는 화면을 생성할 수 있다. 연산부는 화면의 레이아웃에 따라 각 객체들이 표시될 좌표값, 형태, 크기, 컬러 등과 같은 속성 값을 연산한다. 렌더링부는 연산부에서 연산한 속성값에 기초하여 객체를 포함하는 다양한 레이아웃의 화면을 생성한다. 렌더링부에서 생성된 화면은 디스플레이부(130)로 제공되어, 디스플레이 영역 내에 표시된다.
디스플레이부(130)는 상술한 바와 같은 다양한 화면을 디스플레이한다. 디스플레이부(130)는 LCD(Liquid Crystal Display), OLED(Organic Light Emitting Diodes) 디스플레이, PDP(Plasma Display Panel) 등과 같은 다양한 형태의 디스플레이로 구현될 수 있다. 디스플레이부(130) 내에는 a-si TFT, LTPS(low temperature poly silicon) TFT, OTFT(organic TFT) 등과 같은 형태로 구현될 수 있는 구동 회로, 백라이트 유닛 등도 함께 포함될 수 있다.
도 13은 본 발명의 다양한 실시 예에 따른 디스플레이 장치(100, 100A)의 구성을 종합적으로 설명하기 위한 블럭도이다.
도 13을 참조하면, 디스플레이 장치(100, 100A)는 입력부(110), 감지부(120), 디스플레이부(130), 제어부(140), 통신부(150), 저장부(160), 비디오 프로세서(170-1), 오디오 프로세서(170-2), 리모컨 수신부(180-1), 검출부(180-2), 스피커부(180-3)를 포함할 수 있다.
입력부(110)는 사용자 음성이나 기타 소리를 입력받아 오디오 데이터로 변환하기 위한 구성이다. 제어부(140)는 입력부(110)를 통해 입력되는 사용자 음성을 아이템 검색 또는 추출에 이용하거나, 미리 저장된 사용자 음성과 비교하여 제어 동작을 수행하거나, 오디오 데이터로 변환하여 저장부(160)에 저장할 수 있다. 특히, 입력부(110)가 마련된 경우, 제어부(140)는 입력부(110)를 통해 수신되는 사용자 음성과 저장부(160)에 저장된 사용자 음성을 비교하여, 수신된 사용자 음성이 저장된 사용자 음성과 동일한 것으로 판단되면, 그에 따른 제어 동작을 수행할 수 있다.
감지부(120)는 사용자의 제어에 따라 정지 영상 또는 동영상을 촬상할 수 있다. 뿐만 아니라, 감지부(120)는 사용자 시선을 감지할 수도 있다. 이 경우, 감지부(120)는 전면 카메라, 후면 카메라와 같이 복수 개로 구현될 수 있다. 특히, 감지부(120)가 마련된 경우, 제어부(140)는 감지부(120)를 통해 감지되는 사용자 시선을 수신하고, 수신된 사용자 시선이 미리 설정된 시간 동안 디스플레이부를 향하지 않는 것으로 판단하면 개인 모드를 종료하고, 공용 모드 또는 스탠바이 모드로 전환할 수 있다.
디스플레이부(130)는 일반적인 LCD 디스플레이로 구현될 수도 있고, 터치 스크린 형태로 구현될 수도 있다. 터치 스크린으로 구현될 경우, 사용자는 화면을 터치하여 디스플레이 장치(100, 100A)의 동작을 제어할 수 있다. 또한, 디스플레이부(130)가 터치 스크린으로 구현되지 않는 경우, 원격 제어 장치로부터 전송되는 신호를 입력부(110)가 수신하여 이를 제어부(140)로 전송할 수 있다.
통신부(150)는 다양한 유형의 통신방식에 따라 다양한 유형의 외부 기기와 통신을 수행하는 구성이다. 통신부(150)는 와이파이 칩(150-1), 블루투스 칩(150-2), 무선통신 칩(150-3), NFC 칩(150-4)을 포함할 수 있다.
와이파이 칩(150-1), 블루투스 칩(150-2)은 각각 WiFi 방식, 블루투스 방식으로 통신을 수행한다. 와이파이 칩(150-1)이나 블루투스 칩(150-2)을 이용하는 경우에는 SSID 및 세션 키 등과 같은 각종 연결 정보를 먼저 송수신하여, 이를 이용하여 통신 연결한 후 각종 정보들을 송수신할 수 있다. 무선통신 칩(150-3)은 IEEE, 지그비, 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evoloution) 등과 같은 다양한 통신 규격에 따라 통신을 수행하는 칩을 의미한다. NFC 칩(150-4)은 135kHz, 13.56MHz, 433MHz, 860~960MHz, 2.45GHz 등과 같은 다양한 RF-ID 주파수 대역들 중에서 13.56MHz 대역을 사용하는 NFC(Near Field Communication) 방식으로 동작하는 칩을 의미한다.
또한, 통신부(150)는 검색 서버 등과 같은 다양한 외부 서버 장치와 통신을 수행할 수도 있다.
입력부(110)를 통해 수신된 사용자 음성에 기초하여, 제어부(140)는 통신부(150)를 통해서 다양한 외부 장치에 액세스하여, 검출된 텍스트에 대응되는 아이템을 수신할 수 있다. 제어부(140)는 디스플레이부(130)에 표시된 아이템 중에서 멀티미디어 컨텐츠에 대응되는 아이템이 선택되면, 통신부(150)를 통해서 해당 멀티미디어 컨텐츠를 수신한다. 멀티미디어 컨텐츠가 수신되면, 제어부(140)는 그 멀티미디어 컨텐츠를 디멀티플렉싱하여 비디오 데이터 및 오디오 데이터를 각각 추출하고, 추출된 비디오 데이터 및 오디오 데이터를 각각 디코딩하여 해당 아이템을 재생하도록 비디오 프로세서(170-1) 및 오디오 프로세서(170-2)를 제어할 수 있다.
그 밖에, 통신부(150)는 서버 장치가 아닌 다양한 유형의 외부 장치와 직접적으로 통신을 수행하여 검색을 수행할 수도 있다.
저장부(160)는 디스플레이 장치(100, 100A)의 동작에 필요한 각종 프로그램 및 데이터를 저장하기 위한 구성요소이다. 제어부(140)는 저장부(160)에 저장된 각종 프로그램 및 데이터를 이용하여 디스플레이 장치(100, 100A)의 동작을 전반적으로 제어한다. 뿐만 아니라, 저장부(160)는 등록하고자 하는 사용자의 음성을 저장할 수도 있다. 구체적으로, 등록하고자 하는 사용자의 음성 패턴 및 개인화 정보인 언어 정보 등을 저장할 수 있다. 디스플레이부(130) 및 제어부(140)에 대해서는 상술한 다양한 실시 예들에서 이미 구체적으로 설명한 바 있으므로, 중복 설명은 생략한다.
비디오 프로세서(170-1)는 통신부(150)를 통해 수신된 아이템 또는 저장부(160)에 저장된 아이템에 포함된 비디오 데이터를 처리하기 위한 구성요소이다. 즉, 비디오 데이터에 대한 디코딩, 스케일링, 노이즈 필터링, 프레임 레이트 변환, 해상도 변환 등과 같은 다양한 이미지 처리를 수행할 수 있다. 이 경우, 디스플레이부(130)는 비디오 프로세서(170-1)에서 생성한 이미지 프레임을 디스플레이할 수 있다.
오디오 프로세서(170-2)는 통신부(150)를 통해 수신된 아이템 또는 저장부(160)에 저장된 아이템에 포함된 오디오 데이터를 처리하기 위한 구성요소이다. 오디오 프로세서(170-2)에서는 오디오 데이터에 대한 디코딩이나 증폭, 노이즈 필터링 등과 같은 다양한 처리가 수행될 수 있다.
리모컨 수신부(180-1)는 외부의 원격 제어 장치가 전송한 조작 신호를 수신하여, 이를 제어부(140)로 전송할 수 있다. 이 경우, 리모컨 수신부(180-1)는 디스플레이 장치(100, 100A)의 본체 외관의 전면부, 측면부, 배면부 등의 임의의 영역에 형성될 수 있다.
검출부(180-2)는 입력부(110)가 수신한 사용자 음성으로부터 개인 모드 전환 여부의 판단에 필요한 요소를 검출할 수 있다. 즉, 수신된 사용자 음성 패턴과 등록된 사용자 음성 패턴이 동일한지를 판단하여야 하므로, 검출부(180-2)는 수신된 사용자 음성으로부터 음성 패턴을 검출할 수 있다. 또한, 수신된 음성 명령어와 등록된 음성 명령어가 동일한지를 판단하여야 하므로, 검출부(180-2)는 수신된 사용자 음성으로부터 음성 명령어를 검출할 수 있다.
스피커부(180-3)는 오디오 프로세서(170-2)에서 생성한 오디오 데이터를 출력한다.
한편, 모션 제어 모드나 음성 제어 모드가 지원되는 디스플레이 장치에서는, 음성 인식 기술 또는 모션 인식 기술이 상술한 다양한 실시 예에 사용될 수 있다. 가령, 사용자가 화면에 표시된 아이템 등의 오브젝트를 선택하는 듯한 모션을 취하거나, 그 오브젝트에 대응되는 음성 명령어를 발음하는 경우, 해당 오브젝트가 선택된 것으로 판단하고, 그 오브젝트에 매칭된 제어 동작을 수행할 수 있다. 이 경우, 개인 모드뿐만 아니라, 공용 모드에서도 이러한 제어 동작이 수행되도록 설정할 수 있다.
그 밖에, 도 13에 도시하지는 않았으나, 실시 예에 따라서는, 디스플레이 장치(100) 내에 USB 커넥터가 연결될 수 있는 USB 포트나, 헤드셋, 마우스, LAN 등과 같은 다양한 외부 단자와 연결하기 위한 다양한 외부 입력 포트, DMB(Digital Multimedia Broadcasting) 신호를 수신하여 처리하는 DMB 칩 등을 더 포함할 수 있음은 물론이다.
이상과 같이, 디스플레이 장치(100, 100A)는 다양한 형태로 구현될 수 있다.
도 14는 본 발명의 일 실시 예에 따른 디스플레이 장치(100)가 사용하는 소프트웨어 구조의 블럭도이다.
도 14의 소프트웨어는 저장부(160)에 저장될 수도 있으나 반드시 이에 한정되는 것은 아니며 디스플레이 장치(100, 100A) 내에 사용되는 다양한 유형의 저장 수단에 저장될 수도 있다. 도 14에 따르면, 디스플레이 장치(100, 100A)에는 OS(191), 커널(192), 미들웨어(193), 어플리케이션 등을 포함하는 소프트웨어가 저장될 수 있다.
운영체제(Operating System, 191)는 하드웨어의 전반적인 동작을 제어하고 관리하는 기능을 수행한다. 즉, OS(191)는 하드웨어 관리와 메모리, 보안 등의 기본적인 기능을 담당하는 계층이다.
커널(192)은 디스플레이 장치(100) 내의 감지 수단에 의해 감지되는 각종 신호들을 미들웨어(193)로 전달하는 통로 역할을 한다.
미들웨어(193)는 디스플레이 장치(100, 100A)의 동작을 제어하는 각종 소프트웨어 모듈을 포함한다. 도 14에 따르면, 미들웨어(193)는 UI 프레임워크(193-1), 윈도우 매니저(193-2), 음성 인식 모듈(193-3), 보안 모듈(193-4), 시스템 매니저(193-5), 멀티미디어 프레임워크(193-6), X11 모듈(193-7), APP 매니저(193-8), 연결 매니저(193-9), 아이템 인식 모듈(193-10)을 포함한다.
UI 프레임워크(193-1)는 각종 UI를 제공하기 위한 모듈이다. UI 프레임워크(193-1)는 텍스트, 아이템 등의 각종 오브젝트를 구성하는 이미지 합성기(Image Compositor module), 오브젝트가 표시될 좌표를 산출하는 좌표 합성기, 구성된 오브젝트를 산출된 좌표에 렌더링하는 렌더링 모듈, 2D 또는 3D 형태의 UI를 구성하기 위한 툴(tool)을 제공하는 2D/3D UI 툴킷 등을 포함할 수 있다.
윈도우 매니저(193-2)는 사용자의 신체나 펜을 이용한 터치 이벤트, 사용자의 음성을 이용한 음성 인식 이벤트, 사용자의 동작을 이용한 동작 인식 이벤트 기타 입력 이벤트를 감지할 수 있다. 윈도우 매니저(193-2)는 이러한 이벤트가 감지되면 UI 프레임워크(193-1)로 이벤트 신호를 전달하여, 이벤트에 대응되는 동작을 수행하도록 한다.
음성 인식 모듈(193-3)은 입력부로부터 사용자 음성을 수신하여 음성 패턴 및 음성 명령어 등을 인식하기 위한 모듈이다. 검출부(180-2)는 음성 인식 모듈(193-3)을 실행시켜, 사용자 음성으로부터 음성 패턴 및 음성 명령어 등을 검출할 수 있다. 음성 인식 모듈(193-3)은 수신된 사용자 음성에 대한 음성 패턴 및 음성 명령어를 미리 저장된 음성 라이브러리와 비교함으로써, 음성 패턴 및 음성 명령어를 인식한다.
보안 모듈(193-4)은 하드웨어에 대한 인증(Certification), 요청 허용(Permission), 보안 저장(Secure Storage) 등을 지원하는 모듈이다.
시스템 매니저(193-5)는 디스플레이 장치(100, 100A) 내의 각 구성요소들의 상태를 모니터링하고, 그 모니터링 결과를 다른 모듈들에게 제공한다. 가령, 배터리 잔량이 부족하거나, 에러가 발생하는 경우, 통신 연결 상태가 끊어지는 경우 등의 이벤트가 발생하면 시스템 매니저(193-5)는 그 모니터링 결과를 UI 프레임워크(193-1)로 제공하여 알림 메시지나 알림 음을 출력할 수 있다.
멀티미디어 프레임워크(193-6)는 디스플레이 장치(100)에 저장되어 있거나, 외부 소스로부터 제공되는 멀티미디어 컨텐츠를 재생하기 위한 모듈이다. 멀티미디어 프레임워크(193-6)는 플레이어 모듈, 캠코더 모듈, 사운드 처리 모듈 등을 포함할 수 있다. 이에 따라, 각종 멀티미디어 아이템을 재생하여 화면 및 음향을 생성하여 재생하는 동작을 수행할 수 있다.
X11 모듈(193-7)은 디스플레이 장치(100)에 구비된 각종 하드웨어들로부터 각종 이벤트 신호를 수신하는 모듈이다. 여기서 이벤트란, 사용자 음성이 수신되는 이벤트, 사용자 조작이 감지되는 이벤트, 시스템 알람이 발생하는 이벤트, 특정 프로그램이 실행 또는 종료되는 이벤트 등과 같이 다양하게 설정될 수 있다.
APP 매니저(193-8)는 저장부(160)에 설치(install)된 각종 어플리케이션의 실행 상태를 관리하는 모듈이다. APP 매니저(193-8)는 X11 모듈(193-7)로부터 어플리케이션 실행 명령이 입력된 이벤트가 감지되면, 해당 이벤트에 대응되는 어플리케이션을 호출하여 실행시킨다.
연결 매니저(193-9)는 유선 또는 무선 네트워크 연결을 지원하기 위한 모듈이다. 연결 매니저(193-9)는 DNET 모듈, UPnP 모듈 등과 같은 다양한 세부 모듈들을 포함할 수 있다.
아이템 인식 모듈(193-10)은 저장부(160)에 저장된 아이템 또는 통신부(150)가 수신한 아이템을 인식하여, 그 아이템에 대한 정보를 추출하는 모듈이다. 구체적으로, 아이템 인식 모듈(193-10)은 아이템의 제목, 아이템의 제목에 해당하는 텍스트, 기타 아이템에 대한 구체적인 정보를 추출할 수 있다.
한편, 미들웨어(193)의 상부 계층에는 디스플레이 장치(100, 100A)의 다양한 기능을 구현하는 브라우저 계층 및 적어도 하나 이상의 어플리케이션 계층이 존재한다.
도 14에 도시된 소프트웨어 구조는 일 예에 불과하므로, 반드시 이에 한정되어야 하는 것은 아니다. 따라서, 필요에 따라 일부가 생략 또는 변형되거나, 추가될 수도 있음은 물론이다. 가령, 저장부(160)에는 각종 센서들에서 센싱된 신호들을 분석하기 위한 센싱 모듈이나, 메신저 프로그램, SMS(Short Message Service) & MMS(Multimedia Message Service) 프로그램, 이메일 프로그램 등과 같은 메시징 모듈, 전화 정보 수집기(Call Info Aggregator) 프로그램 모듈, VoIP 모듈, 웹 브라우저(194-m) 모듈 등과 같이 다양한 프로그램들이 추가로 마련될 수도 있다.
이상과 같이 사용자는 디스플레이 장치에 대한 음성 입력을 통해서, 디스플레이 장치의 동작을 편리하게 제어할 수 있다.
상술한 다양한 실시 예들에 따른 개인화 서비스 제공 방법은, 비일시적 판독 가능 매체(non-transitory readable medium)에 저장될 수 있다. 이러한 비일시적 판독 가능 매체는 다양한 장치에 탑재되어 사용될 수 있다. 일 예로, 복수의 사용자의 음성 패턴 및 복수의 사용자 각각에 대해 개별적으로 설정된 개인화 정보를 저장하는 단계, 사용자 음성을 수신하는 단계, 사용자 음성의 음성 패턴에 대응되는 개인화 정보를 검출하고, 검출된 개인화 정보에 따라 디스플레이 장치의 기능을 제어하는 단계를 포함하는 개인화 서비스 제공 방법을 수행하기 위한 프로그램 코드가 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.
비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등이 될 수 있다.
이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
100, 100A : 디스플레이 장치
110 : 입력부 120 : 감지부
130 : 디스플레이부 140 : 제어부
150 : 통신부 160 : 저장부
400 : 원격 제어 장치 410 : 입력 패드 (터치 패드)

Claims (16)

  1. 디스플레이 장치에 있어서,
    복수의 사용자의 음성 패턴 및 상기 복수의 사용자 각각에 대해 개별적으로 설정된 개인화 정보가 저장된 저장부;
    사용자 음성을 수신하는 입력부; 및
    상기 사용자 음성의 음성 패턴에 대응되는 개인화 정보를 상기 저장부로부터 검출하고, 상기 검출된 개인화 정보에 따라 상기 디스플레이 장치의 기능을 제어하는 제어부;를 포함하는 디스플레이 장치.
  2. 제1항에 있어서,
    상기 개인화 정보는,
    상기 복수의 사용자 각각에 대한 식별 정보를 포함하며,
    상기 제어부는,
    상기 디스플레이 장치를 턴-온하기 위한 사용자 음성이 수신되면, 상기 디스플레이 장치를 턴-온시키고, 상기 사용자 음성에 대응되는 식별 정보를 이용하여 적어도 하나의 사용자 계정에 대해 자동 로그인을 수행하는 것을 특징으로 하는 디스플레이 장치.
  3. 제2항에 있어서,
    상기 제어부는,
    상기 디스플레이 장치를 턴-오프하기 위한 사용자 음성이 수신되면, 상기 디스플레이 장치를 턴-오프시키고, 상기 적어도 하나의 사용자 계정에 대해 자동 로그아웃을 수행하는 것을 특징으로 하는 디스플레이 장치.
  4. 제1항에 있어서,
    적어도 하나의 메뉴를 디스플레이하는 디스플레이부;를 더 포함하며,
    상기 제어부는,
    상기 검출된 개인화 정보에 따라 상기 적어도 하나의 메뉴의 형태, 크기, 위치, 컬러, 메뉴 표시 순서 중 적어도 하나를 조정하는 것을 특징으로 하는 디스플레이 장치.
  5. 제1항에 있어서,
    상기 제어부는,
    상기 검출된 개인화 정보에 대응되는 어플리케이션을 자동 실행시키는 개인 어플리케이션 서비스, 상기 검출된 개인화 정보에 대응되는 메뉴를 추천하는 추천 서비스, 상기 검출된 개인화 정보에 대응되는 커뮤니케이션 화면을 디스플레이하는 커뮤니케이션 서비스, 상기 검출된 개인화 정보에 대응되는 방송 채널을 선국하는 채널 선국 서비스 중 적어도 하나를 제공하는 것을 특징으로 하는 디스플레이 장치.
  6. 제1항에 있어서,
    디스플레이부; 및
    사용자 시선을 감지하기 위한 감지부;를 더 포함하고,
    상기 제어부는,
    상기 사용자 시선이 기 설정된 시간 동안 상기 디스플레이부를 향하지 않는 것으로 판단되면, 스탠바이 모드로 전환하는 것을 특징으로 하는 디스플레이 장치.
  7. 제6항에 있어서,
    상기 제어부는,
    상기 감지부에 의해 복수의 사용자 시선이 감지되면, 기 저장된 디폴트 설정에 따라 상기 디스플레이 장치의 기능을 제어하는 공용 모드(Common mode)로 전환하는 것을 특징으로 하는 디스플레이 장치.
  8. 제1항에 있어서,
    상기 제어부는,
    상기 저장부에 저장된 음성 패턴과 상이한 음성 패턴을 가지는 사용자 음성이 수신되면, 기 저장된 디폴트 설정에 따라 상기 디스플레이 장치의 기능을 제어하는 공용 모드(Common mode)로 전환하는 것을 특징으로 하는 디스플레이 장치.
  9. 디스플레이 장치의 개인화 서비스 제공 방법에 있어서,
    복수의 사용자의 음성 패턴 및 상기 복수의 사용자 각각에 대해 개별적으로 설정된 개인화 정보를 저장하는 단계;
    사용자 음성을 수신하는 단계; 및
    상기 사용자 음성의 음성 패턴에 대응되는 개인화 정보를 검출하고, 상기 검출된 개인화 정보에 따라 상기 디스플레이 장치의 기능을 제어하는 단계;를 포함하는 개인화 서비스 제공 방법.
  10. 제9항에 있어서,
    상기 개인화 정보는,
    상기 복수의 사용자 각각에 대한 식별 정보를 포함하며,
    상기 제어하는 단계는,
    상기 디스플레이 장치를 턴-온하기 위한 사용자 음성이 수신되면, 상기 디스플레이 장치를 턴-온시키는 단계; 및
    상기 사용자 음성에 대응되는 식별 정보를 이용하여 적어도 하나의 사용자 계정에 대해 자동 로그인을 수행하는 단계;를 포함하는 것을 특징으로 하는 개인화 서비스 제공 방법.
  11. 제10항에 있어서,
    상기 제어하는 단계는,
    상기 디스플레이 장치를 턴-오프하기 위한 사용자 음성이 수신되면, 상기 디스플레이 장치를 턴-오프시키는 단계; 및
    상기 적어도 하나의 사용자 계정에 대해 자동 로그아웃을 수행하는 단계;를 더 포함하는 것을 특징으로 하는 개인화 서비스 제공 방법.
  12. 제9항에 있어서,
    상기 제어하는 단계는,
    디스플레이된 메뉴의 형태, 크기, 위치, 컬러, 메뉴 표시 순서 중 적어도 하나를 상기 검출된 개인화 정보에 따라 조정하는 단계를 포함하는 것을 특징으로 하는 개인화 서비스 제공 방법.
  13. 제9항에 있어서,
    상기 제어하는 단계는,
    상기 검출된 개인화 정보에 대응되는 개인화 서비스를 제공하는 단계를 포함하며,
    상기 개인화 서비스는,
    상기 검출된 개인화 정보에 대응되는 어플리케이션을 자동 실행시키는 개인 어플리케이션 서비스, 상기 검출된 개인화 정보에 대응되는 메뉴를 추천하는 추천 서비스, 상기 검출된 개인화 정보에 대응되는 커뮤니케이션 화면을 디스플레이하는 커뮤니케이션 서비스, 상기 검출된 개인화 정보에 대응되는 방송 채널을 선국하는 채널 선국 서비스 중 적어도 하나를 포함하는 것을 특징으로 하는 개인화 서비스 제공 방법.
  14. 제9항에 있어서,
    사용자 시선을 감지하는 단계; 및
    상기 사용자 시선이 기 설정된 시간 동안 상기 디스플레이 장치를 향하지 않는 것으로 판단되면, 스탠바이 모드로 전환하는 단계;를 더 포함하는 것을 특징으로 하는 개인화 서비스 제공 방법.
  15. 제14항에 있어서,
    복수의 사용자 시선이 감지되면, 기 저장된 디폴트 설정에 따라 상기 디스플레이 장치의 기능을 제어하는 공용 모드(Common mode)로 전환하는 단계;를 더 포함하는 것을 특징으로 하는 개인화 서비스 제공 방법.
  16. 제9항에 있어서,
    기 저장된 음성 패턴과 상이한 음성 패턴을 가지는 사용자 음성이 수신되면, 기 저장된 디폴트 설정에 따라 상기 디스플레이 장치의 기능을 제어하는 공용 모드(Common mode)로 전환하는 단계;를 더 포함하는 것을 특징으로 하는 개인화 서비스 제공 방법.
KR1020130088004A 2013-07-25 2013-07-25 디스플레이 장치 및 개인화 서비스 제공 방법 KR20150012464A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020130088004A KR20150012464A (ko) 2013-07-25 2013-07-25 디스플레이 장치 및 개인화 서비스 제공 방법
EP14153171.5A EP2830321A1 (en) 2013-07-25 2014-01-30 Display apparatus and method for providing personalized service thereof
US14/176,503 US20150029089A1 (en) 2013-07-25 2014-02-10 Display apparatus and method for providing personalized service thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130088004A KR20150012464A (ko) 2013-07-25 2013-07-25 디스플레이 장치 및 개인화 서비스 제공 방법

Publications (1)

Publication Number Publication Date
KR20150012464A true KR20150012464A (ko) 2015-02-04

Family

ID=50070311

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130088004A KR20150012464A (ko) 2013-07-25 2013-07-25 디스플레이 장치 및 개인화 서비스 제공 방법

Country Status (3)

Country Link
US (1) US20150029089A1 (ko)
EP (1) EP2830321A1 (ko)
KR (1) KR20150012464A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190056699A (ko) * 2017-11-17 2019-05-27 에스케이브로드밴드주식회사 음성인식처리장치 및 그 동작 방법
KR20230065736A (ko) * 2021-11-05 2023-05-12 주식회사 엘지유플러스 인공 지능 기반의 개인 음성 판별을 통한 보안 및 개인화 서비스 제공 방법 및 그를 위한 장치

Families Citing this family (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9557885B2 (en) 2011-08-09 2017-01-31 Gopro, Inc. Digital media editing
JP6134803B2 (ja) * 2013-09-12 2017-05-24 日立マクセル株式会社 映像記録装置およびカメラ機能制御プログラム
US9652667B2 (en) 2014-03-04 2017-05-16 Gopro, Inc. Automatic generation of video from spherical content using audio/visual analysis
US9685194B2 (en) 2014-07-23 2017-06-20 Gopro, Inc. Voice-based video tagging
US9792502B2 (en) 2014-07-23 2017-10-17 Gopro, Inc. Generating video summaries for a video using video summary templates
CN105678124A (zh) * 2014-11-20 2016-06-15 华为终端（东莞）有限公司 一种提升终端安全性的装置及方法
US9734870B2 (en) 2015-01-05 2017-08-15 Gopro, Inc. Media identifier generation for camera-captured media
US9679605B2 (en) 2015-01-29 2017-06-13 Gopro, Inc. Variable playback speed template for video editing application
CN106034246A (zh) * 2015-03-19 2016-10-19 阿里巴巴集团控股有限公司 一种基于用户操作行为的服务提供方法及装置
US10186012B2 (en) 2015-05-20 2019-01-22 Gopro, Inc. Virtual lens simulation for video and photo cropping
US9894393B2 (en) 2015-08-31 2018-02-13 Gopro, Inc. Video encoding for reduced streaming latency
US10204273B2 (en) 2015-10-20 2019-02-12 Gopro, Inc. System and method of providing recommendations of moments of interest within video clips post capture
US9721611B2 (en) 2015-10-20 2017-08-01 Gopro, Inc. System and method of generating video from video clips based on moments of interest within the video clips
CN105472159A (zh) * 2015-12-17 2016-04-06 青岛海信移动通信技术股份有限公司 一种多用户解锁的方法及装置
US10095696B1 (en) 2016-01-04 2018-10-09 Gopro, Inc. Systems and methods for generating recommendations of post-capture users to edit digital media content field
US10109319B2 (en) 2016-01-08 2018-10-23 Gopro, Inc. Digital media editing
US10083537B1 (en) 2016-02-04 2018-09-25 Gopro, Inc. Systems and methods for adding a moving visual element to a video
US9972066B1 (en) 2016-03-16 2018-05-15 Gopro, Inc. Systems and methods for providing variable image projection for spherical visual content
US10402938B1 (en) 2016-03-31 2019-09-03 Gopro, Inc. Systems and methods for modifying image distortion (curvature) for viewing distance in post capture
US9838731B1 (en) 2016-04-07 2017-12-05 Gopro, Inc. Systems and methods for audio track selection in video editing with audio mixing option
US9838730B1 (en) 2016-04-07 2017-12-05 Gopro, Inc. Systems and methods for audio track selection in video editing
US9794632B1 (en) 2016-04-07 2017-10-17 Gopro, Inc. Systems and methods for synchronization based on audio track changes in video editing
US10229677B2 (en) * 2016-04-19 2019-03-12 International Business Machines Corporation Smart launching mobile applications with preferred user interface (UI) languages
US9922682B1 (en) 2016-06-15 2018-03-20 Gopro, Inc. Systems and methods for organizing video files
US10250894B1 (en) 2016-06-15 2019-04-02 Gopro, Inc. Systems and methods for providing transcoded portions of a video
US9998769B1 (en) 2016-06-15 2018-06-12 Gopro, Inc. Systems and methods for transcoding media files
US10045120B2 (en) 2016-06-20 2018-08-07 Gopro, Inc. Associating audio with three-dimensional objects in videos
US10185891B1 (en) 2016-07-08 2019-01-22 Gopro, Inc. Systems and methods for compact convolutional neural networks
US10469909B1 (en) 2016-07-14 2019-11-05 Gopro, Inc. Systems and methods for providing access to still images derived from a video
US10395119B1 (en) 2016-08-10 2019-08-27 Gopro, Inc. Systems and methods for determining activities performed during video capture
US9836853B1 (en) 2016-09-06 2017-12-05 Gopro, Inc. Three-dimensional convolutional neural networks for video highlight detection
US10268898B1 (en) 2016-09-21 2019-04-23 Gopro, Inc. Systems and methods for determining a sample frame order for analyzing a video via segments
US10282632B1 (en) 2016-09-21 2019-05-07 Gopro, Inc. Systems and methods for determining a sample frame order for analyzing a video
US10002641B1 (en) 2016-10-17 2018-06-19 Gopro, Inc. Systems and methods for determining highlight segment sets
DE102016120075B4 (de) * 2016-10-21 2020-11-05 Harman Becker Automotive Systems Gmbh Bediensystem zur Bedienung eines Multifunktionssystems
US10284809B1 (en) 2016-11-07 2019-05-07 Gopro, Inc. Systems and methods for intelligently synchronizing events in visual content with musical features in audio content
US10262639B1 (en) 2016-11-08 2019-04-16 Gopro, Inc. Systems and methods for detecting musical features in audio content
US10848483B2 (en) * 2016-12-08 2020-11-24 Ricoh Company, Ltd. Shared terminal, communication system, and display control method, and recording medium
US10534966B1 (en) 2017-02-02 2020-01-14 Gopro, Inc. Systems and methods for identifying activities and/or events represented in a video
US10339443B1 (en) 2017-02-24 2019-07-02 Gopro, Inc. Systems and methods for processing convolutional neural network operations using textures
US10127943B1 (en) 2017-03-02 2018-11-13 Gopro, Inc. Systems and methods for modifying videos based on music
US10185895B1 (en) 2017-03-23 2019-01-22 Gopro, Inc. Systems and methods for classifying activities captured within images
US10083718B1 (en) 2017-03-24 2018-09-25 Gopro, Inc. Systems and methods for editing videos based on motion
US10187690B1 (en) 2017-04-24 2019-01-22 Gopro, Inc. Systems and methods to detect and correlate user responses to media content
US10395122B1 (en) 2017-05-12 2019-08-27 Gopro, Inc. Systems and methods for identifying moments in videos
US10614114B1 (en) 2017-07-10 2020-04-07 Gopro, Inc. Systems and methods for creating compilations based on hierarchical clustering
US10402698B1 (en) 2017-07-10 2019-09-03 Gopro, Inc. Systems and methods for identifying interesting moments within videos
US10402656B1 (en) 2017-07-13 2019-09-03 Gopro, Inc. Systems and methods for accelerating video analysis
WO2019135433A1 (ko) * 2018-01-08 2019-07-11 엘지전자 주식회사 디스플레이 장치 및 디스플레이 장치를 포함하는 시스템
JP7106879B2 (ja) * 2018-02-02 2022-07-27 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム
CN113748408A (zh) 2019-05-31 2021-12-03 苹果公司 用于音频媒体控件的用户界面
US11010121B2 (en) 2019-05-31 2021-05-18 Apple Inc. User interfaces for audio media control
US10867608B1 (en) 2019-05-31 2020-12-15 Apple Inc. Multi-user configuration
KR20210025812A (ko) * 2019-08-28 2021-03-10 삼성전자주식회사 전자장치, 디스플레이장치 및 그 제어방법
CN111613229A (zh) * 2020-05-13 2020-09-01 深圳康佳电子科技有限公司 一种电视音箱的声纹控制方法、存储介质及智能电视

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ATE328345T1 (de) * 2000-09-19 2006-06-15 Thomson Licensing Sprachsteuerung von elektronischen geräten
KR20050023941A (ko) * 2003-09-03 2005-03-10 삼성전자주식회사 음성 인식 및 화자 인식을 통한 개별화된 서비스를제공하는 ａ/ｖ 장치 및 그 방법
US20060028337A1 (en) * 2004-08-09 2006-02-09 Li Qi P Voice-operated remote control for TV and electronic systems
WO2009067670A1 (en) * 2007-11-21 2009-05-28 Gesturetek, Inc. Media preferences
US9628208B2 (en) * 2008-02-26 2017-04-18 International Business Machines Corporation System, method and program product for customizing presentation of television content to a specific viewer and location
US20100107184A1 (en) * 2008-10-23 2010-04-29 Peter Rae Shintani TV with eye detection
TW201032087A (en) * 2009-02-19 2010-09-01 Asustek Comp Inc Command control system and method thereof
US8849199B2 (en) * 2010-11-30 2014-09-30 Cox Communications, Inc. Systems and methods for customizing broadband content based upon passive presence detection of users
US8799959B2 (en) * 2012-08-16 2014-08-05 Hoi L. Young User interface for entertainment systems

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190056699A (ko) * 2017-11-17 2019-05-27 에스케이브로드밴드주식회사 음성인식처리장치 및 그 동작 방법
KR20230065736A (ko) * 2021-11-05 2023-05-12 주식회사 엘지유플러스 인공 지능 기반의 개인 음성 판별을 통한 보안 및 개인화 서비스 제공 방법 및 그를 위한 장치

Also Published As

Publication number Publication date
US20150029089A1 (en) 2015-01-29
EP2830321A1 (en) 2015-01-28

Similar Documents

Publication Publication Date Title
KR20150012464A (ko) 디스플레이 장치 및 개인화 서비스 제공 방법
US20220084160A1 (en) Picture display device, and setting modification method and setting modification program therefor
EP3147907B1 (en) Control method and apparatus for playing audio
KR102210433B1 (ko) 전자 장치 및 이의 음성 인식 방법
KR102245747B1 (ko) 사용자 명령어 등록을 위한 디스플레이 장치 및 방법
EP3136793B1 (en) Method and apparatus for awakening electronic device
KR20160060972A (ko) 디스플레이 장치를 제어하기 위한 사용자 단말 및 이의 제어 방법
KR102527082B1 (ko) 디스플레이장치 및 그 제어방법
KR20150085251A (ko) 디스플레이 디바이스 및 그 제어 방법
KR102189648B1 (ko) 디스플레이 장치, 이의 제어 방법 및 디스플레이 시스템
CN103811007A (zh) 显示装置、语音获取装置及其语音识别方法
KR102160473B1 (ko) 볼륨을 제어하는 방법 및 전자 장치
KR20150144547A (ko) 영상 표시 기기 및 그의 동작 방법
EP3147895A1 (en) Display apparatus and method for controlling display apparatus thereof
CN104378267A (zh) 设备连接的提示方法及装置
CN106453032B (zh) 信息推送方法及装置、系统
US20160119573A1 (en) User terminal apparatus and control method thereof
CN109147776A (zh) 具有声控功能的显示装置及声控时机指示方法
CN104837020A (zh) 播放视频的方法和装置
US20190172460A1 (en) Electronic apparatus and control method thereof
KR102160736B1 (ko) 디스플레이 장치 및 디스플레이 장치의 표시 방법
JP2021105998A (ja) 映像表示装置
US20140136991A1 (en) Display apparatus and method for delivering message thereof
KR20170017066A (ko) 휴대용 단말 장치 및 그 제어 방법
KR102359163B1 (ko) 전자 장치 및 이의 음성 인식 방법

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid