KR20130054131A - 디스플레이장치 및 그 제어방법 - Google Patents

디스플레이장치 및 그 제어방법

Info

Publication number
KR20130054131A
KR20130054131A KR1020120106391A KR20120106391A KR20130054131A KR 20130054131 A KR20130054131 A KR 20130054131A KR 1020120106391 A KR1020120106391 A KR 1020120106391A KR 20120106391 A KR20120106391 A KR 20120106391A KR 20130054131 A KR20130054131 A KR 20130054131A
Authority
KR
South Korea
Prior art keywords
user
recognition information
users
voice
face recognition
Prior art date
Application number
KR1020120106391A
Other languages
English (en)
Inventor
김상윤
류희섭
박경미
정기준
박승권
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to EP12193040.8A priority Critical patent/EP2595031A3/en
Priority to US13/678,844 priority patent/US20130120243A1/en
Publication of KR20130054131A publication Critical patent/KR20130054131A/ko
Priority to US14/721,948 priority patent/US20150254062A1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4227Providing Remote input by a user located remotely from the client device, e.g. at work
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

본 발명은 디스플레이장치 및 그 제어방법에 관한 것이다. 본 발명에 따른 디스플레이장치는 영상을 취득하는 영상취득부와; 상기 영상취득부에서 취득한 영상을 표시하는 디스플레이부와; 상기 영상취득부를 통하여 복수의 사용자를 포함하는 영상이 취득되고, 상기 취득된 영상에서 소정의 제스처가 인식되면, 상기 복수의 사용자 중에서 상기 제스처를 취한 사용자를 선택하고, 상기 디스플레이장치가 수행할 수 있는 동작들 중에서 상기 선택된 사용자에 대응하는 동작이 수행되도록 제어하는 제어부를 포함한다.

Description

디스플레이장치 및 그 제어방법{DISPLAY APPARATUS AND CONTROL METHOD THEREOF}
본 발명은 디스플레이장치 및 그 제어방법에 관한 것으로서, 보다 상세하게는 사용자에 대한 정보를 이용하여 복수 사용자 중 어느 한 사용자를 선택하는 디스플레이장치 및 그 제어방법에 대한 것이다.
최근 사용자의 생체정보와 같은 정보를 이용하는 전자장치가 많아지고 있다. 예를 들면, 디지털카메라 또는 스마트폰의 카메라는 사용자의 얼굴인식기능을 통하여 프레임 내에서 카메라 초점을 사용자 얼굴에 맞춰지도록 한다. 또는 사용자의 생체정보와 같은 정보를 사용자 계정으로의 이용을 시도하는 전자장치도 있다.
그러나, 종래 얼굴인식기술의 경우, 복수 사용자를 포함하는 영상 내에서 어느 한 사용자를 선택하고자 하는 경우, 영상 속에서 가장 큰 영역을 점유하는 얼굴 또는 영상의 중앙에 위치하는 얼굴을 선택한다. 이는 사용자 의도에 위배될 수 있는 문제점이 있다.
따라서, 본 발명의 목적은 복수 사용자를 포함하는 영상 내에서 사용자의 선택에 따라 어느 한 사용자를 선택하여 인식할 수 있는 디스플레이장치 및 그 제어방법에 대한 것이다.
상기 목적은, 본 발명에 따라, 디스플레이장치에 있어서, 영상을 취득하는 영상취득부와; 상기 영상취득부에서 취득한 영상을 표시하는 디스플레이부와; 상기 영상취득부를 통하여 복수의 사용자를 포함하는 영상이 취득되고, 상기 취득된 영상에서 소정의 제스처가 인식되면, 상기 복수의 사용자 중에서 상기 제스처를 취한 사용자를 선택하고, 상기 디스플레이장치가 수행할 수 있는 동작들 중에서 상기 선택된 사용자에 대응하는 동작이 수행되도록 제어하는 제어부를 포함하는 것을 특징으로 하는 디스플레이장치에 의해서 달성될 수 있다.
상기 동작은 선택된 사용자의 아이디 설정, 로그인, 확대표시 중 적어도 어느 하나를 포함할 수 있다.
디스플레이 장치는 복수의 사용자의 얼굴인식정보를 저장하는 저장부를 더 포함하고, 상기 제어부는 상기 선택된 사용자의 얼굴인식정보를 분석하여, 상기 저장된 복수의 얼굴인식정보와 비교하고, 일치하는 사용자의 얼굴인식정보가 있을 경우 일치하는 사용자를 선택하여 대응하는 동작을 진행하도록 제어할 수 있다.
상기 제어부는 상기 선택된 사용자의 얼굴인식정보를 분석하여, 상기 저장된 복수의 얼굴인식정보와 비교하고, 일치하는 얼굴인식정보가 없을 경우 선택된 사용자의 얼굴인식정보를 저장하도록 상기 저장부를 제어할 수 있다.
상기 제어부는 상기 저장된 복수 사용자의 얼굴인식정보에 대응하는 메타데이터를 저장하도록 상기 저장부를 제어할 수 있다.
상기 메타데이터는, 상기 디스플레이장치의 표시상태 설정데이터, 주소록, 방문기록 및 시청이력 중 적어도 어느 하나를 포함할 수 있다.
디스플레이장치는 방송신호를 수신하는 방송신호 수신부와; 상기 수신된 방송신호를 처리하는 신호처리부를 더 포함할 수 있다.
디스플레이장치는 외부 웹 서버와 통신을 수행하는 통신부를 더 포함할 수 있다.
상기 목적은, 본 발명에 따라, 디스플레이장치에 있어서, 영상을 취득하는 영상취득부와; 음성을 취득하는 음성취득부와; 상기 취득한 영상과 음성을 출력하는 출력부와; 상기 영상취득부를 통하여 복수의 사용자를 포함하는 영상이 취득되고, 상기 음성취득부에서 음성이 취득되면, 상기 복수의 사용자 중에서 상기 음성에 대응하는 사용자를 선택하고, 상기 디스플레이장치가 수행할 수 있는 동작들 중에서 상기 선택된 사용자에 대응하는 동작이 수행되도록 제어하는 제어부를 포함하는 것을 특징으로 하는 디스플레이장치에 의해 달성될 수 있다.
상기 동작은 선택된 사용자의 아이디 설정, 로그인, 확대표시 중 적어도 어느 하나를 포함할 수 있다.
디스플레이장치는 음성인식정보와 복수의 사용자의 얼굴인식정보를 저장하는 저장부를 더 포함하고, 상기 제어부는 상기 취득된 사용자의 음성을 분석하여 상기 저장된 음성인식정보 중 일치하는 음성인식정보를 선택하고, 상기 저장된 얼굴인식정보 중에서 상기 선택된 음성인식정보에 대응하는 얼굴인식정보를 선택하고, 상기 취득된 사용자의 영상을 분석하여 상기 선택된 얼굴인식정보와 비교하고, 일치하는 사용자의 얼굴인식정보가 있을 경우 일치하는 사용자를 선택하여 대응하는 동작을 진행하도록 제어할 수 있다.
상기 제어부는, 상기 분석된 음성인식정보가 상기 저장된 복수의 음성인식정보와 일치하지 않으면, 상기 음성취득부를 통해 취득한 음성의 위치를 분석하고 상기 분석된 음성 위치 정보에 기초하여 상기 복수 사용자 중 어느 한 사용자를 선택하고, 상기 선택된 사용자의 얼굴인식정보를 분석하여 상기 분석된 얼굴인식정보 및 상기 분석된 음성인식정보를 함께 저장하도록 상기 저장부를 제어할 수 있다.
상기 제어부는, 상기 저장된 음성인식정보 및 복수 사용자의 얼굴인식정보에 대응하는 메타데이터를 저장하도록 상기 저장부를 제어할 수 있다.
상기 메타데이터는, 상기 디스플레이장치의 표시상태 설정데이터, 주소록, 방문기록 및 시청이력 중 적어도 어느 하나를 포함할 수 있다.
디스플레이장치는 방송신호를 수신하는 방송신호 수신부와; 상기 수신된 방송신호를 처리하는 신호처리부를 더 포함할 수 있다.
디스플레이 장치는 외부 웹 서버와 통신을 수행하는 통신부를 더 포함할 수 있다.
상기 목적은, 본 발명에 따라, 디스플레이장치에 있어서, 영상을 취득하는 영상취득부와; 원격제어장치로부터 신호를 수신하는 원격신호수신부와; 상기 영상취득부를 통하여 복수의 사용자를 포함하는 영상이 취득되고, 상기 원격제어장치로부터 정보가 취득되면, 상기 복수의 사용자 중에서 상기 원격제어장치의 정보에 대응하는 사용자를 선택하고, 상기 디스플레이장치가 수행할 수 있는 동작들 중에서 상기 선택된 사용자에 대응하는 동작이 수행되도록 제어하는 제어부를 포함하는 것을 특징으로 하는 디스플레이장치에 의해 달성될 수 있다.
상기 동작은 선택된 사용자의 아이디 설정, 로그인, 확대표시 중 적어도 어느 하나를 포함할 수 있다.
디스플레이장치는 상기 원격제어장치는 음성을 취득하는 마이크를 더 포함하고, 상기 제어부는 상기 원격제어장치에 마련된 상기 마이크를 통해 취득한 사용자의 음성을 분석하고, 상기 복수의 사용자 중 상기 분석된 음성과 동일한 정보의 사용자를 선택할 수 있다.
상기 분석된 사용자의 음성 정보는 사용자의 성별, 연령, 또는 이들의 결합을 포함할 수 있다.
상기 원격제어장치는 소정의 모양 또는 색깔을 가지고, 상기 제어부는 상기 영상취득부를 통하여 상기 원격제어장치를 포함하는 영상이 취득되면, 상기 취득한 영상에서 상기 원격제어장치를 검출하여 상기 원격제어장치의 위치정보를 취득하고, 상기 원격제어장치의 위치정보에 기초하여 사용자를 선택할 수 있다.
상기 원격제어장치의 위치정보는 사용자의 팔 위치, 사용자의 윤곽(profile), 사용자의 자세, 사용자와 원격제어장치 간의 거리 중 적어도 하나와 함께 고려되어 사용자의 선택에 이용될 수 있다.
상기 원격제어장치는 신호를 송출하고, 상기 제어부는 상기 원격신호수신부를 통해 상기 신호를 수신하고, 상기 신호에 기초하여 원격제어장치의 위치정보를 취득하고, 상기 원격제어장치의 위치정보에 기초하여 사용자를 선택할 수 있다.
상기 원격제어장치는 적외선신호를 송출하고, 상기 원격신호수신부는 상기 적외선신호를 수신하기 위한 복수의 적외선수신기를 포함할 수 있다.
디스플레이장치는 음성인식정보와 복수 사용자의 얼굴인식정보를 저장하는 저장부를 더 포함하고, 상기 제어부는 상기 저장된 음성인식정보 및 복수 사용자의 얼굴인식정보에 대응하는 메타데이터를 저장하도록 상기 저장부를 제어할 수 있다.
상기 메타데이터는, 상기 디스플레이장치의 표시상태 설정데이터, 주소록, 방문기록 및 시청이력 중 적어도 어느 하나를 포함할 수 있다.
디스플레이장치는 방송신호를 수신하는 방송신호 수신부와; 상기 수신된 방송신호를 처리하는 신호처리부를 더 포함할 수 있다.
디스플레이장치는 외부 웹 서버와 통신을 수행하는 통신부를 더 포함할 수 있다.
상기 목적은, 본 발명에 따라, 디스플레이장치의 제어방법에 있어서, 영상을 취득하는 단계와; 상기 취득된 영상에서 소정의 제스처가 인식되는 단계와; 상기 복수의 사용자 중에서 상기 제스처를 취한 사용자를 선택하고, 상기 디스플레이장치가 수행할 수 있는 동작들 중에서 상기 선택된 사용자에 대응하는 동작이 수행되도록 제어하는 단계를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법에 의해 달성될 수 있다.
상기 동작은 선택된 사용자의 아이디 설정, 로그인, 확대표시 중 적어도 어느 하나를 포함할 수 있다.
상기 방법은 복수의 사용자의 얼굴인식정보를 저장하는 단계와; 상기 선택된 사용자의 얼굴인식정보를 분석하여, 상기 저장된 복수의 얼굴인식정보와 비교하고, 일치하는 사용자의 얼굴인식정보가 있을 경우 일치하는 사용자를 선택하여 대응하는 동작을 진행하도록 제어하는 단계를 포함할 수 있다.
상기 선택된 사용자의 얼굴인식정보를 분석하여, 상기 저장된 복수의 얼굴인식정보와 비교하고, 일치하는 얼굴인식정보가 없을 경우 선택된 사용자의 얼굴인식정보를 저장하도록 제어하는 단계를 포함할 수 있다.
상기 저장된 복수 사용자의 얼굴인식정보에 대응하는 메타데이터를 저장하도록 상기 저장부를 제어할 수 있다.
상기 메타데이터는, 상기 디스플레이장치의 표시상태 설정데이터, 주소록, 방문기록 및 시청이력 중 적어도 어느 하나를 포함할 수 있다.
상기 방법은 방송신호를 수신하는 단계와; 상기 수신된 방송신호를 처리하는 단계를 더 포함할 수 있다.
상기 방법은 외부 웹 서버와 통신을 수행하는 단계를 더 포함할 수 있다.
상기 목적은, 본 발명에 따라, 디스플레이장치의 제어방법에 있어서, 복수의 사용자를 포함하는 영상이 취득되는 단계와; 상기 음성취득부에서 음성이 취득되는 단계와; 상기 복수의 사용자 중에서 상기 음성에 대응하는 사용자를 선택하고, 상기 디스플레이장치가 수행할 수 있는 동작들 중에서 상기 선택된 사용자에 대응하는 동작이 수행되도록 제어하는 단계를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법에 의해 달성될 수 있다.
상기 동작은 선택된 사용자의 아이디 설정, 로그인, 확대표시 중 적어도 어느 하나를 포함할 수 있다.
상기 방법은 음성인식정보와 복수의 사용자의 얼굴인식정보를 저장하는 단계를 더 포함하고, 상기 취득된 사용자의 음성을 분석하여 상기 저장된 음성인식정보 중 일치하는 음성인식정보를 선택하고, 상기 저장된 얼굴인식정보 중에서 상기 선택된 음성인식정보에 대응하는 얼굴인식정보를 선택하고, 상기 취득된 사용자의 영상을 분석하여 상기 선택된 얼굴인식정보와 비교하고, 일치하는 사용자의 얼굴인식정보가 있을 경우 일치하는 사용자를 선택하여 대응하는 동작을 진행하도록 제어하는 단계를 더 포함할 수 있다.
상기 분석된 음성인식정보가 상기 저장된 복수의 음성인식정보와 일치하지 않으면, 상기 음성취득부를 통해 취득한 음성의 위치를 분석하고 상기 분석된 음성 위치 정보에 기초하여 상기 복수 사용자 중 어느 한 사용자를 선택하고, 상기 선택된 사용자의 얼굴인식정보를 분석하여 상기 분석된 얼굴인식정보 및 상기 분석된 음성인식정보를 함께 저장하도록 상기 저장부를 제어하는 단계를 더 포함할 수 있다.
상기 방법은 상기 저장된 음성인식정보 및 복수 사용자의 얼굴인식정보에 대응하는 메타데이터를 저장하도록 제어하는 단계를 더 포함할 수 있다.
상기 메타데이터는, 상기 디스플레이장치의 표시상태 설정데이터, 주소록, 방문기록 및 시청이력 중 적어도 어느 하나를 포함할 수 있다.
상기 방법은 방송신호를 수신하는 단계와; 상기 수신된 방송신호를 처리하는 단계를 더 포함할 수 있다.
상기 방법은 외부 웹 서버와 통신을 수행하는 단계를 더 포함할 수 있다.
상기 목적은, 본 발명에 따라, 디스플레이장치의 제어방법에 있어서, 복수의 사용자를 포함하는 영상이 취득되는 단계와; 원격제어장치로부터 정보를 취득하는 단계와; 상기 복수의 사용자 중에서 상기 원격제어장치의 정보에 대응하는 사용자를 선택하고, 상기 디스플레이장치가 수행할 수 있는 동작들 중에서 상기 선택된 사용자에 대응하는 동작이 수행되도록 제어하는 단계를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법에 의해 달성될 수 있다.
상기 동작은 선택된 사용자의 아이디 설정, 로그인, 확대표시 중 적어도 어느 하나를 포함할 수 있다.
상기 방법은 상기 원격제어장치의 마이크를 통해 음성을 취득하는 단계를 더 포함하고, 상기 복수의 사용자 중에서 상기 원격제어장치의 정보에 대응하는 사용자를 선택하는 단계는 상기 원격제어장치에 마련된 상기 마이크를 통해 취득한 사용자의 음성을 분석하고, 상기 복수의 사용자 중 상기 분석된 음성과 일치하는 정보의 사용자를 선택하는 단계를 더 포함할 수 있다.
상기 분석된 사용자의 음성 정보는 사용자의 성별, 연령, 또는 이들의 결합을 포함할 수 있다.
상기 원격제어장치는 소정의 모양 또는 색깔을 가지고, 상기 복수의 사용자 중에서 상기 원격제어장치의 정보에 대응하는 사용자를 선택하는 단계는 상기 원격제어장치를 포함하는 영상이 취득되면, 상기 취득한 영상에서 상기 원격제어장치를 검출하여 상기 원격제어장치의 위치정보를 취득하고, 상기 원격제어장치의 위치정보에 기초하여 사용자를 선택하는 단계를 더 포함할 수 있다.
상기 원격제어장치의 위치정보는 사용자의 팔 위치, 사용자의 윤곽(profile), 사용자의 자세, 사용자와 원격제어장치 간의 거리 중 적어도 하나와 함께 고려되어 사용자의 선택에 이용될 수 있다.
상기 원격제어장치는 신호를 송출하고, 상기 복수의 사용자 중에서 상기 원격제어장치의 정보에 대응하는 사용자를 선택하는 단계는 상기 원격신호수신부를 통해 상기 신호를 수신하고, 상기 신호에 기초하여 원격제어장치의 위치정보를 취득하고, 상기 원격제어장치의 위치정보에 기초하여 사용자를 선택하는 단계를 더 포함할 수 있다.
상기 방법은 음성인식정보와 복수 사용자의 얼굴인식정보를 저장하는 단계를 더 포함하고, 상기 저장된 음성인식정보 및 복수 사용자의 얼굴인식정보에 대응하는 메타데이터를 저장하도록 제어할 수 있다.
상기 메타데이터는, 상기 디스플레이장치의 표시상태 설정데이터, 주소록, 방문기록 및 시청이력 중 적어도 어느 하나를 포함할 수 있다.
상기 방법은 방송신호를 수신하는 단계와; 상기 수신된 방송신호를 처리하는 단계를 더 포함할 수 있다.
상기 방법은 외부 웹 서버와 통신을 수행하는 단계를 더 포함할 수 있다.
상기 목적은, 본 발명에 따라, 상기 방법에 따라 컴퓨터에서 실행시키기 위한 프로그램을 기록한 기록매체에 의해 달성될 수 있다.
이상 설명한 바와 같이, 본 발명에 따르면, 복수 사용자를 포함하는 영상 내에서 사용자의 선택에 따라 어느 한 사용자를 선택하여 인식할 수 있는 디스플레이장치 및 그 제어방법이 제공된다.
도 1은 본 발명의 일 실시예에 따른 디스플레이장치의 제어블록도이고,
도 2 내지 6은 도 1의 디스플레이장치의 제어부의 동작을 도시하고,
도 7은 도 1의 디스플레이장치의 제어부의 또 다른 동작을 도시하고,
도 8는 본 발명의 다른 실시예에 따른 디스플레이장치의 제어블록도이고,
도 9 내지 13은 도 8의 디스플레이장치의 제어부의 동작을 도시하고,
도 14은 본 발명의 또 다른 실시예에 따른 디스플레이장치의 제어블록도이고,
도 15 내지 20은 도 14의 디스플레이장치의 제어부의 동작을 도시하고,
도 21은 본 발명의 또 다른 실시예에 따른 디스플레이장치의 제어블록도이고,
도 22 내지 26은 도 21의 디스플레이장치의 제어부의 동작을 도시하고,
도 27 내지 도 31은 도 21의 디스플레이장치의 제어부의 다른 동작을 도시하고,
도 32 및 도 33은 도 1의 디스플레이장치의 제어동작 흐름도이고,
도 34는 도 8의 디스플레이장치의 제어동작 흐름도이고,
도 35는 도 14의 디스플레이장치의 제어동작 흐름도이고,
도 36은 도 21의 디스플레이장치의 제어동작 흐름도이고,
도 37은 도 21의 디스플레이장치의 다른 제어동작 흐름도이다.
이하, 첨부한 도면을 참고로 하여 본 발명의 실시예들에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예들에 한정되지 않는다. 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 동일 또는 유사한 구성요소에 대해서는 동일한 참조부호를 붙이도록 한다.
도 1은 본 발명의 일 실시예에 따른 디스플레이장치의 제어블록도이다.
도 1에 도시된 바와 같이, 디스플레이장치(100)는 방송신호 수신부(110), 통신부(120), 신호처리부(130), 디스플레이부(140), 영상취득부(150), 저장부(160) 및 이들을 제어하는 제어부(170)를 포함하고, 디스플레이장치(100)는 외부의 방송신호 송신장치(미도시)로부터 방송신호를 실시간으로 수신할 수 있고, 웹 서버와 같은 외부 장치(미도시)와 네트워크를 통하여 통신을 수행할 수 있는 어떠한 디스플레이장치도 포함할 수 있다. 본 실시예에 따른 디스플레이장치는 스마트 TV를 포함한다. 스마트 TV는 실시간으로 방송신호를 수신하여 표시할 수 있고, 웹 브라우저 기능을 가지고 있어 실시간 방송신호의 표시와 동시에 인터넷을 통하여 다양한 컨텐츠 검색 및 소비가 가능하고 이를 위하여 편리한 사용자 환경을 제공할 수 있는 TV이다. 또한, 스마트 TV는 개방형 소프트웨어 플랫폼을 포함하고 있어 사용자에게 양방향 서비스를 제공할 수 있다. 따라서, 스마트TV는 개방형 소프트웨어 플랫폼을 통하여 다양한 컨텐츠, 예를 들어 소정의 서비스를 제공하는 어플리케이션을 사용자에게 제공할 수 있다. 이러한 어플리케이션은 다양한 종류의 서비스를 제공할 수 있는 응용 프로그램으로서, 예를 들어 SNS, 금융, 뉴스, 날씨, 지도, 음악, 영화, 게임, 전자 책, 화상통화 등의 서비스를 제공하는 어플리케이션을 포함한다.
이러한 스마트 TV는 복수의 사용자가 사용할 수 있고, 각 사용자 마다 사용자 계정을 설정할 수 있고, 상기 설정한 사용자 계정으로 로그인하여 스마트 TV를 사용할 수 있다. 각 사용자가 자신의 사용자 계정으로 로그인한 후에는 스마트 TV의 디스플레이 표시상태를 다른 사용자 계정과 상이하게 설정할 수도 있다. 또한 스마트 TV는 상기 사용자 계정마다 방송프로그램의 시청이력, 웹페이지의 방문기록, 주소록 등을 메타데이터로서 저장할 수 있다.
방송신호 수신부(110)는 외부의 방송신호 송신장치(미도시)로부터 방송신호를 수신하는 것으로서, 예를 들어 튜너를 포함한다. 예를 들어, 방송국으로부터 전송되는 아날로그 또는 디지털 방송신호를 무선/유선, 즉 공중파 또는 케이블 방식을 통해 수신한다. 방송신호 수신부(110)는 방송신호의 규격 및 디스플레이장치(100)의 구현 방식에 따라 다양한 형태로 구현될 수 있다. 방송신호 수신부(110)는 아날로그 방송신호를 수신하는 경우, 공중파 방식에 따라 RF 신호로 구현된 방송신호를 무선으로 수신하거나 또는 케이블 방식에 따라 컴포지트/컴포넌트 비디오 신호로 구현된 방송신호를 유선으로 수신할 수 있다. 또한 방송신호 수신부(110)는 HDMI 규격 등과 같은 디지털 방송신호를 수신할 수도 있도록 구현될 수 있다.
통신부(120)는 외부 서버(미도시)와 통신을 수행할 수 있다. 상기 외부 서버(미도시)는 웹 서버로서, 디스플레이장치(100)는 웹 브라우저를 통하여 상기 웹 서버가 송신하는 웹 페이지를 표시할 수 있다. 또는 상기 외부 서버(미도시)는 소정의 서비스를 제공하는, 복수의 어플리케이션을 제공하는 것으로서, 디스플레이장치(100)는 통신부(120)를 통하여 외부 서버(미도시)로부터 사용자 선택에 따른 어플리케이션 프로그램을 다운로드할 수 있다. 통신부(120)는 외부 서버(미도시)와 종래 알려진 유/무선 네트워크를 통하여 통신을 수행할 수 있는 바, 예를 들어 LAN 또는 WLAN 통신을 수행할 수 있도록 구현된다. 또는 통신부(120)는 소정의 네트워크 내에 위치하고 있는, 컨텐츠를 포함하고 있는 외부의 전자장치(미도시)와 통신을 수행할 수 있어서, 외부 전자장치(미도시)로부터 컨텐츠를 수신할 수도 있다. 예를 들어, 디스플레이장치(100)는 소정 공간에 위치하는 외부 전자장치(미도시)와 DLAN(Digital Living Network Alliance)를 형성하여, DLAN 내의 외부 전자장치로부터 컨텐츠를 수신하여 디스플레이장치(100)에서 표시할 수도 있다.
신호처리부(130)는 방송신호 수신부(110)로 수신되는 방송신호에 대하여 기 설정된 영상처리 프로세서를 수행하여 디스플레이부(140)에 표시되도록 한다. 또는 신호처리부(130)는 상기 방송신호 이외에 통신부(120)를 통하여 수신되는 다양한 컨텐츠에 대하여 영상처리 프로세서를 수행하여 디스플레이부(140)에 표시되도록 한다. 상기 영상처리 프로세서는 처리할 영상신호에 따라 ADC(analog/digital convertion), 디모듈레이팅(demodulating), 디코딩(decoding), 디인터레이싱(de-interlacing), 프레임 리프레시 레이트(frame refresh rate) 변환, 스케일링(scaling), 디테일(detail) 강화 등 다양한 영상처리 프로세스를 단독 또는 조합 선택하여 수행할 수 있다.
신호처리부(130)는 상기 각 영상처리 프로세스를 독자적으로 수행하는 개별적 구성으로 구현되거나, 또는 여러 기능을 통합시킨 일체형 구성인 시스템 온 칩(system-on chip, SoC)로 구현될 수 있다.
디스플레이부(140)는 신호처리부(130)에서 출력되는 방송신호에 기초하여 영상을 표시한다. 디스플레이부(140)의 구현방식은 한정되지 않은 바, 액정(liquid crystal), 플라즈마(plasma), 발광 다이오드(light emitting diode), 유기 발광 다이오드(organic light-emitting diode), 면전도 전자총(surface-conduction electron-emitter), 탄소 나노 튜브(carbon nano-tube), 나노 크리스탈(nano-crystal) 등의 다양한 디스플레이 방식으로 구현될 수 있다.
영상취득부(150)는 사용자의 영상을 취득하는 것으로서, 사용자의 이미지 또는 동영상을 획득할 수 있는 얼굴인식센서 또는 카메라로 구현될 수 있다. 영상취득부(150)가 카메라로 구현되는 경우, 2D 또는 3D 카메라를 포함할 수 있다. 상기 센서 또는 카메라로부터 획득된 적어도 하나의 사용자 얼굴을 포함하는 이미지 또는 동영상은 제어부(170)로 전달되고, 제어부(170)는 종래 알려진 얼굴인식 알고리즘을 이용하여 상기 센서 또는 카메라로부터 획득한 이미지 또는 동영상을 분석하여 해당 이미지/동영상에 포함된 사용자 인원수 및 각 사용자의 얼굴인식정보를 생성할 수 있다. 또한 제어부(170)는 센서/카메라로부터 획득한 이미지/동영상으로부터 모션 추적을 통하여 사용자의 제스처를 인식할 수 있다. 이에 대하여는 하기 제어부(170)에서 상세히 설명한다.
저장부(160)는 제어부(170)가 분석한 복수 사용자의 얼굴인식정보를 저장한다. 또한 저장부(160)는 상기 저장된 복수 사용자의 얼굴인식정보에 대응하는 메타데이터를 저장한다. 상기 메타데이터는 디스플레이장치(100)의 표시상태 설정데이터, 방송프로그램의 시청이력, 웹페이지의 방문기록, 주소록 등을 포함한다. 상기 표시상태 설정데이터는 디스플레이부(140)의 표시 밝기, 대조, 명암, 화면비율 등을 설정한 데이터를 포함한다. 상기 주소록은 소정 전화걸기 어플리케이션을 통하여 전화통화를 위하여 저장된 주소록으로서, 전화번호/이메일 주소 등을 포함할 수 있다.
제어부(170)는 영상취득부(150)를 통하여 복수 사용자를 포함하는 영상이 취득되고, 상기 취득된 영상에서 소정의 제스처가 인식되면, 상기 복수 사용자 중에서 상기 제스처를 취한 사용자를 선택하고, 상기 선택된 사용자의 얼굴인식정보를 분석한다. 도 2 내지 6을 참조하여 본 실시예의 제어부(170)를 상세히 설명한다. 도 2 내지 6은 본 실시예에 따른 디스플레이장치(100)의 제어부(170)의 동작을 도시하고 있다. 도 2 내지 6을 참조하면, 도 2는 디스플레이장치(100) 앞에 복수의 사용자(유저 1 내지 유저 4)가 존재한다. 영상취득부(150)는 제어부(170)의 제어 하에서 소정의 영상을 취득하여 이를 제어부(170)로 전달한다. 제어부(170)는 영상취득부(150)가 취득한 영상을 수신하고, 수신한 영상을 분석한다. 종래 알려진 얼굴인식 알고리즘은 얼굴검출과정과 얼굴특징 추출과정을 포함한다. 제어부(170)는 우선 종래 알려진 얼굴인식 알고리즘 중 얼굴검출과정을 통하여 수신한 영상에 포함된 사용자 인원수를 판단한다. 상기 얼굴검출과정은 상기 영상취득부(150)로부터 취득한 영상으로부터 얼굴영역을 찾아내는 과정으로서, 정확한 얼굴인식을 위하여 얼굴 정규화 과정을 거치고, 상기 얼굴 정규화 과정을 위하여 보통 얼굴영역검출 및 눈 위치 검출이 수행된다. 이는 두 눈을 기준으로 할 경우 얼굴영상의 크기와 회전 등을 정규화하는데 효율적이기 때문이다. 따라서 제어부(170)는 상기 얼굴검출과정을 통하여 영상취득부(150)로부터 수신한 영상에 포함된 사용자의 인원수를 판단할 수 있다(도 3). 도 3과 같이, 영상취득부(150)가 취득한 영상에 복수의 사용자(유저 1 내지 유저 4)가 포함되어 있는 것으로 판단되면, 제어부(170)는 상기 수신영상의 모션 추적을 통하여 소정의 제스처를 인식한다(도 4). 예를 들어, 상기 제스처는 기 설정된 제스처일 수 있다. 예를 들어, 2차원적 제스처로서, 웨이브 또는 손 흔들기(wave), 손들기(raise), 동그라미(circle) 등과 같은 팔동작 등을 포함할 수 있고, 또는 3차원적 제스처로서 푸스(push), 풀(pull) 등을 포함할 수 있다. 따라서, 제어부(170)는 수신 영상의 모션 추적을 통하여 기 설정된 제스처가 인식되면, 해당 제스처를 취한 사용자를 선택한다(도 5).
제어부(170)는 영상취득부(150)로부터 수신한 영상 중에서 제스처 인식 과정을 통하여 복수의 사용자 중에서 어느 한 사용자를 선택하면, 종래 얼굴인식 알고리즘 중 얼굴특징 추출과정을 수행하여 해당 사용자의 얼굴인식정보를 생성한다. 상기 얼굴특징 추출과정은 조명 변화 등으로 인한 얼굴영상의 화소값의 변화를 줄이거나 노이즈 등을 제거하는 전처리를 수행한 후, 입력된 얼굴영상으로부터 사용자의 고유한 값을 추출하는 과정입니다. 따라서, 제어부(170)는 제스처 인식과정을 통하여 선택된 어느 한 사용자에 대하여 얼굴특징 추출과정을 수행하여 선택된 사용자의 얼굴특징의 고유한 값을 추출하여 얼굴인식정보를 생성한다(도 6).
상기 도 2 내지 6에 기재한 제어부(170)의 제어동작(복수 사용자 중에서 제스처 인식과정을 통한 사용자 선택)은 하기와 같이 구현예에서 이용될 수 있다.
본 실시예에 따른 디스플레이장치(100)는 상기 기재한 바와 같이 스마트 TV로서 구현될 수 있으며, 디스플레이장치(100)를 사용하는 복수의 사용자는 개별 사용자 아이디를 설정할 수 있다. 따라서, 복수의 사용자 각각은 사용자 아이디를 설정하고자 사용자입력부(미도시)의 특정 키를 입력하면, 제어부(170)는 영상취득부(150)를 제어하여 디스플레이장치(100) 앞에 위치한 사용자의 영상을 취득하도록 한다. 제어부(170)가 수신한 사용자 영상을 분석 한 결과, 복수의 사용자가 존재하는 것으로 판단되면, 상기 도 2 내지 6에서 설명한 방법으로 복수 사용자 중 한 사용자를 선택하고(즉, 제스처 인식과정을 통하여 사용자 선택), 상기 선택한 사용자의 얼굴인식정보를 생성하고 이를 사용자 아이디로써 저장부(160)에 저장할 수 있다. 또한 사용자 아이디로 로그인을 수행한 후 디스플레이장치(100)를 사용하는 경우, 제어부(170)는 해당 사용자 아이디에 대한 메타데이터를 저장부(160)에 저장하라 수 있다.
또한, 이미 복수의 사용자의 사용자 얼굴인식정보가 저장부(160)에 저장되어 있고, 디스플레이장치(100) 앞에 복수의 사용자가 위치하는 경우, 상기 복수 사용자 중 어느 한 사용자가 자신의 사용자 아이디로 로그인하고자 하는 경우, 사용자 입력부(미도시)의 특정 키 입력을 하면, 제어부(170)는 영상취득부(150)를 제어하여 디스플레이장치(100) 앞에 위치한 사용자의 영상을 취득하도록 한다. 제어부(170)는 해당 영상을 수신 및 분석한 결과, 복수 사용자가 존재하는 것으로 판단되면, 상기 도 2 내지 6에서 설명한 방법으로 복수 사용자 중 한 사용자를 선택하고(즉, 제스처 인식과정을 통하여 사용자 선택), 상기 선택한 사용자의 얼굴인식정보를 생성하여 저장부(160)에 미리 저장된 복수 사용자의 사용자 얼굴인식정보와 비교한다. 비교결과, 상기 선택한 사용자의 얼굴인식정보가 저장부(160)에 저장된 복수의 사용자 얼굴인식정보 중 어느 하나와 일치하면, 제어부(170)는 상기 선택된 사용자의 얼굴인식정보로서 해당 디스플레이장치(100)에 대하여 자동 로그인을 수행한다. 만약, 상기 비교결과, 상기 선택한 사용자의 얼굴인식정보가 상기 저장부(160)에 저장된 복수의 사용자 얼굴인식정보와 일치되는 것이 없다면, 제어부(170)는 해당 사용자 얼굴인식정보를 새로운 사용자 아이디로써 저장부(160)에 저장할 수 있다.
또한, 본 실시예에 따른 디스플레이장치(100)가 스마트 TV로 구현되는 경우, 화상채팅을 수행할 수 있는 어플리케이션이 설치되어 복수의 사용자가 화상채팅을 수행할 수 있다. 이와 관련하여 도 7을 참조하여 설명한다. 도 7은 도 1의 디스플레이장치(100)의 제어부(170)의 또 다른 제어동작을 도시하고 있다. 즉, 도 1의 디스플레이장치(100) 앞에 복수 사용자(유저 5 및 유저 6)이 위치하고, 이들이 상기 화상채팅 어플리케이션을 실행하여 화상채팅을 수행하는 도중에 상기 복수 사용자(유저 5 및 유저 6) 중 어느 한 사용자(유저 6)의 얼굴을 확대 표시하고자 하는 경우, 사용자 입력부(미도시)의 특정 키를 입력하면 제어부(170)는 상기 도 2 내지 6에 도시된 방법으로 복수 사용자 중 한 사용자를 선택하고, 영상취득부(150)를 제어하여 해당 사용자가 확대 표시되도록 줌인 기능이 수행되도록 할 수 있다.
도 8은 본 발명의 다른 일 실시예에 따른 디스플레이장치(200)의 제어블록도이다. 도 8의 디스플레이장치(200)는 방송신호 수신부(210), 통신부(220), 신호처리부(230), 출력부(240), 영상취득부(250), 음성취득부(260), 저장부(270) 및 이들을 제어하는 제어부(280)를 포함한다.
도 8의 디스플레이장치(200)는 도 1의 디스플레이장치(100)와 거의 유사하지만, 출력부(240), 음성취득부(260), 저장부(270) 및 제어부(280)의 구성에 있어서 차이를 가진다. 따라서, 방송신호 수신부(210), 통신부(220), 신호처리부(230) 및 영상취득부(250)부는 일반적으로 도 1의 디스플레이장치(100)의 대응 구성요소와 기능적으로 유사하므로, 동일한 설명에 대하여는 여기에서 생략하도록 한다.
본 실시예의 디스플레이장치(200)의 신호처리부(230)는 도 1의 디스플레이장치(100)의 신호처리부(130)와 거의 동일/유사한 기능을 수행한다. 거기에 더하여, 본 실시예의 신호처리부(230)는 방송신호 수신부(210)를 통하여 수신된 방송신호에 포함된 오디오 신호를 더 처리할 수 있다. 따라서, 신호처리부(230)는 상기 방송신호 수신부(210)를 통하여 수신된 아날로그 오디오신호를 디지털 오디오신호로 변환하는 A/D 컨버터(미도시); 상기 수신된 음성신호를 증폭하는 오디오 증폭부(미도시); 상기 오디오 신호의 출력 레벨을 조정할 수 있는 레벨조정부(미도시); 및/또는 상기 오디오신호의 주파수를 보정할 수 있는 주파수 조정부(미도시)를 포함할 수 있다. 따라서, 신호처리부(230)에서 처리된 오디오신호는 출력부(240)로 전달된다.
출력부(240)는 디스플레이부(241)와 스피커(243)를 포함하고, 디스플레이부(241)는 상기 도 1의 디스플레이장치(100)의 디스플레이부(140)와 동일/유사하므로, 여기에서 동일/유사한 설명은 생략한다.
스피커(243)는 신호처리부(230)에서 처리된 오디오신호에 대응하는 오디오를 출력한다. 스피커(243) 내에 위치한 진동판을 이용하여 상기 수신한 오디오신호를 공기를 진동시켜 음파를 형성하여 출력하게 되고, 상기 스피커(243)는 우퍼스피커(미도시)를 더 포함할 수 있다.
음성취득부(260)는 사용자의 음성을 취득하는 것으로서, 마이크로 구현될 수 있다. 음성취득부(260)는 취득한 음성을 제어부(280)로 전달하고, 제어부(280)는 수신한 음성으로부터 사용자의 음성인식정보를 생성한다. 이에 대하여는 제어부(280)와 관련하여 상세히 설명한다.
저장부(270)는 복수 사용자 각각의 얼굴인식정보 및 그에 대응하는 각 사용자의 음성인식정보를 저장한다. 또한 저장부(270)는 상기 저장된 복수 사용자의 얼굴인식정보에 대응하는 메타데이터를 저장한다. 상기 메타데이터는 디스플레이장치(100)의 표시상태 설정데이터, 방송프로그램의 시청이력, 웹페이지의 방문기록, 주소록 등을 포함한다. 상기 표시상태 설정데이터는 디스플레이부(241)의 표시 밝기, 대조, 명암, 화면비율 등을 설정한 데이터를 포함한다. 상기 주소록은 소정 전화걸기 어플리케이션을 통하여 전화통화를 위하여 저장된 주소록으로서, 전화번호/이메일 주소 등을 포함할 수 있다.
제어부(280)는 영상취득부(250)를 통하여 복수 사용자를 포함하는 영상이 취득되고 음성취득부(260)를 통하여 소정의 음성이 취득되면, 상기 취득된 음성을 분석하고, 상기 저장된 복수의 음성인식정보 중에서 상기 분석된 음성인식정보와 일치되는 음성인식정보를 선택하고, 상기 저장된 얼굴인식정보 중에서 상기 선택된 음성인식정보에 대응하는 얼굴인식정보를 선택하고, 상기 취득된 영상에 포함된 복수 사용자의 얼굴인식정보를 분석하여 상기 선택된 얼굴인식정보와 일치되는 얼굴인식정보를 선택한다. 이와 관련하여 도 9 내지 13을 참조하여 더욱 상세히 설명한다. 도 9 내지 13은 도 8의 디스플레이장치(200)의 제어부(280)의 동작을 도시하고 있다. 도 9 내지 13을 참조하면, 도 9는 본 실시예에 따른 디스플레이장치(200) 앞에 복수 사용자(유저 7 내지 유저 10)가 위치하고 있고, 영상취득부(250)는 제어부(280)의 제어 하에서 소정의 영상을 취득하여 이를 제어부(280)로 전달한다. 제어부(280)는 영상취득부(250)가 취득한 영상을 수신하고, 수신한 영상을 분석한다. 제어부(280)는 종래 알려진 얼굴인식 알고리즘을 이용하여 우선 상기 수신한 영상에 포함된 사용자의 인원수를 판단하고, 판단 결과 유저 7 내지 유저 10의 4명의 사용자가 존재하는 것으로 판단한다(도 10). 상기 얼굴검출과정은 상기 도 2 내지 6에서 설명한 바와 동일/유사하므로, 여기에서 생략한다.
또한 음성취득부(260)를 통하여 소정의 음성이 취득되면, 제어부(280)는 상기 취득된 음성을 분석한다. 제어부(280)는 종래 알려진 음향 에코 제거(Acoustic echo cancellation, ACE), 노이즈 억제(Noise suppression, NS), 음원 위치 추정(Sound source localization), 자동 이득 제어(Automatic gain control, AGC), 빔 형성 (Beamforming) 등의 기술을 이용하여 수신된 음성을 분석할 수 있다. 도 10과 같이 영상취득부(250)가 취득한 영상에 복수의 사용자(유저 7 내지 유저 10)가 포함되어 있는 것으로 판단되고, 음성취득부(260)를 통하여 특정 사용자(유저 7)로부터의 소정의 음성이 수신되면, 제어부(280)는 상기 소정의 음성을 인식한다(도 11). 예를 들어, 상기 음성은 기 설정된 음성으로서, 기 설정된 특정 숫자, 특정 단어, 특정 문장 등을 포함할 수 있다. 따라서, 제어부(280)는 음성취득부(260)를 통하여 음성이 수신되면, 이를 분석하여 상기 수신된 음성이 기설정된 음성임을 인식한다(도 11).
제어부(280)는 상기 종래 알려진 음성분석기술을 이용하여 도 11에서 입력된 기설정된 음성을 분석하여 음성인식정보를 생성하고, 저장부(270)에 저장된 복수의 음성인식정보와 비교한다. 저장부(270)에는 유저 7 내지 유저 10 각각에 대한 음성인식정보와 이에 대응하는 얼굴인식정보가 저장되어 있다. 상기 비교를 수행한 결과, 제어부(280)는 상기 생성된 음성인식정보가 저장부(270)에 기 저장된 복수의 음성인식정보 중 어느 하나와 일치하면, 일치된 음성인식정보에 대응하는 얼굴인식정보를 추출한다. 또한, 제어부(280)는 영상취득부(250)로부터 취득된 영상에 포함된 복수 사용자(유저 7 내지 유저 10)의 얼굴특징 추출과정을 수행하여 각 사용자의 얼굴인식정보를 생성하고, 이를 상기 저장부(270)에서 추출된 얼굴인식정보와 비교한다(도 12). 제어부(280)는 상기 비교결과에 따라 상기 분석된 복수 사용자의 얼굴인식정보 중에서 상기 저장부(270)에서 추출한 얼굴인식정보와 동일한 어느 하나를 선택함으로써, 복수 사용자 중 어느 한 사용자를 선택하게 되는 것이다(도 13). 따라서, 복수 사용자 중에서 유저 9로부터 기설정된 음성이 인식되면, 제어부(280)는 유저 9의 음성인식정보를 생성하여 이를 저장부(270)에 기저장된 복수의 음성인식정보와 비교하여 동일한 음성인식정보를 선택하고, 상기 선택된 음성인식정보에 대응하는 기저장된 얼굴인식정보를 추출한다. 이에 따라, 제어부(280)는 유저 7 내지 유저 10의 얼굴인식정보를 생성하여 상기 저장부(270)에서 추출한 얼굴인식정보와 비교하고, 상기 유저 7내지 유저 10의 얼굴인식정보 중에서 상기 저장부(270)에서 추출한 얼굴인식정보와 동일한 얼굴인식정보를 선택함으로써, 복수 사용자 중에서 어느 한 사용자(유저 9)를 선택할 수 있는 것이다.
종래 음성분석을 통하여 화자의 음성위치정보를 분석하여 복수의 사용자 중에서 음성을 발생시킨 어느 한 화자를 선택할 수도 있다. 그러나, 이러한 음성분석을 통한 음성위치정보에 기초한 사용자 위치파악기술은 얼굴인식정보를 통하여 복수 사용자 중에서 어느 한 사용자를 선택하는 기술보다 빠르게 처리되지 못한다. 따라서, 본 실시예에 따른 디스플레이장치(200)는 복수 사용자 중에서 어느 한 사용자를 선택할 때 음성인식정보 및 얼굴인식정보를 모두 이용함으로써 거의 실시간으로 사용자를 선택할 수 있는 효과를 누릴 수 있다.
도 8의 디스플레이장치(200)는 상기 기재한 도 2 내지 6의 디스플레이장치(100)의 구현예와 유사하게, 복수 사용자가 디스플레이장치(200) 앞에 위치하고, 그 중 어느 한 사용자를 위한 사용자 아이디를 설정하기 위한 복수 사용자 중 어느 한 사용자의 선택에 이용될 수 있고, 또한 디스플레이장치(200)의 로그인 과정을 위하여 복수 사용자 중 어느 한 사용자의 선택에 이용될 수 있고, 또한 화상채팅 중간에 복수 사용자 어느 한 사용자의 얼굴을 확대 표시하고자 하는 경우에도 이용될 수 있다.
도 14은 본 발명의 또 다른 실시예에 따른 디스플레이장치의 제어블록도이다. 도 14은 본 발명의 다른 일 실시예에 따른 디스플레이장치(300)의 제어블록도이다. 도 14의 디스플레이장치(300)는 방송신호 수신부(310), 통신부(320), 신호처리부(330), 출력부(340), 영상취득부(350), 원격신호수신부(360), 저장부(370) 및 이들을 제어하는 제어부(380)를 포함한다.
도 14의 디스플레이장치(300)는 도 8의 디스플레이장치(200)와 거의 유사하지만, 원격제어장치(600)의 신호를 입력받는 원격신호수신부(360)와 제어부(380)의 구성에 있어서 차이를 가진다. 따라서, 방송신호 수신부(310), 통신부(320), 신호처리부(330), 출력부(340), 영상취득부(350), 및 저장부(370)는 일반적으로 도 8의 디스플레이장치(200)의 대응하는 구성요소와 기능적으로 유사하므로, 동일한 설명에 대하여는 여기에서 생략하도록 한다.
디스플레이장치(300)를 제어하는 제어신호를 원격으로 입력하기 위한 원격제어장치(600)는 사용자의 음성을 취득하기 위한 마이크(601)를 더 포함할 수 있다.
원격신호수신부(360)는 원격제어장치(600)에 마련된 마이크(601)로 사용자의 음성이 입력되었을 때 이를 원격으로 수신한다. 원격신호수신부(360)는 입력된 음성을 제어부(380)로 전달하고, 제어부(380)는 수신한 음성으로부터 사용자의 음성인식정보를 생성한다. 이에 대하여는 제어부(380)와 관련하여 상세히 설명한다.
제어부(380)는 영상취득부(350)를 통하여 복수 사용자를 포함하는 영상이 취득되고 원격신호수신부(360)를 통하여 소정의 음성이 취득되면, 상기 취득된 음성을 분석한다. 음성의 분석은 앞에서 설명한 것과 동일한 방법에 의해 수행될 수 있고, 예를 들면 음성 분석을 통해 사용자의 성별이나 연령을 파악할 수 있다. 음성 분석을 통해 사용자의 성별이나 연령 같은 사용자의 정보가 파악되면, 제어부(380)는 취득된 복수의 사용자를 포함하는 영상에서 음성 분석과 일치하는 사용자의 위치를 분석한다. 예를 들어, 음성 분석을 통해 사용자의 성별이나 연령이 파악되는 경우, 제어부(380)는 얼굴인식 알고리즘을 이용하여 상기 취득된 영상에 포함된 복수 사용자의 얼굴 각각의 성별과 연령을 파악하고, 음성 분석을 통해 얻어진 사용자의 성별과 연령과 일치하는 사용자의 위치를 선택한다. 이후, 선택된 위치에 있는 사용자의 얼굴인식을 수행한다.
이와 관련하여 도 15 내지 20을 참조하여 더욱 상세히 설명한다. 도 15내지 20은 도 14의 디스플레이장치(300)의 제어부(380)의 동작을 도시하고 있다. 도 15 내지 20을 참조하면, 도 15에 도시한 바와 같이 본 실시예에 따른 디스플레이장치(300) 앞에 복수 사용자(유저 11 내지 유저 14)가 위치하고 있고, 영상취득부(350)는 제어부(380)의 제어 하에서 소정의 영상을 취득하여 이를 제어부(380)로 전달한다. 제어부(380)는 영상취득부(350)가 취득한 영상을 수신하고, 수신한 영상을 분석한다. 제어부(380)는 얼굴인식 알고리즘을 이용하여 우선 상기 수신한 영상에 포함된 사용자의 인원수를 판단하고, 판단 결과 유저 11 내지 유저 14의 4명의 사용자가 존재하는 것으로 판단한다(도 16). 상기 얼굴검출과정은 상기 도 2 내지 6에서 설명한 바와 동일/유사하므로, 여기에서 생략한다.
또한 원격신호수신부(360)가 원격제어장치(600)의 마이크(601)에 입력된 소정의 음성을 수신하면, 제어부(380)는 상기 취득된 음성을 분석한다. 분석기술은 앞에서 이미 설명한 바와 같다. 도 16과 같이 영상취득부(350)가 취득한 영상에 복수의 사용자(유저 11 내지 유저 14)가 포함되어 있는 것으로 판단되고, 원격신호수신부(360)를 통하여 특정 사용자(유저 13)로부터의 소정의 음성이 수신되면, 제어부(380)는 상기 소정의 음성을 분석하여, 원격제어장치(600)의 마이크(601)에 입력된 음성의 성별 또는 연령을 인식한다(도 17).
음성 분석을 통해 사용자의 성별이나 연령 같은 사용자의 정보가 파악되면, 제어부(380)는 취득된 복수의 사용자를 포함하는 영상에서 음성 분석 결과와 일치하는 사용자의 위치를 파악한다(도 18). 예를 들어, 사용자의 성별이 남자이고 연령이 성인이라고 판단되었을 경우, 제어부(380)는 취득된 영상에 포함된 복수의 사용자들 중에서, 성인 남자의 위치를 파악한다. 성인 남자의 위치가 ③에 위치한 유저13으로 파악되었을 경우, 원격제어장치(600)를 가지고 있는 사용자로서 유저13을 선택한다 (도 19). 이후, 선택된 위치에 있는 사용자의 얼굴인식을 수행한다 (도 20).
이와 같이, 제어부(380)는 원격제어장치(600)에 마련된 마이크(601)을통해 입력된 사용자의 음성을 분석하여 사용자의 나이나 연령과 같은 정보를 파악하고, 음성분석 결과에 대응하는 사용자의 위치를 선택함으로써, 복수 사용자 중에서 어느 한 사용자(유저 13)를 선택할 수 있는 것이다.
도 14의 디스플레이장치(300)는 상기 기재한 도 2내지 6의 디스플레이장치(100)의 구현예와 유사하게, 복수 사용자가 디스플레이장치(300) 앞에 위치할 때, 그 중 어느 한 사용자의 아이디를 설정하기 위한 복수 사용자 중 어느 한 사용자의 선택에 이용될 수 있고, 또한 디스플레이장치(300)의 로그인 과정을 위하여 복수 사용자 중 어느 한 사용자의 선택에 이용될 수 있고, 또한 화상채팅 중간에 복수 사용자 어느 한 사용자의 얼굴을 확대 표시하고자 하는 경우에도 이용될 수 있다.
도 21은 본 발명의 또 다른 실시예에 따른 디스플레이장치의 제어블록도이다. 도 21은 본 발명의 다른 일 실시예에 따른 디스플레이장치(400)의 제어블록도이다. 도 21의 디스플레이장치(400)는 방송신호 수신부(410), 통신부(420), 신호처리부(430), 디스플레이부(440), 영상취득부(450), 원격신호수신부(460), 저장부(470) 및 이들을 제어하는 제어부(480)를 포함한다.
도 21의 디스플레이장치(400)는 도 8의 디스플레이장치(200)와 거의 유사하지만, 원격제어장치(700)의 신호를 입력받는 원격신호수신부(460)와 제어부(480)의 구성에 있어서 차이를 가진다. 따라서, 방송신호 수신부(410), 통신부(420), 신호처리부(430), 디스플레이부(440), 영상취득부(450), 및 저장부(470)는 일반적으로 도 8의 디스플레이장치(200)의 대응하는 구성요소와 기능적으로 유사하므로, 동일한 설명에 대하여는 여기에서 생략하도록 한다.
디스플레이장치(400)를 제어하는 제어신호를 원격으로 입력하기 위한 원격제어장치(700)는 특정 모양 또는 색깔 등을 가질 수 있다.
원격신호수신부(460)는 원격제어장치(700)로부터 디스플레이장치(400)를 제어하기 위한 제어신호를 원격으로 수신한다.
제어부(480)는 영상취득부(450)를 통하여 복수 사용자와 원격제어장치(700)를 포함하는 영상이 취득되면, 상기 취득된 영상을 분석하여, 원격제어장치(700)를 검출하여 그 위치 정보를 파악한다. 제어부(480)는 파악한 원격제어장치(700)의 위치정보를 통해 사용자를 선택한다. 이때, 상기 취득된 영상으로부터 원격제어장치(700)를 검출하기 용이하도록 원격제어장치(700)는 특정 모양이나 색깔을 가질 수 있다. 취득된 영상에서 원격제어장치(700)이 검출되어 그 위치 정보가 파악되면, 원격제어장치(700)의 위치 정보에 기초하여 복수의 사용자들 중 해당 사용자를 선택한다. 이때, 사용자의 팔 위치, 사용자의 윤곽(profile), 사용자의 자세, 사용자와 원격제어장치 간의 거리, 등을 고려하여, 최적의 사용자가 선택될 수 있다.
이와 관련하여 도 22 내지 26을 참조하여 더욱 상세히 설명한다. 도 22내지 26은 도 21의 디스플레이장치(400)의 제어부(480)의 동작을 도시하고 있다. 도 22 내지 26을 참조하면, 도 22에 도시한 바와 같이 본 실시예에 따른 디스플레이장치(400) 앞에 복수 사용자(유저 15 내지 유저 18)가 위치하고 있고, 영상취득부(450)는 제어부(480)의 제어 하에서 소정의 영상을 취득하여 이를 제어부(480)로 전달한다. 제어부(480)는 영상취득부(450)가 취득한 영상을 수신하고, 수신한 영상을 분석한다. 제어부(480)는 얼굴인식 알고리즘을 이용하여 우선 상기 수신한 영상에 포함된 사용자의 인원수를 판단하고, 판단 결과 유저 15 내지 유저 18의 4명의 사용자가 존재하는 것으로 판단한다(도 23). 상기 얼굴검출과정은 상기 도 2 내지 6에서 설명한 바와 동일/유사하므로, 여기에서 생략한다.
또한, 제어부(480)는 얼굴인식 알고리즘과 유사한 방식으로, 상기수신한 영상에 포함된 원격제어장치(700)의 위치 정보를 파악한다 (도 24). 이때, 상기 취득된 영상으로부터 원격제어장치(700)가 검출되기 용이하도록 원격제어장치(700)는 특정 모양과 색깔을 가지고 있어, 이러한 모양, 색깔, 또는 이들의 조합을 갖는 원격제어장치(700)를 검출할 수 있다. 취득된 영상에서 원격제어장치(700)가 검출되어 그 위치 정보가 파악되면, 원격제어장치(700)의 위치 정보에 기초하여 복수의 사용자들 중 해당 사용자(유저 17)를 선택한다 (도 25). 복수의 사용자들 중 한 명의 사용자를 선택할 때, 리코트컨트롤러(700)를 기준으로 사용자의 팔 위치, 사용자의 윤곽(profile), 사용자의 자세, 사용자와의 거리, 등을 고려하여, 최적의 사용자가 선택될 수 있다. 이후, 선택된 위치에 있는 사용자의 얼굴인식을 수행한다 (도 26).
이와 같이, 제어부(480)는 원격제어장치(700)의 위치 정보를 파악하고, 그 위치 정보에 대응하는 사용자의 위치를 선택함으로써, 복수 사용자들 중에서 어느 한 사용자(유저 17)를 선택할 수 있는 것이다.
도 27 내지 31은 도 21의 디스플레이장치(400)의 제어부(480)의 다른 동작을 도시하고 있다. 도 27 내지 31을 참조하면, 도 27에 도시한 바와 같이 본 실시예에 따른 디스플레이장치(400) 앞에 복수 사용자(유저 19 내지 유저 21)가 위치하고 있고, 영상취득부(450)는 제어부(480)의 제어 하에서 소정의 영상을 취득하여 이를 제어부(480)로 전달한다. 제어부(480)는 영상취득부(450)가 취득한 영상을 수신하고, 수신한 영상을 분석한다. 제어부(480)는 얼굴인식 알고리즘을 이용하여 우선 상기 수신한 영상에 포함된 사용자의 인원수를 판단하고, 판단 결과 유저 19 내지 유저 20의 4명의 사용자가 존재하는 것으로 판단한다(도 28). 상기 얼굴검출과정은 상기 도 2 내지 6에서 설명한 바와 동일/유사하므로, 여기에서 생략한다.
또한, 제어부(480)는 원격신호수신부(460)를 통해 원격제어장치(700)로부터 원격제어장치(700)의 위치정보를 포함하고 있는 신호를 수신하고, 리코트컨트롤러(700)의 위치 정보를 파악한다 (도 29). 이때, 원격제어장치(700)는 적외선을 방출하고, 원격신호수신부(460)는 원격제어장치(700)로부터 적외선을 수신하는 복수의 적외선(IR) 수신기일 수 있다. 원격신호수신부(46)를 통해 수신된 원격제어장치(700)의 신호에 따라 원격제어장치(700)의 위치 정보가 파악되면, 원격제어장치(700)의 위치 정보에 기초하여 복수의 사용자들 중 해당 사용자(유저 21)를 선택한다 (도 30). 여기서, 원격제어장치(700)의 위치 정보는 좌표 값일 수 있고, 복수의 사용자를 포함하는 취득된 영상에 좌표를 대응시켜, 영상 좌표 상에 원격제어장치(700)의 좌표 값에 해당하는 위치를 결정하고, 결정된 원격제어장치의 위치를 기준으로 사용자의 팔 위치, 사용자의 윤곽(profile), 사용자의 자세, 사용자와의 거리, 등을 고려하여, 최적의 사용자가 선택될 수 있다. 이후, 선택된 위치에 있는 사용자의 얼굴인식을 수행한다 (도 26).
이와 같이, 제어부(480)는 원격제어장치(700)의 위치 정보를 파악하고, 그 위치 정보에 대응하는 사용자의 위치를 선택함으로써, 복수 사용자들 중에서 어느 한 사용자(유저 21)를 선택할 수 있는 것이다.
도 21의 디스플레이장치(400)는 상기 기재한 도 2내지 6의 디스플레이장치(100)의 구현예와 유사하게, 복수 사용자가 디스플레이장치(400) 앞에 위치할 때, 그 중 어느 한 사용자의 아이디를 설정하기 위한 복수 사용자 중 어느 한 사용자의 선택에 이용될 수 있고, 또한 디스플레이장치(400)의 로그인 과정을 위하여 복수 사용자 중 어느 한 사용자의 선택에 이용될 수 있고, 또한 화상채팅 중간에 복수 사용자 어느 한 사용자의 얼굴을 확대 표시하고자 하는 경우에도 이용될 수 있다.
도 32 및 도 33은 도 1의 디스플레이장치(100)의 제어 동작 흐름도이다.
도 32에 도시된 바와 같이, 도 1의 디스플레이장치(100)에서 복수 사용자 중에서 어느 한 사용자를 선택하기 위한 제어방법은, 복수 사용자를 포함하는 영상이 취득되는 단계(S301)와; 상기 취득된 영상에서 소정의 제스처가 인식되는 단계(S302)와; 상기 복수 사용자 중에서 상기 제스처를 취한 사용자를 선택하는 단계(S303)와; 상기 디스플레이장치가 수행할 수 있는 동작들 중에서 상기 선택된 사용자에 대응하는 동작이 수행하는 단계(S304)를 포함한다.
상기 도 32의 복수 사용자 중에서 어느 한 사용자를 선택하기 위한 방법은 또 다른 실시예로서 도 33의 방법으로도 구현될 수 있다.
도 33에 도시된 바와 같이, 복수 사용자의 얼굴인식정보를 저장하는 단계(S311)와; 복수 사용자를 포함하는 영상이 취득되는 단계(S312)와; 상기 취득된 영상에서 소정의 제스처가 인식되는 단계(S313)와; 상기 복수 사용자 중에서 상기 제스처를 취한 사용자를 선택하는 단계(S314)와; 상기 선택된 사용자의 얼굴인식정보를 분석하는 단계(S315)와; 상기 분석된 얼굴인식정보와 상기 저장된 복수 사용자의 얼굴인식정보를 비교하는 단계(S3016)와; 비교결과 일치되면, 상기 분석된 얼굴인식정보로 사용자 아이디로써 로그인을 수행하는 단계(S317)와; 비교결과 일치되지 않으면, 상기 분석된 얼굴인식정보를 저장하는 단계(S318)와; 상기 로그인된 얼굴인식정보에 대응하는 메타데이터를 저장 또는 상기 새로 저장된 얼굴인식정보에 대응하는 메타데이터를 저장하는 단계(S319)를 포함한다.
또한 도 32의 방법은 디스플레이장치(100)에서 화상채팅을 수행하는 경우 복수 사용자 중에서 어느 한 사용자를 줌인하여 디스플레이부(140)에서 확대표시하고자 하는 경우에 이용될 수 있다.
도 34은 도 8의 디스플레이장치(200)의 제어동작 흐름도이다. 도34에 도시된 바와 같이, 도 8의 디스플레이장치(200)에서 음성인식정보 및 얼굴인식정보를 이용하여 복수 사용자 중에서 어느 한 사용자를 선택하기 위한 제어방법은, 복수 사용자 각각의 얼굴인식정보 및 음성인식정보를 저장하는 단계(S321)와; 복수 사용자를 포함하는 영상이 취득되는 단계와(S322); 소정의 음성이 취득되면, 상기 취득된 음성을 분석하는 단계(S323)와; 상기 저장된 복수의 음성인식정보 중에서 상기 취득된 음성과 일치하는 음성인식정보를 선택하는 단계(S324)와; 상기 저장된 얼굴인식정보 중에서 상기 선택된 음성인식정보에 대응하는 얼굴인식정보를 선택하는 단계와(S325); 상기 취득된 영상에 포함된 복수 사용자 중에서 선택된 얼굴인식 정보와 일치하는 사용자를 선택하는 단계와(S326); 디스플레이장치가 수행할 수 있는 동작들 중에서 상기 선택된 사용자에 대응하는 동작을 진행하는 단계(S327)를 포함한다.
도 34에 기재한 복수 사용자 중에서 어느 한 사용자를 선택하는 방법을 이용하여, 디스플레이장치(200)의 복수 사용자 중에서 어느 한 사용자를 위한 사용자 아이디 설정하고자 하는 경우, 또는 복수 사용자 중에서 어느 한 사용자가 본인의 사용자 아이디로 로그인하고자 하는 경우, 또는 화상채팅의 경우 복수 사용자 중에서 어느 한 사용자를 줌인하여 디스플레이부(241)에서 확대표시하고자 하는 경우에 이용될 수 있다.
도 35는 도 14의 디스플레이장치(300)의 제어동작 흐름도이다.
도 35에 도시된 바와 같이, 도 14의 디스플레이장치(300)에서 복수 사용자 중에서 어느 한 사용자를 선택하기 위한 제어방법은 복수 사용자를 포함하는 영상을 취득하는 단계와(S331); 원격제어장치의 마이크를 통해 입력된 소정의 음성을 수신하는 단계와(S332); 수신한 음성을 분석하는 단계와(S333); 취득한 영상에 포함된 복수의 사용자들 중에서 음성 분석결과와 일치하는 사용자를 선택하는 단계와(S334); 디스플레이장치가 수행할 수 있는 동작들 중에서 선택된 사용자에 대응하는 동작을 수행하는 단계(S335)를 포함한다.
도 35에 기재한 복수 사용자 중에서 어느 한 사용자를 선택하는 방법을 이용하여, 디스플레이장치(300)의 복수 사용자 중에서 어느 한 사용자를 위한 사용자 아이디 설정하고자 하는 경우, 또는 복수 사용자 중에서 어느 한 사용자가 본인의 사용자 아이디로 로그인하고자 하는 경우, 또는 화상채팅의 경우 복수 사용자 중에서 어느 한 사용자를 줌인하여 디스플레이부(241)에서 확대표시하고자 하는 경우에 이용될 수 있다.
도 36는 도 21의 디스플레이장치(400)의 제어동작 흐름도이다.
도 36에 도시된 바와 같이, 도 21의 디스플레이장치(400)에서 복수 사용자 중에서 어느 한 사용자를 선택하기 위한 제어방법은 복수 사용자와 원격제어장치를 포함하는 영상을 취득하는 단계(S341)와; 취득한 영상에서 원격제어장치를 검출하여 위치정보를 취득하는 단계(S342)와; 취득한 영상에 있는 복수의 사용자들 중에서, 원격제어장치의 위치정보에 기초하여 사용자를 선택하는 단계와(S343); 디스플레이장치가 수행할 수 있는 동작들 중에서 선택된 사용자에 대응하는 동작을 수행하는 단계(S344)를 포함한다.
도 36에 기재한 복수 사용자 중에서 어느 한 사용자를 선택하는 방법을 이용하여, 디스플레이장치(300)의 복수 사용자 중에서 어느 한 사용자를 위한 사용자 아이디 설정하고자 하는 경우, 또는 복수 사용자 중에서 어느 한 사용자가 본인의 사용자 아이디로 로그인하고자 하는 경우, 또는 화상채팅의 경우 복수 사용자 중에서 어느 한 사용자를 줌인하여 디스플레이부(241)에서 확대표시하고자 하는 경우에 이용될 수 있다.
도 37는 도 21의 디스플레이장치(400)의 다른 제어동작 흐름도이다.
도 37에 도시된 바와 같이, 도 21의 디스플레이장치(400)에서 복수 사용자 중에서 어느 한 사용자를 선택하기 위한 다른 제어방법은 복수 사용자를 포함하는 영상을 취득하는 단계(S351)와; 원격제어장치로부터 신호를 수신하는 단계(S352)와; 수신한 신호에 기초하여 원격제어장치의 위치정보를 취득하는 단계(353)와; 취득한 영상에 있는 복수의 사용자들 중에서, 원격제어장치의 위치정보에 기초하여 사용자를 선택하는 단계(354)와; 디스플레이장치가 수행할 수 있는 동작들 중에서 선택된 사용자에 대응하는 동작을 수행하는 단계(355)를 포함한다.
도 37에 기재한 복수 사용자 중에서 어느 한 사용자를 선택하는 방법을 이용하여, 디스플레이장치(300)의 복수 사용자 중에서 어느 한 사용자를 위한 사용자 아이디 설정하고자 하는 경우, 또는 복수 사용자 중에서 어느 한 사용자가 본인의 사용자 아이디로 로그인하고자 하는 경우, 또는 화상채팅의 경우 복수 사용자 중에서 어느 한 사용자를 줌인하여 디스플레이부(241)에서 확대표시하고자 하는 경우에 이용될 수 있다.
본 발명에 따른 디스플레이장치(100, 200, 300, 400)의 제어방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령형태로 구현되어 컴퓨터 판독 가능한 저장매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 저장매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독 또는 조합하여 포함할 수 있다. 상기 저장매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크, 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어코드를 포함한다. 상기 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
비록 본 발명의 몇몇 실시예들이 도시되고 설명되었지만, 본 발명이 속하는 기술분야의 통상의 지식을 가진 당업자라면 본 발명의 원칙이나 정신에서 벗어나지 않으면서 본 실시예를 변형할 수 있음을 알 수 있을 것이다. 발명의 범위는 첨부된 청구항과 그 균등물에 의해 정해질 것이다.
100, 200, 300, 400: 디스플레이장치
110, 210, 310, 410: 방송신호 수신부
120, 220, 320, 420: 통신부
130, 230, 330, 430: 신호처리부
140, 241, 341, 440: 디스플레이부 240, 340: 출력부
150, 250, 350, 450: 영상취득부 160, 270, 370, 470: 저장부
170, 280, 380, 480 : 제어부 260: 음성취득부
370, 470: 원격신호수신부
600, 700: 원격제어장치
601: 마이크

Claims (58)

  1. 디스플레이장치에 있어서,
    영상을 취득하는 영상취득부와;
    상기 영상취득부에서 취득한 영상을 표시하는 디스플레이부와;
    상기 영상취득부를 통하여 복수의 사용자를 포함하는 영상이 취득되고, 상기 취득된 영상에서 소정의 제스처가 인식되면, 상기 복수의 사용자 중에서 상기 제스처를 취한 사용자를 선택하고, 상기 디스플레이장치가 수행할 수 있는 동작들 중에서 상기 선택된 사용자에 대응하는 동작이 수행되도록 제어하는 제어부를 포함하는 것을 특징으로 하는 디스플레이장치.
  2. 제1항에 있어서,
    상기 동작은 선택된 사용자의 아이디 설정, 로그인, 확대표시 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 디스플레이장치.
  3. 제1항에 있어서,
    복수의 사용자의 얼굴인식정보를 저장하는 저장부를 더 포함하고,
    상기 제어부는 상기 선택된 사용자의 얼굴인식정보를 분석하여, 상기 저장된 복수의 얼굴인식정보와 비교하고, 일치하는 사용자의 얼굴인식정보가 있을 경우 일치하는 사용자를 선택하여 대응하는 동작을 진행하도록 제어하는 것을 특징으로 하는 디스플레이장치.
  4. 제3항에 있어서,
    상기 제어부는 상기 선택된 사용자의 얼굴인식정보를 분석하여, 상기 저장된 복수의 얼굴인식정보와 비교하고, 일치하는 얼굴인식정보가 없을 경우 선택된 사용자의 얼굴인식정보를 저장하도록 상기 저장부를 제어하는 것을 특징으로 하는 디스플레이장치.
  5. 제3항에 있어서,
    상기 제어부는,
    상기 저장된 복수 사용자의 얼굴인식정보에 대응하는 메타데이터를 저장하도록 상기 저장부를 제어하는 것을 특징으로 하는 디스플레이장치.
  6. 제5항에 있어서,
    상기 메타데이터는,
    상기 디스플레이장치의 표시상태 설정데이터, 주소록, 방문기록 및 시청이력 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 디스플레이장치.
  7. 제1항에 있어서,
    방송신호를 수신하는 방송신호 수신부와;
    상기 수신된 방송신호를 처리하는 신호처리부를 더 포함하는 것을 특징으로 하는 디스플레이장치.
  8. 제1항에 있어서,
    외부 웹 서버와 통신을 수행하는 통신부를 더 포함하는 것을 특징으로 하는 디스플레이장치.
  9. 디스플레이장치에 있어서,
    영상을 취득하는 영상취득부와;
    음성을 취득하는 음성취득부와;
    상기 취득한 영상과 음성을 출력하는 출력부와;
    상기 영상취득부를 통하여 복수의 사용자를 포함하는 영상이 취득되고, 상기 음성취득부에서 음성이 취득되면, 상기 복수의 사용자 중에서 상기 음성에 대응하는 사용자를 선택하고, 상기 디스플레이장치가 수행할 수 있는 동작들 중에서 상기 선택된 사용자에 대응하는 동작이 수행되도록 제어하는 제어부를 포함하는 것을 특징으로 하는 디스플레이장치.
  10. 제9항에 있어서,
    상기 동작은 선택된 사용자의 아이디 설정, 로그인, 확대표시 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 디스플레이장치.
  11. 제9항에 있어서,
    음성인식정보와 복수의 사용자의 얼굴인식정보를 저장하는 저장부를 더 포함하고,
    상기 제어부는 상기 취득된 사용자의 음성을 분석하여 상기 저장된 음성인식정보 중 일치하는 음성인식정보를 선택하고, 상기 저장된 얼굴인식정보 중에서 상기 선택된 음성인식정보에 대응하는 얼굴인식정보를 선택하고, 상기 취득된 사용자의 영상을 분석하여 상기 선택된 얼굴인식정보와 비교하고, 일치하는 사용자의 얼굴인식정보가 있을 경우 일치하는 사용자를 선택하여 대응하는 동작을 진행하도록 제어하는 것을 특징으로 하는 디스플레이장치.
  12. 제11항에 있어서,
    상기 제어부는, 상기 분석된 음성인식정보가 상기 저장된 복수의 음성인식정보와 일치하지 않으면, 상기 음성취득부를 통해 취득한 음성의 위치를 분석하고 상기 분석된 음성 위치 정보에 기초하여 상기 복수 사용자 중 어느 한 사용자를 선택하고, 상기 선택된 사용자의 얼굴인식정보를 분석하여 상기 분석된 얼굴인식정보 및 상기 분석된 음성인식정보를 함께 저장하도록 상기 저장부를 제어하는 것을 특징으로 하는 디스플레이장치.
  13. 제11항에 있어서,
    상기 제어부는,
    상기 저장된 음성인식정보 및 복수 사용자의 얼굴인식정보에 대응하는 메타데이터를 저장하도록 상기 저장부를 제어하는 것을 특징으로 하는 디스플레이장치.
  14. 제13항에 있어서,
    상기 메타데이터는,
    상기 디스플레이장치의 표시상태 설정데이터, 주소록, 방문기록 및 시청이력 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 디스플레이장치.
  15. 제9항에 있어서,
    방송신호를 수신하는 방송신호 수신부와;
    상기 수신된 방송신호를 처리하는 신호처리부를 더 포함하는 것을 특징으로 하는 디스플레이장치.
  16. 제9항에 있어서,
    외부 웹 서버와 통신을 수행하는 통신부를 더 포함하는 것을 특징으로 하는 디스플레이장치.
  17. 디스플레이장치에 있어서,
    영상을 취득하는 영상취득부와;
    원격제어장치로부터 신호를 수신하는 원격신호수신부와;
    상기 영상취득부를 통하여 복수의 사용자를 포함하는 영상이 취득되고, 상기 원격제어장치로부터 정보가 취득되면, 상기 복수의 사용자 중에서 상기 원격제어장치의 정보에 대응하는 사용자를 선택하고, 상기 디스플레이장치가 수행할 수 있는 동작들 중에서 상기 선택된 사용자에 대응하는 동작이 수행되도록 제어하는 제어부를 포함하는 것을 특징으로 하는 디스플레이장치.
  18. 제17항에 있어서,
    상기 동작은 선택된 사용자의 아이디 설정, 로그인, 확대표시 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 디스플레이장치.
  19. 제17항에 있어서,
    상기 원격제어장치는 음성을 취득하는 마이크를 더 포함하고,
    상기 제어부는 상기 원격제어장치에 마련된 상기 마이크를 통해 취득한 사용자의 음성을 분석하고, 상기 복수의 사용자 중 상기 분석된 음성과 동일한 정보의 사용자를 선택하는 것을 특징으로 하는 디스플레이장치.
  20. 제19항에 있어서,
    상기 분석된 사용자의 음성 정보는 사용자의 성별, 연령, 또는 이들의 결합을 포함하는 것을 특징으로 하는 디스플레이장치.
  21. 제17항에 있어서,
    상기 원격제어장치는 소정의 모양 또는 색깔을 가지고,
    상기 제어부는 상기 영상취득부를 통하여 상기 원격제어장치를 포함하는 영상이 취득되면, 상기 취득한 영상에서 상기 원격제어장치를 검출하여 상기 원격제어장치의 위치정보를 취득하고, 상기 원격제어장치의 위치정보에 기초하여 사용자를 선택하는 것을 특징으로 하는 디스플레이장치.
  22. 제21항에 있어서,
    상기 원격제어장치의 위치정보는 사용자의 팔 위치, 사용자의 윤곽(profile), 사용자의 자세, 사용자와 원격제어장치 간의 거리 중 적어도 하나와 함께 고려되어 사용자의 선택에 이용되는 것을 특징으로 하는 디스플레이장치.
  23. 제17항에 있어서,
    상기 원격제어장치는 신호를 송출하고,
    상기 제어부는 상기 원격신호수신부를 통해 상기 신호를 수신하고, 상기 신호에 기초하여 원격제어장치의 위치정보를 취득하고, 상기 원격제어장치의 위치정보에 기초하여 사용자를 선택하는 것을 특징으로 하는 디스플레이장치.
  24. 제23항에 있어서,
    상기 원격제어장치는 적외선신호를 송출하고,
    상기 원격신호수신부는 상기 적외선신호를 수신하기위한 복수의 적외선수신기를포함하는 것을 특징으로 하는 디스플레이장치.
  25. 제19항에 있어서,
    음성인식정보와 복수 사용자의 얼굴인식정보를 저장하는 저장부를 더 포함하고,
    상기 제어부는 상기 저장된 음성인식정보 및 복수 사용자의 얼굴인식정보에 대응하는 메타데이터를 저장하도록 상기 저장부를 제어하는 것을 특징으로 하는 디스플레이장치.
  26. 제25항에 있어서,
    상기 메타데이터는,
    상기 디스플레이장치의 표시상태 설정데이터, 주소록, 방문기록 및 시청이력 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 디스플레이장치.
  27. 제17항에 있어서,
    방송신호를 수신하는 방송신호 수신부와;
    상기 수신된 방송신호를 처리하는 신호처리부를 더 포함하는 것을 특징으로 하는 디스플레이장치.
  28. 제17항에 있어서,
    외부 웹 서버와 통신을 수행하는 통신부를 더 포함하는 것을 특징으로 하는 디스플레이장치.
  29. 디스플레이장치의 제어방법에 있어서,
    영상을 취득하는 단계와;
    상기 취득된 영상에서 소정의 제스처가 인식되는 단계와;
    상기 복수의 사용자 중에서 상기 제스처를 취한 사용자를 선택하고, 상기 디스플레이장치가 수행할 수 있는 동작들 중에서 상기 선택된 사용자에 대응하는 동작이 수행되도록 제어하는 단계를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  30. 제29항에 있어서,
    상기 동작은 선택된 사용자의 아이디 설정, 로그인, 확대표시 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  31. 제29항에 있어서,
    복수의 사용자의 얼굴인식정보를 저장하는 단계와;
    상기 선택된 사용자의 얼굴인식정보를 분석하여, 상기 저장된 복수의 얼굴인식정보와 비교하고, 일치하는 사용자의 얼굴인식정보가 있을 경우 일치하는 사용자를 선택하여 대응하는 동작을 진행하도록 제어하는 단계를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  32. 제31항에 있어서,
    상기 선택된 사용자의 얼굴인식정보를 분석하여, 상기 저장된 복수의 얼굴인식정보와 비교하고, 일치하는 얼굴인식정보가 없을 경우 선택된 사용자의 얼굴인식정보를 저장하도록 제어하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  33. 제31항에 있어서,
    상기 저장된 복수 사용자의 얼굴인식정보에 대응하는 메타데이터를 저장하도록 상기 저장부를 제어하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  34. 제33항에 있어서,
    상기 메타데이터는,
    상기 디스플레이장치의 표시상태 설정데이터, 주소록, 방문기록 및 시청이력 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  35. 제29항에 있어서,
    방송신호를 수신하는 단계와;
    상기 수신된 방송신호를 처리하는 단계를 더 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  36. 제29항에 있어서,
    외부 웹 서버와 통신을 수행하는 단계를 더 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  37. 디스플레이장치의 제어방법에 있어서,
    복수의 사용자를 포함하는 영상이 취득되는 단계와;
    상기 음성취득부에서 음성이 취득되는 단계와;
    상기 복수의 사용자 중에서 상기 음성에 대응하는 사용자를 선택하고, 상기 디스플레이장치가 수행할 수 있는 동작들 중에서 상기 선택된 사용자에 대응하는 동작이 수행되도록 제어하는 단계를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  38. 제37항에 있어서,
    상기 동작은 선택된 사용자의 아이디 설정, 로그인, 확대표시 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  39. 제37항에 있어서,
    음성인식정보와 복수의 사용자의 얼굴인식정보를 저장하는 단계를 더 포함하고,
    상기 취득된 사용자의 음성을 분석하여 상기 저장된 음성인식정보 중 일치하는 음성인식정보를 선택하고, 상기 저장된 얼굴인식정보 중에서 상기 선택된 음성인식정보에 대응하는 얼굴인식정보를 선택하고, 상기 취득된 사용자의 영상을 분석하여 상기 선택된 얼굴인식정보와 비교하고, 일치하는 사용자의 얼굴인식정보가 있을 경우 일치하는 사용자를 선택하여 대응하는 동작을 진행하도록 제어하는 단계를 더 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  40. 제39항에 있어서,
    상기 분석된 음성인식정보가 상기 저장된 복수의 음성인식정보와 일치하지 않으면, 상기 음성취득부를 통해 취득한 음성의 위치를 분석하고 상기 분석된 음성 위치 정보에 기초하여 상기 복수 사용자 중 어느 한 사용자를 선택하고, 상기 선택된 사용자의 얼굴인식정보를 분석하여 상기 분석된 얼굴인식정보 및 상기 분석된 음성인식정보를 함께 저장하도록 상기 저장부를 제어하는 단계를 더 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  41. 제39항에 있어서,
    상기 저장된 음성인식정보 및 복수 사용자의 얼굴인식정보에 대응하는 메타데이터를 저장하도록 제어하는 단계를 더 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  42. 제41항에 있어서,
    상기 메타데이터는,
    상기 디스플레이장치의 표시상태 설정데이터, 주소록, 방문기록 및 시청이력 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  43. 제37항에 있어서,
    방송신호를 수신하는 단계와;
    상기 수신된 방송신호를 처리하는 단계를 더 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  44. 제37항에 있어서,
    외부 웹 서버와 통신을 수행하는 단계를 더 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  45. 디스플레이장치의 제어방법에 있어서,
    복수의 사용자를 포함하는 영상이 취득되는 단계와;
    원격제어장치로부터 정보를 취득하는 단계와;
    상기 복수의 사용자 중에서 상기 원격제어장치의 정보에 대응하는 사용자를 선택하고, 상기 디스플레이장치가 수행할 수 있는 동작들 중에서 상기 선택된 사용자에 대응하는 동작이 수행되도록 제어하는 단계를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  46. 제45항에 있어서,
    상기 동작은 선택된 사용자의 아이디 설정, 로그인, 확대표시 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  47. 제45항에 있어서,
    상기 원격제어장치의 마이크를 통해 음성을 취득하는 단계를 더 포함하고,
    상기 복수의 사용자 중에서 상기 원격제어장치의 정보에 대응하는 사용자를 선택하는 단계는 상기 원격제어장치에 마련된 상기 마이크를 통해 취득한 사용자의 음성을 분석하고, 상기 복수의 사용자 중 상기 분석된 음성과 일치하는 정보의 사용자를 선택하는 단계를 더 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  48. 제47항에 있어서,
    상기 분석된 사용자의 음성 정보는 사용자의 성별, 연령, 또는 이들의 결합을 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  49. 제45항에 있어서,
    상기 원격제어장치는 소정의 모양 또는 색깔을 가지고,
    상기 복수의 사용자 중에서 상기 원격제어장치의 정보에 대응하는 사용자를 선택하는 단계는 상기 원격제어장치를 포함하는 영상이 취득되면, 상기 취득한 영상에서 상기 원격제어장치를 검출하여 상기 원격제어장치의 위치정보를 취득하고, 상기 원격제어장치의 위치정보에 기초하여 사용자를 선택하는 단계를 더 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  50. 제49항에 있어서,
    상기 원격제어장치의 위치정보는 사용자의 팔 위치, 사용자의 윤곽(profile), 사용자의 자세, 사용자와 원격제어장치 간의 거리 중 적어도 하나와 함께 고려되어 사용자의 선택에 이용되는 것을 특징으로 하는 디스플레이장치의 제어방법.
  51. 제45항에 있어서,
    상기 원격제어장치는 신호를 송출하고,
    상기 복수의 사용자 중에서 상기 원격제어장치의 정보에 대응하는 사용자를 선택하는 단계는 상기 원격신호수신부를 통해 상기 신호를 수신하고, 상기 신호에 기초하여 원격제어장치의 위치정보를 취득하고, 상기 원격제어장치의 위치정보에 기초하여 사용자를 선택하는 단계를 더 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  52. 제47항에 있어서,
    음성인식정보와 복수 사용자의 얼굴인식정보를 저장하는 단계를 더 포함하고,
    상기 저장된 음성인식정보 및 복수 사용자의 얼굴인식정보에 대응하는 메타데이터를 저장하도록 제어하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  53. 제52항에 있어서,
    상기 메타데이터는,
    상기 디스플레이장치의 표시상태 설정데이터, 주소록, 방문기록 및 시청이력 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  54. 제45항에 있어서,
    방송신호를 수신하는 단계와;
    상기 수신된 방송신호를 처리하는 단계를 더 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  55. 제45항에 있어서,
    외부 웹 서버와 통신을 수행하는 단계를 더 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
  56. 제29항 내지 제36항 중 어느 한 항의 방법에 따라 컴퓨터에서 실행시키기 위한 프로그램을 기록한 기록매체.
  57. 제37항 내지 제44항 중 어느 한 항의 방법에 따라 컴퓨터에서 실행시키기 위한 프로그램을 기록한 기록매체.
  58. 제45항 내지 제55항 중 어느 한 항의 방법에 따라 컴퓨터에서 실행시키기 위한 프로그램을 기록한 기록매체.
KR1020120106391A 2011-11-16 2012-09-25 디스플레이장치 및 그 제어방법 KR20130054131A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP12193040.8A EP2595031A3 (en) 2011-11-16 2012-11-16 Display apparatus and control method thereof
US13/678,844 US20130120243A1 (en) 2011-11-16 2012-11-16 Display apparatus and control method thereof
US14/721,948 US20150254062A1 (en) 2011-11-16 2015-05-26 Display apparatus and control method thereof

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20110119504 2011-11-16
KR1020110119504 2011-11-16

Publications (1)

Publication Number Publication Date
KR20130054131A true KR20130054131A (ko) 2013-05-24

Family

ID=48663201

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120106391A KR20130054131A (ko) 2011-11-16 2012-09-25 디스플레이장치 및 그 제어방법

Country Status (1)

Country Link
KR (1) KR20130054131A (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140140916A (ko) * 2013-05-30 2014-12-10 삼성전자주식회사 영상 통화 시 관심 대상을 표시하기 위한 장치 및 그 방법
KR101506197B1 (ko) * 2013-09-05 2015-03-27 주식회사 매크론 양손을 이용한 동작인식 입력방법
KR102140927B1 (ko) * 2020-02-11 2020-08-04 주식회사 베오텍 공간 터치 제어방법
WO2023106686A1 (ko) * 2021-12-08 2023-06-15 삼성전자 주식회사 전자 장치의 사용을 관리하는 방법 및 장치

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140140916A (ko) * 2013-05-30 2014-12-10 삼성전자주식회사 영상 통화 시 관심 대상을 표시하기 위한 장치 및 그 방법
KR101506197B1 (ko) * 2013-09-05 2015-03-27 주식회사 매크론 양손을 이용한 동작인식 입력방법
KR102140927B1 (ko) * 2020-02-11 2020-08-04 주식회사 베오텍 공간 터치 제어방법
WO2023106686A1 (ko) * 2021-12-08 2023-06-15 삼성전자 주식회사 전자 장치의 사용을 관리하는 방법 및 장치

Similar Documents

Publication Publication Date Title
EP2595031A2 (en) Display apparatus and control method thereof
CN112074901B (zh) 语音识别登入
CN112088402B (zh) 用于说话者识别的联合神经网络
US10733987B1 (en) System and methods for providing unplayed content
US10490195B1 (en) Using system command utterances to generate a speaker profile
US9544633B2 (en) Display device and operating method thereof
US9118804B2 (en) Electronic device and server, and methods of controlling the electronic device and server
KR101884291B1 (ko) 디스플레이장치 및 그 제어방법
US9330673B2 (en) Method and apparatus for performing microphone beamforming
CN104049721B (zh) 信息处理方法及电子设备
US11250117B2 (en) Methods and systems for fingerprint sensor triggered voice interaction in an electronic device
US9129602B1 (en) Mimicking user speech patterns
US20220059080A1 (en) Realistic artificial intelligence-based voice assistant system using relationship setting
JP6562790B2 (ja) 対話装置および対話プログラム
CN111583937A (zh) 一种语音控制唤醒方法及存储介质、处理器、语音设备、智能家电
KR102576388B1 (ko) 디스플레이 장치 및 그의 동작 방법
US20120242860A1 (en) Arrangement and method relating to audio recognition
KR20130054131A (ko) 디스플레이장치 및 그 제어방법
US11170775B2 (en) Display apparatus and method for operating display apparatus
US20110279224A1 (en) Remote control method and apparatus using smartphone
KR20190119521A (ko) 전자 장치 및 그 동작 방법
US20190011992A1 (en) User-machine interaction method and system based on feedback signals
CN111107400B (zh) 数据收集方法、装置、智能电视及计算机可读存储介质
JP2021197658A (ja) 収音装置、収音システム及び収音方法
KR20220033325A (ko) 음성 인식을 위한 전자장치 및 그 제어방법

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination