KR101681321B1 - 사용자 인증 방법 및 그를 이용한 화상 통신 장치 및 디스플레이 장치 - Google Patents

사용자 인증 방법 및 그를 이용한 화상 통신 장치 및 디스플레이 장치 Download PDF

Info

Publication number
KR101681321B1
KR101681321B1 KR1020090110889A KR20090110889A KR101681321B1 KR 101681321 B1 KR101681321 B1 KR 101681321B1 KR 1020090110889 A KR1020090110889 A KR 1020090110889A KR 20090110889 A KR20090110889 A KR 20090110889A KR 101681321 B1 KR101681321 B1 KR 101681321B1
Authority
KR
South Korea
Prior art keywords
user
face
network
user authentication
information
Prior art date
Application number
KR1020090110889A
Other languages
English (en)
Other versions
KR20110054291A (ko
Inventor
강성숙
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020090110889A priority Critical patent/KR101681321B1/ko
Priority to CN201080052117.4A priority patent/CN102612841B/zh
Priority to EP10831706.6A priority patent/EP2502435B1/en
Priority to PCT/KR2010/003749 priority patent/WO2011062339A1/en
Priority to US12/814,297 priority patent/US8311200B2/en
Publication of KR20110054291A publication Critical patent/KR20110054291A/ko
Application granted granted Critical
Publication of KR101681321B1 publication Critical patent/KR101681321B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1822—Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/441—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card
    • H04N21/4415—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card using biometric characteristics of the user, e.g. by voice recognition or fingerprint scanning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4753—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for user identification, e.g. by entering a PIN or password
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Data Mining & Analysis (AREA)
  • Biomedical Technology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Collating Specific Patterns (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Abstract

본 발명은 복수의 컨텐츠(contents)들을 재생하는 방법에 관한 것으로, 그 방법은 영상 데이터를 입력받는 단계; 입력된 영상 데이터를 이용하여 영상 데이터가 획득된 영역 내에 존재하는 얼굴 영역을 검출하는 단계; 검출된 얼굴 영역이 2 이상인 경우 검출된 얼굴 영역들 각각에 대응되는 정보와 기등록된 정보를 비교하여 사용자 인증을 수행하는 단계; 및 사용자 인증 결과에 따라 검출된 얼굴 영역들 중 적어도 하나에 대응되는 사용자의 접근(access)을 허용하는 단계를 포함한다.

Description

사용자 인증 방법 및 그를 이용한 화상 통신 장치 및 디스플레이 장치{Method for user authentication, video communication apparatus and display apparatus thereof}
본 발명은 사용자 인증 방법에 관한 것으로, 보다 상세하게는 화상 통신 시스템에서 사용자를 인증하는 방법에 관한 것이다.
기존의 아날로그 방송에서 디지털 기반의 디지털TV 기술이 개발되고 상용화되면서, 기존의 전파 매체 외에도 각 가정에 연결되어 있는 인터넷 망을 이용하여 실시간 방송, COD(Contents on Demand), 게임, 뉴스, 화상 통신 등 다양한 종류의 컨텐츠 서비스를 사용자에게 제공할 수 있게 되었다.
상기 인터넷 망을 이용한 컨텐츠 서비스 제공의 예로서 IPTV(Internet Protocol TV)를 들 수 있다. 상기 IPTV는 초고속 인터넷 망을 이용하여 각종 정보 서비스, 동영상 컨텐츠 및 방송 등을 전송하여 사용자의 텔레비전에 제공하는 것을 말한다.
본 발명은 화상 통신 시스템에서 복수의 사용자들을 효율적으로 인증할 수 있도록 하는 사용자 인증 방법, 그를 이용한 화상 통신 장치 및 디스플레이 장치를 제공하는 것을 목적으로 한다.
본 발명의 실시예에 따른 사용자 인증 방법은, 영상 데이터를 입력받는 단계; 상기 입력된 영상 데이터를 이용하여, 상기 영상 데이터가 획득된 영역 내에 존재하는 얼굴 영역을 검출하는 단계; 상기 검출된 얼굴 영역이 2 이상인 경우, 상기 검출된 얼굴 영역들 각각에 대응되는 정보와 기등록된 정보를 비교하여 사용자 인증을 수행하는 단계; 및 상기 사용자 인증 결과에 따라, 상기 검출된 얼굴 영역들 중 적어도 하나에 대응되는 사용자의 접근(access)을 허용하는 단계를 포함한다.
본 발명의 실시예에 따른 화상 통신 장치는, 영상 데이터를 획득하는 카메라; 상기 획득된 영상 데이터를 이용하여, 상기 영상 데이터가 획득된 영역 내에 존재하는 2 이상의 얼굴 영역들을 검출하는 얼굴검출부; 상기 검출된 얼굴 영역들 각각의 특징 정보를 추출하는 특징추출부; 등록된 얼굴 영역에 대한 정보를 저장하는 저장부; 및 상기 추출된 얼굴 영역들 각각의 특징 정보와 상기 저장부에 저장된 정보를 비교하여, 상기 검출된 얼굴 영역들에 대한 사용자 인증을 수행하는 사용자인증부를 포함한다.
본 발명의 실시예에 따른 디스플레이 장치는, 영상 데이터를 입력받는 데이터입력부; 상기 입력된 영상 데이터를 이용하여, 상기 영상 데이터가 획득된 영역 내에 존재하는 2 이상의 얼굴 영역을 검출하는 얼굴검출부; 등록된 얼굴 영역에 대한 정보를 저장하는 저장부; 상기 검출된 얼굴 영역들 각각에 대응되는 정보와 상기 저장부에 저장된 정보를 비교하여, 상기 검출된 얼굴 영역들에 대한 사용자 인증을 수행하는 사용자인증부; 및 상기 검출된 얼굴 영역들 및 상기 검출된 얼굴 영역들 각각에 대한 상기 사용자 인증 결과를 표시하는 디스플레이부를 포함한다.
한편, 상기 사용자 인증 방법은 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체로 구현될 수 있다.
본 발명의 실시예에 따르면, 복수의 사용자들 각각에 대해 검출된 얼굴 영역을 기등록된 정보와 비교하여 화상 통신 시스템에 대한 사용자 인증을 수행함으로써, 문자 또는 숫자 입력 등과 같은 별도의 사용자 입력없이 사용자 인증을 용이하게 할 수 있으며, 복수의 사용자들에 대한 정보를 효율적으로 등록 및 관리할 수 있다.
또한, 복수의 사용자들에 대해 검출된 얼굴 영역들을 화면에 디스플레이하여 사용자 선택 및 인증 작업에 이용함으로써, 복수의 사용자들에 의한 화상 통신 시스템의 이용 편의성을 향상시킬 수 있다.
이하, 첨부된 도면을 참조하여 본 발명의 실시예에 따른 사용자 인증 방법 및 그를 이용한 화상 통신 장치 및 디스플레이 장치에 관하여 상세히 설명한다.
도 1은 화상 통신 시스템의 구성을 나타내는 블록도로 도시한 것이다.
도 1을 참조하면, 화상 통신 시스템은 영상 데이터와 음성 데이터의 처리 및 송수신이 가능한 복수의 장치들을 이용하여, 호출 측(calling party) 및 피 호출측(called party)이 반대측에서 송신한 영상을 보면서 서로 대화할 수도록 하는 시스템이다.
예를 들어, 화상 통신 장치(10)는 카메라(camera) 및 마이크(microphone) 등과 입력 장치를 이용하여 사용자의 영상 및 음성에 대응되는 영상 및 음성 데이터를 획득하며, 상기 획득된 영상 및 음성 데이터를 유무선 네트워크로 연결된 다른 장치들(20 내지 60)로 송신할 수 있다.
한편, 화상 통신 장치(10)는 상기 유무선 네트워크로 연결된 다른 장치들(20 내지 60)로부터 영상 및 음성 데이터를 수신할 수 있으며, 그에 따라 화상 통신 장치(10)와 외부 장치들(20 내지 60) 사이의 화상 통신이 가능할 수 있다.
도 1에 도시된 바와 같이, 화상 통신 장치(10)와 화상 통신이 가능한 외부 장치는 휴대폰(20), PDA 또는 노트북 컴퓨터 등과 같은 이동 단말기(30), PC(40), 다른 화상 통신 장치(50) 및 디스플레이 장치(60) 등이 될 수 있다.
또한, 화상 통신 장치(10)와 상기 외부 장치들(20 내지 60)을 연결하는 네트워크는 화상 통신을 위한 통신 규격에 따른 영상 및 음성 데이터의 송수신이 가능토록한다.
예를 들어, 화상 통신 장치(10)와 외부 장치들(20 내지 60)은 이더 넷(ethernet) 또는 IEEE 802.3 등에 따른 네트워크를 이용하여 상기 영상 및 음성 데이터를 송수신하거나, IEEE 802.11 등에 따른 무선 네트워크를 이용하여 상기 데이터를 송수신할 수 있다.
한편, 상기 네트워크는 VoBB(voice over broadband) 또는 레거시(legacy) 서비스 등을 이용하여 화상 통신 장치(10)와 외부 장치들(20 내지 60) 사이의 데이터 송수신을 할 수 있다.
좀 더 구체적으로, 상기 VoBB는 VoCM(voice over cable modem), VoDSL(voice over DSL), VoIP(voice over Internet protocol), FWA(fixed wireless access), FTTH(fiber to the home) 또는 VoATM(voice over ATM) 등의 서비스를 포함할 수 있다.
한편, 상기 레거시 서비스는 ISDN(integrated service digital network), POTS(plain old telephone service), 셀룰러 또는 3G 서비스 등을 포함할 수 있다.
그에 따라, 화상 통신 장치(10)와 외부 장치들(20 내지 60)은 무선 네트워크, 종래의 전화 네트워크, 인터넷(internet) 등과 같은 데이터 네트워크, 케이블 모뎀 시스템 또는 셀룰러 네트워크 등을 이용해 영상 및 음성 데이터를 송수신할 수 있다.
한편, 화상 통신 장치(10)와 외부 장치들(20 내지 60)은 서로 간에 설정된 규격에 따라 영상 및 음성 데이터를 송수신할 수 있으며, 예를 들어 영상 데이터의 코딩을 위한 H.261 표준, 영상 및 음성 데이터의 통신을 H.221 표준 및 호출 설정 및 해제를 위한 H.242 표준 등과 같은 프로토콜들을 이용할 수 있다.
좀 더 구체적으로, 인터넷을 이용한 화상 통신 시스템의 경우, 영상 코딩을 위한 H.323, H.263 및 H264 표준과 음성 코딩을 위한 G723.1, G.711 및 G.729 등과 같은 화상 통신 표준에서 구현된 프로토콜들이 이용될 수도 있다.
그러나 본 발명의 실시예에 따른 화상 통신 시스템은 상기한 바와 같은 구성에 한정되지 아니한다. 예를 들어, 화상 통신 장치(10)와 화상 통신하는 장치들(20 내지 60)은 도 1에 도시된 바와 같은 장치들(20 내지 60)에 한정되지 아니하며, 상기한 바와 같은 표준이외에 SIP, RTP/RTCP 프로토콜과 같은 표준들이 이용될 수도 있다.
도 2는 본 발명의 실시예에 따른 화상 통신 장치의 구성을 블록도로 도시한 것으로, 도시된 화상 통신 장치는 카메라(100), 얼굴검출부(110), 특징추출부(120), 저장부(130) 및 사용자인증부(140)를 포함할 수 있다.
도 2를 참조하면, 카메라(100)는 사용자가 위치하는 영역을 촬영하여 그에 대응되는 영상 데이터를 획득하며, 얼굴검출부(110)는 상기 획득된 영상 데이터를 이용하여 상기 촬영된 영역 내에서 얼굴 영역을 검출한다.
한편, 화상 통신 장치(100)는 카메라(100)에 의해 획득된 영상 데이터에 대해 화질을 개선하거나 특정 목적에 적합하도록 조정하는 등의 전처리를 수행하여 얼굴검출부(110)로 출력하는 전처리부(미도시)를 더 포함할 수 있다.
예를 들어, 상기 전처리부(미도시)는 상기 획득된 영상 데이터에 대해명암도 재조정, 잡음 제거, 평활화(smoothing), 예리화(sharpening) 등의 영상 처리를 수행할 수 있다.
특징추출부(120)는 상기 검출된 얼굴 영역의 특징(feature) 정보를 추출하며, 예를 들어 상기 검출된 얼굴 영역으로부터 사용자별 얼굴 차이를 구분시킬 수 있는 얼굴 특징 벡터(vector)를 추출할 수 있다.
저장부(130)는 등록된 얼굴 영역에 대한 정보를 저장하며, 예를 들어 화상 통신 장치(10)에 대해 접근이 허용된 사용자들에 대한 얼굴 영역의 특징 정보를 저장할 수 있다.
좀 더 구체적으로, 미리 설정된 사용자 등록 과정에 따라, 사용자에 대한 영상이 카메라(100)로 촬영되고, 상기 카메라(100)에 의해 획득된 영상 데이터가 상기한 바와 같은 얼굴검출부(110) 및 특징추출부(120)를 거쳐 상기 사용자에 대한 얼굴 영역의 특징 정보가 추출되어 저장부(130)에 저장되어 있을 수 있다.
사용자인증부(140)는 특징추출부(120)에서 추출된 얼굴 영역의 특징 정보와 저장부(130)에 저장된 정보를 비교하여, 상기 검출된 얼굴 영역에 대한 사용자 인증을 수행할 수 있다.
즉, 상기 두 정보가 일치하는 경우 사용자인증부(140)는 상기 검출된 얼굴 영역에 대응되는 사용자에 대해 화상 통신 장치(10)에 대한 접근, 즉 상기 사용자의 로그인(log in)을 허용할 수 있다.
이하, 도 3 내지 도 12를 참조하여 본 발명의 실시예에 따른 사용자 인증 방법에 대해 보다 상세히 설명하기로 한다.
도 3은 본 발명의 실시예에 따른 사용자 인증 방법을 흐름도로 도시한 것으로, 도시된 사용자 인증 방법을 도 2에 도시된 블록도와 결부시켜 설명하기로 한 다.
도 3을 참조하면, 얼굴검출부(110)는 카메라(100)에 의해 획득된 영상 데이터를 입력받고(200 단계), 상기 입력된 영상 데이터를 이용하여 상기 영상 데이터가 획득된 영역 내에 존재하는 얼굴 영역을 검출한다(210 단계).
예를 들어, 얼굴검출부(110)는 윤곽선 검출, 레이블링, 구조 분석 등에 의해 상기 입력된 영상데이터를 각 피사체 별로 영역 분할(segmentation)하고, 상기 분할된 영상 데이터로부터 각 영역의 특징을 추출하여 미리 저장된 얼굴 특징 벡터와 비교함으로써 상기 얼굴 영역을 검출할 수 있다.
한편, 상기 얼굴 특징 벡터는 저장부(130)에 저장되어 있을 수 있다.
상기 얼굴 영역의 검출을 위해, 얼굴검출부(110)는 각 피사체별 영역에 대해 수학적, 구조적, 변환법적 수단 등을 적용해 색, 모양, 질감 등의 특징을 추출 및 가공하여 생성한 특징 벡터를 사용할 수 있다.
특징추출부(120)는 상기 검출된 얼굴 영역의 특징 정보를 추출한다(220 단계).
예를 들어, 특징추출부(120)는 상기 검출된 얼굴 영역으로부터 개인별 얼굴 차이를 구분시킬 수 있는 얼굴 특징 벡터를 생성하고, 저장부(130)에 저장된 등록된 사용자의 얼굴 특징 벡터와 비교할 수 있다.
즉, 특징추출부(120)는 사람마다 얼굴 생김새 등이 다름에 근거하여 각 개인마다 고유한 얼굴 영역의 특징을 추출하며, 예를 들어 눈의 크기나 간격, 눈동자 색깔, 귀의 크기나 위치, 길이, 넓이, 입술 모양 및 크기, 턱, 얼굴 전체 윤곽, 헤 어 스타일 등에 따라 해당 얼굴 영역의 특징을 추출할 수 있다.
상기와 같은 얼굴 영역의 특징을 추출함에 있어, 수학적 모델은 얼굴 전체 또는 특정 부분 또는 특정 부분간 간격 등을 측정한 수치들을 직접 사용하거나 통계 처리 등에 의해 가공하여 상기 특징 벡터를 생성할 수 있다.
한편, 특징추출부(120)는 Hotelling(또는 Eigen벡터, 주요성분, 불연속 Karhunen-Loeve) 변환, 푸리에 변환, DCT 변환, Walsh 함수 변환, 웨이브릿 변환 등을 이용해 상기 얼굴 영역의 특징 정보를 추출할 수 있으며, 예를 들어 상기와 같은 방법은 상기 검출된 얼굴 영역에 대한 질감 분석에 이용될 수 있다.
또한, 특징추출부(120)는 상기 얼굴 영역의 특징을 추출하기 위해 Kohonen의 자기 조직 특징 매핑(Self-organized feature mapping: SOFM) 네트워크 등과 같은 인공 신경망을 이용할 수 있다.
상기 SOFM 알고리즘은 입력 노드로부터 출력 노드로의 연결 가중치를 조정하여 벡터 계량기(vector quantizer)를 만드는 것으로, 상기 출력 노드는 일반적으로 2차원 격자모양으로 배열되며, 학습시 뉴런(neuron) 간을 국소적으로 연결함으로써 연결 상태를 확대할 수 있다.
그에 따라, 상기 SOFM 알고리즘은 높은 차원의 입력 벡터를 낮은 차원의 특징 벡터로 효율적으로 변환시킬 수 있으며, 상기 인공신경망의 출력이 상기 얼굴 영역의 특징 벡터로 사용될 수 있다.
그러나, 본 발명은 상기한 바와 같은 얼굴 영역 검출 및 특징 정보 추출 방법에 한정되지 아니하며, 그 이외에 여러 공지된 기술들을 이용할 수 있다.
사용자인증부(140)는 상기 220 단계에서 추출된 얼굴 영역의 특징 정보와 저장부(130)에 저장된 기등록 정보를 비교하여(230 단계), 상기 두 정보가 일치하는지 여부를 확인한다(240 단계).
예를 들어, 사용자인증부(140)는 상기 추출된 얼굴 영역의 특징 정보과 상기 저장된 등록 사용자의 얼굴 특징 정보 사이의 유사성 또는 상관성 등을 비교하여 상기 사용자 인증을 수행할 수 있다.
사용자인증부(140)는 얼굴 특징 벡터를 비교하여 상기한 바와 같은 사용자 인증을 수행할 수 있으며, 좀 더 구체적으로 역전파(Backporpagation: BP) 알고리즘을 사용하는 인공 신경망을 이용하여 상기 추출된 얼굴 영역의 특징 정보과 상기 저장된 등록 사용자의 얼굴 특징 정보를 비교 분석할 수 있다.
한편, 사용자인증부(140)는 상기 추출된 얼굴 영역의 특징 정보과 상기 저장된 등록 사용자의 얼굴 특징 정보 사이의 상관성을 수학적으로 계산하여, 상기 계산된 결과에 따라 상기 두 정보의 일치 여부를 판단할 수도 있다.
상기 판단 결과, 상기 추출된 얼굴 영역의 특징 정보과 상기 저장된 등록 사용자의 얼굴 특징 정보가 일치하는 경우, 사용자인증부(140)는 상기 검출된 얼굴 영역에 대응되는 사용자의 접근을 허용한다(250 단계).
즉, 상기 두 정보가 일치하는 경우, 사용자인증부(140)는 현재 로그인을 시도하는 사용자에 대해 화상 통신 장치(10)에 대한 접근, 예를 들어 화상 통신을 위한 응용 프로그램의 실행을 허용할 수 있다.
한편, 상기에서 두 정보가 일치한다는 것은 상기 두 정보가 완벽하게 일치하 는 경우 뿐 아니라, 미리 설정된 기준치 이상으로 유사성을 가지는 경우도 포함할 수 있다.
도 4는 사용자 인증 방법에 대한 제1 실시예를 설명하기 위해 도시한 것으로, 화상 통신 장치(10)의 카메라(100)에 의해 획득된 영상을 나타낸 것이다.
도 4를 참조하면, 카메라(100)로부터 출력되는 영상 데이터에 대응되는 전체 영상(300)은 사용자에 대응되는 이미지(310)를 포함할 수 있으며, 상기 사용자는 화상 통신 장치(10)에 로그인하고자 하는 자일 수 있다.
화상 통신 장치(10)의 얼굴검출부(110)는 카메라(100)로부터 출력되는 영상 데이터를 이용하여, 상기 영상(300) 중 사용자의 얼굴 영역(311)을 검출할 수 있다.
특징추출부(120)는 상기 검출된 얼굴 영역(311)으로부터 특징 정보, 예를 들어 얼굴 특징 벡터를 추출할 수 있다.
또한, 사용자인증부(140)는 특징추출부(120)로부터 출력되는 얼굴 영역(311)의 특징 정보와 저장부(130)에 저장된 등록된 사용자의 얼굴 영역 특징 정보를 비교하여 상기한 바와 같은 사용자 인증을 수행할 수 있다.
저장부(130)에는 복수의 등록된 사용자들 각각에 대한 얼굴 영역 특징 정보가 저장될 수 있으며, 사용자인증부(140)는 상기 저장된 정보 중 상기 얼굴 영역(311)의 특징 정보와 일치하는 정보가 있는지 여부를 판단할 수 있다.
상기 저장된 정보 중 상기 얼굴 영역(311)의 특징 정보와 일치하는 정보가 있는 경우, 사용자인증부(140)는 영상(300) 내에 존재하는 이미지(310)에 대응되는 사용자, 즉 현재 화상 통신 장치(10)에 로그인하고자 하는 사용자에 대한 접근을 허용하며, 그에 따라 화상 통신 장치(10)가 화상 통신이 가능한 모드(mode)로 진입할 수 있다.
한편, 상기 저장된 정보 중 상기 얼굴 영역(311)의 특징 정보와 일치하는 정보가 없는 경우, 사용자인증부(140)는 상기 사용자에 대한 접근을 불허할 수 있으며, 그와 더불어 상기 사용자를 새로운 사용자로 등록하기 위한 작업을 수행할 수 있다.
상기 얼굴검출부(110), 특징추출부(120) 및 사용자인증부(140) 각각의 동작은 도 2 및 도 3을 참조하여 설명한 것과 동일할 수 있다.
또한, 상기한 바와 같은 사용자 인증이 완료되어 상기 사용자의 접근이 허용되는 경우, 카메라(100)는 상기 사용자의 얼굴 영역(311)을 중심으로 촬영할 수 있으며, 상기 촬영된 영상 데이터는 네트워크를 통해 상대방의 장치로 송신될 수 있다.
본 발명의 일실시예에 따르면, 화상 통신 장치(10)의 전방, 좀 더 상세하게는 카메라(100)에 의해 촬영되는 영역 내에 복수의 사용자들이 위치할 수 있다.
예를 들어, 본 발명의 실시예에 따른 화상 통신 장치(10)를 구비한 디스플레이 장치의 경우, 상기 디스플레이 장치를 이용해 복수의 사용자들이 방송을 시청할 수 있으며, 상기 방송 시청 중 화상 통신을 수행하고자 하는 경우 카메라(100)에 의해 촬영되는 영역 내에 복수의 사용자들이 위치할 수 있다.
이 경우, 본 발명의 실시예에 따른 화상 통신 장치(10)는 도 2 내지 도 4를 참조하여 설명한 바와 같은 사용자 인증 방법을 상기 복수의 사용자들 각각에 대해 수행할 수 있으며, 상기 사용자 인증 결과에 따라 상기 복수의 사용자들 중 1 이상의 사용자의 접근을 허용할 수 있다.
이하, 도 5 내지 도 12를 참조하여 본 발명에 따른 사용자 인증 방법에 대한 제2 실시예를 설명하기로 한다.
도 5를 참조하면, 사용자 인증을 위해 화상 통신 장치(10)의 카메라(100)에 의해 촬영되는 영역 내에 2 이상의 사용자들이 위치할 수 있다.
즉, 카메라(100)에 의해 획득된 영상 데이터에 따른 전체 영상(300)은 상기 2 이상의 사용자들 각각에 대응되는 2 이상의 이미지들(310, 320, 330, 340, 350)를 포함할 수 있으며, 그에 따라 얼굴검출부(110)는 2 이상의 얼굴 영역들(311, 321, 331, 341, 351)을 검출할 수 있다.
예를 들어, 카메라(100)에 의해 획득된 영상 데이터 내에는 저장부(130)에 저장된 얼굴 특징 백터와 일치하는 영역이 2 이상 존재할 수 있다.
한편, 특징추출부(120)는 상기 검출된 2 이상의 얼굴 영역들(311, 321, 331, 341, 351) 각각에 대해 상기한 바와 같은 특징 정보 추출 작업을 수행하며, 그에 따라 얼굴 영역들(311, 321, 331, 341, 351) 각각의 얼굴 특징 벡터를 출력할 수 있다.
사용자인증부(140)는 특징추출부(120)로부터 출력되는 복수의 얼굴 영역들(311, 321, 331, 341, 351) 각각의 특징 정보와 저장부(130)에 저장된 등록된 사용자의 얼굴 영역 특징 정보를 비교하여 상기한 바와 같은 사용자 인증을 수행할 수 있다.
예를 들어, 사용자인증부(140)는 상기 추출된 복수의 얼굴 영역들(311, 321, 331, 341, 351) 중 상기 저장된 정보와 일치하는 특징 정보를 가지는 것이 있는지 여부를 판단할 수 있다.
상기 검출된 얼굴 영역들(311, 321, 331, 341, 351) 중 상기 저장된 정보와 일치하는 특징 정보를 가지는 얼굴 영역이 존재하는 경우, 사용자인증부(140)는 상기 특징 정보가 일치하는 얼굴 영역에 대응되는 사용자에 대한 접근을 허용하며, 그에 따라 화상 통신 장치(10)가 화상 통신이 가능한 모드(mode)로 진입할 수 있다.
상기 검출된 얼굴 영역들(311, 321, 331, 341, 351) 중 상기 저장된 정보와 일치하는 특징 정보를 가지는 얼굴 영역이 존재하지 않는 경우, 사용자인증부(140)는 현재 사용자들의 접근을 불허할 수 있다.
상기 얼굴검출부(110), 특징추출부(120) 및 사용자인증부(140)가 상기 검출된 얼굴 영역들(311, 321, 331, 341, 351) 각각에 대해 수행하는 동작은 도 2 및 도 3을 참조하여 설명한 것과 동일할 수 있다.
즉, 본 발명의 실시예에 따른 화상 통신 장치(10)는 상기 검출된 복수의 얼굴 영역들(311, 321, 331, 341, 351) 각각에 대해 도 3을 참조하여 설명한 220 단계 내지 250 단계를 반복하여 수행할 수 있다.
본 발명의 실시예에 따르면, 화상 통신 장치(10)는 디스플레이부(150)를 포함할 수 있으며, 디스플레이부(150)는 얼굴검출부(110)에 의해 검출된 얼굴 영 역(311)을 화면 상에 표시할 수 있다.
도 6을 참조하면, 상기한 바와 같이 카메라(100)에 의해 획득된 영상 데이터에서 2 이상의 얼굴 영역 영역들(311, 321, 331, 341, 351)이 검출된 경우, 디스플레이부(150)는 상기 검출된 얼굴 영역들(311, 321, 331, 341, 351)을 화면(400) 상에 표시할 수 있다.
또한, 디스플레이부(150)는 상기 검출된 얼굴 영역들(311, 321, 331, 341, 351) 각각에 대해 수행된 사용자 인증 결과를 화면(10) 상에 표시할 수 있다.
즉, 화면(10) 상에 표시되는 얼굴 영역들(311, 321, 331, 341, 351)은 인증된 사용자와 인증되지 않은 사용자로 구분되어 표시될 수 있으며, 그에 따라 화상 통신 장치(10)의 전방에 위치하는 사용자들 중 로그인 가능한 사용자와 그렇지 않은 사용자가 화면(10) 상에서 용이하게 식별될 수 있다.
도 7을 참조하면, 상기 검출된 얼굴 영역들(311, 321, 331, 341, 351) 각각에 대응되도록 특정 형상, 예를 들어 사각형을 화면(10) 상에 표시할 수 있으며, 상기 화면(10) 상에 표시되는 형상들에 의해 상기 사용자 인증 결과가 표시될 수 있다.
예를 들어, 화면(10) 상에 표시된 얼굴 영역들(311, 321, 331, 341, 351) 중 실선의 사각형이 표시된 얼굴 영역들(311, 331, 341)은 인증된 사용자, 즉 상기한 바와 같은 사용자 인증 작업에 따라 로그인이 가능한 사용자이며, 점선의 사각형이 표시된 얼굴 영역들(321, 351)은 인증되지 않은 사용자, 즉 로그인이 불가능한 사용자일 수 있다.
도 7에 도시된 바와 같은 사용자 인터페이스에 의해, 각 사용자는 화면(10) 상에 표시된 정보를 이용하여 자신의 화상 통신 서비스에 대한 로그인 가능 여부를 용이하게 확인할 수 있다.
한편, 도 7에 도시된 바와 같은 표시 방법은 본 발명에 따른 일실시예에 불과하므로, 본 발명은 이에 한정되지 아니한다. 따라서 본 발명에 따른 사용자 인증 방법에 있어, 도 7에 도시된 방법 이외에 상기 검출된 얼굴 영역들(311, 321, 331, 341, 351)을 사용자 인증 결과에 따라 구분하여 표시할 수 있는 다양한 방법들이 이용 가능하다.
또한, 사용자는 화면(10) 상에 표시된 얼굴 영역들(311, 321, 331, 341, 351) 중 어느 하나를 선택할 수 있으며, 상기 선택된 얼굴 영역에 대응되는 작업이 수행될 수 있다.
즉, 화면(10) 상에 로그인 가능한 사용자로 표시된 얼굴 영역들, 예를 들어 실선의 사각형이 표시된 얼굴 영역들(311, 331, 341) 중 어느 하나가 선택된 경우, 상기 선택된 얼굴 영역에 대응되는 사용자에 대한 접근이 허용되며, 그에 따라 화상 통신 장치(10)가 화상 통신이 가능한 모드로 진입하여 그를 위한 응용 프로그램들이 실행될 수 있다.
한편, 화면(10) 상에 로그인 불가능한 사용자로 표시된 얼굴 영역들, 예를 들어 점선의 사각형이 표시된 얼굴 영역들(321, 351) 중 어느 하나가 선택된 경우, 화상 통신 장치(10)에 대한 접근이 불허되며, 로그인이 불가능하다는 정보가 화면(400) 상에 표시될 수 있다.
도 8을 참조하면, 사용자는 화상 통신 장치(10) 또는 그를 제어하기 위한 원격 제어 장치(미도시)에 구비된 키 버튼들을 이용하여 화면(10) 상에 로그인 가능한 사용자로 표시된 얼굴 영역(331)을 선택할 수 있으며, 그에 따라 상기 선택된 얼굴 영역(331)에 굵은 실선의 사각형이 표시될 수 있다.
이 경우, 상기 선택된 얼굴 영역(331)에 대응되는 사용자 3의 화상 통신 장치(10)에 대한 접근이 허용되며, 도 9에 도시된 바와 같이 화면(400) 상에 상기 사용자 3이 로그인되었다는 정보가 표시될 수 있다.
그 후, 도 10에 도시된 바와 같이, 카메라(100)는 상기 로그인된 사용자 3에 대응되는 이미지(330)를 중심으로 하는 영상(300)을 촬영할 수 있으며, 상기와 같이 사용자 3을 중심으로 하여 획득된 영상 데이터는 유무선 네트워크를 이용해 상대방 장치로 송신될 수 있다.
한편, 화상 통신 장치(10)는 상기 로그인된 사용자 3의 얼굴 영역(331)을 이용하여, 상기 사용자 3의 움직임에 따라 카메라(100)의 방향이 변경되도록 할 수 있으며, 그를 위해 카메라구동부(미도시)를 더 포함할 수 있다.
예를 들어, 상기 카메라구동부(미도시)는 카메라(100)에 의해 획득된 영상 데이터를 입력받아 촬영된 영상(300) 내에서의 얼굴 영역(331)의 위치를 검출하고, 상기 얼굴 영역(331)이 영상(300) 내에 위치하도록 카메라(100)의 촬영 방향을 조정할 수 있다.
즉, 상기 로그인된 사용자 3이 화상 통신 중에 화살표 방향, 즉 우측 방향으로 이동하는 경우, 상기 카메라구동부(미도시)는 얼굴 영역(331)의 이동 방향에 따 라 카메라(100)의 촬영 방향을 우측으로 이동시킬 수 있다.
한편, 상기한 바와 같은 카메라구동부(미도시)의 동작 중 일부는 얼굴검출부(110), 특징추출부(120) 또는 사용자인증부(140)에 의해 수행될 수도 있다.
본 발명의 또 다른 실시예에 따르면, 화상 통신 장치(10)는 상기 로그인된 사용자 3의 화상 통신 이력, 예를 들어 통신 시점, 통신 시간 또는 통신 상대방에 대한 정보 등을 수집하여 저장부(130)에 저장시키는 제어부(미도시)를 더 포함할 수 있다.
상기와 같이 수집된 화상 통신 이력은 저장부(130)에 해당 사용자에 대응되도록 저장될 수 있으며, 상기 저장된 사용자별 화상 통신 이력은 사용자에 따른 맞춤형 정보, 예를 들어 교육, 상품 또는 의료 정보 등을 제공하는 비즈니스 모델(business model)과 연계하여 이용될 수 있다.
도 11을 참조하면, 사용자는 화상 통신 장치(10) 또는 그를 제어하기 위한 원격 제어 장치(미도시)에 구비된 키 버튼들을 이용하여 화면(10) 상에 로그인 불가능한 사용자로 표시된 얼굴 영역(321)을 선택할 수 있다.
이 경우, 상기 선택된 얼굴 영역(321)에 대응되는 사용자에 대한 사용자 등록 작업이 수행될 수 있으며, 예를 들어 특징추출부(120)에서 상기 선택된 얼굴 영역(321)에 대해 추출된 특징 정보가 상기 사용자 정보와 함께 저장부(130)에 저장될 수 있다. 그에 따라, 상기 사용자는 화상 통신 장치(10)에 로그인 가능한 사용자로 등록될 수 있다.
한편, 로그인 불가능한 사용자로 표시된 얼굴 영역(321)에 대한 사용자 등록 을 원하는 경우, 도 12에 도시된 바와 같이 화면(10) 상에 패스워드(password)의 입력이 요청될 수 있다.
본 발명의 실시예에 따른 디스플레이 장치는 상기한 바와 같은 화상 통신 장치(10)를 구비하여 유무선 네트워크를 이용한 화상 통신 서비스가 가능할 수 있으며, 그와 더불어 상기한 바와 같이 사용자 인증 방법의 수행이 가능할 수 있다.
이하, 네트워크 TV를 예로 들어 본 발명의 실시예에 따른 디스플레이 장치에 대해 상세히 설명하기로 한다.
도 13은 디스플레이 시스템의 구성에 대한 일실시예를 블록도로 도시한 것으로, 도시된 디스플레이 시스템은 네트워크 운영자(510), 컨텐츠 제공자(CP, Contents Provider)(520), 서비스 제공자(530) 및 네트워크 TV(540)로 구성될 수 있다.
네트워크 운영자(510)는 네트워크 TV(540)에 컨텐츠 제공자(520)가 제공하는 컨텐츠들이 네트워크 TV(540)에서 정상적으로 동작하기 위해 필요한 기반 소프트웨어를 제공할 수 있다. 또한, 컨텐츠 제공자(520)에게 네트워크 TV(540)에서 컨텐츠가 정상적으로 실행되기 위해 필요한 네트워크 TV(540)의 하드웨어 정보를 제공할 수 있다.
예를 들어, 네트워크 운영자(510)는 컨텐츠 제공자들이 제공한 컨텐츠들이 네트워크 TV(540)에 표시될 때 구성되는 메인 화면을 제공하고, 사용자가 컨텐츠를 선택하거나, 다양한 명령을 입력하고 그에 따른 출력을 표시하기 위한 사용자 인터페이스를 제공할 수 있다. 또한, 사용자 인터페이스를 필요할 때마다 네트워크 TV(540)의 펌웨어 또는 소프트웨어를 업데이트하기 위한 정보를 제공하는 역할도 수행할 수 있다.
컨텐츠 제공자(520)는 네트워크 상에서 제공할 수 있는 다양한 컨텐츠를 생성하여 네트워크 TV(540)에서 재생가능한 포맷으로 구성하여, 네트워크 TV(540)의 요청에 따라 컨텐츠들을 제공할 수 있다. 상기 컨텐츠는 네트워크를 통해 서비스될 수 있는 임의의 데이터일 수 있다.
네트워크 TV(540)에는 컨텐츠 제공자(520) 별로 컨텐츠의 재생, 검색, 목록의 표시 등을 하기 위한 전용 펌웨어가 장착될 수 있다. 상기 펌웨어는 네트워크 TV(540)의 제조 과정 중에 네트워크 TV(540)에 설치될 수도 있고, 사용자가 사용 중에 네트워크를 통해 다운로드 받아 설치할 수도 있다.
한편, 네트워크 TV(540)의 펌웨어는 컨텐츠 제공자(520)가 제공하는 컨텐츠를 재생 또는 실행하기 위한 프로그램이라 할 수 있다. 상기 펌웨어는 컨텐츠 제공자(520)가 제공하는 컨텐츠의 종류에 따라 달라질 수 있다. 예컨대, 컨텐츠 제공자(520)가 VOD 사업자인 경우는 펌웨어는 VOD 재생 프로그램일 수 있으며, 컨텐츠 제공자(520)가 AOD, MOD 사업자인 경우에는 AOD, MOD 재생 프로그램일 수 있다.
또한, 컨텐츠 제공자(520)가 화상 통신 사업자인 경우에는 화상 통신 프로그램일 수 있다.
서비스 제공자(530)는 네트워크 운영자(510), 컨텐츠 제공자(520) 및 네트워크 TV(540) 상호 간에 네트워크 통신을 제공하는 인터넷 서비스 제공자일 수 있다.
상기 네트워크는 인터넷 프로토콜을 사용하는 임의의 유무선 인터넷 네트워 크를 포함할 수 있다. 특히, 서비스 제공자(530)는 컨텐츠 제공자(520)가 제공하는 컨텐츠를 네트워크 TV(540)에 전송하고, 사용자에게 컨텐츠의 안정적인 수신이 될 수 있도록 전송망의 유지 보수 관리를 수행하며, 그리고 컨텐츠 제공자(520)에게는 컨텐츠를 전송을 할 수 있는 기반 시설을 제공할 수 있다.
네트워크 TV(540)는 사용자의 명령에 응답하여 서비스 제공자(530)를 통해 컨텐츠를 수신하여 재생 또는 실행한다. 실시예에 따라서는, 네트워크 TV(540)는 네트워크 셋톱박스 등의 방송 수신 장치, 네트워크용 전화기 등 네트워크 모듈이 장착된 임의의 장치를 포함할 수 있다.
예를 들어, 컨텐츠 제공자(520)는 네트워크 TV(540)에 제공될 각종 컨텐츠를 만드는 사업자일 수 있다. 컨텐츠 제공자(520)는 TV 방송국, 라디오 방송국, VOD 사업자, AOD 사업자, 게임 사업자, 화상 통신 서비스 제공자, 날씨 정보 제공자, 사진 관련 서비스 제공자 등을 포함할 수 있다.
좀 더 구체적으로, 화상 통신 서비스 제공자는 네트워크를 통해 다른 네트워크 TV의 사용자와 화상 통화를 할 수 있도록 중계 서비스를 제공할 수 있다.
서비스 제공자(530)는 네트워크 운영자(510), 컨텐츠 제공자(520), 네트워크 TV(540)의 데이터 및 명령을 전송해주는 매개체가 된다. 서비스 제공자(530)는 통상적인 유무선 인터넷 서비스 제공자일 수 있다. 또한, 서비스 제공자(530)는 네트워크 운영자(510), 컨텐츠 제공자(520) 및 네트워크 TV(540)가 서로 통신을 원활히 수행할 수 있도록 통신 망 하드웨어를 제공하는 동시에, IP 주소 할당, 대역폭 조절 등 다양한 통신 서비스를 수행할 수 있다.
네트워크 TV(540)는 기본적으로 네트워크에 접속할 수 있는 네트워크 인터페이스를 갖고, IP 어드레스를 할당받아서 네트워크를 통해 데이터 패킷을 받아 처리하며, 데이터 패킷이 비디오, 오디오 등의 멀티미디어 데이터인 경우에는 저장하거나 재생할 수 있다.
또한, 네트워크 TV(540)는 멀티미디어 데이터를 처리하면서 양방향으로 사용자의 요구사항을 전송할 수 있도록 동작할 수 있으며, 그를 위해 네트워크 TV(540)를 제어하기 위한 리모컨에는 네트워크 TV를 제어하기 위한 버튼들, 즉 다양한 메뉴를 선택하기 위한 버튼들이 제공될 수 있다.
도 14는 본 발명의 실시예에 따른 디스플레이 장치의 구성을 블록도로 도시한 것으로, 도 13에 도시된 네트워크 TV(540)의 구성을 나타낸 것이다.
도 14를 참조하면, 네트워크 TV(540)는 네트워크를 통해 컨텐츠를 수신하는 기능 외에, 방송 수신부(541)를 통해 무선 또는 케이블을 통해 RF 신호 형태의 방송 신호를 수신하는 기능이 부가되어 있을 수 있다.
네트워크 TV(540)는 방송 수신부(541), 역다중화부(542), 영상신호 처리부(543), 디스플레이부(544), 네트워크 인터페이스부(545), OSD 생성부(546), 사용자 인터페이스부(547), 저장 인터페이스부(548), 메모리부(549) 및 제어부(550)를 포함할 수 있다.
방송 수신부(541), 역다중화부(542) 및 영상신호 처리부(543)는 방송 신호를 수신하여 다양한 처리를 통해 디스플레이부(544)로 출력 가능한 형태로 처리하는 하나의 방송 처리부를 구성할 수 있다.
컨텐츠가 디지털 방송인 경우에, 디지털 방송신호는 비디오신호와 오디오신호 및 부가 데이터를 시분할 다중화하여 패킷화된 트랜스포트 스트림(Transport Stream) 형태로 전송될 수 있다.
또한, 방송수신부(541)는 외부로부터 전송되는 방송신호를 수신하는 안테나를 포함할 수 있고, 또한 후술할 제어부(550)의 튜닝 제어신호에 따라 그에 대응하는 주파수 대역을 갖는 방송신호를 튜닝하는 튜너와, 상기 튜닝된 특정 채널의 방송신호를 VSB(Vestigial Sideband) 복조과정 및 오류정정과정 등을 거쳐 트랜스포트 스트림 형태로 출력하는 디모듈레이터(복조부)를 포함할 수 있다.
그리고, 방송수신부(541)를 통해 수신된 방송신호는 역다중화부(542)에 의해 비디오신호와 오디오신호 및 PSIP(Program and System Information Protocol) 정보 등으로 정의되는 각종 부가 데이터로 분리되어 비트 스트림 형태로 출력될 수 있다.
역다중화부(542)를 통해 분리된 비디오 데이터는 영상신호 처리부(543)에 의해 처리되어 디스플레이부(544)에 표시된다.
이 경우, 영상신호 처리부(543)는 MPEG-2 디코더와, 비디오 데이터를 디스플레이부(44)의 출력규격에 맞는 수직주파수, 해상도, 화면비율 등에 맞도록 변환하는 스케일러를 포함할 수 있다.
역다중화부(542)를 통해 분리된 부가 데이터에 포함된 부가 데이터는 후술할 저장 인터페이스부(48)를 통해 메모리부(49)에 저장될 수 있으며, 메모리부(549)는 EEPROM(electrically erasable programmable read-only memory) 등으로 구현될 수 있다.
사용자 인터페이스부(547)는 사용자로부터 요구 명령을 입력받기 위한 수단으로써, 일반적으로 리모트 컨트롤러를 통해 입력되는 적외선 신호를 수신하는 적외선 수신부나 패널 일측에 구비된 로컬 키 입력부가 이에 포함된다.
네트워크 인터페이스부(545)는 네트워크를 통해 컨텐츠 제공자(520) 또는 네트워크 운영자(510)로부터 컨텐츠 또는 데이터들을 수신할 수 있으며, 예를 들어 네트워크를 통하여 컨텐츠 제공자로부터 제공되는 방송, 게임, VOD, 방송 신호 등의 컨텐츠 및 그와 관련된 정보를 수신할 수 있다. 또한, 네트워크 인터페이스부(545)를 통해 네트워크 운영자(510)가 제공하는 펌웨어의 업데이트 정보 및 업데이트 파일이 수신될 수 있다.
OSD 생성부(546)는 사용자의 판단 신호를 입력받기 위한 메뉴화면을 OSD(On Screen Display) 형태로 생성한다. 즉, OSD 생성부(546)는 네트워크 인터페이스부(545)를 통해 수신된 컨텐츠와 관련된 정보를 디스플레이부를 통해 디스플레이할 수 있다.
제어부(550)는 상기 사용자 인터페이스부(547)로부터 입력되는 명령에 따른 전반적인 동작 제어를 수행하며, 네트워크 운영자(10)로부터 수신한 컨텐츠 제공자(20)의 소프트웨어, 즉 펌웨어의 업데이트 파일을 수신하여 실행할 수 있다.
본 발명의 실시예에 따른 사용자 인증 방법은 영상 신호 처리부(543), 제어부(550), 메모리부(549) 및 디스플레이부(544)에 의해 수행될 수 있으며, 예를 들어 영상 신호 처리부(543)는 도 3 내지 도 12를 참조하여 설명한 바와 같은 사용자 인증 방법을 수행하기 위해 도 2에 도시된 얼굴검출부(110), 특징추출부(120) 및 사용자인증부(130) 등을 포함할 수 있다.
도 15는 디스플레이 장치의 화면상에 표시되는 메뉴 화면의 구성에 대한 일실시예를 도시한 것이다.
도 15를 참조하면, 네트워크 TV(540)의 메뉴 화면은 배경 이미지(601) 및 복수의 컨텐츠 제공자들을 각각 나타내는 메뉴 버튼들(612)을 포함할 수 있다.
배경 이미지(601) 상에 표시된 메뉴 버튼들(612)은 복수의 컨텐츠 제공자들의 서버에 접속하기 위한 버튼들일 수 있으며, 사용자는 메뉴 버튼들(612) 중 하나를 선택함으로써 원하는 컨텐츠 제공자의 서버에 접속하여 컨텐츠 서비스를 제공받을 수 있다.
본 발명의 실시예에 따르면, 상기 복수의 컨텐츠 제공자들 중 적어도 하나가 화상 통신 서비스를 제공하며, 그에 따라 네트워크 TV(540)의 메뉴 화면에 표시된 메뉴 버튼들(612) 중 어느 하나, 예를 들어 메뉴 버튼 4(605)는 상기 화상 통신 서비스에 대응되는 버튼일 수 있다.
사용자는 네트워크 TV(540)의 메뉴 화면에 표시된 머뉴 버튼들(612) 상기 메뉴 버튼 4(605)를 선택하여 화상 통신 서비스를 제공하는 컨텐츠 제공자의 서버에 접속할 수 있다.
한편, 상기한 바와 같은 방법에 의해 화상 통신 서비스를 제공하는 컨텐츠 제공자의 서버에 접속한 후에는, 도 3 내지 도 12를 참조하여 설명한 바와 같은 본 발명의 실시예에 따른 사용자 인증 방법이 수행될 수 있다.
또한, 도 3 내지 도 12를 참조하여 설명한 바와 같은 사용자 인증 방법 중 적어도 일부 단계들은 컨텐츠 제공자(520)의 서버, 서비스 제공자(530) 서버 또는 네트워크 운영자(510)의 서버에서 수행될 수도 있다.
본 발명의 또 다른 실시예에 따르면, 화상 통신 장치(10)는 상기한 바와 같은 사용자 인증 방법에 따라 획득된 사용자 인증 결과를 외부 기기로 전송할 수 있다.
예를 들어, 화상 통신 장치(10)는 등록된 사용자들, 상기 등록된 사용자들 중 현재 화상 통신 장치(10) 앞에 위치하는 사용자들, 로그인된 사용자 및 현재 화상 통신 장치(10) 앞에 위치하는 미등록 사용자 등에 대한 정보를 상기 외부 기기로 전송할 수 있다.
도 8에 도시된 경우에 있어서, 화상 통신 장치(10)는 등록된 사용자들 중 사용자 1, 사용자 3 및 사용자 4가 현재 화상 통신 장치(10) 앞에 위치하고 있다는 정보를 상기 외부 기기로 전송할 수 있다.
한편, 상기 외부 기기는 상기 수신한 사용자 인증 결과를 화면에 표시할 수 있으며, 상기 외부 기기의 사용자는 화상 통신 장치(10) 앞에 위치하는 사용자들, 즉 현재 화상 통신이 가능한 사용자들을 검색할 수 있다.
그에 따라, 상기 외부 기기의 사용자는 화상 통신 장치(10) 앞에 위치하는 사용자들 중 어느 하나를 선택하여 화상 통신을 시도할 수 있으며, 그와 더불어 특정 사용자의 위치를 확인할 수 있다.
이하, 도 13에 도시된 바와 같은 디스플레이 시스템의 경우를 예로 들어, 상 기한 바와 같은 사용자 인증 결과의 표시 방법에 대한 실시예들을 설명하기로 한다.
네트워크 TV 1(540)은 도 1 내지 도 12를 참조하여 설명한 바와 같은 방법을 이용하여 사용자 인증을 수행하고, 사용자 인증 결과를 외부 기기, 예를 들어 컨텐츠 제공자(320)의 서버 또는 다른 네트워크 TV로 전송할 수 있다.
좀 더 구체적으로, 네트워크 TV 1(540)은 상기 사용자 인증 결과를 화상 통신 서비스를 제공하는 컨텐츠 제공자 1(320)의 서버로 전송하고, 네트워크 TV 2는 상기 서버로부터 네트워크 TV 1(540)에 대한 상기 사용자 인증 결과를 수신할 수 있다.
한편, 네트워크 TV 2는 상기 수신한 사용자 인증 결과를 화면 상에 표시할 수 있으며, 그에 따라 네트워크 TV 2의 사용자는 네트워크 TV 1(540)의 사용자들의 화상 통신 가능 여부 또는 위치 등을 파악할 수 있다.
도 16을 참조하면, 네트워크 TV 2는 네트워크 TV 1(540)의 사용자 인증 결과에 대한 정보를 포함하는 사용자 목록 창(700)을 화면 상에 표시할 수 있다.
사용자 목록 창(700)에는 네트워크 TV 1(540)에 등록된 사용자들 중 현재 네트워크 TV 1(540) 앞에 위치하는 사용자들, 즉 사용자 1, 사용자 3 및 사용자 4에 대한 정보가 표시될 수 있다.
사용자 목록 창(700)에 표시되는 사용자 정보는 텍스트 또는 이미지를 포함할 수 있으며, 좀 더 구체적으로는 해당 사용자의 ID, 대화명 또는 아이콘 등을 포함할 수 있다.
또한, 네트워크 TV 1(540)가 상기한 바와 같은 방법으로 검출된 얼굴 영역 이미지를 전송하는 경우, 사용자 목록 창(700)에는 해당 사용자에 대해 현재 촬영된 얼굴 이미지가 표시될 수도 있다.
한편, 사용자 목록 창(700)에는 사용자의 현재 상태를 나타내기 위한 이미지들(701, 702)이 표시될 수 있다.
예를 들어, 제1 이미지(701)가 표시된 사용자는 현재 네트워크 TV 1(540) 앞에 위치하나 로그인되지 않으며, 제2 이미지(702)가 표시된 사용자는 현재 네트워크 TV 1(540) 앞에 위치하며 로그인된 사용자임을 나타낼 수 있다.
즉, 현재 네트워크 TV 1(540) 앞에 사용자 1, 사용자 3 및 사용자 4가 위치하고 있으며, 상기 사용자들 중 사용자 3이 로그인되어 있음을 알 수 있다.
사용자 목록 창(700)에는 현재 네트워크 TV 1(540) 앞에 위치하지 않는 등록 사용자 및 현재 네트워크 TV 1(540) 앞에 위치하는 미등록 사용자에 대한 정보도 함께 표시될 수 있다.
즉, 현재 네트워크 TV 1(540) 앞에 위치하지 않는 등록 사용자는 등록 사용자들 중 얼굴 영역이 검출되지 않은 사용자이며, 현재 네트워크 TV 1(540) 앞에 위치하는 미등록 사용자는 얼굴 영역이 검출된 사용자들 중 인증되지 않은 사용자일 수 있다.
상기와 같은 정보들은 네트워크 TV 1(540)로부터 전송되는 사용자 인증 결과에 포함되어 있을 수 있다.
도 17을 참조하면, 제3 이미지(703)가 표시된 사용자는 현재 네트워크 TV 1(540) 앞에 위치하는 미등록 사용자이며, 제4 이미지(704)가 표시된 사용자는 현재 네트워크 TV 1(540) 앞에 위치하지 않은 등록 사용자를 나타낼 수 있다.
즉, 네트워크 TV 2의 사용자는 도 17에 도시된 바와 같은 사용자 목록 창(700)을 이용하여, 사용자 1 내지 사용자 5가 현재 네트워크 TV 1(540) 앞에 위치하고 있으며, 상기 사용자들 중 사용자 1, 사용자 3 및 사용자 4가 등록된 사용자이며, 현재 사용자 3이 로그인되어 있고, 등록 사용자인 사용자 6은 현재 네트워크 TV 1(540) 앞에 위치하고 있지 않음을 알 수 있다.
그에 따라, 네트워크 TV 2의 사용자는 현재 네트워크 TV 1(540) 앞에 위치하는 등록 사용자들 둥 어느 하나를 선택하여, 상기 선택된 사용자와의 화상 통신을 시도 할 수 있다.
또한, 네트워크 TV 2는 복수의 네트워크 TV들 각각에 대한 사용자 인증 결과를 전송받을 수 있으며, 상기 전송된 복수의 네트워크 TV들에 대한 사용자 목록을 함께 표시할 수 있다.
도 18을 참조하면, 네트워크 TV 2는 네트워크 TV 1(540)뿐만 아니라 네트워크 TV 2 및 네트워크 TV 3 각각에 대한 사용자 인증 결과를 수신하며, 각 네트워크 TV에 대한 사용자 목록을 표시할 수 있다.
즉, 사용자 목록 창(700)은 네트워크 TV들 각각에 대응되는 서브 목록들(710, 720, 730)을 포함하고, 각 서브 목록은 해당 네트워크 TV의 사용자 인증 결과를 표시할 수 있다.
예를 들어, 네트워크 TV 1(540)에 대한 서브 목록(710)은 등록된 사용자들 중 사용자 1, 사용자 3 및 사용자 4가 현재 네트워크 TV 1(540) 앞에 위치하여 화상 통신이 가능한 상태이며, 사용자 3이 로그인되어 있고, 사용자 6은 현재 네트워크 TV 1(540) 앞에 위치하지 않음을 나타낼 수 있다.
또한, 네트워크 TV 3에 대한 서브 목록(720)은 등록된 사용자들 중 사용자 A 및 사용자 B가 현재 네트워크 TV 3 앞에 위치하여 화상 통신이 가능한 상태이며, 사용자 B가 로그인되어 있고, 사용자 C는 현재 네트워크 TV 3 앞에 위치하지 않음을 나타낼 수 있다.
한편, 네트워크 TV 4에 대한 서브 목록(730)은 등록된 사용자들 중 사용자 D,사용자 E 및 사용자 C가 현재 네트워크 TV 4 앞에 위치하여 화상 통신이 가능한 상태이며, 사용자 E 및 사용자 C가 로그인되어 있음을 나타낼 수 있다.
도 18에 도시된 바와 같은 사용자 목록 창(700)을 이용하여, 네트워크 TV 2의 사용자는 각 네트워크 TV의 사용자들의 위치 및 화상 통신 가능 여부를 용이하게 파악할 수 있다.
예를 들어, 네트워크 TV 2의 사용자가 사용자 C와 화상 통신을 하고자 하는 경우, 사용자 목록 창(700)을 이용해 사용자 C는 현재 네트워크 TV 3 앞에 위치하지 않고 네트워크 TV 4 앞에 위치하고 있음을 알 수 있으며, 그에 따라 네트워크 TV 4에 표시된 사용자 C(731)을 선택하여 화상 통신을 시도할 수 있다.
상기에서는 사용자의 얼굴 영역을 검출하여 사용자 인증을 수행하는 것에 대해 설명하였으나, 화상 통신 장치(10)에 구비된 카메라(100)를 이용해 사용자의 다른 신체 부분, 예를 들어 지문이나 홍체 등과 같이 사용자 식별이 가능한 부분을 촬영함에 의해 본 발명의 실시예에 따른 사용자 인증 방법이 동일하게 수행될 수 있다.
또한, 상술한 본 발명에 따른 사용자 인증 방법은 컴퓨터에서 실행되기 위한 프로그램으로 제작되어 컴퓨터가 읽을 수 있는 기록 매체에 저장될 수 있으며, 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.
컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고, 방송 수신 방법을 구현하기 위한 기능적인(function) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술분야의 프로그래머들에 의해 용이하게 추론될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형 실시가 가능한 것은 물론이고, 이러한 변형 실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
도 1은 화상 통신 시스템의 구성을 나타내는 블록도이다.
도 2는 본 발명의 실시예에 따른 화상 통신 장치의 구성을 나타내는 블록도이다.
도 3은 본 발명의 실시예에 따른 사용자 인증 방법을 나타내는 흐름도이다.
도 4는 사용자 인증 방법에 대한 제1 실시예를 설명하기 위한 도면이다.
도 5 내지 도 12는 사용자 인증 방법에 대한 제2 실시예를 설명하기 위한 도면이다.
도 13은 디스플레이 시스템의 구성에 대한 일실시예를 나타내는 블록도이다.
도 14는 본 발명의 실시예에 따른 디스플레이 장치의 구성을 나타내는 블록도이다.
도 15는 디스플레이 장치의 화면상에 표시되는 메뉴 화면의 구성에 대한 일실시예를 나타내는 도면이다.
도 16 내지 도 18은 사용자 인증 결과를 표시하는 방법에 대한 실시예들을 나타내는 도면들이다.

Claims (20)

  1. 화상 통신 장치에서 사용자를 인증하는 방법에 있어서,
    영상 데이터를 입력받는 단계;
    상기 입력된 영상 데이터를 이용하여, 상기 영상 데이터가 획득된 영역 내에 존재하는 얼굴 영역을 검출하는 단계;
    상기 검출된 얼굴 영역이 2 이상인 경우, 상기 검출된 얼굴 영역들 각각에 대응되는 정보와 기등록된 정보를 비교하여 사용자 인증을 수행하는 단계;
    상기 사용자 인증 결과에 따라, 검출된 얼굴 영역들을 인증된 사용자와 인증되지 않은 사용자로 구분하여 화면상에 표시하는 단계; 및
    상기 검출된 얼굴 영역들 중 적어도 하나의 인증된 사용자에 대응되는 사용자의 접근(access)을 허용하는 단계를 포함하는 사용자 인증 방법.
  2. 제1항에 있어서, 상기 사용자 인증 단계는
    상기 검출된 얼굴 영역의 특징 정보를 추출하는 단계;
    상기 추출된 얼굴 영역의 특징 정보와 상기 기등록된 정보를 비교하는 단계; 및
    상기 두 정보가 일치하는 경우, 상기 검출된 얼굴 영역에 대응되는 사용자를 인증하는 단계를 포함하는 사용자 인증 방법.
  3. 삭제
  4. 제1항에 있어서, 상기 표시 단계는
    상기 검출된 얼굴 영역들 각각에 대한 상기 사용자 인증 결과를 표시하는 사용자 인증 방법.
  5. 삭제
  6. 제1항에 있어서,
    상기 인증된 사용자로 표시된 얼굴 영역들 중 어느 하나를 선택받는 단계를 더 포함하는 사용자 인증 방법.
  7. 제6항에 있어서, 상기 접근 허용 단계는
    상기 선택된 얼굴 영역에 대응되는 사용자에 대해, 상기 화상 통신 장치에 대한 접근을 허용하는 사용자 인증 방법.
  8. 제1항에 있어서,
    상기 인증되지 않은 사용자로 표시된 얼굴 영역을 선택받는 단계; 및
    상기 선택된 얼굴 영역의 특징 정보를 등록하는 단계를 더 포함하는 사용자 인증 방법.
  9. 제1항에 있어서, 상기 접근 허용 단계는
    상기 인증된 사용자들 중 가장 최근에 로그인(log-in)한 사용자에 대해, 상기 화상 통신 장치에 대한 접근을 허용하는 사용자 인증 방법.
  10. 제1항에 있어서,
    상기 사용자 인증 결과를 외부 기기로 전송하는 단계를 더 포함하는 사용자 인증 방법.
  11. 제10항에 있어서,
    상기 사용자 인증 결과는 외부 디스플레이 장치에서 표시되는 사용자 인증 방법.
  12. 제11항에 있어서,
    상기 사용자 인증 결과는 서버를 통해 상기 외부 디스플레이 장치로 전송되는 사용자 인증 방법.
  13. 영상 데이터를 획득하는 카메라;
    상기 획득된 영상 데이터를 이용하여, 상기 영상 데이터가 획득된 영역 내에 존재하는 2 이상의 얼굴 영역들을 검출하는 얼굴검출부;
    상기 검출된 얼굴 영역들 각각의 특징 정보를 추출하는 특징추출부;
    등록된 얼굴 영역에 대한 정보를 저장하는 저장부;
    상기 추출된 얼굴 영역들 각각의 특징 정보와 상기 저장부에 저장된 정보를 비교하여, 상기 검출된 얼굴 영역들에 대한 사용자 인증을 수행하고, 상기 검출된 얼굴 영역들 중 적어도 하나의 인증된 사용자에 대응되는 사용자의 접근을 허용하는 사용자인증부; 및
    상기 사용자 인증 결과에 따라, 상기 검출된 얼굴 영역들을 인증된 사용자와 인증되지 않은 사용자로 구분하여 표시하는 디스플레이부를 포함하는 화상 통신 장치.
  14. 삭제
  15. 삭제
  16. 제13항에 있어서,
    상기 인증된 사용자로 표시된 얼굴 영역들 중 로그인할 사용자의 얼굴 영역을 선택받는 사용자입력부를 더 포함하는 화상 통신 장치.
  17. 제13항에 있어서,
    상기 인증되지 않은 사용자로 표시된 얼굴 영역을 선택받는 사용자입력부를 더 포함하고,
    상기 선택된 얼굴 영역에 대해 추출된 특징 정보는 상기 저장부에 저장되는 화상 통신 장치.
  18. 삭제
  19. 삭제
  20. 삭제
KR1020090110889A 2009-11-17 2009-11-17 사용자 인증 방법 및 그를 이용한 화상 통신 장치 및 디스플레이 장치 KR101681321B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020090110889A KR101681321B1 (ko) 2009-11-17 2009-11-17 사용자 인증 방법 및 그를 이용한 화상 통신 장치 및 디스플레이 장치
CN201080052117.4A CN102612841B (zh) 2009-11-17 2010-06-10 用于用户鉴别的方法,和视频通信设备及其显示设备
EP10831706.6A EP2502435B1 (en) 2009-11-17 2010-06-10 Method for user authentication, and video communication apparatus and display apparatus thereof
PCT/KR2010/003749 WO2011062339A1 (en) 2009-11-17 2010-06-10 Method for user authentication, and video communication apparatus and display apparatus thereof
US12/814,297 US8311200B2 (en) 2009-11-17 2010-06-11 Method for user authentication, and video communication apparatus and display apparatus thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090110889A KR101681321B1 (ko) 2009-11-17 2009-11-17 사용자 인증 방법 및 그를 이용한 화상 통신 장치 및 디스플레이 장치

Publications (2)

Publication Number Publication Date
KR20110054291A KR20110054291A (ko) 2011-05-25
KR101681321B1 true KR101681321B1 (ko) 2016-11-30

Family

ID=44011033

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090110889A KR101681321B1 (ko) 2009-11-17 2009-11-17 사용자 인증 방법 및 그를 이용한 화상 통신 장치 및 디스플레이 장치

Country Status (5)

Country Link
US (1) US8311200B2 (ko)
EP (1) EP2502435B1 (ko)
KR (1) KR101681321B1 (ko)
CN (1) CN102612841B (ko)
WO (1) WO2011062339A1 (ko)

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110060295A (ko) * 2009-11-30 2011-06-08 삼성전자주식회사 디지털 촬영 장치 및 이의 제어 방법
JP5740972B2 (ja) * 2010-09-30 2015-07-01 ソニー株式会社 情報処理装置および情報処理方法
US8976218B2 (en) * 2011-06-27 2015-03-10 Google Technology Holdings LLC Apparatus for providing feedback on nonverbal cues of video conference participants
US9077848B2 (en) 2011-07-15 2015-07-07 Google Technology Holdings LLC Side channel for employing descriptive audio commentary about a video conference
US8917306B2 (en) * 2011-07-29 2014-12-23 Cisco Technology, Inc. Previewing video data in a video communication environment
KR20150068488A (ko) 2011-09-12 2015-06-19 인텔 코포레이션 공유된 장치 및 개인용 장치를 이용한 개인맞춤화된 사용자 기능의 협력적 제공
US20130083151A1 (en) 2011-09-30 2013-04-04 Lg Electronics Inc. Electronic device and method for controlling electronic device
KR101271081B1 (ko) * 2011-10-31 2013-06-04 대성전기공업 주식회사 운전자 인식 장치 및 이의 제어 방법
US8805029B1 (en) * 2011-11-30 2014-08-12 Google Inc. Visual security mechanism for a device with a front-facing camera
JP5284504B1 (ja) * 2012-03-02 2013-09-11 株式会社東芝 電子機器、電子機器の制御方法、制御プログラム及び記録媒体
US9591346B2 (en) * 2012-05-14 2017-03-07 Samsung Electronics Co., Ltd. Content delivery system with content sharing mechanism and method of operation thereof
US8850466B2 (en) 2013-02-12 2014-09-30 Samsung Electronics Co., Ltd. Method and system for the determination of a present viewer in a smart TV
JP6295534B2 (ja) * 2013-07-29 2018-03-20 オムロン株式会社 プログラマブル表示器、制御方法、およびプログラム
JP6307807B2 (ja) * 2013-07-29 2018-04-11 オムロン株式会社 プログラマブル表示器、表示制御方法、およびプログラム
JP6481249B2 (ja) * 2013-07-29 2019-03-13 オムロン株式会社 プログラマブル表示器、制御方法、およびプログラム
JP5909215B2 (ja) * 2013-08-27 2016-04-26 シャープ株式会社 認証装置及び画像形成装置
JP6136859B2 (ja) * 2013-11-01 2017-05-31 富士ゼロックス株式会社 情報処理装置及びプログラム
CN105095833B (zh) * 2014-05-08 2019-03-15 中国科学院声学研究所 用于人脸识别的网络构建方法、识别方法及系统
US9742767B1 (en) * 2014-09-25 2017-08-22 Google Inc. Systems, methods, and media for authenticating multiple devices
CN104618616B (zh) * 2015-01-16 2018-04-13 四川联友电讯技术有限公司 基于语音特征提取的电话会议与会者身份识别系统及方法
CN104601835A (zh) * 2015-01-16 2015-05-06 四川联友电讯技术有限公司 基于人脸识别的电话会议与会者身份识别系统及方法
US9465812B1 (en) * 2015-03-19 2016-10-11 Dana Bennet Robinson Systems and methods for management of interred remains
CN104917997B (zh) * 2015-07-07 2018-06-15 山东耀智信息科技有限公司 视频通话装置及方法
CN105046133A (zh) * 2015-07-21 2015-11-11 深圳市元征科技股份有限公司 一种图像显示方法及车载终端
KR101837152B1 (ko) * 2015-10-14 2018-03-09 주식회사 하렉스인포텍 가변 키패드와 얼굴인식을 이용한 본인 인증 방법 및 시스템
JP6974032B2 (ja) * 2017-05-24 2021-12-01 シャープ株式会社 画像表示装置、画像形成装置、制御プログラムおよび制御方法
JP6660030B2 (ja) * 2017-06-22 2020-03-04 カシオ計算機株式会社 情報処理装置、人工知能識別方法及びプログラム
JP7104291B2 (ja) * 2017-06-30 2022-07-21 キヤノンマーケティングジャパン株式会社 情報処理システム、情報処理方法、プログラム
JP7299543B2 (ja) * 2017-06-30 2023-06-28 キヤノンマーケティングジャパン株式会社 情報処理システム、情報処理方法、プログラム
CN107770478A (zh) * 2017-10-27 2018-03-06 广东欧珀移动通信有限公司 视频通话方法及相关产品
CN108549899B (zh) * 2018-03-07 2022-02-15 中国银联股份有限公司 一种图像识别方法及装置
JP6813537B2 (ja) * 2018-06-14 2021-01-13 ファナック株式会社 コネクタ接続用治具
CN113271428A (zh) * 2020-09-30 2021-08-17 常熟九城智能科技有限公司 一种视频会议用户鉴权方法、装置及系统
US20230106888A1 (en) * 2021-10-06 2023-04-06 Bi Incorporated Systems and Methods for Biometric Based Authentication of Video Conference Participants
US11968476B2 (en) * 2021-10-31 2024-04-23 Zoom Video Communications, Inc. Virtual environment streaming to a video communications platform
CN114390240B (zh) * 2021-12-09 2022-10-28 慧之安信息技术股份有限公司 一种视频会议的安全处理方法和装置

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010055058A1 (en) 2000-06-08 2001-12-27 Rajko Milovanovic Method and system for video telephony
KR20050045773A (ko) * 2003-11-12 2005-05-17 (주)버추얼미디어 3차원 얼굴 표현 기능을 갖는 모바일 단말기 상에서의얼굴 인증과 검색 방법 및 장치
US8370639B2 (en) 2005-06-16 2013-02-05 Sensible Vision, Inc. System and method for providing secure access to an electronic device using continuous facial biometrics
US8079079B2 (en) * 2005-06-29 2011-12-13 Microsoft Corporation Multimodal authentication
KR100725771B1 (ko) * 2005-09-23 2007-06-08 삼성전자주식회사 휴대용 단말기용 얼굴 인식 및 인증 장치 및 방법
KR20070068612A (ko) * 2005-12-27 2007-07-02 주식회사 팬택 화상 통화를 수행하는 이동통신단말기에서의 출입문 제어방법 및 그 장치
US8487976B2 (en) 2006-01-24 2013-07-16 Lifesize Communications, Inc. Participant authentication for a videoconference
US8120638B2 (en) * 2006-01-24 2012-02-21 Lifesize Communications, Inc. Speech to text conversion in a videoconference
US7847815B2 (en) 2006-10-11 2010-12-07 Cisco Technology, Inc. Interaction based on facial recognition of conference participants
KR101513616B1 (ko) * 2007-07-31 2015-04-20 엘지전자 주식회사 이동 단말기 및 그 영상정보 관리방법
CN100561502C (zh) * 2007-12-18 2009-11-18 北京中星微电子有限公司 一种人脸认证的方法和装置
CN101329724B (zh) * 2008-07-29 2010-06-09 上海天冠卫视技术研究所 一种优化的人脸识别方法和装置
EP2394235A2 (en) * 2009-02-06 2011-12-14 Oculis Labs, Inc. Video-based privacy supporting system
US20110047377A1 (en) * 2009-08-19 2011-02-24 Harris Corporation Secure digital communications via biometric key generation

Also Published As

Publication number Publication date
US8311200B2 (en) 2012-11-13
EP2502435A4 (en) 2014-05-07
US20110115877A1 (en) 2011-05-19
WO2011062339A1 (en) 2011-05-26
KR20110054291A (ko) 2011-05-25
EP2502435A1 (en) 2012-09-26
CN102612841A (zh) 2012-07-25
EP2502435B1 (en) 2019-01-09
CN102612841B (zh) 2015-02-18

Similar Documents

Publication Publication Date Title
KR101681321B1 (ko) 사용자 인증 방법 및 그를 이용한 화상 통신 장치 및 디스플레이 장치
KR101673032B1 (ko) 화상 통신 방법 및 그를 이용한 디지털 ｔｖ
KR101728911B1 (ko) 화상 통화 연결 방법, 그를 이용한 화상 통신 장치 및 디스플레이 장치
US9398325B2 (en) Intelligent remote control
US8818054B2 (en) Avatars in social interactive television
US9621943B2 (en) Multimedia processing resource with interactive voice response
US20090217356A1 (en) Electronic permission slips for controlling access to multimedia content
US20100050270A1 (en) Control of Access to Content Received from a Multimedia Content Distribution Network
US20150304729A1 (en) Method and apparatus for selection and presentation of media content
US20130263204A1 (en) Aural indication of remote control commands
CN104244102A (zh) 智能型电视的信息显示方法
KR101819499B1 (ko) 멀티미디어 장치와 복수 개의 이종 이미지 센서 그리고 그 제어방법
KR20120051210A (ko) 멀티미디어 장치에서 빔포밍을 이용한 최적 시청환경 제공 방법 및 장치
CN111131863A (zh) 令牌发放方法、装置及系统
US20120162347A1 (en) Image Display Apparatus, Communications Control Method of the Same, and Communications Control System
JP2010283559A (ja) 入力切換装置及びテレビジョン受像機
KR20150012677A (ko) 멀티미디어 장치 및 그의 사용자 명령 예측 방법
KR20110117961A (ko) 영상 전송 장치 및 영상 전송 방법
KR101636576B1 (ko) 화상 통화 계정 관리 방법, 그를 이용한 화상 통신 장치 및 디스플레이 장치
KR20110072629A (ko) 화상 통화 연결 방법 및 그를 이용한 디스플레이 장치
KR100812947B1 (ko) 패턴인식기능이 마련된 텔레비전시스템 및 이의 제어방법
CN118102042A (zh) 一种节目显示方法及显示设备
KR20110072289A (ko) 통화 내용 관리 방법, 그를 이용한 화상 통신 장치 및 디스플레이 장치
WO2015110253A1 (en) Method of generating a resource identifier, receiver, communication device and system
KR20140077493A (ko) 개인식별 장치 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20191014

Year of fee payment: 4