KR101453908B1 - Mobile terminal and operation control method thereof - Google Patents

Mobile terminal and operation control method thereof Download PDF

Info

Publication number
KR101453908B1
KR101453908B1 KR1020080059708A KR20080059708A KR101453908B1 KR 101453908 B1 KR101453908 B1 KR 101453908B1 KR 1020080059708 A KR1020080059708 A KR 1020080059708A KR 20080059708 A KR20080059708 A KR 20080059708A KR 101453908 B1 KR101453908 B1 KR 101453908B1
Authority
KR
South Korea
Prior art keywords
image
camera
portable terminal
user
face
Prior art date
Application number
KR1020080059708A
Other languages
Korean (ko)
Other versions
KR20100000274A (en
Inventor
손주희
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020080059708A priority Critical patent/KR101453908B1/en
Publication of KR20100000274A publication Critical patent/KR20100000274A/en
Application granted granted Critical
Publication of KR101453908B1 publication Critical patent/KR101453908B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72463—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions to restrict the functionality of the device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/38—Displays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/52—Details of telephonic subscriber devices including functional features of a camera

Abstract

휴대 단말기 및 그 동작 제어방법에 관한 것이다. 본 발명은 카메라를 포함하는 휴대 단말기에서, 카메라에 의해 촬영된 사용자의 얼굴 이미지를 휴대 단말기에 대한 인증이미지로서 저장하는 단계, 휴대 단말기의 잠금 상태에서, 카메라를 이용하여 현재 사용자의 얼굴을 촬영하여 표시하는 단계, 현재 사용자의 얼굴 이미지가 인증이미지로서 판단된 경우, 잠금 상태를 해제하고 잠금 상태가 해제된 화면을 표시하는 단계를 포함한다. 본 발명에 따르면, 반복적인 사용자 입력없이, 휴대 단말기의 사용자만이 인증이미지를 이용하여 휴대 단말기를 이용할 수 있다.And a method of controlling the operation of the portable terminal. The method includes storing a face image of a user photographed by a camera as an authentication image for a portable terminal in a portable terminal including a camera, capturing a face of the current user using the camera in a locked state of the portable terminal And displaying the screen in which the locked state is canceled when the face image of the current user is determined as the authenticated image. According to the present invention, only the user of the portable terminal can use the portable terminal using the authentication image without repetitive user input.

안면인식, 인증, 얼굴 이미지 Facial recognition, authentication, facial image

Description

휴대 단말기 및 그 동작 제어방법{Mobile terminal and operation control method thereof}[0001] The present invention relates to a mobile terminal and an operation control method thereof,

본 발명은 휴대 단말기 및 그 동작제어 방법에 관한 것으로, 보다 상세하게는 안면인식 기술을 이용하여 휴대 단말기의 잠금기능을 설정함으로서, 사용자의 얼굴 이미지를 인증이미지로서 사용하는 휴대 단말기 및 그 동작제어 방법에 관한 것이다.The present invention relates to a portable terminal and a method for controlling the operation thereof, and more particularly, to a portable terminal using a face image of a user as an authentication image by setting a locking function of the portable terminal using a face recognition technology, .

휴대 단말기는 휴대가 가능하면서 음성 및 영상 통화를 수행할 수 있는 기능, 정보를 입출력할 수 있는 기능, 및 데이터를 저장할 수 있는 기능 등을 하나 이상 갖춘 휴대용 기기이다.A portable terminal is a portable device having at least one function that can carry out voice and video communication, a function to input and output information, and a function to store data while being portable.

이러한 멀티미디어 기기의 형태로 구현된 휴대 단말기는, 복잡한 기능을 구현하기 위해 하드웨어나 소프트웨어적 측면에서 새로운 시도들이 다양하게 적용되고 있다. 휴대 단말기를 이용하여 단순한 문자 송수신, 음성통화 뿐 아니라 영상통화, 웹서비스, 컨텐츠 다운로드 등의 유료 서비스가 가능해지면서, 상기와 같은 다양한 유료의 통신 이벤트가 타인에 의해 사용되지 않도록 보호될 필요성이 증가하였다.In order to realize a complicated function, a mobile terminal implemented in the form of a multimedia device is being applied variously in terms of hardware and software. It becomes possible to provide not only a simple character transmission / reception and a voice call but also a pay service such as a video call, a web service and a content download by using a portable terminal, and thus the necessity of protecting such various paid communication events from being used by others has increased .

또한 휴대 단말기가 일상 생활과 밀접한 관계를 갖게 되면서, 개인의 사생활 보호 즉, 타인의 휴대 단말기에 포함된 정보에 대한 접근을 제한할 필요성도 증가하였다.Also, since the portable terminal has a close relationship with daily life, there is an increasing need to restrict privacy of an individual, that is, to restrict access to information contained in a mobile terminal of another person.

일반적으로 휴대 단말기는 비밀번호나 아이디와 같은 사용자 식별이 가능한 인증키를 이용하여, 타인의 휴대 단말기 사용을 제한하였다. 그러나 휴대 단말기 또는 특정 메뉴에 대한 잠금 및 잠금 해제에 있어서, 매번 비밀번호 또는 아이디를 입력해야하는 불편이 발생하고, 인증키의 유출로 인한 타인의 휴대 단말기 사용을 막기 어렵다는 문제점이 있다.Generally, the portable terminal restricts the use of the portable terminal by using an authentication key that can identify the user such as a password or an ID. However, in locking and unlocking the portable terminal or the specific menu, it is inconvenient to input the password or ID each time, and it is difficult to prevent the use of the portable terminal of the other person due to leakage of the authentication key.

따라서 휴대 단말기의 잠금 및 잠금해제에 있어서, 반복적으로 비밀번호나 아이디를 입력하지 않고 인증이미지를 이용하여 인증키 입력의 효과를 발생시킬 수 있으며, 휴대 단말기의 사용자만이 인증키를 이용할 수 있는 방안이 요구된다.Accordingly, in locking and unlocking the portable terminal, it is possible to generate the effect of inputting the authentication key using the authentication image without repeatedly inputting the password or ID, and a method that only the user of the portable terminal can use the authentication key Is required.

따라서 본 발명의 목적은 사용자의 얼굴 이미지를 인증이미지로서 저장하고, 현재 사용자의 얼굴 이미지를 분석하여 인증이미지와 비교하여 휴대 단말기의 잠금 및 잠금 해제를 수행하는 휴대 단말기 및 그 동작 제어방법을 제공함에 있다.Accordingly, an object of the present invention is to provide a mobile terminal that stores a face image of a user as an authentication image, analyzes the face image of the current user and compares the face image with an authentication image to perform locking and unlocking of the mobile terminal, and an operation control method thereof have.

상기 목적을 달성하기 위한 본 발명은, 휴대 단말기 동작 제어방법으로서, 카메라를 포함하는 휴대 단말기 동작 제어방법에 있어서, 상기 카메라에 의해 촬영된 사용자의 얼굴 이미지를 상기 휴대 단말기에 대한 인증이미지로서 저장하는 단계, 상기 휴대 단말기의 잠금 상태에서, 상기 카메라를 이용하여 현재 사용자의 얼굴을 촬영하여 표시하는 단계, 상기 현재 사용자의 얼굴 이미지가 상기 인증이미지로서 판단된 경우, 상기 잠금 상태를 해제하고 상기 잠금 상태가 해제된 화면을 표시하는 단계를 포함한다.According to another aspect of the present invention, there is provided a method for controlling an operation of a mobile terminal, the method comprising: storing a face image of a user photographed by the camera as an authentication image for the mobile terminal; Displaying a face image of the current user using the camera in a locked state of the portable terminal, displaying the face image of the current user when the face image of the current user is determined as the authenticated image, releasing the locked state, And displaying the released screen.

또한, 상기 목적을 달성하기 위한 본 발명은, 휴대 단말기 동작 제어방법으로서, 카메라를 포함하는 휴대 단말기 동작 제어방법에 있어서, 상기 카메라에 의해 촬영된 사용자의 하나 이상의 얼굴 표정 이미지를 상기 휴대 단말기의 잠금상태에 대한 인증이미지로서 저장하고, 저장된 얼굴 표정 이미지 각각에 대해 특정메뉴를 설정하는 단계, 상기 휴대 단말기의 잠금 상태에서, 상기 카메라를 이용하여 현재 사용자의 얼굴 표정을 촬영하여 표시하는 단계, 상기 현재 사용자의 얼굴 표정 이미지가 상기 인증이미지 중 하나로 판단된 경우, 상기 잠금 상태를 해제하고 상 기 현재 사용자의 얼굴 표정 이미지에 대응하는 특정메뉴의 실행화면을 표시하는 단계를 포함한다.In accordance with another aspect of the present invention, there is provided a method of controlling an operation of a mobile terminal including a camera, the method comprising: displaying at least one facial expression image of a user photographed by the camera, Storing a face image of a current user as an authentication image for a state and setting a specific menu for each stored facial expression image; capturing and displaying a facial expression of a current user using the camera in a locked state of the portable terminal; And releasing the locked state and displaying an execution screen of the specific menu corresponding to the facial expression image of the current user when the facial expression image of the user is determined to be one of the authenticated images.

또한, 상기 목적을 달성하기 위한 본 발명은, 휴대 단말기 동작 제어방법으로서, 카메라를 포함하는 휴대 단말기 동작 제어방법에 있어서, 상기 카메라에 의해 촬영된 사용자의 얼굴 이미지를 상기 휴대 단말기에 대한 인증이미지로서 저장하는 단계, 특정메뉴의 실행화면에서, 상기 카메라를 이용하여 현재 사용자의 얼굴을 촬영하여 표시하는 단계, 상기 현재 사용자의 얼굴 이미지가 상기 인증이미지로서 판단된 경우, 상기 특정메뉴의 실행화면을 잠금 상태로 변경하는 단계를 포함한다.According to another aspect of the present invention, there is provided a method of controlling a mobile terminal operation, the method comprising: receiving a face image of a user photographed by the camera as an authentication image for the mobile terminal; Displaying an image of a face of a current user using the camera on an execution screen of a specific menu and displaying the face of the current user on the execution screen of the specific menu; State.

또한, 상기 목적을 달성하기 위한 본 발명은, 휴대 단말기로서, 사용자의 얼굴 및 현재 사용자의 얼굴 중 어느 하나를 촬영하는 카메라, 상기 카메라에 의해 촬영된 현재 사용자의 얼굴을 표시하는 디스플레이부, 상기 카메라에 의해 촬영된 사용자의 얼굴 이미지를 휴대 단말기에 대한 인증이미지로서 저장하고, 상기 카메라에 의해 촬영된 현재 사용자의 얼굴 이미지가 상기 인증이미지로서 판단된 경우, 상기 잠금 상태를 해제하고 상기 잠금 상태가 해제된 화면을 상기 디스플레이부에 표시하는 제어부를 포함한다.According to another aspect of the present invention, there is provided a portable terminal comprising: a camera for photographing a face of a user and a face of a current user; a display unit for displaying a face of a current user photographed by the camera; When the face image of the current user photographed by the camera is determined as the authenticated image, releases the locked state and the locked state is released And displaying the screen on the display unit.

또한, 상기 목적을 달성하기 위한 본 발명은, 휴대 단말기로서, 사용자의 얼굴 표정 및 현재 사용자의 얼굴 표정 중 어느 하나를 촬영하는 카메라, 상기 카메라에 의해 촬영된 현재 사용자의 얼굴 표정을 표시하는 디스플레이부, 상기 카메라에 의해 촬영된 사용자의 하나 이상의 얼굴 표정 이미지를 상기 휴대 단말기의 잠 금상태에 대한 인증이미지로서 저장하고, 저장된 얼굴 표정 이미지 각각에 대해 특정메뉴를 설정하고, 상기 카메라에 의해 촬영된 현재 사용자의 얼굴 표정 이미지가 상기 인증이미지 중 하나로 판단된 경우, 상기 잠금 상태를 해제하고 상기 현재 사용자의 얼굴 표정 이미지에 대응하는 특정메뉴의 실행화면을 상기 디스플레이부에 표시하는 제어부를 포함한다.According to another aspect of the present invention, there is provided a portable terminal including a camera for photographing a facial expression of a user and a facial expression of a current user, a display unit for displaying facial expressions of a current user photographed by the camera, , Storing one or more facial expression images of a user photographed by the camera as an authentication image for a locked state of the portable terminal, setting a specific menu for each of the stored facial expression images, And a controller for canceling the locked state and displaying an execution screen of a specific menu corresponding to the facial expression image of the current user on the display unit when the facial expression image of the user is determined to be one of the authenticated images.

또한, 상기 목적을 달성하기 위한 본 발명은, 휴대 단말기로서, 사용자의 얼굴 및 현재 사용자의 얼굴 중 어느 하나를 촬영하는 카메라, 상기 카메라에 의해 촬영된 현재 사용자의 얼굴을 표시하는 디스플레이부, 상기 카메라에 의해 촬영된 사용자의 얼굴 이미지를 상기 휴대 단말기에 대한 인증이미지로서 저장하고, 특정메뉴의 실행화면에서, 상기 카메라에 의해 촬영된 현재 사용자의 얼굴이 상기 인증이미지로서 판단된 경우, 상기 특정메뉴의 실행화면을 잠금 상태로 변경하는 제어부를 포함한다.According to another aspect of the present invention, there is provided a portable terminal comprising: a camera for photographing a face of a user and a face of a current user; a display unit for displaying a face of a current user photographed by the camera; When the face of the current user photographed by the camera is judged as the authenticated image on the execution screen of the specific menu, the face image of the user of the specific menu And a control unit for changing the execution screen to a locked state.

본 발명에 따르면, 반복적인 사용자 입력없이 인증이미지를 입력하여 인증키 입력과 동일한 효과를 발생시킬 수 있으며, 휴대 단말기의 진정 사용자만이 인증이미지를 이용하여 휴대 단말기를 이용할 수 있다.According to the present invention, an authentication image can be input without repetitive user input to generate the same effect as the authentication key input, and only a genuine user of the portable terminal can use the portable terminal using the authentication image.

이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다. Hereinafter, the present invention will be described in detail with reference to the drawings.

본 명세서에서 기술되는 휴대 단말기에는, 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션 등이 포함된다.The portable terminal described in this specification includes a mobile phone, a smart phone, a notebook computer, a digital broadcasting terminal, a PDA (Personal Digital Assistants), a PMP (Portable Multimedia Player), and navigation.

도 1은 본 발명의 일실시예에 따른 휴대 단말기의 블럭 구성도(block diagram)이다. 도 1을 참조하여 본 발명의 일실시예에 따른 휴대 단말기를 기능에 따른 구성요소 관점에서 살펴보겠다.FIG. 1 is a block diagram of a portable terminal according to an exemplary embodiment of the present invention. Referring to FIG. Referring to FIG. 1, a mobile terminal according to an exemplary embodiment of the present invention will be described in terms of its functional components.

도 1을 참조하면, 본 휴대 단말기(100)는, 무선 통신부(110), A/V(Audio/Video) 입력부(120), 사용자 입력부(130), 센싱부(140), 출력부(150), 메모리(160), 인터페이스부(170), 제어부(180), 및 전원 공급부(190)를 포함할 수 있다. 이와 같은 구성요소들은 실제 응용에서 구현될 때 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다.1, the portable terminal 100 includes a wireless communication unit 110, an A / V input unit 120, a user input unit 130, a sensing unit 140, an output unit 150, A memory 160, an interface unit 170, a control unit 180, and a power supply unit 190. When such components are implemented in practical applications, two or more components may be combined into one component, or one component may be divided into two or more components as necessary.

무선 통신부(110)는 방송수신 모듈(111), 이동통신 모듈(113), 무선 인터넷 모듈(115), 근거리 통신 모듈(117), 및 GPS 모듈(119) 등을 포함할 수 있다.The wireless communication unit 110 may include a broadcast receiving module 111, a mobile communication module 113, a wireless Internet module 115, a short distance communication module 117, and a GPS module 119.

방송수신 모듈(111)은 방송 채널을 통하여 외부의 방송관리 서버로부터 방송 신호 및 방송관련 정보 중 적어도 하나를 수신한다. 이때, 방송 채널은 위성 채널, 지상파 채널 등을 포함할 수 있다. 방송관리 서버는, 방송 신호 및 방송 관련 정보 중 적어도 하나를 생성하여 송신하는 서버나, 기 생성된 방송 신호 및 방송관련 정보 중 적어도 하나를 제공받아 단말기에 송신하는 서버를 의미할 수 있다.The broadcast receiving module 111 receives at least one of a broadcast signal and broadcast related information from an external broadcast management server through a broadcast channel. At this time, the broadcast channel may include a satellite channel, a terrestrial channel, and the like. The broadcast management server may refer to a server for generating and transmitting at least one of a broadcast signal and broadcast related information and a server for receiving at least one of the generated broadcast signal and broadcast related information and transmitting the broadcast signal to the terminal.

방송관련 정보는, 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미할 수 있다. 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데 이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다. 방송관련 정보는, 이동통신망을 통하여도 제공될 수 있으며, 이 경우에는 이동통신 모듈(113)에 의해 수신될 수 있다. 방송관련 정보는 다양한 형태로 존재할 수 있다. 예를 들어, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.The broadcast-related information may mean information related to a broadcast channel, a broadcast program, or a broadcast service provider. The broadcast signal may include a TV broadcast signal, a radio broadcast signal, a data broadcast signal, and a broadcast signal in which a data broadcast signal is combined with a TV broadcast signal or a radio broadcast signal. The broadcast-related information can also be provided through a mobile communication network, in which case it can be received by the mobile communication module 113. Broadcast-related information can exist in various forms. For example, an EPG (Electronic Program Guide) of DMB (Digital Multimedia Broadcasting) or an ESG (Electronic Service Guide) of Digital Video Broadcast-Handheld (DVB-H).

방송수신 모듈(111)은, 각종 방송 시스템을 이용하여 방송 신호를 수신하는데, 특히, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 또한, 방송수신 모듈(111)은, 이와 같은 디지털 방송 시스템뿐만 아니라 방송 신호를 제공하는 모든 방송 시스템에 적합하도록 구성될 수 있다. 방송수신 모듈(111)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리(160)에 저장될 수 있다.The broadcast receiving module 111 receives broadcast signals using various broadcasting systems. In particular, the broadcast receiving module 111 may be a Digital Multimedia Broadcasting-Terrestrial (DMB-T), a Digital Multimedia Broadcasting-Satellite (DMB-S) ), Digital Video Broadcast-Handheld (DVB-H), Integrated Services Digital Broadcast-Terrestrial (ISDB-T), and the like. In addition, the broadcast receiving module 111 may be configured to be suitable for all broadcasting systems that provide broadcasting signals, as well as the digital broadcasting system. The broadcast signal and / or broadcast related information received through the broadcast receiving module 111 may be stored in the memory 160.

이동통신 모듈(113)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기서, 무선 신호는, 음성 호 신호, 화상 통화 호 신호, 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다. The mobile communication module 113 transmits and receives a radio signal to at least one of a base station, an external terminal, and a server on a mobile communication network. Here, the wireless signal may include various types of data according to a voice call signal, a video call signal, or a text / multimedia message transmission / reception.

무선 인터넷 모듈(115)은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 무선 인터넷 모듈(115)은 휴대 단말기(100)에 내장되거나 외장될 수 있다. 근거리 통신 모듈(117)은 근거리 통신을 위한 모듈을 말한다. 근거리 통신 기술로 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee) 등이 이용될 수 있다. GPS(Global Position System) 모듈(119)은 복수 개의 GPS 인공위성으로부터 위치 정보를 수신한다.The wireless Internet module 115 refers to a module for wireless Internet access, and the wireless Internet module 115 can be embedded in the mobile terminal 100 or externally. The short-range communication module 117 refers to a module for short-range communication. Bluetooth, radio frequency identification (RFID), infrared data association (IrDA), ultra wideband (UWB), ZigBee, and the like can be used as the short distance communication technology. A GPS (Global Position System) module 119 receives position information from a plurality of GPS satellites.

A/V(Audio/Video) 입력부(120)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(121)와 마이크(123) 등이 포함될 수 있다. 카메라(121)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 그리고, 처리된 화상 프레임은 디스플레이부(151)에 표시될 수 있다.The A / V (Audio / Video) input unit 120 is for inputting an audio signal or a video signal, and may include a camera 121 and a microphone 123. The camera 121 processes image frames such as still images or moving images obtained by the image sensor in the video communication mode or the photographing mode. Then, the processed image frame can be displayed on the display unit 151. [

카메라(121)에서 처리된 화상 프레임은 메모리(160)에 저장되거나 무선 통신부(110)를 통하여 외부로 전송될 수 있다. 카메라(121)는 단말기의 구성 태양에 따라 2개 이상이 구비될 수도 있다.The image frame processed by the camera 121 may be stored in the memory 160 or transmitted to the outside through the wireless communication unit 110. [ The camera 121 may be equipped with two or more cameras according to the configuration of the terminal.

마이크(123)는 통화모드 또는 녹음모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 입력받아 전기적인 음성 데이터로 처리한다. 그리고, 처리된 음성 데이터는 통화 모드인 경우 이동통신 모듈(113)를 통하여 이동통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 마이크 (123)는 외부의 음향 신호를 입력받는 과정에서 발생하는 잡음(noise)를 제거하기 위한 다양한 잡음 제거 알고리즘이 사용될 수 있다.The microphone 123 receives an external sound signal by a microphone in a communication mode, a recording mode, a voice recognition mode, or the like, and processes it as electrical voice data. The processed voice data can be converted into a form that can be transmitted to the mobile communication base station through the mobile communication module 113 and output when the voice data is in the call mode. The microphone 123 may be a variety of noise reduction algorithms for eliminating noise generated in receiving an external sound signal.

사용자 입력부(130)는 사용자가 단말기의 동작 제어를 위하여 입력하는 키 입력 데이터를 발생시킨다. 사용자 입력부(130)는 키 패드(key pad), 돔 스위치(dome switch), 터치 패드(정압/정전), 조그 휠, 조그 스위치, 핑거 마우스 등으로 구성될 수 있다. 특히, 터치 패드가 후술하는 디스플레이부(151)와 상호 레이어 구조를 이룰 경우, 이를 터치 스크린(touch screen)이라 부를 수 있다.The user input unit 130 generates key input data that the user inputs to control the operation of the terminal. The user input unit 130 may include a key pad, a dome switch, a touch pad (static / static), a jog wheel, a jog switch, a finger mouse, and the like. Particularly, when the touch pad has a mutual layer structure with the display unit 151 described later, it can be called a touch screen.

센싱부(140)는 휴대 단말기(100)의 개폐 상태, 휴대 단말기(100)의 위치, 사용자 접촉 유무 등과 같이 휴대 단말기(100)의 현 상태를 감지하여 휴대 단말기(100)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 예를 들어 휴대 단말기(100)가 슬라이드 폰 형태인 경우 슬라이드 폰의 개폐 여부를 센싱할 수 있다. 또한, 전원 공급부(190)의 전원 공급 여부, 인터페이스부(170)의 외부 기기 결합 여부 등과 관련된 센싱 기능을 담당할 수 있다.The sensing unit 140 senses the current state of the portable terminal 100 such as the open / close state of the portable terminal 100, the position of the portable terminal 100, Thereby generating a sensing signal. For example, when the portable terminal 100 is in the form of a slide phone, it is possible to sense whether the slide phone is opened or closed. In addition, a sensing function related to whether or not the power supply unit 190 is powered on, whether the interface unit 170 is coupled to an external device, and the like can be handled.

출력부(150)는 오디오 신호 또는 비디오 신호 또는 알람(alarm) 신호의 출력을 위한 것으로, 이에는 디스플레이부(151)와 음향 출력 모듈(153), 알람부(155) 등이 포함될 수 있다.The output unit 150 is for outputting an audio signal, a video signal, or an alarm signal. The output unit 150 may include a display unit 151, an audio output module 153, and an alarm unit 155.

디스플레이부(151)는 휴대 단말기(100)에서 처리되는 정보를 표시 출력한다. 예를 들어 휴대 단말기(100)가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 그리고 휴대 단말기(100)가 화상 통화 모드 또는 촬영 모드인 경우, 촬영되거나 수신된 영상을 각각 혹은 동시에 표시할 수 있으며, UI, GUI를 표시한다. The display unit 151 displays and outputs the information processed by the portable terminal 100. For example, when the portable terminal 100 is in the call mode, a UI (User Interface) or a GUI (Graphic User Interface) associated with a call is displayed. When the portable terminal 100 is in the video communication mode or the photographing mode, the photographed or received images can be displayed individually or simultaneously, and the UI and the GUI are displayed.

한편, 전술한 바와 같이, 디스플레이부(151)와 터치패드가 상호 레이어 구조 를 이루어 터치 스크린으로 구성되는 경우, 디스플레이부(151)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 만일, 디스플레이부(151)가 터치스크린으로 구성되는 경우, 터치 스크린 패널, 터치 스크린 패널 제어기 등을 포함할 수 있다. 이 경우, 터치 스크린 패널은 외부에 부착되는 투명한 패널로서, 휴대 단말기 내부의 버스에 연결될 수 있다. 터치 스크린 패널은 접촉 결과를 주시하고 있다가, 터치입력이 있는 경우 대응하는 신호들을 터치 스크린 패널 제어기로 보낸다. 터치 스크린 패널 제어기는 그 신호들을 처리한 다음 대응하는 데이터를 제어부(180)로 전송하여, 제어부(180)가 터치입력이 있었는지 여부와 터치스크린의 어느 영역이 터치 되었는지 여부를 알 수 있도록 한다. Meanwhile, as described above, when the display unit 151 and the touch pad have a mutual layer structure to constitute a touch screen, the display unit 151 can be used as an input device in addition to the output device. If the display unit 151 is configured as a touch screen, it may include a touch screen panel, a touch screen panel controller, and the like. In this case, the touch screen panel is a transparent panel attached to the outside, and can be connected to a bus inside the portable terminal. The touch screen panel keeps a watch on the contact result, and if there is a touch input, sends the corresponding signals to the touch screen panel controller. The touch screen panel controller processes the signals, and then transmits corresponding data to the controller 180 so that the controller 180 can determine whether the touch input has been made and which area of the touch screen has been touched.

또한, 디스플레이부(151)는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수도 있다. 그리고, 휴대 단말기(100)의 구현 형태에 따라 디스플레이부(151)가 2개 이상 존재할 수도 있다. 예를 들어, 휴대 단말기(100)에 외부 디스플레이부(미도시)와 내부 디스플레이부(미도시)가 동시에 구비될 수 있다.The display unit 151 may be a liquid crystal display, a thin film transistor-liquid crystal display, an organic light-emitting diode, a flexible display, And a display (3D display). In addition, there may be two or more display units 151 according to the embodiment of the portable terminal 100. For example, the portable terminal 100 may include an external display unit (not shown) and an internal display unit (not shown) at the same time.

음향 출력 모듈(153)은 호신호 수신, 통화모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리(160)에 저장된 오디오 데이터를 출력한다. 또한, 음향 출력 모듈(153)은 휴대 단말기(100)에서 수행되는 기능, 예를 들어, 호신호 수신음, 메시지 수신음 등과 관련된 음향 신 호를 출력한다. 이러한 음향 출력 모듈(153)에는 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.The audio output module 153 outputs audio data received from the wireless communication unit 110 or stored in the memory 160 in a call signal reception mode, a call mode or a recording mode, a voice recognition mode, a broadcast reception mode, The sound output module 153 outputs an acoustic signal related to a function performed in the portable terminal 100, for example, a call signal reception tone, a message reception tone, and the like. The sound output module 153 may include a speaker, a buzzer, and the like.

알람부(155)는 휴대 단말기(100)의 이벤트 발생을 알리기 위한 신호를 출력한다. 휴대 단말기(100)에서 발생하는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력 등이 있다. 알람부(155)는 오디오 신호나 비디오 신호 이외에 다른 형태로 이벤트 발생을 알리기 위한 신호를 출력한다. 예를 들면, 진동 형태로 신호를 출력할 수 있다. 호 신호가 수신되거나 메시지가 수신된 경우, 이를 알리기 위해 알람부(155)는 진동을 출력할 수 있다. 또는, 키 신호가 입력된 경우, 키 신호 입력에 대한 피드백으로 알람부(155)는 진동을 출력할 수 있다. 이러한 진동 출력을 통해 사용자는 이벤트 발생을 인지할 수 있다. 물론 이벤트 발생 알림을 위한 신호는 디스플레이부(151)나 음향 출력 모듈(153)를 통해서도 출력될 수 있다.The alarm unit 155 outputs a signal for notifying the occurrence of an event of the portable terminal 100. Examples of events occurring in the portable terminal 100 include call signal reception, message reception, and key signal input. The alarm unit 155 outputs a signal for notifying the occurrence of an event in a form other than an audio signal or a video signal. For example, it is possible to output a signal in a vibration mode. When a call signal is received or a message is received, the alarm unit 155 may output a vibration to notify it. Alternatively, when the key signal is input, the alarm unit 155 can output the vibration by the feedback to the key signal input. This vibration output allows the user to recognize the occurrence of an event. Of course, a signal for notifying the occurrence of an event may also be output through the display unit 151 or the sound output module 153.

메모리(160)는 제어부(180)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입력되거나 출력되는 데이터들(예를 들어, 폰북, 메시지, 정지영상, 동영상 등)의 임시 저장을 위한 기능을 수행할 수도 있다. The memory 160 may store a program for processing and controlling the control unit 180 and may store a function for temporarily storing input or output data (e.g., a phone book, a message, a still image, .

메모리(160)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램, 롬 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 또한, 휴대 단말기(100)는 인터넷(internet) 상에서 메모리(150)의 저장 기능을 수행하는 웹 스토리지(web storage)를 운영할 수도 있다.The memory 160 may be a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory), a RAM , And a ROM. ≪ / RTI > In addition, the portable terminal 100 may operate a web storage for storing the memory 150 on the Internet.

인터페이스부(170)는 휴대 단말기(100)에 연결되는 모든 외부기기와의 인터페이스 역할을 수행한다. 휴대 단말기(100)에 연결되는 외부기기의 예로는, 유/무선 헤드셋, 외부 충전기, 유/무선 데이터 포트, 메모리 카드(Memory card), SIM/UIM card 등과 같은 카드 소켓, 오디오 I/O(Input/Output) 단자, 비디오 I/O(Input/Output) 단자, 이어폰 등이 있다. 인터페이스부(170)는 이러한 외부 기기로부터 데이터를 전송받거나 전원을 공급받아 휴대 단말기(100) 내부의 각 구성 요소에 전달할 수 있고, 휴대 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 할 수 있다.The interface unit 170 serves as an interface with all external devices connected to the portable terminal 100. Examples of the external device connected to the portable terminal 100 include a card socket such as a wired / wireless headset, an external charger, a wired / wireless data port, a memory card, a SIM / UIM card, / Output, Video I / O, and Earphone. The interface unit 170 receives data from the external device or receives power from the external device and transmits the data to each component in the portable terminal 100 so that data in the portable terminal 100 can be transmitted to the external device .

제어부(180)는 통상적으로 상기 각부의 동작을 제어하여 휴대 단말기(100)의 전반적인 동작을 제어한다. 예를 들어 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 또한, 제어부(180)는 멀티 미디어 재생을 위한 멀티미디어 재생 모듈(181)을 구비할 수도 있다. 멀티미디어 재생 모듈(181)은 제어부(180) 내에 하드웨어로 구성될 수도 있고, 제어부(180)와 별도로 소프트웨어로 구성될 수도 있다.The controller 180 typically controls the operation of the respective units to control the overall operation of the mobile terminal 100. For example, voice communication, data communication, video communication, and the like. In addition, the control unit 180 may include a multimedia playback module 181 for multimedia playback. The multimedia playback module 181 may be configured in hardware in the controller 180 or separately from software in the controller 180. [

또한, 제어부(180)는 카메라(121)에 의해 촬영된 이미지에 대한 데이터를 분석하여, 얼굴의 눈, 코 입 등을 인식할 수 있는 안면인식 모듈(182)을 구비할 수 있다. 안면인식 모듈(182)은 소정의 이미지에 대해 얼굴 영역을 검출하고, 얼굴의 특징을 추출하고, 밝기, 굴곡 등을 추출하여, 얼굴의 눈, 코 입 등을 인식할 수 있으며, 눈 깜박임이나, 입 모양의 변화 등을 인식할 수 있다. 안면인식 모듈(182)은 이미지에 대한 안면인식 정보를 제어부(180)로 전달할 수 있다. 안면인식 모듈(182)은 제어부(180) 내에 하드웨어로 구성될 수도 있고, 제어부(180)와 별도로 소프트웨어로 구성될 수도 있다.The control unit 180 may include a facial recognition module 182 for analyzing data on the image captured by the camera 121 and recognizing the eyes, nose, and the like of the face. The facial recognition module 182 can detect facial regions, extract facial features, extract brightness, bend, and the like, recognize eyes, nose, and the like of a face with respect to a predetermined image, Change in mouth shape, and the like can be recognized. The facial recognition module 182 may transmit facial recognition information about the image to the control unit 180. [ The facial recognition module 182 may be configured in hardware in the controller 180 or separately from software in the controller 180. [

그리고, 전원 공급부(190)는 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급한다.The power supply unit 190 receives external power and internal power under the control of the controller 180 and supplies power necessary for operation of the respective components.

이와 같은 구성의 휴대 단말기(100)는, 유무선 통신 시스템 및 위성 기반 통신 시스템을 포함하여 프레임(frame) 또는 패킷(packet)을 통하여 데이터(data)를 전송할 수 있는 통신 시스템에서 동작 가능하도록 구성될 수 있다. The mobile terminal 100 having such a configuration can be configured to be operable in a communication system capable of transmitting data through a frame or a packet including a wired / wireless communication system and a satellite-based communication system have.

이상 본 발명과 관련된 휴대 단말기를 기능에 따른 구성요소 관점에서 살펴보았다. 이하에서는 도 2 및 도 3을 참조하여, 본 발명과 관련된 휴대 단말기를 외형에 따른 구성요소 관점에서 더욱 살펴보겠다. 이하에서는 설명의 편의상, 폴더 타입, 바 타입, 스윙타입, 슬라이더 타입 등과 같은 여러 타입의 휴대 단말기들 중에서 전면 터치스크린이 구비되어 있는, 바 타입 휴대 단말기를 예로 들어 설명한다. 그러나, 본 발명은 바 타입의 휴대 단말기에 한정되는 것은 아니고 전술한 타입을 포함한 모든 타입의 휴대 단말기에 적용될 수 있다. The portable terminal according to the present invention has been described in terms of components according to functions. Hereinafter, with reference to FIG. 2 and FIG. 3, the portable terminal related to the present invention will be described in more detail from the viewpoint of the components according to the external form. Hereinafter, for convenience of explanation, a bar-type portable terminal having a front touch screen among various types of portable terminals such as a folder type, a bar type, a swing type, a slider type and the like will be described as an example. However, the present invention is not limited to a bar-type portable terminal, but can be applied to all types of portable terminals including the above-mentioned type.

도 2는 본 발명의 일실시예에 따른 휴대 단말기를 전면에서 바라본 사시도이다. 도 2를 참조하면, 본 휴대 단말기(100)의 외관을 이루는 케이스는, 프론트 케이스(100A-1)와 리어 케이스(100A-2)에 의해 형성된다. 프론트 케이스(100A-1)와 리어 케이스(100A-2)에 의해 형성된 공간에는 각종 전자부품들이 내장된다. 프론트 케이스(100A-1)와 리어 케이스(100A-2) 사이에는 적어도 하나의 중간 케이스들 이 추가로 배치될 수도 있다. 이와 같은 케이스들은 합성수지를 사출하여 형성되거나, 금속 재질, 예를 들어 스테인레스 스틸(STS) 또는 티타늄(Ti) 등과 같은 금속 재질을 갖도록 형성될 수도 있다.2 is a perspective view of a portable terminal according to an embodiment of the present invention. Referring to FIG. 2, the case of the present portable terminal 100 is formed by a front case 100A-1 and a rear case 100A-2. Various electronic components are incorporated in the space formed by the front case 100A-1 and the rear case 100A-2. At least one intermediate case may be additionally disposed between the front case 100A-1 and the rear case 100A-2. Such cases may be formed by injection molding of a synthetic resin, or may be formed of a metal material, for example, a metal material such as stainless steel (STS) or titanium (Ti).

본체, 구체적으로 제1 프론트 케이스(100A-1)에는 디스플레이부(151), 제1 음향 출력 모듈(153a), 제1 카메라(121a), 제1 사용자 입력부(130a)가 배치될 수 있다. 그리고, 리어 케이스(100A-2)의 측면에서는 제2 사용자 입력부(130b), 제3 사용자 입력부(130), 및 마이크(123)가 배치될 수 있다.The display unit 151, the first sound output module 153a, the first camera 121a, and the first user input unit 130a may be disposed in the main body, specifically, the first front case 100A-1. The second user input unit 130b, the third user input unit 130, and the microphone 123 may be disposed on the side of the rear case 100A-2.

디스플레이부(151)는 정보를 시각적으로 표현하는 LCD(liquid crystal display), OLED(Organic Light Emitting Diodes) 등을 포함한다. 디스플레이부(151)는 터치패드가 레이어 구조로 중첩됨으로써, 디스플레이부(151)가 터치 스크린으로 동작하여 사용자의 터치에 의한 정보의 입력이 가능하도록 구성할 수도 있다. The display unit 151 includes a liquid crystal display (LCD), an OLED (Organic Light Emitting Diodes), and the like that visually express information. The display unit 151 may be constructed such that the touch pad is overlapped with the layer structure so that the display unit 151 operates as a touch screen so that information can be input by a user's touch.

제1 음향 출력 모듈(153a)은 리시버 또는 스피커의 형태로 구현될 수 있다. 제1 카메라(121a)는 사용자 등에 대한 이미지 또는 동영상을 촬영하기에 적절하도록 구현될 수 있다. 그리고, 마이크(123)는 사용자의 음성, 기타 소리 등을 입력받기에 적절한 형태로 구현될 수 있다. The first acoustic output module 153a may be implemented in the form of a receiver or a speaker. The first camera 121a may be adapted to photograph an image or a moving image of a user or the like. The microphone 123 may be implemented in a form suitable for receiving voice, sound, etc. of the user.

제1 내지 제3 사용자 입력부(130a, 130b, 130c)는 사용자 입력부(manipulating portion)(130)라 통칭할 수 있으며, 사용자가 촉각적인 느낌을 주면서 조작하게 되는 방식이라면 어떤 방식이든 채용될 수 있다. The first to third user input units 130a, 130b, and 130c may be collectively referred to as a manipulating portion 130 and may be employed in any manner as long as the user operates the unit while giving a tactile impression.

예를 들어, 사용자 입력부(130)는 사용자의 푸시 또는 터치 조작에 의해 명 령 또는 정보를 입력받을 수 있는 돔 스위치 또는 터치 패드로 구현되거나, 키를 회전시키는 휠 또는 조그 방식이나 조이스틱과 같이 조작하는 방식 등으로도 구현될 수 있다. 기능적인 면에서, 제1 사용자 입력부(130a)는 시작, 종료, 통화 등과 같은 명령을 입력하기 위한 것이고, 제2 사용자 입력부(130b)는 동작 모드의 선택 등을 입력하기 위한 것이다. 또한, 제3 사용자 입력부(130c)는 휴대 단말기(100) 내의 특수한 기능을 활성화하기 위한 핫 키(hot-key)로서 작동할 수 있다. For example, the user input unit 130 may be embodied as a dome switch or a touch pad capable of receiving an instruction or information by a push or touch operation of the user, or may be implemented as a wheel, a jog type, Method or the like. In terms of functions, the first user input unit 130a is for inputting a command such as start, end, and call, and the second user input unit 130b is for inputting an operation mode selection or the like. Also, the third user input unit 130c may operate as a hot-key for activating a special function in the portable terminal 100. [

도 3는 도 2에 도시한 휴대 단말기의 후면 사시도이다. 도 3를 참조하면, 리어케이스(100A-2)의 측면에서는 제4 사용자 입력부(130d), 제5 사용자 입력부(130e), 및 인터페이스부(170)가 배치될 수 있으며, 리어 케이스(100A-2)의 후면에는 제2 카메라(121b)가 추가로 장착될 수 있다. 3 is a rear perspective view of the portable terminal shown in FIG. 3, the fourth user input unit 130d, the fifth user input unit 130e, and the interface unit 170 may be disposed on the side of the rear case 100A-2, and the rear case 100A-2 The second camera 121b may be further mounted on the rear surface of the second camera 121b.

제2 카메라(121b)는 제1 카메라(121a)와 실질적으로 반대되는 촬영 방향을 가지며, 제1 카메라(121a)와 서로 다른 화소를 가질 수 있다. 예를 들어, 제1 카메라(121a)는 화상 통화 등의 경우에 사용자의 얼굴을 촬영하여 상대방에 전송함에 무리가 없도록 저화소를 가지며, 제2 카메라(121b)는 일반적인 피사체를 촬영하고 바로 전송하지는 않는 경우가 많으므로 고 화소를 가지는 것이 바람직하다.The second camera 121b has a photographing direction substantially opposite to that of the first camera 121a, and may have pixels different from those of the first camera 121a. For example, the first camera 121a has low pixels so that it is easy to capture a face of a user in the case of a video call or the like and transmit the face to the other party. The second camera 121b photographs a general object and immediately transmits It is preferable to have a high pixel.

제2 카메라(121b)에 인접하게는 거울(125)과 플래쉬(126)가 추가로 배치될 수 있다. 플래쉬(126)는 제2 카메라(121b)로 피사체를 촬영하는 경우에 상기 피사체를 향해 빛을 비추게 된다. 거울(125)은 사용자가 제2 카메라(121b)를 이용하여 자신을 촬영(셀프 촬영)하고자 하는 경우에, 사용자 자신의 얼굴 등을 비춰볼 수 있게 한다.A mirror 125 and a flash 126 may be further disposed adjacent to the second camera 121b. The flash 126 illuminates the subject when the subject is photographed by the second camera 121b. The mirror 125 enables the user to illuminate the user's own face or the like when the user intends to take a picture of himself / herself (self-photographing) using the second camera 121b.

리어 케이스(100A-2)에는 제2 음향 출력 모듈(미도시)이 추가로 배치될 수도 있다. 제2 음향 출력 모듈은 제1 음향 출력 모듈(153a)와 함께 스테레오 기능을 구현할 수 있으며, 스피커폰 모드로 통화를 위하여 사용될 수도 있다. A second sound output module (not shown) may be further disposed in the rear case 100A-2. The second sound output module may implement the stereo function together with the first sound output module 153a, and may be used for talking in the speakerphone mode.

또한, 제2 리어 케이스(100A-2)의 일 측에는 통화 등을 위한 안테나 외에 방송신호 수신용 안테나(미도시)가 배치될 수 있다. 안테나는 리어 케이스(100A-2)에서 인출 가능하게 설치될 수 있다. An antenna (not shown) for receiving broadcasting signals may be disposed on one side of the second rear case 100A-2 in addition to the antenna for communication. The antenna may be installed to be capable of being drawn out from the rear case 100A-2.

인터페이스부(170)는 휴대 단말기(100)가 외부 기기와 데이터 교환 등을 할 수 있게 하는 통로가 된다. 예를 들어, 인터페이스부(170)는 유선 또는 무선으로, 이어폰과 연결하기 위한 접속단자, 근거리 통신을 위한 포트, 또는 휴대 단말기(100)에 전원을 공급하기 위한 전원공급 단자들 중 적어도 하나일 수 있다. 인터페이스부(170)는 SIM(subscriber identification module) 또는 UIM(user identity module), 정보 저장을 위한 메모리 카드 등의 외장형 카드를 수용하는 카드 소켓일 수도 있다. The interface unit 170 is a path for allowing the portable terminal 100 to exchange data with an external device. For example, the interface unit 170 may be at least one of a connection terminal for connecting to an earphone, a port for short-range communication, or power supply terminals for supplying power to the portable terminal 100, have. The interface unit 170 may be a card socket that accommodates an external card such as a SIM (subscriber identification module) or a UIM (user identity module), a memory card for information storage, and the like.

그리고, 리어 케이스(100A-2) 측에는 휴대 단말기에 전원을 공급하기 위한 전원공급부(190)가 장착된다. 전원공급부(190)는, 예를 들어 충전 가능한 배터리로서, 충전 등을 위하여 리어 케이스(100A-2)에 착탈 가능하게 결합될 수 있다.A power supply unit 190 for supplying power to the portable terminal is mounted on the rear case 100A-2. The power supply unit 190 may be a rechargeable battery, for example, and may be detachably coupled to the rear case 100A-2 for charging or the like.

이상에서는 제2 카메라(121b) 등이 리어 케이스(100A-2)에 배치되는 것으로 설명하였으나, 반드시 이에 제한되는 것은 아니다. 또한, 제2 카메라(12b)가 별도로 구비되지 않더라도, 제1 카메라(121a)를 회전 가능하게 형성되어 제2 카메라(121b)의 촬영 방향까지 촬영 가능하게 구성될 수도 있다. In the above description, the second camera 121b and the like are disposed in the rear case 100A-2, but the present invention is not limited thereto. Also, the second camera 12b may be separately provided, but the first camera 121a may be configured to be rotatable so that the first camera 121a can be photographed up to the photographing direction of the second camera 121b.

도 4는 본 발명의 제1실시예에 따른 휴대 단말기 동작 제어방법을 나타내는 흐름도이다.4 is a flowchart illustrating a method of controlling a mobile terminal operation according to the first embodiment of the present invention.

도 4에 도시된 바와 같이, 먼저 휴대 단말기에 대한 안면인식 잠금기능을 설정할 수 있는 메뉴가 선택된다(S400). 안면인식 잠금기능이란, 비밀번호나 아이디 등 사용자를 식별하는 인증키를 사용자의 얼굴 이미지로 대체하는 것을 의미한다. 즉, 현재 사용자의 얼굴 이미지를 분석하여, 현재 사용자가 진정 사용자인지 판단함으로써, 인증키를 요구하는 메뉴에서 비밀번호나 아이디 대신 이용될 수 있다.As shown in FIG. 4, a menu for setting the face recognition locking function for the portable terminal is first selected (S400). The facial recognition locking function means replacing an authentication key for identifying a user such as a password or an ID with a user's facial image. That is, the face image of the current user is analyzed and the current user is determined to be the authentic user, so that it can be used in place of the password or ID in the menu requesting the authentication key.

다음, 제어부(180)는 얼굴촬영을 위해 카메라(121)가 선택되는지 판단한다(S405). S405 판단 결과, 카메라(121)가 선택되지 않은 경우, 제어부(180)는 미리 촬영되어 저장된 얼굴 이미지를 호출한다(S410). 복수의 얼굴 이미지가 호출되고, 사용자에 의해 하나의 얼굴 이미지가 선택될 수 있다. S405 판단 결과, 카메라(121)가 선택된 경우, 제어부(180)는 카메라(121)를 이용하여 사용자의 얼굴을 촬영한다(S415).Next, the control unit 180 determines whether the camera 121 is selected for face photographing (S405). If it is determined in step S405 that the camera 121 is not selected, the control unit 180 calls a previously captured and stored face image (S410). A plurality of face images are called, and one face image can be selected by the user. If it is determined in step S405 that the camera 121 is selected, the control unit 180 captures the face of the user using the camera 121 (S415).

다음, 제어부(180)는 S410 단계에서 호출된 얼굴 이미지, 또는 S415 단계에서 촬영된 얼굴 이미지를 휴대 단말기(100)에 대한 인증이미지로서 저장한다(S420). 얼굴 이미지가 인증이미지로서 저장됨으로써, 휴대 단말기(100)에 대한 안면인식 잠금기능이 설정된다. 여기서 휴대 단말기(100)에 대한 안면인식 잠금기능이란, 휴대 단말기(100) 자체의 잠금설정일 수 있으며, 문자 메시지, 웹서버 접속, 특정 웹서버에 접속하기 위한 로그인, 음성 또는 영상 통화 등 휴대 단말 기(100)에서 인증키를 요구하는 메뉴를 모두 포함한다. 예를 들어, 아이디 및 비밀번호 등의 인증키를 요구하는 특정 웹사이트 접속 또는 메신저 접속에서도 아이디 및 비밀번호 대신 인증이미지로서 사용자의 얼굴 이미지를 이용할 수 있다. Next, the controller 180 stores the face image called in step S410 or the face image photographed in step S415 as an authentication image for the portable terminal 100 (S420). The facial image locking function is set for the portable terminal 100 by storing the facial image as the authentication image. Here, the facial recognition locking function for the portable terminal 100 may be a lock setting of the portable terminal 100 itself and may be a locking function for a portable terminal such as a text message, a web server access, a login for accessing a specific web server, And a menu for requesting an authentication key from the authentication server 100. For example, a face image of a user may be used as an authentication image instead of an ID and a password in a specific website connection or a messenger connection requesting an authentication key such as an ID and a password.

다음, 안면인식 잠금기능을 설정할 수 있는 메뉴가 종료된다(S425). Next, the menu for setting the face recognition locking function is ended (S425).

휴대 단말기(100)에 대한 안면인식 잠금기능이 설정된 후, 상기 휴대 단말기(100)에 포함된 메뉴가 선택되면(S430), 제어부(180)는 상기 메뉴가 잠금상태인지 판단한다(S435). S435 판단 결과, 잠금상태가 아닌 경우, 잠금상태를 해제하기 위한 인증이미지가 요구되지 않는다. After the facial recognition locking function is set for the portable terminal 100, if the menu included in the portable terminal 100 is selected at step S430, the controller 180 determines whether the menu is locked at step S435. As a result of the judgment in S435, if it is not the locked state, the authentication image for releasing the locked state is not required.

한편, S435 판단 결과, 상기 메뉴가 잠금상태인 경우, 제어부(180)는 카메라(121)를 활성화한다(S440). 잠금상태를 해제하기 위해 S420 단계에서 설정된 인증이미지가 요구되므로, 카메라(121)를 이용하여 현재 사용자의 얼굴 이미지를 촬영하기 위함이다. 상기 휴대 단말기(100)가 잠금상태인 경우, 카메라(121)는 자동적으로 활성화될 수도 있고, 사용자에 의해 선택된 경우에만 활성될 수도 있다. 사용자는 비밀번호를 입력함으로서 잠금상태를 해제할 수도 있다. 타인이 휴대 단말기(100)로 진정 사용자의 얼굴 이미지를 촬영하여 잠금상태를 해제하는 것을 방지하기 위해, 일반적으로 제1 카메라(121a)가 활성화될 것이다. On the other hand, if it is determined in step S435 that the menu is locked, the controller 180 activates the camera 121 (S440). In order to release the locked state, the authenticated image set in step S420 is required, so that the camera 121 captures the face image of the current user. When the portable terminal 100 is in the locked state, the camera 121 may be activated automatically, or may be activated only when selected by the user. The user can release the lock state by inputting the password. The first camera 121a will generally be activated in order to prevent another person from taking a picture of the user's face image with the portable terminal 100 and releasing the locked state.

다음, 제어부(180)는 활성화된 카메라(121)를 이용하여 현재 사용자의 얼굴을 촬영하고, 촬영된 얼굴 이미지를 디스플레이부(151)에 표시한다(S445). Next, the control unit 180 photographs the face of the current user using the activated camera 121, and displays the photographed face image on the display unit 151 (S445).

다음, 제어부(180)는 S445 단계에서 촬영된 얼굴 이미지가 상기 인증이미지인지 판단한다(S450). 즉, 안면인식 모듈(182)이 S445 단계에서 촬영된 얼굴 이미 지를 분석하면, 제어부(180)는 안면인식 모듈(182)에 의해 분석된 얼굴 이미지와, S420 단계에서 인증이미지로서 저장된 얼굴 이미지가 동일범위인지 판단한다. 촬영된 얼굴 이미지가 상기 인증이미지와 완전히 동일한 이미지가 아니더라도, 안면인식 모듈(182)에 의해 분석된 얼굴, 눈, 코, 입 등의 형태 및 비율이 동일범위이면 인증이미지로 인정될 수 있다. S450 판단 결과, 촬영된 얼굴 이미지가 인증이미지가 아닌 경우, 제어부(180)는 선택된 카메라(121)를 이용하여 현재 사용자의 얼굴을 재촬영한다(S445).Next, the controller 180 determines whether the photographed face image is the authenticated image in step S445 (S450). That is, if the facial recognition module 182 analyzes the facial image photographed in step S445, the control unit 180 determines whether the facial image analyzed by the facial recognition module 182 and the facial image stored as the authentication image in step S420 are the same Range. Even if the photographed face image is not exactly the same image as the authenticated image, it can be recognized as an authenticated image if the shape and ratio of the face, eye, nose, mouth, etc. analyzed by the face recognition module 182 are the same. If it is determined in step S450 that the photographed face image is not an authenticated image, the control unit 180 retakes the face of the current user using the selected camera 121 (S445).

한편, S450 판단 결과, 촬영된 얼굴 이미지가 인증이미지인 경우, 제어부(180)는 상기 메뉴의 잠금상태를 해제하고, 잠금상태가 해제된 상기 메뉴의 실행화면을 표시한다(S455). 메뉴의 실행화면이란, 휴대 단말기(100)의 대기화면일 수 있고, 웹페이지 화면, 문자쓰기 화면, 수신된 문자 화면, 특정 웹에 대해 로그인된 화면일 수 있다. 예를 들어, 수신된 문자 확인이 잠금상태인 경우, 비밀번호를 입력할 필요없이 얼굴 이미지를 인증이미지로서 이용하여 잠금상태를 해제할 수 있다. 즉, 휴대 단말기(100)에서 비밀번호 또는 아이디를 입력해야 하는 메뉴 또는 서버 접속에 얼굴 이미지가 비밀번호 또는 아이디를 대체함으로써, 모두 적용될 수 있다. 제어부(180)는 잠금상태가 해제되었음을 알리는 메시지를 디스플레이부(151)에 표시할 수 있다.On the other hand, if it is determined in step S450 that the photographed face image is an authenticated image, the control unit 180 cancels the locked state of the menu and displays the execution screen of the unlocked menu (S455). The execution screen of the menu may be a standby screen of the portable terminal 100, or may be a web page screen, a character writing screen, a received character screen, or a screen logged in for a specific web. For example, when the received character confirmation is locked, the locked state can be released by using the face image as the authentication image without inputting the password. That is, the face image can be applied to the menu or the server connection in which the password or the ID is to be input in the portable terminal 100 by replacing the password or ID. The control unit 180 may display a message on the display unit 151 indicating that the locked state is released.

도 5는 본 발명의 제2실시예에 따른 휴대 단말기 동작 제어방법을 나타내는 흐름도이다.5 is a flowchart illustrating a method of controlling a mobile terminal according to a second embodiment of the present invention.

도 5에 도시된 바와 같이, 먼저 휴대 단말기(100)에 대한 안면인식 잠금기능을 설정할 수 있는 메뉴가 선택된다(S500). 즉, 현재 사용자의 얼굴 이미지를 분석하여, 현재 사용자가 진정 사용자인지 판단함으로써, 휴대 단말기(100)가 잠금상태인 경우, 비밀번호 대신 얼굴 이미지가 이용될 수 있다.5, a menu for setting the face recognition locking function for the portable terminal 100 is selected (S500). That is, if the face image of the current user is analyzed and the current user is determined to be a true user, the face image may be used instead of the password when the mobile terminal 100 is locked.

다음, 제어부(180)는 얼굴촬영을 위해 카메라(121)가 선택되는지 판단한다(S505). S505 판단 결과, 카메라(121)가 선택되지 않은 경우, 제어부(180)는 미리 촬영되어 저장된 얼굴 표정 이미지를 호출한다(S510). S505 판단 결과, 카메라(121)가 선택된 경우, 제어부(180)는 카메라(121)를 이용하여 사용자의 얼굴 표정을 촬영한다(S515). 얼굴 표정은 다양하게 나타날 수 있으며, 웃는 얼굴, 무표정한 얼굴, 눈 감은 얼굴 등이 포함될 수 있다.Next, the control unit 180 determines whether the camera 121 is selected for face photographing (S505). If it is determined in step S505 that the camera 121 is not selected, the control unit 180 calls the stored facial expression image in step S510. If it is determined in step S505 that the camera 121 is selected, the control unit 180 photographs the facial expression of the user using the camera 121 (S515). Facial expressions can appear in a variety of ways, and can include smiley faces, faceless faces, and faces with eyes closed.

다음, 제어부(180)는 S510 단계에서 호출된 얼굴 표정 이미지, 또는 S515 단계에서 촬영된 얼굴 표정 이미지를 특정메뉴에 대한 인증이미지로서 저장한다(S520). 여기서 특정메뉴란, 휴대 단말기(100) 자체의 잠금설정일 수 있으며, 문자 메시지, 웹서버 접속, 특정 웹서버에 접속하기 위한 로그인, 음성 또는 영상 통화 등이 될 수 있다.Next, the controller 180 stores the facial expression image called in step S510 or the facial expression image photographed in step S515 as an authentication image for the specific menu (step S520). Here, the specific menu may be a lock setting of the mobile terminal 100 itself, and may be a text message, a web server access, a login for accessing a specific web server, a voice or video call, and the like.

제어부(180)는 또 다른 얼굴 표정 이미지를 인증이미지로 저장하기 위한 메뉴가 선택되는지 판단한다(S525). S525 판단결과, 또 다른 얼굴 표정 이미지를 인증이미지로 저장하기 위한 메뉴가 선택된 경우 상기 S505 내지 S520 단계가 반복되고, 또 다른 얼굴 표정 이미지를 인증이미지로 저장하기 위한 메뉴가 선택되지 않은 경우, 안면인식 잠금기능을 설정할 수 있는 메뉴가 종료된다(S530). 즉, 복수의 얼굴 표정 이미지가 휴대 단말기(100) 잠금상태를 해제할 수 있는 인증이미지로서 저장될 수 있고, 휴대 단말기(100) 잠금상태 해제 후, 각 얼굴 표정 이미지에 따라 실행되는 화면이 변경될 수 있다. The control unit 180 determines whether a menu for storing another facial expression image as an authentication image is selected (S525). If it is determined in step S525 that the menu for storing another facial expression image as an authentication image is selected, steps S505 to S520 are repeated. If the menu for storing another facial expression image as an authentication image is not selected, The menu for setting the lock function is terminated (S530). That is, a plurality of facial expression images can be stored as an authentication image capable of releasing the locked state of the portable terminal 100, and after the locked state of the portable terminal 100 is released, a screen executed according to each facial expression image is changed .

예를 들어, 웃는 얼굴 및 눈 감은 얼굴이 인증이미지로 저장되면, 웃는 얼굴 및 눈 감은 얼굴 중 어느 하나가 입력되도 휴대 단말기(100)의 잠금상태가 해제된다. 다만, 웃는 얼굴에 대한 특정메뉴가 휴대 단말기(100) 자체의 잠금설정인 경우, 웃는 얼굴에 의해 잠금상태가 해제되면, 제어부(180)는 대기화면을 디스플레이부(180)에 표시하고, 눈 감은 얼굴에 대한 특정메뉴가 문자 쓰기 메뉴인 경우, 눈 감은 얼굴에 의해 잠금상태가 해제되면, 제어부(180)는 문자 쓰기 화면을 디스플레이부(180)에 표시한다. 따라서, 얼굴 표정 이미지에 의해 휴대 단말기(100) 자체의 잠금상태를 해제할 수 있을 뿐 아니라, 잠금해제와 동시에 원하는 특정메뉴로 바로 진입할 수 있다.For example, when the smiling face and the face having the eyes closed are stored as the authenticated image, the locked state of the portable terminal 100 is released even if either the smile or the face is input. If the locked state is released by the smiling face when the specific menu for the smiling face is the lock setting of the mobile terminal 100 itself, the control unit 180 displays the standby screen on the display unit 180, If the specific menu for the face is a text writing menu, the control unit 180 displays a character writing screen on the display unit 180 when the locked state is canceled by the face with eyes closed. Accordingly, not only can the portable terminal 100 itself be unlocked by the facial expression image, but it can also directly enter a specific menu desired upon unlocking.

다음, 안면인식 잠금기능이 설정된 후, 휴대 단말기(100)에 대해 사용자 입력이 발생한 경우, 제어부(180)는 휴대 단말기(100)가 잠금상태인지 판단한다(S535). S535 판단 결과, 잠금상태가 아닌 경우, 잠금상태를 해제하기 위한 인증이미지가 요구되지 않는다. If a user input is made to the portable terminal 100 after the facial recognition locking function is set, the controller 180 determines whether the portable terminal 100 is locked (S535). As a result of the judgment in S535, if it is not the locked state, the authentication image for releasing the locked state is not required.

한편, S535 판단 결과, 상기 휴대 단말기(100)가 잠금상태인 경우, 제어부(180)는 카메라(121)를 활성화한다(S540). 잠금상태를 해제하기 위해 S520 단계에서 설정된 인증이미지가 요구되므로, 카메라(121)를 이용하여 현재 사용자의 얼굴 이미지를 촬영하기 위함이다. 상기 휴대 단말기(100)가 잠금상태인 경우, 카메 라(121)는 자동적으로 활성화될 수도 있고, 사용자에 의해 선택된 경우에만 활성될 수도 있다. 사용자는 비밀번호를 입력함으로서 휴대 단말기(100)의 잠금상태를 해제할 수도 있다. 타인이 휴대 단말기(100)로 진정 사용자의 얼굴 이미지를 촬영하여 잠금상태를 해제하는 것을 방지하기 위해, 일반적으로 제1 카메라(121a)가 활성화될 것이다. If it is determined in step S535 that the portable terminal 100 is in the locked state, the controller 180 activates the camera 121 in step S540. The authentication image set in step S520 is required to release the lock state, so that the camera 121 captures the face image of the current user. When the portable terminal 100 is in the locked state, the camera 121 may be activated automatically or may be activated only when selected by the user. The user may cancel the locked state of the portable terminal 100 by inputting the password. The first camera 121a will generally be activated in order to prevent another person from taking a picture of the user's face image with the portable terminal 100 and releasing the locked state.

다음, 제어부(180)는 활성화된 카메라(121)를 이용하여 현재 사용자의 얼굴 표정을 촬영하고, 촬영된 얼굴 표정 이미지를 디스플레이부(151)에 표시한다(S545). Next, the control unit 180 photographs the facial expression of the current user using the activated camera 121, and displays the photographed facial expression image on the display unit 151 (S545).

다음, 제어부(180)는 S545 단계에서 촬영된 얼굴 표정 이미지가 상기 인증이미지 중 하나인지 판단한다(S550). 즉, 안면인식 모듈(182)이 S545 단계에서 촬영된 얼굴 표정 이미지를 분석하여 얼굴 표정을 확인하고, 제어부(180)는 안면인식 모듈(182)에 의해 확인된 얼굴 표정 이미지와, S520 단계에서 인증이미지로서 저장된 얼굴 표정 이미지가 동일범위인지 판단한다. 촬영된 얼굴 표정 이미지가 상기 인증이미지와 완전히 동일한 이미지가 아니더라도, 안면인식 모듈(182)에 의해 분석된 얼굴, 눈, 코, 입 등의 형태 및 비율이 동일범위이면 인증이미지로 인정될 수 있다. 안면인식 모듈(182)은 입 주변, 눈 주변 근육이나 밝기를 분석하여, 웃는 입모양이나 깜박이는 눈모양을 확인하여 얼굴 표정을 판단할 수 있다. S550 판단 결과, 촬영된 얼굴 표정 이미지가 인증이미지가 아닌 경우, 제어부(180)는 선택된 카메라(121)를 이용하여 현재 사용자의 얼굴 표정을 재촬영한다(S545).Next, the control unit 180 determines whether the facial expression image photographed in step S545 is one of the authenticated images (S550). That is, the facial recognition module 182 analyzes the facial expression image photographed in step S545 to check the facial expression, and the control unit 180 displays the facial expression image confirmed by the facial recognition module 182, It is determined whether the facial expression images stored as images are in the same range. Even if the photographed facial expression image is not exactly the same image as the authenticated image, it can be recognized as an authenticated image if the form and ratio of the face, eye, nose, mouth, etc. analyzed by the facial recognition module 182 are the same. The facial recognition module 182 can analyze the muscles and brightness around the mouth and the eye to determine the expression of the facial expression by confirming the shape of the smiling mouth or the blinking eye. If it is determined that the captured facial expression image is not an authentication image, the control unit 180 retakes the facial expression of the current user using the selected camera 121 (S545).

한편, S550 판단 결과, 촬영된 얼굴 표정 이미지가 인증이미지인 경우, 제 어부(180)는 휴대 단말기(100)의 잠금상태를 해제하고, 촬영된 얼굴 표정 이미지에 따른 특정메뉴의 실행화면을 표시한다(S555). 특정메뉴의 실행화면이란, 휴대 단말기(100)의 대기화면일 수 있고, 웹페이지 화면, 문자쓰기 화면, 수신된 문자 화면, 특정 웹에 대해 로그인된 화면일 수 있다. 예를 들어, 비밀번호를 입력할 필요없이 웃는 얼굴 표정 이미지를 인증이미지로서 이용하여 휴대 단말기(100)의 잠금상태를 해제할 수 있으며, 웃는 얼굴 표정에 따라 휴대 단말기(100)의 잠금상태 해제와 동시에 수신된 문자 화면을 바로 디스플레이부(151)에 표시할 수 있다. On the other hand, if it is determined in operation S550 that the photographed facial expression image is an authentic image, the control unit 180 cancels the locked state of the portable terminal 100 and displays an execution screen of a specific menu according to the photographed facial expression image (S555). The execution screen of a specific menu may be a standby screen of the portable terminal 100, or may be a web page screen, a character writing screen, a received character screen, or a screen logged in for a specific web. For example, it is possible to cancel the locked state of the mobile terminal 100 by using the smile image as an authentication image without inputting the password, and to cancel the locked state of the mobile terminal 100 The received character screen can be immediately displayed on the display unit 151. [

도 6은 본 발명의 제3실시예에 따른 휴대 단말기 동작 제어방법을 나타내는 흐름도이다.6 is a flowchart illustrating a method of controlling a mobile terminal operation according to a third embodiment of the present invention.

도 6에 도시된 바와 같이, 먼저 휴대 단말기에 대한 안면인식 잠금기능을 설정할 수 있는 메뉴가 선택된다(S600). 즉, 현재 사용자의 얼굴 이미지를 분석하여, 현재 사용자가 진정 사용자인지 판단함으로써, 특정메뉴 또는 특정메뉴를 포함하는 상위메뉴를 잠금상태로 변경시킬 수 있다.As shown in FIG. 6, first, a menu for setting the face recognition locking function for the portable terminal is selected (S600). That is, by analyzing the face image of the current user and judging whether the current user is the true user, it is possible to change the specific menu or the upper menu including the specific menu to the locked state.

다음, 제어부(180)는 얼굴촬영을 위해 카메라(121)가 선택되는지 판단한다(S605). S605 판단 결과, 카메라(121)가 선택되지 않은 경우, 제어부(180)는 미리 촬영되어 저장된 얼굴 이미지를 호출한다(S610). S605 판단 결과, 카메라(121)가 선택된 경우, 제어부(180)는 카메라(121)를 이용하여 사용자의 얼굴을 촬영한다(S615).Next, the control unit 180 determines whether the camera 121 is selected for face photographing (S605). If it is determined in step S605 that the camera 121 is not selected, the control unit 180 calls the stored facial image in step S610. If it is determined in step S605 that the camera 121 is selected, the control unit 180 photographs the user's face using the camera 121 (S615).

다음, 제어부(180)는 S610 단계에서 호출된 얼굴 이미지, 또는 S615 단계에 서 촬영된 얼굴 이미지를 휴대 단말기(100)에 대한 인증이미지로서 저장한다(S620). 다음, 안면인식 잠금기능을 설정할 수 있는 메뉴가 종료된다(S625). 예를 들어, 중요 문서나 이미지를 잠금상태로 변경하고자 하는 경우, 따로 보안설정할 필요없이 얼굴 이미지를 이용하여 바로 잠금상태로 만들 수 있다. Next, the control unit 180 stores the face image called in step S610 or the face image photographed in step S615 as an authentication image for the portable terminal 100 (S620). Next, the menu for setting the face recognition locking function is ended (S625). For example, if you want to change an important document or image to a locked state, you can immediately lock it using the face image without setting security.

휴대 단말기에 대한 안면인식 잠금기능이 설정된 후, 특정메뉴가 선택되면, 제어부(180)는 상기 특정메뉴의 실행화면을 디스플레이부(151)에 표시한다(S630). 여기서 특정메뉴란, 휴대 단말기(100) 자체의 잠금설정일 수 있으며, 문자 메시지, 웹서버 접속, 특정 웹서버에 접속하기 위한 로그인, 음성 또는 영상 통화, 각 문서, 이미지, 동영상 등 휴대 단말기(100)에서 인증이미지를 이용하여 잠금설정을 할 수 있는 메뉴를 모두 포함한다. 또한, 특정메뉴의 실행화면이란, 휴대 단말기(100)의 대기화면일 수 있고, 보낸 문자 화면, 수신된 문자 화면, 문서, 동영상, 이미지일 수 있다.If a specific menu is selected after the facial recognition locking function for the portable terminal is set, the control unit 180 displays the execution screen of the specific menu on the display unit 151 (S630). Here, the specific menu may be a lock setting of the portable terminal 100 itself, and may include a text message, a connection to a web server, a login for accessing a specific web server, a voice or video call, And a menu for setting a lock using an authentication image. The execution screen of a specific menu may be a standby screen of the portable terminal 100, a sent character screen, a received character screen, a document, a moving image, or an image.

다음, 제어부(180)는 카메라(121)가 선택되는지 판단한다(S635). S635 판단 결과, 카메라(121)가 선택되지 않은 경우, 특정메뉴를 잠금상태로 변경하기 위한 인증이미지가 요구되지 않으므로, 제어부(180)는 상기 특정메뉴의 실행화면을 디스플레이부(151)에 표시한다(S630). Next, the control unit 180 determines whether the camera 121 is selected (S635). If it is determined in S635 that the camera 121 is not selected, the control unit 180 displays an execution screen of the specific menu on the display unit 151 since no authentication image for changing the specific menu to the locked state is requested (S630).

한편, S635 판단 결과, 카메라(121)가 선택된 경우, 제어부(180)는 현재 실행되고 있는 상기 특정메뉴가 카메라 촬영메뉴인지 판단한다(S640). S640 판단결과, 카메라 촬영메뉴인 경우, 카메라(121)가 이미 동작하고 있는 상태이므로, 제어부(180)는 상기 특정메뉴의 실행화면, 즉 카메라 촬영메뉴의 실행화면을 디스플레 이부(151)에 표시한다(S630). 또한, 카메라 촬영메뉴 선택과 상기 안면인식을 위한 카메라 선택을 구분하기 위하여, 사용자 입력부(130)에 대한 롱키(long-key) 또는 쇼트키(short-key) 입력에 따라 카메라(121)가 서로 다르게 동작할 수 있도록 설정할 수 있다.If it is determined in step S635 that the camera 121 is selected, the controller 180 determines whether the specific menu currently being executed is a camera menu (S640). If it is determined in step S640 that the camera is the photographing menu, since the camera 121 is already operating, the control unit 180 displays the execution screen of the specific menu, that is, the execution screen of the camera photographing menu on the display unit 151 (S630). In order to distinguish the camera shooting menu selection from the camera selection for facial recognition, the camera 121 may be differentiated according to a long-key or a short-key input to the user input unit 130 You can set it to work.

한편, S640 판단결과, 카메라 촬영메뉴가 아닌 경우, 카메라(121)를 이용하여 현재 사용자의 얼굴을 촬영하고, 촬영된 얼굴 이미지를 디스플레이부(151)에 표시한다(S645). On the other hand, if it is determined in step S640 that the camera is not the photographing menu, the face of the current user is photographed using the camera 121, and the photographed face image is displayed on the display unit 151 (S645).

다음, 제어부(180)는 S645 단계에서 촬영된 얼굴 이미지가 상기 인증이미지인지 판단한다(S650). 즉, 안면인식 모듈(182)이 S645 단계에서 촬영된 얼굴 이미지를 분석하면, 제어부(180)는 안면인식 모듈(182)에 의해 분석된 얼굴 이미지와, S620 단계에서 인증이미지로서 저장된 얼굴 이미지가 동일범위인지 판단한다. 촬영된 얼굴 이미지가 상기 인증이미지와 완전히 동일한 이미지가 아니더라도, 안면인식 모듈(182)에 의해 분석된 얼굴, 눈, 코, 입 등의 형태 및 비율이 동일범위이면 인증이미지로 인정될 수 있다. S650 판단 결과, 촬영된 얼굴 이미지가 인증이미지가 아닌 경우, 제어부(180)는 선택된 카메라(121)를 이용하여 현재 사용자의 얼굴을 재촬영한다(S645).Next, the controller 180 determines whether the face image photographed in step S645 is the authenticated image (S650). That is, if the facial recognition module 182 analyzes the facial image photographed in step S645, the control unit 180 determines whether the facial image analyzed by the facial recognition module 182 is the same as the facial image stored as the authentication image in step S620 Range. Even if the photographed face image is not exactly the same image as the authenticated image, it can be recognized as an authenticated image if the shape and ratio of the face, eye, nose, mouth, etc. analyzed by the face recognition module 182 are the same. If it is determined in step S650 that the photographed face image is not an authenticated image, the control unit 180 retakes the current user's face using the selected camera 121 (S645).

한편, S650 판단 결과, 촬영된 얼굴 이미지가 인증이미지인 경우, 제어부(180)는 특정메뉴의 실행화면을 잠금상태로 변경한다(S655). 설정에 따라 특정메뉴의 실행화면 뿐 아니라 특정메뉴를 포함하는 상위메뉴를 잠금상태로 변경할 수도 있다, 예를 들어, 디스플레이부(151)에 사진이 표시된 상태에서, 카메라(121)를 통 해 인증이미지가 입력되면, 디스플레이부(151)에 표시된 사진에 대해서만 잠금이 설정될 수도 있으며, 사진을 포함하는 사진저장메뉴 전체에 대해서 잠금이 설정될 수도 있다. 하나의 인증이미지를 이용하여 하나의 특정메뉴를 잠금상태로 변경할 수 있으며, 하나의 인증이미지를 이용하여 휴대 단말기에 포함되는 각각의 모든 메뉴를 잠금상태로 변경할 수 있다.On the other hand, if it is determined in operation S650 that the photographed face image is an authenticated image, the control unit 180 changes the execution screen of the specific menu to the locked state (S655). For example, in a state in which a picture is displayed on the display unit 151, the upper menu including the specific menu may be changed to the locked image by the camera 121, A lock may be set only for the picture displayed on the display unit 151, or a lock may be set for the entire picture storage menu including the picture. One specific menu may be changed to a locked state by using one authentication image, and all the menus included in the portable terminal may be changed to a locked state by using one authentication image.

도 7 내지 도 9는 본 발명의 제1실시예에 따른 휴대 단말기 동작 제어방법을 디스플레이부에 표시된 화면과 같이 설명하기 위한 도면이다.7 to 9 are views for explaining a method of controlling a mobile terminal operation according to a first embodiment of the present invention as shown in a screen displayed on a display unit.

도 7의 (a)에 도시된 바와 같이, 안면인식 잠금기능 메뉴(71) 및 번호 잠금기능 메뉴(72)를 포함하는 화면(70)이 디스플레이부(151)에 표시된다. 안면인식 잠금기능 메뉴(71)가 선택된 경우, 도 7의 (b)에 도시된 바와 같이, 제1 카메라(121a)가 활성화되어 사용자의 얼굴을 촬영하고, 촬영된 사용자의 얼굴 이미지가 표시된 화면(73)이 표시된다. 상기 촬영된 사용자의 얼굴 이미지는 특정메뉴에 대한 인증이미지로서 저장된다. 도 8은 상기 촬영된 사용자의 얼굴 이미지가 휴대 단말기 자체 잠금상태에 대한 인증이미지인 경우이고, 도 9는 상기 촬영된 사용자의 얼굴 이미지가 수신 메시지함 잠금상태에 대한 인증이미지인 경우이다.The screen 70 including the facial recognition locking function menu 71 and the number locking function menu 72 is displayed on the display unit 151 as shown in Fig. When the facial recognition lock function menu 71 is selected, as shown in FIG. 7B, the first camera 121a is activated to photograph the face of the user and display the face image of the user 73) is displayed. The photographed face image of the user is stored as an authentication image for a specific menu. FIG. 8 shows a case where the photographed user's face image is an authenticated image of the self-locking state of the portable terminal, and FIG. 9 shows a case where the photographed user's face image is an authenticated image of the received message box locked state.

휴대 단말기 자체가 잠금상태인 경우, 현재 사용자가 휴대 단말기를 이용하고자 휴대 단말기로 터치신호를 입력하거나, 임의의 키를 선택하면, 도 8의 (a)에 도시된 바와 같이, 휴대 단말기 자체가 잠금상태임을 알리는 화면이 디스플레이부(151)에 표시된다. 사용자가 제3 사용자 입력부(130c)를 선택하면, 도 8의 (b)에 도시된 바와 같이, 제1 카메라(121a)가 활성되고, 현재 사용자의 얼굴을 촬영하고, 촬영된 현재 사용자의 얼굴 이미지가 표시된 화면(74)이 표시된다. 여기서, 제3 사용자 입력부(130c)는 카메라를 활성화시키는 핫 키로서, 롱키 또는 쇼트키 중 하나로 설정될 수 있다. 안면인식 모듈(182)의 분석 결과, 촬영된 현재 사용자의 얼굴 이미지가 미리 저장된 휴대 단말기 자체의 잠금상태에 대한 인증이미지와 동일범위라고 판단되면, 도 8의 (c)에 도시된 바와 같이, 휴대 단말기 자체의 잠금상태는 해제되고, 대기화면이 표시된 화면(75)이 디스플레이부(151)에 표시된다.When the portable terminal itself is in a locked state, if the current user inputs a touch signal to the portable terminal to use the portable terminal or selects an arbitrary key, the portable terminal itself is locked The display unit 151 displays a screen informing the user of the status. When the user selects the third user input unit 130c, the first camera 121a is activated, as shown in FIG. 8 (b), to photograph the face of the current user, A screen 74 is displayed. Here, the third user input unit 130c is a hot key for activating the camera, and may be set to one of a long key or a shortcut key. If the facial recognition module 182 determines that the photographed face image of the current user is in the same range as the authenticated image of the previously stored locked state of the portable terminal itself, The locked state of the terminal itself is canceled, and a screen 75 on which the idle screen is displayed is displayed on the display unit 151. [

수신 메시지함이 잠금상태인 경우, 현재 사용자가 수신 메시지를 확인하고자 터치신호를 입력하거나, 임의의 키를 선택하면, 도 9의 (a)에 도시된 바와 같이, 수신 메시지함이 잠금상태임을 알리는 화면이 디스플레이부(151)에 표시된다. 사용자가 제3 사용자 입력부(130c)를 선택하면, 도 9의 (b)에 도시된 바와 같이, 제1 카메라(121a)가 활성되고, 현재 사용자의 얼굴을 촬영하고, 촬영된 현재 사용자의 얼굴 이미지가 표시된 화면(76)이 표시된다. 안면인식 모듈(182)의 분석 결과, 촬영된 현재 사용자의 얼굴 이미지가 미리 저장된 수신 메시지함의 잠금상태에 대한 인증이미지와 동일범위라고 판단되면, 도 9의 (c)에 도시된 바와 같이, 수신 메시지함의 잠금상태는 해제되고, 수신 메시지함에 포함된 받은 메시지, 음성 메시지, 임시 보관함이 표시된 화면(77)이 디스플레이부(151)에 표시된다. When the receiving message box is in the locked state, if the current user inputs a touch signal to confirm the received message or selects an arbitrary key, as shown in FIG. 9A, A screen is displayed on the display unit 151. When the user selects the third user input unit 130c, the first camera 121a is activated, as shown in FIG. 9 (b), to photograph the face of the current user, A screen 76 is displayed. If the facial recognition module 182 determines that the photographed face image of the current user is in the same range as the authenticated image of the locked state of the received message box, as shown in (c) of FIG. 9, The locked state of the door is released and a display 77 displaying a received message, a voice message, and a draft box included in the received message box is displayed on the display unit 151.

도 10 내지 도 12는 본 발명의 제2실시예에 따른 휴대 단말기 동작 제어방법을 디스플레이부에 표시된 화면과 함께 설명하기 위한 도면이다.10 to 12 are views for explaining a method of controlling a mobile terminal operation according to a second embodiment of the present invention, together with screens displayed on a display unit.

도 10의 (a)에 도시된 바와 같이, 안면인식 잠금기능 메뉴(81) 및 번호 잠금기능 메뉴(82)를 포함하는 화면(80)이 디스플레이부(151)에 표시된다. 안면인식 잠금기능 메뉴(81)가 선택된 경우, 도 10의 (b)에 도시된 바와 같이, 제1 카메라(121a)가 활성화되어 사용자의 웃는 얼굴 표정을 촬영하고, 촬영된 사용자의 웃는 얼굴 표정 이미지가 표시된 화면(83)이 표시된다. 상기 촬영된 사용자의 웃는 얼굴 표정 이미지는 휴대 단말기 잠금상태에 대한 인증이미지로서 저장된다. 단, 웃는 얼굴 표정 이미지가 인증이미지로 사용된 경우, 휴대 단말기의 잠금해제 후, 대기화면이 표시되도록 설정된다. 또 다른 얼굴 표정 이미지를 휴대 단말기 잠금상태에 대한 인증이미지로서 설정하고자 하는 경우, 도 10의 (c)에 도시된 바와 같이, 제1 카메라(121a)가 활성화되어 사용자의 눈 감은 얼굴 표정을 촬영하고, 촬영된 사용자의 눈 감은 얼굴 표정 이미지가 표시된 화면(84)이 표시된다. 상기 촬영된 사용자의 눈 감은 얼굴 표정 이미지는 휴대 단말기 자체 잠금상태에 대한 인증이미지로서 저장된다. 단, 눈감은 얼굴 표정 이미지가 인증이미지로 사용된 경우, 휴대 단말기의 잠금해제 후, 문자 메시지 작성을 위한 문자쓰기 화면이 표시되도록 설정된다. 즉, 휴대 단말기 잠금상태에 대한 인증이미지로서, 웃는 얼굴 및 눈감은 얼굴이 모두 설정된다.The screen 80 including the face recognition locking function menu 81 and the number locking function menu 82 is displayed on the display unit 151 as shown in FIG. When the facial recognition locking function menu 81 is selected, as shown in FIG. 10B, the first camera 121a is activated to photograph the smiling facial expression of the user, A screen 83 is displayed. The photographed smile image of the user is stored as an authentication image of the portable terminal lock status. However, if the smiling face image is used as the authentication image, the standby screen is displayed after the unlocking of the portable terminal. When another facial expression image is to be set as the authentication image for the portable terminal locking state, the first camera 121a is activated to photograph the facial expression of the user's eyes, as shown in Fig. 10 (c) , And a screen 84 on which a facial expression image of a sensed user is displayed is displayed. The facial expression image of the sensed user's eyes is stored as an authentication image of the self-locking state of the portable terminal. However, if the facial expression image is used as an authentication image, a character writing screen for writing a text message is set to be displayed after unlocking the portable terminal. That is, both the smile face and the eye-closed face are set as the authentication image for the portable terminal lock state.

휴대 단말기 자체가 잠금상태인 경우, 현재 사용자가 휴대 단말기를 이용하고자 휴대 단말기로 터치신호를 입력하거나, 임의의 키를 선택하면, 도 11의 (a)에 도시된 바와 같이, 휴대 단말기 자체가 잠금상태임을 알리는 화면이 디스플레이 부(151)에 표시된다. 사용자가 제3 사용자 입력부(130c)를 선택하면, 도 11의 (b)에 도시된 바와 같이, 제1 카메라(121a)가 활성되고, 현재 사용자의 얼굴 표정을 촬영하고, 촬영된 현재 사용자의 얼굴 표정 이미지가 표시된 화면(85)이 표시된다. 안면인식 모듈(182)의 분석 결과, 촬영된 현재 사용자의 얼굴 표정 이미지가 미리 저장된 휴대 단말기 잠금상태에 대한 인증이미지 중 웃는 얼굴 표정 이미지와 동일범위라고 판단되면, 도 8의 (c)에 도시된 바와 같이, 휴대 단말기의 잠금상태는 해제되고, 웃는 얼굴 표정 이미지에 따른 화면, 즉 대기화면이 표시된 화면(86)이 디스플레이부(151)에 표시된다.When the portable terminal itself is in a locked state, if the current user inputs a touch signal to the portable terminal to use the portable terminal or selects a certain key, the portable terminal itself is locked The display unit 151 displays a screen informing the user of the status. When the user selects the third user input unit 130c, the first camera 121a is activated as shown in FIG. 11 (b), the face image of the current user is photographed, and the face A screen 85 on which a facial expression image is displayed is displayed. If the facial recognition module 182 determines that the photographed current facial expression image of the current user is in the same range as the smile facial expression image of the authenticated image of the portable terminal locked state in which it is stored in advance, The locked state of the portable terminal is released, and a screen 86 displaying a screen based on the smiling face image, i.e., a standby screen, is displayed on the display unit 151 as shown in FIG.

한편, 도 11의 (a)에서 사용자가 제3 사용자 입력부(130c)를 선택하면, 도 12의 (a)에 도시된 바와 같이, 촬영된 현재 사용자의 얼굴 표정 이미지가 표시된 화면(87)이 표시된다. 안면인식 모듈(182)의 분석 결과, 촬영된 현재 사용자의 얼굴 표정 이미지가 미리 저장된 휴대 단말기 잠금상태에 대한 인증이미지 중 눈 감은 얼굴 표정 이미지와 동일범위라고 판단되면, 도 12의 (b)에 도시된 바와 같이, 휴대 단말기의 잠금상태는 해제되고, 눈 감은 얼굴 표정 이미지에 따른 화면, 즉 문자 메시지 작성을 위한 문자쓰기 화면이 표시된 화면(88)이 디스플레이부(151)에 표시된다. 따라서, 얼굴 표정 이미지에 의해 휴대 단말기의 잠금상태를 해제할 수 있을 뿐 아니라, 잠금해제와 동시에 원하는 특정메뉴로 바로 진입할 수 있다.On the other hand, when the user selects the third user input section 130c in FIG. 11 (a), as shown in FIG. 12 (a), the screen 87 on which the facial expression image of the photographed current user is displayed do. If it is determined from the analysis result of the facial recognition module 182 that the photographed current user's facial expression image is in the same range as the facial expression image of the eyes of the authenticated image of the portable terminal locked state stored in advance, The locked state of the portable terminal is released and the display unit 151 displays a screen 88 on which a screen based on the facial expression image with eyes closed, that is, a text writing screen for creating a text message, is displayed. Accordingly, not only can the portable terminal be unlocked by the facial expression image, but it can also directly enter a desired specific menu at the same time as releasing the lock.

그리고, 본 발명에 따른 휴대 단말기 및 그 동작 제어방법은 상기한 바와 같이 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.In addition, the configuration and method of the embodiments described above can be applied to a portable terminal and its operation control method according to the present invention, Or some of them may be selectively combined.

한편, 본 발명은 MSM(Mobile Station Modem) 등과 같이 휴대 단말기에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.Meanwhile, the present invention can be embodied as a processor-readable code on a processor-readable recording medium such as a mobile station modem (MSM). The processor-readable recording medium includes all kinds of recording apparatuses in which data that can be read by the processor is stored. Examples of the recording medium readable by the processor include a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, an optical data storage device, and the like, and also a carrier wave such as transmission over the Internet. In addition, the processor readable recording medium may be distributed over networked computer systems so that code readable by the processor in a distributed manner can be stored and executed.

또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였ㅈ지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, It will be understood by those skilled in the art that various changes and modifications may be made without departing from the spirit and scope of the present invention.

도 1은 본 발명의 일실시예에 따른 휴대 단말기의 블럭도, 1 is a block diagram of a portable terminal according to an embodiment of the present invention;

도 2는 본 발명의 일실시예에 따른 휴대 단말기의 전면 사시도,2 is a front perspective view of a mobile terminal according to an embodiment of the present invention,

도 3은 본 발명의 일실시예에 따른 휴대 단말기의 후면 사시도,3 is a rear perspective view of a portable terminal according to an embodiment of the present invention,

도 4는 본 발명의 제1일실시예에 따른 휴대 단말기 동작 제어방법을 나타내는 흐름도,4 is a flowchart illustrating a method of controlling a mobile terminal operation according to a first embodiment of the present invention.

도 5는 본 발명의 제2일실시예에 따른 휴대 단말기 동작 제어방법을 나타내는 흐름도,5 is a flowchart illustrating a method of controlling a mobile terminal operation according to a second embodiment of the present invention.

도 6은 본 발명의 제3일실시예에 따른 휴대 단말기 동작 제어방법을 나타내는 흐름도,6 is a flowchart illustrating a method of controlling a mobile terminal operation according to a third embodiment of the present invention.

도 7 내지 9는 본 발명의 제1실시예에 따른 휴대 단말기 동작 제어방법을 디스플레이부에 표시되는 화면과 함께 설명하기 위한 도면,7 to 9 are views for explaining a method of controlling a mobile terminal according to a first embodiment of the present invention, together with screens displayed on a display unit;

도 10 내지 12는 본 발명의 제2실시예에 따른 휴대 단말기 동작 제어방법을 디스플레이부에 표시되는 화면과 함께 설명하기 위한 도면이다.10 to 12 illustrate a method of controlling a mobile terminal according to a second embodiment of the present invention, together with a screen displayed on the display unit.

Claims (21)

카메라를 포함하는 휴대 단말기 동작 제어방법에 있어서,A method for controlling an operation of a portable terminal including a camera, 상기 카메라에 의해 촬영된 사용자의 얼굴 이미지를 인증이미지로 저장하는 단계;Storing a face image of a user photographed by the camera as an authentication image; 아이디 및 비밀번호를 요구하는 웹사이트 또는 메신저에 접속하는 경우, 상기 카메라를 이용하여 현재 사용자의 얼굴을 촬영하는 단계; 및Capturing a face of a current user using the camera when accessing a web site or a messenger requiring an ID and a password; And 상기 촬영된 현재 사용자의 얼굴 이미지가 상기 인증이미지로서 판단된 경우, 상기 아이디 및 비밀번호 입력을 대신하여, 상기 인증이미지를 이용하여 인증을 완료하는 단계;를 포함하는 휴대 단말기 동작 제어방법.And completing the authentication using the authentication image instead of inputting the ID and the password when the photographed face image of the current user is determined as the authentication image. 제1항에 있어서,The method according to claim 1, 인증 완료된 상태의 웹사이트 화면 또는 메시지 화면을 표시하는 단계;를 더 포함하는 것을 특징으로 하는 휴대 단말기 동작 제어방법.And displaying the web site screen or the message screen in the authenticated state. 삭제delete 카메라를 포함하는 휴대 단말기 동작 제어방법에 있어서,A method for controlling an operation of a portable terminal including a camera, 상기 카메라에 의해 촬영된 사용자의 얼굴 표정 이미지를 인증이미지로서 저장하고, 저장된 얼굴 표정 이미지에 대응하여 특정 웹서버에 접속하기 위한 로그인을 설정하는 단계;Storing a facial expression image of a user photographed by the camera as an authentication image, and setting a login for accessing a specific web server corresponding to the stored facial expression image; 동작 잠금 상태에서, 상기 카메라를 이용하여 현재 사용자의 얼굴 표정을 촬영하는 단계; 및Capturing a facial expression of a current user using the camera in an operation locked state; And 상기 촬영된 현재 사용자의 얼굴 표정 이미지가 상기 인증이미지로 판단된 경우, 상기 동작 잠금 상태를 해제하고, 상기 웹서버에서 제공하는 웹페이지에 로그인하고, 상기 웹페이지의 로그인 된 실행화면을 표시하는 단계;를 포함하는 휴대 단말기 동작 제어방법.Releasing the operation lock state, logging into a web page provided by the web server, and displaying a login execution screen of the web page when the photographed current user's facial expression image is determined as the authenticated image And controlling the operation of the portable terminal. 삭제delete 제4항에 있어서,5. The method of claim 4, 상기 얼굴 표정 이미지는, 웃는 얼굴 이미지, 눈감은 얼굴 이미지, 및 무표정한 얼굴 이미지를 중 어느 하나인 것을 특징으로 하는 휴대 단말기 동작 제어방법.Wherein the facial expression image is any one of a smile image, a face image, and an expressionless face image. 삭제delete 삭제delete 삭제delete 카메라;camera; 상기 카메라에 의해 촬영된 이미지를 표시하는 디스플레이부; 및A display unit for displaying an image photographed by the camera; And 상기 카메라에 의해 촬영된 사용자의 얼굴 이미지를 인증이미지로서 저장하고, 아이디 및 비밀번호를 요구하는 웹사이트 또는 메신저에 접속시, 상기 카메라에 의해 촬영된 현재 사용자의 얼굴 이미지가 상기 인증이미지로서 판단된 경우, 상기 아이디 및 비밀번호 입력을 대신하여, 상기 인증이미지를 이용하여 인증을 완료하는 제어부;를 포함하는 휴대 단말기. When the face image of the current user photographed by the camera is judged as the authenticated image when the web site or the messenger requesting the ID and the password is accessed and the facial image of the user photographed by the camera is stored as the authenticated image And a controller for completing the authentication using the authentication image, instead of inputting the ID and the password. 제10항에 있어서,11. The method of claim 10, 상기 제어부는, 인증 완료된 상태의 웹사이트 화면 또는 메시지 화면을 상기 디스플레이부에 표시하는 것을 특징으로 하는 휴대 단말기.Wherein the control unit displays the website screen or the message screen in the authenticated state on the display unit. 삭제delete 제10항에 있어서,11. The method of claim 10, 상기 제어부는, 상기 현재 사용자의 얼굴 이미지를 분석하여 상기 인증이미지와 일치하는지 여부를 판단하는 안면인식 모듈;을 포함하는 것을 특징으로 하는 휴대 단말기.And a face recognition module for analyzing a face image of the current user and determining whether the face image matches the authentication image. 카메라;camera; 상기 카메라에 의해 촬영된 이미지를 표시하는 디스플레이부; 및A display unit for displaying an image photographed by the camera; And 상기 카메라에 의해 촬영된 사용자의 얼굴 표정 이미지를 인증이미지로서 저장하고, 저장된 얼굴 표정 이미지에 대응하여 특정 웹서버에 접속하기 위한 로그인을 설정하고, Storing a facial expression image of a user photographed by the camera as an authentication image, setting a login for accessing a specific web server corresponding to the stored facial expression image, 동작 잠금 상태에서, 상기 카메라에 의해 촬영된 현재 사용자의 얼굴 표정 이미지가 상기 인증이미지로 판단된 경우, 상기 동작 잠금 상태를 해제하고 상기 웹서버에서 제공하는 웹페이지에 로그인하고, 상기 웹페이지의 로그인된 실행화면을 상기 디스플레이부에 표시하도록 제어하는 제어부;를 포함하는 휴대 단말기.When the image of the facial expression of the current user photographed by the camera is determined as the authenticated image in the operation locked state, the operation lock state is released and the web page provided by the web server is logged in. And a control unit for controlling the display unit to display the execution screen. 삭제delete 삭제delete 제14항에 있어서,15. The method of claim 14, 상기 제어부는, 상기 현재 사용자의 얼굴 표정 이미지를 분석하여 상기 저장된 얼굴 표정 이미지 중 어느 하나와 일치하는지 여부를 판단하는 안면인식 모듈;을 포함하는 휴대 단말기.Wherein the controller analyzes the facial expression image of the current user to determine whether the stored facial expression image matches any one of the stored facial expression images. 삭제delete 삭제delete 삭제delete 삭제delete
KR1020080059708A 2008-06-24 2008-06-24 Mobile terminal and operation control method thereof KR101453908B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080059708A KR101453908B1 (en) 2008-06-24 2008-06-24 Mobile terminal and operation control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080059708A KR101453908B1 (en) 2008-06-24 2008-06-24 Mobile terminal and operation control method thereof

Publications (2)

Publication Number Publication Date
KR20100000274A KR20100000274A (en) 2010-01-06
KR101453908B1 true KR101453908B1 (en) 2014-10-21

Family

ID=41810690

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080059708A KR101453908B1 (en) 2008-06-24 2008-06-24 Mobile terminal and operation control method thereof

Country Status (1)

Country Link
KR (1) KR101453908B1 (en)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8811948B2 (en) 2010-07-09 2014-08-19 Microsoft Corporation Above-lock camera access
US9009630B2 (en) 2012-06-05 2015-04-14 Microsoft Corporation Above-lock notes
KR102006490B1 (en) * 2012-11-15 2019-10-01 엘지전자 주식회사 Mobile terminal and method for controlling of the same
US9652135B2 (en) 2012-12-10 2017-05-16 Samsung Electronics Co., Ltd. Mobile device of bangle type, control method thereof, and user interface (ui) display method
KR102206044B1 (en) 2012-12-10 2021-01-21 삼성전자주식회사 Mobile device of bangle type, and methods for controlling and diplaying ui thereof
KR102041984B1 (en) * 2012-12-18 2019-11-07 삼성전자주식회사 Mobile apparatus having function of face recognition with additional component
CN103186793A (en) * 2013-03-26 2013-07-03 北京小米科技有限责任公司 Mobile terminal screen unlocking method and device
CN106572235A (en) * 2016-09-01 2017-04-19 珠海格力电器股份有限公司 Method and apparatus unlocking mobile phone, and terminal

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030042278A (en) * 2001-11-22 2003-05-28 엘지전자 주식회사 Method for unlocking using image data in mobile phone
KR20050079125A (en) * 2004-02-04 2005-08-09 엘지전자 주식회사 Methods and a apparatus of setting normal display image and ringing signal for mobile phone

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030042278A (en) * 2001-11-22 2003-05-28 엘지전자 주식회사 Method for unlocking using image data in mobile phone
KR20050079125A (en) * 2004-02-04 2005-08-09 엘지전자 주식회사 Methods and a apparatus of setting normal display image and ringing signal for mobile phone

Also Published As

Publication number Publication date
KR20100000274A (en) 2010-01-06

Similar Documents

Publication Publication Date Title
KR101453908B1 (en) Mobile terminal and operation control method thereof
KR101435800B1 (en) Portable terminal, method for transmitting data in the portable terminal and program recording medium
KR101517967B1 (en) Controlling a Mobile Terminal
KR101396974B1 (en) Portable terminal and method for processing call signal in the portable terminal
KR101404692B1 (en) Mobile terminal and operation control method thereof
KR101517080B1 (en) Mobile terminal and operation control method thereof
KR101500505B1 (en) Mobile terminal and operation method thereof
KR101539039B1 (en) Mobile terminal and operation control method thereof
KR101537690B1 (en) Mobile terminal and method for providing instant message service in mobile terminal
KR20100056209A (en) Mobile terminal and operation method thereof
KR101579482B1 (en) Mobile terminal and operation method thereof
KR101530554B1 (en) Mobile terminal and operation control method thereof
KR101521220B1 (en) Mobile terminal and operation control method thereof
KR20110013765A (en) Mobile terminal and operation method thereof
KR101617285B1 (en) Mobile Terminal and Operation method thereof
KR102018657B1 (en) Mobile terminal and Operationg method thereof
KR101590368B1 (en) Mobile terminal and operating method thereof
KR101590358B1 (en) Mobile terminal including block device and Operating method thereof
KR101544549B1 (en) Mobile terminal and control method thereof
KR101549552B1 (en) Mobile terminal and operation control method thereof
KR101488392B1 (en) Mobile terminal and operation method thereof
KR101533705B1 (en) Mobile terminal and operation method thereof
KR101366266B1 (en) Portable terminal and method for processing signal in the portable terminal
KR101534309B1 (en) Mobile terminal and operation method thereof
KR101522884B1 (en) Mobile terminal and operation method thereof

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170922

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180921

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190924

Year of fee payment: 6