KR20090059613A

KR20090059613A - A portable multimedia player based on an user recognition and method for controlling the same

Info

Publication number: KR20090059613A
Application number: KR1020070126563A
Authority: KR
Inventors: 나태준
Original assignee: 주식회사 대우일렉트로닉스
Priority date: 2007-12-07
Filing date: 2007-12-07
Publication date: 2009-06-11

Abstract

A portable multimedia player and the control method thereof are provided to control the operation of the multimedia player having an image capturing unit using image photographing device. A portable multimedia player based on an user recognition comprises: an image capturing unit(104) having image using an image photographing device; a status information detecting part(106) which detects the status information of the user using the captured image through the image capturing unit; and a controller(108) which controls the multimedia player based on the detected status information from the status information detecting part.

Description

Portable multimedia playback device based on user recognition and its control method {A PORTABLE MULTIMEDIA PLAYER BASED ON AN USER RECOGNITION AND METHOD FOR CONTROLLING THE SAME}

본 발명은 휴대용 멀티미디어 재생 기기가 동작하는 도중 주변의 촬영을 통해 획득한 영상을 토대로 휴대용 멀티미디어 재생 기기의 동작을 제어하는 사용자 인식 기반의 휴대용 멀티미디어 재생 기기와 그 제어 방법에 관한 것이다.The present invention relates to a portable multimedia playback device based on user recognition and a control method thereof for controlling the operation of the portable multimedia playback device on the basis of an image obtained by photographing surroundings while the portable multimedia player is operating.

휴대용 멀티미디어 재생기기(PMP : Portable Multimedia Player) 라 함은 MPEG 압축 기반의 음악에서 이미지 및 동영상 컨텐츠까지 이르는 다양한 멀티미디어파일들을 휴대하면서 재생시킬 수 있는 기기를 의미한다. 이러한 기기는 특히 젊은 층이 휴대폰 다음으로 많이 휴대하는 것으로 점차 다양한 부가 기능 등이 첨가되다 보니 임베디드 시스템(CPU, 메모리, 보조 기억 장치, 기타 주변기기 등으로 구성되며, 이하 자세한 설명 생략) 기반으로 설계되어 다중 작업이 가능해 지고 있습니다. 이러한 점을 이용하여 자판을 구비한 전자 사전이 휴대용 MP3 플레이어와 컨버젼(conversion) 되는 형태를 지향하기도 하고 다양한 멀티미디어 파일을 재생할 수 있게 OS 기반의 PDA 형태를 취하여 사전 기능을 내장하고 있는 기기도 있습니다.The portable multimedia player (PMP) refers to a device that can carry and play various multimedia files ranging from music based on MPEG compression to image and video contents. These devices are designed to be based on embedded systems (composed of CPU, memory, auxiliary memory, other peripherals, etc.) as young people are carrying more than cell phones, and various additional functions are gradually added. Multitasking is becoming possible. In this regard, the electronic dictionary equipped with keyboards can be converted into a portable MP3 player, and some devices have a built-in dictionary function by taking an OS-based PDA to play various multimedia files.

최근들어, 이러한 휴대용 멀티미디어 재생 기기가 널리 보급됨에 따라 휴대용 멀티미디어 재생기기의 업계에서는 사용자에게 보다 다양한 서비스를 제공하기 위한 연구가 진행 중에 있다.Recently, as the portable multimedia player is widely used, researches for providing more various services to users in the industry of the portable multimedia player are in progress.

본 발명은 얼굴 인식을 기반으로 하여 사용자의 상태 정보를 추출한 후 이를 토대로 멀티미디어 재생기기를 제어하여 사용자의 편의를 증진시킬 수 있다.The present invention can improve the user's convenience by extracting the user's state information based on face recognition and controlling the multimedia player based on this.

본 발명에 따른 사용자 인식 기반의 휴대용 멀티미디어 재생 기기는, 저장매체에 저장된 데이터를 재생하는 휴대용 멀티미디어 재생 기기로서, 영상 촬영 수단을 이용하여 상기 휴대용 멀티미디어 재생기기의 주변을 촬영하여 영상을 획득하는 영상 획득부와, 상기 영상 획득부를 통해 획득한 영상을 이용하여 상기 사용자의 상태 정보를 검출하는 상태 정보 검출부와, 상기 상태 정보 검출부에서 검출된 상태 정보를 토대로 상기 휴대용 멀티미디어 재생 기기를 제어하는 제어부를 포함한다.A portable multimedia playback device based on user recognition according to the present invention is a portable multimedia playback device for reproducing data stored in a storage medium, and acquires an image by capturing the surroundings of the portable multimedia playback device by using image capturing means. And a state information detection unit detecting state information of the user by using the image acquired through the image acquisition unit, and a control unit controlling the portable multimedia playback device based on the state information detected by the state information detection unit. .

본 발명의 휴대용 멀티미디어 재생 기기의 제어 방법은, (a) 재생 모드 시 영상 촬영 수단을 이용하여 상기 휴대용 멀티미디어 재생기기의 주변을 촬영하여 영상을 획득하는 단계와, (b) 상기 획득한 영상을 이용하여 상기 사용자의 상태 정보를 검출하는 단계와, (c) 상기 검출된 상태 정보를 토대로 상기 휴대용 멀티미디어 재생 기기를 제어하는 단계를 포함한다.The control method of the portable multimedia player of the present invention comprises the steps of: (a) capturing the surroundings of the portable multimedia player using an image capturing unit in a playback mode to obtain an image; and (b) using the acquired image. Detecting the state information of the user, and (c) controlling the portable multimedia player based on the detected state information.

본 발명에서는 휴대용 멀티미디어 재생 기기가 동작하는 동안 촬영된 영상을 토대로 사용자의 상태를 파악하고 이를 토대로 휴대용 멀티미디어 재생 기기를 자동 제어할 수 있다.In the present invention, the user's state can be determined based on the captured image while the portable multimedia player is operating, and the portable multimedia player can be automatically controlled.

본 발명은 휴대용 멀티미디어 재생 기기가 동작하는 도중에 영상 촬영 수단을 통해 획득한 영상을 토대로 사용자의 상태 정보를 검출하고, 검출된 사용자의 상태 정보에 의거하여 기기의 동작(재생) 모드를 대기 모드로 절환시키며, 기 설정된 시간 동안 대기 모드로 동작하는 경우 전원을 오프시킴으로서, 사용자의 상태에 따라 휴대용 멀티미디어 재생 기기를 자동 제어할 수 있을 뿐만 아니라 휴대용 멀티미디어 재생 기기의 전력 낭비를 줄일 수 있다.The present invention detects the user's status information on the basis of the image acquired through the image capturing means while the portable multimedia player is in operation, and switches the operation (playback) mode of the device to the standby mode based on the detected user's status information. In addition, by turning off the power when operating in the standby mode for a preset time, the portable multimedia player may be automatically controlled according to the user's state and power consumption of the portable multimedia player may be reduced.

이하, 본 발명의 바람직한 실시예를 첨부된 도면들을 참조하여 상세히 설명한다. 아울러 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings. In addition, in describing the present invention, when it is determined that the detailed description of the related known configuration or function may obscure the gist of the present invention, the detailed description thereof will be omitted.

본 발명의 바람직한 실시 예에서는 사용자가 휴대용 멀티미디어 재생 기기를 이용하여 임의의 데이터를 재생하는 도중에 카메라를 이용하여 기기의 정면에 대응되는 영상을 획득한 후 이를 토대로 사용자의 상태 정보를 추출하여 휴대용 멀티미디어 재생 기기를 제어한다는 기술적 사상에 대해 설명한다.According to a preferred embodiment of the present invention, while a user plays back arbitrary data using a portable multimedia playback device, the user acquires an image corresponding to the front of the device using a camera, and then extracts the user's state information based on the portable multimedia playback device. The technical idea of controlling a device will be described.

도 1은 본 발명의 바람직한 실시 예에 따른 사용자 인식 기반의 휴대용 멀티미디어 재생 기기의 내부를 도시한 블록도이며, 도 2는 본 발명의 바람직한 실시 예에 따른 휴대용 멀티미디어 재생 기기의 외관을 도시한 도면이다.1 is a block diagram illustrating an interior of a portable multimedia player based on user recognition according to an exemplary embodiment of the present invention, and FIG. 2 is a view illustrating an appearance of the portable multimedia player according to an exemplary embodiment of the present invention. .

본 발명의 바람직한 실시 예에 따른 휴대용 멀티미디어 재생 기기는, 키 입력부(100), 저장매체(102), 영상 획득부(104), 상태 정보 검출부(106), 제어부(108), 신호 처리부(110), 영상 출력부(112), 음성 출력부(114)를 포함하며, 영상 획득부(104)와 연결된 카메라(200)를 포함한다.In the portable multimedia player according to an exemplary embodiment of the present invention, the key input unit 100, the storage medium 102, the image acquisition unit 104, the state information detection unit 106, the control unit 108, and the signal processing unit 110 are provided. , An image output unit 112, an audio output unit 114, and a camera 200 connected to the image acquisition unit 104.

키 입력부(100)는 휴대용 멀티미디어 재생 기기의 제어를 위한 다양한 키를 제공하며, 사용자는 이러한 키 입력부(100)에서 제공하는 키의 조작을 통해 휴대용 멀티미디어 재생 기기를 제어한다. 키 입력부(100)는 사용자의 키 조작에 따라 다양한 키 신호를 제어부(108)에 제공한다.The key input unit 100 provides various keys for controlling the portable multimedia player, and the user controls the portable multimedia player by manipulating the keys provided by the key input unit 100. The key input unit 100 provides various key signals to the controller 108 according to a user's key manipulation.

저장매체(102)는 다양한 데이터, 예컨대 휴대용 멀티미디어 재생 기기를 제어하기 위한 OS, 멀티미디어 파일, MP3 파일 등이 저장된 하드디스크이며, 제어부(108)의 제어에 의해 임의의 데이터가 추출되거나 저장될 수 있다.The storage medium 102 is a hard disk in which various data, for example, an OS for controlling a portable multimedia player, a multimedia file, an MP3 file, and the like, are stored, and arbitrary data may be extracted or stored under the control of the controller 108. .

영상 획득부(104)는 휴대용 멀티미디어 재생 기기의 외부 임의의 위치, 예컨대, 도 2에 도시된 바와 같이 정면 중앙에 설치되는 영상 촬영 수단인 카메라(도 2의 200)를 구동을 제어하며, 제어부(108)의 제어를 통해 카메라(200)를 구동시켜 휴대용 멀티미디어 재생 기기의 정면에서 소정 반경 내의 영상을 촬영하여 영상을 획득한다. 여기서, 영상 획득부(104)에서 획득된 영상은 상태 정보 검출부(106)에 제공된다.The image acquisition unit 104 controls the driving of a camera (200 of FIG. 2), which is an image photographing means installed at an arbitrary external location of the portable multimedia playback device, for example, at the front center as shown in FIG. 108, the camera 200 is driven to capture an image within a predetermined radius from the front of the portable multimedia playback device to obtain an image. Here, the image acquired by the image acquisition unit 104 is provided to the state information detection unit 106.

상태 정보 검출부(106)는 영상 획득부(104)를 통해 획득한 영상을 토대로 사용자의 상태 정보를 검출하는데, 즉 획득한 영상 내에 사용자의 얼굴 정보를 추출하고, 추출된 얼굴 정보를 토대로 사용자의 현재 상태, 예컨대 사용자가 졸고 있는 상황, 사용자가 부재중인 상황 등의 사용자의 상태 정보를 검출하여 제어부(108)에 제공한다. 이러한 상태 정보 검출부(106)는 영상 인식 기반의 칩이 내장되어 있으며, 상기 칩을 기반으로 영상을 분석하여 사용자의 상태 정보를 검출한다.The state information detector 106 detects the state information of the user based on the image acquired through the image acquirer 104, that is, extracts the face information of the user from the acquired image, and based on the extracted face information, Status information, for example, a situation where the user is dozing, a situation where the user is absent, is detected and provided to the controller 108. The state information detection unit 106 includes a chip based on image recognition, and detects state information of a user by analyzing an image based on the chip.

제어부(108)는 휴대용 멀티미디어 재생 기기의 전반적인 기능, 예컨대 멀티미디어 데이터 재생, 전자 사전 기능, MP3 재생 등의 기능을 제어하며, 특히 상태 정보 검출부(106)로부터 제공받은 사용자의 상태 정보를 토대로 휴대용 멀티미디어 재생 기기의 모드를 절환시킨다. 즉, 제어부(108)는 재생 모드 시 영상 획득부(104)의 제어를 통해 상태 정보 검출부(106)로부터 제공받은 상태 정보를 토대로 재생 모드를 대기 모드로 절환시킨 후 기 설정된 시간이 경과하면 전원을 오프시키는데, 더욱 상세하게는 상태 정보가 영상 내에 사용자가 존재하지 않거나 졸고 있는 경우에 재생 모드를 대기 모드로 절환시키고, 대기 모드 절환 후 기 설정된 시간이 경과되면 휴대용 멀티미디어 재생기기의 전원을 오프시킨다.The controller 108 controls the overall functions of the portable multimedia playback device, such as multimedia data playback, electronic dictionary function, MP3 playback, and the like, and in particular, portable multimedia playback based on the user's status information provided from the status information detector 106. Switch the mode of the device. That is, the controller 108 switches the playback mode to the standby mode based on the status information provided from the status information detector 106 through the control of the image acquisition unit 104 in the playback mode, and then, when the preset time elapses, turns the power off. In more detail, the status information switches the playback mode to the standby mode when the user does not exist or is dozing in the image, and turns off the power of the portable multimedia player when a preset time elapses after the standby mode is switched.

신호 처리부(110)는 제어부(108)를 통해 제공받은 데이터를 소정의 신호 처리, 예컨대 MPEG 신호 처리를 통해 영상과 음성으로 분리하여 영상 출력부(112)와 음성 출력부(114)로 출력한다.The signal processor 110 divides the data provided through the controller 108 into a video and an audio through predetermined signal processing, for example, MPEG signal processing, and outputs the data to the video output unit 112 and the audio output unit 114.

영상 출력부(112)는 영상을 도 2의 LCD창과 같은 디스플레이 상에 출력하며, 음성 출력부(114)는 음성을 소정 레벨로 증폭한 후 스피커(미도시)를 통해 출력한다.The image output unit 112 outputs an image on a display such as the LCD window of FIG. 2, and the audio output unit 114 amplifies the audio to a predetermined level and then outputs it through a speaker (not shown).

상기와 같은 구성을 갖는 휴대용 멀티미디어 재생 기기가 사용자 인식 기반으로 동작하는 과정에 대해 도 3 내지 도 4를 참조하여 설명한다.A process of operating the portable multimedia player having the above configuration based on user recognition will be described with reference to FIGS. 3 to 4.

도 3은 본 발명의 바람직한 실시 예에 따라 사용자 인식 기반으로 한 휴대용 멀티미디어 재생 기기의 제어 과정을 도시한 흐름도이며, 도 4는 도 3에서 사용자의 상태 정보를 검출하여 휴대용 멀티미디어 재생 기기를 제어하는 과정을 도시한 상세 흐름도이다.3 is a flowchart illustrating a control process of a portable multimedia playback device based on user recognition according to a preferred embodiment of the present invention, and FIG. 4 is a process of controlling the portable multimedia playback device by detecting state information of the user in FIG. 3. It is a detailed flowchart showing the.

도 3을 참조하면, 사용자가 키 입력부(108)의 조작을 통해 저장매체(102)에 저장된 데이터 중 어느 하나를 선택하여 재생하고자 하면, 키 입력부(108)는 사용자의 키 조작에 따른 키 신호를 제어부(108)에 제공한다. 이에, 제어부(108)는 재생 모드로 동작, 즉 사용자가 선택한 데이터를 저장매체(102)에서 인출한 후 이를 신호 처리부(110)에 제공하며, 신호 처리부(110)는 제어부(108)로부터 제공받은 데이터를 소정의 신호 처리하여 영상 및 음성 출력부(112, 114)에 제공함으로서, 데이터를 재생시킨다(S300).Referring to FIG. 3, when the user selects and plays one of the data stored in the storage medium 102 through the operation of the key input unit 108, the key input unit 108 may output a key signal according to the user's key operation. It provides to the control unit 108. Accordingly, the controller 108 operates in the playback mode, that is, the data selected by the user is fetched from the storage medium 102 and then provided to the signal processor 110, and the signal processor 110 is provided from the controller 108. The data is reproduced by providing predetermined signal processing to the video and audio output units 112 and 114 (S300).

이와 같이, 휴대용 멀티미디어 재생 기기가 재생 모드로 동작할 때, 제어부(108)는 영상 획득부(104)의 제어를 통해 휴대용 멀티미디어 재생 기기의 정면 앞부분에 설치된 카메라(200)를 구동시켜 휴대용 멀티미디어 재생 기기의 정면 앞부분에서 소정 반경 내의 영상을 촬영한다(S302, S304). 이렇게 촬영된 영상은 상태 정보 검출부(106)에 제공된다.As such, when the portable multimedia playback device operates in the playback mode, the controller 108 drives the camera 200 installed in front of the portable multimedia playback device through the control of the image acquisition unit 104 to perform the portable multimedia playback device. An image within a predetermined radius is photographed in front of the front (S302, S304). The captured image is provided to the state information detector 106.

상태 정보 검출부(106)는 영상 인식 기술을 토대로 영상 내의 분석을 통해 사용자의 상태 정보를 검출한다(S306). 검출된 사용자의 상태 정보는 제어부(108)에 제공된다.The state information detection unit 106 detects state information of the user through analysis in the image based on the image recognition technology (S306). The detected state information of the user is provided to the controller 108.

제어부(108)는 제공받은 사용자의 상태 정보를 토대로 휴대용 멀티미디어 재생기기를 제어(S308)하는데, 예를 들어 재생 모드를 대기 모드로 절환시키거나 대기 모드 절환 후 기 설정된 시간이 경과하면 전원을 오프시킨다.The controller 108 controls the portable multimedia player based on the user's state information (S308). For example, the controller 108 switches the play mode to the standby mode or turns off the power when a predetermined time elapses after the standby mode is switched. .

상기의 단계 S306, S308에 대해 상세하게 설명하면, 도 4에 도시된 바와 같이, 먼저 상태 정보 검출부(106)는 영상 획득부(104)로부터 제공받은 영상을 분석하여 영상 내에 사용자가 존재하는지를 판단한다(S400).4, the state information detection unit 106 first analyzes an image provided from the image acquisition unit 104 to determine whether a user exists in the image. (S400).

S400의 판단 결과, 영상 내에 사용자가 존재할 경우 상태 정보 검출부(106)는 영상의 분석을 통해 얼굴 정보를 검출한 후(S402), 얼굴 정보를 토대로 사용자의 상태 정보, 예를 들어 사용자가 졸음 상태인지를 판단한다(S404). 즉, 상태 정보 검출부(106)는 영상 내 사용자의 얼굴 정보에서 눈의 상태를 토대로 사용자의 현재 상태 정보가 졸음 상태인지를 판단할 수 있다. 이와 같이 상태 정보 검출부(106)에 의해서 검출된 사용자의 상태 정보는 제어부(108)에 제공된다.As a result of the determination of S400, when the user exists in the image, the state information detection unit 106 detects the face information through analysis of the image (S402), and determines whether the user is drowsy based on the face information. Determine (S404). That is, the state information detector 106 may determine whether the current state information of the user is drowsy based on the eye state in the face information of the user in the image. In this way, the user's state information detected by the state information detection unit 106 is provided to the control unit 108.

S404의 판단 결과, 사용자의 상태가 졸음 상태인 경우 제어부(108)는 재생 모드에서 재생을 중지하고 대기 모드로 절환시킨다(S406).As a result of the determination in S404, when the user's state is drowsy, the controller 108 stops playback in the playback mode and switches to the standby mode (S406).

대기 모드로 절환시킨 후 제어부(108)는 기 설정된 시간이 경과했는지를 판단한다(S408). 시간 경과 여부는 제어부(108)에 도시 생략되었지만 카운터를 이용하여 시간을 체크하여 대기 모드 진입 후 기 설정된 시간에 도달하였는지를 판단할 수 있다.After switching to the standby mode, the controller 108 determines whether a predetermined time has elapsed (S408). Although the time has elapsed is not shown in the controller 108, the time may be checked using a counter to determine whether the preset time has been reached after entering the standby mode.

S408의 판단 결과, 기 설정된 시간이 경과되지 않은 경우 휴대용 멀티미디어 재생 기기는 S302, S304 및 S306을 수행한 후 S400으로 진행하여 이후 단계를 수행한다.As a result of the determination in S408, when the preset time has not elapsed, the portable multimedia playback device performs S302, S304, and S306, and then proceeds to S400 to perform subsequent steps.

S408의 판단 결과, 기 설정된 시간이 경과한 경우 제어부(108)는 휴대용 멀티미디어 재생 기기의 전원을 오프시킨다(S410).As a result of the determination in S408, when the predetermined time has elapsed, the controller 108 turns off the power of the portable multimedia playback device (S410).

한편, S400의 판단 결과, 영상 내에 사용자가 존재하지 않은 경우 제어부(108)는 S406으로 진행, 즉 재생을 중지시키고 대기 모드로 진입한 후 이를 단계를 수행한다.On the other hand, as a result of the determination of S400, if there is no user in the image, the controller 108 proceeds to S406, that is, stops playback and enters the standby mode and performs the step.

또한, S404의 판단 결과, 얼굴 정보를 토대로 검출한 사용자의 상태가 졸음 상태가 아닌 경우 제어부(108)는 S300으로 진행하여 재생 중인 데이터를 계속해서 재생시킨다.In addition, as a result of the determination in S404, when the user's state detected based on the face information is not a drowsy state, the controller 108 proceeds to S300 to continuously reproduce the data being played.

본 발명의 바람직한 실시 예에 따르면, 휴대용 멀티미디어 재생 기기가 동작하는 도중에 카메라를 통해 획득한 영상을 토대로 사용자의 상태 정보를 검출하고, 검출된 사용자의 상태 정보에 의거하여 기기의 동작 모드를 대기 모드로 절환시킨 후 기 설정된 시간 동안 대기 모드로 동작하는 경우 전원을 오프시킴으로서, 사용자의 상태에 따라 휴대용 멀티미디어 재생 기기를 자동 제어할 수 있다.According to a preferred embodiment of the present invention, while the portable multimedia playback device is operating, the user's state information is detected based on the image acquired through the camera, and the operation mode of the device is set to the standby mode based on the detected user's state information. When switching to the standby mode for a predetermined time after switching to turn off the power, it is possible to automatically control the portable multimedia playback device according to the user's state.

지금까지 본 발명의 일 실시예에 국한하여 설명하였으나 본 발명의 기술이 당업자에 의하여 용이하게 변형 실시될 가능성이 자명하다. 이러한 변형된 실시 예들은 본 발명의 특허청구범위에 기재된 기술사상에 포함된다고 하여야 할 것이다.It has been described so far limited to one embodiment of the present invention, it is obvious that the technology of the present invention can be easily modified by those skilled in the art. Such modified embodiments should be included in the technical spirit described in the claims of the present invention.

도 1은 본 발명의 바람직한 실시 예에 따른 사용자 인식 기반의 휴대용 멀티미디어 재생 기기의 내부를 도시한 블록도이며, 1 is a block diagram showing the inside of a portable multimedia playback device based on user recognition according to an embodiment of the present invention.

도 2는 본 발명의 바람직한 실시 예에 따른 휴대용 멀티미디어 재생 기기의 외관을 도시한 도면이며,2 is a view showing the appearance of a portable multimedia playback device according to an embodiment of the present invention,

도 3은 본 발명의 바람직한 실시 예에 따라 사용자 인식 기반으로 한 휴대용 멀티미디어 재생 기기의 제어 과정을 도시한 흐름도이며, 3 is a flowchart illustrating a control process of a portable multimedia playback device based on user recognition according to an embodiment of the present invention.

도 4는 도 3에서 사용자의 상태 정보를 검출하여 휴대용 멀티미디어 재생 기기를 제어하는 과정을 도시한 상세 흐름도이다.FIG. 4 is a detailed flowchart illustrating a process of controlling the portable multimedia playback device by detecting state information of the user in FIG. 3.

＜도면의 주요부분에 대한 부호의 설명＞<Description of the code | symbol about the principal part of drawing>

100 : 키 입력부 102 : 저장매체100: key input unit 102: storage medium

104 : 영상 획득부 106 : 상태 정보 검출부104: image acquisition unit 106: state information detection unit

108 : 제어부 110 : 신호 처리부108: controller 110: signal processor

112 : 영상 출력부 114 : 음성 출력부112: video output unit 114: audio output unit

200 : 카메라200: camera

Claims

A portable multimedia playback device that plays back data stored on a storage medium.

An image acquiring unit which acquires an image by capturing the periphery of the portable multimedia player using an image capturing means;

A state information detection unit detecting state information of the user by using an image acquired through the image acquisition unit;

A controller for controlling the portable multimedia player based on the state information detected by the state information detector;

Portable multimedia playback device based on user recognition comprising a.

The method of claim 1,

The state information detection unit,

And face information detecting means for detecting face information from the obtained image.

A portable multimedia playback device based on user recognition, characterized by detecting the state information of the user based on the face information detected by the face information detector.

The method of claim 1,

The image capturing means may be a camera driven at a predetermined time interval when the portable multimedia player plays data stored in the storage medium.

A control method of a portable multimedia player for reproducing data stored in a storage medium,

(a) capturing the surroundings of the portable multimedia player using image capturing means to obtain an image in a playback mode;

(b) detecting the status information of the user by using the acquired image;

(c) controlling the portable multimedia player based on the detected state information

Control method of a portable multimedia playback device comprising a.

The method of claim 4, wherein

In step (b),

Determining whether a user exists in the acquired image;

Detecting face information in the acquired image when the user exists in the obtained image as a result of the determination;

And controlling the user's status information based on the detected face information.

The method of claim 1,

In step (c),

Switching the playback mode to a standby mode when the user state information is drowsy or when the user does not exist in the acquired image;

Turning off the portable multimedia player when the preset time elapses after switching to the standby mode;

Control method of a portable multimedia playback device further comprising.