KR20150064597A - Video display device and operating method thereof - Google Patents
Video display device and operating method thereof Download PDFInfo
- Publication number
- KR20150064597A KR20150064597A KR1020130149483A KR20130149483A KR20150064597A KR 20150064597 A KR20150064597 A KR 20150064597A KR 1020130149483 A KR1020130149483 A KR 1020130149483A KR 20130149483 A KR20130149483 A KR 20130149483A KR 20150064597 A KR20150064597 A KR 20150064597A
- Authority
- KR
- South Korea
- Prior art keywords
- user
- display device
- area
- ratio
- extracting
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
- G06F3/005—Input arrangements through a video camera
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/107—Static hand or arm
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment
Abstract
Description
본 발명은 디스플레이 장치 및 그의 동작 방법에 관한 것으로, 보다 상세하게는 디스플레이 장치와 사용자 간의 거리에 따라 사용자의 작업 영역을 최적화하기 위한 디스플레이 장치 및 그의 동작 방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a display device and a method of operating the same, and more particularly, to a display device and an operation method thereof for optimizing a user's working area according to a distance between a display device and a user.
최근 들어, 유선 또는 무선 통신망을 이용한 디지털 TV 서비스가 보편화되고 있다. 디지털 TV 서비스는 기존의 아날로그 방송 서비스에서는 제공할 수 없었던 다양한 서비스를 제공할 수 있다. In recent years, digital TV services using wired or wireless communication networks have become popular. The digital TV service can provide various services that can not be provided by the existing analog broadcasting service.
예를 들어 디지털 TV 서비스의 한 종류인 IPTV(Internet Protocol Television) 서비스의 경우 사용자로 하여금 시청 프로그램의 종류, 시청 시간 등을 능동적으로 선택할 수 있도록 하는 양방향성을 제공한다. IPTV 서비스는 이러한 양방향성을 기반으로 하여 다양한 부가 서비스, 예컨대 인터넷 검색, 홈쇼핑, 온라인 게임 등을 제공할 수도 있다. For example, in the case of IPTV (Internet Protocol Television) service, which is one kind of digital TV service, it provides a bidirectionality allowing the user to actively select the type of viewing program, viewing time, and the like. The IPTV service may provide various additional services such as Internet search, home shopping, online game, etc. based on the bidirectionality.
즉, 인터넷과 TV의 융합이 이루어지면서 TV의 트랜드가 단 방향적인 TV에서 사용자의 참여를 이끄는 인터랙티브 TV로 흘러가면서 다양한 환경에서의 제어기술이 요구되고 있다. In other words, as the convergence of the Internet and the TV is made, the trend of the TV flows from the unidirectional TV to the interactive TV leading the user's participation, and the control technology in various environments is required.
일반적으로 사용자가 콘텐츠를 제어하기 위한 방법은 리모컨의 버튼을 통한 조작이나, 최근에는 3축 가속도 센서와 자이로스코프 등을 이용해 화면의 커서를 2차원적으로 제어하기도 한다. 하지만 이런 디바이스의 경우 인간 친화적이지 않은 인터페이스로 사용에 어려움이 있으며, 관리의 어려움(분실의 위험)과 더불어 비용적인 부담이 있다. In general, the method for controlling the contents by the user is to control the cursor of the screen two-dimensionally by using a button on the remote controller or recently using a three-axis acceleration sensor and a gyroscope. However, these devices are difficult to use as a non-human interface and have a costly burden in addition to the difficulty of management (the risk of loss).
최근 이런 단점을 보완할 수 있는 디바이스 없는 Natural Interface가 주목을 받고 있으며, 이중 가장 대표적인 것이 Hand Gesture 인식기술이다. 하지만 현재의 2D 카메라 기반 핸드 제스쳐 인식은 제스쳐를 이용한 포인터 제어 시 원거리에서는 큰 움직임에도 포인터의 움직임이 둔감하고(큰 움직임에 작게 움직임), 근거리에서는 작은 움직임에도 포인터가 민감하게 반응 (작은 움직임에도 크게 움직임) 하는 문제가 있다. 즉, 거리에 따른 사용자의 작업영역이 달라 사용자들에게 혼란을 야기할 수 있는 문제가 있다. Recently, a device-free Natural Interface has been attracting attention, which is one of the most popular hand gesture recognition technologies. However, the present 2D camera-based hand gesture recognition is very sensitive to the movement of the pointer (small movement to large movement) and the pointer is small to small movement even at large distances Movement). That is, there is a problem that the working area of the user varies depending on the distance, which may cause confusion to the users.
본 발명은 디스플레이 장치와 사용자 간의 거리에 따라 사용자의 작업 영역을 최적화하여 사용자의 편의성을 향상시키기 위한 디스플레이 장치 및 그 동작 방법의 제공에 목적이 있다.It is an object of the present invention to provide a display device and an operation method thereof for improving user's convenience by optimizing a work area of a user according to a distance between a display device and a user.
본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법은 사용자의 영상을 획득하는 단계와 획득한 사용자의 영상을 이용하여 사용자의 얼굴 영역 및 손 영역을 포함하는 사용자 영역을 추출하는 단계와 상기 추출된 사용자 영역에 기초하여 사용자 비율을 추출하는 단계 및 상기 추출된 사용자 비율의 변경에 따라 상기 사용자의 작업 영역을 조절하는 단계를 포함한다.A method of operating a display device according to an embodiment of the present invention includes the steps of acquiring an image of a user, extracting a user area including a face area and a hand area of the user using the acquired image of the user, Extracting a user ratio based on the extracted user ratio and adjusting the user's working area in accordance with the extracted user ratio.
본 발명의 실시 예에 따른 디스플레이 장치는 디스플레이부와 사용자의 영상을 획득하는 카메라와 획득한 사용자의 영상을 이용하여 사용자의 얼굴 영역 및 손 영역을 포함하는 사용자 영역을 사용자 영역 추출부와 상기 추출된 사용자 영역에 기초하여 사용자 비율을 사용자 비율 추출부 및 상기 추출된 사용자 비율의 변경에 따라 상기 사용자의 작업 영역을 조절하는 제어부를 포함한다.A display device according to an embodiment of the present invention includes a user area extracting unit and a user area extracting unit extracting a user area including a user's face area and a hand area using a display unit, a camera acquiring an image of the user, A user ratio extracting unit for extracting a user ratio based on the user region, and a controller for adjusting the user's work region according to the change of the extracted user ratio.
본 발명의 다양한 실시 예에 따르면, 디스플레이 장치와 사용자 간의 거리에 따라 사용자의 작업 영역을 최적화하여 사용자의 편의성을 향상시킬 수 있다.According to various embodiments of the present invention, the user's work area can be optimized according to the distance between the display device and the user, thereby improving the user's convenience.
도 1은 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 블록도로 도시한 것이다.
도 2는 본 발명의 일 실시 예에 따른 디스플레이 장치의 추가 구성을 설명하기 위한 블록도이다.
도 3은 본 발명의 일 실시 예에 따른 디스플레이 장치의 동작 방법을 설명하기 위한 흐름도이다.
도 4 내지 도 6은 본 발명의 실시 예에 따른 사용자의 작업 영역이 사용자와 디스플레이 장치 간의 거리에 따라 달라질 수 있음을 설명하기 위한 도면이다.
도 7 내지 도 8은 본 발명의 일 실시 예에 따라 획득한 영상의 사용자가 미등록 사용자로 확인된 경우, 사용자 화면을 보여준다.1 is a block diagram illustrating a configuration of a display apparatus according to an embodiment of the present invention.
2 is a block diagram for explaining a further configuration of a display device according to an embodiment of the present invention.
3 is a flowchart illustrating an operation method of a display apparatus according to an exemplary embodiment of the present invention.
4 to 6 are views for explaining how a user's working area according to an embodiment of the present invention may vary depending on a distance between a user and a display device.
FIGS. 7 to 8 show a user screen when a user of the acquired image is identified as an unregistered user according to an embodiment of the present invention.
이하, 본 발명과 관련된 실시 예에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. Hereinafter, embodiments related to the present invention will be described in detail with reference to the drawings. The suffix "module" and " part "for the components used in the following description are given or mixed in consideration of ease of specification, and do not have their own meaning or role.
본 발명의 실시 예에 따른 디스플레이 장치는, 예를 들어 방송 수신 기능에 컴퓨터 지원 기능을 추가한 지능형 디스플레이 장치로서, 방송 수신 기능에 충실하면서도 인터넷 기능 등이 추가되어, 수기 방식의 입력 장치, 터치 스크린 또는 공간 리모콘 등 보다 사용에 편리한 인터페이스를 갖출 수 있다. 그리고, 유선 또는 무선 인터넷 기능의 지원으로 인터넷 및 컴퓨터에 접속되어, 이메일, 웹브라우징, 뱅킹 또는 게임 등의 기능도 수행가능하다. 이러한 다양한 기능을 위해 표준화된 범용 OS가 사용될 수 있다.The display device according to the embodiment of the present invention is an intelligent display device that adds a computer support function to a broadcast reception function, for example, and is equipped with a function of inputting a handwriting, a touch screen Or an interface that is more convenient to use than a space remote controller or the like. Also, it can be connected to the Internet and a computer by the support of a wired or wireless Internet function, and can perform functions such as e-mail, web browsing, banking or game. A standardized general-purpose OS can be used for these various functions.
따라서, 본 발명에서 기술되는 디스플레이 장치는, 예를 들어 범용의 OS 커널 상에, 다양한 애플리케이션이 자유롭게 추가되거나 삭제 가능하므로, 사용자 친화적인 다양한 기능이 수행될 수 있다. 상기 디스플레이 장치는, 보다 구체적으로 예를 들면, 네트워크 TV, HBBTV, 스마트 TV, LED TV, OLED TV 등이 될 수 있으며, 경우에 따라 스마트폰에도 적용 가능하다.Therefore, the display device described in the present invention can freely add or delete various applications, for example, on a general-purpose OS kernel, so that various user-friendly functions can be performed. More specifically, the display device may be, for example, a network TV, an HBBTV, a smart TV, an LED TV, an OLED TV, or the like, and may be applied to a smartphone as the case may be.
도 1은 본 발명의 일 실시예에 따른 디스플레이 장치의 구성을 블록도로 도시한 것이다.1 is a block diagram illustrating a configuration of a display apparatus according to an embodiment of the present invention.
도 1을 참조하면, 디스플레이 장치(100)는 방송 수신부(130), 외부장치 인터페이스부(135), 저장부(140), 사용자입력 인터페이스부(150), 제어부(170), 디스플레이부(180), 오디오 출력부(185), 전원공급부(190)를 포함할 수 있다. 한편, 방송 수신부(130)는 튜너(131), 복조부(132) 및 네트워크 인터페이스부(133)를 포함할 수 있다. 1, a
외부장치 인터페이스부(135)는 인접하는 외부 장치 내의 애플리케이션 또는 애플리케이션 목록을 수신하여, 제어부(170) 또는 저장부(140)로 전달할 수 있다.The external
네트워크 인터페이스부(133)는 디스플레이 장치(100)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공할 수 있다. 네트워크 인터페이스부(133)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 다른 사용자 또는 다른 전자 기기와 데이터를 송신 또는 수신할 수 있다. The
또한, 디스플레이 장치(100)에 미리 등록된 다른 사용자 또는 다른 전자 기기 중 선택된 사용자 또는 선택된 전자기기에, 디스플레이 장치(100)에 저장된 일부의 컨텐츠 데이터를 송신할 수 있다.In addition, some content data stored in the
네트워크 인터페이스부(133)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 소정 웹 페이지에 접속할 수 있다. 즉, 네트워크를 통해 소정 웹 페이지에 접속하여, 해당 서버와 데이터를 송신 또는 수신할 수 있다.The
그리고, 네트워크 인터페이스부(133)는 컨텐츠 제공자 또는 네트워크 운영자가 제공하는 컨텐츠 또는 데이터들을 수신할 수 있다. 즉, 네트워크 인터페이스부(133)는 네트워크를 통하여 컨텐츠 제공자 또는 네트워크 제공자로부터 제공되는 영화, 광고, 게임, VOD, 방송 신호 등의 컨텐츠 및 그와 관련된 정보를 수신할 수 있다.The
또한, 네트워크 인터페이스부(133)는 네트워크 운영자가 제공하는 펌웨어의 업데이트 정보 및 업데이트 파일을 수신할 수 있으며, 인터넷 또는 컨텐츠 제공자 또는 네트워크 운영자에게 데이터들을 송신할 수 있다.In addition, the
네트워크 인터페이스부(133)는 네트워크를 통해, 공중에 공개(open)된 애플리케이션들 중 원하는 애플리케이션을 선택하여 수신할 수 있다. The
저장부(140)는 제어부(170) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장하고, 신호 처리된 영상, 음성 또는 데이터신호를 저장할 수 있다.The
또한, 저장부(140)는 외부장치 인터페이스부(135) 또는 네트워크 인터페이스부(133)로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있으며, 채널 기억 기능을 통하여 소정 이미지에 관한 정보를 저장할 수도 있다.The
저장부(140)는 외부장치 인터페이스부(135) 또는 네트워크 인터페이스부(133)로부터 입력되는 애플리케이션 또는 애플리케이션 목록을 저장할 수 있다.The
디스플레이 장치(100)는 저장부(140) 내에 저장되어 있는 컨텐츠 파일(동영상 파일, 정지영상 파일, 음악 파일, 문서 파일, 애플리케이션 파일 등)을 재생하여 사용자에게 제공할 수 있다.The
사용자입력 인터페이스부(150)는 사용자가 입력한 신호를 제어부(170)로 전달하거나, 제어부(170)로부터의 신호를 사용자에게 전달할 수 있다. 예를 들어, 사용자입력 인터페이스부(150)는 블루투스(Bluetooth), WB(Ultra Wideband), 지그비(ZigBee) 방식, RF(Radio Frequency) 통신 방식 또는 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 원격제어장치(200)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 제어 신호를 수신하여 처리하거나, 제어부(170)로부터의 제어 신호를 원격제어장치(200)로 송신하도록 처리할 수 있다.The user
또한, 사용자입력 인터페이스부(150)는, 전원키, 채널키, 볼륨키, 설정치 등의 로컬키(미도시)에서 입력되는 제어 신호를 제어부(170)에 전달할 수 있다.The user
제어부(170)에서 영상 처리된 영상 신호는 디스플레이부(180)로 입력되어 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(170)에서 영상 처리된 영상 신호는 외부장치 인터페이스부(135)를 통하여 외부 출력장치로 입력될 수 있다.The video signal processed by the
제어부(170)에서 처리된 음성 신호는 오디오 출력부(185)로 오디오 출력될 수 있다. 또한, 제어부(170)에서 처리된 음성 신호는 외부장치 인터페이스부(135)를 통하여 외부 출력장치로 입력될 수 있다. The audio signal processed by the
그 외, 제어부(170)는, 디스플레이 장치(100) 내의 전반적인 동작을 제어할 수 있다. In addition, the
또한, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 디스플레이 장치(100)를 제어할 수 있으며, 네트워크에 접속하여 사용자가 원하는 애플리케이션 또는 애플리케이션 목록을 디스플레이 장치(100) 내로 다운받을 수 있도록 할 수 있다.The
제어부(170)는 사용자가 선택한 채널 정보 등이 처리한 영상 또는 음성신호와 함께 디스플레이부(180) 또는 오디오 출력부(185)를 통하여 출력될 수 있도록 한다.The
또한, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 수신한 외부장치 영상 재생 명령에 따라, 외부장치 인터페이스부(135)를 통하여 입력되는 외부 장치, 예를 들어, 카메라 또는 캠코더로부터의, 영상 신호 또는 음성 신호가 디스플레이부(180) 또는 오디오 출력부(185)를 통해 출력될 수 있도록 한다.The
한편, 제어부(170)는 영상을 표시하도록 디스플레이부(180)를 제어할 수 있으며, 예를 들어 튜너(131)를 통해 입력되는 방송 영상, 또는 외부장치 인터페이스부(135)를 통해 입력되는 외부 입력 영상, 또는 네트워크 인터페이스부를 통해 입력되는 영상, 또는 저장부(140)에 저장된 영상이 디스플레이부(180)에서 표시되도록 제어할 수 있다. 이 경우, 디스플레이부(180)에 표시되는 영상은 정지 영상 또는 동영상일 수 있으며, 2D 영상 또는 3D 영상일 수 있다.The
또한, 제어부(170)는 디스플레이 장치(100) 내에 저장된 컨텐츠, 또는 수신된 방송 컨텐츠, 외부로 부터 입력되는 외부 입력 컨텐츠가 재생되도록 제어할 수 있으며, 상기 컨텐츠는 방송 영상, 외부 입력 영상, 오디오 파일, 정지 영상, 접속된 웹 화면, 및 문서 파일 등 다양한 형태일 수 있다.In addition, the
디스플레이부(180)는 제어부(170)에서 처리된 영상 신호, 데이터 신호, OSD 신호 또는 외부장치 인터페이스부(135)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R,G,B 신호로 변환하여 구동 신호를 생성할 수 있다.The
한편, 도 1에 도시된 디스플레이 장치(100)는 본 발명의 일실시예에 불과하므로. 도시된 구성요소들 중 일부는 실제 구현되는 디스플레이 장치(100)의 사양에 따라 통합, 추가, 또는 생략될 수 있다.On the other hand, the
즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.That is, two or more constituent elements may be combined into one constituent element, or one constituent element may be constituted by two or more constituent elements, if necessary. In addition, the functions performed in each block are intended to illustrate the embodiments of the present invention, and the specific operations and apparatuses do not limit the scope of the present invention.
본 발명의 또 다른 실시예에 따르면, 디스플레이 장치(100)는 도 1에 도시된 바와 달리, 튜너(131)와 복조부(132)를 구비하지 않고 네트워크 인터페이스부(133) 또는 외부장치 인터페이스부(135)를 통해서 영상을 수신하여 재생할 수도 있다.1, the
예를 들어, 디스플레이 장치(100)는 방송 신호 또는 다양한 네트워크 서비스에 따른 컨텐츠들을 수신하기 위한 등과 같은 셋탑 박스 등과 같은 영상 처리 장치와 영상 처리 장치로부터 입력되는 컨텐츠를 재생하는 컨텐츠 재생 장치로 분리되어 구현될 수 있다.For example, the
이 경우, 이하에서 설명할 본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법은 도 1을 참조하여 설명한 바와 같은 디스플레이 장치(100)뿐 아니라, 상기 분리된 셋탑 박스 등과 같은 영상 처리 장치 또는 디스플레이부(180) 및 오디오출력부(185)를 구비하는 컨텐츠 재생 장치 중 어느 하나에 의해 수행될 수도 있다.In this case, the operation method of the display device according to the embodiment of the present invention to be described below may be applied not only to the
다음으로 도 2를 참조하여 본 발명의 일 실시 예에 따른 디스플레이 장치(100)의 추가 구성을 설명한다.Next, a further configuration of the
도 2는 본 발명의 일 실시 예에 따른 디스플레이 장치의 추가 구성을 설명하기 위한 블록도이다.2 is a block diagram for explaining a further configuration of a display device according to an embodiment of the present invention.
디스플레이 장치(100)는 카메라(300), 사용자 영역 추출부(400), 사용자 비율 추출부(500), 작업 영역 설정부(600)를 더 포함한다.The
카메라(300)는 촬영을 통해 사용자의 영상을 획득할 수 있다. 본 발명의 카메라(300)는 2D 카메라일 수 있다. 또한, 본 발명의 카메라(300)는 사용자의 움직임, 특히 사용자의 핸드 제스쳐 움직임을 인식할 수 있는 모션 인식 카메라일 수 있다.The
사용자 영역 추출부(400)는 획득한 사용자의 영상을 이용하여 사용자의 얼굴 영역 및 손 영역을 포함하는 사용자의 신체 일부분에 대한 사용자 영역을 추출할 수 있다. 자세한 설명은 후술한다.The user
사용자 비율 추출부(500)는 추출한 사용자의 얼굴 영역 및 손 영역에 기초하여 얼굴 면적 및 손 면적을 획득하고, 획득한 얼굴 면적 및 손 면적 중 적어도 하나를 이용하여 사용자 비율을 추출할 수 있다. 자세한 설명은 후술한다.The user
작업 영역 설정부(600)는 작업 영역을 설정하기 위한 사용자 입력을 수신하여 추출된 기준 사용자 비율에 대응하는 기준 작업 영역을 설정할 수 있다. 자세한 설명은 후술한다.The work
제어부(170)는 디스플레이 장치(100)의 모든 구성요소를 전반적으로 제어할 수 있다. 특히, 제어부(170)는 추출된 사용자 비율에 따라 사용자의 작업 영역을 조절할 수 있다. 이에 대해서는 자세히 후술한다.The
다음으로 도 3 내지 도 8을 참조하여 본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법을 설명한다.Next, an operation method of a display apparatus according to an embodiment of the present invention will be described with reference to FIGS. 3 to 8. FIG.
도 3은 본 발명의 일 실시 예에 따른 디스플레이 장치의 동작 방법을 설명하기 위한 흐름도이다.3 is a flowchart illustrating an operation method of a display apparatus according to an exemplary embodiment of the present invention.
디스플레이 장치(100)의 카메라(300)는 디스플레이 장치(100) 전면에 위치한 사용자의 제1 영상을 획득한다(S101). 카메라(300)는 디스플레이 장치(100)가 화상 통화 모드, 촬영 모드, 사용자의 모션 인식 모드에 있는 경우, 정지 영상 또는 동영상과 같은 화상 프레임을 획득하여 처리할 수 있다. 카메라(300)는 디스플레이 장치(100)의 상단에 배치될 수 있으나, 이에 한정될 필요는 없다. The
일 실시 예에서 카메라(300)는 촬영을 위한 사용자 입력을 수신하여 사용자를 촬영할 수 있고, 그에 따라 사용자의 영상을 획득할 수 있다.In one embodiment, the
또 다른 실시 예에서 카메라(300)는 사용자를 감지하여 자동으로 촬영을 할 수 있고, 그에 따라 사용자의 영상을 획득할 수 있다.In yet another embodiment, the
또한, 단계 S101의 경우, 사용자와 디스플레이 장치(100)는 특정한 거리만큼 떨어져 위치한 경우를 가정한다. 즉, 카메라(300)는 디스플레이 장치(100)와 사용자가 특정한 거리만큼 떨어져 있는 상태에서 사용자의 제1 영상을 획득함을 가정한다.Further, in the case of step S101, it is assumed that the user and the
일 실시 예에서 카메라(300)는 사용자의 모션을 인식할 수 있는 모션 센서를 장착한 모션 인식 카메라 일 수 있다. 모션 인식 카메라는 사용자의 움직임 특히, 사용자의 핸드 제스쳐의 움직임을 인식할 수 있다.In one embodiment, the
디스플레이 장치(100)의 사용자 영역 추출부(400)는 획득한 사용자의 제1 영상을 이용하여 사용자의 얼굴 영역 및 손 영역을 포함하는 사용자의 신체 일부분에 대한 사용자 영역을 추출한다(S103). 일 실시 예에서 사용자 영역 추출부(400)는 획득한 사용자의 제1 영상에 다양한 인식 기술을 통해 얼굴 영역 및 손 영역을 추출할 수 있다. The user
사용자 영역 추출부(400)는 지식 기반 방법(Knowledge based method), 특징 기반 방법(Feature-based method), 템플릿 매칭 방법 (Template-matching method), 외형 기반 방법(Appearance-based method) 중 어느 하나의 방법을 통해 사용자의 얼굴 영역을 추출할 수 있다.The user
지식 기반 방법은 얼굴의 눈, 코, 입 등의 일정한 거리와 위치 관계를 전제로 얼굴 영역을 검출하는 방법이다.The knowledge-based method is a method of detecting the face region based on a certain distance and positional relationship of the eyes, nose, and mouth of the face.
특징 기반 방법은 얼굴 요소들의 크기, 모양, 상호 연관성, 얼굴의 색상과 질감 정보, 또는 이러한 요소들의 혼합된 형태의 정보를 이용해 얼굴 영역을 검출하는 방법이다.The feature-based method is a method of detecting a face region using information of size, shape, correlation, facial color and texture information of facial elements, or mixed type information of these elements.
템플릿 매칭 방법은 모든 얼굴에 대한 표준 템플릿을 만든 후, 입력 영상과 비교해 얼굴 영역을 검출하는 방법이다.The template matching method is a method of detecting a face region by comparing the input image with a standard template for all faces.
외형 기반 방법은 학습 영상 집합에 의해 학습된 모델을 이용해서 얼굴 영역을 검출하는 방법이다.The appearance-based method is a method of detecting the face region using the model learned by the learning image set.
사용자 영역 추출부(400)는 특징 기반 방법 중 스킨 컬러 검출 방법(skin color detection method)을 이용하여 사용자의 얼굴 영역 및 손 영역을 추출할 수 있다. The user
스킨 컬러 검출 방법은 사용자의 영상에서 얼굴과 손의 후보 영역을 간단하게 추출할 수 있는 방법으로, 조명과 카메라의 영상을 많이 받아 정확하지는 않지만, 쉽고 빠르게 해당 후보 영역을 검출할 수 있는 방법이다. 구체적으로, 스킨 컬러 방법은 사용자의 RGB 영상을 획득하여, YUV 영상으로 변환한 다음, U 성분과 V 성분을 이용하여 피부색을 검출하고, 검출된 피부색을 통해 사용자의 얼굴 영역 및 손 영역을 추출하는 방법이다.The skin color detection method is a method that can easily extract a candidate region of a face and a hand from a user's image. It is a method that can detect a candidate region easily and quickly although it receives a lot of images of illumination and a camera and is not accurate. Specifically, the skin color method acquires a user's RGB image, converts the image into a YUV image, detects a skin color using the U component and the V component, and extracts a face region and a hand region of the user through the detected skin color Method.
사용자 영역 추출부(400)는 스킨 컬러 검출 방법을 통해 사용자의 제1 영상에서 얼굴 영역 및 손 영역을 추출할 수 있다.The user
디스플레이 장치(100)의 사용자 비율 추출부(500)는 추출한 사용자의 얼굴 영역 및 손 영역에 기초하여 얼굴 면적 및 손 면적을 획득하고(S105), 획득한 얼굴 면적 및 손 면적 중 적어도 하나를 이용하여 기준 사용자 비율을 추출한다(S107).The user
사용자 비율 추출부(500)는 추출한 사용자의 얼굴 영역에 기초하여 얼굴 영역에 해당하는 얼굴 면적을 획득할 수 있고, 사용자 비율 추출부(500)는 추출한 사용자의 손 영역에 기초하여 손 영역에 해당하는 손 면적을 획득할 수 있다.The user
일 실시 예에서 사용자 비율 추출부(500)는 획득한 손 면적만을 이용하여 기준 사용자 비율을 추출할 수 있다. 예를 들어, 디스플레이 장치(100)와 사용자 사이가 특정 거리만큼 떨어져 있는 경우, 사용자 비율 추출부(500)는 획득한 손 면적이 80인 경우, 기준 사용자 비율로 추출할 수 있다. 여기서, 수치는 예시에 불과하다.In one embodiment, the
또 다른 실시 예에서 사용자 비율 추출부(500)는 획득한 얼굴 면적 및 손 면적을 이용하여 기준 사용자 비율을 추출할 수 있다. 구체적으로, 사용자 비율 추출부(500)는 획득한 얼굴 면적과 손 면적을 비교하여 기준 사용자 비율을 추출할 수 있다. 더 구체적으로, 사용자 비율 추출부(500)는 획득한 얼굴 면적 대비 손 면적의 비율을 계산하여 기준 사용자 비율을 추출할 수 있다.In another embodiment, the user-
예를 들어, 획득한 얼굴 크기가 100이고, 손 크기가 80인 경우, 사용자 비율 추출부(500)는 기준 사용자 비율을 80/100=0.8로 추출할 수 있다. 여기서, 수치는 예시에 불과하다.For example, when the obtained face size is 100 and the hand size is 80, the user
기준 사용자 비율은 디스플레이 장치(100)와 사용자가 일정한 거리만큼 떨어져 위치한 경우, 사용자 마다 다른 값을 가질 수 있는 비율로, 후술할 사용자의 기준 작업 영역을 설정하기 위해 사용되는 비율이다.The reference user ratio is a ratio used to set a user's reference working area, which will be described later, at a rate that can be different for each user when the
디스플레이 장치(100)의 작업 영역 설정부(600)는 작업 영역을 설정하기 위한 사용자 입력을 수신하여 추출된 기준 사용자 비율에 대응하는 기준 작업 영역을 설정한다(S109). The work
일 실시 예에서 작업 영역은 사용자의 핸드 제스쳐를 통해 디스플레이 장치(100)의 동작을 제어할 수 있는 영역일 수 있다. 예를 들어, 사용자가 핸드 제스쳐의 이동에 대응하여 움직이는 오브젝트인 포인터를 이용하여 디스플레이 장치(100)의 동작을 제어하고자 하는 경우, 작업 영역은 포인터의 이동을 통해 디스플레이 장치(100)의 동작을 제어할 수 있는 영역일 수 있다. 이 경우, 작업 영역은 사용자가 핸드 제스쳐를 통해 포인터의 이동을 제어할 수 있는 영역에 따라 결정될 수 있다. 이는 결국, 디스플레이 장치(100)와 사용자 간의 거리에 따라 작업 영역이 달라짐을 의미한다. 이에 대해서는 도 4 내지 도 6을 참조하여 구체적으로 설명한다.In one embodiment, the work area may be an area that can control the operation of the
도 4 내지 도 6은 본 발명의 실시 예에 따른 사용자의 작업 영역이 사용자와 디스플레이 장치 간의 거리에 따라 달라질 수 있음을 설명하기 위한 도면이다.4 to 6 are views for explaining how a user's working area according to an embodiment of the present invention may vary depending on a distance between a user and a display device.
먼저, 도 4를 참조하면, 디스플레이 장치(100)와 사용자(K)는 기준 거리(d0)만큼 떨어져 있다. 디스플레이 장치(100)는 핸드 제스쳐의 이동에 대응하여 이동될 수 있는 포인터(800)를 표시할 수 있다. 포인터(800)는 디스플레이 장치(100)에 표시된 어플리케이션, 미디어 컨텐트 등을 선택하거나 사용될 수 있다.4, the
디스플레이 장치(100)에 장착된 카메라(300)는 사용자(K)의 영상을 촬영할 수 있고, 사용자(K)의 핸드 제스쳐의 움직임을 인식할 수 있다. 디스플레이 장치(100)와 사용자(K)는 기준 거리(d0)만큼 떨어져 있는 경우, 기준 작업 영역은 A1으로 설정될 수 있다.The
기준 작업 영역은 사용자가 핸드 제스쳐 움직임에 따라 디스플레이 장치(100)에 표시된 포인터의 이동을 자유롭게 제어할 수 있는 영역이며, 사용자에 의해 설정될 수 있는 영역일 수 있다. 즉, 사용자(K)가 a1의 이동 거리만큼 핸드 제스쳐가 움직이면, 디스플레이 장치(100)에 표시된 포인터(800)는 a1의 이동 거리에 대응하는 거리(b1)만큼 이동될 수 있다. The reference working area is an area where the user can freely control the movement of the pointer displayed on the
한편, 도 5에서와 같이, 디스플레이 장치(100)와 사용자(K) 간의 거리가 기준 거리(d0)보다 작아지는 경우(d0>d1), 즉, 사용자(K)가 기준 거리(d0)보다 디스플레이 장치(100)에 더 가까이 위치한 경우, 사용자의 작업 영역(A2)은 기준 작업 영역(A1) 보다 작아질 수 있다. 사용자의 작업 영역이 기준 작업 영역 보다 작아진다는 것은 사용자의 핸드 제스쳐의 이동 거리에 대응하여 포인터의 이동 거리가 더 커짐을 의미할 수 있다. 5, when the distance between the
즉, 사용자(K)가 a1의 이동 거리만큼 핸드 제스쳐가 움직이면, 디스플레이 장치(100)에 표시된 포인터(800)는 a1의 이동 거리에 대응하여 기준 작업 영역(A1)에서 이동되는 거리(b1)보다 더 큰 거리(b2)만큼 이동될 수 있다. 작업 영역이 기준 작업 영역 보다 작아진다면, 핸드 제스쳐의 이동 거리에 따라 포인터의 이동 거리가 훨씬 더 커지므로, 디스플레이 장치(100)에 표시된 포인터(800)의 움직임을 자신이 원하는 대로 제어하기 힘들어 사용자의 불편을 초래할 수 있다.That is, when the user K moves the hand gesture by the moving distance of a1, the
반면에, 도 6에서와 같이, 디스플레이 장치(100)와 사용자(K) 간의 거리가 기준 거리(d0)보다 멀어지는 경우(d2>d0), 즉, 사용자(K)가 기준 거리(d0)보다 디스플레이 장치(100)에 더 멀리 위치한 경우, 사용자의 작업 영역(A3)은 기준 작업 영역(A1) 보다 커질 수 있다. 사용자의 작업 영역이 기준 작업 영역 보다 커진다는 것은 사용자의 핸드 제스쳐의 이동 거리에 대응하여 포인터의 이동 거리가 더 적어짐을 의미할 수 있다. 6, when the distance between the
즉, 사용자(K)가 a1의 이동 거리만큼 핸드 제스쳐가 움직이면, 디스플레이 장치(100)에 표시된 포인터(800)는 a1의 이동 거리에 대응하여 기준 작업 영역(A1)에서 이동되는 거리(b1)보다 더 작은 거리(b3)만큼 이동될 수 있다. 작업 영역이 기준 작업 영역 보다 커진다면 핸드 제스쳐의 이동 거리에 따라 포인터의 이동 거리가 훨씬 더 작아지므로, 디스플레이 장치(100)에 표시된 포인터(800)의 움직임을 자신이 원하는 대로 제어하기 힘들어 사용자의 불편을 초래할 수 있다.That is, when the user K moves the hand gesture by the moving distance of a1, the
다시 도 4를 설명하면, 사용자(K)는 디스플레이 장치(100)와의 기준 거리(d0)에서 핸드 제스쳐를 이동시키는 동작을 취하여 자신에게 적합한 기준 작업 영역을 설정할 수 있다. 구체적으로, 작업 영역 설정부(600)는 추출된 사용자 비율에 대응하는 기준 작업 영역을 설정하는 사용자 입력을 수신할 수 있고, 수신한 사용자 입력에 따라 기준 작업 영역(A1)을 설정할 수 있다. 일 실시 예에서 사용자 입력은 포인터(800)의 이동 속도를 조절하기 위한 입력일 수 있다.4, the user K can move the hand gesture at the reference distance d0 to the
다시 도 3을 설명한다.3 will be described again.
디스플레이 장치(100)의 저장부(140)는 설정된 기준 작업 영역과 기준 사용자 비율을 대응시켜 저장한다(S111). 일 실시 예에서 저장부(140)는 사용자에 의해 설정된 기준 작업 영역을 추출한 기준 사용자 비율에 대응시켜 저장하고 있을 수 있다. 예를 들어, 도 4에서와 같이, 디스플레이 장치(100)와 사용자(K) 간의 거리가 특정 거리(d0)만큼 떨어진 경우, 저장부(140)는 사용자의 얼굴 면적 대비 손 면적의 비율을 기준 작업 영역(A1)에 대응시켜 저장하고 있을 수 있다. The
또 다른 실시 예에서 저장부(140)는 기준 사용자 비율, 기준 작업 영역 및 사용자에 의해 설정된 포인터의 이동 속도를 각각 대응시켜 저장하고 있을 수 있다.In another embodiment, the
그 후, 디스플레이 장치(100)의 카메라(300)는 디스플레이 장치(100)의 전면에 위치한 사용자를 인식하여 인식된 사용자의 제2 영상을 획득한다(S113). Thereafter, the
디스플레이 장치(100)의 제어부(170)는 획득한 사용자의 제2 영상을 통해 확인된 사용자가 기존에 등록된 사용자인지를 확인한다(S115). 제어부(170)는 단계 S103의 얼굴 인식 기법을 이용하여 제2 영상으로부터 사용자의 얼굴 영역을 추출하고, 추출된 얼굴 영역에 기초하여 제2 영상의 사용자가 기 등록된 사용자인지를 확인할 수 있다. The
만약, 등록된 사용자로 확인된 경우, 사용자 비율 추출부(500)는 획득한 제2 영상에 기초하여 사용자 비율을 추출한다(S117). 즉, 사용자 비율 추출부(500)는 단계 S105 및 S107 과정에 따라 제2 영상으로부터 사용자의 얼굴 면적과 손 면적을 획득하여 획득한 얼굴 면적 및 손 면적을 이용하여 사용자 비율을 추출할 수 있다. If it is determined that the user is a registered user, the user
새롭게 추출된 사용자 비율 또한, 얼굴 면적 대비 손 면적의 비율이거나, 손 면적만을 나타낼 수 있다.The ratio of newly extracted users can also be the ratio of the hand area to the face area, or only the hand area.
이 때, 새롭게 추출된 사용자 비율은 기준 사용자 비율과 같거나 다를 수 있다. At this time, the newly extracted user ratio may be equal to or different from the reference user ratio.
디스플레이 장치(100)와 사용자 간 거리가 기준 거리(d0)보다 크거나 작은 경우, 새롭게 추출된 사용자 비율은 기준 사용자 비율과 달라질 수 있고, 디스플레이 장치(100)와 사용자 간 거리가 기준 거리(d0)와 동일한 경우, 새롭게 추출된 사용자 비율은 기준 사용자 비율과 동일할 수 있다.If the distance between the
한편, 미등록 사용자로 확인된 경우, 제어부(170)는 미등록된 사용자임을 알리는 팝업창을 디스플레이부(180)를 통해 출력한다(S119). On the other hand, if the user is identified as an unregistered user, the
일 실시 예에서 미등록된 사용자는 기준 작업 영역을 설정하지 않은 사용자일 수 있다. 미등록된 사용자임을 알리는 과정에 대해서는 도 7 내지 도 8을 참조하여 설명한다.In one embodiment, the unregistered user may be a user who has not set a reference work area. The process of notifying that the user is an unregistered user will be described with reference to FIG. 7 to FIG.
도 7 내지 도 8은 본 발명의 일 실시 예에 따라 획득한 영상의 사용자가 미등록 사용자로 확인된 경우, 사용자 화면을 보여준다.FIGS. 7 to 8 show a user screen when a user of the acquired image is identified as an unregistered user according to an embodiment of the present invention.
디스플레이 장치(100)는 획득한 제2 영상의 사용자가 미등록된 사용자인 경우, 도 7에서와 같이, <등록되지 않은 사용자 입니다>라는 메시지가 기재된 팝업창(900)을 표시할 수 있다. If the user of the acquired second image is an unregistered user, the
그 후, 1초가 지나면, 디스플레이 장치(100)는 <본인에게 맞는 최적의 작업 영역을 설정해 주세요>라는 메시지가 기재된 팝업창(1000)을 출력할 수 있다.After one second thereafter, the
일 실시 예에서 디스플레이 장치(100)는 획득한 영상의 사용자가 미등록된 사용자인 경우, 도 7에 도시된 팝업창(900)을 표시하지 않고, 바로 도 8에 도시된 팝업창(1000)을 표시할 수도 있다.In one embodiment, when the user of the acquired image is an unregistered user, the
다시 도 3을 설명한다.3 will be described again.
제어부(170)는 단계 S117에서 새롭게 추출된 사용자 비율과 기존에 저장된 기준 사용자 비율을 비교하여 그 값이 변경되었는지를 확인한다(S121). 즉, 제어부(170)는 기존 사용자 비율에 비해 새롭게 추출된 사용자 비율이 커졌는지 작아졌는지를 확인하여 사용자 비율의 값이 변경되었는지 여부를 확인할 수 있다. The
만약, 사용자 비율이 변경된 것으로 확인된 경우, 제어부(170)는 변경된 사용자 비율에 따라 작업 영역을 조절하고(S123), 사용자 비율이 동일한 것으로 확인된 경우, 기준 작업 영역을 유지한다(S125). If it is determined that the user ratio is changed, the
일 실시 예에서 제어부(170)는 디스플레이 장치(100)에 표시된 포인터의 이동 속도를 조절하여 사용자의 작업 영역을 조절할 수 있다. 즉, 제어부(170)는 변경된 사용자 비율에 따라 포인터의 이동 속도를 조절하여 작업 영역을 기준 작업 영역으로 유지시킬 수 있다.In one embodiment, the
이에 대해서는 다시 도 4 내지 도 6을 참조하여 설명한다.This will be described with reference to Figs. 4 to 6 again.
도 5의 경우, 추출된 사용자 비율은 기준 사용자 비율보다 클 수 있다. 왜냐하면, 디스플레이 장치(100)와 사용자(K)간의 거리(d1)가 기준 거리(d0)보다 가까워져 상대적으로 사용자(K)의 얼굴 면적 대비 손의 면적 또는 손의 면적이 더 커지기 때문이다.In the case of FIG. 5, the extracted user ratio may be larger than the reference user ratio. This is because the distance d1 between the
이 경우, 사용자의 작업 영역(A2)은 도 4에 도시된 사용자의 작업 영역(A1)에 비해 작아진 상태이므로, 핸드 제스쳐의 움직임에 대한 포인터(800)의 이동 거리(b2)는 기준 작업 영역(A1) 상에서의 포인터(800) 이동 거리(b1)보다 더 클 것이다. In this case, since the user's work area A2 is smaller than the user's work area A1 shown in FIG. 4, the movement distance b2 of the
따라서, 제어부(170)는 작업 영역이 기준 작업 영역보다 작아지는 경우, 포인터(800)의 이동속도를 감소시켜 포인터(800)의 이동 거리를 감소시킬 수 있다. 포인터(800)의 이동 거리가 감소되면, 사용자(K)는 기준 작업 영역(A1)에서 디스플레이 장치(100)의 동작을 제어하는 듯한 느낌을 받을 수 있다.Accordingly, when the work area is smaller than the reference work area, the
도 6의 경우, 추출된 사용자 비율은 기준 사용자 비율보다 작을 수 있다. 왜냐하면, 디스플레이 장치(100)와 사용자(K)간의 거리(d2)가 기준 거리(d0)보다 멀어져 상대적으로 사용자(K)의 얼굴 면적 대비 손의 면적 또는 손의 면적이 더 작아지기 때문이다.In the case of FIG. 6, the extracted user ratio may be smaller than the reference user ratio. This is because the distance d2 between the
이 경우, 사용자의 작업 영역(A3)은 도 4에 도시된 사용자의 작업 영역(A1)에 비해 커진 상태이므로, 핸드 제스쳐의 움직임에 대한 포인터(800)의 이동 거리(b3)는 기준 작업 영역(A1) 상에서의 포인터(800) 이동 거리(b1)보다 작을 것이다. In this case, since the user's work area A3 is larger than the user's work area A1 shown in Fig. 4, the moving distance b3 of the
따라서, 제어부(170)는 작업 영역이 기준 작업 영역보다 커지는 경우, 포인터(800)의 이동속도를 증가시켜 포인터(800)의 이동 거리를 증가시킬 수 있다. 포인터(800)의 이동 거리가 증가되면, 사용자(K)는 기준 작업 영역(A1)에서 디스플레이 장치(100)의 동작을 제어하는 듯한 느낌을 받을 수 있다.Accordingly, when the work area is larger than the reference work area, the
본 발명의 다양한 실시 예에 따르면, 디스플레이 장치(100)와 사용자 간의 거리가 달라짐에 따라 작업 영역을 기준 작업 영역으로 조절하여 사용자가 최적의 작업 영역에서 디스플레이 장치(100)의 동작을 제어할 수 있다.According to various embodiments of the present invention, as the distance between the
본 발명의 일 실시 예에 의하면, 전술한 방법은, 프로그램이 기록된 매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.According to an embodiment of the present invention, the above-described method can be implemented as a code readable by a processor on a medium on which a program is recorded. Examples of the medium that can be read by the processor include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage, etc., and may be implemented in the form of a carrier wave (e.g., transmission over the Internet) .
상기와 같이 설명된 디스플레이 장치는 상기 설명된 실시 예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시 예들은 다양한 변형이 이루어질 수 있도록 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.The above-described display device is not limited to the configuration and method of the above-described embodiments, but the embodiments may be configured such that all or some of the embodiments are selectively combined so that various modifications can be made. It is possible.
Claims (20)
사용자의 영상을 획득하는 단계;
획득한 사용자의 영상을 이용하여 사용자의 얼굴 영역 및 손 영역을 포함하는 사용자 영역을 추출하는 단계;
상기 추출된 사용자 영역에 기초하여 사용자 비율을 추출하는 단계; 및
상기 추출된 사용자 비율의 변경에 따라 상기 사용자의 작업 영역을 조절하는 단계를 포함하는
디스플레이 장치의 동작 방법.A method of operating a display device,
Acquiring an image of a user;
Extracting a user area including a user's face area and a hand area using the acquired user's image;
Extracting a user ratio based on the extracted user area; And
And adjusting the work area of the user according to the change of the extracted user ratio
A method of operating a display device.
상기 사용자 비율을 추출하는 단계는
상기 얼굴 영역의 면적 및 상기 손 영역의 면적 중 적어도 하나를 이용하여 상기 사용자 비율을 추출하는 단계를 포함하는
디스플레이 장치의 동작 방법.The method according to claim 1,
The step of extracting the user ratio
Extracting the user ratio using at least one of an area of the face area and an area of the hand area
A method of operating a display device.
상기 사용자 비율을 추출하는 단계는
상기 얼굴 영역의 면적 대비 상기 손 영역의 면적의 비율을 이용하여 상기 사용자 비율을 추출하는 단계를 포함하는
디스플레이 장치의 동작 방법.3. The method of claim 2,
The step of extracting the user ratio
And extracting the user ratio using a ratio of an area of the hand region to an area of the face region
A method of operating a display device.
상기 사용자 비율을 추출하는 단계는
상기 손 영역의 면적을 이용하여 상기 사용자 비율을 추출하는 단계를 포함하는
디스플레이 장치의 동작 방법.3. The method of claim 2,
The step of extracting the user ratio
And extracting the user ratio using the area of the hand region
A method of operating a display device.
상기 사용자 비율을 추출하는 단계는
상기 디스플레이 장치와 상기 사용자 간의 거리에 관련된 기준 사용자 비율을 추출하는 단계를 포함하고,
상기 추출된 사용자 비율에 대응하는 기준 작업 영역을 설정하는 단계를 더 포함하는
디스플레이 장치의 동작 방법.The method according to claim 1,
The step of extracting the user ratio
Extracting a reference user ratio related to a distance between the display device and the user,
And setting a reference work area corresponding to the extracted user ratio
A method of operating a display device.
상기 작업 영역을 조절하는 단계는
상기 사용자 비율이 변경된 경우, 상기 기준 작업 영역으로 작업 영역을 조절하는 단계를 포함하는
디스플레이 장치의 동작 방법.6. The method of claim 5,
The step of adjusting the working area
And adjusting the working area to the reference working area when the user ratio is changed
A method of operating a display device.
상기 작업 영역을 조절하는 단계는
사용자의 핸드 제스쳐의 이동에 따라 움직이는 포인터의 이동 속도를 조절하는 단계를 포함하고,
상기 포인터는
상기 디스플레이 장치 상에 표시되며, 상기 디스플레이 장치의 동작을 제어하기 위한 오브젝트인
디스플레이 장치의 동작 방법.The method according to claim 1,
The step of adjusting the working area
And adjusting the moving speed of the moving pointer according to the movement of the user's hand gesture,
The pointer
An object displayed on the display device for controlling the operation of the display device
A method of operating a display device.
상기 사용자의 작업 영역은
사용자가 상기 포인터를 통해 상기 디스플레이 장치의 동작을 제어할 수 있는 영역인
디스플레이 장치의 동작 방법.The method according to claim 1,
The work area of the user
A region in which the user can control the operation of the display device through the pointer
A method of operating a display device.
상기 추출된 사용자의 비율은
상기 디스플레이 장치와 상기 사용자 간 거리에 따라 변경되는 값인
디스플레이 장치의 동작 방법.The method according to claim 1,
The ratio of the extracted users is
A value that varies depending on the distance between the display device and the user
A method of operating a display device.
상기 작업 영역을 조절하는 단계는
상기 상기 디스플레이 장치와 상기 사용자 간 거리에 따라 상기 작업 영역을 조절하는 단계를 포함하는
디스플레이 장치의 동작 방법.10. The method of claim 9,
The step of adjusting the working area
And adjusting the work area according to the distance between the display device and the user
A method of operating a display device.
디스플레이부;
사용자의 영상을 획득하는 카메라;
획득한 사용자의 영상을 이용하여 사용자의 얼굴 영역 및 손 영역을 포함하는 사용자 영역을 사용자 영역 추출부;
상기 추출된 사용자 영역에 기초하여 사용자 비율을 사용자 비율 추출부; 및
상기 추출된 사용자 비율의 변경에 따라 상기 사용자의 작업 영역을 조절하는 제어부를 포함하는
디스플레이 장치.In the display device,
A display unit;
A camera for acquiring a user's image;
A user area extracting unit that extracts a user area including a face area and a hand area of the user using the acquired user image;
A user ratio extracting unit for extracting a user ratio based on the extracted user area; And
And a controller for adjusting the work area of the user according to the change of the extracted user ratio
Display device.
상기 사용자 비율 추출부는
상기 얼굴 영역의 면적 및 상기 손 영역의 면적 중 적어도 하나를 이용하여 상기 사용자 비율을 추출하는
디스플레이 장치.12. The method of claim 11,
The user ratio extracting unit
Extracting the user ratio using at least one of an area of the face area and an area of the hand area
Display device.
상기 사용자 비율 추출부는
상기 얼굴 영역의 면적 대비 상기 손 영역의 면적의 비율을 이용하여 상기 사용자 비율을 추출하는
디스플레이 장치.13. The method of claim 12,
The user ratio extracting unit
And extracting the user ratio using a ratio of an area of the hand region to an area of the face region
Display device.
상기 사용자 비율 추출부는
상기 손 영역의 면적을 이용하여 상기 사용자 비율을 추출하는
디스플레이 장치.13. The method of claim 12,
The user ratio extracting unit
And extracting the user ratio using the area of the hand region
Display device.
상기 사용자 비율 추출부는
상기 디스플레이 장치와 상기 사용자 간의 거리에 관련된 기준 사용자 비율을 추출하고,
상기 추출된 사용자 비율에 대응하는 기준 작업 영역을 설정하는 작업 영역 설정부를 더 포함하는
디스플레이 장치.12. The method of claim 11,
The user ratio extracting unit
Extracting a reference user ratio related to the distance between the display device and the user,
And a work area setting unit for setting a reference work area corresponding to the extracted user ratio
Display device.
상기 제어부는
상기 사용자 비율이 변경된 경우, 상기 기준 작업 영역으로 작업 영역을 조절하는
디스플레이 장치.16. The method of claim 15,
The control unit
And when the user ratio is changed, adjusting the work area to the reference work area
Display device.
상기 제어부는
사용자의 핸드 제스쳐의 이동에 따라 움직이는 포인터의 이동 속도를 조절하고,
상기 포인터는
상기 디스플레이부에 표시되며, 상기 디스플레이 장치의 동작을 제어하기 위한 오브젝트인
디스플레이 장치.12. The method of claim 11,
The control unit
The moving speed of the moving pointer is adjusted according to the movement of the user's hand gesture,
The pointer
An object for controlling the operation of the display device,
Display device.
상기 사용자의 작업 영역은
사용자가 상기 포인터를 통해 상기 디스플레이 장치의 동작을 제어할 수 있는 영역인
디스플레이 장치.12. The method of claim 11,
The work area of the user
A region in which the user can control the operation of the display device through the pointer
Display device.
상기 추출된 사용자의 비율은
상기 디스플레이 장치와 상기 사용자 간 거리에 따라 변경되는 값인
디스플레이 장치.12. The method of claim 11,
The ratio of the extracted users is
A value that varies depending on the distance between the display device and the user
Display device.
상기 제어부는
상기 상기 디스플레이 장치와 상기 사용자 간 거리에 따라 상기 작업 영역을 조절하는
디스플레이 장치.20. The method of claim 19,
The control unit
And adjusting the work area according to the distance between the display device and the user
Display device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020130149483A KR20150064597A (en) | 2013-12-03 | 2013-12-03 | Video display device and operating method thereof |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020130149483A KR20150064597A (en) | 2013-12-03 | 2013-12-03 | Video display device and operating method thereof |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20150064597A true KR20150064597A (en) | 2015-06-11 |
Family
ID=53503119
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020130149483A KR20150064597A (en) | 2013-12-03 | 2013-12-03 | Video display device and operating method thereof |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20150064597A (en) |
-
2013
- 2013-12-03 KR KR1020130149483A patent/KR20150064597A/en not_active Application Discontinuation
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110850593B (en) | Mobile device and method for pairing electronic devices by mobile device | |
KR102147346B1 (en) | Display device and operating method thereof | |
KR102191177B1 (en) | Display device and operating method thereof | |
US9436290B2 (en) | Display device and operating method thereof | |
KR101899597B1 (en) | Method for searching object information and dispaly apparatus thereof | |
KR101731346B1 (en) | Method for providing display image in multimedia device and thereof | |
US20100134411A1 (en) | Information processing apparatus and information processing method | |
US20150254062A1 (en) | Display apparatus and control method thereof | |
CN108886634B (en) | Display device and method for operating the same | |
TW201344597A (en) | Control method and controller for display device and multimedia system | |
KR20120051212A (en) | Method for user gesture recognition in multimedia device and multimedia device thereof | |
US10088901B2 (en) | Display device and operating method thereof | |
KR20120051208A (en) | Method for gesture recognition using an object in multimedia device device and thereof | |
TWI544336B (en) | Classes,electronic device and method of pairing thereof and seamless content playback method | |
US10372225B2 (en) | Video display device recognizing a gesture of a user to perform a control operation and operating method thereof | |
US20230405435A1 (en) | Home training service providing method and display device performing same | |
KR102576388B1 (en) | Display device and operating method thereof | |
KR20150008769A (en) | Image display apparatus, and method for operating the same | |
EP2894866B1 (en) | Display apparatus and display method thereof | |
KR20160004739A (en) | Display device and operating method thereof | |
KR20120074484A (en) | Multimedia device for processing data by using image sensor and the method for controlling the same | |
KR20150064597A (en) | Video display device and operating method thereof | |
US9883210B2 (en) | Display device and method for operating the same | |
KR20160044254A (en) | Display device and operating method thereof | |
KR20240044943A (en) | Transparent display device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
WITN | Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid |