KR101636903B1 - Electronic device including motion sensing camera and operating method according to motion sensing - Google Patents

Electronic device including motion sensing camera and operating method according to motion sensing Download PDF

Info

Publication number
KR101636903B1
KR101636903B1 KR1020140078770A KR20140078770A KR101636903B1 KR 101636903 B1 KR101636903 B1 KR 101636903B1 KR 1020140078770 A KR1020140078770 A KR 1020140078770A KR 20140078770 A KR20140078770 A KR 20140078770A KR 101636903 B1 KR101636903 B1 KR 101636903B1
Authority
KR
South Korea
Prior art keywords
camera
power
low
sensor
motion
Prior art date
Application number
KR1020140078770A
Other languages
Korean (ko)
Other versions
KR20150081226A (en
Inventor
박광훈
김정현
Original Assignee
경희대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 경희대학교 산학협력단 filed Critical 경희대학교 산학협력단
Publication of KR20150081226A publication Critical patent/KR20150081226A/en
Application granted granted Critical
Publication of KR101636903B1 publication Critical patent/KR101636903B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Power Sources (AREA)
  • Studio Devices (AREA)

Abstract

본 발명에 따른 전자기기는 객체의 움직임 여부를 감지하는 저전력 센서와; 상기 저전력 센서로부터 객체의 움직임이 감지되면, 활성화되어 객체의 동작을 인식하는 카메라와; 상기 카메라에서 인식된 객체의 동작이 소정 조건을 만족하는 경우 기설정된 동작을 수행하는 동작부를 포함하고, 상기 저전력 센서의 소비 전력은 상기 카메라의 소비 전력보다 작은 것을 특징으로 할 수 있다. 이로 인해 저전력 센서를 이용하여 카메라의 전원을 제어함으로써, 저전력 센서가 움직임을 감지하였을 경우에만 카메라에 전원을 공급할 수 있는 전자기기 및 움직임 감지에 따른 전자기기 동작 방법이 제공된다. An electronic device according to the present invention includes: a low-power sensor for detecting whether an object moves; A camera which is activated when the motion of the object is detected from the low power sensor and recognizes the motion of the object; And an operation unit configured to perform a predetermined operation when the operation of the object recognized by the camera satisfies a predetermined condition, wherein the power consumption of the low-power sensor is smaller than the power consumption of the camera. Accordingly, an electronic device capable of supplying power to the camera only when a low-power sensor senses motion by controlling power of a camera using a low-power sensor, and a method of operating an electronic device according to motion detection are provided.

Figure R1020140078770
Figure R1020140078770

Description

움직임 감지 카메라를 포함하는 전자기기 및 움직임 감지에 따른 전자기기 동작 방법{ELECTRONIC DEVICE INCLUDING MOTION SENSING CAMERA AND OPERATING METHOD ACCORDING TO MOTION SENSING}BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an electronic device including a motion detection camera and an operation method of the electronic device according to motion detection.

본 발명은 전자기기 및 움직임 감지에 따른 전자기기 동작 방법에 관한 것으로서, 보다 상세하게는 움직임 감지 카메라를 포함하는 전자기기 및 움직임을 감지하는 움직임 감지 카메라를 포함하는 전자기기 동작 방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention [0002] The present invention relates to an electronic apparatus and a method of operating an electronic apparatus according to motion detection, and more particularly, to an electronic apparatus including an electronic apparatus including a motion detection camera and a motion detection camera for detecting motion.

최근 물체의 동작을 인식하는 카메라들이 활발하게 개발되고 있으며, 이는 사용자들의 편의를 위한 스마트 정보가전 제품군의 시장 변화라고 볼 수 있다. 예를 들면 사용자의 제스쳐(Gesture) 인식 등의 움직임을 인식할 수 있는 카메라(일반 영상을 입력으로 하는 카메라 또는 카메라와 사물과의 거리를 입력으로 하는 깊이정보 카메라 등)가 스마트TV 또는 스마트 핸드폰 등에 포함될 수 있다. 카메라는 사용자 동작을 감지하여 그 동작패턴에 맞는 입력(예를들어 사용자의 제스쳐에 따라 채널 변경 또는 음량변경 등등)을 텔레비전에 전달하고, 텔레비전은 해당 동작 프로세스를 수행할 수 있다. Recently, cameras that recognize the motion of objects have been actively developed. This is a market change of smart information appliances for users' convenience. For example, a camera capable of recognizing motion such as a user's gesture recognition (a camera that inputs a general image or a depth information camera that inputs a distance between a camera and an object) . The camera senses the user's motion and delivers the input (e.g., channel change or volume change according to the user's gesture) to the television in accordance with the motion pattern, and the television can perform the corresponding motion process.

또한 최근 사물인터넷(Internet of Things)이라는 기술이 각광 받기 시작하고 있다. 이 기술은 사물에 센서나 데이터 취득이 가능한 구조의 인터넷을 연결한 기술으로써 2009년까지 사물인터넷 기술을 사용하는 사물의 개수가 9억 개 였으나 2020년까지 이 수가 260억 개에 이를 것으로 전망하여 관련 분야에서의 보다 효율적인 기술이 계속해서 요구 되고 있다. 그 중 사물인터넷의 3대 주요 기술 중 하나인 센싱기술에 따른 상용화에 가능한 부분에 대한 기술 역시 고려해야 할 부분이다. 또, 다른 예로는 물체의 깊이 정보를 얻을 수 있는 깊이 카메라를 이용하여 물체와 카메라와의 거리를 감지하여 관련 처리를 수행하는 장치 등이 존재할 수 있다Recently, the technology called Internet of Things is getting popular. This technology is a technology that connects the internet with a structure that can acquire sensors or data to objects. It is estimated that the number of things using the Internet technology of things until 2009 is 900 million, but this number will reach 26 billion by 2020, More efficient technology in the field continues to be required. One of the three major technologies of the Internet of things, which is a part to be commercialized according to the sensing technology, should be considered. As another example, there may be a device for detecting a distance between an object and a camera using a depth camera that can obtain depth information of the object and performing related processing

이러한 동작인지 카메라를 가진 장치 또는 정보가전기기들은 사물의 움직임에 따라서 해당 동작에 맞는 처리(Process)를 수행하게된다(예를 들어 사물의 동작에 따라서 채널을 변경하던지 등등). 그렇기 때문에 관련한 장치가 비활성화 되더라도 (System OFF), 해당 장치내의 움직임 또는 상태를 감지하기 위한 전자기기의 전원과 움직임에 따른 처리를 수행하는 알고리즘은 항상 활성화 되어서 처리를 수행하고 있어야만 한다 (System이 OFF되어 있다고 하더라도, 동작인지 카메라와 동작인지 프로세스관련 장치는 ON되어서 계속 해당 프로세스를 수행하고 있어야만 한다). 이렇게 부분적인 프로세스가 항상 활성화가 계속 되어있는 경우에는 해당 제품이 켜져 있지 않은 대기중의 상태에서도 대기 전력의 소모가 굉장히 클 수 밖에 없다.A device having such an operation, a camera, or an information appliances performs a process according to the motion of the object (for example, changing the channel according to the motion of the object, etc.). Therefore, even if the related device is inactivated (System OFF), the algorithm for performing the processing according to the power and movement of the electronic device for detecting the motion or the state in the device must be always activated and the process must be performed Even if it is an operation, the device related to the operation, the camera and the motion recognition process must be ON and continue to perform the process). If the partial process continues to be activated all the time, the standby power consumption is extremely high even in the standby state when the product is not turned on.

전력의 공급에 비해 수요가 지나치게 많아지는 요즘 전기 요금의 인상 때문에 저전력 제품에 대한 소비자의 수요가 증가하고 있는 추세이다. 하지만 위에서 언급된 바와 같이, 동작 인식을 위하여 항상 카메라가 켜져 있는 경우, 대기전력이 매우 크게 되어 절전형 장치를 소비자에게 공급하는데 문제가 따른다.Consumer demand for low-power products is on the rise due to an increase in electricity rates in recent years, when demand for electricity is excessively high. However, as mentioned above, when the camera is always turned on for the operation recognition, standby power becomes very large, which causes a problem in supplying the power saving device to the consumer.

본 발명은 스마트 정보가전 제품의 시스템이 꺼져 있는 대기 상태에 있는 경우에도, 실제로는 사물의 움직임 또는 그 상태를 감지하기 위한 용도로 동작을 하는 카메라 및 부분적인 장치(사물의 움직임 또는 존재 여부를 판단하는 프로세스를 항상 수행해야하는 장치)에 계속하여 전원을 공급해야만 하는 장치들의 대기 전력 소모를 최소화 하기 위한 방법을 제시한다.The present invention can be applied to a camera and a partial device that operate in real time for detecting the movement or the state of an object even when the system of the smart information appliance is in a standby state (E.g., a device that must always perform the process of continuously providing power to the device).

본 발명의 일 실시예는 동작인지를 수행하는 장치에 저전력 센서(Wide-range 저전력 초음파 센서 또는 Wide-range 저전력 적외선 센서; 저전력 센서에서는 장치와 기기간의 정확한 거리 또는 정확한 동작 감지를 할 필요가 없음. 단지 사물의 나타남 또는 사라짐 등의 존재여부 과정만 탐지하면 됨)를 추가적으로 탑재하여 저전력 센서로 하여금, 사물이 대략적으로 나타나는 경우 또는 간략한 움직임을 감지하였을 경우에만 동작인지 카메라에 전원을 공급하여, 해당 동작인지 프로세스를 수행하도록 하는, 따라서 동작인지에 따른 대기전력 소모를 최소화 할 수 있는 전자기기 및 움직임 감지에 따른 절전형 전자기기 작동 방법을 제공한다. In one embodiment of the present invention, a low-power sensor (wide-range low-power ultrasonic sensor or wide-range low-power infrared sensor; low-power sensor does not need accurate distance or accurate motion detection between the device and the device). Only the existence or disappearance of an object may be detected), so that the low-power sensor supplies power to the operation-aware camera only when an object appears roughly or when a simple motion is detected, The present invention provides a method of operating a power saving electronic device according to an electronic device and a motion detection method capable of minimizing a standby power consumption according to whether an operation is performed.

본 발명의 일 실시예는 사물의 존재여부 및 움직임 또는 동작 감지를 하기 위한 카메라 및 해당 장치의 프로세스를 동작시키기 위하여 전자기기가 꺼져 있는 상태임에도 불구하고(전자기기 대기 상태), 동작인지를 위한 장치 및 프로세스를 위하여 전원이 항상 공급되어야만 하는 전자기기 장치에서, 저전력 센서를 사용하여 대기전력 소모를 최소화 하는 전자기기 및 움직임 감지에 따른 전자기기 동작 방법을 제공한다. An embodiment of the present invention is directed to a device for detecting whether an electronic device is in an off state (electronic standby state) in order to operate a camera and a process of a camera and a device for detecting motion or motion of an object, And an electronic device that minimizes standby power consumption by using a low-power sensor and an electronic device operating method according to motion detection in an electronic device in which power must always be supplied for a process.

본 발명의 일 실시예인 전자기기는 사물의 존재여부 또는 움직임 여부(상세 움직임 또는 동작형태를 감지할 필요가 없음, 해당 상세 움직임은 동작인지 카메라가 활성화되어 해당 카메라가 인지하게 됨)를 감지하는 저전력 센서와; 상기 저전력 센서로부터 객체의 움직임이 감지되면, 활성화되어 객체의 동작을 인식하는 카메라와; 상기 카메라에서 인식된 객체의 동작이 소정의 정해진 조건을 만족하는 경우 해당 설정에 맞는 동작을 수행하는 동작부를 포함하고, 상기 저전력 센서의 소비 전력은 상기 카메라의 소비 전력보다 작을 수 있다. An electronic device according to an embodiment of the present invention is a device that detects whether an object is present or not (whether a detailed motion or an operation mode needs to be detected and a detailed motion is an action or a camera is activated and the camera recognizes) A sensor; A camera which is activated when the motion of the object is detected from the low power sensor and recognizes the motion of the object; And an operation unit for performing an operation according to the setting when the operation of the object recognized by the camera satisfies a predetermined condition, and the power consumption of the low power sensor may be smaller than the power consumption of the camera.

상기 저전력 센서는 초음파 센서 또는 적외선 센서를 포함할 수 있다 (사물의 존재 여부 또는 대략적인 움직임에 대한 감지 여부를 결정하는 센서이므로, 저전력 Wide-range 초음파 센서 또는 적외선 센서가 적용될 수 있다). The low-power sensor may include an ultrasonic sensor or an infrared sensor (it may be a low-power wide-range ultrasonic sensor or an infrared sensor, since it is a sensor for determining the presence or absence of an object or sensing rough motion).

상기 동작인지 카메라는 일반적인 컬러 또는 흑백 카메라 또는 사물의 깊이정보(Depth)를 출력하는 깊이정보 맵(Depth-map) 카메라를 포함할 수 있다 (예: 마이크로소프트 키넥트 카메라 등).The motion sensing camera may include a Depth-map camera (e.g., a Microsoft Kinect camera, etc.) that outputs a typical color or monochrome camera or Depth of an object.

상기 깊이정보맵 카메라의 경우, 사물의 깊이정보 변화가 기설정된 조건과 일치 또는 유사한 것으로 판단되는 경우, 상기 해당 조건에 맞는 동작부를 활성화하기 위한 제어 신호를 출력할 수 있다. 이와 같은 동작원리는 컬러 또는 흑백 카메라와 같은 영상 센서뿐만 아니라 사물과 주위 환경으로부터 정보를 얻을 수 있는 물리적 센서를 포함하는 모듈에도 유사하게 적용 가능하다. In the case of the depth information map camera, when it is determined that the depth information change of the object matches or is similar to the predetermined condition, a control signal for activating the operation unit corresponding to the corresponding condition may be output. This principle of operation is similarly applicable to a module including a physical sensor capable of obtaining information from an object and surrounding environment as well as an image sensor such as a color or monochrome camera.

상기 저전력 센서로부터 사물의 움직임이 감지되면(정적인 배경에 동적인 사물이 나타나는 경우 또는 정적인 사물이 움직이는 경우: 일 예로서 가정용 스마트TV의 경우 정적인 배경 상태에서 움직이는 사물이 감지되는 경우), 상기 동작인지를 위한 카메라와 해당 인지 프로세를 수행하는 장치에 전원을 공급할 수 있다. When a movement of an object is detected from the low-power sensor (when a dynamic object appears on a static background or a static object moves; for example, when a moving object is detected in a static background state in the case of a home smart TV) A camera for recognizing the operation and a device for performing the recognition process may be powered.

본 발명의 다른 실시 형태에 따른 저전력 센서 및 사물의 동작이나 상태를 인식하는 카메라 혹은 전자 센서를 포함하는 장치의 동작 방법은 상기 저전력 센서를 통하여 사물을 감지하는 단계와; 사물이 감지되면, 상기 카메라 및 전자 센서를 활용하여 객체의 동작 또는 상태를 인지하는 단계와; 인지된 동작의 상태에 적합한 기설정된 동작을 수행하는 단계를 포함한다. According to another aspect of the present invention, there is provided a method of operating an apparatus including a low-power sensor and a camera or an electronic sensor for recognizing an operation or a state of an object, the method comprising: sensing an object through the low- Recognizing an operation or a state of the object using the camera and the electronic sensor when the object is sensed; And performing a predetermined operation suited to the state of the recognized operation.

본 발명에 따르면 사물의 움직임 또는 상태를 감지하기 위해 동작을 인식하는 카메라 혹은 센서에, 전체 시스템의 전원은 꺼져있음에도 불구하고 (대기전력 소모 상태), 계속하여 전원을 공급해야만 하는 스마트 정보가전 장치들의 대기전력 소모를 절전형으로 해결하기 위한 방법이 제시된다.According to the present invention, a camera or a sensor that recognizes an operation to detect a motion or a state of an object may be provided with a smart information appliances which are required to continuously supply power even when the power of the entire system is turned off (standby power consumption state) A method for power saving standby power consumption is presented.

본 발명의 일 실시예에 따르면, 저전력 센서를 이용하여 카메라의 전원을 제어함으로써, 저전력 센서가 움직임을 감지하였을 경우에만 카메라에 전원을 공급할 수 있는 전자기기 및 움직임 감지에 따른 전자기기 동작 방법이 제공된다. According to an embodiment of the present invention, there is provided an electronic device capable of supplying power to a camera only when a low-power sensor senses motion, and an electronic device operating method according to motion detection by controlling power of a camera using a low- do.

이로써, 본 발명은 항상 전원이 공급되는 카메라 때문에 대기 전력의 과도한 소모로 인하여 이러한 동작인지 기술이 용이하게 상용화되지 못하는 상태에서, 대기 전력을 줄임으로써 이러한 기술들의 제품화가 가능하게 할 수 있다. 본 발명의 일 실시예는 저전력 센서를 사용하여 대기전력 소모가 낮은 전자기기 및 움직임 감지에 따른 전자기기 동작 방법이 제공된다.Thus, the present invention makes it possible to commercialize such technologies by reducing the standby power in a state in which such operation recognition technology can not be easily commercialized due to excessive consumption of the standby power due to the always powered camera. An embodiment of the present invention provides an electronic device having low standby power consumption using a low-power sensor and a method of operating an electronic device according to motion detection.

도 1은 사물(객체)을 감지하고 있는 카메라의 상태를 도시한 도면이다.
도 2는 사물(객체)이 존재하지 않는 경우에 동작하는 카메라의 상태를 도시한 도면이다.
도 3은 본 발명의 일 예에 따른 전자기기를 개략적으도 도시한 도면이다.
도 4는 본 발명의 일 예에 따라 사물(객체)을 감지하고 있는 저전력 센서를 도시한 도면이다.
도 5는 본 발명의 일 예에 따라 사물이 존재하지 않는 경우에 동작하는 저전력 센서를 도시한 도면이다.
도 6은 본 발명의 일 예에 따라 저전력 센서의 사물(객체) 감지 후 동작하는 카메라를 도시한 도면이다.
도 7은 본 발명의 일 실시예에 따른 저전력 센서를 이용한 동작 인식을 설명하기 위한 제어 흐름도이다.
도 8은 본 발명의 일 실시예에 따른 저전력 센서를 이용하여 동작 인식을 수행하는 센싱 모듈의 제어 블록도이다.
도 9는 본 발명의 일 실시예에 따른 전자기기의 제어 블록도이다.
FIG. 1 is a diagram showing a state of a camera that detects objects (objects).
FIG. 2 is a view showing a state of a camera operating when an object (object) does not exist. FIG.
FIG. 3 is a view schematically showing an electronic device according to an example of the present invention.
4 is a diagram illustrating a low power sensor sensing an object according to an embodiment of the present invention.
5 is a diagram illustrating a low-power sensor operating in the absence of an object according to an embodiment of the present invention.
FIG. 6 is a diagram illustrating a camera that operates after detecting objects of a low-power sensor according to an exemplary embodiment of the present invention.
7 is a control flowchart for explaining an operation recognition using a low-power sensor according to an embodiment of the present invention.
8 is a control block diagram of a sensing module that performs operation recognition using a low-power sensor according to an embodiment of the present invention.
9 is a control block diagram of an electronic apparatus according to an embodiment of the present invention.

이하, 도면을 참조하여 본 발명의 실시 형태에 대하여 구체적으로 설명한다. 본 명세서의 실시예를 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 명세서의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. In the following description of the embodiments of the present invention, a detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present disclosure rather unclear.

어떤 구성 요소가 다른 구성 요소에 “연결되어” 있다거나 “접속되어” 있다고 언급된 때에는, 그 다른 구성 요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있으나, 중간에 다른 구성 요소가 존재할 수도 있다고 이해되어야 할 것이다. 아울러, 본 발명에서 특정 구성을 “포함”한다고 기술하는 내용은 해당 구성 이외의 구성을 배제하는 것이 아니며, 추가적인 구성이 본 발명의 실시 또는 본 발명의 기술적 사상의 범위에 포함될 수 있음을 의미한다. It is to be understood that when an element is referred to as being "connected" or "connected" to another element, it may be directly connected or connected to the other element, . In addition, the description of "including" a specific configuration in the present invention does not exclude a configuration other than the configuration, and means that additional configurations can be included in the practice of the present invention or the technical scope of the present invention.

제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.The terms first, second, etc. may be used to describe various components, but the components should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another. For example, without departing from the scope of the present invention, the first component may be referred to as a second component, and similarly, the second component may also be referred to as a first component.

또한 본 발명의 실시예에 나타나는 구성부들은 서로 다른 특징적인 기능들을 나타내기 위해 독립적으로 도시되는 것으로, 각 구성부들이 분리된 하드웨어나 하나의 소프트웨어 구성단위로 이루어짐을 의미하지 않는다. 즉, 각 구성부는 설명의 편의상 각각의 구성부로 나열하여 포함한 것으로 각 구성부 중 적어도 두 개의 구성부가 합쳐져 하나의 구성부로 이루어지거나, 하나의 구성부가 복수 개의 구성부로 나뉘어져 기능을 수행할 수 있고 이러한 각 구성부의 통합된 실시예 및 분리된 실시예도 본 발명의 본질에서 벗어나지 않는 한 본 발명의 권리범위에 포함된다.In addition, the components shown in the embodiments of the present invention are shown independently to represent different characteristic functions, which does not mean that each component is composed of separate hardware or software constituent units. That is, each constituent unit is included in each constituent unit for convenience of explanation, and at least two constituent units of the constituent units may be combined to form one constituent unit, or one constituent unit may be divided into a plurality of constituent units to perform a function. The integrated embodiments and separate embodiments of the components are also included within the scope of the present invention, unless they depart from the essence of the present invention.

또한, 일부의 구성 요소는 본 발명에서 본질적인 기능을 수행하는 필수적인 구성 요소는 아니고 단지 성능을 향상시키기 위한 선택적 구성 요소일 수 있다. 본 발명은 단지 성능 향상을 위해 사용되는 구성 요소를 제외한 본 발명의 본질을 구현하는데 필수적인 구성부만을 포함하여 구현될 수 있고, 단지 성능 향상을 위해 사용되는 선택적 구성 요소를 제외한 필수 구성 요소만을 포함한 구조도 본 발명의 권리범위에 포함된다.In addition, some of the components are not essential components to perform essential functions in the present invention, but may be optional components only to improve performance. The present invention can be implemented only with components essential for realizing the essence of the present invention, except for the components used for the performance improvement, and can be implemented by only including the essential components except the optional components used for performance improvement Are also included in the scope of the present invention.

이하 본 발명에 대한 이해를 돕기 위해 움직임 감지 카메라에 대한 일 실시 예를 설명하였으며, 실제로 카메라 이외에도 이와 같은 원리를 이용하여 전력 소모를 줄이는 전자기기 역시 본 발명의 범위에 포함이 된다.
In order to facilitate understanding of the present invention, an embodiment of a motion detection camera has been described. In addition to a camera, an electronic device that reduces power consumption by using such a principle is included in the scope of the present invention.

도 1은 객체를 인식하고 있는 카메라의 상태를 도시한 도면이고, 도 2는 객체가 존재하지 않는 경우에도 동작하는 카메라의 상태를 도시한 도면이다. FIG. 1 illustrates a state of a camera that recognizes an object, and FIG. 2 illustrates a state of a camera that operates even when an object does not exist.

도 1 및 도 2에 도시된 바와 같이, 객체의 동작을 인지하기 위하여 객체를 인식하는 카메라와, 객체의 동작을 인지하는 동작 인식 프로세스가 결합되어 동작할 수 있다. As shown in FIGS. 1 and 2, a camera recognizing an object and a motion recognizing process recognizing the motion of the object can be operated in order to recognize the motion of the object.

기존의 기술을 따르면 동작을 인지하는 카메라는 언제 나타날지 모르는 사물(객체)의 존재여부 또는 사물(객체)의 움직임 여부를 항상 판단해야 하기 때문에 전자기기의 대기 상태(사용자 입장에서는 전자기기 시스템이 꺼져있는 상태로 간주한다)에서도 카메라에 항상 전력이 공급되어야 한다. 또한 이와 동시에 카메라로부터 입력받은 정보를 이용하여 사물의 존재 여부 또는 사물의 움직임 여부 및 사물의 상세 동작 패턴을 인식하는 프로세스가 계속해서 활성화되어야만 한다.According to the existing technology, since the camera recognizing the operation always has to determine whether or not an object (object) exists or whether the object (object) moves, the camera is in a waiting state State), the camera must always be supplied with power. At the same time, the process of recognizing the existence of objects or motion of objects and the detailed motion patterns of objects using the information input from the camera must be continuously activated.

하지만 카메라에 항상 객체가 인지되는 것은 아니며, 거의 대부분의 대기상태에서는 인지를 해야 할 사물(객체)이 없이 정적인 배경만 계속 유지되는 경우가 많다. 하지만 언제 사용자의 동작을 인지하여 동작인지 패턴과 관련된 작업을 수행 해야 할지 알 수 없는 전자기기의 입장에서는 계속해서 전력을 공급해 카메라 및 관련 프로세스의 기능 활성화를 항상 유지시킬 수 밖에 없다. 대부분의 경우 도 1이 아닌 도 2와 같은 경우와 같이 카메라와 함께 동작 인식 프로세스에, 시스템 입장에서는 절전 대기상태임에도 불구하고 전력을 소비하며 카메라의 기능을 유지하고 있다 (즉, 대기전력 소비가 상대적으로 매우 높다).However, the object is not always perceived in the camera, and in almost all of the waiting states, there is often a static background without any objects to be recognized. However, from the viewpoint of an electronic device which does not know when to recognize a user's operation and perform an operation pattern related operation, it is necessary to continuously supply power to maintain the function of the camera and related processes at all times. In most cases, power consumption is consid- ered in the operation recognizing process together with the camera as in the case of Fig. 2, as in Fig. 2, although the system is in a power saving standby state, and the function of the camera is maintained (i.e., standby power consumption is relatively Which is very high).

즉, 동작 인식이 가능한 카메라와 관련된 알고리즘을 처리를 하는 데에 소비되는 전력으로 인하여 카메라를 내장 또는 외장하여 포함하는 전자기기에서 필요 이상의 대기 전력 소모가 야기된다.That is, due to the power consumed in processing an algorithm related to a camera capable of recognizing motion, standby power consumption is unnecessarily consumed in an electronic device including a camera built in or externally.

본 발명은 인간의 동작이나 움직임을 인지하여 해당 동작 패턴에 맞는 처리를 수행하는 스마트 정보가전 제품군의 경우, 동작인지 카메라와 함께 동작인지 프로세스가, 해당 시스템의 대기상태 (사용자 입장에서는 시스템 전원을 끈 상태)에도, 항상 동작하고 있어서(켜져있어서) 대기전력 소모가 매우 크게되는 것을 방지하기 위한 방법을 제공한다. 이를 위하여 본 발명은 초음파 센서와 같은 저전력 센서를 이용하여 초음파가 카메라 앞 사물(객체)의 존재여부(사물이 없다가 갑자기 나타남) 또는 대략적인 움직임을 항상 확인하고, 객체의 존재여부 또는 어느 정도 임계치 이상의 움직임 여부가 감지되었을 때만 동작인지 카메라 및 프로세스에 전원을 공급하여, 시스템 대기상태에서 카메라의 소비전력을 최대한 줄이기 위한 방법 및 장치를 제공한다. In the case of a smart information appliance product group recognizing a motion or a motion of a human and performing a process corresponding to a corresponding motion pattern, an operation recognition process is performed with the motion recognition camera in a standby state of the corresponding system (On), the standby power consumption is prevented from becoming very large. To this end, the present invention utilizes a low-power sensor such as an ultrasonic sensor to always check whether an ultrasonic wave has an object in front of the camera (sudden appearance or no object) or rough motion, The present invention provides a method and apparatus for minimizing power consumption of a camera in a system standby state by supplying power to a camera or a process, which is an operation only when motion is detected.

따라서, 본 발명은 시스템 대기 상태에서 (대기전력 상태), 사물(객체)의 동작을 인지하는 카메라 및 관련 프로세스의 전력 소비를 줄이기 위한 방법으로서 초음파 센서와 같은 저전력 센서를 추가적으로 이용할 수 있다. 초음파 센서를 이용하여 동작을 인지하는 카메라의 전원을 제어하여 초음파 센서가 움직임을 감지 하였을 경우에 한정하여 카메라 및 관련 프로세스에 전원을 공급할 수 있다. Therefore, the present invention can additionally utilize a low-power sensor such as an ultrasonic sensor as a method for reducing the power consumption of the camera and related processes that recognize the operation of an object in a system standby state (standby power state). It is possible to supply power to the camera and the related process only when the ultrasonic sensor senses the motion by controlling the power of the camera which recognizes the operation using the ultrasonic sensor.

본 발명은, 인간의 동작이나 움직임을 인지하여 해당 동작 패턴에 맞는 처리를 수행하는 스마트 정보가전 제품군에서, 전체 시스템은 대기 상태(대기전력 상태)임에도 불구하고 동작인지 카메라와 관련 프로세스에 항상 전원을 공급하여 상황인지를 해야만 하는 전자기기에 대한 대기전력 소비를 감소시키는데 큰 효과가 있다.The present invention relates to a smart information appliance product group that recognizes a human motion or motion and performs a process corresponding to a corresponding motion pattern, so that the entire system is always powered on for an operation-aware camera and related processes There is a great effect in reducing the standby power consumption for the electronic device which must supply the status and recognize the situation.

도 3은 본 발명의 일 예에 따른 전자기기를 개략적으도 도시한 도면이다. FIG. 3 is a view schematically showing an electronic device according to an example of the present invention.

도 3에 도시된 바와 같이, 전자기기(1)는 저전력 센서(10)와 카메라 모듈(20)을 포함하고 있다. 전자기기(1)는 예를 들어 텔레비전이나 사물 인터넷(Internet of Things, IoT)과 같은 디바이스로 구현될 수 있다. 또는 전자기기는 대형 스크린, 옥외 광고판 또는 사물(객체), 특히 사람의 접근 또는 움직임에 대응하여 동작 여부가 결정되는 모든 전자제품을 포함할 수 있다. As shown in FIG. 3, the electronic device 1 includes a low-power sensor 10 and a camera module 20. The electronic device 1 may be implemented as a device such as, for example, a television or Internet of Things (IoT). Or the electronic device may include a large screen, an outdoor billboard, or any electronic product that is determined to be in operation, particularly in response to a person's approach or movement.

저전력 센서(10)는 초음파 센서 또는 적외선 센서와 같이 사물(객체)의 나타남(appearance) 또는 사물(객체)의 대략적인 움직임을 인지할 수 있는 센서를 포함할 수 있으며, 카메라 모듈과 비교하여 상당히 적은 전력을 소모하는 저전력 제품으로 구현될 수 있다. The low power sensor 10 may include a sensor capable of recognizing the appearance of an object or the approximate movement of an object such as an ultrasonic sensor or an infrared sensor, And can be implemented as a low power consuming product.

카메라 모듈(20)는 도 1 및 도 2와 같이 카메라와 함께 동작인지(또는 인식) 알고리즘이 동작하는 프로세스를 포함할 수 있다. 사물(객체)이 정적인 배경에서 갑자기 나타나거나, 사물(객체)이 이미 기 존재하는 상황에서 어느 정도 임계치 이상의 커다란 움직임이 있는 경우, 해당 변화가 저전력 센서(10)에서 감지되면 카메라모듈(20)과 동작인지 프로세스가 활성화 될 수 있다. 동작 인식 알고리즘은 카메라로부터 얻은 정보를 통해 동작을 인식하는 공지된 다양한 알고리즘을 포함할 수 있다. The camera module 20 may include a process in which an algorithm (or a recognition algorithm) operates with the camera as shown in FIGS. 1 and 2. When the object (object) appears suddenly on a static background or when there is a large movement of a certain level or more in a state where an object (object) already exists, if the change is detected by the low power sensor 10, And the motion recognition process can be activated. The motion recognition algorithm may include various known algorithms that recognize motion through information obtained from the camera.

본 발명에 따를 경우, 전자기기(1)에 내장 또는 외장되어 있는 저전력 센서(10)와 카메라 모듈(20)은 전자기기(1)에 사물(객체)이 나타났는지 여부 또는 이미 존재하는 정적인 사물(객체)에서 어느정도 임계치 이상의 움직임이 존재하는지 여부 등에 따라 각각 동작 여부가 달라 질 수 있다. According to the present invention, the low power sensor 10 and the camera module 20 built in or enclosed in the electronic device 1 can detect whether an object appears in the electronic device 1 or a static object Whether or not there is a movement of a threshold level or more in the object (object), and the like.

기존에 사용되던 동작 인식 텔레비전에서는 객체의 동작을 인식을 하기 위해 텔레비전의 전원이 꺼져 있는 대기 상태에 이르더라도 계속하여 카메라 및 동작 인식 알고리즘이 항상 작동 하고 있기 때문에 그 전력의 소모가 매우 컸다. 또는 대기전력을 줄이기 위하여, 동작인지 카메라 역시도, 절전 대기상태에서 끈 상태에서, 리모컨 등으로 텔레비젼이 활성화 된 후에야 비로서 동작인지 카메라와 해당 프로세스를 활성화 시키는 방법 등을 사용하였다 (즉, 리모컨 등으로 텔레비젼이 활성화 (시스템 ON) 되어서야 비로서 동작인지를 수행할 수 있는 카메라가 활성화된다). In the conventional motion recognition television, even if the television is in a standby state in which the power of the television is turned off in order to recognize the motion of the object, the power consumed by the camera and motion recognition algorithm is very large. In order to reduce standby power, an operation-aware camera also uses a method of activating a camera and a corresponding process, such as a remote controller, etc., in a state in which the camera is turned off in a power saving standby state, A camera is activated which can perform whether the television is active (system ON) or not.

도 3에서와 같이 본 발명의 저전력 센서(10)는, 전체 시스템이 절전대기 상태에서, 카메라의 인지(또는 인식) 범위(range) 내의 객체의 도래 또는 임계치 이상의 대략적인 움직임 등을 센싱하여 카메라 모듈(20)을 동작시킬 수 있다. 저전력 센서(10)가 만약 사람이 아닌 물체 또는 사물의 움직임 혹은 도래(appearance)를 감지(인지 또는 인식으로도 표현이 가능함) 또는 센싱(Sensing)을 하더라도 그것은 단지 전체 시스템의 절전 대기 상태에서 전체 시스템을 활성화 시키는 것이 아니라 동작 인지 카메라와 동작 인지(인식) 알고리즘 관련 프로세스를 활성화 시키는 것이기 때문에 실제로 전체 전자기기(1)를 제어할 수 있는 관련 동작이 일어나지 않는 한 저전력 센서(10)에 의해 전자기기(1)가 켜지는 등의 동작은 발생하지 않는다. 즉, 저전력 센서(10)는 전체 시스템이 절전 대기 상태에서 사물(객체)의 도래(appearance) 또는 움직임 여부를 감지하여 오직 동작 인지 카메라와 동작 인지(인식) 알고리즘 관련 프로세스를 활성화 시키는 동작을 수행한다. As shown in FIG. 3, the low-power sensor 10 of the present invention senses the arrival of an object within the recognition (or recognition) range of the camera, (20) can be operated. Even if the low-power sensor 10 detects (recognizes or recognizes) the movement or appearance of an object or object other than a person, or sensing it, Since the operation related to the operation of the camera and the operation (recognition) algorithm is activated, the low-power sensor 10 can control the operation of the electronic device 1 1) does not occur. That is, the low-power sensor 10 performs an operation of activating a process related to only an operation-aware camera and an operation (recognition) algorithm by detecting whether an entire system is in appearance or motion of an object in a power saving standby state .

따라서, 절전 대기 중인 전자기기(1)에서는 오직 저전력 센서(10)만이 작동을 하기 때문에 카메라와 동작인식 알고리즘에서 사용되는 전력보다 훨씬 적은 전력으로 절전 대기 상태를 유지할 수 있다. Therefore, in the electronic apparatus 1 waiting for power saving, only the low-power sensor 10 operates, so that the power saving standby state can be maintained with much less power than that used in the camera and the motion recognition algorithm.

만약, 저전력 센서(10)가 도 3의 오른쪽 그림과 같이 사물(객체)의 도래(apparance) 또는 움직임을 인지(인식) 또는 센싱(sensing)하게 된다면 동작인지 카메라와 함께 동작인지 알고리즘 관련 프로세스는 저전력 센서(10)에 의하여 활성화되어 사물의 정확한 제스쳐(gesture) 패턴을 인식 할 수 있는 상태가 된다. 그리고 사물(객체)의 일련의 동작패턴(손가락을 피거나 접거나, 손을 오른쪽에서 왼쪽으로 휘졌거나 하는 일련의 동작과정에 대한 패턴)에 맞게 전자기기(1)의 전원을 넣거나, 채널을 변경하거나, 특정 프로그램을 실행하거나, 볼륨을 높이는 등의 해당 동작패턴(gesture pattern)에 맞는 작업을 처리할 수 있게 된다. If the low-power sensor 10 recognizes or senses an apparance or motion of an object as shown in the right-hand side of FIG. 3, And is activated by the sensor 10 to be able to recognize an accurate gesture pattern of the object. And turning on the electronic device 1 in accordance with a series of motion patterns of the object (a pattern for a series of operations in which a finger is folded or folded, or a hand is turned from right to left) A specific program can be executed, a volume can be increased, or the like.

한편, 관련 기술 분야인 제스쳐 인식 (gesture recognition) 등의 동작 인지(인식)에 관한 연구는 활기차게 연구가 진행이 되고 있다. 동작 인식의 정확성, 깊이 정보를 통한 확실한 객체 분리 등 기술은 눈에 띄게 발전되고 있다. 기술의 발전이 이루어 지면서 이러한 기술은 움직임을 감지할 수 있는 카메라의 경우, 전체 시스템의 전원이 꺼져서 절전대기 상태인 경우에도 항상 해당 프로세스는 동작을 하여야 하고, 대기상태에서 절전형 전자제품의 구현에 문제가 따르기 때문에 실용성에 대한 측면에서 잠재적인 문제가 존재한다. On the other hand, studies on motion perception (gesture recognition) such as gesture recognition, which is related technology field, are being actively researched. Techniques such as accuracy of motion recognition, and reliable object separation through depth information are evolving remarkably. In the case of a camera capable of detecting motion, the technology must always be operated even when the power of the entire system is turned off to be in a power saving standby state, and the problem of implementing a power saving electronic product There is a potential problem in terms of practicality.

즉, 동작 인식에 대한 기술은 발전은 되었지만 시스템의 절전 대기상태에서의 소비 전력을 줄이기 위한 추가적인 기술 개발이 필요한 실정이다.
That is, although the technique of motion recognition has been developed, it is necessary to develop additional technology to reduce the power consumption in the standby state of the system.

도 4는 본 발명의 일 예에 따라 사물(객체)의 도래 또는 움직임(변화)을 센싱 또는 인지하고 있는 (상황의 변화를 인지) 저전력 센서를 도시한 도면이고, 도 5는 본 발명의 일 예에 따라 객체가 존재하지 않는 경우에 동작하는 저전력 센서를 도시한 도면이다. 도 4 및 도 5에 도시되어 있는 저전력 센서는 초음파를 이용하여 사물(객체)의 변화를 센싱하는 초음파 센서로 간단히 구현될 수 있다. FIG. 4 is a diagram showing a low-power sensor sensing (recognizing a change in a situation) sensing or recognizing the arrival or movement (change) of an object (object) according to an exemplary embodiment of the present invention, FIG. 2 is a diagram illustrating a low-power sensor that operates when an object does not exist according to FIG. The low-power sensor shown in Figs. 4 and 5 can be simply implemented as an ultrasonic sensor that senses a change of an object by using ultrasonic waves.

초음파 센서는 초음파를 송신하고 수신하는 송파기(미도시) 및 수파기(미도시)를 포함하며, 카메라에 비교하여 낮은 소비 전력을 갖는다. 송파기는 파장을 내보내는 동작을 수행하고, 수파기는 파장이 사물(객체)에 부딪혀서 반사되어 되돌아 오는 파장을 수신하여 상황의 대략적인 변화를 감지 또는 인지한다. 본 발명의 일 예에 따른 초음파 센서는 송파기와 수파기를 같이 포함하는 반향 모드(Echo mode)일 수 있다. The ultrasonic sensor includes a feeder (not shown) and a water hammer (not shown) for transmitting and receiving ultrasonic waves, and has a lower power consumption than a camera. The transmitter performs the operation of emitting the wavelength, and the wave detector receives the wavelength reflected by the wave reflected from the object (object) and detects or recognizes a rough change of the situation. The ultrasonic sensor according to an exemplary embodiment of the present invention may be an echo mode including a transmitter and a water hammer.

도 4는 송파기에서 보낸 파동이 사물(객체)의 변화(상황인지)를 인지했을 경우 돌아오는 파동의 상태를 나타내고 있다. 실선으로 표시된 파동은 초음파 센서의 송파기에서 보내는 초음파이고, 점선으로 표시된 파동은 객체로부터 반사되어 수파기에 수신되는 파동을 나타내고 있다. 초음파 센서가 객체의 변화를 감지 또는 인지 하게 되면 (예를 들어 바로 이전 시간대의 초음파가 송신되어 반사되어 돌아오는 시간과 현재 초음파가 송신되어 반사되어 돌아오는 시간이 어떤 임계 값 이상의 차이가 발생되면 사물(객체)이 갑자기 나타났거나, 정적인 사물이 대략적으로 움직이거나 등으로 사물(객체)의 변화가 생긴 것을 인지했다고 쉽게 판단할 수 있다), 즉 저전력 센서에서 사물(객체)의 변화가 감지(인지 또는 센싱)되는 경우, 동작인지 카메라와 동작인지 프로세스에 전원을 공급하여 해당 프로세스를 수행하도록 조치하게 된다. FIG. 4 shows the state of a returning wave when the wave sent from the transmitter recognizes a change (a situation) of an object (object). The wave indicated by the solid line is the ultrasonic wave transmitted from the ultrasonic sensor transmitter, and the wave indicated by the dotted line represents the wave reflected from the object and received by the water hammer. When the ultrasonic sensor senses or recognizes the change of the object (for example, the time when the ultrasonic wave transmitted in the previous time zone is reflected and reflected, and the time when the current ultrasonic wave is transmitted and reflected and returned) (Object) suddenly appears, or a static object moves roughly, or the like, or a change in an object (object)), that is, when a change in an object (object) Recognizing or sensing) the power supply to the operation-aware camera and the operation-aware process to perform the corresponding process.

도 5와 같이 사물(객체)이 없는 동안에도 초음파 센서는 동작, 즉 객체 센싱 동작을 수행하고 있지만 초음파 센서의 사용 전력은 도 1 및 도 2에서 카메라를 계속 하여 사용하는 전력에 비해 훨씬 적은 전력을 사용하게 된다. 송파기에서 보내어 반사되어 수신되는 파동의 변화가 없다면(즉, 예를 들어 바로 전 시간대의 반사 시간과 현 시간대의 반사시간의 변화가 기 설정된 임계치 미만이라면), 관련한 어떤 처리 또는 동작도 수행할 필요가 없기 때문에 기존의 사용자가 시스템을 끈 대기시간 대에도 항상 카메라에 전력을 공급하여 영상을 분석하고 처리하는 작업을 하는 관련 모듈의 소비 전력과 대비된다 (대기전력의 소모의 차이가 매우 크다).As shown in FIG. 5, although the ultrasonic sensor performs the operation, that is, the object sensing operation, while the object is not present, the power used by the ultrasonic sensor is much lower than the power used continuously by the camera in FIGS. . If there is no change in the wave reflected and transmitted from the transmitter (ie, if, for example, the reflection time in the immediately preceding time zone and the change in reflection time in the current time zone are below a predetermined threshold) (Standby power consumption is very large) compared to the power consumption of the related module that analyzes and processes the image by always supplying power to the camera even when the existing user turns off the system.

도 4 와 도 5에서 설명된 초음파 센서는 일 실시 예이고, 설명된 동작을 수행 할 수 있는 다른 저전력 센서로 그 역할을 대체할 수 있다.The ultrasonic sensors described in Figs. 4 and 5 are one embodiment, and can replace their roles with other low power sensors capable of performing the described operations.

정리하면, 동작 인식을 하는 카메라를, 전자제품 시스템이 꺼져있는 대기시간에도, 항상 작동시키는 것이 아니라, 카메라에는 전원 공급을 하지 않고 초음파 센서만을 작동시켜 대기 전력 소모를 최소한으로 할 수 있다. 초음파 센서의 송파기에서 보내는 파동이 수파기에 입력될 때, 해당 파동의 변화가 기 설정된 임계치 이하로서 변화가 없다고 판단되는 상태가 유지되면 초음파 센서는 센싱 동작만을 유지한다. 만약, 일 실시 예로서 수파기에 수신되는 파동이 바로 전 시간 대와 다른 임계치 이상의 변화가 발생되면, 사물(객체)이 갑자기 나타나거나 사물(객체)의 움직임이 감지(센싱 또는 인지)된 것으로 간주하여 동작을 인식하는 카메라 및 관련 프로세스에 전원을 공급할 수 있다. 전원이 들어온 카메라는 사물(객체)이 하는 제스쳐(동작)를 인식할 준비를 할 수 있다. In summary, it is possible to minimize the standby power consumption by operating only the ultrasonic sensor without supplying power to the camera, instead of always operating the camera that recognizes motion, even when the electronic product system is off. When a wave sent from a transmitter of an ultrasonic sensor is input to a water hammer, the ultrasonic sensor maintains only a sensing operation when a state in which the change of the wave is below a predetermined threshold and is determined to be unchanged is maintained. In one embodiment, when a wave received by a water hammer changes more than a threshold value different from the previous time instant, it is considered that the object suddenly appears or the movement of the object (sensing) is detected To power the camera and associated processes that recognize the operation. A powered-on camera can be ready to recognize the gesture (action) of an object (object).

도 6은 본 발명의 일 예에 따라 저전력 센서의 객체 감지 후 동작하는 카메라를 도시한 도면이다. FIG. 6 is a diagram illustrating a camera operating after detecting objects of a low-power sensor according to an exemplary embodiment of the present invention. Referring to FIG.

도시된 바와 같이, 도 6의 저전력 센서와 카메라는 하나의 유닛 또는 모듈로 구현될 수 있다. 따라서, 저전력 센서와 카메라는 서로 유기적으로 동작할 수 있으며, 객체의 움직임을 감지하는 즉시 동작 인식을 할 준비를 신속하게 할 수 있다. 또한, 저전력 센서가 객체를 감지 후 카메라가 작동하여 객체의 제스쳐(동작)를 인지(인식)하고 처리하는 알고리즘 관련 프로세스의 동작 역시 연동될 수 있다. 이를 통하여 동작인지 카메라가 사물의 제스쳐 인식을 위하여 대기 상태에서도 최대한의 절전을 유지하지 못하고 항상 켜져 있어야 하는 문제점을 해결하면서도 저전력 센서 및 카메라의 새로운 연동에 의하여 기존의 기능을 유지할 수 있다.
As shown, the low power sensor and camera of FIG. 6 may be implemented as a single unit or module. Accordingly, the low-power sensor and the camera can operate organically, and can quickly prepare for motion recognition immediately upon sensing the motion of the object. Also, the operation of the algorithm-related process of recognizing (recognizing) and processing the gesture (operation) of the object by the camera after the low-power sensor detects the object may be interlocked. Through this, it is possible to maintain the existing function by the new interlocking of the low power sensor and the camera, while solving the problem that the motion recognition camera can not maintain the maximum power saving state even in the standby state for recognizing the gesture of objects, and is always turned on.

도 7은 본 발명의 일 실시예에 따른 저전력 센서를 이용한 동작 인식을 설명하기 위한 제어 흐름도이다. 도 7은 장치 대기 상태에서 저전력 센서를 이용한 동작 인식에 대한 일 실시 예를 도시한 것으로, 저전력 센서의 종류나 객체 센싱 방법에 따라 다양한 실시 예가 존재할 수 있다. 7 is a control flowchart for explaining an operation recognition using a low-power sensor according to an embodiment of the present invention. FIG. 7 shows an embodiment of operation recognition using a low-power sensor in a device standby state, and various embodiments may exist depending on the type of low-power sensor and object sensing method.

전자기기의 대기 상태(S710)에서 저전력 센서는 항상 켜져 있는 상태를 유지하며(S720) 동작 인식 대상의 유무를 체크한다(S730). 저전력 센서는 움직임 여부를 인지함으로써 동작 인식 대상의 존재 여부를 센싱할 수 있다. In the standby state (S710) of the electronic device, the low-power sensor remains on (S720), and the presence or absence of the operation recognition object is checked (S730). The low-power sensor can detect the presence or absence of the motion recognition object by recognizing the motion.

객체의 움직임이 기 설정한 임계치 이상 크지 않다면, 계속되는 초음파 송/수신을 통해 움직임을 체크 한다(S740). If the movement of the object is not greater than the preset threshold value, the movement is checked through the subsequent ultrasonic transmission / reception (S740).

만약, 저전력 센서에서 객체의 움직임이 감지되면, 예를 들어 초음파 센서의수파기에서 객체에 의해 반사되는 파동의 변화를 감지하게 되면 객체의 움직임이 감지된 것으로 간주하고 동작 인식을 수행할 카메라에 전원이 공급된다(S750). If the movement of the object is detected by the low-power sensor, for example, when the change of the wave reflected by the object is detected in the water hammer of the ultrasonic sensor, it is regarded that the motion of the object is detected, (S750).

그 이후 객체의 동작 인식은 카메라의 동작 인식 알고리즘 관련 프로세스를 활성화하여 수행될 수 있다(S760) Thereafter, the motion recognition of the object can be performed by activating the motion recognition algorithm related process of the camera (S760)

만약 카메라에서 객체의 움직임이 더 이상 없다면 동작 인식을 할 카메라에는 공급되는 전원은 차단될 수 있다. If there is no more movement of the object in the camera, the power supplied to the camera that recognizes the motion may be cut off.

이 경우, 동작인식 카메라는 비활성화 되며 동시에 초음파센서가 ON 상태 (S720)가 된후, 움직임 검색(S730), 객체 움직임 인식(S740), 동작인식 카메라 ON (S750), 동작인식(S760) 등의 일련의 과정을, 전자기기가 대기 상태에 있거나 또는 전자기기가 활성화 된 상태에 있을 때도 반복 할 수 있다. In this case, the motion recognition camera is deactivated and at the same time, after the ultrasonic sensor is turned on (S720), a series of motion search (S730), object motion recognition (S740), motion recognition camera ON (S750) Can be repeated even when the electronic device is in a standby state or when the electronic device is in an activated state.

한편, 전자기기가 대기 상태가 아닌 활성화된 상태에 있다 하더라도 사물 또는 객체의 움직임이 감지되지 않는 경우에서 도 7에 설명된 저전력 센서를 이용한 동작 인식 과정이 적용될 수 있다. 예를 들어, 텔레비전이 켜져 있는 상태지만, 사용자가 텔레비전 앞에 존재하지 않거나, 텔레비전 시스템은 켜져 있지만 사용자가 잠이 든 상태인 경우, 저전력 센서는 사용자의 움직임을 감지할 수 없으므로 카메라에 공급되는 전원을 차단할 수 있다. 즉, 전자기기 시스템이 켜져있는 상태인 경우에도 카메라에는 전원이 공급되지 않고 저전력 센서만이 동작하는 것이 가능하다. On the other hand, in the case where the motion of the object or the object is not detected even though the electronic device is in the active state instead of the standby state, the operation recognition process using the low power sensor described in FIG. 7 can be applied. For example, if the television is on but the user is not in front of the television, or the television system is on, but the user is asleep, the low-power sensor can not detect the user's movement, Can be blocked. That is, even when the electronic device system is turned on, it is possible to operate only the low-power sensor without supplying power to the camera.

본 발명에 따른 카메라는 객체의 깊이를 인식할 수 있는 깊이정보 맵 카메라(depth-map camera) 또는 깊이 카메라, 깊이 인식 카메라를 포함할 수 있다. 이하 설명의 편의를 위하여 깊이정보 맵 카메라로 표현한다. The camera according to the present invention may include a depth-map camera capable of recognizing the depth of an object, a depth camera, and a depth-recognition camera. For convenience of explanation, it is expressed by a depth information map camera.

깊이정보 맵 카메라는 객체와 카메라 사이의 깊이정보를 센싱(또는 인지)할 수 있으며, 본 발명에 따른 깊이정보 맵 카메라는 객체와의 깊이정보가 소정의 임계 범위(threshole) 내인 경우에만 객체의 동작으로 인식할 수 있다. The depth information map camera can sense (or recognize) the depth information between the object and the camera, and the depth information map camera according to the present invention can detect the motion of the object only when the depth information with the object is within a predetermined threshold range .

예를 들어 초음파 센서와 저전력 센서를 포함하는 전자기기 앞에서 객체가 감지되더라도 객체가 단순히 전자기기 앞을 지나가거나 전자기기를 작동시키려는 것으로 인식되지 않는 경우, 깊이정보 맵 카메라는 이를 동작으로 인식하지 않을 수 있다. For example, if an object is detected in front of an electronic device including an ultrasonic sensor and a low-power sensor, if the object is not recognized as simply passing through the electronic device or trying to operate the electronic device, the depth information map camera may not recognize it as an operation have.

따라서, 깊이정보 맵 카메라는 감지된 객체의 깊이정보가 소정 임계 범위를 만족하는 경우 객체의 동작으로 인식하고, 전자기기에 전원을 공급하는 등의 후속적인 동작을 취할 수 있다.
Accordingly, the depth information map camera recognizes the depth information of the detected object as an operation of the object when the depth information satisfies a predetermined threshold range, and can take subsequent actions such as supplying power to the electronic device.

도 8은 본 발명의 일 실시예에 따른 저전력 센서를 이용하여 동작 인식을 수행하는 센싱 모듈의 제어 블록도이다. 8 is a control block diagram of a sensing module that performs operation recognition using a low-power sensor according to an embodiment of the present invention.

센셍 모듈은 전원 제어부(100), 초음파 센서 제어부(200) 그리고 카메라 제어부(300)를 포함할 수 있다. 도 8의 센셍 모듈은 큰 시스템, 예를 들어 전자기기의 제어부 안에 있는 세부적인 제어부로 구현될 수 있다.The sensor module may include a power control unit 100, an ultrasonic sensor control unit 200, and a camera control unit 300. 8 may be implemented as a detailed control unit in a control system of a large system, for example, an electronic device.

전원 제어부(100)는 전자기기의 여러 전원들을 제어하는 부분으로, 본 실시예에서는 초음파 센서의 전원을 제어하는 초음파 센서 전원 제어부(110)와 카메라의 전원을 제어하는 카메라 전원제어부(120)를 포함할 수 있다. In this embodiment, the power control unit 100 includes an ultrasonic sensor power control unit 110 for controlling the power of the ultrasonic sensor and a camera power control unit 120 for controlling the power of the camera can do.

초음파 센서 전원 제어부(110)는 초음파를 통해 파동을 보내고 받는 송파기와 수파기의 전원을 제어할 수 있다. 송파기와 수파기는 하나의 유닛으로 사용될 수 있기 때문에 하나의 초음파 센서 전원 제어부(110)에 의하여 제어될 수 있다. The ultrasonic sensor power controller 110 can control the power of the ultrasonic wave transmitter and the ultrasonic wave transmitter. Since the ultrasonic wave transmitter and the water wave can be used as one unit, they can be controlled by one ultrasonic sensor power control unit 110.

카메라 전원제어부(120)는 카메라의 전원을 제어한다. 카메라에서 소비되는 전력을 줄이는 것이 본 발명의 큰 특징이기 때문에 전원 제어부(100)에서 의하여 카메라의 전원이 제어된다. The camera power control unit 120 controls the power of the camera. Since it is a major feature of the present invention to reduce the power consumed by the camera, the power of the camera is controlled by the power control unit 100.

초음파 센서 제어부(200)는 초음파 센서의 기능에 대한 전반적인 제어를 수행한다. 초음파 센서 제어부(200)는 초음파 센서 전원부(210)와 움직임 인식 모듈(220)을 포함할 수 있다. 초음파 센서 전원부(210)는 초음파 센서 전원 제어부(110)의 제어를 통하여 초음파 센서에 전원을 공급할 수 있다.  The ultrasonic sensor controller 200 controls the overall function of the ultrasonic sensor. The ultrasonic sensor controller 200 may include an ultrasonic sensor power unit 210 and a motion recognition module 220. The ultrasonic sensor power supply unit 210 may supply power to the ultrasonic sensor through the control of the ultrasonic sensor power supply control unit 110.

움직임 인식 모듈(220)은 초음파 센서의 송파기에서 송출된 파동에 대응하여 객체를 통해 반사되어 돌아오는 신호를 이용하여 움직임을 인식하는 모듈이다. 움직임 인식 모듈(220)에서 움직임 인식이 이루어지면 카메라 전원부(310)를 활성화시키기 위한 신호가 카메라 전원제어부(120)로 입력된다. The motion recognition module 220 is a module for recognizing a motion using a signal reflected by an object in response to a wave transmitted from a transmitter of an ultrasonic sensor. When motion recognition is performed in the motion recognition module 220, a signal for activating the camera power unit 310 is input to the camera power control unit 120.

카메라 제어부(300)은 카메라의 동작 인식을 총괄적으로 제어하는 부분이다. 카메라에 전체적인 전원을 공급하여 카메라 동작을 가능하게 하는 카메라 전원부(310)는 카메라 전원제어부(120)로부터 제어 신호를 수신한다.  The camera control unit 300 is a part for collectively controlling the operation recognition of the camera. The camera power unit 310, which supplies the camera with power as a whole to enable camera operation, receives a control signal from the camera power control unit 120.

즉, 전원이 공급되어 촬영에 대한 동작이 가능해지면, 카메라의 동작 인식 모듈(320)은 객체의 동작을 인식한다. 여기서 동작 인식 모듈(320)은 촬상을 수행하는 렌즈와 같은 카메라 장치와 이를 통하여 객체의 동작을 인식 하는 알고리즘관련 프로세스를 포함한다. 이를 통해 초음파 센서의 움직임 인식모듈(220)을 통해 움직임이 감지되었던 객체의 동작이 인식될 수 있다. That is, when power is supplied and operation for shooting is enabled, the motion recognition module 320 of the camera recognizes the motion of the object. The motion recognition module 320 includes a camera device such as a lens for performing imaging and an algorithm-related process for recognizing the operation of the object through the camera device. Accordingly, the motion of the object whose motion has been detected can be recognized through the motion recognition module 220 of the ultrasonic sensor.

동작 인식 모듈(320)에 의하여 동작 인식이 수행하되면 초음파 센서의 초음파 센서 전원 제어부(110)를 통하여 초음파 센서의 전원을 관리할 수 있다. 카메라를 이용한 동작 인식 동안에, 초음파 센서의 움직임 인식은 실질적으로 큰 의미가 없기 때문에 초음파센서 전원 제어부(110)를 통하여 초음파 센서 전원부(210)를 제어할 수도 있다. 즉, 초음파센서 전원 제어부(110)는 초음파 센서로 공급되는 전원을 차단할 수도 있다.
When the operation recognition module 320 performs the operation recognition, the power of the ultrasonic sensor can be managed through the ultrasonic sensor power controller 110 of the ultrasonic sensor. Since the motion recognition of the ultrasonic sensor is practically meaningless during the motion recognition using the camera, the ultrasonic sensor power supply unit 210 may be controlled through the ultrasonic sensor power supply control unit 110. [ That is, the ultrasonic sensor power control unit 110 may cut off the power supplied to the ultrasonic sensor.

도 9는 본 발명의 일 실시예에 따른 전자기기의 제어 블록도이다.9 is a control block diagram of an electronic apparatus according to an embodiment of the present invention.

도시된 바와 같이, 전자기기(900)는 저전력 센서(910), 카메라(920), 동작부(930) 및 표시부(940)를 포함할 수 있다. As shown, the electronic device 900 may include a low power sensor 910, a camera 920, an operating portion 930, and a display portion 940.

전자기기(900)는 영상을 표시하는 표시부(940)를 포함하는 모니터, 컴퓨터 시스템, 대형 스크린 또는 터치 스크린, 사물 인터넷으로 구현되는 각종 전자 디바이스를 포함할 수 있다. The electronic device 900 may include a monitor, a computer system, a large screen or a touch screen including a display unit 940 for displaying an image, various electronic devices implemented in the object Internet.

저전력 센서(910)는 객체의 움직임, 또는 움직임 여부에 따라 객체의 존재 여부를 감지할 수 있다. 저전력 센서(910)는 초음파 센서 또는 또는 적외선 센서를 포함할 수 있다. The low-power sensor 910 can detect the presence or absence of an object depending on whether the object moves or moves. The low power sensor 910 may include an ultrasonic sensor or an infrared sensor.

카메라(920)는 저전력 센서(910)로부터 객체가 존재하는 것이 감지되면, 활성화되어 객체의 동작을 인식할 수 있다. 본 발명에서 활성화된다는 것은 저전력 센서(910)로부터 객체가 존재하는 것이 감지되면, 카메라(920)에 전원이 공급되는 것을 의미할 수 있다. 즉, 객체의 동작을 인식하는 카메라(920)에는 전원이 공급되지 않다가 저전력 센서(910)에 객체가 존재하거나 움직이는 것으로 감지되면 그 이후부터 전원이 공급될 수 있다.The camera 920 is activated when it is detected that the object is present from the low power sensor 910, and can recognize the operation of the object. Activation in the present invention means that power is supplied to the camera 920 when it is detected that an object is present from the low power sensor 910. That is, when power is not supplied to the camera 920 that recognizes the operation of the object, if the object is detected to be present or moving in the low-power sensor 910, power may be supplied thereafter.

본 발명에 따를 경우, 카메라(920)는 객체의 깊이정보를 인식하는 깊이정보 맵 카메라를 포함할 수 있다. 카메라(920)는 객체의 깊이정보가 기설정된 임계 범위를 내에 존재하는 경우, 동작부(940)를 활성화하기 위한 제어 신호를 출력할 수 있다. 예를 들어, 객체가 소정 시간 동안 소정 임계 범위 내에 존재하는 경우 객체가 전자기기를 동작시키려는 의도로 파악하고 동작부(930)에 특정 제어 신호를 출력할 수 있다.According to the present invention, the camera 920 may include a depth information map camera that recognizes depth information of the object. The camera 920 may output a control signal for activating the operation unit 940 when the depth information of the object exists within a predetermined threshold range. For example, if the object exists within a predetermined threshold range for a predetermined time, the object can recognize the intention to operate the electronic device and output a specific control signal to the operation unit 930.

저전력 센서(910)의 소비 전력은 카메라(920)의 소비 전력보다 작은 것을 특징으로 한다. The power consumption of the low-power sensor 910 is smaller than the power consumption of the camera 920.

동작부(930)는 카메라(920)에서 인식된 객체의 동작이 소정 조건을 만족하는 경우, 상술한 바와 같이 객체가 소정 시간 동안 소정 임계 범위 내에 존재하는 경우 기설정된 동작을 수행할 수 있다. When the operation of the object recognized by the camera 920 satisfies a predetermined condition, the operation unit 930 can perform a predetermined operation when the object exists within a predetermined threshold range for a predetermined time, as described above.

본 발명의 일 실시예에 따라 동작부(930)는 영상을 표시하는 표시부에 전원을 공급하는 전원부를 포함할 수 있다. 저전력 센서(910) 및 카메라(920)의 감지를 통하여 객체의 움직임이 전자기기를 제어하기 위한 의도로 파악되면 전원부는 표시부(940)에 전원을 공급하여 사용자에 전자기기의 사용을 위한 환경을 제공할 수 있다. According to an embodiment of the present invention, the operation unit 930 may include a power supply unit for supplying power to a display unit for displaying an image. When the movement of the object is recognized as an intention to control the electronic device through the detection of the low-power sensor 910 and the camera 920, the power source supplies power to the display unit 940 to provide an environment for use of the electronic device to the user can do.

상술한 바와 같이, 본 발명에서는, 사용자가 실제로 원하는 저전력 제품에 대한 요구를 만족 할 수 있는 방법을 제시함으로써 기존에 항상 전원이 연결되어 필요 이상으로 소비되었던 전력을 절약할 수 있다. As described above, according to the present invention, a method by which a user can satisfy a demand for a desired low-power product can be saved by always connecting the power source and consuming more than necessary.

또한, 실용의 측면에서 높은 소비전력으로 인하여 텔레비전과 같은 전자기기에 움직임 감지 카메라가 상시 내장되어 생산되지 못하는 점 역시 본 발명의 구성으로 인하여 해결될 수 있다. In addition, due to high power consumption in terms of practicality, a motion detection camera can not always be built in an electronic device such as a television and can not be produced.

따라서, 본 발명에서 제시하는 방법과 이를 이용하는 장치를 통하여 기존에 기술을 실제 전자 기기에 적용시킬 수 없었던 실용적 측면의 문제를 해결할 수 있다. Therefore, it is possible to solve the practical problem that the technology can not be applied to actual electronic devices through the method disclosed in the present invention and the device using the method.

또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형 실시가 가능한 것은 물론이고, 이러한 변형 실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안될 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, It will be understood by those skilled in the art that various changes in form and detail may be made therein without departing from the spirit and scope of the present invention.

상술한 실시예는 다양한 양태의 예시들을 포함한다. 다양한 양태들을 나타내기 위한 모든 가능한 조합을 기술할 수는 없지만, 해당 기술 분야의 통상의 지식을 가진 자는 다른 조합이 가능함을 인식할 수 있을 것이다. 따라서, 본 발명은 이하의 특허청구범위 내에 속하는 모든 다른 교체, 수정 및 변경을 포함한다고 할 것이다.The above-described embodiments include examples of various aspects. While it is not possible to describe every possible combination for expressing various aspects, one of ordinary skill in the art will recognize that other combinations are possible. Accordingly, it is intended that the invention include all alternatives, modifications and variations that fall within the scope of the following claims.

100 : 전원 제어부 110 : 초음파 센서 전원 제어부
120 : 카메라 전원제어부 200 : 초음파 센서 제어부
210 : 초음파 센서 전원부 220 : 움직임 인식 모듈
300 : 카메라 제어부 310 : 카메라 전원부
320 : 동작 인식 모듈
100: power supply control unit 110: ultrasonic sensor power supply control unit
120: camera power control unit 200: ultrasonic sensor control unit
210: ultrasonic sensor power unit 220: motion recognition module
300: camera control unit 310: camera power unit
320: motion recognition module

Claims (11)

객체의 존재 여부 또는 움직임 여부를 감지하는 저전력 센서와;
절전 대기 상태에서, 비활성화 상태를 유지하다가, 상기 저전력 센서를 통해 상기 객체의 움직임이 감지되면, 활성화되는 카메라와;
상기 카메라가 상기 객체의 제스쳐를 인지하고, 상기 인지된 제스쳐가 소정 조건을 만족하는 경우 기설정된 동작을 수행하는 동작부를 포함하고,
상기 저전력 센서의 소비 전력은 상기 카메라의 소비 전력보다 작은 것을 특징으로 하는 전자기기.
A low power sensor for sensing whether an object is present or moving;
A camera which is activated when a movement of the object is detected through the low-power sensor while the deactivated state is maintained in a power saving standby state;
Wherein the camera recognizes a gesture of the object and performs a predetermined operation when the recognized gesture satisfies a predetermined condition,
Wherein power consumption of the low-power sensor is smaller than power consumption of the camera.
제1항에 있어서,
상기 저전력 센서는 초음파 센서 또는 적외선 센서를 포함하는 것을 특징으로 하는 전자기기.
The method according to claim 1,
Wherein the low-power sensor includes an ultrasonic sensor or an infrared sensor.
제1항에 있어서,
상기 카메라는 상기 객체의 깊이정보를 인식하는 깊이정보 맵 카메라를 포함하는 것을 특징으로 하는 전자기기.
The method according to claim 1,
Wherein the camera includes a depth information map camera that recognizes depth information of the object.
제1항에 있어서,
상기 카메라 대신 인식대상의 상태를 체크하는 센서를 부분적인 장치로 포함하는 전자기기.
The method according to claim 1,
And a sensor for checking a state of a recognition object instead of the camera.
제3항에 있어서,
상기 깊이정보가 기설정된 임계 범위 내에 존재하는 경우, 상기 동작부는 활성화되는 것을 특징으로 하는 전자기기.
The method of claim 3,
And when the depth information is within a predetermined threshold range, the operation unit is activated.
제1항에 있어서,
상기 저전력 센서를 통해 상기 객체의 움직임이 감지되면, 상기 카메라에 전원이 공급되는 것을 특징으로 하는 전자기기.
The method according to claim 1,
And power is supplied to the camera when motion of the object is sensed through the low-power sensor.
제1항에 있어서,
상기 동작부는 영상을 표시하는 표시부 및 관련한 동작을 하는 부분에 전원을 공급하는 전원부를 포함하는 것을 특징으로 하는 전자기기.
The method according to claim 1,
Wherein the operation unit includes a display unit that displays an image and a power unit that supplies power to a part that performs the related operation.
저전력 센서 및 객체의 동작을 인식하는 카메라를 포함하는 전자기기의 동작 방법에 있어서,
상기 저전력 센서를 통하여 객체의 움직임 여부를 감지하는 단계와;
상기 객체의 움직임이 감지되면, 상기 카메라를 활성화하는 단계와;
상기 카메라를 통해 인지된 제스쳐가 소정 조건을 만족하는 경우 기설정된 동작을 수행하는 단계를 포함하고,
상기 카메라는 절전 대기 상태에서 비활성화 상태를 유지하다가, 상기 저전력 센서를 통해 상기 객체의 움직임이 감지되면 활성화되는 것을 특징으로 하고,
상기 저전력 센서의 소비 전력은 상기 카메라의 소비 전력보다 작은 것을 특징으로 하는 전자기기의 동작 방법.
A method of operating an electronic device including a low power sensor and a camera that recognizes the operation of the object,
Detecting whether the object is moving through the low power sensor;
Activating the camera when motion of the object is sensed;
And performing a predetermined operation when a gesture recognized through the camera satisfies a predetermined condition,
Wherein the camera is kept in an inactive state in a power save standby state and is activated when motion of the object is detected through the low power sensor,
Wherein the power consumption of the low-power sensor is smaller than the power consumption of the camera.
제8항에 있어서,
상기 저전력 센서를 통해 상기 객체가 존재하는 것이 감지되면, 상기 카메라에 전원이 공급되는 것을 특징으로 하는 전자기기의 동작 방법.
9. The method of claim 8,
Wherein power is supplied to the camera when the presence of the object is detected through the low-power sensor.
제8항에 있어서,
상기 카메라가 상기 객체의 깊이정보를 인식하는 깊이정보 맵 카메라일 때,
상기 기 설정된 동작을 수행하는 단계는, 상기 깊이정보가 기설정된 임계 범위 내에 존재할 것을 조건으로 수행되는 것을 특징으로 하는, 전자기기의 동작 방법.
9. The method of claim 8,
When the camera is a depth information map camera in which depth information of the object is recognized,
Wherein the step of performing the predetermined operation is performed on condition that the depth information is within a predetermined threshold range.
제8항에 있어서,
상기 기설정된 동작을 수행하는 단계는, 영상을 표시하는 표시부에 전원을 공급하는 단계인 것을 특징으로 하는 전자기기의 동작 방법.
9. The method of claim 8,
Wherein the step of performing the predetermined operation is a step of supplying power to a display unit for displaying an image.
KR1020140078770A 2014-01-02 2014-06-26 Electronic device including motion sensing camera and operating method according to motion sensing KR101636903B1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020140000358 2014-01-02
KR20140000358 2014-01-02

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020160080173A Division KR102116266B1 (en) 2014-01-02 2016-06-27 Electronic device including motion sensing camera and operating method according to motion sensing

Publications (2)

Publication Number Publication Date
KR20150081226A KR20150081226A (en) 2015-07-13
KR101636903B1 true KR101636903B1 (en) 2016-07-07

Family

ID=53793006

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020140078770A KR101636903B1 (en) 2014-01-02 2014-06-26 Electronic device including motion sensing camera and operating method according to motion sensing
KR1020160080173A KR102116266B1 (en) 2014-01-02 2016-06-27 Electronic device including motion sensing camera and operating method according to motion sensing

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020160080173A KR102116266B1 (en) 2014-01-02 2016-06-27 Electronic device including motion sensing camera and operating method according to motion sensing

Country Status (1)

Country Link
KR (2) KR101636903B1 (en)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108181982B (en) * 2018-01-02 2022-05-31 联想(北京)有限公司 Processing method and device and electronic equipment
KR102632810B1 (en) * 2019-03-13 2024-02-05 삼성전자주식회사 Electronic apparatus and controlling method thereof
KR102187965B1 (en) * 2020-03-31 2020-12-07 주식회사 가난한동지들 A Display Device with A Object Camera and A Sensor
KR102187964B1 (en) * 2020-03-31 2020-12-07 주식회사 가난한동지들 A Keyboard with A Object Camera and A Object Sensor
US11792507B1 (en) * 2021-01-15 2023-10-17 Apple Inc. Video monitoring using a hierarchical combination of camera sensors
CN115529412A (en) * 2022-08-22 2022-12-27 维沃移动通信有限公司 Control circuit and method of camera and electronic equipment

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101795574B1 (en) * 2011-01-06 2017-11-13 삼성전자주식회사 Electronic device controled by a motion, and control method thereof
KR20130124139A (en) * 2012-11-21 2013-11-13 삼성전자주식회사 Control method of terminal by using spatial interaction

Also Published As

Publication number Publication date
KR20150081226A (en) 2015-07-13
KR102116266B1 (en) 2020-05-28
KR20160078944A (en) 2016-07-05

Similar Documents

Publication Publication Date Title
KR101636903B1 (en) Electronic device including motion sensing camera and operating method according to motion sensing
US11249554B2 (en) Method and apparatus for selecting between multiple gesture recognition systems
US20210096651A1 (en) Vehicle systems and methods for interaction detection
US10687403B2 (en) Adaptive lighting system for a mirror component and a method of controlling an adaptive lighting system
US9781360B2 (en) Gaze tracking variations using selective illumination
US10139914B2 (en) Methods and apparatus for using the human body as an input device
US9552073B2 (en) Electronic device
US20140368423A1 (en) Method and system for low power gesture recognition for waking up mobile devices
US9723181B2 (en) Gesture recognition apparatus and complex optical apparatus
KR101437448B1 (en) Display apparatus and method of controlling thereof
KR102481939B1 (en) Wireless power transmitting device, electronic device for wirelessly receiving power and operation method thereof
US9218076B2 (en) Electronic device
US8694702B2 (en) Input command
US20140321700A1 (en) Light sensing module and system
US20140131551A1 (en) Proximity sensor and operating method thereof
US9285928B2 (en) Touch detection method and related optical touch system
US9880280B2 (en) Object detection method and object detector using the same
US9727148B2 (en) Navigation device and image display system with inertial mode
US9866798B2 (en) Image processing apparatus, method and program for controlling an image processing apparatus based on detected user movement
US10338685B2 (en) Methods and apparatus recognition of start and/or stop portions of a gesture using relative coordinate system boundaries
US10045426B2 (en) Switch for controlling lighting using magnetic sensing and touch sensing and method using the same
US10474257B2 (en) Optical navigation device and system with changeable smoothing
KR102113591B1 (en) Face detection activation method, face detection activation device and electronic device
JP2023181934A (en) Power source device, and display device
KR20210095355A (en) Display apparatus and method for controlling the same

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
A107 Divisional application of patent
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190402

Year of fee payment: 4