KR102022678B1 - System and method for activating a portable electronic device by recognizing signature information based on a wearable device - Google Patents

System and method for activating a portable electronic device by recognizing signature information based on a wearable device Download PDF

Info

Publication number
KR102022678B1
KR102022678B1 KR1020170164367A KR20170164367A KR102022678B1 KR 102022678 B1 KR102022678 B1 KR 102022678B1 KR 1020170164367 A KR1020170164367 A KR 1020170164367A KR 20170164367 A KR20170164367 A KR 20170164367A KR 102022678 B1 KR102022678 B1 KR 102022678B1
Authority
KR
South Korea
Prior art keywords
portable electronic
electronic device
signature
user
information
Prior art date
Application number
KR1020170164367A
Other languages
Korean (ko)
Other versions
KR20190064982A (en
Inventor
배유석
이원곡
이현숙
유진근
Original Assignee
클라트 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 클라트 주식회사 filed Critical 클라트 주식회사
Priority to KR1020170164367A priority Critical patent/KR102022678B1/en
Publication of KR20190064982A publication Critical patent/KR20190064982A/en
Application granted granted Critical
Publication of KR102022678B1 publication Critical patent/KR102022678B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/44—Program or device authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

휴대용 전자기기 활성화 시스템으로서, 사용자의 신체 일부에 부착되어 사용자의 시그니처(signature) 정보를 생성하는 웨어러블 디바이스(wearable device), 그리고 상기 웨어러블 디바이스로부터 수신된 상기 시그니처 정보가 기 저장된 사용자의 시그니처 정보와 매칭되는 경우, 잠금을 해제하는 휴대용 전자기기를 포함한다.A portable electronic device activation system, comprising: a wearable device attached to a body part of a user to generate signature information of a user, and the signature information received from the wearable device matches previously stored signature information of the user; If yes, include a portable electronic device to unlock.

Description

웨어러블 디바이스 기반의 시그니처 정보를 인식하여 휴대용 전자기기를 활성화하는 시스템 및 방법{System and method for activating a portable electronic device by recognizing signature information based on a wearable device}System and method for activating a portable electronic device by recognizing signature information based on a wearable device}

본 발명은 웨어러블 디바이스 기반의 시그니처 정보를 인식하여 휴대용 전자기기를 활성화하는 시스템 및 방법에 관한 것이다.The present invention relates to a system and method for activating a portable electronic device by recognizing signature information based on wearable devices.

최근 정보 통신 기술의 발달로 인해, 스마트폰, 태블릿 PC(Tablet PC), PDA(Portable Data Assistant), PMP(Portable Multimedia Player) 등과 같은 휴대용 전자기기의 보급이 급증하고 있다.Recently, due to the development of information and communication technology, the spread of portable electronic devices such as smart phones, tablet PCs (Tablet PCs), PDAs (Portable Data Assistants), PMPs (Portable Multimedia Players), and the like, are rapidly increasing.

한편, 이러한 휴대용 전자기기에 다양한 개인정보가 저장되어 사용됨에 따라 저장된 개인정보의 보안을 위한 다양한 방법들이 개발되고 있으며, 가장 일반적으로는 비밀번호 또는 지문인식을 이용하여 비활성화된 휴대용 전자기기를 활성화시키는 방법이 사용되고 있다.Meanwhile, as various personal information is stored and used in such portable electronic devices, various methods for the security of the stored personal information have been developed. Most commonly, a method of activating the inactive portable electronic device by using a password or fingerprint recognition. Is being used.

하지만, 기존의 방법은 휴대용 전자기기를 활성화시키는 방법의 종류가 해당 휴대용 전자기기의 입력 수단에 의해 제한될 수 밖에 없으며, 휴대용 전자기기에 구비된 입력 수단이 고장나거나 휴대용 전자기기가 사용자의 조작 반경에서 벗어난 경우 해당 휴대용 전자기기의 활성화가 불가능한 문제점이 있었다.However, in the conventional method, the kind of the method of activating the portable electronic device is limited by the input means of the portable electronic device, and the input means of the portable electronic device is broken or the portable electronic device is operated by the user. There was a problem that can not be activated in the case of the portable electronic device.

본 발명이 해결하고자 하는 과제는 웨어러블 디바이스(Wearable Device)를 통해 수집된 시그니처 정보를 이용하여, 휴대용 전자기기를 활성화하는 기술을 제공하는 것이다.An object of the present invention is to provide a technique for activating a portable electronic device by using signature information collected through a wearable device.

본 발명의 일 실시예에 따른 휴대용 전자기기 활성화 시스템은 사용자의 신체 일부에 부착되어 사용자의 시그니처(signature) 정보를 생성하는 웨어러블 디바이스(wearable device), 그리고 상기 웨어러블 디바이스로부터 수신된 상기 시그니처 정보가 기 저장된 사용자의 시그니처 정보와 매칭되는 경우, 잠금을 해제하는 휴대용 전자기기를 포함한다.According to an embodiment of the present invention, a portable electronic device activation system includes a wearable device attached to a body part of a user and generating signature information of the user, and the signature information received from the wearable device. If it matches the stored user's signature information, it includes a portable electronic device to unlock.

상기 웨어러블 디바이스는 상기 웨어러블 디바이스를 착용한 사용자의 움직임을 감지하는 모션 센서부, 감지된 사용자의 움직임을 이용하여, 시그니처 정보를 생성하는 시그니처 정보 생성부, 그리고 생성된 시그니처 정보를 상기 휴대용 전자기기로 전송하는 시그니처 정보 전송부를 포함한다.The wearable device may include a motion sensor unit for detecting a movement of a user wearing the wearable device, a signature information generation unit for generating signature information using the detected user's movement, and the generated signature information as the portable electronic device. And a signature information transmitter for transmitting.

상기 시그니처 정보는 사용자 움직임의 시작점, 종료점, 방향 전환 횟수, 방향 전환이 이루어질 때까지 이동한 거리, 방향 전환시 이동한 각도에 대한 정보 중 적어도 하나를 포함한다.The signature information includes at least one of a start point, an end point, a number of direction changeovers, a distance moved until a direction changeover is made, and an angle moved at the direction changeover.

본 발명의 일 실시예에 따른 휴대용 전자기기 활성화 시스템이 휴대용 전자기기를 활성화시키는 방법은 준비 모션을 감지하여, 사용자 움직임을 감지하기 위한 센서를 활성화 시키는 단계, 활성화된 센서를 이용하여, 감지된 사용자 움직임에 대한 데이터를 수집하는 단계, 상기 수집한 데이터를 트레이닝 데이터(training data)로 하고 뉴럴 네트워크(Neural Network)를 이용하여 시그니처 모델을 생성하는 단계, 상기 시그니처 모델을 휴대용 전자기기를 활성화시키는 시그니처로 등록하는 단계, 그리고 상기 등록한 시그니처를 이용하여, 상기 휴대용 전자기기를 활성화시킬지 여부를 결정하는 단계를 포함한다.A method of activating a portable electronic device by the portable electronic device activation system according to an embodiment of the present invention includes detecting a preparation motion, activating a sensor for detecting a user movement, and using a activated sensor, the detected user. Collecting data about movement, using the collected data as training data, generating a signature model using a neural network, and using the signature model as a signature for activating a portable electronic device. Registering, and determining whether to activate the portable electronic device using the registered signature.

상기 센서는 가속도 센서, 자이로 센서 및 지자기 센서를 포함한다.The sensor includes an acceleration sensor, a gyro sensor and a geomagnetic sensor.

상기 휴대용 전자기기 활성화 시스템이 휴대용 전자기기를 활성화시키는 방법은 필터를 이용하여 상기 수집한 데이터의 노이즈를 제거하는 단계를 더 포함한다.The method of activating the portable electronic device by the portable electronic device activation system further includes removing a noise of the collected data by using a filter.

상기 휴대용 전자기기를 활성화시킬지 여부를 결정하는 단계는 상기 등록하는 단계 이후 감지된 시그니처가 상기 등록한 시그니처와 매칭되는 경우, 상기 휴대용 전자기기를 활성화시키고, 상기 등록하는 단계 이후 감지된 시그니처가 상기 등록한 시그니처와 매칭되지 않는 경우, 상기 휴대용 전자기기를 비활성화시키고 상기 등록하는 단계 이후 감지된 시그니처에 대한 시그니처 모델을 생성한다.The determining of whether to activate the portable electronic device may include: activating the portable electronic device when the signature detected after the registering step matches the registered signature, and registering the signature by the signature detected after the registering step. If it does not match, and then deactivate the portable electronic device and generates a signature model for the detected signature after the step of registering.

본 발명에 따르면, 휴대용 전자기기의 입력 수단에 따른 제어 방법에 제한되지 않고, 시그니처 정보에 기초하여 휴대용 전자기기를 활성화 할 수 있다.According to the present invention, it is not limited to the control method according to the input means of the portable electronic device, and the portable electronic device can be activated based on the signature information.

본 발명에 따르면, 사용자가 휴대용 전자기기에 접촉하지 않은 상태에서도 휴대용 전자기기를 활성화 할 수 있다.According to the present invention, the user can activate the portable electronic device even without contacting the portable electronic device.

도 1은 본 발명의 실시예에 따른 휴대용 전자기기 활성화 시스템이 구현되는 환경을 도시한 도면이다.
도 2는 본 발명의 실시예에 따른 웨어러블 디바이스의 구조를 도시한 도면이다.
도 3은 모션 센서부에 의해 감지된 사용자의 움직임의 일 실시예를 도시한 도면이다.
도 4는 본 발명의 실시예에 따른 시그니처를 등록하고, 시그니처를 이용하여 휴대용 전자기기를 활성화시키는 방법을 도시한 도면이다.1 is a diagram illustrating an environment in which a portable electronic device activation system according to an embodiment of the present invention is implemented.
2 is a diagram illustrating a structure of a wearable device according to an exemplary embodiment of the present invention.
3 is a diagram illustrating an embodiment of a user's movement detected by a motion sensor unit.
4 is a diagram illustrating a method of registering a signature and activating a portable electronic device using the signature according to an embodiment of the present invention.

아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.DETAILED DESCRIPTION Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art may easily implement the present invention. As those skilled in the art would realize, the described embodiments may be modified in various different ways, all without departing from the spirit or scope of the present invention. In the drawings, parts irrelevant to the description are omitted in order to clearly describe the present invention, and like reference numerals designate like parts throughout the specification.

명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.Throughout the specification, when a part is said to "include" a certain component, it means that it can further include other components, without excluding other components unless specifically stated otherwise.

이하, 도면을 참조로 하여 본 발명의 실시예에 따른 웨어러블 디바이스 기반의 시그니처 정보를 인식하여 휴대용 전자기기를 활성화하는 시스템 및 방법에 대해 설명한다.Hereinafter, a system and method for activating a portable electronic device by recognizing signature information based on wearable device according to an embodiment of the present invention will be described with reference to the accompanying drawings.

도 1은 본 발명의 실시예에 따른 휴대용 전자기기 활성화 시스템이 구현되는 환경을 도시한 도면이다.1 is a diagram illustrating an environment in which a portable electronic device activation system according to an embodiment of the present invention is implemented.

도 1을 참고하면, 휴대용 전자기기 활성화 시스템(100)은 웨어러블 디바이스(Wearable Device)(110) 및 휴대용 전자기기(120)를 포함한다.Referring to FIG. 1, the portable electronic device activation system 100 includes a wearable device 110 and a portable electronic device 120.

웨어러블 디바이스(110)는 사용자의 손목 부분에 부착되어 사용자의 시그니처(signature) 정보를 생성하고, 생성한 시그니처 정보를 휴대용 전자기기(120)로 전송한다.The wearable device 110 is attached to a wrist part of the user to generate signature information of the user, and transmits the generated signature information to the portable electronic device 120.

이때, 웨어러블 디바이스(110)의 형태는 본 발명의 실시예에 따른 설명을 위해 필요한 개략적인 구성을 도시할 뿐 이러한 형태에 국한되는 것은 아니다. 즉, 웨어러블 디바이스(110)는 사용자의 손목 부분에 부착되어 사용자의 팔의 움직임에 따른 시그니처 정보를 생성할 수 있으나, 이외에도 사용자의 움직임에 대한 정보를 수집할 수 있는 사용자의 다른 신체 부위에 부착될 수 있다.In this case, the shape of the wearable device 110 shows a schematic configuration necessary for explanation according to an embodiment of the present invention, but is not limited to this form. That is, the wearable device 110 may be attached to the wrist of the user to generate signature information according to the movement of the user's arm, but may be attached to other body parts of the user that may collect information about the user's movement. Can be.

휴대용 전자기기(120)는 웨어러블 디바이스(110)에서 전송된 시그니처 정보가 기 저장된 사용자의 시그니처 정보와 매칭되는 경우, 휴대용 전자기기(120)의 잠금을 해제한다.The portable electronic device 120 unlocks the portable electronic device 120 when the signature information transmitted from the wearable device 110 matches with the pre-stored signature information of the user.

휴대용 전자기기(120)는 사용자의 명령에 따라서 특정 기능을 수행하고, 특정 기능에 따라 수행된 결과를 사용자에게 출력하는 디바이스를 지칭하며, 예를 들면, 스마트폰, 태블릿 PC, PDA, PMP 등일 수 있다.The portable electronic device 120 refers to a device that performs a specific function according to a user's command and outputs a result performed according to the specific function to the user. For example, the portable electronic device 120 may be a smartphone, a tablet PC, a PDA, a PMP, or the like. have.

또한, 휴대용 전자기기(120)는 휴대용 전자기기(120)를 활성화시킬 사용자의시그니처 정보를 결정하기 위한 전용 어플리케이션(application)을 탑재할 수 있다.In addition, the portable electronic device 120 may include a dedicated application for determining the signature information of the user who will activate the portable electronic device 120.

우선, 사용자는 상기 전용 어플리케이션이 휴대용 전자기기(120)에서 실행된 상태에서, 휴대용 전자기기(120)를 활성화시킬 사용자의 시그니처 정보를 등록할 수 있다.First, a user may register signature information of a user who activates the portable electronic device 120 while the dedicated application is executed in the portable electronic device 120.

예를 들면, 사용자는 휴대용 전자기기(120)에서 전용 어플리케이션을 실행시키고, 웨어러블 디바이스(110)를 신체 팔목에 부착한 채로 특정 시그니처를 입력할 수 있다. 이 경우, 사용자는 기 설정된 횟수만큼 특정 시그니처를 입력할 수 있으며, 웨어러블 디바이스(110)는 사용자의 특정 시그니처에 대한 정보를 생성한다.For example, the user may execute a dedicated application on the portable electronic device 120 and input a specific signature while attaching the wearable device 110 to the body cuff. In this case, the user may input a specific signature a predetermined number of times, and the wearable device 110 generates information on the specific signature of the user.

또한, 사용자는 전용 어플리케이션을 통해 특정 시그니처를 휴대용 전자기기(120)를 활성화시킬 시그니처로 저장한다.In addition, the user stores a specific signature as a signature for activating the portable electronic device 120 through a dedicated application.

이후, 사용자가 특정 시그니처를 수행하면, 웨어러블 디바이스(110)는 상기 특정 시그니처 정보를 생성하여 휴대용 전자기기(120)로 전송하고, 휴대용 전자기기(120)는 특정 시그니처 정보를 기 저장된 사용자의 시그니처 정보와 비교하여, 휴대용 전자기기(120)의 잠금을 해제한다.Thereafter, when the user performs a specific signature, the wearable device 110 generates the specific signature information and transmits the specific signature information to the portable electronic device 120, and the portable electronic device 120 transmits the specific signature information to the user's signature information. In comparison, the portable electronic device 120 is unlocked.

도 2는 본 발명의 실시예에 따른 웨어러블 디바이스의 구조를 도시한 도면이다.2 is a diagram illustrating a structure of a wearable device according to an exemplary embodiment of the present invention.

도 2를 참고하면, 웨어러블 디바이스(110)는 모션 센서부(111), 시그니처 정보 생성부(112) 및 시그니처 정보 전송부(113)를 포함한다.2, the wearable device 110 may include a motion sensor 111, a signature information generator 112, and a signature information transmitter 113.

모션 센서부(111)는 웨어러블 디바이스를 착용한 사용자의 움직임을 감지한다.The motion sensor 111 detects a movement of a user wearing the wearable device.

모션 센서부(111)는 예를 들면, 가속도 센서, 자이로 센서, 지자기 센서 또는 고도계이거나 이들 중 적어도 하나를 포함할 수 있으며, 다양한 센서를 통해 사용자의 움직임을 감지한다. 상기 센서들을 이용하여 사용자의 움직임을 감지하는 방법은 다양한 방법으로 실행될 수 있으므로, 본 발명의 실시예에서는 어느 하나의 방법으로 한정하지 않는다.The motion sensor 111 may be, for example, an acceleration sensor, a gyro sensor, a geomagnetic sensor, or an altimeter, or may include at least one of them, and detects a user's movement through various sensors. Since a method of detecting a user's movement using the sensors may be executed in various ways, embodiments of the present invention are not limited to any one method.

시그니처 정보 생성부(112)는 모션 센서부(111)에 의해 감지된 사용자의 움직임을 이용하여 시그니처 정보를 생성한다.The signature information generator 112 generates the signature information by using the motion of the user sensed by the motion sensor 111.

구체적으로, 시그니처 정보 생성부(112)는 감지된 사용자의 움직임을 분석하여, 사용자 움직임의 시작점, 종료점, 방향 전환 횟수, 방향 전환이 이루어질 때까지 이동한 거리, 방향 전환이 이루어진 각도를 결정한다.In detail, the signature information generation unit 112 analyzes the detected user's movement, and determines the start point, the end point, the number of direction changes, the distance moved until the direction change is made, and the angle at which the direction change is made.

도 3은 모션 센서부에 의해 감지된 사용자의 움직임의 일 실시예를 도시한 도면이다.3 is a diagram illustrating an embodiment of a user's movement detected by a motion sensor unit.

모션 센서부(111)에 의해 감지된 사용자의 움직임이 도 3과 같을 때, 시그니처 정보 생성부(112)는 사용자 움직임의 시작점을 결정하고, 시작점을 기준으로 방향 전환 없이 a만큼 우측으로 사용자의 움직임이 이동하였음을 결정할 수 있다.When the movement of the user sensed by the motion sensor 111 is the same as that of FIG. 3, the signature information generator 112 determines the starting point of the user's movement, and moves the user's movement to the right by a without changing the direction based on the starting point. It can be determined that this has moved.

이후, 시그니처 정보 생성부(112)는 좌측 하단 방향으로 45도만큼 한번의 방향 전환이 이루어진 이후 b만큼 사용자의 움직임이 이동하였음을 결정할 수 있다.Thereafter, the signature information generation unit 112 may determine that the user's movement has moved by b after the change of direction once by 45 degrees in the lower left direction.

상기 과정을 반복하면, 시그니처 정보 생성부(112)는 사용자 움직임의 시작점 및 종료점에 대한 정보와, 방향 전환 횟수가 4번 이루어졌고, 각각의 방향 전환 사이에 a, b, c, d, e만큼 이동하였으며, 각각의 방향 전환시 45도, 45도, 45도, 120도만큼 방향 전환이 이루어졌음을 결정할 수 있고, 상기 정보 중 적어도 하나를 포함하는 시그니처 정보를 생성할 수 있다.When the above process is repeated, the signature information generation unit 112 has information about the start point and the end point of the user's movement and the number of direction change times four times, and a, b, c, d, and e between each direction change. After moving, each direction change may be performed by 45 degrees, 45 degrees, 45 degrees, or 120 degrees, and the signature information including at least one of the above information may be generated.

다시 도 2로 돌아가면, 시그니처 정보 전송부(113)는 시그니처 정보 생성부(112)에 의해 생성된 시그니처 정보를 휴대용 전자기기(120)로 전송한다.2, the signature information transmitter 113 transmits the signature information generated by the signature information generator 112 to the portable electronic device 120.

예를 들면, 시그니처 정보 전송부(113)는 생성된 시그니처 정보를 유선 또는 무선 통신 모듈을 이용하여 휴대용 전자기기(120)로 전송할 수 있다.For example, the signature information transmitter 113 may transmit the generated signature information to the portable electronic device 120 using a wired or wireless communication module.

이 경우, 휴대용 전자기기(120)는 상기 사용자에 대해 사용자 움직임의 시작점, 종료점, 방향 전환 횟수, 방향 전환이 이루어질 때까지 이동한 거리, 방향 전환이 이루어진 각도에 대한 정보를 포함하는 시그니처 정보를 기 저장하고 있고, 시그니처 정보 전송부(113)로부터 수신한 시그니처 정보를 상기 기 저장된 사용자의 시그니처 정보와 비교하여, 매칭되는 경우 잠금을 해제한다.In this case, the portable electronic device 120 reads signature information including information about a start point, an end point, a number of direction changes, a distance traveled until a direction change is made, and an angle at which a direction change is made for the user. The signature information received from the signature information transmitter 113 is compared with the signature information of the pre-stored user to release the lock if a match is found.

이 때, 휴대용 전자기기(120)는 시그니처 정보에 포함된 사용자 움직임의 시작점, 종료점, 방향 전환 횟수, 방향 전환이 이루어질 때까지 이동한 거리, 방향 전환시 이동한 각도에 대한 정보 중 어느 하나에 대해 가중치를 주어 매칭여부를 판단할 수 있다.At this time, the portable electronic device 120 with respect to any one of the information about the starting point, the end point, the number of direction change, the distance moved until the direction change is made, the angle moved when the direction change is included in the signature information It can be determined whether matching is given by weight.

예를 들면, 시그니처의 경우 사용자가 시그니처를 수행할 때 마다 시작점, 종료점 및 방향 전환이 이루어질 때까지 이동한 거리는 달라질 수 있으나, 시그니처의 형태를 유지하기 위해서는 방향 전환 횟수 및 방향 전환시 이동한 각도는 동일하게 유지되므로, 휴대용 전자기기(120)는 다른 정보에 비해 사용자 움직임의 방향 전환 횟수 및 방향 전환시 이동한 각도에 대한 정보에 더 큰 가중치를 부여할 수 있다.For example, in the case of the signature, the distance traveled until the start point, the end point, and the direction change is made each time the user performs the signature may be different.However, in order to maintain the shape of the signature, the number of direction changes and the angle moved during the direction change are Since it remains the same, the portable electronic device 120 may give a greater weight to the information on the number of times the direction change of the user's movement and the angle moved during the direction change than other information.

따라서, 휴대용 전자기기(120)는 시그니처 정보 전송부(113)로부터 수신한 시그니처 정보를 기 저장된 사용자의 시그니처 정보와 비교시, 다른 정보는 매칭하지 않으나 방향 전환 횟수 및 방향 전환시 이동한 각도가 일정 범위 내로 매칭하는 경우라도 시그니처 정보 전송부(113)로부터 수신한 시그니처 정보를 기 저장된 사용자의 시그니처 정보가 매칭한다고 결정할 수 있다. 이외에도 사용자의 설정에 따라 다른 정보에 가중치가 부여될 수도 있다.Accordingly, when the portable electronic device 120 compares the signature information received from the signature information transmitting unit 113 with the signature information of the pre-stored user, other information does not match, but the number of direction changes and the angle at which the direction is shifted are constant. Even when matching within the range, it may be determined that the signature information of the pre-stored user matches the signature information received from the signature information transmitter 113. In addition, other information may be weighted according to a user's setting.

도 4는 본 발명의 실시예에 따른 시그니처를 등록하고, 시그니처를 이용하여 휴대용 전자기기를 활성화시키는 방법을 도시한 도면이다.4 is a diagram illustrating a method of registering a signature and activating a portable electronic device using the signature according to an embodiment of the present invention.

도 4의 단계들은 휴대용 전자기기(120)를 활성화시킬 사용자의 시그니처 정보를 결정하기 위한 전용 어플리케이션이 실행된 상태에서 수행될 수 있다. 즉, 사용자는 휴대용 전자기기(120)에 전용 어플리케이션을 실행시킨 상태로 아래의 단계들을 수행할 수 있으며, 도 4의 단계들은 휴대용 전자기기(120)에 전용 어플리케이션이 실행된 상태에서 수행되는 것으로 이해되어야 할 것이다.The steps of FIG. 4 may be performed while a dedicated application for determining the signature information of the user who will activate the portable electronic device 120 is executed. That is, the user may perform the following steps while the dedicated application is executed on the portable electronic device 120, and the steps of FIG. 4 are understood to be performed while the dedicated application is executed on the portable electronic device 120. Should be.

도 4를 참고하면, 휴대용 전자기기 활성화 시스템(100)은 시그니처 정보를 수집하기 위한 센서를 활성화 하고자, 준비 모션을 감지한다(S100).Referring to FIG. 4, the portable electronic device activation system 100 detects a preparation motion to activate a sensor for collecting signature information (S100).

구체적으로, 휴대용 전자기기 활성화 시스템(100)은 기 설정된 시간 동안 유지되는 준비 모션을 감지한 경우, 사용자 움직임을 감지하기 위한 센서를 활성화 시킨다(S110). 반대로, 준비 모션이 감지되지 않은 경우, 센서가 비활성화된 상태를 유지한다.In detail, when the portable electronic device activation system 100 detects a preparation motion maintained for a preset time, the portable electronic device activation system 100 activates a sensor for detecting a user's movement (S110). Conversely, if no ready motion is detected, the sensor remains deactivated.

휴대용 전자기기 활성화 시스템(100)은 활성화된 센서를 이용하여 감지된 사용자 움직임에 대한 데이터를 수집한다(S120).The portable electronic device activation system 100 collects data on the detected user movement using the activated sensor (S120).

구체적으로, 휴대용 전자기기 활성화 시스템(100)은 가속도 센서, 자이로 센서 및 지자기 센서를 통해 감지된 사용자의 움직임에 대한 센서 데이터를 수집한다. 이 경우, 휴대용 전자기기 활성화 시스템(100)은 센서 데이터의 정확성을 높이기 위해 사용자에게 동일한 움직임을 복수회 반복하여 요구할 수 있다.In detail, the portable electronic device activation system 100 collects sensor data on a user's movement detected through an acceleration sensor, a gyro sensor, and a geomagnetic sensor. In this case, the portable electronic device activation system 100 may repeatedly request the same movement to the user a plurality of times in order to increase the accuracy of the sensor data.

휴대용 전자기기 활성화 시스템(100)은 수집된 데이터를 필터링하여 데이터에 포함된 노이즈를 제거한다(S130). 필터를 이용하여 데이터의 노이즈를 제거하는 방법은 다양한 방법으로 실행될 수 있으므로, 본 발명의 실시예에서는 어느 하나의 방법으로 한정하지 않는다.The portable electronic device activation system 100 filters the collected data to remove noise included in the data (S130). Since a method of removing data noise using a filter can be performed in various ways, embodiments of the present invention are not limited to any one method.

휴대용 전자기기 활성화 시스템(100)은 수집된 데이터를 트레이닝 데이터(training data)로 하고 뉴럴 네트워크(Neural Network)를 이용하여 시그니처 모델을 생성한다(S140). 뉴럴 네트워크를 이용하여 특정 모델을 정형화하는 방법은 이미 공지된 기술로 본 발명의 명세서에서는 설명을 생략한다.The portable electronic device activation system 100 uses the collected data as training data and generates a signature model using a neural network (S140). A method of shaping a specific model using a neural network is a known technique, and description thereof is omitted in the specification of the present invention.

휴대용 전자기기 활성화 시스템(100)은 생성된 시그니처 모델을 휴대용 전자기기(120)를 활성화시키는 시그니처로 등록한다(S150).The portable electronic device activation system 100 registers the generated signature model as a signature for activating the portable electronic device 120 (S150).

휴대용 전자기기 활성화 시스템(100)은 사용자의 시그니처 등록 이후 특정 시그니처가 감지된 경우, 특정 시그니처와 등록된 시그니처를 비교한다(S160).The portable electronic device activation system 100 compares the specific signature with the registered signature when a specific signature is detected after the user's signature is registered (S160).

구체적으로, 휴대용 전자기기 활성화 시스템(100)은 뉴럴 네트워크를 이용하여 감지된 특정 시그니처를 분류하고, 분류된 시그니처를 등록된 시그니처와 비교한다.In detail, the portable electronic device activation system 100 classifies a specific signature detected using a neural network, and compares the classified signature with a registered signature.

만일 새롭게 감지된 특정 시그니처와 등록된 시그니처가 매칭되는 경우, 휴대용 전자기기 활성화 시스템(100)은 휴대용 전자기기(120)를 활성화시킨다(S170).If the newly detected specific signature matches the registered signature, the portable electronic device activation system 100 activates the portable electronic device 120 (S170).

이 경우, 휴대용 전자기기 활성화 시스템(100)은 생성된 시그니처 모델에 포함된 사용자 움직임의 시작점, 종료점, 방향 전환 횟수, 방향 전환이 이루어질 때까지 이동한 거리, 방향 전환시 이동한 각도에 대한 정보 중 어느 하나에 대해 가중치를 주어 매칭여부를 판단할 수 있다.In this case, the portable electronic device activation system 100 includes information about a start point, an end point, a number of turn directions, a distance traveled until a direction change is made, and an angle shifted when a direction change is included in the generated signature model. It can be determined whether a match is given to a weight.

반대로, 새롭게 감지된 특정 시그니처와 등록된 시그니처가 매칭되지 않는 경우, 휴대용 전자기기 활성화 시스템(100)은 휴대용 전자기기(120)를 비활성화 시키고, 새롭게 감지된 특정 시그니처에 대해 단계 S110 내지 S140을 반복하여 상기 특정 시그니처에 대한 시그니처 모델을 생성한다(S180).On the contrary, when the newly detected specific signature and the registered signature do not match, the portable electronic device activation system 100 deactivates the portable electronic device 120 and repeats steps S110 to S140 for the newly detected specific signature. A signature model for the specific signature is generated (S180).

본 발명에 따르면, 휴대용 전자기기의 입력 수단에 따른 제어 방법에 제한되지 않고, 시그니처 정보에 기초하여 휴대용 전자기기를 활성화 할 수 있다.According to the present invention, it is not limited to the control method according to the input means of the portable electronic device, and the portable electronic device can be activated based on the signature information.

본 발명에 따르면, 사용자가 휴대용 전자기기에 접촉하지 않은 상태에서도 휴대용 전자기기를 활성화 할 수 있다.According to the present invention, the user can activate the portable electronic device even without contacting the portable electronic device.

이상에서 본 발명의 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.Although the embodiments of the present invention have been described in detail above, the scope of the present invention is not limited thereto, and various modifications and improvements of those skilled in the art using the basic concepts of the present invention defined in the following claims are also provided. It belongs to the scope of rights.

Claims (8)

휴대용 전자기기 활성화 시스템으로서,
사용자의 신체 일부에 부착되어 사용자의 시그니처(signature) 정보를 생성하는 웨어러블 디바이스(wearable device), 그리고
상기 웨어러블 디바이스로부터 수신된 상기 시그니처 정보가 기 저장된 사용자의 시그니처 정보와 매칭되는 경우, 잠금을 해제하는 휴대용 전자기기를 포함하고,
상기 시그니처 정보는 사용자 움직임의 시작점, 종료점, 방향 전환 횟수, 방향 전환이 이루어질 때까지 이동한 거리 및 방향 전환시 이동한 각도에 대한 정보를 포함하고,
상기 휴대용 전자기기는 상기 시그니처 정보에 포함된 사용자 움직임의 시작점, 종료점, 방향 전환 횟수, 방향 전환이 이루어질 때까지 이동한 거리 및 방향 전환시 이동한 각도에 대한 정보 중 어느 하나에 가중치를 주어 매칭여부를 판단하는 휴대용 전자기기 활성화 시스템.A portable electronic device activation system,
A wearable device attached to a part of the user's body to generate signature information of the user, and
If the signature information received from the wearable device is matched with the signature information of the pre-stored user, includes a portable electronic device for releasing the lock,
The signature information includes information about a start point, an end point, a number of direction changes, a distance moved until a direction change is made, and an angle moved when the direction is changed.
The portable electronic device weights any one of a start point, an end point, a number of direction changes, a distance moved until the direction change is made, and information about an angle moved when the direction change is included in the signature information. Portable electronic device activation system to determine the. 제1항에서,
상기 웨어러블 디바이스는
상기 웨어러블 디바이스를 착용한 사용자의 움직임을 감지하는 모션 센서부,
감지된 사용자의 움직임을 이용하여, 시그니처 정보를 생성하는 시그니처 정보 생성부, 그리고
생성된 시그니처 정보를 상기 휴대용 전자기기로 전송하는 시그니처 정보 전송부
를 포함하는 휴대용 전자기기 활성화 시스템.In claim 1,
The wearable device
Motion sensor unit for detecting the movement of the user wearing the wearable device,
Signature information generation unit for generating signature information using the detected user's movement, and
Signature information transmission unit for transmitting the generated signature information to the portable electronic device
Portable electronic device activation system comprising a. 제2항에서,
상기 휴대용 전자기기는
상기 시그니처 정보 전송부로부터 수신한 시그니처 정보를 상기 기 저장된 사용자의 시그니처 정보와 비교시, 상기 수신된 시그니처 정보에 포함된 사용자 움직임의 시작점, 종료점 및 방향 전환이 이루어질 때까지 이동한 거리에 비해 상기 수신된 시그니처 정보에 포함된 사용자 움직임의 방향 전환 횟수 및 상기 방향 전환시 이동한 각도에 대한 정보에 더 큰 가중치를 부여하여 매칭여부를 판단하는 휴대용 전자기기 활성화 시스템.In claim 2,
The portable electronic device
When comparing the signature information received from the signature information transmitter with the signature information of the pre-stored user, the received information is compared with the moving distance until the start point, the end point, and the direction change of the user's movement included in the received signature information are made. The portable electronic device activation system for determining whether to match by giving a greater weight to the information on the number of direction change of the user's movement included in the signature information and the information about the angle moved when the direction change. 휴대용 전자기기 활성화 시스템이 휴대용 전자기기를 활성화시키는 방법으로서,
준비 모션을 감지하여, 사용자 움직임을 감지하기 위한 센서를 활성화 시키는 단계,
활성화된 센서를 이용하여, 감지된 사용자 움직임에 대한 데이터를 수집하는 단계,
상기 수집한 데이터를 트레이닝 데이터(training data)로 하고 뉴럴 네트워크(Neural Network)를 이용하여 시그니처 모델을 생성하는 단계,
상기 시그니처 모델을 휴대용 전자기기를 활성화시키는 시그니처로 등록하는 단계, 그리고
상기 등록한 시그니처와 상기 등록하는 단계 이후 감지된 시그니처를 비교하여, 상기 휴대용 전자기기를 활성화시킬지 여부를 결정하는 단계를 포함하고,
상기 등록한 시그니처는 사용자 움직임의 시작점, 종료점, 방향 전환 횟수, 방향 전환이 이루어질 때까지 이동한 거리 및 방향 전환시 이동한 각도에 대한 정보를 포함하고,
상기 휴대용 전자기기를 활성화시킬지 여부를 결정하는 단계는
상기 등록한 시그니처에 포함된 사용자 움직임의 시작점, 종료점, 방향 전환 횟수, 방향 전환이 이루어질 때까지 이동한 거리 및 방향 전환시 이동한 각도에 대한 정보 중 어느 하나에 가중치를 주어 상기 등록한 시그니처와 상기 등록하는 단계 이후 감지된 시그니처를 비교하는 휴대용 전자기기 활성화 방법.A method of activating a portable electronic device by the portable electronic device activation system,
Detecting a ready motion, activating a sensor for detecting a user's movement,
Collecting data on the detected user movement using the activated sensor,
Using the collected data as training data and generating a signature model using a neural network;
Registering the signature model as a signature to activate a portable electronic device, and
And comparing the registered signature with the signature detected after the registering, and determining whether to activate the portable electronic device.
The registered signature includes information about a start point, an end point, a number of direction changes, a distance moved until a direction change is made, and an angle moved when the direction is changed.
Determining whether to activate the portable electronic device is
The registered signature is added to the registered signature by weighting any one of a start point, an end point, a number of direction changes, a distance moved until a direction change is made, and information about an angle moved when the direction change is included in the registered signature. The method of activating a portable electronic device comparing the signatures detected after the step. 제4항에서,
상기 센서는
가속도 센서, 자이로 센서 및 지자기 센서를 포함하는 휴대용 전자기기 활성화 방법.In claim 4,
The sensor
A portable electronic device activation method comprising an acceleration sensor, a gyro sensor, and a geomagnetic sensor. 제4항에서,
필터를 이용하여 상기 수집한 데이터의 노이즈를 제거하는 단계
를 더 포함하는 휴대용 전자기기 활성화 방법.In claim 4,
Removing noise of the collected data using a filter
Portable electronic device activation method further comprising. 제4항에서,
상기 휴대용 전자기기를 활성화시킬지 여부를 결정하는 단계는
상기 등록하는 단계 이후 감지된 시그니처가 상기 등록한 시그니처와 매칭되는 경우, 상기 휴대용 전자기기를 활성화시키고,
상기 등록하는 단계 이후 감지된 시그니처가 상기 등록한 시그니처와 매칭되지 않는 경우, 상기 휴대용 전자기기를 비활성화시키고 상기 등록하는 단계 이후 감지된 시그니처에 대한 시그니처 모델을 생성하는 휴대용 전자기기 활성화 방법.In claim 4,
Determining whether to activate the portable electronic device is
If the signature detected after the registering step matches the registered signature, the portable electronic device is activated.
And if the signature detected after the registering step does not match the registered signature, deactivating the portable electronic device and generating a signature model for the signature detected after the registering step. 제4항에서,
상기 휴대용 전자기기를 활성화시킬지 여부를 결정하는 단계는
상기 등록한 시그니처와 상기 등록하는 단계 이후 감지된 시그니처를 비교시, 상기 등록한 시그니처에 포함된 사용자 움직임의 시작점, 종료점 및 방향 전환이 이루어질 때까지 이동한 거리에 비해 상기 사용자 움직임의 방향 전환 횟수 및 방향 전환시 이동한 각도에 대한 정보에 더 큰 가중치를 부여하여 매칭여부를 판단하는 휴대용 전자기기 활성화 방법.
In claim 4,
Determining whether to activate the portable electronic device is
When comparing the registered signature with the signature detected after the registering step, the number of direction change and direction change of the user's movement compared to the distance moved until the start point, end point, and direction change of the user's movement included in the registered signature are made. A method of activating a portable electronic device that determines whether a match is given by giving a greater weight to information about an angle at which time is moved.
KR1020170164367A 2017-12-01 2017-12-01 System and method for activating a portable electronic device by recognizing signature information based on a wearable device KR102022678B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170164367A KR102022678B1 (en) 2017-12-01 2017-12-01 System and method for activating a portable electronic device by recognizing signature information based on a wearable device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170164367A KR102022678B1 (en) 2017-12-01 2017-12-01 System and method for activating a portable electronic device by recognizing signature information based on a wearable device

Publications (2)

Publication Number Publication Date
KR20190064982A KR20190064982A (en) 2019-06-11
KR102022678B1 true KR102022678B1 (en) 2019-09-18

Family

ID=66847390

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170164367A KR102022678B1 (en) 2017-12-01 2017-12-01 System and method for activating a portable electronic device by recognizing signature information based on a wearable device

Country Status (1)

Country Link
KR (1) KR102022678B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220005702A (en) 2020-07-07 2022-01-14 삼성전자주식회사 Electronic device, and method for performing authentication operation in electronic device

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102193274B1 (en) * 2013-12-05 2020-12-22 삼성전자 주식회사 Unlock method and apparatus
KR102301240B1 (en) * 2014-07-09 2021-09-13 엘지이노텍 주식회사 Apparatus and method for recognizing gesture using wearable device in the vehicle and wearable device therefor
KR102433533B1 (en) * 2015-12-09 2022-08-18 한국전자기술연구원 Recognition based Control Method and System using a Motion Learning

Also Published As

Publication number Publication date
KR20190064982A (en) 2019-06-11

Similar Documents

Publication Publication Date Title
US10055563B2 (en) Air writing and gesture system with interactive wearable device
Bi et al. Safewatch: A wearable hand motion tracking system for improving driving safety
US10222868B2 (en) Wearable device and control method using gestures
US20150288687A1 (en) Systems and methods for sensor based authentication in wearable devices
KR102347067B1 (en) Portable device for controlling external apparatus via gesture and operating method for same
US9772684B2 (en) Electronic system with wearable interface mechanism and method of operation thereof
CN109076077B (en) Security system with gesture-based access control
KR102384485B1 (en) Information-processing device, information processing method, and information-processing system
CN110337390A (en) For system of defense from the passive vehicle access control system of bluetooth low energy (BLE) and its method of relay attack
JP2011523730A (en) Method and system for identifying a user of a handheld device
KR20140146366A (en) Method for communication using wearable device and wearable device enabling the method
CN110015307A (en) A kind of control method for vehicle, device, readable storage medium storing program for executing and terminal device
CN106062681A (en) Disambiguation of styli by correlating acceleration on touch inputs
TWI509454B (en) Methods and systems for commencing a process based on motion detection, and related computer program products
AU2021399702A1 (en) Trajectory and intent prediction
KR102022678B1 (en) System and method for activating a portable electronic device by recognizing signature information based on a wearable device
CN111684762B (en) Terminal device management method and terminal device
EP3992823A1 (en) System and method for user authentication based on passive biometrics across different devices
KR101714628B1 (en) Apparatus and method for user authentication using a movement information
US11734403B2 (en) Method and apparatus for biometric authentication based on vibration signal
US10578640B2 (en) Determination of a mobility context for a user carrying a device fitted with inertial sensors
Iyer et al. Generalized hand gesture recognition for wearable devices in IoT: Application and implementation challenges
Roshandel et al. Multi-sensor based gestures recognition with a smart finger ring
JP6676569B2 (en) Authentication system, authentication device, and authentication method
JP6598014B2 (en) Authentication device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant