KR102337217B1 - 전자 장치 및 그 동작 방법 - Google Patents

전자 장치 및 그 동작 방법 Download PDF

Info

Publication number
KR102337217B1
KR102337217B1 KR1020160179311A KR20160179311A KR102337217B1 KR 102337217 B1 KR102337217 B1 KR 102337217B1 KR 1020160179311 A KR1020160179311 A KR 1020160179311A KR 20160179311 A KR20160179311 A KR 20160179311A KR 102337217 B1 KR102337217 B1 KR 102337217B1
Authority
KR
South Korea
Prior art keywords
biometric data
dynamic biometric
user
movement
server
Prior art date
Application number
KR1020160179311A
Other languages
English (en)
Other versions
KR20180075221A (ko
Inventor
올렉산드르 슈르
알렉산드라 페테이추크
안드리 올리니크
알렉산드르 라돔스키
예브헨 야키슨
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020160179311A priority Critical patent/KR102337217B1/ko
Priority to PCT/KR2017/015419 priority patent/WO2018124671A1/en
Priority to US15/854,553 priority patent/US10956604B2/en
Priority to EP17889173.5A priority patent/EP3545456A4/en
Publication of KR20180075221A publication Critical patent/KR20180075221A/ko
Application granted granted Critical
Publication of KR102337217B1 publication Critical patent/KR102337217B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G06F21/6245—Protecting personal data, e.g. for financial or medical purposes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/316—User authentication by observing the pattern of computer usage, e.g. typical user behaviour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/45—Structures or tools for the administration of authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005—Input arrangements through a video camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/23—Recognition of whole body movements, e.g. for sport training
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/50—Maintenance of biometric data or enrolment thereof
    • G06V40/53—Measures to keep reference information secret, e.g. cancellable biometrics

Abstract

일 실시예에 따른 전자 장치의 동작 방법은, 사용자의 움직임에 대한 동적 생체 데이터(dynamic biometric data)를 획득하는 단계, 동적 생체 데이터를 왜곡하여 비식별화(de-identification)하는 단계 및 비식별화된 동적 생체 데이터를 서버로 전송하는 단계를 포함하는 것을 특징으로 한다.

Description

전자 장치 및 그 동작 방법{ELECTRIC APPARATUS AND OPERATION METHOD THEREOF}
본 발명은 전자 장치 및 그 동작 방법에 관한 것이다. 보다 구체적으로, 사용자의 동적 생체 데이터를 비식별화하는 전자 장치 및 그 동작 방법에 관한 것이다.
최근 생체 인식 기술이 발전함에 따라 사용자의 생체 정보(biometrics)를 식별할 수 있는 다양한 방법들이 개발되고 있다. 이와 함께 사용자의 생체 정보를 활용한 서비스들 역시 발전하고 있다. 사용자의 생체 정보는, 지문, 손, 홍채, 안면, DNA 등과 같은 생리적인 생체 정보(physiological biometrics)와 키스트로크(key stroke), 서명(signature), 음성, 걸음걸이(gait) 등과 같이 행동에 관련된 생체 정보(behavioral biometrics)로 나눌 수 있다.
이러한 생체 정보로부터 사용자 고유의 특징을 추출하면 해당 특징을 이용하여 사용자를 식별할 수 있다. 예를 들어, 지문 인식, 홍채 인식 등을 통해 사용자를 식별할 수 있다. 일반적으로 생리적인 생체 정보는 사용자의 동의 없이 획득하는 것이 쉽지 않다. 하지만, 행동에 관련된 생체 정보 중 사용자의 움직임, 걸음걸이 같은 동적 생체 정보는 사용자를 관찰함으로써 어렵지 않게 획득할 수 있다.
특히, 사용자의 움직임을 캡쳐하여 공개된 환경에서 아바타(avatar)로 표시하는 경우, 사용자의 움직임이 그대로 아바타에 드러나게 되므로, 아바타의 움직임을 관찰하여 사용자의 의사와 관계없이 사용자의 동적 생체 정보를 획득할 수 있다.
따라서, 사용자의 동적 생체 데이터를 이용하여 공개된 환경에서 사용자의 움직임을 복원하여 표시하는 경우, 사용자의 의사와 관계없이 사용자의 생체 정보가 노출되어 개인 정보 보호에 문제가 있다.
일 실시예는 사용자의 동적 생체 데이터를 비식별화하는 전자 장치 및 그 동작 방법을 제공한다.
일 실시예에 따른 전자 장치의 동작 방법은, 사용자의 움직임에 대한 동적 생체 데이터(dynamic biometric data)를 획득하는 단계, 상기 동적 생체 데이터를 왜곡하여 비식별화(de-identification)하는 단계 및 상기 비식별화된 동적 생체 데이터를 서버로 전송하는 단계를 포함하는 것을 특징으로 한다.
일 실시예에 전자 장치는, 통신부, 전자 장치의 동작을 위한 프로그램을 저장하는 메모리 및 상기 프로그램을 실행함으로써, 사용자의 움직임에 대한 동적 생체 데이터(dynamic biometric data)를 획득하고, 상기 동적 생체 데이터를 왜곡하여 비식별화(de-identification)하며, 상기 비식별화된 동적 생체 데이터를 서버로 전송하는 프로세서를 포함하는 것을 특징으로 한다.
일 실시예에 따른 서버의 동작 방법은, 사용자의 움직임에 대한 동적 생체 데이터를 수신하는 단계, 상기 동적 생체 데이터를 왜곡하여 비식별화하는 단계 및 상기 비식별화된 동적 생체 데이터를 바탕으로 상기 사용자의 왜곡된 움직임을 복원하는 단계 및 상기 복원된 움직임을 바탕으로 서비스를 제공하는 단계를 포함하는 것을 특징으로 한다.
일 실시예에 따른 서버는, 통신부, 서버의 동작을 위한 프로그램을 저장하는 메모리 및 상기 프로그램을 실행함으로써, 사용자의 움직임에 대한 동적 생체 데이터를 수신하고, 상기 동적 생체 데이터를 왜곡하여 비식별화하며, 상기 비식별화된 동적 생체 데이터를 바탕으로 상기 사용자의 왜곡된 움직임을 복원하고, 상기 복원된 움직임을 바탕으로 서비스를 제공하는 프로세서를 포함하는 것을 특징으로 한다.
도 1은 일 실시예에 따른 전자 장치를 사용하는 시스템의 일 예를 나타내는 도면이다.
도 2는 도 1의 시스템에서 서버(110)가 제공하는 서비스의 일 예를 나타내는 도면이다.
도 3은 일 실시예에 따른 전자 장치의 동작 방법을 나타내는 순서도이다.
도 4는 일 실시예에 따른 동적 생체 데이터 획득 방법을 나타내는 도면이다.
도 5(a) 및 5(b)는 다른 일 실시예에 따라 동적 생체 데이터 획득 방법을 나타내는 도면이다.
도 6(a) 및 도 6(b)는 일 실시예에 따라 시간에 따른 동적 생체 데이터의 비식별화를 나타내는 표 및 그래프이다.
도 7은 비식별화된 동적 생체 데이터를 바탕으로 사용자의 움직임을 모델링한 도면이다.
도 8은 일 실시예에 따라 동적 생체 데이터의 변형 정도를 선택하는 방법을 나타내는 도면이다.
도 9는 일 실시예에 따라 비식별화된 동적 생체 데이터를 바탕으로 사용자의 왜곡된 움직임을 표시하는 과정을 나타내는 도면이다.
도 10은 일 실시예에 따른 전자 장치의 구성을 나타내는 블럭도이다.
도 11은 다른 일 실시예에 따른 전자 장치의 구성을 나타내는 블럭도이다.
도 12는 일 실시예에 따른 서버의 동작 방법을 나타내는 순서도이다.
도 13은 일 실시예에 따른 서버의 구성을 나타내는 블럭도이다.
이하에서는 도면을 참조하여 다양한 실시예들을 상세히 설명한다. 이하에서 설명되는 실시예들은 여러 가지 상이한 형태로 변형되어 실시될 수도 있다. 실시예들의 특징을 보다 명확히 설명하기 위하여 이하의 실시예들이 속하는 기술분야에서 통상의 지식을 가진 자에게 널리 알려져 있는 사항들에 관해서 자세한 설명은 생략한다.
한편, 본 명세서에서 어떤 구성이 다른 구성과 "연결"되어 있다고 할 때, 이는 ‘직접적으로 연결’되어 있는 경우뿐 아니라, ‘그 중간에 다른 구성을 사이에 두고 연결’되어 있는 경우도 포함한다. 또한, 어떤 구성이 다른 구성을 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한, 그 외 다른 구성을 제외하는 것이 아니라 다른 구성들 더 포함할 수도 있다는 것을 의미한다.
본 명세서에서, “비식별화(de-identification)”란, 데이터에서 식별자를 제거하여, 데이터를 바탕으로 개인의 식별이 어렵거나 불가능한 상태를 의미한다.
“동적 생체 데이터”란, 특정 사용자를 식별할 수 있는 사용자의 움직임과 관련된 데이터로, 신체 적어도 일부의 움직임, 걸음걸이(Gait), 특정 동작 등에 대한 데이터를 의미한다
도 1은 일 실시예에 따른 전자 장치를 사용하는 시스템의 일 예를 나타내는 도면이다.
도 1을 참조하면, 일 실시예에 따른 전자 장치를 사용하는 시스템은, 서버(110) 및 서버(110)와 연결되는 장치들(120, 130, 140, 150, 160, 170)로 구성될 수 있다.
서버(110)는 해당 서버(110)에 연결된 장치들(120, 130, 140, 150, 160, 170) 중 적어도 일부 장치에 서비스를 제공한다. 일 실시예에서 서버(110)는 해당 서버(110)에 연결된 전자 장치들(120, 130, 140, 150, 160, 170) 중 적어도 일부 장치로부터 사용자의 동적 생체 데이터(dynamic biometric data)를 수신하고, 수신한 동적 생체 데이터를 바탕으로 사용자의 움직임을 표시하는 서비스를 제공할 수 있다. 이때. 서버(110)가 수신하는 사용자의 동적 생체 데이터는 서버(110)에 연결된 전자 장치들(120, 130, 140, 150, 160, 170) 중 적어도 일부 장치에서 왜곡되어 비식별화(de-identification)된 동적 생체 데이터일 수 있다. 서버(110)가 수신하는 사용자의 동적 생체 데이터가 비식별화된 동적 생체 데이터인 경우, 서버(110)는 사용자의 왜곡된 움직임을 표시하는 서비스를 제공하게 된다.
일 실시예에서, 서버(110)는 사용자의 움직임에 대한 동적 생체 데이터를 수신하고, 서버(110)에서 수신한 동적 생체 데이터를 왜곡하여 비식별화할 수 있다. 이때, 서버가 수신하는 동적 생체 데이터는 이미 왜곡되어 비식별화된 동적 생체 데이터일 수 있다. 이 경우, 동적 생체 데이터는 서버(110)에 연결된 전자 장치들(120, 130, 140, 150, 160, 170) 중 적어도 일부 장치에서 한 번 왜곡되고, 서버(110)에서 다시 한 번 왜곡될 수 있다. 그 후, 서버(110)는 비식별화된 동적 생체 데이터를 바탕으로 사용자의 왜곡된 움직임을 표시하는 서비스를 제공할 수 있다.
도 2를 참조하며 서버(110)가 제공하는 서비스의 일 예를 설명하도록 한다.
도 2는 도 1의 시스템에서 서버(110)가 제공하는 서비스의 일 예를 나타내는 도면이다.
도 2에서 도시하는 서비스는, 가상 환경(230)에서 다수의 사용자가 아바타를 이용하여 상호작용하는 서비스이다. 예를 들어, 서비스는 가상 현실 또는 증강 현실에서 채팅 등의 서비스 일 수 있다.
도 2를 참조하면, 사용자(210)의 움직임에 따라 동작하는 아바타(220)가 표시된다. 아바타(220)의 동작은 사용자(210)의 움직임을 반영한다.
일 실시예에서 서버(110)는 왜곡되어 비식별화된 동적 생체 데이터를 수신하거나, 수신한 동적 생체 데이터를 왜곡하여 비식별화하고, 비식별화된 동적 생체 데이터를 바탕으로 서비스를 제공한다. 보다 구체적으로, 서버(110)는 비식별화된 동적 생체 데이터를 바탕으로 사용자의 왜곡된 움직임을 표시하는 서비스를 제공할 수 있다.
도 2에서 가상 환경(230)에는 사용자(210)의 움직임 그대로가 아닌 사용자(210)의 왜곡된 움직임이 표시된다. 따라서, 서버(110)가 제공하는 서비스에 참여하는 사용자들은 사용자(210)의 실제 움직임이 아니라 사용자(210)의 왜곡된 움직임에 따라 동작하는 아바타(220)를 보게 된다.
일 실시예에 따르면, 다른 사용자들에게 사용자(210)의 왜곡된 움직임에 따라 동작하는 아바타(220)를 표시함으로써, 다른 사용자들이 사용자(210)의 의사와 관계없이 사용자(210)의 생체 정보가 노출되는 것을 방지할 수 있다. 동적 생체 정보는 사용자를 식별하거나 인증하는 수단이 될 수 있으므로, 사용자의 생체 정보 노출을 방지함으로써 개인 정보를 보호할 수 있다.
다시 도 1의 설명으로 돌아가면,
서버(110)에 연결된 전자 장치들(120, 130, 140, 150, 160, 170)은 단말(휴대폰, 태블릿, 노트북, 개인 컴퓨터 등), 서버(클라우드 서버, 프라이빗 서버 등)를 포함할 수 있다. 서버(110)에 연결된 전자 장치들(120, 130, 140, 150, 160, 170)은 사용자의 움직임에 대한 동적 생체 데이터를 획득하는 장치, 동적 생체 데이터를 왜곡하여 비식별화하는 장치 또는 서버(110)로부터 서비스를 제공받는 장치를 포함할 수 있다. 또한, 서버(110)에 연결된 장치들(120, 130, 140, 150, 160, 170)은 사용자의 움직임에 대한 동적 생체 데이터를 획득하는 기능, 획득한 동적 생체 데이터를 왜곡하여 비식별화하는 기능 및 서비스를 제공받는 기능 중 적어도 하나 이상의 기능을 포함하는 장치를 포함할 수도 있다.
스마트 와치, 헤드-마운티드 디스플레이와 같은 웨어러블 디바이스(wearable device)(120)는 동적 생체 데이터를 획득하여 서버(110)로 전송한다. 일 실시예에서, 웨어러블 디바이스(120)는 카메라, 센서 등을 이용하여 사용자의 움직임을 캡쳐하고 감지할 수 있다. 웨어러블 디바이스(120)는 수집한 데이터를 직접 서버(110)로 전송할 수도 있고, 비식별화를 지원하는 다른 장치를 통해 전송할 수도 있다. 나아가, 웨어러블 디바이스(120)는 획득한 동적 생체 데이터를 비식별화하여 서버(110)로 전송할 수도 있다.
스마트 TV(130), 스마트폰(140)과 같은 단말 장치는 동적 생체 데이터를 획득하고, 획득한 동적 생체 데이터를 왜곡하여 비식별화할 수 있다. 단말 장치는 비식별화한 동적 생체 데이터를 서버(110)로 전송한다. 일 실시예에서, 단말 장치는 해당 장치에 포함된 카메라, 센서 등을 이용하여 사용자의 움직임을 직접 캡쳐하고 감지할 수도 있고, 웨어러블 디바이스(120)와 같은 다른 동적 생체 데이터 획득 장치로부터 사용자의 동적 생체 데이터를 수신할 수도 있다. 나아가, 획득한 동적 생체 데이터를 비식별화 하지 않고 바로 서버(110)로 전송할 수도 있다.
동적 생체 데이터 처리 장치(150)는 같이 동적 생체 데이터의 획득 및/또는 비식별화를 전담으로 하는 장치이다. 동적 생체 데이터 수집 장치(150)는 해당 장치에 포함된 카메라, 센서 등을 이용하여 사용자의 움직임을 직접 캡쳐하고 감지할 수도 있고, 웨어러블 디바이스(120)와 같은 다른 동적 생체 데이터 획득 장치로부터 사용자의 동적 생체 데이터를 수신할 수도 있다. 나아가, 수집한 동적 생체 데이터를 비식별화하여 서버(110)로 전송할 수도 있고, 비식별화 하지 않고 바로 서버(110)로 전송할 수도 있다.
서버(110)는 또다른 서버(160)로부터 동적 생체 데이터를 수신할 수도 있고, 또다른 서버(160)를 통해 비식별화된 동적 생체 데이터를 바탕으로 서비스를 제공할 수도 있다. 또한, 서버(110)는 동적 생체 데이터의 수집 및 비식별화와 관계없이, 비식별화된 동적 생체 데이터를 바탕으로 서비스를 제공받는 장치(170)와 연결될 수도 있다.
도 1에 도시한 시스템은 하나의 실시예에 불과하며, 이에 한정되지 않고 다양하게 시스템을 구성할 수 있다.
도 3은 일 실시예에 따른 전자 장치의 동작 방법을 나타내는 순서도이다.
먼저, 310 단계에서, 전자 장치는 사용자의 움직임에 대한 동적 생체 데이터를 획득한다. 동적 생체 데이터는 특정 사용자를 식별할 수 있는 사용자의 움직임과 관련된 데이터로, 신체 적어도 일부의 움직임, 특정 동작 등에 대한 생체 데이터를 의미한다. 예를 들어, 동적 생체 데이터는 얼굴 표정, 손의 움직임, 손가락의 움직임, 몸체의 움직임, 머리의 움직임, 다리의 움직임, 걸음걸이 등을 포함할 수 있다. 걸음걸이의 경우, 보폭(step length), 활보 거리(stride length), 보간(stride width), 케이던스(cadence), 속도(speed), dynamic base, 진행선(progression line), 발 각도(foot angle), 동적 베이스(dynamic base), 엉덩이 각도(hip angle), 스쿼트 성능(squat performance) 등은 특정 사용자를 식별하기 위한 파라미터로 사용될 수 있다.
일 실시예에서, 전자 장치는 외부 장치로부터 해당 외부 장치에서 획득한 동적 생체 데이터를 수신할 수 있다. 다시 말해, 전자 장치는 단순히 동적 생체 데이터를 수집하는 역할을 수행하고, 실제 동적 생체 데이터는 다른 장치에서 측정되어 전자 장치로 전송될 수 있다. 일 실시예에서, 이러한 외부 장치는 헤드 마운티드 디스플레이, 스마트 와치, 스마트 밴드 등과 같은 웨어러블 디바이스 일 수 있다. 웨어러블 디바이스는 해당 디바이스에 포함된 카메라, 센서 등을 이용하여 사용자의 동적 생체 데이터를 측정하여 전자 장치로 전송할 수 있다. 일 실시예에서, 이러한 외부 장치는 전자 장치와 별개로 동작할 수도 있고, 전자 장치와 연결되어 동작할 수도 있다.
일 실시예에서, 전자 장치는 카메라, 센서 등과 같은 동적 생체 데이터 획득 장치를 포함하고, 직접 동적 생체 데이터를 측정하여 획득할 수 있다. 예를 들어, 전자 장치는 카메라를 이용하여 사용자의 움직임을 캡쳐하고 동적 생체 데이터를 획득할 수 있다. 또한, 전자 장치는 자이로 센서, GPS 센서 등과 같은 센서를 이용하여 사용자의 움직임을 센싱하고 동적 생체 데이터를 획득할 수도 있다.
도 4 및 도 5를 참조하여, 동적 생체 데이터 획득 과정을 설명하도록 한다.
도 4는 일 실시예에 따른 동적 생체 데이터 획득 방법을 나타내는 도면이다.
도 4를 참조하면, 전자 장치는 카메라(410) 및 웨어러블 디바이스(420, 430)를 이용하여 사용자(401)의 동적 생체 데이터를 획득할 수 있다.
일 실시예에서, 전자 장치는 카메라(410)를 통해 사용자(401)의 움직임을 캡쳐할 수 있다. 도 4에서는 하나의 카메라만을 도시하였으나, 둘 이상의 카메라를 다양한 위치에 배치하여 사용자의 동적 생체 데이터를 획득할 수도 있다.
일 실시예에서, 전자 장치는 웨어러블 디바이스(420, 430)를 이용하여 사용자(401)의 움직임을 센싱하고 동적 생체 데이터를 획득할 수 있다. 도 4에서는 웨어러블 디바이스로 스마트 와치(420) 및 헤드-마운티드 디스플레이(430)를 도시하고 있지만, 이는 하나의 예시에 불과하며, 이에 한정되지 않고 다양한 웨어러블 디바이스를 사용하여 사용자의 동적 생체 데이터를 획득할 수 있다. 예를 들어, 스마트 의복(smart clothes)을 이용하여 사용자(401)의 동적 생체 데이터를 획득할 수도 있다.
나아가, 도 4에 도시하지는 않았으나, 또다른 장치를 이용하여 사용자의 동적 생체 데이터를 획득할 수도 있다. 예를 들어, 움직임 감지 레이더 모듈 등을 이용하여 사용자의 움직임을 센싱하고 동적 생체 데이터를 획득할 수도 있다.
도 5(a) 및 5(b)는 다른 일 실시예에 따라 동적 생체 데이터 획득 방법을 나타내는 도면이다.
도 5(a)는 사용자의 실제 움직임을 시간에 따라 캡쳐한 도면이다. 위에서 설명한 것과 같이 전자 장치는 카메라나 웨어러블 디바이스 등을 이용하여 사용자의 움직임을 캡쳐하거나 센싱하여 사용자의 동적 생체 데이터를 획득할 수 있다.
도 5(b)는 획득한 사용자의 동적 생체 데이터를 바탕으로 사용자의 움직임을 모델링(skeleton modeling) 한 이미지이다. 도 (b)를 참조하면 각 시점(t1, t2, t3, t4, t5, t6)에 따른 사용자의 실제 오른쪽 무릎 각도를 획득할 수 있다. 또한, 이에 한정되지 않고 다양한 동적 생체 데이터를 획득할 수 있다. 예를 들어, 도 5(b)의 네번째 이미지와 같이 오른쪽 팔꿈치의 각도를 획득할 수도 있다.
다시 도 3의 설명으로 돌아가면,
320 단계에서, 전자 장치는 동적 생체 데이터를 왜곡하여 비식별화 한다. 비식별화(de-identification)는 데이터에서 식별자를 제거하여, 데이터를 바탕으로 개인의 식별이 어렵거나 불가능한 상태를 의미한다.
일 실시예에서, 전자 장치는 동적 생체 데이터의 값을 변형하여 데이터를 왜곡한다. 이때, 전자 장치는 동적 생체 데이터의 값을 시간에 따라 다르게 변형할 수 있다. 도 6(a) 및 도 6(b)를 참조하여 동적 생체 데이터를 왜곡하여 비식별화하는 과정을 설명한다. 도 6(a) 및 도 6(b)는 도 5(a) 및 도 5(b)에서 획득한 사용자의 동적 생체 데이터를 비식별화하는 과정을 나타내고 있다.
도 6(a) 및 도 6(b)는 일 실시예에 따라 시간에 따른 동적 생체 데이터의 비식별화를 나타내는 표 및 그래프이다.
도 6(a) 및 도 6(b)를 참조하면, 일 실시예에서, 각 시점(t1, t2, t3, t4, t5, t6) 별로 변형 정도가 달라질 수 있다. 예를 들어, t1 에서는 오른쪽 무릎 각도를 +13 만큼 변형하였으나 t3 에서는 -5 만큼 변형하였다.
일 실시예에 따르면 동적 생체 데이터의 변형 정도를 달리하여 비식별화 정도를 높일 수 있다. 보다 구체적으로, 동적 생체 데이터를 일정한 규칙에 따라 변형시키는 것이 아니라, 비규칙적으로 변형시킴으로써 사용자를 식별하기 어려워진다.
도 6에서 시간에 따라 동적 생체 데이터의 변형 정도를 달리하는 것은 일 실시예에 불과하고, 다른 파라미터들을 바탕으로 동적 생체 데이터의 변형 정도를 달리하는 것도 가능하다. 예를 들어, 동적 생체 데이터 변형 함수를 생성하고, 생성한 함수에 따라 동적 생체 데이터의 변형 정도를 달리할 수도 있다.
도 7은 비식별화된 동적 생체 데이터를 바탕으로 사용자의 움직임을 모델링한 도면이다.
도 7을 참조하면, 도 5(b)에 도시된 동적 생체 데이터가 도 6에 도시된 표 및 그래프에 따라 변형된 것을 알 수 있다. 예를 들어, 도 5(b)에 도시된 동적 생체 데이터에서 t1 시점의 오른쪽 무릎 각도는 65° 였으나, 도 7에 도시된 비식별화된 생체 데이터에서 t1 시점의 오른쪽 무릎 각도는 78°이다.
일 실시예에 따르면, 이와 같이 비식별화 과정에서 사용자를 식별할 수 있는 고유 식별자들을 왜곡시킴으로써, 다른 사용자들이 움직임만을 바탕으로 사용자를 식별할 수 없도록 할 수 있다.
다만, 도 5 내지 7에서 도시하는 비식별화 과정은 하나의 예시에 불과하며, 이에 한정되지 않고 다양하게 적용할 수 있다. 예를 들어, 무릎 각도가 아닌 다른 파라미터에 대한 비식별화를 수행할 수도 있고, 데이터 변형 정도를 달리할 수도 있으며, 다른 종류의 동적 생체 데이터를 변형하는 것도 가능하다.
다시 도 3의 설명으로 돌아가면,
일 실시예에서, 전자 장치는 비식별화된 동적 생체 데이터를 바탕으로 움직임을 복원 시 상기 사용자를 식별할 수 없으나, 움직임이 부자연스럽지 않을 정도로 동적 생체 데이터의 값을 변형할 수 있다. 일 실시예에서, 전자 장치는 동적 생체 데이터 획득 단계의 오차율보다 큰 값으로 상기 동적 생체 데이터 값을 변형할 수 있다. 또한, 비식별화된 동적 생체 데이터를 바탕으로 사용자의 움직임을 복원 시, 복원된 사용자의 움직임에 연속성이 유지되도록 동적 생체 데이터 값을 변형할 수 있다. 나아가, 전자 장치는 동적 생체 데이터의 변형 정도를 조절하여 동적 생체 데이터의 비식별화 정도를 조절할 수도 있다. 도 8을 참조하여 설명한다.
도 8은 일 실시예에 따라 동적 생체 데이터의 변형 정도를 선택하는 방법을 나타내는 도면이다.
위에서 설명한 것과 같이 전자 장치는 동적 생체 데이터의 변형 정도를 다르게 조절할 수 있다.
도 8을 참조하면, 육안으로 보는 경우(810), 동적 생체 데이터의 변형 정도가 높으면 다른 모든 사용자들이 변형된 동적 생체 데이터를 바탕으로 복원된 움직임이 부자연스럽다고 느낄 수 있다. 또한, 동적 생체 데이터의 변형 정도가 낮으면 다른 모든 사용자들이 변형된 동적 생체 데이터를 바탕으로 복원된 움직임이 자연스럽다고 느낄 수 있다. 나아가, 동적 생체 데이터가 일정 수준 이상으로 변형되는 경우, 모든 사용자는 아니지만, 일부 사용자들이 변형된 동적 생체 데이터를 바탕으로 복원된 움직임이 부자연스럽다고 느낄 수 있다. 사용자들은 움직임에 연속성이 떨어지는 경우, 해당 움직임이 부자연스럽다고 느낄 수 있다. 따라서, 전자 장치는 비식별화된 동적 생체 데이터를 바탕으로 사용자의 움직임을 복원 시, 복원된 사용자의 움직임에 연속성이 유지되도록 동적 생체 데이터 값을 변형할 수 있다.
다른 사용자들이 움직임이 부자연스럽다고 느끼는 경우, 동적 생체 데이터가 변형되었다는 것을 알 수 있고, 사용자가 느끼는 서비스 만족도 역시 떨어질 수 있어 적절한 변형 정도의 선택이 필요하다.
동적 생체 데이터 분석 툴 등으로 사용자의 움직임을 분석하는 경우(820), 변형 정도가 너무 낮으면, 다시 말해, 임계값 이하인 경우, 움직임을 바탕으로 사용자를 식별하는 것이 가능하다. 동적 생체 데이터 획득 시, 사용하는 장치에 따라 오차가 있을 수 있다. 이러한 오차 범위 내에서는 데이터 값이 달라지더라도 특정 사용자를 식별할 수 있다. 따라서, 전자 장치는 동적 생체 데이터 획득 단계의 오차율보다 큰 값으로 동적 생체 데이터 값을 변형할 수 있다.
위에서 설명한 것과 같이 동적 생체 데이터의 변형 정도가 높으면 복원된 움직임으로부터 사용자를 식별하기 어렵지만 복원된 움직임이 부자연스러워지고, 동적 생체 데이터의 변형 정도가 낮으면, 복원된 움직임은 자연스러우나, 복원된 움직임으로부터 사용자를 식별할 가능성이 높아진다. 따라서, 전자 장치는, 다른 사용자들이 변형된 동적 생체 데이터를 바탕으로 복원된 움직임을 보았을 때, 자연스럽다고 느껴져야 하면서도 복원된 움직임으로부터 사용자를 식별할 수 일을 정도로 동적 생체 데이터를 변형하는 것이 바람직하다.
다시 도 3의 설명으로 돌아가면,
일 실시예에서, 전자 장치는 사용자로부터 비식별화 수행 여부에 대한 입력을 수신할 수 있고, 사용자의 입력에 따라 비식별화를 수행하거나 수행하지 않을 수 있다. 보다 구체적으로, 전자 장치는 사용자로부터 비식별화를 수행할 것을 지시하는 입력을 수신하는 경우, 사용자의 동적 생체 데이터를 비식별화할 수 있다. 또한, 사용자로부터 비식별화를 수행하지 않을 것을 지시하는 입력을 수신하거나 또는 사용자로부터 비식별화에 여부에 대한 사용자 입력이 없는 경우, 동적 생체 데이터를 비식별화하지 않고 서버로 전송할 수 있다.
일 실시예에 따르면, 전자 장치는 사용자의 선택에 따라 비식별화를 수행할 수 있다.
다음으로, 330 단계에서, 전자 장치는 비식별화된 동적 생체 데이터를 서버로 전송한다. 일 실시예에서, 비식별화된 동적 생체 데이터를 바탕으로 사용자의 왜곡된 움직임을 표시하는 서비스를 제공할 수 있다. 위에서 설명한 것과 같이 이러한 서비스는 가상 환경에서 다수의 사용자가 아바타를 이용하여 상호작용하는 서비스일 수 있다. 도 9를 참조하여 설명한다.
도 9는 일 실시예에 따라 비식별화된 동적 생체 데이터를 바탕으로 사용자의 왜곡된 움직임을 표시하는 과정을 나타내는 도면이다.
전자 장치는 도 4에서 도시한 것과 같이 사용자(401)의 동적 생체 데이터를 획득한다. 그 후, 전자 장치는 획득한 동적 생체 데이터를 왜곡하여 비식별화 한다. 도 9(b)는 획득한 동적 생체 데이터를 비식별화 하여 모델링한 이미지이다. 이와 같이 비식별화된 동적 생체 데이터는 서버로 전송되며, 서버는 비식별화된 동적 생체 데이터를 바탕으로 가상환경에 사용자의 아바타를 표시(920)할 수 있다.
다시 도 3의 설명으로 돌아오면,
일 실시예에서, 서비스를 제공하는 서버는 수신한 동적 생체 데이터가 비식별화된 동적 생체 데이터인지 여부와 관계없이 수신한 동적 생체 데이터를 이용하여 서비스를 제공한다.
나아가, 일 실시예에서, 전자 장치는 다른 허용된 장치가 비식별화된 동적 생체 데이터를 복원할 수 있도록 동적 생체 데이터를 변형할 수도 있다. 예를 들어, 전자 장치는 다른 허용된 장치와 약속된 방법으로 비식별화를 수행할 수도 있고, 비식별화를 복원할 수 있는 키(key)를 생성하여 전송할 수도 있다.
일 실시예에 따르면, 허용된 장치는 사용자의 변형된 움직임이 아닌 원래 그대로의 움직임을 확인할 수 있다.
또한, 일 실시예에서, 서버는 비식별화된 동적 생체 데이터를 이용하여 인증 서비스를 제공할 수도 있다. 위에서 설명한 것과 같이 사용자는 비식별화 정도를 선택할 수 있고 사용자 입력에 따라 비식별화 수행여부를 선택할 수도 있다. 사용자는 전자 장치를 이용하여 특정한 동작에 대해서 특정한 비식별화 정도를 선택하여 해당 동작에 대한 동적 생체 데이터를 비식별화할 수 있다. 이렇게 비식별화된 동적 데이터를 사용자 계정에 대한 인증 수단으로 서버에 등록할 수 있다. 인증이 필요한 경우, 사용자는 해당 동작을 취하면서 등록 당시의 비식별화 정도를 선택하여 해당 동작에 대한 비식별화를 수행할 수 있다. 그 후, 비식별화된 동적 데이터를 서버로 전송하여 사용자 인증을 수행할 수 있다.
일 실시예에 따르면, 인증 수단으로 사용되는 동적 생체 데이터는 비식별화되어 있다. 따라서, 사용자의 동작이 사용자의 의사에 반하여 다른 사람들에게 노출되더라도 해당 동작만으로는 사용자 인증을 수행할 수 없어 개인 정보를 보호할 수 있다.
지금까지는 일 실시예에 따른 전자 장치의 동작 방법에 대해서 설명하였다. 아래에서는 전자 장치의 구성을 보다 구체적으로 설명하도록 한다. 위에서 설명한 것과 중복되는 내용들은 간단히 설명하도록 한다.
도 10은 일 실시예에 따른 전자 장치의 구성을 나타내는 블럭도이다.
도 10을 참조하면, 전자 장치(1000)는 통신부(1010), 메모리(1020) 및 프로세서(1030)를 포함한다.
통신부(1010)는, 다른 장치 또는 네트워크와 유무선 통신을 수행할 수 있다. 이를 위해, 통신부(1010)는 다양한 유무선 통신 방법 중 적어도 하나를 지원하는 통신 모듈을 포함할 수 있다. 예를 들어, 통신 모듈은 칩셋(chipset)의 형태일 수도 있다.
통신부(1010)는 전자 장치(1000)의 외부에 위치한 외부 장치와 연결되어 신호 또는 데이터를 송수신할 수 있다. 전자 장치(1000)는 통신부(1010)를 통해 외부 장치와 연결되어, 외부 장치로부터 수신된 신호 또는 데이터를 프로세서(1030)로 전달하거나, 또는 프로세서(1030)에서 발생된 신호 또는 데이터를 외부 장치로 전송할 수 있다. 예를 들어, 통신부(1010)는 웨어러블 디바이스 등으로부터 동적 생체 데이터를 수신하면, 프로세서(1030)는 수신한 동적 생체 데이터를 비식별화할 수 있다.
메모리(1020)에는 어플리케이션과 같은 프로그램 및 파일 등과 같은 다양한 종류의 데이터가 설치 및 저장될 수 있다. 프로세서(1030)는 메모리(1020)에 저장된 데이터에 접근하여 이를 이용하거나, 또는 새로운 데이터를 메모리(1020)에 저장할 수 있다. 또한, 프로세서(1030)는 메모리(1020)에 설치된 프로그램을 실행할 수도 있다.
일 실시예에서 메모리에는 전자 장치의 동작을 위한 프로그램이 저장될 수 있다.
프로세서(1030)는 전자 장치(1000)의 전반적인 동작을 제어하며, 특히, 전자 장치(1000)가 동적 생체 데이터를 왜곡하여 비식별화하는 과정을 제어할 수 있다. 또한, 프로세서(1030)는 전자 장치(1000)의 외부에서부터 입력되는 신호 또는 데이터를 저장하거나, 전자 장치(1000)에서 수행되는 다양한 작업에 대응되는 저장 영역으로 사용되는 램, 주변기기의 제어를 위한 제어 프로그램이 저장된 롬(ROM) 등을 사용하여 동작할 수 있다. 프로세서는 코어(core)와 GPU를 통합한 SoC(System On Chip)로 구현될 수 있다. 또한, 프로세서는 복수의 프로세서를 포함할 수 있다.
일 실시예에서 프로세서(1030)는 메모리(1020)에 저장된 프로그램을 실행하여, 사용자의 움직임에 대한 동적 생체 데이터를 획득하고, 동적 생체 데이터를 왜곡하여 비식별화하며, 비식별화된 동적 생체 데이터를 서버로 전송할 수 있다. 서버는 비식별화된 동적 생체 데이터를 바탕으로 사용자의 왜곡된 움직임을 표시하는 서비스를 제공할 수 있다.
일 실시예에서 프로세서(1030)는 동적 생체 데이터의 값을 변형할 수 있다. 프로세서(1030)는 비식별화된 동적 생체 데이터를 바탕으로 움직임을 복원 시, 사용자를 식별할 수 없으나 움직임이 부자연스럽지 않을 정도로 동적 생체 데이터의 값을 변형할 수 있다. 또한, 프로세서(1030)는 동적 생체 데이터 획득 시의 오차율보다 큰 값으로 동적 생체 데이터 값을 변형할 수 있고, 비식별화된 동적 생체 데이터를 바탕으로 사용자의 움직임을 복원 시, 복원된 사용자의 움직임에 연속성이 유지되도록 동적 생체 데이터 값을 변형할 수도 있다. 나아가, 프로세서(1030)는 생체 데이터의 값을 시간에 따라 다르게 변형할 수 있다.
전자 장치(1000)는 도 10에서 도시한 구성들 외에 추가적인 구성들을 포함할 수 있다. 도 11을 참조하여 설명하도록 한다.
도 11은 다른 일 실시예에 따른 전자 장치의 구성을 나타내는 블럭도이다.
도 11을 참조하면 전자 장치(1100)는 통신부(1110), 메모리(1120), 입력부(1130) 및 프로세서(1140)를 포함한다. 동적 생체 데이터 획득 장치(1150)는 전자 장치(1100)에 연결된 외부 장치일 수도 있고, 전자 장치(1100)에 포함될 수도 있다. 도 11에서 도시하는 통신부(1110), 메모리(1120) 및 프로세서(1140)는 도 10에서 도시하는 통신부(1010), 메모리(1020) 및 프로세서(1030)와 동일한 구성이다.
입력부(1130)는 사용자로부터 입력을 수신한다. 입력부(1130)는, 예를 들어, 키보드, 물리 버튼, 터치 스크린, 카메라 또는 마이크 등과 같이 다양한 형태의 사용자 입력을 수신할 수 있는 장치들을 포함할 수 있다. 다만, 이에 한정되지 않고 입력부(1130)는 다양한 입력을 지원하는 장치를 포함할 수 있다.
일 실시예에서 입력부(1130)는 사용자로부터 비식별화 수행 여부에 대한 입력을 수신할 수 있다.
일 실시예에서 프로세서(1140)는 도 10에서 설명한 동작 이외에도 입력부(1130)를 통해 사용자로부터 비식별화를 수행할 것을 지시하는 입력을 수신하는 경우, 사용자의 동적 생체 데이터를 비식별화할 수 있다. 또한, 프로세서(1140)는 입력부(1130)를 통해 사용자로부터 비식별화를 수행하지 않을 것을 지시하는 입력을 수신하거나 또는 사용자로부터 비식별화에 여부에 대한 사용자 입력이 없는 경우, 동적 생체 데이터를 비식별화하지 않고 서버로 전송할 수도 있다.
동적 생체 데이터 획득 장치(1150)는 동적 생체 데이터를 획득한다. 일 실시예에서 동적 생체 데이터 획득 장치(1150)는 카메라부(1151)를 포함할 수 있다. 또한, 동적 생체 데이터 획득 장치(1150)는 센서부(1152)를 포함할 수도 있다.
일 실시예에서, 동적 생체 데이터 획득 장치(1150)는 전자 장치(1100)에 연결된 외부 장치일 수도 있고, 전자 장치(1100)에 포함될 수도 있다. 일 실시예에서 동적 생체 데이터 획득 장치(1150)가 전자 장치(1100)에 연결된 외부 장치인 경우, 프로세서(1140)는 동적 생체 데이터 획득 장치(1150)로부터 동적 생체 데이터 획득 장치(1150)에서 획득한 동적 생체 데이터를 수신할 수 있다. 동적 생체 데이터 획득 장치(1150)가 전자 장치(1100)에 포함된 장치인 경우, 프로세서(1140)는 직접 동적 생체 데이터 획득 장치(1150)를 통해 동적 생체 데이터를 획득할 수 있다. 보다 구체적으로, 프로세서(1140)는 카메라부(1151)를 통해 사용자의 움직임을 캡쳐할 수 있다. 또한, 프로세서(1140)는 센서부(1152)를 통해 사용자의 움직임을 센싱할 수도 있다.
전자 장치(1100)는 도 10 및 도 11에서 도시되지 않은 다른 구성요소들을 더 포함할 수도 있다. 예를 들어, 전자 장치(1100)는 디스플레이부를 더 포함하고, 서버로부터 서비스를 제공받아 사용자의 왜곡된 움직임을 표시할 수도 있다.
지금까지 전자 장치(1000, 1100)에서 동적 생체 데이터에 대한 비식별화가 이루어지는 경우에 전자 장치(1000, 1100)와 그 동작 방법에 대해서 설명하였다. 아래에서는 서버에서 동적 생체 데이터에 대한 비식별화가 이루어지는 경우, 서버와 그 동작 방법에 대해서 설명하도록 한다. 위에서 설명한 것과 중복되는 내용들은 간단히 설명하도록 한다.
도 12는 일 실시예에 따른 서버의 동작 방법을 나타내는 순서도이다.
먼저, 1210 단계에서, 서버는 사용자의 움직임에 대한 동적 생체 데이터를 수신한다.
그 후, 1220 단계에서, 서버는 동적 생체 데이터를 왜곡하여 비식별화 한다. 일 실시예에서, 서버는 동적 생체 데이터의 값을 변형할 수 있다. 서버는 비식별화된 동적 생체 데이터를 바탕으로 움직임을 복원 시, 사용자를 식별할 수 없으나 움직임이 부자연스럽지 않을 정도로 동적 생체 데이터의 값을 변형할 수 있다. 또한, 서버는 동적 생체 데이터 획득 시의 오차율보다 큰 값으로 동적 생체 데이터 값을 변형할 수 있고, 비식별화된 동적 생체 데이터를 바탕으로 사용자의 움직임을 복원 시, 복원된 사용자의 움직임에 연속성이 유지되도록 동적 생체 데이터 값을 변형할 수도 있다. 나아가, 서버는 생체 데이터의 값을 시간에 따라 다르게 변형할 수 있다.
나아가, 1220 단계에서, 서버는 비식별화된 동적 생체 데이터를 바탕으로 서비스를 제공한다. 서버는 비식별화된 동적 생체 데이터를 바탕으로 상기 사용자의 왜곡된 움직임을 표시하는 서비스를 제공할 수 있다.
도 13은 일 실시예에 따른 서버의 구성을 나타내는 블럭도이다.
도 13을 참조하면, 서버(1300)는 통신부(1310), 메모리(1320) 및 프로세서(1330)를 포함한다.
통신부(1310)는, 다른 장치 또는 네트워크와 유무선 통신을 수행할 수 있다. 이를 위해, 통신부(1310)는 다양한 유무선 통신 방법 중 적어도 하나를 지원하는 통신 모듈을 포함할 수 있다. 예를 들어, 통신 모듈은 칩셋(chipset)의 형태일 수도 있다.
통신부(1310)는 서버(1300)의 외부에 위치한 외부 장치와 연결되어 신호 또는 데이터를 송수신할 수 있다. 서버(1300)는 통신부(1310)를 통해 외부 장치와 연결되어, 외부 장치로부터 수신된 신호 또는 데이터를 프로세서(1330)로 전달하거나, 또는 프로세서(1330)에서 발생된 신호 또는 데이터를 외부 장치로 전송할 수 있다. 예를 들어, 통신부(1310)는 웨어러블 디바이스 등으로부터 동적 생체 데이터를 수신하면, 프로세서(1330)는 수신한 동적 생체 데이터를 비식별화할 수 있다.
메모리(1320)에는 어플리케이션과 같은 프로그램 및 파일 등과 같은 다양한 종류의 데이터가 설치 및 저장될 수 있다. 프로세서(1330)는 메모리(1320)에 저장된 데이터에 접근하여 이를 이용하거나, 또는 새로운 데이터를 메모리(1320)에 저장할 수 있다. 또한, 프로세서(1330)는 메모리(1320)에 설치된 프로그램을 실행할 수도 있다.
일 실시예에서 메모리에는 전자 장치의 동작을 위한 프로그램이 저장될 수 있다.
프로세서(1330)는 서버(1300)의 전반적인 동작을 제어하며, 특히, 서버(1300)가 동적 생체 데이터를 왜곡하여 비식별화하는 과정을 제어할 수 있다. 또한, 서버(1300)는 서버(1300)의 외부에서부터 입력되는 신호 또는 데이터를 저장하거나, 서버(1300)에서 수행되는 다양한 작업에 대응되는 저장 영역으로 사용되는 램, 주변기기의 제어를 위한 제어 프로그램이 저장된 롬(ROM) 등을 사용하여 동작할 수 있다. 프로세서는 코어(core)와 GPU를 통합한 SoC(System On Chip)로 구현될 수 있다. 또한, 프로세서는 복수의 프로세서를 포함할 수 있다.
일 실시예에서 프로세서(1330)는 메모리(1320)에 저장된 프로그램을 실행하여, 사용자의 움직임에 대한 동적 생체 데이터를 획득하고, 동적 생체 데이터를 왜곡하여 비식별화하며, 비식별화된 동적 생체 데이터를 바탕으로 서비스를 제공할 수 있다.
일 실시예에서 프로세서(1330)는 동적 생체 데이터의 값을 변형할 수 있다. 프로세서(1330)는 비식별화된 동적 생체 데이터를 바탕으로 움직임을 복원 시, 사용자를 식별할 수 없으나 움직임이 부자연스럽지 않을 정도로 동적 생체 데이터의 값을 변형할 수 있다. 또한, 프로세서(1330)는 동적 생체 데이터 획득 시의 오차율보다 큰 값으로 동적 생체 데이터 값을 변형할 수 있고, 비식별화된 동적 생체 데이터를 바탕으로 사용자의 움직임을 복원 시, 복원된 사용자의 움직임에 연속성이 유지되도록 동적 생체 데이터 값을 변형할 수도 있다. 나아가, 프로세서(1330)는 생체 데이터의 값을 시간에 따라 다르게 변형할 수 있다.
한편, 상술된 실시예들은 컴퓨터에 의하여 실행 가능한 명령어 및 데이터를 저장하는 컴퓨터로 읽을 수 있는 기록매체의 형태로 구현될 수 있다. 상기 명령어 및 데이터 중 적어도 하나는 프로그램 코드의 형태로 저장될 수 있으며, 프로세서에 의해 실행되었을 때, 소정의 프로그램 모듈을 생성하여 소정의 동작을 수행할 수 있다.
컴퓨터로 읽을 수 있는 기록매체란, 예를 들어 하드디스크 등과 같은 마그네틱 저장매체, CD 및 DVD 등과 같은 광학적 판독매체 등을 의미할 수 있으며, 네트워크를 통해 접근 가능한 서버에 포함되는 메모리를 의미할 수도 있다. 예를 들어, 컴퓨터로 읽을 수 있는 기록매체는 전자 장치 또는 서버의 메모리가 될 수도 있다. 또한, 전자 장치 또는 서버와 네트워크를 통하여 연결된 단말, 서버 등에 포함되는 메모리가 될 수도 있다.
이상과 첨부된 도면을 참조하여 실시예를 설명하였지만, 일 실시예가 속하는 기술분야에서 통상의 지식을 가진 자는 일 실시예가 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다.
1000: 전자 장치
1010: 통신부
1020: 메모리
1030: 프로세서

Claims (40)

  1. 사용자의 움직임에 대한 동적 생체 데이터(dynamic biometric data)를 획득하는 단계;
    비식별화된 동적 생체 데이터를 바탕으로 움직임을 복원 시, 상기 사용자를 식별할 수 없으나 상기 복원된 사용자의 움직임이 부자연스럽지 않을 정도로 상기 동적 생체 데이터의 값을 변형하여, 상기 동적 생체 데이터를 비식별화(de-identification)하는 단계; 및
    상기 비식별화된 동적 생체 데이터를 서버로 전송하는 단계를 포함하는 것을 특징으로 하는 전자 장치의 동작 방법.
  2. 삭제
  3. 삭제
  4. 제1항에 있어서,
    상기 동적 생체 데이터를 비식별화하는 단계는,
    상기 동적 생체 데이터 획득 단계의 오차율보다 큰 값으로 상기 동적 생체 데이터의 값을 변형하는 것을 특징으로 하는 전자 장치의 동작 방법.
  5. 제1항에 있어서,
    상기 동적 생체 데이터를 비식별화하는 단계는,
    상기 복원된 사용자의 움직임에 연속성이 유지되도록 상기 동적 생체 데이터의 값을 변형하는 것을 특징으로 하는 전자 장치의 동작 방법.
  6. 제1항에 있어서,
    상기 동적 생체 데이터를 비식별화하는 단계는,
    상기 동적 생체 데이터의 값을 시간에 따라 다르게 변형하는 것을 특징으로 하는 전자 장치의 동작 방법.
  7. 제1항에 있어서,
    상기 사용자로부터 비식별화 수행 여부에 대한 입력을 수신하는 단계를 더 포함하고,
    상기 동적 생체 데이터를 비식별화하는 단계는,
    상기 사용자로부터 비식별화를 수행할 것을 지시하는 입력을 수신하는 경우, 상기 사용자의 동적 생체 데이터를 비식별화하는 단계를 포함하는 것을 특징으로 하는 전자 장치의 동작 방법.
  8. 제7항에 있어서,
    상기 사용자로부터 비식별화를 수행하지 않을 것을 지시하는 입력을 수신하거나 또는 상기 사용자로부터 비식별화에 여부에 대한 사용자 입력이 없는 경우, 상기 동적 생체 데이터를 비식별화하지 않고 상기 서버로 전송하는 단계를 더 포함하는 것을 특징으로 하는 전자 장치의 동작 방법.
  9. 제1항에 있어서,
    상기 사용자의 움직임에 대한 동적 생체 데이터를 획득하는 단계는,
    외부 장치로부터 상기 외부 장치에서 획득한 상기 동적 생체 데이터를 수신하는 단계를 포함하는 것을 특징으로 하는 전자 장치의 동작 방법.
  10. 제1항에 있어서,
    상기 사용자의 움직임에 대한 동적 생체 데이터를 획득하는 단계는,
    상기 사용자의 움직임을 캡쳐하는 단계를 포함하는 것을 특징으로 하는 전자 장치의 동작 방법.
  11. 제1항에 있어서,
    상기 사용자의 움직임에 대한 동적 생체 데이터를 획득하는 단계는,
    상기 사용자의 움직임을 센싱하는 단계를 포함하는 것을 특징으로 하는 전자 장치의 동작 방법.
  12. 제1항에 있어서,
    상기 서버는,
    상기 비식별화된 동적 생체 데이터를 바탕으로 상기 사용자의 왜곡된 움직임을 표시하는 서비스를 제공하는 것을 특징으로 하는 전자 장치의 동작 방법.
  13. 통신부;
    전자 장치의 동작을 위한 프로그램을 저장하는 메모리; 및
    상기 프로그램을 실행함으로써, 사용자의 움직임에 대한 동적 생체 데이터(dynamic biometric data)를 획득하고, 비식별화된 동적 생체 데이터를 바탕으로 움직임을 복원 시, 상기 사용자를 식별할 수 없으나 상기 복원된 사용자의 움직임이 부자연스럽지 않을 정도로 상기 동적 생체 데이터의 값을 변형하여 상기 동적 생체 데이터를 비식별화(de-identification)하며, 상기 비식별화된 동적 생체 데이터를 서버로 전송하는 프로세서를 포함하는 것을 특징으로 하는 전자 장치.
  14. 삭제
  15. 삭제
  16. 제13항에 있어서,
    상기 프로세서는,
    상기 동적 생체 데이터 획득 시의 오차율보다 큰 값으로 상기 동적 생체 데이터의 값을 변형하는 것을 특징으로 하는 전자 장치.
  17. 제13항에 있어서,
    상기 프로세서는,
    상기 복원된 사용자의 움직임에 연속성이 유지되도록 상기 동적 생체 데이터의 값을 변형하는 것을 특징으로 하는 전자 장치.
  18. 제13항에 있어서,
    상기 프로세서는,
    상기 동적 생체 데이터의 값을 시간에 따라 다르게 변형하는 것을 특징으로 하는 전자 장치.
  19. 제13항에 있어서,
    상기 사용자로부터 비식별화 수행 여부에 대한 입력을 수신하는 입력부를 더 포함하고,
    상기 프로세서는,
    상기 사용자로부터 비식별화를 수행할 것을 지시하는 입력을 수신하는 경우, 상기 사용자의 동적 생체 데이터를 비식별화하는 것을 특징으로 하는 전자 장치.
  20. 제19항에 있어서,
    상기 프로세서는,
    상기 사용자로부터 비식별화를 수행하지 않을 것을 지시하는 입력을 수신하거나 또는 상기 사용자로부터 비식별화에 여부에 대한 사용자 입력이 없는 경우, 상기 동적 생체 데이터를 비식별화하지 않고 상기 서버로 전송하는 것을 특징으로 하는 전자 장치.
  21. 제13항에 있어서,
    상기 프로세서는,
    외부 장치로부터 상기 외부 장치에서 획득한 상기 동적 생체 데이터를 수신하는 단계를 포함하는 것을 특징으로 하는 전자 장치.
  22. 제13항에 있어서,
    카메라부를 더 포함하고,
    상기 프로세서는,
    상기 카메라부를 통해 상기 사용자의 움직임을 캡쳐하는 것을 특징으로 하는 전자 장치.
  23. 제13항에 있어서,
    센서부를 더 포함하고,
    상기 프로세서는,
    상기 센서부를 통해 상기 사용자의 움직임을 센싱하는 것을 특징으로 하는 전자 장치.
  24. 제13항에 있어서,
    상기 서버는,
    상기 비식별화된 동적 생체 데이터를 바탕으로 상기 사용자의 왜곡된 움직임을 표시하는 서비스를 제공하는 것을 특징으로 하는 전자 장치.
  25. 사용자의 움직임에 대한 동적 생체 데이터를 수신하는 단계;
    비식별화된 동적 생체 데이터를 바탕으로 움직임을 복원 시, 상기 사용자를 식별할 수 없으나 상기 복원된 사용자의 움직임이 부자연스럽지 않을 정도로 상기 동적 생체 데이터의 값을 변형하여, 상기 동적 생체 데이터를 비식별화하는 단계;
    상기 비식별화된 동적 생체 데이터를 바탕으로 서비스를 제공하는 단계를 포함하는 것을 특징으로 하는 서버의 동작 방법.
  26. 삭제
  27. 삭제
  28. 제25항에 있어서,
    상기 동적 생체 데이터를 비식별화하는 단계는,
    상기 동적 생체 데이터 획득 단계의 오차율보다 큰 값으로 상기 동적 생체 데이터의 값을 변형하는 것을 특징으로 하는 서버의 동작 방법.
  29. 제25항에 있어서,
    상기 동적 생체 데이터를 비식별화하는 단계는,
    상기 복원된 사용자의 움직임에 연속성이 유지되도록 상기 동적 생체 데이터의 값을 변형하는 것을 특징으로 하는 서버의 동작 방법.
  30. 제25항에 있어서,
    상기 동적 생체 데이터를 비식별화하는 단계는,
    상기 동적 생체 데이터의 값을 시간에 따라 다르게 변형하는 것을 특징으로 하는 서버의 동작 방법.
  31. 제25항에 있어서,
    상기 비식별화된 동적 생체 데이터를 바탕으로 서비스를 제공하는 단계는,
    상기 비식별화된 동적 생체 데이터를 바탕으로 상기 사용자의 왜곡된 움직임을 표시하는 서비스를 제공하는 단계를 포함하는 것을 특징으로 하는 서버의 동작 방법.
  32. 통신부;
    서버의 동작을 위한 프로그램을 저장하는 메모리; 및
    상기 프로그램을 실행함으로써, 사용자의 움직임에 대한 동적 생체 데이터를 수신하고, 비식별화된 동적 생체 데이터를 바탕으로 움직임을 복원 시, 상기 사용자를 식별할 수 없으나 상기 복원된 사용자의 움직임이 부자연스럽지 않을 정도로 상기 동적 생체 데이터의 값을 변형하여 상기 동적 생체 데이터를 비식별화하며, 상기 비식별화된 동적 생체 데이터를 바탕으로 서비스를 제공하는 프로세서를 포함하는 것을 특징으로 하는 서버.
  33. 삭제
  34. 삭제
  35. 제32항에 있어서,
    상기 프로세서는,
    상기 동적 생체 데이터 획득 시의 오차율보다 큰 값으로 상기 동적 생체 데이터의 값을 변형하는 것을 특징으로 하는 서버.
  36. 제32항에 있어서,
    상기 프로세서는,
    상기 복원된 사용자의 움직임에 연속성이 유지되도록 상기 동적 생체 데이터의 값을 변형하는 것을 특징으로 하는 서버.
  37. 제32항에 있어서,
    상기 프로세서는,
    상기 동적 생체 데이터의 값을 시간에 따라 다르게 변형하는 것을 특징으로 하는 서버.
  38. 제32항에 있어서,
    상기 프로세서는,
    비식별화된 동적 생체 데이터를 바탕으로 상기 사용자의 왜곡된 움직임을 표시하는 서비스를 제공하는 것을 특징으로 하는 서버.
  39. 제1항 및 제4항 내지 제12항 중 어느 한 항의 전자 장치의 동작 방법 을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 비일시적 기록 매체.
  40. 제25항 및 제 28항 내지 제31항 중 어느 한 항의 서버의 동작 방법을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 비일시적 기록 매체.

KR1020160179311A 2016-12-26 2016-12-26 전자 장치 및 그 동작 방법 KR102337217B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020160179311A KR102337217B1 (ko) 2016-12-26 2016-12-26 전자 장치 및 그 동작 방법
PCT/KR2017/015419 WO2018124671A1 (en) 2016-12-26 2017-12-26 Electronic device and operation method thereof
US15/854,553 US10956604B2 (en) 2016-12-26 2017-12-26 Electronic device and operation method thereof
EP17889173.5A EP3545456A4 (en) 2016-12-26 2017-12-26 ELECTRONIC DEVICE AND METHOD OF OPERATION THEREFOR

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160179311A KR102337217B1 (ko) 2016-12-26 2016-12-26 전자 장치 및 그 동작 방법

Publications (2)

Publication Number Publication Date
KR20180075221A KR20180075221A (ko) 2018-07-04
KR102337217B1 true KR102337217B1 (ko) 2021-12-09

Family

ID=62630383

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160179311A KR102337217B1 (ko) 2016-12-26 2016-12-26 전자 장치 및 그 동작 방법

Country Status (4)

Country Link
US (1) US10956604B2 (ko)
EP (1) EP3545456A4 (ko)
KR (1) KR102337217B1 (ko)
WO (1) WO2018124671A1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SE543586C2 (en) * 2018-09-07 2021-04-06 Indivd Ab System and method for handling anonymous biometric and/or behavioural data
US10988115B2 (en) * 2019-02-11 2021-04-27 Ford Global Technologies, Llc Systems and methods for providing vehicle access using biometric data

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100826873B1 (ko) * 2006-09-07 2008-05-06 한국전자통신연구원 생체 인식 방법 및 이를 위한 장치
KR101434899B1 (ko) * 2012-03-23 2014-08-27 주식회사 제론헬스케어 일상 건강 정보 제공 시스템 및 일상 건강 정보 제공 방법

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7120607B2 (en) * 2000-06-16 2006-10-10 Lenovo (Singapore) Pte. Ltd. Business system and method using a distorted biometrics
JP2002259318A (ja) 2001-02-27 2002-09-13 Victor Co Of Japan Ltd 仮想現実空間での人物画像表示方法
US8625785B2 (en) * 2008-05-15 2014-01-07 Qualcomm Incorporated Identity based symmetric cryptosystem using secure biometric model
US10679749B2 (en) * 2008-08-22 2020-06-09 International Business Machines Corporation System and method for virtual world biometric analytics through the use of a multimodal biometric analytic wallet
US20100302138A1 (en) 2009-05-29 2010-12-02 Microsoft Corporation Methods and systems for defining or modifying a visual representation
US9781446B2 (en) * 2009-12-10 2017-10-03 Thomson Licensing Dtv Method for coding and method for decoding a block of an image and corresponding coding and decoding devices
US9007473B1 (en) * 2011-03-30 2015-04-14 Rawles Llc Architecture for augmented reality environment
US9106789B1 (en) 2012-01-20 2015-08-11 Tech Friends, Inc. Videoconference and video visitation security
US9268991B2 (en) * 2012-03-27 2016-02-23 Synaptics Incorporated Method of and system for enrolling and matching biometric data
US20140089673A1 (en) * 2012-09-25 2014-03-27 Aliphcom Biometric identification method and apparatus to authenticate identity of a user of a wearable device that includes sensors
US8934737B1 (en) * 2012-10-10 2015-01-13 General Electric Company System and method to de-identify an acquired file
WO2014153528A2 (en) * 2013-03-21 2014-09-25 The Trusteees Of Dartmouth College System, method and authorization device for biometric access control to digital devices
US9207772B2 (en) * 2013-05-13 2015-12-08 Ohio University Motion-based identity authentication of an individual with a communications device
US9087216B2 (en) * 2013-11-01 2015-07-21 Anonos Inc. Dynamic de-identification and anonymity
KR102204247B1 (ko) * 2014-02-19 2021-01-18 삼성전자 주식회사 전자 장치의 생체 정보 처리 방법 및 장치
US9799096B1 (en) * 2014-07-08 2017-10-24 Carnegie Mellon University System and method for processing video to provide facial de-identification
KR101714628B1 (ko) 2015-01-15 2017-03-10 조병권 움직임 정보를 이용하여 사용자를 인증하는 장치 및 방법
US10152828B2 (en) * 2015-09-30 2018-12-11 Umap AV Corp. Generating scene reconstructions from images

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100826873B1 (ko) * 2006-09-07 2008-05-06 한국전자통신연구원 생체 인식 방법 및 이를 위한 장치
KR101434899B1 (ko) * 2012-03-23 2014-08-27 주식회사 제론헬스케어 일상 건강 정보 제공 시스템 및 일상 건강 정보 제공 방법

Also Published As

Publication number Publication date
EP3545456A1 (en) 2019-10-02
US20180181772A1 (en) 2018-06-28
WO2018124671A1 (en) 2018-07-05
US10956604B2 (en) 2021-03-23
EP3545456A4 (en) 2019-11-13
KR20180075221A (ko) 2018-07-04

Similar Documents

Publication Publication Date Title
EP2904537B1 (en) Secure identification of computing device and secure identification methods
US9990040B2 (en) Haptic CAPTCHA
GB2552152B (en) Obscuring data
CN111476306A (zh) 基于人工智能的物体检测方法、装置、设备及存储介质
CN109074435B (zh) 用于提供用户信息的电子设备和方法
CN105659243B (zh) 被告知的隐式登记和标识
US11216067B2 (en) Method for eye-tracking and terminal for executing the same
CN107924432B (zh) 电子装置及其变换内容的方法
US10204265B2 (en) System and method for authenticating user
KR102337217B1 (ko) 전자 장치 및 그 동작 방법
JP2014044475A (ja) 画像処理装置、画像処理方法および画像処理プログラム
Guinea et al. Continuous identification in smart environments using wrist-worn inertial sensors
CN115509344A (zh) 具有添加用户定制手势的框架的基于机器学习的手势识别
CN111160251B (zh) 一种活体识别方法及装置
KR20200093910A (ko) 원본 데이터와 연관된 데이터를 제공하기 위한 방법, 이를 위한 전자 장치 및 저장 매체
Barra et al. Continuous authentication on smartphone by means of periocular and virtual keystroke
KR101869304B1 (ko) 컴퓨터를 이용한 수화어 인식시스템, 방법 및 인식프로그램
Montanini et al. Low complexity head tracking on portable android devices for real time message composition
Senarath et al. BehaveFormer: A Framework with Spatio-Temporal Dual Attention Transformers for IMU-enhanced Keystroke Dynamics
CN113032560B (zh) 语句分类模型训练方法、语句处理方法及设备
CN110942033A (zh) 用于推送信息的方法、装置、电子设备和计算机介质
Dasgupta et al. Continuous Authentication: Authenticating individuals frequently during sessions to assure valid identity
Yao et al. Pattern unlocking guided multi‐modal continuous authentication for smartphone with multi‐branch context‐aware representation learning and auto encoder
CN116305255A (zh) 数据查询方法、装置、设备以及存储介质
Zhang et al. ADA-SR: Activity detection and analysis using security robots for reliable workplace safety

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right