KR20150099678A - 전자 장치 운용 방법 및 이를 지원하는 전자 장치 - Google Patents

전자 장치 운용 방법 및 이를 지원하는 전자 장치 Download PDF

Info

Publication number
KR20150099678A
KR20150099678A KR1020140112624A KR20140112624A KR20150099678A KR 20150099678 A KR20150099678 A KR 20150099678A KR 1020140112624 A KR1020140112624 A KR 1020140112624A KR 20140112624 A KR20140112624 A KR 20140112624A KR 20150099678 A KR20150099678 A KR 20150099678A
Authority
KR
South Korea
Prior art keywords
electronic device
information
module
control module
state
Prior art date
Application number
KR1020140112624A
Other languages
English (en)
Inventor
임경수
강혁
유재봉
최종호
전승영
홍덕기
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to PCT/KR2015/001554 priority Critical patent/WO2015126123A1/ko
Priority to US15/120,415 priority patent/US20170010669A1/en
Publication of KR20150099678A publication Critical patent/KR20150099678A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1662Details related to the integrated keyboard
    • G06F1/1671Special purpose buttons or auxiliary keyboards, e.g. retractable mini keypads, keypads or buttons that remain accessible at closed laptop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/169Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated pointing device, e.g. trackball in the palm rest area, mini-joystick integrated between keyboard keys, touch pads or touch stripes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206Monitoring of events, devices or parameters that trigger a change in power modality
    • G06F1/3215Monitoring of peripheral devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206Monitoring of events, devices or parameters that trigger a change in power modality
    • G06F1/3231Monitoring the presence, absence or movement of users
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547Touch pads, in which fingers can move on a surface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483Interaction with page-structured environments, e.g. book metaphor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/033Indexing scheme relating to G06F3/033
    • G06F2203/0339Touch strips, e.g. orthogonal touch strips to control cursor movement or scrolling; single touch strip to adjust parameter or to implement a row of soft keys
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Abstract

본 발명은 전자 장치 운용에 관한 것으로, 다양한 실시 예는 센서 모듈 기반의 신호를 수집하는 과정, 적어도 상기 수집된 신호의 일부를 기반으로 하는 생체 정보, 적어도 상기 수집된 신호의 일부를 기반으로 하는 근접도 정보, 적어도 상기 수집된 신호의 일부를 기반으로 하는 조도 정보 중 적어도 하나를 이용하여 전자장치의 상태를 판단하는 과정을 포함하는 전자 장치 운용 방법 및 이를 지원하는 장치를 개시할 수 있다. 여기서 본 발명이 상술한 구성에 한정되는 것은 아니며, 발명의 상세한 설명에 기재된 다양한 실시 예들로서 이해되어야 할 것이다.

Description

전자 장치 운용 방법 및 이를 지원하는 전자 장치{Controlling Method of Electronic Device corresponding to the wearing state and Electronic Device supporting the same}
다양한 실시 예들은 전자 장치 운용에 관한 것이다.
최근 디지털 기술의 발달과 함께 이동통신 장치, PDA(Personal Digital Assistant), 전자수첩, 스마트 폰, 태블릿 PC(Personal Computer) 등과 같이 이동하면서 통신 및 개인정보 처리가 가능한 전자 장치가 다양하게 출시되고 있다.
한편 종래 출시되고 있는 제품들은 단순히 손목에 착용한 상태에서 시계 기능을 제공하거나 만보기 기능과 같이 단순한 운동량만을 제공하기 때문에 종래 손목 시계나 만보기 착용에 비해 별다른 잇점이나 편리성이 제공되지 않고 있다.
이에 따라, 다양한 실시 예들에서는 착용 형태에 따라 적응적인 기능 제공이 가능한 전자 장치 운용 방법 및 이를 지원하는 전자 장치를 제공한다.
또한, 다양한 실시 예들에서는 착용 형태에 따라 적응적인 UI 제공이 가능한 전자 장치 운용 방법 및 이를 지원하는 전자 장치를 제공한다.
또한, 다양한 실시 예들에서는 착용 여부를 확인하여 분실 방지를 지원할 수 있는 전자 장치 운용 방법 및 이를 지원하는 전자 장치를 제공한다.
상기와 같은 과제를 해결하기 위한 다양한 실시 예 중 한 실시 예의 전자 장치는 신호를 수집하는 센서 모듈, 적어도 상기 수집된 신호의 일부를 기반하여 생체 정보를 생성하는 모듈, 적어도 상기 수집된 신호의 일부를 기반하여 근접도 정보를 생성하는 모듈, 적어도 상기 수집된 신호의 일부를 기반하여 조도 정보를 생성하는 모듈, 적어도 상기 생체 정보, 상기 근접도 정보, 또는 상기 조도 정보를 기반하여 전자장치의 상태를 판단하는 모듈을 포함할 수 있다.
한 실시 예에 따른 전자 장치 운용 방법은 센서 모듈 기반의 신호를 수집하는 과정, 적어도 상기 수집된 신호의 일부를 기반으로 하는 생체 정보, 적어도 상기 수집된 신호의 일부를 기반으로 하는 근접도 정보, 적어도 상기 수집된 신호의 일부를 기반으로 하는 조도 정보 중 적어도 하나를 이용하여 전자장치의 상태를 판단하는 과정을 포함할 수 있다.
전술한 바와 같은 내용들은 당해 분야 통상의 지식을 가진 자가 후술되는 다양한 실시 예의 구체적인 설명으로부터 보다 잘 이해할 수 있도록 하기 위하여 다양한 실시 예들의 특징들 및 기술적인 장점들을 다소 넓게 약술한 것이다. 이러한 특징들 및 장점들 이외에도 청구범위의 주제를 형성하는 다양한 실시 예들의 추가적인 특징들 및 장점들이 후술되는 구체적인 설명으로부터 잘 이해될 것이다.
상술한 바와 같이 다양한 실시 예에 따른 전자 장치 운용 방법 및 이를 지원하는 전자 장치에 따르면, 다양한 실시 예는 전자 장치의 착용 형태에 따라 인식이 편리한 UI를 제공할 수 있다.
또한, 다양한 실시 예는 전자 장치의 착용 형태에 대응하여 적응적인 기능 제공을 함으로써, 사용자 기호에 부합하는 또는 사용자 환경에 부합하는 장치 운용 환경을 제공할 수 있다.
또한, 다양한 실시 예는 전자 장치의 착용 여부를 검사함으로써 분실 방지 및 분실 시 알람이 가능할 수 있다.
도 1은 한 실시 예에 따른 전자 모듈 외관을 도시한다.
도 2는 한 실시 예에 따른 전자 장치 운용 시스템을 도시한다.
도 3은 한 실시 예에 따른 모드 운용 모듈과 저장 모듈의 구성을 도시한다.
도 4는 한 실시 예에 따른 착용 상태별 전자 장치의 UI 운용 방법을 도시한다.
도 5는 한 실시 예에 따른 착용 상태별 전자 장치 운용 방법을 도시한다.
도 6은 한 실시 예에 따른 분실 방지 관련 전자 장치 운용 방법을 도시한다.
도 7은 한 실시 예에 따른 훈련 모드 관련 전자 장치 운용 방법을 도시한다.
도 8a는 한 실시 예에 따른 전자 장치의 착용 상태에 따른 모드 제어를 도시한다.
도 8b는 한 실시 예에 따른 전자 장치의 착용 상태에 따른 UI 제어를 도시한다.
도 8c는 한 실시 예에 따른 전자 장치의 착용 상태에 따른 모드 제어를 도시한다.
도 9는 한 실시 예에 따른 전자 장치의 기능 실행 제어와 관련한 그래프를 도시한다.
도 10은 다양한 실시 예에 따른 전자 장치 카메라 제어 기능과 관련한 도면이다.
도 11은 다양한 실시 예에 따른 전자 장치 카메라 제어 방법과 관련한 도면이다.
도 12는 다양한 실시 예에 따른 센서 설정 화면의 한 예를 나타낸 도면이다.
도 13은 다양한 실시 예에 따른 HRM 센서 운용을 설명하는 도면이다.
도 14는 다양한 실시 예에 따른 음성 검색 기능 제어 방법과 관련한 도면이다.
도 15는 다양한 실시 예에 따른 음성 인식 기능과 관련한 화면 인터페이스의 한 예이다.
도 16은 다양한 실시 예에 따른 HRM 센서의 기능 전환 방법의 한 예이다.
도 17은 다양한 실시 예에 따른 스크롤 기능 운용과 관련한 도면이다.
도 18은 다양한 실시 예에 따른 전자 장치의 일예를 나타낸 도면이다.
도 19은 다양한 실시 예에 따른 프로그램 모듈의 블록도를 나타낸다.
이하, 첨부된 도면을 참조하여 본 발명(present disclosure)을 설명한다. 본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시 예를 가질 수 있는 바, 특정 실시 예들이 도면에 예시되고 관련된 상세한 설명이 기재되어 있다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경 및/또는 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용되었다.
이하, 본 발명의 다양한 실시 예가 첨부된 도면을 참조하여 기재된다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 실시 예의 다양한 변경(modification), 균등물(equivalent), 및/또는 대체물(alternative)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.
본 문서에서, "가진다", "가질 수 있다", "포함한다", 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작, 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.
본 문서에서, "A 또는 B", "A 또는/및 B 중 적어도 하나", 또는 "A 또는/및 B 중 하나 또는 그 이상" 등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. 예를 들면, "A 또는 B", "A 및 B 중 적어도 하나", 또는 "A 또는 B 중 적어도 하나"는, (1) 적어도 하나의 A를 포함, (2) 적어도 하나의 B를 포함, 또는 (3) 적어도 하나의 A 및 적어도 하나의 B 모두를 포함하는 경우를 모두 지칭할 수 있다.
다양한 실시 예에서 사용된 "제1", "제2", "첫째", 또는 "둘째" 등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 해당 구성요소들을 한정하지 않는다. 상기 표현들은 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 수 있다. 예를 들면, 제1 사용자 기기와 제2 사용자 기기는, 순서 또는 중요도와 무관하게, 서로 다른 사용자 기기를 나타낼 수 있다. 예를 들면, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 바꾸어 명명될 수 있다.
어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "(기능적으로 또는 통신적으로) 연결되어((operatively or communicatively) coupled with/to)" 있다거나 "접속되어(connected to)" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제3 구성요소)를 통하여 연결될 수 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 다른 구성요소(예: 제3 구성요소)가 존재하지 않는 것으로 이해될 수 있다.
본 문서에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합한(suitable for)", "~하는 능력을 가지는(having the capacity to)", "~하도록 설계된(designed to)", "~하도록 변경된(adapted to)", "~하도록 만들어진(made to)", 또는 "~를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성(또는 설정)된"은 하드웨어적으로 "특별히 설계된(specifically designed to)"것만을 반드시 의미하지 않을 수 있다. 대신, 어떤 상황에서는, "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들면, 문구 "A, B, 및 C를 수행하도록 구성(또는 설정)된 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써, 해당 동작들을 수행할 수 있는 범용 프로세서(generic-purpose processor)(예: CPU 또는 application processor)를 의미할 수 있다.
본 문서에서 사용된 용어들은 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 다른 실시 예의 범위를 한정하려는 의도가 아닐 수 있다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명의 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가질 수 있다. 일반적으로 사용되는 사전에 정의된 용어들은 관련 기술의 문맥 상 가지는 의미와 동일 또는 유사한 의미를 가지는 것으로 해석될 수 있으며, 본 문서에서 명백하게 정의되지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다. 경우에 따라서, 본 문서에서 정의된 용어일지라도 본 발명의 실시 예들을 배제하도록 해석될 수 없다.
본 발명의 다양한 실시 예들에 따른 전자 장치는, 예를 들면, 스마트폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 화상 전화기, 전자북 리더기(e-book reader), 데스크탑 PC (desktop PC), 랩탑 PC(laptop PC), 넷북 컴퓨터(netbook computer), 워크스테이션(workstation), 서버, PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라, 또는 웨어러블 장치(wearable device)(예: 스마트 안경, 머리 착용형 장치(head-mounted-device(HMD)), 전자 의복, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 전자 문신, 스마트 미러, 또는 스마트 와치(smart watch))중 적어도 하나를 포함할 수 있다.
어떤 실시 예들에서, 전자 장치는 스마트 가전 제품(smart home appliance)일 수 있다. 스마트 가전 제품은, 예를 들면, 텔레비전, DVD 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), 홈 오토매이션 컨트롤 패널(home automation control panel), 보안 컨트롤 패널(security control panel), TV 박스(예: 삼성 HomeSync™, 애플TV™, 또는 구글 TV™), 게임 콘솔(예: Xbox™, PlayStation™), 전자 사전, 전자 키, 캠코더, 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
다른 실시 예에서, 전자 장치는, 각종 의료기기(예: 각종 휴대용 의료측정기기(혈당 측정기, 심박 측정기, 혈압 측정기, 또는 체온 측정기 등), MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 또는 초음파기 등), 네비게이션(navigation) 장치, GPS 수신기(global positioning system receiver), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치, 자이로콤파스 등), 항공 전자기기(avionics), 보안 기기, 차량용 헤드 유닛(head unit), 산업용 또는 가정용 로봇, 금융 기관의 ATM(automatic teller’s machine), 상점의 POS(point of sales), 또는 사물 인터넷 장치(internet of things)(예: 전구, 각종 센서, 전기 또는 가스 미터기, 스프링클러 장치, 화재경보기, 온도조절기(thermostat), 가로등, 토스터(toaster), 운동기구, 온수탱크, 히터, 보일러 등) 중 적어도 하나를 포함할 수 있다.
어떤 실시 예에 따르면, 전자 장치는 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 수신 장치(electronic signature receiving device), 프로젝터(projector), 또는 각종 계측 기기(예: 수도, 전기, 가스, 또는 전파 계측 기기 등) 중 적어도 하나를 포함할 수 있다. 다양한 실시 예에서, 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 어떤 실시 예에 따른 전자 장치는 플렉서블 전자 장치일 수 있다. 또한, 본 발명의 실시 예에 따른 전자 장치는 전술한 기기들에 한정되지 않으며, 기술 발전에 따른 새로운 전자 장치를 포함할 수 있다.
이하, 첨부 도면을 참조하여, 다양한 실시 예에 따른 전자 장치가 설명된다. 본 문서에서, 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치 (예: 인공지능 전자 장치)를 지칭할 수 있다.
도 1은 한 실시 예에 따른 전자 모듈 외관을 도시한다.
도 1을 참조하면, 전자 모듈 20은 손목이나 손가락 발목이나 목 등 다양한 위치에 착용 가능한 환 형태로 마련될 수 있다. 전자 모듈 20은 착용되는 부위에 따라 그 크기와 형태가 적어도 일부 변형될 수 있다. 전자 모듈 20은 도시된 바와 같이 환 형태의 착용 바디 105, 착용 바디 105 일측에 배치된 전자 장치 100을 포함할 수 있다.
착용 바디 105는 일정 폭과 두께를 가지며 환 형태로 마련될 수 있다. 착용 바디 105의 적어도 일측에는 착용 시 환 반경을 확장하고, 착용 후 일정 부위에 고정되도록 환 반경을 축소시키는 조절 장치가 배치될 수 있다. 조절 장치는 밴딩 유닛, 고리 체결 유닛, 접철 유닛 중 적어도 하나를 포함할 수 있다. 착용 바디 105의 크기는 착용 부위 특징에 따라 다양한 형태로 변형될 수 있다. 착용 바디 105의 일측에는 전자 장치 100이 장착되는 장착부가 마련될 수 있다. 장착부는 전자 장치 100이 장착된 후 지지될 수 있는 홀 구조로 마련될 수 있다. 예컨대, 장착부는 전자 장치 100의 전면과 후면이 노출될 수 있도록 전자 장치 100의 외곽부를 감싸는 구조로 마련될 수 있다.
전자 장치 100은 착용 바디 105의 장착부에 장착될 수 있다. 또한 전자 장치 100은 착용 바디 105의 장착부로부터 이탈될 수도 있다. 전자 장치 100은 착용 바디 105에 장착된 상태에서 후면의 적어도 일부가 내측으로 노출될 수 있다. 전자 장치 100이 착용 바디 105에 장착된 상태에서 노출되는 영역에 HRM(Heart Rate Monitor) 센서 171이 배치될 수 있다. 예컨대, HRM 센서 171은 전자 장치 100의 후면 중앙에 배치될 수 있다. 전자 장치 100은 HRM 센서 171이 수집하는 센서 신호를 분석하여 착용 상태 또는 착용 부위를 판단할 수 있다. 전자 장치 100의 전면에는 표시 모듈 140이 배치될 수 있다. 한 실시 예에 따르면, 전자 장치 100의 표시 모듈 140은 전자 장치 100의 착용 상태에 따라 정보의 표시 방향을 다르게 출력할 수 있다. 한 실시 예에 따르면, 전자 장치 100은 착용 부위에 따라 서로 다른 기능을 실행할 수 있다. 한 실시 예에 따르면, 전자 장치 100은 동일 기능에 대한 정보 출력을 착용 부위에 따라 다르게 제공할 수 있다.
도 2는 한 실시 예에 따른 전자 장치 운용 시스템을 도시한다.
도 2를 참조하면, 한 실시 예에 따른 전자 장치 운용 시스템 10은 전자 장치 100 및 적어도 하나의 전자 장치 101, 102, 네트웍 300을 포함할 수 있다. 전자 장치 100은 앞서 설명한 바와 같이 특정 물체에 착용 가능한 형태로 마련될 수 있다. 전자 장치 100은 착용 상태 여부를 HRM 센서 171의 센서 신호를 분석하여 확인할 수 있다. 또한, 전자 장치 100은 착용 부위를 HRM 센서 171의 센서 신호를 분석하여 구분할 수 있다.
다양한 실시 예에 따르면, 전자 장치 100과 전자 장치 101은 직접 통신(Direct Communication) 방식으로 통신 채널을 형성할 수 있다. 예컨대, 전자 장치 100은 전자 장치 101과 블루투스 방식의 직접 통신 채널을 형성할 수 있다. 또는 전자 장치 100은 전자 장치 101과 와이파이 다이렉트 방식의 통신 채널을 형성할 수 있다.
다양한 실시 예에 따르면, 전자 장치 운용 시스템 10은 전자 장치 100이 수집하는 HRM 센서 171의 센서 신호를 분석하여 착용 중에 대한 정보를 전자 장치 101에 전달할 수 있다. 전자 장치 운용 시스템 10은 전자 장치 100이 착용 해제에 대한 정보를 전자 장치 101에 전달할 수 있다. 전자 장치 운용 시스템 10은 전자 장치 100이 착용 부위에 대한 정보를 전자 장치 101에 전달할 수 있다. 다양한 실시 예에 따르면, 전자 장치 100은 네트웍 300을 통하여 상술한 착용 상태 및 착용 부위 중 적어도 하나의 정보를 전자 장치 102에 전달할 수 있다.
도 2에 도시된 바와 같이, 전자 장치 100은 버스 110, 입출력 모듈 120, 통신 인터페이스 130, 표시 모듈 140, 저장 모듈 150, 센서 모듈 170 및 제어 모듈 160을 포함할 수 있다.
버스 110은 전자 장치 100의 각 구성들(예: 입출력 모듈 120, 통신 인터페이스 130, 표시 모듈 140, 저장 모듈 150, HRM 센서 171를 포함하는 센서 모듈 170 및 제어 모듈 160 간의 데이터 송수신을 지원할 수 있다. 예컨대, 버스 110은 입출력 모듈 120에서 입력된 입력 신호를 제어 모듈 160에 전달할 수 있다. 버스 110은 HRM 센서 171의 센서 신호를 제어 모듈 160에 전달할 수 있다. 버스 110은 제어 모듈 160이 전달하는 분실 안내 정보를 통신 인터페이스 130을 통해 전자 장치 101, 102 등에 전송할 수 있다. 버스 110은 착용 부위 판단과 관련하여 저장 모듈 150에 저장된 참조 정보(Reference Range)를 제어 모듈 160에 전달할 수 있다.
입출력 모듈 120은 전자 장치 100의 입력 신호 생성 기능 및 데이터 출력 기능 중 적어도 하나를 수행할 수 있다. 입출력 모듈 120은 물리 키 버튼(예: 홈 키, 사이드 키, 전원 키 등), 죠그 키, 키패드 등을 포함할 수 있다. 입출력 모듈 120은 표시 모듈 140에 출력되는 가상 키 패드를 입력 장치로 포함할 수 있다. 입출력 모듈 120은 전자 장치 100에 포함된 특정 장치 요소 예컨대 표시 모듈 140, 센서 모듈 170, 통신 인터페이스 130 등을 활성화하기 위한 입력 신호를 생성할 수 있다. 한 실시 예에 따르면, 입출력 모듈 120은 전자 장치 100의 전원 켜기 또는 끄기와 관련한 입력 신호, 정보 표시를 가로 방향으로 할 것인지 또는 세로 방향으로 할 것인지 또는 착용 상태나 착용 부위에 따라 다르게 할 것인지를 결정하는 정보 표시 방향 선택 신호를 생성할 수 있다. 입출력 모듈 120은 특정 기능 예컨대 헬스 코칭 기능 앱 실행을 요청하는 입력 신호, 착용 부위에 따라 앱 실행 루틴을 다르게 하는 착용 상태별 운용 모드 활성화 또는 비활성화와 관련한 입력신호를 생성할 수 있다. 입출력 모듈 120은 센서 모듈 170 활성화를 요청하는 입력 신호, 센서 모듈 170 비활성화를 요청하는 입력 신호 등을 생성할 수 있다.
다양한 실시 예에 따르면, 입출력 모듈 120은 오디오 처리와 관련한 오디오 모듈 또는 멀티미디어 모듈을 포함할 수 있다. 이와 관련하여 입출력 모듈 120은 스피커 및 마이크 중 적어도 하나를 단수 개 또는 복수 개 포함할 수 있다. 입출력 모듈 120은 예컨대, 전자 장치 100이 착용된 경우 그에 대응하는 오디오 데이터, 전자 장치 100이 착용 해제된 경우 그에 대응하는 오디오 데이터, 전자 장치 100이 분실에 대응하는 형태로 착용 분리된 경우 그에 대응하는 오디오 데이터를 출력할 수 있다. 입출력 모듈 120은 전자 장치 100의 착용 부위에 대응하는 오디오 데이터를 출력할 수 있다.
다양한 실시 예에 따르면, 입출력 모듈 120은 착용 부위에 대응하여 특정 오디오 데이터 출력 기능을 자동으로 지원하거나 또는 디폴트로 해당 기능을 비활성화할 수 있다. 예컨대, 입출력 모듈 120은 전자 장치 100의 후면이 손목 안쪽에 대면되도록 배치된 경우 특정 오디오 데이터 출력 기능을 디폴트로 비활성화할 수 있다. 입출력 모듈 120은 전자 장치 100의 후면이 손목 바깥측에 대면되도록 배치된 경우 특정 오디오 데이터 출력 기능을 디폴트로 활성화할 수 있다. 한 실시 예에 따르면 특정 오디오 데이터 출력 기능은 통신 메시지 수신 시 통신 메시지 수신 알림음, 텍스트 메시지의 내용을 TTS(Text to Speech)로 출력하는 기능, 음원 재생에 따른 오디오를 스피커로 출력하는 기능 등을 포함할 수 있다. 입출력 모듈 120의 오디오 데이터 출력 기능은 사용자 설정 등에 따라 생략될 수도 있다.
통신 인터페이스 130은 전자 장치 100의 통신 기능을 지원할 수 있다. 전자 장치 100이 복수의 통신 방식을 지원하는 경우 복수개의 통신 모듈을 포함할 수 있다. 예컨대, 전자 장치 100은 전자 장치 101과 직접 통신 채널 형성과 관련하여 근거리 통신 모듈 또는 직접 통신 모듈을 포함할 수 있다. 근거리 통신 모듈 또는 직접 통신 모듈은 와이파이 다이렉트 통신 모듈, 블루투스 통신 모듈, 지그비 통신 모듈 등 다양한 통신 모듈 중 적어도 하나를 포함할 수 있다. 통신 인터페이스 130은 전자 장치 100이 기지국 기반의 통신 방식을 지원하는 경우 3G/4G(LTE) 네트웍을 이용하는 통신 모듈, AP(Access Point) 기반의 통신 방식을 지원하는 와이파이 통신 모듈 등을 포함할 수 있다.
한 실시 예에 따르면, 통신 인터페이스 130은 착용 상태 정보, 착용 부위 정보, 착용 해제 정보, 분실 정보 중 적어도 하나를 제어 모듈 160의 제어에 따라 전자 장치 101, 102 중 적어도 하나에 전달할 수 있다. 통신 인터페이스 130은 전자 장치 101, 102로부터 제어 신호 또는 컨텐츠 데이터(예: 특정 음원 재생 오디오 데이터, 경고음 데이터 등)를 수신할 수 있다.
한 실시 예에 따르면, 통신 인터페이스 130은 분실 정보를 전자 장치 101에 전달하고, 전자 장치 101로부터 특정 오디오 데이터를 일정 주기 또는 지속적으로 출력하도록 요청하는 제어 신호를 수신할 수 있다. 또는 통신 인터페이스 130은 전자 장치 101로부터 일정 주기로 표시 모듈 140을 점멸하거나 또는 지속적으로 표시 모듈 140을 턴-온 상태로 유지하도록 요청하는 제어 신호를 수신할 수 있다.
다양한 실시 예에 따르면, 통신 인터페이스 130은 착용 해제 정보를 전자 장치 101에 전송하고, 전자 장치 101로부터 일정 시간(예: 초단위, 분단위, 시단위, 일단위 등 또는 6시간 단위, 10시간 단위 등) 경과 후 알람 신호를 수신할 수 있다. 여기서 알람 신호는 오디오 데이터, 표시 모듈 140 제어 신호 등을 포함할 수 있다. 또는 통신 인터페이스 130은 착용 해제 정보를 전자 장치 101에 전송한 후 배터리 잔량에 따른 충전 요청 정보를 전자 장치 101에 전달할 수 있다. 충전 요청 정보는 전자 장치 101의 표시 모듈에 출력되거나 또는 전자 장치 101의 오디오 모듈을 통해 출력될 수 있다.
표시 모듈 140은 전자 장치 100 운용과 관련한 다양한 화면을 출력할 수 있다. 예컨대, 표시 모듈 140은 락 스크린, 대기 화면 등을 출력할 수 있다. 표시 모듈 140은 특정 기능 수행 화면 예컨대 음원 재생 앱 실행 화면, 메시지 수신 알림 화면, 메시지 내용 확인 화면, 메뉴 화면, 적어도 하나의 기능 아이템 배치 화면 등을 출력할 수 있다. 한 실시 예에 따르면, 표시 모듈 140은 착용 상태를 안내하는 화면, 착용 부위를 안내하는 화면, 착용 해제를 안내하는 화면, 분실을 안내하는 화면 중 적어도 하나의 화면을 출력할 수 있다. 분실 안내와 관련하여, 표시 모듈 140은 특정 패턴으로 점멸될 수 있다. 다양한 실시 예에 따르면, 전자 장치 100은 LED 램프 및 진동 모듈 중 적어도 하나를 포함하고, 분실 시 정해진 패턴의 깜빡임이나 진동 패턴을 출력할 수 있다.
다양한 실시 예에 따르면, 표시 모듈 140은 착용 시 자동으로 활성화되어 정해진 메뉴 화면 또는 정해진 기능 실행 화면을 출력할 수 있다. 표시 모듈 140은 착용 해제 후 디폴트로 배터리 잔량 정보를 표시할 수 있다. 표시 모듈 140은 착용 해제 후 디폴트로 슬립 상태로 천이될 수 있다. 표시 모듈 140은 배터리 잔량에 대응하여 충전을 요청하는 안내 정보를 출력할 수 있다. 표시 모듈 140은 분실 안내 화면 출력 후 일정 주기의 점멸 또는 정해진 밝기 이상의 화면을 일정 시간 동안 출력할 수 있다. 예컨대, 표시 모듈 140은 전자 장치 101이 요청하는 시점에 특정 밝기 화면을 출력할 수 있다.
다양한 실시 예에 따르면, 표시 모듈 140은 가로 쓰기, 세로 쓰기에 따른 정보 표시를 지원할 수 있다. 표시 모듈 140은 또는 가로 모드 및 세로 모드에 따른 화면 전환을 지원할 수 있다. 표시 모듈 140은 전자 장치 100의 착용 부위에 따라 가로 쓰기 또는 세로 쓰기 중 어느 하나의 쓰기 방식을 자동으로 지원할 수 있다. 표시 모듈 140은 전자 장치 100의 착용 부위에 따라 가로 모드 또는 세로 모드 전환을 자동으로 수행할 수 있다.
저장 모듈 150은 전자 장치 100 운용과 관련한 다양한 정보를 저장할 수 있다. 예컨대, 저장 모듈 150은 전자 장치 100에서 실행되는 특정 앱(어플리케이션), 앱 실행에 따른 데이터 등을 저장할 수 있다. 한 실시 예에 따르면, 저장 모듈 150은 착용 상태별 운용 프로그램을 저장할 수 있다. 착용 상태별 운용 프로그램은 생체 신호 데이터(또는 생체 정보) 수집 루틴(명령어 또는 명령어 셋이나 함수, 명령어 셋이나 함수와 관련한 구문이나 탬플릿, 클래스 등), 생체 신호 데이터 분석 루틴, 생체 신호 데이터 분석에 따른 착용 관련 판단 루틴을 포함할 수 있다. 착용 관련 판단 루틴은 착용 상태 여부 판단 루틴, 착용 부위 판단 루틴, 착용 해제 판단 루틴, 분실 판단 루틴 등을 포함할 수 있다.
센서 모듈 170은 전자 장치 100의 움직임 상태 또는 전자 장치 100의 주변 상황 등과 관련한 다양한 센서 신호를 수집할 수 있다. 예컨대, 센서 모듈 170은 전자 장치 100의 움직임 검출과 관련한 자이로 센서, 가속도 센서, 조도 센서 등을 포함할 수 있다. 한 실시 예에 따르면, 센서 모듈 170은 착용자의 생체 신호를 검출하는 생체 신호 센서 예컨대 HRM(Heart Rate Monitor) 센서 171을 포함할 수 있다. 센서 모듈 170은 수집된 생체 신호(예: 맥파 신호)를 제어 모듈 160에 제공할 수 있다. 센서 모듈 170이 수집한 생체 신호는 저장 모듈 150에 임시 또는 반영구적으로 저장될 수도 있다. 센서 모듈 170은 입출력 모듈 120의 입력 신호에 의해 활성화되거나, 정해진 스케줄링된 정보에 의해 활성화될 수 있다. 센서 모듈 170은 착용 해제 판단 후 자동으로 비활성화될 수 있다. 다양한 실시 예에 따르면, 센서 모듈 170은 전자 장치 충전 시 자동으로 비활성화되고, 충전 완료 후 자동으로 활성화될 수 있다.
다양한 실시 예에 따르면, 센서 모듈 170은 착용 상태 및 착용 부위와 관련한 참조 정보에 해당하는 생체 신호를 수집할 수 있다. 참조 정보는 저장 모듈 150에 저장된 후 전자 장치 100의 착용 상태 및 착용 부위에 관한 분석에 이용될 수 있다. 참조 정보는 훈련 모드를 통해 수집될 수 있다. 참조 정보는 전자 장치 100 운용 이력을 통해 갱신 또는 학습될 수 있다. 예컨대, 참조 정보는 착용 상태에서 특정 기능 운용 시 수집되는 생체 신호와, 착용 해제 상태에서 특정 기능 운용 시 수집되는 생체 신호, 특정 착용 부위에서 특정 기능 운용 시 수집되는 생체 신호 등의 누적된 신호를 통해 보정될 수 있다.
제어 모듈 160은 전자 장치 100의 운용과 관련한 데이터의 처리와 전송, 제어 신호의 처리와 전송을 수행할 수 있다. 한 실시 예에 따르면, 제어 모듈 160은 입력 신호 또는 스케줄링된 정보 등에 따라 센서 모듈 170을 활성화하고, 전자 장치 100의 착용 상태, 착용 부위, 착용 해제, 분실 등의 판단을 수행하는 모드 운용 모듈 180을 포함할 수 있다. 모드 운용 모듈 180은 전자 장치 100의 상태에 따라 설정된 기능을 수행하도록 제어할 수 있다.
전자 장치 101 및 전자 장치 102 중 적어도 하나(이하 전자 장치 101을 대표로 예시)는 전자 장치 100과 통신 채널을 형성하고, 전자 장치 100으로부터 착용 상태에 관한 데이터를 수신할 수 있다. 전자 장치 101(예: 스마트 폰)은 전자 장치 100으로부터 수신된 착용 상태에 관한 데이터를 기반으로 특정 컨텐츠 데이터를 전자 장치 100에 전달하거나, 정해진 오디오 데이터(예: 경고음 등) 또는 정해진 메시지(예: 경고 메시지 등)를 출력할 수 있다. 예컨대, 전자 장치 101은 전자 장치 100으로부터 분실 관련 정보를 수신한 경우, 이에 대한 안내 메시지를 표시 모듈이나 오디오 모듈을 통해 출력할 수 있다. 전자 장치 101은 사용자 제어에 대응하여 전자 장치 100의 표시 모듈이나 입출력 모듈, 진동 모듈 등을 제어할 수 있는 제어 신호를 전송할 수 있다.
전자 장치 101 또는 102에서 실행되는 특정 앱은 RSF(Remote sensor framework)를 이용하여 전자 장치 100의 센서 신호 수집 및 착용 상태와 착용 부위 판별을 요청할 수 있다. 여기서 RSF는 전자 장치 100, 101, 102 등에 배치될 수 있다. 전자 장치 101 또는 102로부터 전자 장치 100의 착용 상태 확인 요청을 수신하면, 전자 장치 100은 HRM 센서 171을 일시적으로 턴-온하고 신호 강도(Signal Strength)를 이용하여 근접도(Proximity)를 검사하여 전송할 수 있다. 전자 장치 101 또는 102로부터 전자 장치 100의 생체 신호 검출 요청을 수신하면, 전자 장치 100은 HRM 센서 171을 일시적으로 턴-온하고 생체 신호를 측정한 후 전송할 수 있다. 전자 장치 100은 착용 상채 및 착용 위치 판단 시 정해진 스케줄링 정보에 대응하여 가속도 센서 및 자이로 센서 등의 센서 신호 수집을 수행할 수 있다. 예컨대, 전자 장치 100의 제어 모듈 160은 HRM 센서 171이 수집한 센서 신호로부터 검출된 생체 신호가 일정 값 이하이거나 정해진 범위 이내의 값이면 가속도 센서 및 자이로 센서를 일시적으로 활성화할 수 있다. 제어 모듈 160은 검출된 가속도 센서 신호 및 자이로 센서 신호 중 적어도 하나를 기반으로 착용 부위의 움직임을 판단하고, 이를 기반으로 착용 상태와 착용 부위 등을 판단할 수 있다.
다양한 실시 예에 따르면, 전자 장치 101은 전자 장치 100으로부터 착용에 따른 정보를 수신하면, 정해진 오디오 데이터를 전자 장치 100에 전송할 수 있다. 전자 장치 101은 전자 장치 100으로부터 착용에 따른 정보를 수신하면 타 전자 장치가 전송한 문자 메시지 또는 통화 요청 메시지 등을 전자 장치 100에 전송할 수 있다. 전자 장치 101은 정해진 스케줄 정보에 대응하여 일정 시점에 전자 장치 100에 특정 제어 신호를 전송할 수 있다. 예컨대, 전자 장치 101은 일정 시각에 전자 장치 100에 표시 모듈 제어와 관련한 제어 신호 또는 입출력 모듈 120을 통해 출력할 오디오 데이터를 전송할 수 있다. 이에 따라, 사용자는 일정 시각에 전자 장치 100의 미착용 상태에 대해 인지할 수 있다.
도 3은 한 실시 예에 따른 모드 운용 모듈과 저장 모듈의 구성을 도시한다.
도 3을 참조하면, 저장 모듈 150은 생체 신호 데이터 151 및 모드별 기능 테이블 153을 포함할 수 있다.
생체 신호 데이터 151은 참조 정보를 포함할 수 있다. 참조 정보는 앞서 설명한 바와 같이 생체 신호의 비교 기준으로 이용될 수 있다. 한 실시 예에 따르면, 참조 정보는 손목의 바깥측 착용 시 참조 생체 신호, 손목의 안쪽 착용 시 참조 생체 신호를 포함할 수 있다. 또한 참조 정보는 발목이나 손가락 목 등과 관련한 참조 생체 신호를 포함할 수 있다. 다양한 실시 예에 따르면 참조 정보는 일정 범위 값 또는 기준 값을 포함할 수 있다. 예컨대 참조 정보는 손목 바깥측 착용으로 판단할 수 있는 범위 값이나 기준 값, 손목 안쪽 착용으로 판단할 수 있는 범위 값이나 기준 값을 포함할 수 있다. 생체 신호 데이터 151은 센서 모듈 170이 현재 수집한 생체 신호를 포함할 수 있다. 생체 신호는 맥파 검출 신호를 포함할 수 있다.
모드별 기능 테이블 153은 전자 장치 100의 착용 상태에 따라 수행할 적어도 하나의 기능 목록을 포함한 테이블일 수 있다. 예컨대, 모드별 기능 테이블 153은 착용 모드 기능 테이블, 착용 해제 모드 기능 테이블, 분실 모드 기능 테이블을 포함할 수 있다. 착용 모드 기능 테이블은 착용 부위별 기능 테이블을 포함할 수 있다. 한 실시 예에 따르면, 착용 모드 기능 테이블에 포함된 특정 기능 항목은 착용 부위별로 실행되는 형태가 다르게 정의될 수 있다.
모드 운용 모듈 180은 HRM 센서 171이 수집하는 근접도 정보를 판단하여 전자 장치 100의 착용 정보 또는 미착용 정보(또는 부착/탈착 정보)를 전자 장치 100 혹은 외부 전자 장치 101, 102 등에 전송하도록 제어할 수 있다. 한 실시 예에 따르면, 모드 운용 모듈 180은 자동으로 수면상태를 판단하기 위해 가속도 센서, 자이로 센서 중 적어도 하나의 센서를 활성화하도록 제어할 수 있다. 모드 운용 모듈 180은 수집된 가속도 정보와 자이로 센서 정보 및 HRM센서 171의 수집된 신호 분석에 기반하여 수면 진입 모드 상태 또는 수면 해제 모드 상태(Sleep In/Out)을 판단할 수 있다. 모드 운용 모듈 180은 수면 진입 또는 수면 해제 등의 상태에 대응하여 기 정의된 특정 기능 또는 전자 장치 100의 특정 동작 수행을 제어할 수 있다. 한 실시 예에 따르면, 모드 운용 모듈 180은 손가락 움직임, 손가락 태핑, 주먹쥠/폄, 팔목 움직임 등 전자장치에 인접한 부분의 신체 변화에 의해 변화하는 혈류량, 혈압, 산소포화도 등의 생체 정보를 해당 센서 예컨대 HRM 센서 171을 이용하여 수집할 수 있다. 모드 운용 모듈 180은 수집된 생체 정보의 신호를 센싱하여 1차 정보(심박)뿐만 아니라 2차 정보(one tap, two tap, N tap, long tap 등)를 기반으로 특정 동작을 수행하도록 제어할 수 있다.
상술한 모드 운용 모듈 180은 생체 신호 처리 모듈 181, 모드 전환 모듈 183, 모드별 기능 처리 모듈 185 및 탈부착 처리 모듈 187을 포함할 수 있다.
생체 신호 처리 모듈 181은 설정된 스케줄 정보 또는 입출력 모듈 120에서 발생한 입력 신호 등의 특정 신호에 대응하여 센서 모듈 170을 활성화하도록 제어할 수 있다. 생체 신호 처리 모듈 181은 센서 모듈 170이 전달하는 센서 신호를 분석할 수 있다. 생체 신호 처리 모듈 181은 센서 모듈 170이 센서 신호를 전달하면, 저장 모듈 150에 저장된 참조 정보를 확인하여 착용 상태 여부, 착용 부위를 분석할 수 있다. 생체 신호 처리 모듈 181은 착용 상태 정보 및 착용 부위 정보를 모드 전환 모듈 183, 모드별 기능 처리 모듈 185에 전달할 수 있다.
다양한 실시 예에 따르면, 생체 신호 처리 모듈 181은 센서 모듈 170의 센서 주기를 변경할 수 있다. 예컨대, 생체 신호 처리 모듈 181은 착용으로 판단된 이후 센서 모듈 170의 센서 주기를 이전보다 길게 변경할 수 있다. 생체 신호 처리 모듈 181은 착용 해제로 판단된 이후 센서 모듈 170의 센서 주기를 이전보다 길게 변경하거나, 센서 모듈 170을 비활성화하도록 제어할 수 있다.
생체 신호 처리 모듈 181은 훈련 모드를 지원할 수 있다. 예컨대, 생체 신호 처리 모듈 181은 전자 장치 100을 착용할 부위에 대한 안내 메시지를 표시 모듈 140 또는 입출력 모듈 120을 통해 출력하도록 제어할 수 있다. 생체 신호 처리 모듈 181은 안내 메시지 출력 이후 센서 모듈 170을 활성화하여 수집되는 생체 신호를 해당 착용 부위에 대응하는 참조 정보로 저장하도록 제어할 수 있다. 생체 신호 처리 모듈 181은 상술한 동작 수행을 통하여 손목 안쪽 착용에 대한 참조 정보, 손목 바깥측 착용에 대한 참조 정보를 수집할 수 있다. 또한 생체 신호 처리 모듈 181은 목이나, 발목, 손가락, 팔의 하박이나 상박 등의 착용에 대한 참조 정보를 수집할 수도 있다.
모드 전환 모듈 183은 생체 신호 처리 모듈 181로부터 착용 상태 정보 또는 착용 부위 정보를 수신할 수 있다. 모드 전환 모듈 183은 착용 정보를 수신하면, 착용 부위 정보를 확인할 수 있다. 모드 전환 모듈 183은 착용 부위가 제1 부위(예: 손목 안쪽)인 경우 표시 모듈 140의 UI를 제1 UI 모드(가로 모드 또는 가로 쓰기 방식)로 전환할 수 있다. 모드 전환 모듈 183은 착용 부위가 제2 부위(예: 손목 바깥측)인 경우 표시 모듈 140의 UI를 제2 UI 모드(가로 쓰기 방식의 세로 모드 또는 세로 쓰기 방식)로 전환할 수 있다. 다양한 실시 예에 따르면 모드 전환 모듈 183은 착용 해제 상태이면 표시 모듈 140을 슬립 모드로 전환하도록 제어할 수 있다.
모드별 기능 처리 모듈 185는 생체 신호 처리 모듈 181로부터 전달된 착용 상태 및 착용 부위 정보에 따라 정의된 기능을 처리할 수 있다. 예컨대, 모드별 기능 처리 모듈 185는 착용 여부, 착용 부위, 착용 정상 해제 등에 따라 각각 설정된 기능 처리를 제어할 수 있다.
한 실시 예에 따르면, 모드별 기능 처리 모듈 185는 전자 장치 100 보관 시 전자 장치 100에 포함된 센서 모듈 170의 전원 공급 차단, 표시 모듈 140의 전원 공급 차단 등을 제어할 수 있다. 또는 모드별 기능 처리 모듈 185는 전자 장치 100 보관 시 전자 장치 100을 턴-오프 상태로 자동 전환할 수 있다. 이 과정에서, 모드별 기능 처리 모듈 185는 전자 장치 100이 손목 등으로부터 정상 해제된 이후 HRM 센서 171을 제어하여 센서 신호를 검출하고, 센서 신호가 설정된 신호 형태(맥파 검출 신호가 없고, 일정 조도에 해당하는 노이즈 신호가 검출되는 상태)이면 전자 장치 100 보관으로 판단할 수 있다.
한 실시 예에 따르면, 모드별 기능 처리 모듈 185는 전자 장치 100이 충전 상태이면 통신 인터페이스 130을 제외한 나머지 구성들을 비활성화하도록 제어할 수 있다. 모드별 기능 처리 모듈 185는 전자 장치 100 충전이 완료되면 전자 장치 100을 슬립 모드로 천이되도록 제어하거나 턴-오프 상태로 천이되도록 제어할 수 있다. 모드별 기능 처리 모듈 185는 충전 상태가 해제되면 자동으로 센서 모듈 170을 활성화하여 착용 상태 여부를 검출하도록 제어할 수 있다.
한 실시 예에 따르면, 모드별 기능 처리 모듈 185는 제1 부위 또는 제2 부위(예: 손목 안쪽이나 바깥측)에 전자 장치 100이 착용되면 공용 모드(Public mode)로 기능 처리를 수행할 수 있다. 예컨대, 모드별 기능 처리 모듈 185는 공용 모드 수행 시 수신된 메시지의 적어도 일부 내용을 표시 모듈 140에 출력하도록 제어할 수 있다. 또한, 모드별 기능 처리 모듈 185는 메시지 수신 알람을 출력하도록 제어할 수 있다. 모드별 기능 처리 모듈 185는 제2 부위 또는 제1 부위(예: 손목 바깥측이나 안쪽)에 전자 장치 100이 착용되면 개인 모드(Privacy Mode)로 기능 처리를 수행할 수 있다. 예컨대, 모드별 기능 처리 모듈 185는 개인 모드 수행 시, 수신된 메시지에 대한 표시 알람 또는 진동 알람만을 수행할 수 있다. 상기 모드별 기능 처리 모듈 185는 이메일, 통신 메시지 등에 대해서도 착용 형태에 따라 다른 기능 처리를 제어할 수 있다.
탈부착 처리 모듈 187은 HRM 센서 171을 조도 센서 및 근접 센서 중 적어도 하나로 활용하여 분실 여부 확인 및 분실 방지를 처리할 수 있다. 예컨대, 탈부착 처리 모듈 187은 HRM 센서 171이 검출하는 생체 신호(예: 맥파 검출 신호)의 검출이 중지되면, 가속도 센서 또는 자이로 센서를 활성화하거나 이미 활성화된 가속도 센서 또는 자이로 센서가 제공하는 센서 신호를 분석할 수 있다. 탈부착 처리 모듈 187은 분석된 센서 신호를 기반으로 전자 장치 100이 착용 부위에서 이탈한 상태를 결정할 수 있다. 예컨대, 탈부착 처리 모듈 187은 전자 장치 100이 착용 부위에서 일정 거리 이상 일정 가속도를 가지며 이탈되는 경우 분실 해제로 판단할 수 있다. 탈부착 처리 모듈 187은 전자 장치 100이 착용 부위에서 일정 거리 이내로 이탈되데 가속도 또는 속도 등이 불규칙하게 변경되는 경우 분실 해제로 판단할 수 있다.
다양한 실시 예에 따르면, 탈부착 처리 모듈 187은 착용 부위로부터 전자 장치 100이 해제되면(예: HRM 센서 171의 맥파 검출이 중지되면) 상기 HRM 센서 171이 수집하는 센서 신호를 조도 센서 처리 방식 및 근접 센서 처리 방식 중 적어도 하나의 방식에 따라 처리할 수 있다. 탈부착 처리 모듈 187은 예컨대, HRM 센서 171이 수집하는 센서 신호의 변화를 통해 근접도 변화 및 조도 변화 중 적어도 하나를 판단할 수 있다. 탈부착 처리 모듈 187은 근접도 변화 및 조도 변화 중 적어도 하나가 정해진 분실 해제에 대응하는 변화를 보일 경우 분실 해제로 판단할 수 있다.
탈부착 처리 모듈 187은 전자 장치 100이 분실 해제로 판단되면, 전자 장치 101 또는 전자 장치 102에 정해진 메시지 전송을 제어할 수 있다. 탈부착 처리 모듈 187은 전자 장치 100이 분실 해제로 판단되면, 전자 장치 100의 진동 모듈, 표시 모듈 140, 입출력 모듈 120 중 적어도 하나가 설정된 데이터를 출력하도록 제어할 수 있다. 다양한 실시 예에 따르면, 전자 장치 100은 신호를 수집하는 센서 모듈, 적어도 상기 수집된 신호의 일부를 기반하여 생체 정보를 생성하는 모듈, 적어도 상기 수집된 신호의 일부를 기반하여 근접도 정보를 생성하는 모듈, 적어도 상기 수집된 신호의 일부를 기반하여 조도 정보를 생성하는 모듈, 적어도 상기 생체 정보, 상기 근접도 정보, 또는 상기 조도 정보를 기반하여 전자장치의 상태를 판단하는 모듈을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 생체 정보는 심박수일 수 있다.
다양한 실시 예에 따르면, 상기 전자장치의 상태는 전자장치의 착용상태를 포함할 수 있다.
다양한 실시 예에 따르면, 상기 전자 장치는 상기 생체 정보, 상기 근접도 정보 또는 상기 조도 정보 중 적어도 하나를 이용하여 전자장치를 제어하는 제어모듈을 더 포함할 수 있다.
다양한 실시 예에 따르면, 상기 7제어 모듈은 상기 생체 신호의 주파수 도메인 특성 및 시간 도메인 특성 중 적어도 하나를 기반으로 상기 전자 장치의 착용 부위를 판단할 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 상기 근접도 정보 분석을 기반으로 상기 전자 장치의 착용 여부를 판단하고, 착용 시 상기 생체 신호 분석 정보를 기반으로 상기 전자 장치의 착용 부위를 판단할 수 있다.
다양한 실시 예에 따르면, 상기 전자 장치는 상기 전자 장치가 착용자의 특정 부위에 착용된 상태에서의 생체 신호를 상기 특정 부위별 생체 신호를 참조 정보로 저장하는 저장 모듈을 더 포함할 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 상기 참조 정보와 수집된 정보 간의 유사도 비교를 수행하여 착용 상태 및 착용 부위를 판단할 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 상기 착용 상태에 대응하여 상기 전자 장치의 정보 출력 형태를 다르게 하는 출력할 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 상기 착용 상태에 대응하여 상기 정보를 가로 배열 가로 쓰기 방식, 상기 착용 상태에 대응하여 상기 정보를 가로 배열 세로 쓰기 방식, 상기 착용 상태에 대응하여 상기 정보를 세로 배열 가로 쓰기 방식, 상기 착용 상태에 대응하여 상기 정보를 세로 배열 세로 쓰기 방식, 상기 착용 상태에 대응하여 상기 정보를 상하 방향이 반전된 방식, 상기 착용 상태에 대응하여 특정 기능 실행과 관련한 소프트 버튼의 출력 위치 변경, 상기 착용 상태에 대응하여 표시 모듈에 출력되는 소프트 버튼의 실행 기능 종류 변경 중 적어도 하나를 제어할 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 상기 착용 상태에 대응하여 상기 전자 장치의 기능 처리를 다르게 적용할 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 상기 착용 상태에 대응하여 상기 전자 장치의 이벤트 발생을 알람하거나, 상기 착용 상태에 대응하여 상기 전자 장치의 발생된 이벤트의 내용 정보 중 적어도 일부를 출력할 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 상기 전자 장치 미착용 시 인증 확인을 수행할 수 있다.
다양한 실시 예에 따르면, 한 실시 예에 따른 전자 장치 100은 생체 신호 수집이 가능한 센서 모듈, 상기 센서 모듈이 수집한 센서 신호의 생체 신호 분석 정보, 상기 센서 신호를 기반으로 분석되는 근접도 정보, 상기 센서 신호를 기반으로 분석되는 조도 정보 중 적어도 하나를 기반으로 착용 상태를 판단하는 제어 모듈을 포함할 수 있다.
다양한 실시 예에 따르면, 제어 모듈은 상기 근접도 정보를 판단하여 착용/미착용(부착/탈착) 상태 정보를 전자 장치 혹은 외부 전자 장치에서 출력하도록 제어할 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 상기 생체 정보와 가속도 정보 및 자이로 정보를 기반으로 수면 상태 진입 여부를 자동으로 판단할 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 상기 전자 장치를 통해 신체정보를 센싱하여 상기 전자장치 또는 외부전자장치의 적어도 하나의 특정 동작을 수행하도록 제어할 수 있다. 다양한 실시 예에 따르면, 상기 제어 모듈은 상기 전자 장치를 착용한 부위의 신체 변화에 대응하여 변화되는 혈류량, 혈압, 산소포화도 중 적어도 하나의 변화된 생체 정보를 센싱하여 생체 정보 및 신체 변화에 따라 유추된 신체 동작을 기반으로 상기 전자 장치의 특정 동작을 수행하도록 제어할 수 있다.
도 4는 한 실시 예에 따른 착용 상태별 전자 장치의 UI 운용 방법을 도시한다.
도 4를 참조하면, 착용 상태별 전자 장치 UI 운용 방법은 제어 모듈 160이 과정 401에서 기능 운용 또는 대기를 제어할 수 있다. 예컨대 제어 모듈 160은 전자 장치 100을 저전력 모드로 운용하거나 또는 슬립 모드로 운용하도록 제어할 수 있다. 여기서 저전력 모드 또는 슬립 모드는 표시 모듈 140 등의 전원 공급을 차단하고 특정 장치 요소의 전원만을 유지하는 모드일 수 있다. 예컨대, 제어 모듈 160은 HRM 센서 171에 전원을 공급하고 다른 장치 요소들(예: 표시 모듈, 통신 인터페이스 등)의 전원을 차단하도록 제어할 수 있다. 한 실시 예에 따르면, 제어 모듈 160은 과정 401에서 전자 장치 100을 턴-온시키기 위한 입력 신호 발생에 대응하여 전자 장치 100의 전원 공급을 제어하고, 초기화 과정을 수행할 수 있다. 한 실시 예에 따르면, 제어 모듈 160은 과정 401에서 전자 장치 100의 특정 기능 예컨대 음원 재생 기능에 대응하여 오디오 데이터를 출력하도록 제어할 수 있다.
과정 403에서 제어 모듈 160은 전자 장치 100의 착용 상태 확인을 수행할 수 있다. 예컨대, 제어 모듈 160은 HRM 센서 171이 수집하는 센서 신호에 생체 신호가 포함되어 있는지 여부를 확인할 수 있다. 제어 모듈 160은 생체 신호가 포함되어 있지 않은 센서 신호를 수신하면 전자 장치 100 미착용 상태로 판단할 수 있다. 제어 모듈 160은 생체 신호가 포함되어 있는 것으로 판단되면, 전자 장치 100이 사용자의 일정 부위에 착용된 상태로 판단할 수 있다. 다양한 실시 예에 따르면, 제어 모듈 160은 수집된 생체 신호의 특성에 따라 전자 장치 100의 착용 부위를 판단할 수 있다. 예컨대, 제어 모듈 160은 수집된 생체 신호가 정해진 제1 참조 정보에 대응되는 경우 전자 장치 100이 손목 안쪽에 착용된 상태로 판단할 수 있다. 제어 모듈 160은 수집된 생체 신호가 정해진 제2 참조 정보에 대응되는 경우 전자 장치 100이 손목 바깥측에 착용된 상태로 판단할 수 있다. 다양한 실시 예에 따르면, 제어 모듈 160은 사전 정의된 참조 정보와 현재 수집된 센서 신호 비교를 통하여 특정 부위 예컨대 손가락, 발목, 목, 팔의 상박부나 하박부 등의 착용 상태를 판단할 수도 있다. 이와 관련하여, 제어 모듈 160은 각 부위별 참조 정보를 훈련 모드를 통해 획득하도록 제어할 수 있다.
과정 405에서 제어 모듈 160은 착용 상태별 UI 제공을 수행할 수 있다. 예컨대, 제어 모듈 160은 전자 장치 100 미착용 상태에 따른 UI, 전자 장치 100 착용 상태에 따른 UI를 제공할 수 있다. 전자 장치 100 미착용 상태에 따른 UI는 예컨대 표시 모듈 140이 턴-오프 상태 또는 락 스크린 상태 등의 UI를 포함할 수 있다. 착용 상태에 따른 UI는 착용 부위별로 다를 수 있다. 예컨대, 착용 상태에 따른 UI는 손목 안쪽 착용 시에 제공되는 가로모드 UI, 손목 바깥측 착용 시에 제공되는 세로모드 UI를 포함할 수 있다.
과정 407에서 제어 모듈 160은 착용 상태 변경이 발생하는지 확인할 수 있다. 제어 모듈 160은 착용 상태 변경 확인과 관련하여 HRM 센서 171을 일정 주기로 활성화하여, 착용 상태 변경을 판단할 수 있다. 또는 제어 모듈 160은 HRM 센서 171을 실시간으로 운용하여 착용 상태 변경을 확인할 수 있다. 과정 407에서 착용 상태 변경이 없는 경우 제어 모듈 160은 409 과정으로 분기하여 이전 상태 유지를 제어할 수 있다. 이전 상태를 유지하면서, 제어 모듈 160은 전자 장치 100의 착용 상태 변경이 발생하는지 확인하는 과정 407을 재수행할 수 있다. 또한, 제어 모듈 160은 이전 상태를 유지하면서 전자 장치 100의 기능 종료와 관련한 이벤트 발생이 있는 경우 기능 종료를 제어할 수 있다. 제어 모듈 160은 과정 407에서 착용 상태 변경이 발생하면 과정 403 이전으로 분기하여 이하 과정을 재수행할 수 있다.
도 5는 한 실시 예에 따른 착용 상태별 전자 장치 운용 방법을 도시한다.
도 5를 참조하면, 착용 상태별 전자 장치 운용 방법은 제어 모듈 160이 과정 501에서 기능 운용 또는 대기를 수행할 수 있다. 제어 모듈 160은 정해진 스케줄 정보에 따라 특정 기능 수행 예컨대 대기 화면 출력 기능, 메뉴 화면 출력 기능, 락 스크린 기능 등을 수행할 수 있다. 또는 제어 모듈 160은 센서 모듈 170의 HRM 센서 171의 전원 공급만을 유지하고 기타 장치 요소들의 전원 공급은 차단하는 슬립 모드 상태를 유지하도록 제어할 수 있다.
과정 503에서 제어 모듈 160은 착용 상태 여부를 확인할 수 있다. 제어 모듈 160은 HRM 센서 171로부터 전달되는 센서 신호를 기준으로 착용 상태 여부를 확인할 수 있다. 과정 503에서 전자 장치 100이 착용 상태로 판단되면 제어 모듈 160은 과정 505에서 제1 착용 상태(예: 손목 안쪽 착용 상태)인지 여부를 확인할 수 있다. 과정 505에서 전자 장치 100이 제1 착용 상태이면 제어 모듈 160은 과정 507에서 제1 모드 기반 장치 제어를 수행할 수 있다. 한 실시 예에 따르면, 제어 모듈 160은 특정 기능 수행과 관련한 정보 전체 또는 일부를 출력하도록 제어할 수 있다. 예컨대, 제어 모듈 160은 메시지 수신 시, 수신된 메시지 내용 전체 또는 일부를 출력하도록 제어할 수 있다. 한 실시 예에 따르면, 제어 모듈 160은 제1 착용 상태이면 비보안 모드 운용을 제어할 수 있다. 예컨대, 제어 모듈 160은 전자 장치 100 운용 시 별도의 인증 과정 수행 없이 메뉴 진입이나 정보 표시를 지원할 수 있다.
과정 505에서 제1 착용 상태가 아니면, 제어 모듈 160은 과정 509에서 제2 착용 상태(예: 손목 바깥측 착용 상태)인지 확인할 수 있다. 제어 모듈 160은 과정 509에서 제2 착용 상태로 판단되면, 과정 511에서 제2 모드 기반 장치 제어를 수행할 수 있다. 한 실시 예에 따르면, 제어 모듈 160은 특정 기능 수행과 관련하여 출력할 정보에 대한 알림을 출력하도록 제어할 수 있다. 예컨대, 제어 모듈 160은 메시지 수신 시, 메시지 수신 알림을 출력하도록 제어할 수 있다. 한 실시 예에 따르면, 제어 모듈 160은 제1 착용 상태이면 보안 모드 운용을 제어할 수 있다. 예컨대, 제어 모듈 160은 전자 장치 100 운용 시 인증 과정을 거쳐 메뉴 진입이나 정보 표시를 지원할 수 있다. 이와 관련하여, 제어 모듈 160은 인증 정보 입력을 위한 입력창 출력 및 입력된 인증 정보의 확인 과정을 수행할 수 있다.
과정 509에서 제2 착용 상태가 아니면, 제어 모듈 160은 과정 513에서 제3 모드 기반 장치 제어를 수행할 수 있다. 예컨대, 제어 모듈 160은 전자 장치 100이 팔의 상박부에 착용된 경우, 기능 수행과 관련한 정보를 TTS(Text to Speech)로 변경하여 출력하도록 제어할 수 있다. 예컨대, 제어 모듈 160은 메시지 수신 시 메시지 내용을 TTS로 변환하여 출력하도록 제어할 수 있다.
과정 503에서 착용 상태가 아니면, 제어 모듈 160은 과정 515에서 미착용 상태에 따른 장치 제어를 수행할 수 있다. 예컨대, 제어 모듈 160은 표시 모듈 140의 전원을 턴-오프하거나, 특정 기능 예컨대 음원 재생 기능을 수행할 수 있다. 이 과정에서 제어 모듈 160은 HRM 센서 171의 센서 주기를 착용 상태에 비하여 길게 조정하여 전원 소모를 줄일 수 있다.
제어 모듈 160은 과정 517에서 착용 상태 변경이 있는지 확인할 수 있다. 제어 모듈 160은 과정 517에서 착용 상태가 변경되면 과정 503으로 분기하여 이하 과정을 재수행할 수 있다. 제어 모듈 160은 과정 517에서 착용 상태 변경이 없으면 과정 519에서 이전 상태 유지를 제어할 수 있다. 이전 상태를 유지하면서, 제어 모듈 160은 과정 517을 재수행하고 상태 변경 발생 시 그에 따른 기능 변경을 제어할 수 있다.
도 6은 한 실시 예에 따른 분실 방지 관련 전자 장치 운용 방법을 도시한다.
도 6을 참조하면, 분실 방지 관련 전자 장치 운용 방법은 제어 모듈 160은 과정 601에서 착용 상태에 따른 기능 운용을 수행할 수 있다. 예컨대, 제어 모듈 160은 HRM 센서 171이 제공하는 생체 신호 분석을 통하여 착용자의 건강 상태 검사를 수행할 수 있다. 또는 제어 모듈 160은 통신 메시지 수신 알림 등의 통신 대기 기능 및 릴레이 기능을 지원하는 상태를 유지할 수 있다. 또는 제어 모듈 160은 스케줄링된 정보에 대응하여 만보기 기능을 지원하거나 시계 표시 기능을 지원할 수 있다.
과정 603에서 제어 모듈 160은 착용 해제 여부를 확인할 수 있다. 이와 관련하여 제어 모듈 160은 HRM 센서 171의 센서 신호 변경이 발생하는지 확인할 수 있다. 제어 모듈 160은 HRM 센서 171의 센서 신호 변경이 발생하면 착용 해제와 관련한 이벤트 발생으로 판단할 수 있다. 제어 모듈 160은 HRM 센서 171의 센서 신호 변경이 없으면 과정 601 이전으로 분기하여 이하 과정을 재수행할 수 있다.
과정 603에서 전자 장치 100이 착용 해제되는 센서 신호 변화가 발생하면, 제어 모듈 160은 과정 605에서 정상 해제인지 여부를 확인할 수 있다. 이와 관련하여, 제어 모듈 160은 정상 해제와 관련한 센서 신호의 변화 값 및 비정상 해제와 관련한 센서 신호의 변화 값 중 적어도 하나를 저장 및 운용할 수 있다. 저장 모듈 150은 정상 해제 관련 참조 정보 및 비정상 해제 관련 참조 정보를 저장할 수 있다. 저장 모듈 150은 제어 모듈 160 요청에 대응하여 상기 참조 정보를 제공할 수 있다. 제어 모듈 160은 정상 해제 관련 참조 정보 및 비정상 해제 관련 참조 정보를 훈련 모드를 통해 수집하거나, 전자 장치 100 사용 이력을 통해 수집할 수 있다.
과정 605에서 정상 해제가 아닌 것으로 판단되면, 제어 모듈 160은 과정 607에서 분실 해제에 따른 알람을 수행할 수 있다. 제어 모듈 160은 정해진 비프음이나 특정 오디오 데이터를 입출력 모듈 120을 통해 출력하도록 제어할 수 있다. 제어 모듈 160은 표시 모듈 140의 턴-온 또는 턴-오프 상태를 정해진 분실 해제 상태로 변경하도록 제어할 수 있다. 제어 모듈 160은 전자 장치 100을 보안 모드로 변경하여 제어 요청 시 인증 과정 수행을 선행하도록 제어할 수 있다. 다양한 실시 예에 따르면, 제어 모듈 160은 분실 해제 시, 정해진 전자 장치 101 또는 102에 분실 알람 메시지를 전송하도록 통신 인터페이스 130을 제어할 수 있다.
한 실시 예에 따르면, 제어 모듈 160은 HRM 센서 171이 제공하는 센서 신호의 변화가 비정상 해제 관련 참조 정보에 대응되는 경우 분실 해제로 판단할 수 있다. 이 과정에서 제어 모듈 160은 HRM 센서 171의 센서 신호 변화가 발생하면 HRM 센서 171이 수집하는 센서 신호를 조도 센서 신호 및 근접 센서 신호 중 적어도 하나로 변환하고, 그에 따라 조도 변화 및 근접 거리 변화 중 적어도 하나를 판단할 수 있다. 제어 모듈 160은 조도 변화 및 근접 거리 변화 중 적어도 하나가 사전 정의된 비정상 해제 관련 참조 정보와 유사하면 비정상 해제로 판단할 수 있다. 또한, 제어 모듈 160은 조도 변환 및 근접 거리 변화 중 적어도 하나가 사전 정의된 정상 해제 관련 참조 정보와 유사하면 정상 해제로 판단할 수 있다. 다양한 실시 예에 따르면, 제어 모듈 160은 정상 해제 관련 참조 정보만을 이용하거나 또는 비정상 해제 관련 참조 정보만을 이용할 수도 있다. 예컨대, 제어 모듈 160은 센서 신호가 정상 해제 관련 참조 정보에 부합하지 않는 경우 비정상 해제로 판단할 수 있다. 또는 제어 모듈 160은 센서 신호가 비정상 해제 관련 참조 정보에 부합하지 않는 경우 정상 해제로 판단할 수 있다.
과정 605에서 정상 해제로 판단되면, 제어 모듈 160은 과정 609에서 정상 해제에 따른 기능 수행 예컨대 슬립 모드 진입을 제어할 수 있다. 슬립 모드는 표시 모듈 140의 전원 공급을 차단하는 모드일 수 있다. 슬립 모드는 센서 모듈 170의 운용 주기를 길게 하는 모드일 수 있다.
도 7은 한 실시 예에 따른 훈련 모드 관련 전자 장치 운용 방법을 도시한다.
도 7을 참조하면, 훈련 모드 관련 전자 장치 운용 방법은 제어 모듈 160이 과정 701에서 기능 운용 또는 대기를 수행할 수 있다. 한 실시 예에 따르면, 제어 모듈 160은 전자 장치 100이 지원하는 적어도 하나의 기능 또는 앱 실행과 관련한 오브젝트 또는 아이콘, 또는 아이템이나 메뉴 항목을 출력하도록 제어할 수 있다. 예컨대, 제어 모듈 160은 훈련 모드 기능(전자 장치 100의 착용 상태별 참조 정보를 수집하는 기능) 실행과 관련한 오브젝트를 출력하도록 제어할 수 있다.
과정 703 에서 제어 모듈 160은 훈련 모드 실행과 관련한 이벤트 발생을 확인할 수 있다. 예컨대, 제어 모듈 160은 훈련 모드 기능 관련 오브젝트를 선택하는 이벤트가 발생하는지 확인할 수 있다. 또는 제어 모듈 160은 전자 장치 100이 최초 전원이 공급되면 자동으로 훈련 모드를 활성화하도록 하는 스케줄링 이벤트를 확인할 수 있다. 또는 제어 모듈 160은 타 전자 장치(예: 전자 장치 101 또는 102)로부터 훈련 모드 진입과 관련한 메시지를 수신하는지 확인할 수 있다.
과정 703에서 훈련 모드 실행과 관련한 이벤트 발생이 없으면, 제어 모듈 160은 과정 705에서 이벤트 종류에 대응하는 해당 기능 수행을 제어할 수 있다. 예컨대, 제어 모듈 160은 발생한 이벤트 종류에 대응하여 음원 재생 기능을 수행하거나, 헬스 코칭 기능(예: 만보기 기능, 심혈관계 상태 정보 제공 기능 등)을 수행하거나, 슬립 모드(표시 모듈이 턴-오프된 상태)로 천이하는 등의 기능 제어를 수행할 수 있다.
과정 703에서 훈련 모드 실행과 관련한 이벤트 발생이 있으면, 제어 모듈 160은 과정 707에서 제1 착용 방향 안내를 수행할 수 있다. 예컨대, 제어 모듈 160은 전자 장치 100을 왼손 손목, 왼쪽 발목, 왼손 손가락, 왼팔 상박부, 왼팔 하박부, 목 중 적어도 하나에 착용하되 해당 착용 부위에 삽입되는 방향을 안내하는 가이드 장보(예: 화살표 정보 등)를 출력할 수 있다. 제어 모듈 160은 과정 709에서 제1 기준 범위를 수집할 수 있다.
예컨대, 제어 모듈 160은 사용자의 왼쪽 신체 특정 부위에 착용된 상태에서 생체 신호 정보(예: 적어도 한번의 맥파 신호, 혈관의 혈류 흐름 정보 등)를 수집할 수 있다. 제어 모듈 160은 수집된 생체 신호 정보를 기준으로 특정 부위 착용 상태에서 제1 기준 범위에 해당하는 참조 정보를 생성할 수 있다. 제어 모듈 160은 참조 정보로 이용될 수 있는 제1 기준 범위의 생체 신호 정보가 수집되면, 제1 착용 방향 안내 및 제1 기준 범위 수집 과정 완료를 안내할 수 있다.
제어 모듈 160은 과정 711에서 제2 착용 방향 안내를 수행할 수 있다. 제2 착용 방향 안내 정보는 오른손 손목, 오른쪽 발목, 오른손 손가락, 오른팔 상박부, 오른팔 하박부 중 적어도 하나에 착용하되 해당 착용 부위에 삽입되는 방향을 안내하는 가이드 장보(예: 화살표 정보 등)를 출력할 수 있다. 제어 모듈 160은 과정 713에서 제2 기준 범위를 수집할 수 있다. 제어 모듈 160은 제2 기준 범위를 기반으로 특정 착용 부위와 착용 방향에 대한 참조 정보를 생성할 수 있다.
제어 모듈 160은 과정 715에서 기능 종료와 관련한 이벤트 발생이 있는지 확인할 수 있다. 제어 모듈 160은 과정 715에서 기능 종료 관련 이벤트 발생이 없으면, 과정 703 이전으로 분기하여 이하 과정을 재수행할 수 있다. 제어 모듈 160은 과정 715에서 기능 종료 관련 이벤트가 발생하면 훈련 모드 기능을 중지하도록 제어할 수 있다.
다양한 실시 예에 따르면, 제어 모듈 160은 훈련 모드 과정에서 미착용 상태에 대한 참조 정보 및 클립 모드 상태에 대한 참조 정보를 수집하여 저장할 수 도 있다. 예컨대, 제어 모듈 160은 훈련 모드 과정에서 미착용 상태에 대한 안내 정보 출력 후 일정 시간 동안 HRM 센서 171을 이용한 센서 신호를 수집할 수 있다. 이 과정에서 제어 모듈 160은 HRM 센서 171에 의한 생체 신호가 없고 HRM 센서 171의 센서 신호 분석에 따라 근접 물체가 없는 경우에 해당하는 정보를 미착용 상태의 참조 정보로 수집할 수 있다. 제어 모듈 160은 HRM 센서 171에 의해 생체 신호는 없고, HRM 센서의 센서 신호 분석에 따라 근접 물체가 있는 경우의 센서 신호를 클립 모드 상태에 대한 참조 정보로 수집할 수 있다.
다양한 실시 예에 따르면, 한 실시 예에 따른 전자 장치 운용 방법은 센서 모듈 기반의 신호를 수집하는 과정, 적어도 상기 수집된 신호의 일부를 기반으로 하는 생체 정보, 적어도 상기 수집된 신호의 일부를 기반으로 하는 근접도 정보, 적어도 상기 수집된 신호의 일부를 기반으로 하는 조도 정보 중 적어도 하나를 이용하여 전자장치의 상태를 판단하는 과정을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 생체 정보는 심박수일 수 있다.
다양한 실시 예에 따르면, 상기 전자장치의 상태는 전자장치의 착용상태를 포함할 수 있다.
다양한 실시 예에 따르면, 상기 생체 정보, 상기 근접도 정보 또는 상기 조도 정보 중 적어도 하나를 이용하여 전자장치를 제어하는 과정을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 판단하는 과정은 상기 생체 신호의 주파수 도메인 특성 및 시간 도메인 특성 중 적어도 하나를 기반으로 상기 전자 장치의 착용 부위를 판단하는 과정을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 판단하는 과정은 상기 근접도 정보 분석을 기반으로 상기 전자 장치의 착용 여부를 판단하는 과정, 상기 생체 신호 분석 정보를 기반으로 상기 전자 장치의 착용 부위를 판단하는 과정을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 방법은 상기 전자 장치가 착용자의 특정 부위에 착용된 상태에서의 생체 신호를 수집하는 과정, 상기 특정 부위별 생체 신호를 참조 정보로 저장하는 과정을 더 포함할 수 있다.
다양한 실시 예에 따르면, 상기 판단하는 과정은 상기 참조 정보와 수집된 정보 간의 유사도 비교를 수행하여 착용 상태 및 착용 부위를 판단하는 과정을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 방법은 상기 착용 상태에 대응하여 상기 전자 장치의 정보 출력 형태를 다르게 하는 출력 과정을 더 포함할 수 있다.
다양한 실시 예에 따르면, 상기 출력 과정은 상기 착용 상태에 대응하여 상기 정보를 가로 배열 가로 쓰기 방식으로 출력하는 과정, 상기 착용 상태에 대응하여 상기 정보를 가로 배열 세로 쓰기 방식으로 출력하는 과정, 상기 착용 상태에 대응하여 상기 정보를 세로 배열 가로 쓰기 방식으로 출력하는 과정, 상기 착용 상태에 대응하여 상기 정보를 세로 배열 세로 쓰기 방식으로 출력하는 과정, 상기 착용 상태에 대응하여 상기 정보를 상하 방향이 반전된 방식으로 출력하는 과정, 상기 착용 상태에 대응하여 특정 기능 실행과 관련한 소프트 버튼의 출력 위치를 다르게 하거나 변경하는 과정, 상기 착용 상태에 대응하여 표시 모듈에 출력되는 소프트 버튼의 실행 기능 종류를 다르게 하거나 변경하는 과정 중 적어도 하나의 과정을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 방법은 상기 착용 상태에 대응하여 상기 전자 장치의 기능 처리를 다르게 적용하는 적용 과정을 더 포함할 수 있다.
다양한 실시 예에 따르면, 상기 적용 과정은 상기 착용 상태에 대응하여 상기 전자 장치의 이벤트 발생을 알람하는 과정, 상기 착용 상태에 대응하여 상기 전자 장치의 발생된 이벤트의 내용 정보 중 적어도 일부를 출력하는 과정 중 적어도 하나의 과정을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 적용 과정은 상기 전자 장치 미착용 시 인증 확인을 수행하는 과정을 포함할 수 있다.
다양한 실시 예에 따르면, 한 실시 예에 따른 전자 장치 운용 방법은 특정 센서의 센서 신호를 수집하는 과정, 수집된 센서 신호의 생체 신호 분석 정보, 상기 센서 신호를 기반으로 분석되는 근접도 정보, 상기 센서 신호를 기반으로 분석되는 조도 정보 중 적어도 하나를 기반으로 상기 센서를 포함하는 전자 장치의 착용 상태를 판단하는 과정을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 제어 하는 과정은 상기 근접도 정보를 판단하여 착용/미착용 상태 정보를 전자 장치 혹은 외부 전자 장치에서 출력하도록 제어하는 과정, 상기 생체 정보와 가속도 정보 및 자이로 정보를 기반으로 수면 상태 진입 여부를 자동으로 판단하는 과정, 상기 전자 장치를 통해 신체정보를 센싱하여 상기 전자장치 또는 외부전자장치의 적어도 하나의 특정 동작을 수행하는 과정 중 적어도 하나의 과정을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 제어 하는 과정은 상기 전자 장치를 착용한 부위의 신체 변화에 대응하여 변화되는 혈류량, 혈압, 산소포화도 중 적어도 하나의 변화된 생체 정보를 센싱하여 생체 정보 및 신체 변화에 따라 유추된 신체 동작을 기반으로 상기 전자 장치의 특정 동작을 수행하도록 제어하는 과정을 포함할 수 있다.
도 8a는 한 실시 예에 따른 전자 장치의 착용 상태에 따른 모드 제어를 도시한다.
도 8a를 참조하면, 801 상태에서와 같이 사용자의 왼손 손목 바깥측 810에 전자 장치 100이 배치되도록 전자 모듈 20이 장착될 수 있다. 전자 장치 100에 배치된 HRM 센서 171은 사용자의 왼손 손목 중 바깥측 810 부분에 배치되어 센서 신호를 검출할 수 있다. 전자 장치 100의 제어 모듈 160은 HRM 센서 171로부터 전달된 센서 신호를 분석하여 어떠한 형태의 생체 신호인지를 판단할 수 있다. 예컨대, 제어 모듈 160은 사전 저장된 왼손 손목 바깥측 810과 관련한 참조 정보를 토대로 전자 장치 100이 왼손 손목 바깥측 810에 배치된 것으로 판단할 수 있다. 왼손 손목 바깥측 810에서의 생체 신호 측정 정보와, 왼손 손목 내측 820에서의 생체 신호 측정 정보는 서로 상이할 수 있다. 또한 오른손과 왼손에서의 생체 신호 측정 정보는 서로 차이를 가질 수 있다. 참조 정보는 각 부위별로 서로 다른 특성을 보이는 생체 신호 측정 정보로부터 추출된 특징점들에 대한 정보를 포함할 수 있다.
제어 모듈 160은 왼손 손목 바깥측 810에 전자 장치 100이 배치된 것으로 판단되면, 개인 모드(Privacy mode)(예: 발생한 이벤트 종류 정보에 대한 알람 또는 안내 정보 출력 기능 또는 모드)로 정보가 출력되도록 제어할 수 있다. 예컨대, 제어 모듈 160은 통신 메시지가 수신되면, 메시지 수신 알림만을 표시 모듈 140에 출력하도록 처리할 수 있다.
803 상태에서와 같이 전자 모듈 20은 전자 장치 100이 왼손 손목 내측 820에 배치되도록 장착될 수 있다. 전자 장치 100에 배치된 HRM 센서 171은 왼손 손목 중 내측 820에 배치되어 센서 신호를 검출할 수 있다. 제어 모듈 160은 저장 모듈 150에 저장된 참조 정보를 이용하여 왼손 손목 중 내측 820에 전자 장치 100이 배치되어 있는 상태임을 확인할 수 있다. 제어 모듈 160은 전자 장치 100이 왼손 손목 내측 820에 배치된 것으로 판단되면, 공개 모드(Public mode)(예: 이벤트 내용 중 적어도 일부를 출력하는 기능 또는 모드)로 정보가 출력되도록 제어할 수 있다. 예컨대, 제어 모듈 160은 통신 메시지가 수신되면, 메시지 내용 중 적어도 일부를 표시 모듈 140에 출력하도록 제어할 수 있다.
805 상태에서와 같이 전자 모듈 20이 사용자의 신체 부위에 장착되지 않은 상태에서 전원 켜기가 실행될 수 있다. 또는 전자 모듈 20은 사용자의 신체 부위에 장착된 상태에서 장착 해제된 상태에 따라 805 상태를 가질 수 있다. 제어 모듈 160은 HRM 센서 171이 수집한 센서 신호를 분석하여 센서 신호에 생체 신호가 포함되어 있는지 여부를 확인할 수 있다. 제어 모듈 160은 805 상태인 경우 생체 신호가 포함되지 않은 센서 신호를 확인할 수 있다. 제어 모듈 160은 805 상태의 전자 장치 100에 대하여 보안 모드(Guest mode)(예: 이벤트 발생에 대한 알람이나 안내 정보를 출력하지 않는 기능 또는 모드)를 적용할 수 있다. 예컨대, 제어 모듈 160은 표시 모듈 140이 입출력 모듈 120 등으로부터 입력 이벤트가 발생하거나 통신 메시지 수신 또는 스케줄 정보 도래, 특정 앱 실행에 따른 이벤트 발생이 있으면 인증 정보 확인 과정을 수행하도록 제어할 수 있다. 이와 관련하여 제어 모듈 160은 인증 정보 확인 화면을 표시 모듈 140에 출력할 수 있다. 제어 모듈 160은 인증 정보 확인이 완료되면, 발생된 이벤트 관련 내용을 표시 모듈 140 및 입출력 모듈 120 중 적어도 하나를 통해 출력하도록 제어할 수 있다. 다양한 실시 예에 따르면, 제어 모듈 160은 HRM 센서 171에 의해 생체 인식 실패 또는 생체 인증 실패가 발생하면, 정해진 간단한 메시지를 출력하거나 알림 화면 출력을 제한할 수 있다. 제어 모듈 160은 생체 인식, 생체 인증, 패스워드 인증 등을 수행 후 공개 모드 또는 개인 모드 중 어느 하나의 모드로 동작하도록 제어할 수 있다.
807 상태에서와 같이 전자 장치 100은 전자 모듈 20로부터 이탈된 후, 특정 위치에 거치될 수 있다. 예컨대, 전자 장치 100은 사용자의 호주머니나 특정 위치 870(예: 사용자의 신체에 직접적인 접촉이 발생하지 않는 위치)에 배치되거나 장착될 수 있다. 제어 모듈 160은 HRM 센서 171로부터 수집되는 센서 신호를 분석하여 생체 신호가 없는 경우, 수신된 센서 신호에 대한 근접도 분석을 수행할 수 있다. 제어 모듈 160은 근접도가 정해진 값 이하인 경우 전자 장치 100이 클립 모드(Clip mode)(예: 만보기나 헤드셋 기능 등 정해진 특정 기능을 수행하는 모드 또는 기능)로 동작하도록 제어할 수 있다.
도 8b는 한 실시 예에 따른 전자 장치의 착용 상태에 따른 UI 제어를 도시한다.
도 8b를 참조하면, 전자 모듈 20은 사용자의 다양한 부위에 장착될 수 있다. 예컨대, 전자 모듈 20은 809 상태에서와 같이 사용자의 왼손 손목 바깥측 810에 장착되는 상태, 811 상태에서와 같이 사용자의 왼손 손목 내측 820에 장착되는 상태, 813 상태에서와 같이 사용자의 오른손 손목 바깥측 830에 장착되는 상태, 815 상태에서와 같이 사용자의 오른손 손목 내측 850 등에 장착되는 상태를 가질 수 있다. 또한 전자 모듈 20은 왼손 또는 오른손에 장착되는 과정에서 817 상태에서와 같이 사용자의 표시 모듈 140의 일측이 손가락쪽으로 배치되는 상측 방향 또는 819 상태에서와 같이 사용자의 표시 모듈 140이 일측이 팔 안쪽으로 배치되는 하측 방향으로 장착될 수 있다.
한 실시 예에 따르면, 전자 장치 100의 제어 모듈 160은 장착되는 위치에 대응하여 다양한 UI 모드를 제공할 수 있다. 예컨대, 제어 모듈 160은 809 상태에서와 같이 사용자의 왼손 손목 바깥측 810에 장착되는 상태이면 표시 모듈 140의 정보가 좌측에서 우측으로 표시되는 세로 쓰기 형태의 정보 출력을 지원할 수 있다. 한 실시 예에 따르면, 제어 모듈 160은 811 상태에서와 같이 사용자의 왼손 손목 내측 820에 장착되는 상태이면 표시 모듈 140의 정보가 좌측에서 우측으로 표시되는 가로 쓰기 형태의 정보 출력을 지원할 수 있다. 한 실시 예에 따르면, 제어 모듈 160은 813 상태에서와 같이 사용자의 오른손 손목 바깥측 830에 장착되는 상태이면 표시 모듈 140의 정보가 우측에서 좌측으로 표시되는 세로 쓰기 형태의 정보 출력을 지원할 수 있다. 한 실시 예에 따르면, 제어 모듈 160은 815 상태에서와 같이 사용자의 오른손 손목 내측 850에 장착되는 상태이면 표시 모듈 140의 정보가 좌측에서 우측으로 표시되는 가로 쓰기 형태의 정보 출력을 지원할 수 있다. 한 실시 예에 따르면, 제어 모듈 160은 817 상태에서와 같이 표시 모듈 140 일측이 상측으로 배치되고 사용자의 왼손 손목 바깥측 810에 장착되는 상태이면 표시 모듈 140의 정보가 좌측에서 우측으로 표시되는 가로 쓰기 형태의 정보 출력을 지원할 수 있다. 한 실시 예에 따르면, 제어 모듈 160은 819 상태에서와 같이 표시 모듈 140 일측이 하측으로 배치되고 사용자의 왼손 손목 바깥측 810에 장착되는 상태이면 표시 모듈 140의 정보가 좌측에서 우측으로 표시되는 가로 쓰기 형태이되 정보 출력이 상하가 반전되어 출력되도록 제어할 수 있다.
한편, 다양한 실시 예에 따르면, 전자 장치 100의 UI 모드는 훈련 모드에서 사용자 입력에 대응하여 설정되거나 설정 변경될 수 있다. 예컨대, 제어 모듈 160은 훈련 모드에서 착용 상태에 대한 참조 정보를 수집하는 과정에서, UI 출력 방향에 대한 정보를 수집할 수 있다. 이와 관련하여, 제어 모듈 160은 훈련 모드와 관련한 화면 인터페이스 제공 시 UI 출력 방향과 관련한 화면 인터페이스를 제공하고, 특정 착용 상태나 미착용 상태, 착용 부위 등에 따라 UI 출력 상태, UI 출력 방향 등을 설정할 수 있도록 지원할 수 있다.
다양한 실시 예에 따르면, 전자 장치 100의 제어 모듈 160은 HRM 센서 171이 수집하는 센서 신호를 이용하여 수면 상태 확인을 수행할 수 있다. 예컨대, 제어 모듈 160은 충전 이외의 시간 동안 사전 정의된 일정 시간 간격(예: 5분 간격마다 1초 동안)으로 착용 여부를 검사할 수 있다. 이 과정에서 제어 모듈 160은 HRM 센서 171이 수집한 센서 신호를 기반으로 근접도만을 체크한 후 근접 여부에 따라 생체 신호 분석을 수행하여 착용여부 및 수면 여부를 검사할 수 있다. 제어 모듈 160은 수면 상태에 대한 생체 신호를 참조 정보로 저장 관리할 수 있다.
다양한 실시 예에 따르면, 제어 모듈 160은 근접도 검사 및 가속도 센서 신호 검사를 통하여 수면 상태 여부를 판단할 수 있다. 이 과정에서 제어 모듈 160은 RSF(Remote Sensor Framework)를 기반으로 HRM 센서 171이 수집한 센서 신호를 착용 유무를 판단하는 근접 센서 신호로서 타 전자 장치 101 또는 102에 전송할 수 있다. 제어 모듈 160은 착용자가 수면 모드인 경우, 그에 대응하는 UI 모드(예: 표시 모듈 140이 턴-오프된 슬립 모드)를 적용할 수 있다.
다양한 실시 예에 따르면, 제어 모듈 160은 자이로 센서와 가속도 센서 및 HRM 센서의 수집된 신호를 분석하여 자동으로 수면 상태를 판단할 수 있다. 제어 모듈 160은 수면 상태가 판단되면 전자 장치 100의 특정 기능 예컨대 수면 진입 모드와 수면 해제 모드 중 어느 하나를 수행하도록 제어할 수 있다. 수면 진입 모드는 예컨대 표시 모듈 140을 턴-오프하거나 전자 장치 100의 딥 슬립 모드 진입 상태로 천이시키는 모드일 수 있다. 수면 해제 모드는 사전 정의된 특정 기능을 수행하는 모드로서 예컨대 시계 기능을 자동으로 출력하는 기능, 날씨 정보를 자동으로 수집하여 출력하는 기능, 설정된 음원을 자동으로 실행하는 기능 중 적어도 하나의 기능을 포함하는 모드일 수 있다.
다양한 실시 예에 따르면, 전자 장치의 표시 모듈 140은 소프트 버튼 141을 제공할 수 있다. 소프트 버튼 141은 전자 장치 100의 특정 기능으로 바로 진입하는 숏컷 기능(헬스 케어 기능)을 제공하거나 특정 메뉴를 제공할 수 있다. 또는 설정에 따라 소프트 버튼 141은 수신 저장된 메시지나 저장 모듈 150에 저장된 특정 데이터 검색 기능을 제공할 수 있다. 또는 소프트 버튼 141은 외부 장치와의 자동 동기화 기능(예: 블루투스 오토 페어링 기능 등)을 지원할 수 있다. 상술한 소프트 버튼 141은 앞서 설명한 착용 상태에 따라 그 위치가 변경될 수 있다. 한 실시 예에 따르면, 소프트 버튼 141은 왼손 착용 상태와 오른손 착용 상태에 따라 그 위치가 표시 모듈 140의 중심을 기준으로 좌측으로 치우쳐 배치되거나 우측으로 치우쳐 배치될 수 있다. 한 실시 예에 따르면, 소프트 버튼 141은 손목 바깥측 착용 상태와 손목 내측 착용 상태에 따라 표시 모듈 140에서 표시되는 위치가 변경될 수 있다.
다양한 실시 예에 따르면, 제어 모듈 160은 착용 상태에 따라 소프트 버튼 141에 의해 실행되는 기능을 변경할 수 있다. 예컨대, 제어 모듈 160은 왼손 손목 바깥측 착용 상태에서 소프트 버튼 141이 선택되면, 제1 기능(예: 시계 표시 기능)을 기본으로 실행하도록 제어할 수 있다. 또한 제어 모듈 160은 왼손 손목 내측 착용 상태에서 소프트 버튼 141이 선택되면, 제2 기능(예: 메시지 검색 기능)을 기본으로 실행하도록 제어할 수 있다. 또한 제어 모듈 160은 오른손 손목 내측 착용 상태에서 소프트 버튼 141이 선택되면, 제3 기능(예: 메뉴 출력 기능)을 기본으로 실행하도록 제어할 수 있다. 제어 모듈 160은 제1 기능 또는 제2 기능이 실행 중인 상태에서 소프트 버튼 141이 추가로 선택되면 메뉴 기능 전환을 제어할 수 있다.
다양한 실시 예에 따르면, 소프트 버튼 141은 위치 변경에 따라 실행되는 기능이 다르게 설정될 수 있다. 예컨대, 소프트 버튼 141이 표시 모듈 140의 제1 위치(예: 표시 모듈 140이 가로 방향으로 놓여진 상태에서 좌측 가장자리로부터 일정 거리 이내의 위치)에 배치된 경우, 소프트 버튼 141 선택에 따라 제어 모듈 160은 제1 기능(예: 메뉴 출력 기능 등)을 실행할 수 있다. 또는 소프트 버튼 141이 표시 모듈 140의 제2 위치(예: 표시 모듈 140이 가로 방향으로 놓여진 상태에서 우측 가장자리로부터 일정 거리 이내의 위치 또는 중앙 위치 등)에 배치된 경우, 소프트 버튼 141 선택에 따라 제어 모듈 160은 제2 기능(예: 헬스 케어 기능, 메시지 검색 기능, 시계 기능 등)을 실행할 수 있다.
도 8c는 한 실시 예에 따른 전자 장치의 착용 상태에 따른 모드 제어를 도시한다.
도 8c를 참조하면, 제어 모듈 160은 HRM 센서 171이 수집하는 센서 신호에 대한 시계열적 분석을 수행할 수 있다. 예컨대, 제어 모듈 160은 타임 도메인(Time domain)에서 신호의 피크(Peak) 크기(amplitude) 및 피크간 거리(RRI)를 분석하여 착용 여부, 착용 부위 등을 판단할 수 있다. 제어 모듈 160은 주파수 도메인(Frequency domain)에서 주성분 주파수 및 주성분 주파수 크기(Power spectrum density), 주변 성분의 크기 및 상호 비율을 분석하여 수집된 신호에 따른 착용 상태 및 착용 부위를 판단할 수 있다. 이 과정에서, 제어 모듈 160은 주파수의 주성분 또는 주변성분 크기와 상호 비율로 신호 간 구분을 수행하거나, 저장된 참조 정보와의 유사도 비교를 통해 신호 구분을 수행할 수 있다. 다양한 실시 예에 따르면, 제어 모듈 160은 혈관 분포량 차이를 기반으로 착용 위치(예: 왼손, 오른손, 손목의 안쪽 또는 바깥측, 손목의 위 또는 아래 등)에 따라 맥파 신호의 차이를 구분할 수 있다. 또한 제어 모듈 160은 전자 모듈 20의 부착 시 밀착도에 의한 노이즈(SNR: 주성분이 차지하는 퍼센트)를 이용하여 신호 분석을 수행할 수도 있다.
한 실시 예에 따르면, 821 상태에서와 같이 전자 모듈 20은 사용자의 왼손 손목 바깥측 810에 장착될 수 있다. 스케줄링 정보에 대응하여 또는 사용자 입력에 대응하여 제어 모듈 160은 HRM 센서 171을 활성화하고 센서 신호를 수집하도록 제어할 수 있다. HRM 센서 171이 제공하는 센서 신호는 822 그래프와 같이 나타날 수 있다. 예컨대 HRM 센서 171이 수집한 센서 신호는 특정 범위(Range) 이내에서의 파동(wave) 신호일 수 있다. 제어 모듈 160은 HRM 센서 171이 822 그래프와 같은 센서 신호를 수집하면, 파동 신호의 형태(예: 파동 신호의 패턴 등)를 기준으로 해당 센서 신호를 왼손 손목 생체 신호로 판단하고, 크기를 기준으로 왼손 손목 바깥측 810에 장착된 상태를 판단할 수 있다.
한 실시 예에 따르면, 823 상태에서와 같이 전자 모듈 20은 사용자의 왼손 손목 내측 820에 장착될 수 있다. 제어 모듈 160 제어에 따라 활성화된 HRM 센서 171이 제공하는 센서 신호는 824 그래프와 같이 나타날 수 있다. 예컨대 HRM 센서 171이 수집한 센서 신호는 진폭이 특정 범위(Range) 이상을 넘는 파동(wave) 신호일 수 있다. 제어 모듈 160은 HRM 센서 171이 824 그래프와 같은 센서 신호를 수집하면, 파동 신호의 특성 분석으로 왼손 손목 생체 신호를 포함하는 것으로 판단하고, 크기를 기준으로 왼손 손목 내측 820에 장착된 상태를 판단할 수 있다.
한 실시 예에 따르면, 825 상태에서와 같이 전자 모듈 20은 사용자의 왼손 손목 바깥측 810에 장착될 수 있다. 제어 모듈 160 제어에 따라 활성화된 HRM 센서 171이 제공하는 센서 신호에 대하여 주파수 분석을 수행한 데이터는 826 그래프와 같이 나타날 수 있다. 예컨대 HRM 센서 171이 수집한 센서 신호는 특정 주파수의 크기 값이 제1 크기 값을 가지는 신호일 수 있다. 제어 모듈 160은 HRM 센서 171이 826 그래프와 같이 분석되는 센서 신호를 수집하면, 제1 크기 값의 특정 주파수를 기준으로 전자 모듈 20이 사용자의 왼손 손목 바깥측 810에 상측 방향으로 배치된 형태임을 판단할 수 있다.
한 실시 예에 따르면, 827 상태에서와 같이 전자 모듈 20은 사용자의 왼손 손목 바깥측 810에 장착될 수 있다. 제어 모듈 160 제어에 따라 활성화된 HRM 센서 171이 제공하는 센서 신호에 대하여 주파수 분석을 수행한 데이터는 828 그래프와 같이 나타날 수 있다. 예컨대 HRM 센서 171이 수집한 센서 신호는 특정 주파수의 크기 값이 제2 크기 값을 가지는 신호일 수 있다. 제어 모듈 160은 HRM 센서 171이 826 그래프와 같이 분석되는 센서 신호를 수집하면, 제2 크기 값의 특정 주파수를 기준으로 전자 모듈 20이 사용자의 왼손 손목 바깥측 810에 하측 방향으로 배치된 형태임을 판단할 수 있다. 제어 모듈 160은 전자 모듈 20의 배치 형태에 따라 기능 실행 모드를 다르게 적용하거나 UI 모드를 다르게 적용할 수 있다.
도 9는 한 실시 예에 따른 전자 장치의 기능 실행 제어와 관련한 그래프를 도시한다.
도 9를 참조하면, 전자 장치 100을 특정 부위(예: 손목 등)에 착용한 상태에서 사용자의 특정 부위(예: 손가락 등)가 운동하는 경우, 생체 신호가 변경될 수 있다. 예컨대, 전자 장치 100이 손목 등에 착용된 상태이면 901 상태에서와 같은 HRM 센서 171의 센서 신호가 검출될 수 있다. 한 실시 예에 따르면, 901 상태에서와 같이 손목에 착용된 상태에서 신체 변화가 특정 동작 상태(예: 신체 변화가 없는 상태 또는 손을 편 상태 등)에서 HRM 센서 171은 도시된 형태의 센서 신호를 검출할 수 있다. 예컨대, HRM 센서 171은 별도의 신체 변화가 없는 상태에 대한 센서 신호를 검출할 수 있다.
여기서, HRM 센서 171이 모니터링을 수행하는 중에 손가락 등의 운동이 발생하면, 제어 모듈 160은 903 상태에서와 같은 센서 신호를 검출할 수 있다. 예컨대, 제어 모듈 160은 손을 편 상태에서 엄지와 검지를 이용하여 태핑(Tapping)을 수행하는 동작에 대응하여 신체 변화가 발생하면 그에 따른 센서 신호 변화를 HRM 센서 171로부터 수신할 수 있다. 예컨대, HRM 센서 171은 도시된 같이 신체 변화(예: 엄지와 검지를 이용한 태핑)가 발생한 시점에 변화를 가지는 센서 신호를 검출할 수 있다. 다양한 실시 예에 따르면, 제어 모듈 160은 손이나 손가락 등의 움직임이 발생한 시점에 특정 센서 변화 값을 검출할 수 있다. 한 실시 예에 따르면, 제어 모듈 160은 손가락 움직임에 대응하여 특정 기능 제어를 처리할 수 있다. 한 실시 예에 따르면, 901 상태에서와 같은 신체 변화가 없는 상태 또는 설정된 범위 값 이하의 신체 변화가 발생하는 상태이면 제어 모듈 160은 제1 기능(예: 시간 표시 기능)을 수행하도록 제어할 수 있다. 903 상태에서와 같은 신체 변화가 발생하여 특정 동작 상태(예: 엄지와 검지를 이용한 태핑)로 판단되면, 제어 모듈 160은 제2 기능(예: 날씨 표시 기능)을 수행하도록 제어할 수 있다. 여기서 제어 모듈 160은 신체 변화에 따른 동작 상태별로 다양한 기능(예: 개인 모드 진입, 공개 모드 진입, 보안 모드 진입 등)을 실행하도록 제어할 수 있다.
다양한 실시 예에 따르면, 제어 모듈 160은 손의 움직임, 손가락의 종류, 손가락의 움직임 형태 등을 기반으로 손가락 동작을 다양한 형태로 구분할 수 있다. 제어 모듈 160은 구분된 각 형태별로 특정 기능 실행을 매핑할 수 있다. 제어 모듈 160은 특정 동작이 발생하면, 매핑된 특정 기능 실행을 처리할 수 있다. 제어 모듈 160은 전자 장치 100의 직접적인 제어 없이도 전자 장치 100을 착용한 착용 부위의 동작에 따라 전자 장치 100의 기능 제어를 할 수 있도록 지원한다.
한 실시 예에 따르면, 제어 모듈 160은 손가락 움직임, 손가락 태핑, 주먹쥠/폄, 팔목 움직임 등 전자 장치 160에 인접한 부분의 신체 변화에 의해 혈류량, 혈압, 산소포화도 등의 변화된 생체 정보를 센서가 센싱하여 수집하도록 제어할 수 있다. 제어 모듈 160은 수집된 센서 신호를 기반으로 1차 정보(심박)뿐만 아니라 2차 정보(one tap, two tap, N tap, long tap 등)를 추출하고, 이를 기반으로 상술한 다양한 특정 동작을 수행하도록 제어할 수 있다.
한 실시 예에 따르면, 제어 모듈 160은 검지 손가락의 태핑(Tapping) 동작 발생, 동작 횟수에 따라 동작을 분류할 수 있다. 예컨대, 제어 모듈 160은 손가락끼리 부딪히는 동작 또는 특정 손가락을 테이블 등에 한번 두드리는 탭 동작, 일정 시간 간격(예: 100ms < Evnet < 200ms)으로 태핑이 수회 발생하는 반복 탭 동작, 두드림 동작에 의한 생체 변화 신호가 일정 시간(예: 1000ms 이상 등) 지속되는 롱 탭 동작 등을 구분 및 분류할 수 있다.
제어 모듈 160은 분류된 동작을 전자 장치 100의 특정 앱 실행에 적용하여 다양한 처리를 수행할 수 있다. 한 실시 예에 따르면, 제어 모듈 160은 통화호 수신(콜 메시지 수신, 알람 세시지 수신, VOIP 연결 요청 수신 등)이 발생한 상태에서 반복 탭 동작 발생 시 통화 호 연결 또는 확인(예: OK)에 해당하는 입력 이벤트 발생으로 판단할 수 있다. 제어 모듈 160은 통화 호 수신 상태에서 롱 탭 동작이 발생하면 통화 호 연결 거절 또는 채널 형성 취소 등의 입력 이벤트 발생으로 판단할 수 있다.
한 실시 예에 따르면, 제어 모듈 160은 메시지나 이메일 등의 알림(Notification)을 수신한 상태에서 반복 탭 동작이 발생하면, 수신된 메시지나 이메일의 내용 확인 기능을 처리할 수 있다. 예컨대, 제어 모듈 160은 수신된 메시지 또는 이메일의 내용을 포함한 화면을 표시 모듈 140에 출력하도록 제어할 수 있다.
한 실시 예에 따르면, 제어 모듈 160은 미디어 제어 기능을 수행하는 상태에서 반복 탭 동작이 발생하면 컨텐츠 리스트에서 현재 재생 중인 컨텐츠의 다음 순서에 배치된 컨텐츠로 이동하도록 제어할 수 있다. 또한 제어 모듈 160은 미디어 제어 기능을 수행하는 상태에서 롱 탭 동작이 발생하면 컨텐츠 리스트에서 이전 순서에 배치된 컨텐츠를 재생하도록 제어할 수 있다.
한 실시 예에 따르면, 제어 모듈 160은 특정 화면이 표시 모듈 140에 출력된 상태 또는 대기 화면이나 메뉴 화면 또는 특정 기능 실행 화면이 출력된 상태에서 특정 동작에 해당하는 센서 신호가 검출되면 화면 전환을 제어할 수 있다. 예컨대, 제어 모듈 160은 탭 동작 발생 시 현재 화면을 표시 모듈 140에서 제거하면서 다른 화면을 표시 모듈 140의 가장자리 우측에서 좌측으로 또는 가장자리 좌측에서 우측으로 표시되도록 제어할 수 있다. 제어 모듈 160은 반복 탭 동작 발생 시 현재 화면을 표시 모듈 140에서 제거하면서 다른 화면을 표시 모듈 140의 가장자리 좌측에서 우측으로 또는 가장자리 우측에서 좌측으로 표시되도록 제어할 수 있다. 제어 모듈 160은 롱 탭 동작 발생 시 화면 검색 기능을 종료하고 롱 탭 동작에 의해 지시되는 화면으로 진입(예: 지시된 화면을 표시 모듈 140 전체 화면으로 출력)하도록 제어할 수 있다. 상술한 제어 모듈 160은 전자 장치 100의 입력 오동작 방지와 관련하여, 사전 정의된 특정 이벤트가 발생한 시점부터 일정 시간 이내에 발생하는 특정 동작(예: 탭 동작 등)에 대한 입력 이벤트 처리를 수행할 수 있다.
도 10은 다양한 실시 예에 따른 전자 장치 카메라 제어 기능과 관련한 도면이다.
도 10을 참조하면, 제어 모듈 160은 전자 장치 100에 포함된 카메라 191을 사용자 입력에 따라 또는 스케줄링된 정보에 따라 활성화할 수 있다. 예컨대, 제어 모듈 160은 카메라 아이콘 선택 또는 메뉴 선택과 관련한 이벤트가 발생하는 경우 카메라 191을 활성화할 수 있다. 표시 모듈 140은 상태 1001에서와 같이 카메라 191 활성화에 따라 획득된 프리뷰 영상을 1010 화면으로 출력할 수 있다.
전자 장치 100은 상태 1003에서와 같이 표시 모듈 140이 배치된 위치의 반대 방향(또는 배면 방향)에 배치된 HRM 센서 171을 포함할 수 있다. 다양한 실시 예에 따르면, 전자 장치 100은 HRM 센서 171이 배치된 영역의 인접 영역에 배치된 카메라 193을 더 포함할 수 있다. 한 실시 예에 따르면, 제어 모듈 160은 카메라 191이 활성화되거나 또는 카메라 기능 활성화와 관련한 이벤트가 발생하면 HRM 센서 171을 활성화할 수 있다. HRM 센서 171은 물체 1011의 접근에 대응하여 심박 센싱을 수행할 수 있다. HRM 센서 171은 접근한 물체에 대한 센싱 정보(예: 생체 정보)를 제어 모듈 160에 전달할 수 있다.
제어 모듈 160은 센싱 정보를 기반으로 물체 1011의 접근을 판단할 수 있다. 예컨대, 제어 모듈 160은 HRM 센서 171이 제공한 센싱 정보를 기반으로 사용자의 손가락 접근을 판단할 수 있다. 제어 모듈 160은 사용자 손가락 접근에 따라 심박 정보 센싱이 수행되면, 카메라 191의 셔터 기능을 자동으로 수행하도록 제어할 수 있다. 이에 따라, 사용자가 HRM 센서 171에 손가락을 지정된 위치까지 접근시키는 경우, 카메라 191은 해당 시점에 획득되는 프리뷰 영상을 촬영할 수 있다.
제어 모듈 160은 HRM 센서에 물체 1011의 접근에 대한 알림 정보, 물체 1011에 대한 센싱 동작 알림 정보, 센싱에 따른 셔터 기능 실행 알림 등을 수행할 수 있다. 다양한 실시 예에 따르면, 제어 모듈 160은 사용자의 심박 센싱이 수행된 이후 지정된 시간이 경과하면 카메라 191의 영상을 촬영하도록 제어할 수 있다. 지정된 시간은 사용자에 의해 조정될 수 있다.
다양한 실시 예에 따르면, 제어 모듈 160은 센싱 정보(사용자의 심박 정보)를 오디오 데이터로 변환할 수 있다. 제어 모듈 160은 변환된 오디오 데이터를 촬영된 영상의 오디오 정보로 추가할 수 있다. 다양한 실시 예에 따르면, 제어 모듈 160은 지정된 사용자의 심박 정보를 기준으로 영상 촬영을 제어할 수 있다. 예컨대, 제어 모듈 160은 HRM 센서 171로부터 획득된 센싱 정보가 지정된 심박 정보와 동일한 패턴을 가지는 경우 카메라 191의 영상 촬영을 제어할 수 있다. 제어 모듈 160은 획득된 센싱 정보와 지정된 심박 정보가 다른 경우 카메라 191의 영상 촬영을 수행하지 않도록 제어할 수 있다.
다양한 실시 예에 따르면, 제어 모듈 160은 HRM 센서 171의 운용에 따라 카메라 191 또는 193 중 적어도 하나의 운용을 제어할 수 있다. 예컨대, 제어 모듈 160은 설정에 따라 또는 사용자 제어에 따라 카메라 193을 활성화하여 프리뷰 영상을 획득하여 표시 모듈 140에 출력하도록 제어할 수 있다. 이 동작에서 제어 모듈 160은 HRM 센서 171을 활성화할 수 있다. 제어 모듈 160은 HRM 센서 171로부터 지정된 센싱 정보가 수집되면, 카메라 191을 활성화하도록 제어할 수 있다. 이 동작에서 제어 모듈 160은 카메라 193을 일시적으로 턴-오프하도록 제어할 수 있다.
다양한 실시 예에 따르면, 제어 모듈 160은 카메라 191과 카메라 193을 동시 실행하도록 제어할 수 있다. 제어 모듈 160은 HRM 센서 171로부터 센싱 정보가 전달되면, 카메라 191 또는 카메라 193의 영상 촬영을 제어할 수 있다. 상술한 동작을 수행하면서, 표시 모듈 140은 획득된 영상의 전환을 수행할 수 있다. 예컨대, 표시 모듈 140은 카메라 193이 획득하는 프리뷰 영상을 표시하다가, HRM 센서 171의 센싱 정보 수신에 따라 카메라 191이 획득하는 프리뷰 영상을 전체 화면으로 출력할 수 있다. 다양한 실시 예에 따르면, 제어 모듈 160은 카메라 193이 획득하는 프리뷰 영상을 전체 화면으로 카메라 191이 획득하는 프리뷰 영상을 PIP(Picture in picture) 화면으로 출력할 수 있다. 또는 제어 모듈 160은 HRM 센서 171로부터 지정된 센싱 정보가 획득되면, 카메라 191이 획득하는 프리뷰 영상을 전체 화면으로 카메라 193이 획득한 프리뷰 영상을 PI 화면으로 출력할 수 있다. 상술한 바와 같이 제어 모듈 160은 적어도 하나의 카메라가 수집한 영상들의 전환을 HRM 센서 171이 수집한 센싱 정보에 대응하여 제어할 수 있다.
표시 모듈 140은 HRM 센서 171로부터 센싱 정보 수신이 없는 경우 카메라 193이 획득하는 프리뷰 영상을 출력할 수 있다. 상술한 동작을 기반으로, 사용자는 카메라 193이 획득하는 프리뷰 영상과 카메라 191이 획득하는 프리뷰 영상을 표시 모듈 140의 전체 화면으로 확인하면서, 동시 촬영할 수 있다. 동시 촬영된 영상은 설정에 따라 또는 사용자 제어에 따라 합성되거나, 동시 촬영된 영상으로 그룹핑되어 저장될 수 있다. 상술한 바와 같이, 사용자는 손가락을 이용하여 HRM 센서 171을 셔터 기능으로 이용하거나 카메라 전환 기능으로 이용하거나 또는 화면 전환 기능으로 이용할 수 있다.
다양한 실시 예에 따르면, 전자 장치 100은 HRM 센서 171을 카메라의 셔터 기능으로 운용하는 동작에서 센싱 정보 운용 동작을 조정할 수 있다. 예컨대, 전자 장치 100은 HRM 센서 171이 획득한 센싱 정보에 의해 정확한 심박 센싱 결과가 도출된 경우 셔터 기능을 정상적으로 운용할 수 있도록 지원할 수 있다. 또는 전자 장치 100은 심박 센싱 결과가 에러로 도출되더라도 셔터 기능을 정상적으로 운용할 수 있도록 지원할 수 있다.
다양한 실시 예에 따르면, 전자 장치 100은 HRM 센서 171에 의해 정보가 센싱되는 동안에 동영상을 획득하도록 제어할 수 있다. 예컨대, 제어 모듈 160은 HRM 센서 171에 의해 지정된 센싱 정보가 획득되면, 카메라 191 또는 카메라 193 중 적어도 하나를 이용하여 동영상 촬영을 시작하도록 제어할 수 있다. 제어 모듈 160은 HRM 센서 171로부터 센싱 정보 획득이 없거나 물체 1011의 접근이 없는 센싱 정보가 획득되면 동영상 촬영을 중지할 수 있다. 이에 따라, 사용자는 동영상을 촬영하고자 하는 시점에 손가락을 HRM 센서 171 상에 배치하고, 동영상 촬영을 중지하고자 하는 경우에 손가락을 HRM 센서 171로부터 이격시킬 수 있다. 제어 모듈 160은 동영상 촬영 종료와 관련한 이벤트(예: 표시 모듈 140에 표시된 가상 키버튼 선택 또는 지정된 물리 키 버튼 선택)가 발생되면, 동영상 촬영을 종료할 수 있다. 제어 모듈 160은 동영상 촬영 종료 이전에 간헐적으로 획득된 동영상을 자동으로 통합하여 하나의 동영상 파일로 제공할 수 있다.
도 11은 다양한 실시 예에 따른 전자 장치 카메라 제어 방법과 관련한 도면이다.
도 11을 참조하면, 전자 장치 카메라 제어 방법에 있어서, 동작 1101에서 이벤트가 발생하면, 제어 모듈 160은 카메라 기능 운용과 관련한 이벤트인지 확인할 수 있다. 카메라 기능 관련 이벤트가 아닌 경우 동작 1103에서, 제어 모듈 160은 이벤트 종류에 대응하는 기능 실행을 제어할 수 있다. 예컨대, 제어 모듈 160은 이벤트 종류에 따라 컨텐츠 재생 기능, 갤러리 기능, 채팅 기능, 게임 기능 등을 지원할 수 있다.
카메라 기능 관련 이벤트이면, 동작 1105에서, 제어 모듈 160은 HRM 센서 171을 활성화하도록 제어할 수 있다. 이 동작에서 제어 모듈 160은 카메라 기능 활성화 이후 프리뷰 영상이 표시 모듈 140에 출력되는 시점에 HRM 센서 171을 활성화할 수 있다. HRM 센서 171은 활성화에 따라 실시간 또는 일정 주기로 물체 접근을 판단하고, 물체 접근 시 센싱 동작을 수행할 수 있다.
동작 1107에서, 제어 모듈 160은 지정된 센싱 정보(예: 생체 정보)가 수신되는지 확인할 수 있다. 지정된 센싱 정보가 수신되면, 동작 1109에서 제어 모듈 160은 영상 촬영을 통해 영상을 수집하도록 제어할 수 있다. 제어 모듈 160은 영상 수집 이후, 자동으로 저장하거나 또는 저장 여부를 묻는 팝업창을 출력하도록 제어할 수 있다. 동작 1111에서, 제어 모듈 160은 기능 종료 이벤트가 발생하는지 확인할 수 있다. 기능 종료 이벤트 발생 시, 제어 모듈 160은 HRM 센서 기능을 종료하거나 또는 카메라 기능을 종료할 수 있다. HRM 센서 기능 종료와 관련하여, 제어 모듈 160은 HRM 센서 171의 셔터 기능 종료와 관련한 아이콘이나 메뉴 등의 설정 항목을 제공할 수 있다. 기능 종료 이벤트 발생이 없으면, 제어 모듈 160은 동작 1105 이전으로 분기하여 HRM 센서 171 활성화 상태를 유지하도록 제어할 수 있다.
도 12는 다양한 실시 예에 따른 센서 설정 화면의 한 예를 나타낸 도면이다.
도 12를 참조하면, 상태 1210에서와 같이, 표시 모듈 140은 HRM 센서 설정과 관련한 설정 화면 1210을 출력할 수 있다. 이와 관련하여, 전자 장치 100은 설정 화면 1210 호출과 관련한 설정 메뉴 또는 설정 아이콘 등을 제공할 수 있다. 설정 화면 1210은 예컨대, 카메라 셔터 기능, 터치 락 기능, 사운드 제어 기능, 로테이션 제어 기능 등의 항목을 포함할 수 있다. 한 실시 예에 따르면, 카메라 셔터 기능은 HRM 센서 171을 카메라 191 또는 193의 셔터 기능으로 운용할 수 있는 설정일 수 있다. 카메라 셔터 기능이 설정된 경우, 도 10 등에서 설명한 바와 같이 전자 장치 100은 카메라 기능 운용 시 HRM 센서 171이 수집한 센싱 정보에 따라 영상 촬영을 제어할 수 있도록 지원한다.
다양한 실시 예에 따르면, 터치 락 기능이 설정된 경우, 전자 장치 100은 HRM 센서 171의 센싱 정보 획득 여부에 대응하여 터치 락을 설정하거나 해제하는 기능을 지원할 수 있다. 예컨대, 전자 장치 100은 터치 패널이 활성화된 상태(또는 비활성화된 상태) 또는 전자펜 기능이 활성화된 상태(또는 비활성화된 상태)에서 HRM 센서 171을 활성화하여 센싱 정보 획득 여부를 확인할 수 있다. 전자 장치 100은 HRM 센서 171이 지정된 센싱 정보를 획득하는 경우, 활성화된 터치 패널을 턴-오프하거나, 또는 비활성화된 터치 패널을 턴-온 상태로 전환할 수 있다.
다양한 실시 예에 따르면, 사운드 제어 기능이 설정된 경우, 전자 장치 100은 오디오 데이터 출력 기능이 활성화된 경우 HRM 센서 171을 활성화할 수 있다. 전자 장치 100은 HRM 센서 171로부터 지정된 센싱 정보가 획득되면, 사운드 제어를 수행할 수 있다. 예컨대, 전자 장치 100은 사운드를 일시 중지(mute) 처리할 수 있다. 또는 전자 장치 100은 사운드를 최대(또는 최소) 볼륨 레벨로 전환할 수 있다.
다양한 실시 예에 따르면, 로테이션 제어 기능이 설정된 경우, 전자 장치 100은 로테이션 가능한 화면이 표시 모듈 140에 출력된 경우 HRM 센서 171을 활성화할 수 있다. 전자 장치 100은 HRM 센서 171로부터 지정된 센싱 정보가 획득되면, 로테이션 기능을 활성화하거나 또는 비활성화할 수 있다. 전자 장치 100은 로테이션 가능한 화면이 출력되는 경우 HRM 센서 171을 기반으로 화면 회전을 수행할 수 있음을 안내(지정된 정보를 비디오나 오디오로 출력)할 수 있다.
다양한 실시 예에 따르면, 상태 1201에서 카메라 셔터 기능 항목 1211이 선택되면, 제어 모듈 160은 상태 1203에서와 같이 세부 기능 설정 화면 1230을 표시 모듈 140에 출력하도록 제어할 수 있다. 예컨대, 세부 기능 설정 화면 1230은 카메라 셔터 기능에 대한 설명 정보 1231과, 획득된 심박 정보의 컨텐츠 운용에 관한 컨텐츠 생성 항목 1233을 포함할 수 있다. 컨텐츠 생성 항목 1233이 선택된 경우, 제어 모듈 160은 카메라를 이용한 영상 촬영 과정에서, 손가락 접촉에 따라 획득된 심박 정보를 오디오 데이터로 변환할 수 있다. 제어 모듈 160은 변환된 오디오 데이터를 촬영된 영상(정지 영상 또는 동영상)의 오디오 데이터로 포함시킬 수 있다.
다양한 실시 예에 따르면, 상태 1201에서, 터치 락 기능 항목이 선택되면, 제어 모듈 160은 상태 1205에서와 같이 터치 락 기능을 수행할 상태 설정 화면 1250을 표시 모듈 140에 출력할 수 있다. 상태 설정 화면 1250은 예컨대, 터치 락 기능과 관련하여 HRM 센서 171을 언제 활성화할 것인지를 결정하는 정보를 표시할 수 있다. 예컨대, 게임 기능 항목 1251이 선택되면, 제어 모듈 160은 게임 기능 실행 시 HRM 센서 171을 활성화하고 터치 락 기능 제어를 지원할 수 있다. Always-on 항목 1253이 선택되면, 제어 모듈 160은 전자 장치 100이 턴-온 상태이면 HRM 센서 171을 활성화하고, 앱의 종류에 관계없이 터치 락 기능 제어를 지원할 수 있다. 다양한 실시 예에 따르면, 표시 모듈 140이 턴-오프된 상태에서 HRM 센서 171이 활성화 상태를 가질 수 있다. 제어 모듈 160은 HRM 센서 171로부터 지정된 센싱 정보가 획득되면, 터치 패널을 활성화할 수 있다. 이 동작에서 정보를 표시하는 표시 패널은 턴-오프 상태를 가질 수 있다. 제어 모듈 160은 터치 패널에서 지정된 제스처 이벤트가 발생하면 표시 모듈 140을 활성화하거나 또는 지정된 특정 앱 기능의 실행 또는 제어를 지원할 수 있다.
도 13은 다양한 실시 예에 따른 HRM 센서 운용을 설명하는 도면이다.
도 13을 참조하면, 전자 장치 100은 HRM 센서 171 운용과 관련하여 다양한 앱 기능의 제어를 지원할 수 있다. 이와 관련하여, HRM 센서 171은 항상 턴-온 상태(Always-on)를 가지거나 또는 해당 기능 실행 시점에 턴-온 상태를 가질 수 있다. 다양한 실시 예에 따르면, HRM 센서 171은 통화 기능, 카메라 기능, 미디어 기능, 락 스크린 기능, 알람 기능 등의 설정을 변환할 수 있도록 지원한다.
예컨대, 제어 모듈 160은 HRM 센서 171로부터 짧은 터치(예: 0~1000ms)에 해당하는 센싱 정보가 획득되면, 현재 실행되고 있는 앱의 종류에 대응하여 통화 연결 기능, 사진 촬영 기능, 재생/일시 중지 기능, 락스크린 상에 표시되는 어플리케이션 변경 기능, 알람 스누즈 기능을 실행할 수 있다.
또한 제어 모듈 160은 HRM 센서 171로부터 긴 터치(예: 1000ms ~ )에 해당하는 센싱 정보가 획득되면, 현재 실행되고 있는 앱의 종류에 대응하여 통화 거절 기능, 동영상 촬영 시작/종료 기능, 다음 컨텐츠 전환 기능, 어플리케이션 선택 기능, 알람 끄기 기능을 실행할 수 있다.
한 실시 예에 따르면, 제어 모듈 160은 통화 기능(예: 통화 호 수신 또는 폰 북 기능, 또는 다이얼 앱 등)이 실행되면, HRM 센서 171을 활성화할 수 있다. 또는 HRM 센서 171은 Always-on 상태를 가질 수 있다. 제어 모듈 160은 통화 기능 실행 중 HRM 센서 171로부터 지정된 센싱 정보가 획득되면 센싱 정보의 종류에 따라 통화 연결 또는 통화 거절을 수행할 수 있다. 다양한 실시 예에 따르면, 제어 모듈 160은 센싱 정보의 종류에 따라 통화 거절 수행과 함께 지정된 메시지를 응답 메시지로 타 전자 장치에 전송할 수도 있다.
다양한 실시 예에 따르면, 제어 모듈 160은 알람 기능 설정 시간이 도래하면 HRM 센서 171을 활성화할 수 있다. 제어 모듈 160은 HRM 센서 171로부터 지정된 센싱 정보가 획득되면, 센싱 정보의 종류(예: 물체의 접촉 시간)에 따라 스누즈되는 시간의 길이를 다르게 조절할 수 있다. 예컨대, 제어 모듈 160은 물체가 접촉되는 시간이 길수록 스누즈되는 시간(예: 알람이 재실행되는 시간 간격)을 확장할 수 있다. 제어 모듈 160은 물체가 접촉되는 시간이 지정된 시간을 경과하면 알람 끄기를 실행할 수 있다. 다양한 실시 예에 따르면, 제어 모듈 160은 접촉 시간이 지정된 시간을 경과하더라도 센싱 정보 분석에 따라 사용자가 수면 상태로 판단되면 알람을 재실행하도록 제어할 수도 있다. 이와 관련하여, 제어 모듈 160은 사용자의 수면 패턴에 따른 심박 정보를 저장하고 알람 기능 실행 시 참조할 수 있다.
도 14는 다양한 실시 예에 따른 음성 검색 기능 제어 방법과 관련한 도면이다.
도 14를 참조하면, 음성 검색 기능 제어 방법에 있어서, 동작 1401에서 제어 모듈 160은 이벤트가 발생하면, 음성 검색 기능과 관련한 이벤트인지 확인할 수 있다. 예컨대, 제어 모듈 160은 음성 검색 기능과 관련한 아이콘 선택 또는 메뉴 선택에 대한 이벤트 발생을 확인할 수 있다. 다양한 실시 예에 따르면, 전자 장치 100은 마이크를 Always-on 상태로 제공할 수 있다. 이에 따라, 제어 모듈 160은 마이크를 통해 획득되는 오디오 정보가 지정된 오디오 정보인 경우, 음성 검색 기능을 활성화할 수 있다.
음성 검색 기능과 관련한 이벤트가 아니면, 동작 1403에서 제어 모듈 160은 이벤트 종류에 대응하는 기능 수행을 제어할 수 있다. 예컨대, 제어 모듈 160은 이벤트 종류에 대응하여 파일 재생, 방송 수신 기능, 웹 페이지 검색 기능 증을 지원할 수 있다. 또는 제어 모듈 160은 이벤트 종류에 따라 카메라 기능을 활성화할 수도 있다.
음성 검색 기능과 관련한 이벤트이면, 동작 1405에서, 제어 모듈 160은 HRM 센서 171을 활성화할 수 있다. 이와 함께, 제어 모듈 160은 음성 검색 기능 활성화할 수 있다. 음성 검색 기능 활성화에 따라, 제어 모듈 160은 마이크를 활성화하여 오디오 정보 수집을 제어할 수 있다.
HRM 센서 171 활성화 이후 동작 1407에서, 제어 모듈 160은 지정된 센싱 정보와 오디오 정보가 수집되는지 확인할 수 있다. 지정된 센싱 정보 없이 오디오 정보가 수집되면 동작 1409에서 제어 모듈 160은 수집된 오디오 정보에 대한 정보 검색을 수행할 수 있다. 이 동작에서 제어 모듈 160은 오디오 정보 수집이 없는 경우에는 지정된 센싱 정보 및 오디오 입력을 요청하는 안내 정보 출력을 제어할 수 있다. 오디오 정보 없이 지정된 센싱 정보가 입력되는 경우 제어 모듈 160은 오디오 정보 입력을 요청하는 안내 정보 출력을 제어할 수 있다.
지정된 센싱 정보와 오디오 정보가 입력되면, 동작 1411에서 제어 모듈 160은 오디오 정보에 따른 정보 검색을 수행하고, 검색된 정보에 따른 기능 실행을 제어할 수 있다. 예컨대, 제어 모듈 160은 오디오 정보로서 지도 검색과 관련한 오디오가 입력되면, 네비게이션 기능을 자동 실행할 수 있다. 또는 제어 모듈 160은 오디오 정보로서 음악 관련 오디오가 입력되면, 해당 오디오에 대응하는 음악을 재생하거나, 지정된 음악 재생 리스트에 등재된 음원을 재생하도록 제어할 수 있다.
동작 1413에서, 제어 모듈 160은 음성 검색 기능 종료와 관련한 종료 이벤트가 발생하는지 확인할 수 있다. 제어 모듈 160은 종료 이벤트 발생이 없으면, 동작 1405 이전으로 분기하여 이하 동작을 재수행할 수 있다. 종료 이벤트 발생 시, 제어 모듈 160은 음성 검색 기능을 종료하고, 지정된 기능으로 복귀하도록 제어할 수 있다. 이 동작에서 제어 모듈 160은 HRM 센서 171을 비활성화하도록 제어할 수 있다.
도 15는 다양한 실시 예에 따른 음성 인식 기능과 관련한 화면 인터페이스의 한 예이다.
도 15를 참조하면, 표시 모듈 140은 음성 인식 기능 실행과 관련하여 기능 화면 1510을 출력할 수 있다. 이와 관련하여, 전자 장치 100은 음성 인식 기능 실행과 관련한 아이콘이나 메뉴를 제공할 수 있다. 또는 전자 장치 100은 적어도 하나의 마이크를 활성화할 수 있다. 적어도 하나의 마이크로부터 지정된 음성 정보가 수집되면 음성 인식 기능을 자동으로 실행할 수 있다.
기능 화면 1510은 HRM 센서 171 운용 상태에 관한 설명 정보 1511을 포함할 수 있다. 설명 정보 1511은 HRM 센서 171의 적용 여부에 대한 정보, HRM 센서 171 적용 시 수행되는 기능 설명을 포함할 수 있다. 한 실시 예에 따르면, 설명 정보 1511은 HRM 센서 171을 기반으로 수집된 오디오 정보의 기능 실행 목록을 포함할 수 있다. 설명 정보 1511은 예컨대 최근 기능 실행 목록을 포함할 수 있다. 설명 정보 1511의 선택에 대응하여 제어 모듈 160은 HRM 센서 171 운용 또는 비활성화를 제어할 수 있다.
다양한 실시 예에 따르면, 제어 모듈 160은 HRM 센서 171을 Always-on 상태로 제공하고, HRM 센서 171로부터 지정된 센싱 정보가 획득되는 경우 마이크를 활성화할 수 있다. 제어 모듈 160은 마이크를 통해 수집된 오디오 정보를 음성 검색 기능의 검색어로 적용하고, 검색 결과를 출력하거나, 검색 결과에 따른 기능 실행을 제어할 수 있다.
도 16은 다양한 실시 예에 따른 HRM 센서의 기능 전환 방법의 한 예이다.
도 16을 참조하면, 기능 전환 방법에 있어서, 동작 1601에서 제어 모듈 160은 조도 센서를 활성화할 수 있다. 조도 센서는 예컨대, 전자 장치 100이 턴-온된 상태에서 항상 턴-온된 상태를 가질 수 있다. 또는 조도 센서는 전자 장치 100의 지정된 어플리케이션이 실행되는 경우 활성화될 수 있다.
동작 1603에서, 제어 모듈 160은 조도 센싱 값이 지정된 조건을 만족하는지 확인할 수 있다. 지정된 조건을 만족하지 못하는 경우, 제어 모듈 160은 이하 동작들을 스킵할 수 있다. 예컨대, 제어 모듈 160은 조도 값이 일정 조도 이하인지 또는 일정 조도 이상인지를 확인할 수 있다. 또는 제어 모듈 160은 조도 값이 전자 장치 100의 전면(예: 조도 센서가 배치된 표시 모듈 140 방향)이 책상 등과 대면된 상태로 놓여 있는 지정된 상황인지를 확인할 수 있다.
지정된 조건을 만족하는 경우, 동작 1605에서 제어 모듈 160은 HRM 센서 171을 활성화할 수 있다. 또는 제어 모듈 160은 조도 값의 변화가 지정된 조건을 만족하는 시간이 지정된 시간 동안 유지되는 경우 HRM 센서 171을 활성화할 수 있다. 이를 기반으로, 제어 모듈 160은 조도 값의 빈번한 변화에 따른 HRM 센서 171 활성화 또는 비활성화의 빈번한 전환을 방지할 수 있다.
동작 1607에서 제어 모듈 160은 HRM 센서 171의 기능 전환을 처리할 수 있다. 예컨대, 제어 모듈 160은 HRM 센서 171을 근접 센서 기능으로 전환할 수 있다. 또는 제어 모듈 160은 HRM 센서 171을 서브 조도 센서 기능으로 전환할 수 있다.
동작 1609에서 제어 모듈 160은 전환된 기능에 따른 센싱 정보를 수집할 수 있다. 예컨대, 제어 모듈 160은 근접 센서 기능 수행에 따라 획득된 센싱 정보를 기반으로 물체의 접근도를 판단할 수 있다. 또는 제어 모듈 160은 서브 조도 센서 기능 수행에 따라 획득된 센싱 정보를 기반으로 주변 조도 값 변화를 판단할 수 있다.
동작 1611에서 제어 모듈 160은 센싱 정보에 따른 기능 수행을 처리할 수 있다. 예컨대, 제어 모듈 160은 조도 센서의 조도 값이 지정된 조건을 만족하고, HRM 센서 171의 전환 기능에 따른 센싱 정보가 지정된 값을 제공하는 경우, 전자 장치 100의 지정된 어플리케이션 중 적어도 하나를 활성화할 수 있다. 한 실시 예에 따르면, 제어 모듈 160은 센싱 정보들에 대응하여 전자 장치 100의 표시 모듈 140 밝기를 자동으로 조절할 수 있다. 또는 제어 모듈 160은 센싱 정보들에 대응하여 오디오 볼륨 크기를 지정된 값으로 조정할 수 있다.
제어 모듈 160은 입력 이벤트 발생 또는 스케줄링된 정보에 따른 기능 리턴을 수행할 수 있다. 예컨대, 제어 모듈 160은 동작 1609에서 전환된 기능에 따른 센싱 정보를 지속적으로 수집하거나, 동작 1607로 분기하여 설정에 따른 또는 입력 이벤트에 따른 기능으로 HRM 센서 171의 기능을 전환할 수 있다.
도 17은 다양한 실시 예에 따른 스크롤 기능 운용과 관련한 도면이다.
도 17을 참조하면, 스크롤 기능 운용과 관련하여, 상태 1701에서와 같이 전자 장치 100은 예컨대 IR 발광부 73, 수광부 72, LED 71을 포함하는 HRM 센서 171을 포함할 수 있다. 다양한 실시 예에 따르면, HRM 센서 171은 IR 발광부 73을 통해 광을 송출하다가, 물체 접근이 감지되면, LED 71을 통한 발광을 수행하고, 수광부 72를 통해 수집되는 정보를 기반으로 물체 1011의 이동에 따른 센싱 정보 변화를 수집할 수 있다. 다양한 실시 예에 따르면, 전자 장치 100은 카메라 193을 더 포함할 수도 있다. 카메라 193은 전자 장치 100의 종류나 타입에 따라 생략될 수도 있다.
상태 1701에서 물체 1011이 HRM 센서 171의 좌측에서 우측 방향으로 이동하는 경우, 제어 모듈 160은 물체 1011의 이동을 인식할 수 있다. 이와 관련하여, 제어 모듈 160은 HRM 센서 171로부터 물체 1011의 이동에 따른 센싱 정보 변화를 수집할 수 있다. 제어 모듈 160은 획득된 센싱 정보 변화가 지정된 패턴 변화를 보이는 경우 물체 1011의 이동으로(좌측에서 우측으로 이동) 판단할 수 있다.
제어 모듈 160은 물체 1011이 좌측에서 우측 방향으로 이동하는 경우, 상태 1703에서와 같이 화면 전환을 처리할 수 있다. 예컨대, 제어 모듈 160은 표시 모듈 140의 전체 화면으로 표시되던 화면 1731을 좌측 방향으로 이동시키면서 표시 모듈 140에서 제거하고, 화면 1733을 우측에서 좌측 방향으로 이동시키면서 표시 모듈 140에 표시할 수 있다. 제어 모듈 160은 화면 1733의 이동을 수행하여 화면 1733이 표시 모듈 140 전체 화면으로 표시되도록 제어할 수 있다.
상태 1703에서 물체 1011이 HRM 센서 171의 우측에서 좌측 방향으로 이동하는 경우, HRM 센서 171은 그에 대응하는 센싱 정보를 제어 모듈 160에 전달할 수 있다. 제어 모듈 160은 HRM 센서 171로부터 획득된 물체 1011의 이동에 따른 센싱 정보 변화가 지정된 패턴 변화를 보이는 경우 물체 1011의 이동(우측에서 좌측으로 이동)으로 판단할 수 있다.
제어 모듈 160은 물체 1011이 우측에서 좌측 방향으로 이동하는 경우, 상태 1703에서와 같이 화면 전환을 처리할 수 있다. 예컨대, 제어 모듈 160은 표시 모듈 140의 전체 화면으로 표시되던 화면 1773을 우측 방향으로 이동시키면서 표시 모듈 140에서 제거하고, 화면 17717을 좌측에서 우측 방향으로 이동시키면서 표시 모듈 140에 표시할 수 있다. 제어 모듈 160은 화면 1771의 이동을 수행하여 화면 1771이 표시 모듈 140 전체 화면으로 표시되도록 제어할 수 있다.
다양한 실시 예에 따르면, 제어 모듈 160은 상술한 좌에서 우로 또는 우에서 좌로의 스크롤 동작에 따른 센싱 정보가 수집되면, 책넘김이나, 갤러리의 사진 검색 기능, 웹 페이지 넘김, 복수개의 백그라운드 실행 페이지들의 검색 기능 등을 제공할 수 있다.
상술한 바와 같이, 다양한 실시 예에 따르면, 한 실시 예에 따른 전자 장치는 전자 장치가 턴-온 상태에서 항상 활성화 상태를 유지하거나 지정된 어플리케이션 실행 시 활성화되는 HRM 센서, HRM 센서가 수집한 센싱 정보에 따라, 현재 실행 중인 어플리케이션의 지정된 기능 실행을 제어하는 제어 모듈을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 전자 장치는 카메라를 더 포함할 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 지정된 센싱 정보가 획득되면, 상기 카메라의 셔터 기능을 자동으로 실행하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 지정된 센싱 정보가 획득되면, 상기 카메라의 동영상 촬영 시작 기능 또는 동영상 촬영 중지 기능을 자동으로 실행하도록 설정 될 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 지정된 센싱 정보가 획득되면, 복수개의 카메라 중 활성화된 카메라를 비활성화하거나 비활성화된 카메라를 활성화하도록 설정 될 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 지정된 센싱 정보가 획득되면, 특정 카메라가 획득한 프리뷰 영상의 표시를 다른 카메라가 획득한 프리뷰 영상 표시로 전환하도록 설정 될 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 상기 HRM 센서로부터 지정된 센싱 정보 획득이 유지되는 동안에 동영상 촬영을 수행하고 지정된 센싱 정보의 획득이 없으면 동영상 촬영을 중지하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 동영상 촬영 종료 이벤트 발생 시 간헐적으로 획득된 동영상을 통합하여 하나의 파일로 생성하도록 설정 될 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 상기 심박 정보에 대응하는 오디오 데이터를 생성하여 상기 촬영된 영상에 제공하도록 설정 될 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 사용자의 심박 센싱이 수행된 이후 지정된 시간이 경과하면 카메라 영상을 촬영하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 지정된 사용자의 심박 정보에 해당하는 센싱 정보 획득 시 상기 카메라의 영상 촬영을 제어하도록 설정 될 수 있다.
다양한 실시 예에 따르면, 제어 모듈은 제1 카메라가 수집한 프리뷰 영상의 크기와 제2 카메라가 수집한 프리뷰 영상의 크기를 HRM 센서가 수집한 센싱 정보에 대응하여 조정하도록 설정될 수 있다.
다양한 실시 예에 따르면, 제어 모듈은 제1 카메라가 수집한 프리뷰 영상을 전체 화면으로 제2 카메라가 수집한 프리뷰 영상을 PIP로 출력하고, HRM 센서가 수집한 센싱 정보에 대응하여 전체 화면과 PIP 화면의 위치를 변경하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 전자 장치는 마이크를 더 포함하고, 상기 제어 모듈은 입력 이벤트 발생에 따라 또는 지정된 오디오 신호 수집에 따라 HRM 센서를 활성화하도록 설정될 수 있다. 상기 제어 모듈은 HRM 센서로부터 지정된 센싱 정보가 수집된 상태에서 오디오 정보가 수집되면 수집된 오디오 정보를 음성 인식하고, 음성 인식 결과에 따른 기능 실행을 제어할 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 지정된 센싱 정보 수집에 대응하여 설정된 알람 기능의 스누즈 시간 또는 알람 끄기 중 적어도 하나를 조절할 수 있다.
다양한 실시 예에 따르면, 상기 제어 모듈은 센싱 정보 분석에 따라 수면 패턴으로 확인되면, 알람 기능의 스누즈 시간을 조정(짧게 조정)할 수 있다.
상술한 바와 같이, 다양한 실시 예에 따르면, 한 실시 예에 따른 전자 장치 운용 방법은 HRM 센서를 항상 활성화하거나 지정된 어플리케이션 실행 시 활성화하는 동작, HRM 센서가 수집한 센싱 정보에 따라, 현재 실행 중인 어플리케이션의 지정된 기능을 실행하는 동작을 포함할 수 있다.
도 18은 다양한 실시 예에 따른 전자 장치의 일예를 나타낸 도면이다.
도 18을 참조하면, 상기 전자 장치 1801은, 예를 들면, 도 1에 도시된 전자 장치 100의 전체 또는 일부를 포함할 수 있다. 상기 전자 장치 1801은 하나 이상의 어플리케이션 프로세서(AP) 210, 통신 모듈 1820, SIM(subscriber identification module) 카드 1824, 메모리 1830, 센서 모듈 1840, 입력 장치 1850, 디스플레이 1860, 인터페이스 1870, 오디오 모듈 1880, 카메라 모듈 1891, 전력 관리 모듈 1895, 배터리 1896, 인디케이터 1897, 및 모터 1898을 포함할 수 있다.
상기 AP 1810은, 예를 들면, 운영 체제 또는 응용 프로그램을 구동하여 상기 AP 1810에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 각종 데이터 처리 및 연산을 수행할 수 있다. 상기 AP 1810은, 예를 들면, SoC(system on chip)로 구현될 수 있다. 한 실시 예에 따르면, 상기 AP 1810은 GPU(graphic processing unit) 및/또는 이미지 신호 프로세서(image signal processor)를 더 포함할 수 있다. 상기 AP 1810은 도 18에 도시된 구성요소들 중 적어도 일부(예: 셀룰러 모듈 1821)를 포함할 수도 있다. 상기 AP 1810은 다른 구성요소들(예: 비휘발성 메모리) 중 적어도 하나로부터 수신된 명령 또는 데이터를 휘발성 메모리에 로드(load)하여 처리하고, 다양한 데이터를 비휘발성 메모리에 저장(store)할 수 있다.
상기 통신 모듈 1820은, 도 1의 상기 통신 인터페이스 160과 동일 또는 유사한 구성을 가질 수 있다. 상기 통신 모듈 1820은, 예를 들면, 셀룰러 모듈 1821, Wi-Fi 모듈 1823, BT 모듈 1825, GPS 모듈 1827, NFC 모듈 1828 및 RF(radio frequency) 모듈 1829를 포함할 수 있다.
상기 셀룰러 모듈 1821은, 예를 들면, 통신망을 통해서 음성 통화, 영상 통화, 문자 서비스, 또는 인터넷 서비스 등을 제공할 수 있다. 한 실시 예에 따르면, 상기 셀룰러 모듈 1821은 가입자 식별 모듈(예: SIM 카드 1824)을 이용하여 통신 네트워크 내에서 전자 장치 1801의 구별 및 인증을 수행할 수 있다. 한 실시 예에 따르면, 상기 셀룰러 모듈 1821은 상기 AP 1810이 제공할 수 있는 기능 중 적어도 일부 기능을 수행할 수 있다. 한 실시 예에 따르면, 상기 셀룰러 모듈 1821은 커뮤니케이션 프로세서(CP)를 포함할 수 있다.
상기 Wi-Fi 모듈 1823, 상기 BT 모듈 1825, 상기 GPS 모듈 1827 또는 상기 NFC 모듈 1828 각각은, 예를 들면, 해당하는 모듈을 통해서 송수신되는 데이터를 처리하기 위한 프로세서를 포함할 수 있다. 어떤 실시 예에 따르면, 셀룰러 모듈 1821, Wi-Fi 모듈 1823, BT 모듈 1825, GPS 모듈 1827 또는 NFC 모듈 1828 중 적어도 일부(예: 두 개 이상)는 하나의 IC(integrated chip) 또는 IC 패키지 내에 포함될 수 있다.
상기 RF 모듈 1829는, 예를 들면, 통신 신호(예: RF 신호)를 송수신할 수 있다. 상기 RF 모듈 1829는, 예를 들면, 트랜시버(transceiver), PAM(power amp module), 주파수 필터(frequency filter), LNA(low noise amplifier), 또는 안테나 등을 포함할 수 있다. 다른 실시 예에 따르면, 셀룰러 모듈 1821, Wi-Fi 모듈 1823, BT 모듈 1825, GPS 모듈 1827 또는 NFC 모듈 1828 중 적어도 하나는 별개의 RF 모듈을 통하여 RF 신호를 송수신할 수 있다.
상기 SIM 카드 1824는, 예를 들면, 가입자 식별 모듈을 포함하는 카드 및/또는 내장 SIM(embedded SIM)을 포함할 수 있으며, 고유한 식별 정보(예: ICCID (integrated circuit card identifier)) 또는 가입자 정보(예: IMSI (international mobile subscriber identity))를 포함할 수 있다.
상기 메모리 1830(예: 메모리 130)은, 예를 들면, 내장 메모리 1832 또는 외장 메모리 1834를 포함할 수 있다. 상기 내장 메모리 1832는, 예를 들면, 휘발성 메모리(예: DRAM(dynamic RAM), SRAM(static RAM), 또는 SDRAM(synchronous dynamic RAM) 등), 비-휘발성(non-volatile) 메모리 (예: OTPROM(one time programmable ROM), PROM(programmable ROM), EPROM(erasable and programmable ROM), EEPROM(electrically erasable and programmable ROM), mask ROM, flash ROM, 플래시 메모리(예: NAND flash 또는 NOR flash 등), 하드 드라이브, 또는 SSD(solid state drive) 중 적어도 하나를 포함할 수 있다.
상기 외장 메모리 1834는 플래시 드라이브(flash drive), 예를 들면, CF(compact flash), SD(secure digital), Micro-SD, Mini-SD, xD(extreme digital), 또는 메모리 스틱(memory stick) 등을 더 포함할 수 있다. 상기 외장 메모리 1834는 다양한 인터페이스를 통하여 상기 전자 장치 1801과 기능적으로 및/또는 물리적으로 연결될 수 있다.
상기 센서 모듈 1840은, 예를 들면, 물리량을 계측하거나 전자 장치 1801의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 상기 센서 모듈 1840은, 예를 들면, 제스처 센서 1840A, 자이로 센서 1840B, 기압 센서 1840C, 마그네틱 센서 1840D, 가속도 센서 1840E, 그립 센서 1840F, 근접 센서 1840G, 컬러 센서 1840H(예: RGB 센서), 생체 센서 1840I, 온/습도 센서 1840J, 조도 센서 1840K, 또는 UV(ultra violet) 센서 1840M 중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 센서 모듈 1840은, 예를 들면, 후각 센서(E-nose sensor), EMG(electromyography) 센서, EEG(electroencephalogram) 센서, ECG(electrocardiogram) 센서, IR(infrared) 센서, 홍채 센서 및/또는 지문 센서를 포함할 수 있다. 상기 센서 모듈 1840은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다. 어떤 실시 예에서는, 전자 장치 1801은 AP 1810의 일부로서 또는 별도로, 센서 모듈 1840을 제어하도록 구성된 프로세서를 더 포함하여, 상기 AP 1810이 슬립(sleep) 상태에 있는 동안, 센서 모듈 1840을 제어할 수 있다.
상기 입력 장치 1850은, 예를 들면, 터치 패널(touch panel) 1852, (디지털) 펜 센서(pen sensor) 1854, 키(key) 1856, 또는 초음파(ultrasonic) 입력 장치 1858을 포함할 수 있다. 상기 터치 패널 1852는, 예를 들면, 정전식, 감압식, 적외선 방식, 또는 초음파 방식 중 적어도 하나의 방식을 사용할 수 있다. 또한, 상기 터치 패널 1852는 제어 회로를 더 포함할 수도 있다. 상기 터치 패널 1852는 택타일 레이어(tactile layer)를 더 포함하여, 사용자에게 촉각 반응을 제공할 수 있다.
상기 (디지털) 펜 센서 1854는, 예를 들면, 터치 패널의 일부이거나, 별도의 인식용 시트(sheet)를 포함할 수 있다. 상기 키 1856은, 예를 들면, 물리적인 버튼, 광학식 키, 또는 키패드를 포함할 수 있다. 상기 초음파 입력 장치 1858은 초음파 신호를 발생하는 입력 도구를 통해, 전자 장치 1801에서 마이크 (예: 마이크 1888)로 음파를 감지하여 데이터를 확인할 수 있다.
상기 디스플레이 1860(예: 디스플레이 150)은 패널 1862, 홀로그램 장치 1864, 또는 프로젝터 1866을 포함할 수 있다. 상기 패널 1862는, 도 1의 디스플레이 150과 동일 또는 유사한 구성을 포함할 수 있다. 상기 패널 1862는, 예를 들면, 유연하게(flexible), 투명하게(transparent), 또는 착용할 수 있게(wearable) 구현될 수 있다. 상기 패널 1862는 상기 터치 패널 1852와 하나의 모듈로 구성될 수도 있다. 상기 홀로그램 장치 1864는 빛의 간섭을 이용하여 입체 영상을 허공에 보여줄 수 있다. 상기 프로젝터 1866은 스크린에 빛을 투사하여 영상을 표시할 수 있다. 상기 스크린은, 예를 들면, 상기 전자 장치 1801의 내부 또는 외부에 위치할 수 있다. 한 실시 예에 따르면, 상기 디스플레이 1860은 상기 패널 1862, 상기 홀로그램 장치 1864, 또는 프로젝터 1866을 제어하기 위한 제어 회로를 더 포함할 수 있다.
상기 인터페이스 1870은, 예를 들면, HDMI(high-definition multimedia interface) 1872, USB 1874, 광 인터페이스(optical interface) 1876, 또는 D-sub(D-subminiature) 1878을 포함할 수 있다. 상기 인터페이스 1870은, 예를 들면, 도 1에 도시된 통신 인터페이스 160에 포함될 수 있다. 추가적으로 또는 대체적으로, 상기 인터페이스 1870은, 예를 들면, MHL(mobile high-definition link) 인터페이스, SD 카드/MMC(multi-media card) 인터페이스, 또는 IrDA(infrared data association) 규격 인터페이스를 포함할 수 있다.
상기 오디오 모듈 1880은, 예를 들면, 소리(sound)와 전기 신호를 쌍방향으로 변환시킬 수 있다. 상기 오디오 모듈 1880의 적어도 일부 구성요소는, 예를 들면, 도 1 에 도시된 입출력 인터페이스 140에 포함될 수 있다. 상기 오디오 모듈 1880은, 예를 들면, 스피커 1882, 리시버 1884, 이어폰 1886, 또는 마이크 1888 등을 통해 입력 또는 출력되는 소리 정보를 처리할 수 있다.
상기 카메라 모듈 1891은, 예를 들면, 정지 영상 및 동영상을 촬영할 수 있는 장치로서, 한 실시 예에 따르면, 하나 이상의 이미지 센서(예: 전면 센서 또는 후면 센서), 렌즈, ISP(image signal processor), 또는 플래시(예: LED 또는 제논 램프(xenon lamp))를 포함할 수 있다.
상기 전력 관리 모듈 1895는, 예를 들면, 상기 전자 장치 1801의 전력을 관리할 수 있다. 한 실시 예에 따르면, 상기 전력 관리 모듈 1895는 PMIC(power management integrated circuit), 충전 IC(charger integrated circuit), 또는 배터리 또는 연료 게이지(battery or fuel gauge)를 포함할 수 있다. 상기 PMIC는, 유선 및/또는 무선 충전 방식을 가질 수 있다. 무선 충전 방식은, 예를 들면, 자기공명 방식, 자기유도 방식 또는 전자기파 방식 등을 포함하며, 무선 충전을 위한 부가적인 회로, 예를 들면, 코일 루프, 공진 회로, 또는 정류기 등을 더 포함할 수 있다. 상기 배터리 게이지는, 예를 들면, 상기 배터리 1896의 잔량, 충전 중 전압, 전류, 또는 온도를 측정할 수 있다. 상기 배터리 1896은, 예를 들면, 충전식 전지(rechargeable battery) 및/또는 태양 전지(solar battery)를 포함할 수 있다.
상기 인디케이터 1897은 상기 전자 장치 1801 혹은 그 일부(예: AP 1810)의 특정 상태, 예를 들면, 부팅 상태, 메시지 상태 또는 충전 상태 등을 표시할 수 있다. 상기 모터 1898은 전기적 신호를 기계적 진동으로 변환할 수 있고, 진동(vibration), 또는 햅틱(haptic) 효과 등을 발생시킬 수 있다. 도시되지는 않았으나, 상기 전자 장치 1801은 모바일 TV 지원을 위한 처리 장치(예: GPU)를 포함할 수 있다. 상기 모바일 TV 지원을 위한 처리 장치는, 예를 들면, DMB(digital multimedia broadcasting), DVB(digital video broadcasting), 또는 미디어 플로우(media flow) 등의 규격에 따른 미디어 데이터를 처리할 수 있다.
상기 전자 장치의 전술한 구성요소들 각각은 하나 또는 그 이상의 부품(component)으로 구성될 수 있으며, 해당 구성 요소의 명칭은 전자 장치의 종류에 따라서 달라질 수 있다. 다양한 실시 예에서, 전자 장치는 전술한 구성요소 중 적어도 하나를 포함하여 구성될 수 있으며, 일부 구성요소가 생략되거나 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 또한, 다양한 실시 예에 따른 전자 장치의 구성 요소들 중 일부가 결합되어 하나의 개체(entity)로 구성됨으로써, 결합되기 이전의 해당 구성 요소들의 기능을 동일하게 수행할 수 있다.
도 19은 다양한 실시 예에 따른 프로그램 모듈의 블록도를 나타낸다.
도 19을 참조하면, 한 실시 예에 따르면, 상기 프로그램 모듈 1910은 전자 장치(예: 전자 장치 100)에 관련된 자원을 제어하는 운영 체제 및/또는 운영 체제 상에서 구동되는 다양한 어플리케이션(예: 어플리케이션 38)을 포함할 수 있다. 상기 운영 체제는, 예를 들면, 안드로이드(android), iOS, 윈도우즈(windows), 심비안(symbian), 타이젠(tizen), 또는 바다(bada) 등이 될 수 있다.
프로그램 모듈 1910은 OS와 어플리케이션 1970을 포함할 수 있다. OS는 커널 1920, 미들웨어 1930, API 1960을 포함할 수 있다. 상기 프로그램 모듈 1910의 적어도 일부는 전자 장치 상에 프리로드(preload) 되거나, 서버(예: 서버 장치 104)로부터 다운로드 가능하다.
상기 커널 1920은, 예를 들면, 시스템 리소스 매니저 1921 또는 디바이스 드라이버 1923을 포함할 수 있다. 상기 시스템 리소스 매니저 1921은 시스템 리소스의 제어, 할당, 또는 회수 등을 수행할 수 있다. 한 실시 예에 따르면, 상기 시스템 리소스 매니저 1921은 프로세스 관리부, 메모리 관리부, 또는 파일 시스템 관리부 등을 포함할 수 있다. 상기 디바이스 드라이버 1923은, 예를 들면, 디스플레이 드라이버, 카메라 드라이버, 블루투스 드라이버, 공유 메모리 드라이버, USB 드라이버, 키패드 드라이버, Wi-Fi 드라이버, 오디오 드라이버, 또는 IPC(inter-process communication) 드라이버를 포함할 수 있다.
상기 미들웨어 1930은, 예를 들면, 상기 어플리케이션 1970이 공통적으로 필요로 하는 기능을 제공하거나, 상기 어플리케이션 1970이 전자 장치 내부의 제한된 시스템 자원을 효율적으로 사용할 수 있도록 상기 API 1960을 통해 다양한 기능들을 상기 어플리케이션 1970로 제공할 수 있다. 한 실시 예에 따르면, 상기 미들웨어 1930(예: 미들웨어)은 런타임 라이브러리 1935, 어플리케이션 매니저(application manager) 1941, 윈도우 매니저(window manager) 1942, 멀티미디어 매니저(multimedia manager) 1943, 리소스 매니저(resource manager) 1944, 파워 매니저(power manager) 1945, 데이터베이스 매니저(database manager) 1946, 패키지 매니저(package manager) 1947, 연결 매니저(connectivity manager) 1948, 통지 매니저(notification manager) 1949, 위치 매니저(location manager) 1950, 그래픽 매니저(graphic manager) 1951, 또는 보안 매니저(security manager) 1952 중 적어도 하나를 포함할 수 있다.
상기 런타임 라이브러리 1935는, 예를 들면, 상기 어플리케이션 1970이 실행되는 동안에 프로그래밍 언어를 통해 새로운 기능을 추가하기 위해 컴파일러가 사용하는 라이브러리 모듈을 포함할 수 있다. 상기 런타임 라이브러리 1935는 입출력 관리, 메모리 관리, 또는 산술 함수에 대한 기능 등을 수행할 수 있다.
상기 어플리케이션 매니저 1941은, 예를 들면, 상기 어플리케이션 1970 중 적어도 하나의 어플리케이션의 생명 주기(life cycle)를 관리할 수 있다. 상기 윈도우 매니저 1942는 화면에서 사용하는 GUI 자원을 관리할 수 있다. 상기 멀티미디어 매니저 1943은 다양한 미디어 파일들의 재생에 필요한 포맷을 파악하고, 해당 포맷에 맞는 코덱(codec)을 이용하여 미디어 파일의 인코딩(encoding) 또는 디코딩(decoding)을 수행할 수 있다. 상기 리소스 매니저 1944는 상기 어플리케이션 1970 중 적어도 어느 하나의 어플리케이션의 소스 코드, 메모리 또는 저장 공간 등의 자원을 관리할 수 있다.
상기 파워 매니저 1945는, 예를 들면, 바이오스(BIOS: basic input/output system) 등과 함께 동작하여 배터리 또는 전원을 관리하고, 전자 장치의 동작에 필요한 전력 정보 등을 제공할 수 있다. 상기 데이터베이스 매니저 1946은 상기 어플리케이션 1970 중 적어도 하나의 어플리케이션에서 사용할 데이터베이스를 생성, 검색, 또는 변경할 수 있다. 상기 패키지 매니저 1947은 패키지 파일의 형태로 배포되는 어플리케이션의 설치 또는 업데이트를 관리할 수 있다.
상기 연결 매니저 1948은, 예를 들면, Wi-Fi 또는 블루투스 등의 무선 연결을 관리할 수 있다. 상기 통지 매니저 1949는 도착 메시지, 약속, 근접성 알림 등의 사건(event)을 사용자에게 방해되지 않는 방식으로 표시 또는 통지할 수 있다. 상기 위치 매니저 1950은 전자 장치의 위치 정보를 관리할 수 있다. 상기 그래픽 매니저 1951은 사용자에게 제공될 그래픽 효과 또는 이와 관련된 사용자 인터페이스를 관리할 수 있다. 상기 보안 매니저 1952는 시스템 보안 또는 사용자 인증 등에 필요한 제반 보안 기능을 제공할 수 있다. 한 실시 예에 따르면, 전자 장치(예: 전자 장치 100)가 전화 기능을 포함한 경우, 상기 미들웨어 1930은 상기 전자 장치의 음성 또는 영상 통화 기능을 관리하기 위한 통화 매니저(telephony manager)를 더 포함할 수 있다.
상기 미들웨어 1930은 전술한 구성요소들의 다양한 기능의 조합을 형성하는 미들웨어 모듈을 포함할 수 있다. 상기 미들웨어 1930은 차별화된 기능을 제공하기 위해 운영 체제의 종류 별로 특화된 모듈을 제공할 수 있다. 또한, 상기 미들웨어 1930은 동적으로 기존의 구성요소를 일부 삭제하거나 새로운 구성요소들을 추가할 수 있다.
상기 API 1960(예: API)은, 예를 들면, API 프로그래밍 함수들의 집합으로, 운영 체제에 따라 다른 구성으로 제공될 수 있다. 예를 들면, 안드로이드 또는 iOS의 경우, 플랫폼 별로 하나의 API 셋을 제공할 수 있으며, 타이젠(tizen)의 경우, 플랫폼 별로 두 개 이상의 API 셋을 제공할 수 있다.
상기 어플리케이션 1970(예: 어플리케이션 38)은, 예를 들면, 홈 1971, 다이얼러 1972, SMS/MMS 1973, IM(instant message) 1974, 브라우저 1975, 카메라 1976, 알람 1977, 컨택트 1978, 음성 다이얼 1979, 이메일 1980, 달력 1981, 미디어 플레이어 1982, 앨범 1983, 또는 시계 1984, 건강 관리(health care)(예: 운동량 또는 혈당 등을 측정), 또는 환경 정보 제공(예: 기압, 습도, 또는 온도 정보 등을 제공) 등의 기능을 제공할 수 있는 하나 이상의 어플리케이션을 포함할 수 있다.
한 실시 예에 따르면, 상기 어플리케이션 1970은 상기 전자 장치(예: 전자 장치 100)와 외부 전자 장치(예: 전자 장치 102) 사이의 정보 교환을 지원하는 어플리케이션(이하, 설명의 편의 상, "정보 교환 어플리케이션")을 포함할 수 있다. 상기 정보 교환 어플리케이션은, 예를 들면, 상기 외부 전자 장치에 특정 정보를 전달하기 위한 알림 전달(notification relay) 어플리케이션, 또는 상기 외부 전자 장치를 관리하기 위한 장치 관리(device management) 어플리케이션을 포함할 수 있다.
예를 들면, 상기 알림 전달 어플리케이션은 상기 전자 장치의 다른 어플리케이션(예: SMS/MMS 어플리케이션, 이메일 어플리케이션, 건강 관리 어플리케이션, 또는 환경 정보 어플리케이션 등)에서 발생된 알림 정보를 외부 전자 장치(예: 전자 장치 102)로 전달하는 기능을 포함할 수 있다. 또한, 상기 알림 전달 어플리케이션은, 예를 들면, 외부 전자 장치로부터 알림 정보를 수신하여 사용자에게 제공할 수 있다. 상기 장치 관리 어플리케이션은, 예를 들면, 상기 전자 장치와 통신하는 외부 전자 장치(예: 전자 장치 102)의 적어도 하나의 기능(예: 외부 전자 장치 자체(또는 일부 구성 부품)의 턴-온/턴-오프 또는 디스플레이의 밝기(또는 해상도) 조절), 상기 외부 전자 장치에서 동작하는 어플리케이션 또는 상기 외부 전자 장치에서 제공되는 서비스(예: 통화 서비스 또는 메시지 서비스)를 관리 (예: 설치, 삭제, 또는 업데이트)할 수 있다.
한 실시 예에 따르면, 상기 어플리케이션 1970은 상기 외부 전자 장치(예: 전자 장치 102)의 속성(예: 전자 장치의 속성으로서, 전자 장치의 종류가 모바일 의료 기기)에 따라 지정된 어플리케이션(예: 건강 관리 어플리케이션)을 포함할 수 있다. 한 실시 예에 따르면, 상기 어플리케이션 1970은 외부 전자 장치(예: 서버 장치 104 또는 전자 장치 102)로부터 수신된 어플리케이션을 포함할 수 있다. 한 실시 예에 따르면, 상기 어플리케이션 1970은 프리로드 어플리케이션(preloaded application) 또는 서버로부터 다운로드 가능한 제3자 어플리케이션(third party application)을 포함할 수 있다. 도시된 실시 예에 따른 프로그램 모듈 1910의 구성요소들의 명칭은 운영 체제의 종류에 따라서 달라질 수 있다.
다양한 실시 예에 따르면, 상기 프로그램 모듈 1910의 적어도 일부는 소프트웨어, 펌웨어, 하드웨어, 또는 이들 중 적어도 둘 이상의 조합으로 구현될 수 있다. 상기 프로그램 모듈 1910의 적어도 일부는, 예를 들면, 프로세서(예: AP 1810)에 의해 구현(implement)(예: 실행)될 수 있다. 상기 프로그램 모듈 1910의 적어도 일부는 하나 이상의 기능을 수행하기 위한, 예를 들면, 모듈, 프로그램, 루틴, 명령어 세트(sets of instructions) 또는 프로세스 등을 포함할 수 있다.본 개시에 따른 전자 장치의 전술한 구성요소들 각각은 하나 또는 그 이상의 부품(component)으로 구성될 수 있으며, 해당 구성 요소의 명칭은 전자 장치의 종류에 따라서 달라질 수 있다. 본 개시에 따른 전자 장치는 전술한 구성요소 중 적어도 하나를 포함하여 구성될 수 있으며, 일부 구성요소가 생략되거나 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 또한, 본 개시에 따른 전자 장치의 구성 요소들 중 일부가 결합되어 하나의 개체(entity)로 구성됨으로써, 결합되기 이전의 해당 구성 요소들의 기능을 동일하게 수행할 수 있다.
본 개시에 사용된 용어 “모듈”은, 예를 들어, 하드웨어, 소프트웨어 또는 펌웨어(firmware) 중 하나 또는 둘 이상의 조합을 포함하는 단위(unit)를 의미할 수 있다. “모듈”은 예를 들어, 유닛(unit), 로직(logic), 논리 블록(logical block), 부품(component) 또는 회로(circuit) 등의 용어와 바꾸어 사용(interchangeably use)될 수 있다. “모듈”은, 일체로 구성된 부품의 최소 단위 또는 그 일부가 될 수 있다. “모듈”은 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수도 있다. “모듈”은 기계적으로 또는 전자적으로 구현될 수 있다. 예를 들면, 본 개시에 따른 “모듈”은, 알려졌거나 앞으로 개발될, 어떤 동작들을 수행하는 ASIC(application-specific integrated circuit) 칩, FPGAs(field-programmable gate arrays) 또는 프로그램 가능 논리 장치(programmable-logic device) 중 적어도 하나를 포함할 수 있다.
다양한 실시예에 따르면, 본 개시에 따른 장치(예: 모듈들 또는 그 기능들) 또는 방법(예: 동작들)의 적어도 일부는, 예컨대, 프로그래밍 모듈의 형태로 컴퓨터로 읽을 수 있는 저장매체(computer-readable storage media)에 저장된 명령어로 구현될 수 있다. 상기 명령어는, 하나 이상의 프로세서 (예: 상기 제어 모듈 160)에 의해 실행될 경우, 상기 하나 이상의 프로세서가 상기 명령어에 해당하는 기능을 수행할 수 있다. 컴퓨터로 읽을 수 있는 저장매체는, 예를 들면, 상기 메모리 120가 될 수 있다. 상기 프로그래밍 모듈의 적어도 일부는, 예를 들면, 상기 프로세서 100에 의해 구현(implement)(예: 실행)될 수 있다. 상기 프로그래밍 모듈 의 적어도 일부는 하나 이상의 기능을 수행하기 위한, 예를 들면, 모듈, 프로그램, 루틴, 명령어 세트 (sets of instructions) 또는 프로세스 등을 포함할 수 있다.
상기 컴퓨터로 판독 가능한 기록 매체에는 하드디스크, 플로피디스크 및 자기 테이프와 같은 마그네틱 매체(Magnetic Media)와, CD-ROM(Compact Disc Read Only Memory), DVD(Digital Versatile Disc)와 같은 광기록 매체(Optical Media)와, 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media)와, 그리고 ROM(Read Only Memory), RAM(Random Access Memory), 플래시 메모리 등과 같은 프로그램 명령(예: 프로그래밍 모듈)을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함될 수 있다. 또한, 프로그램 명령에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 상술한 하드웨어 장치는 본 개시의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지다.
본 개시에 따른 모듈 또는 프로그래밍 모듈은 전술한 구성요소들 중 적어도 하나 이상을 포함하거나, 일부가 생략되거나, 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 본 개시에 따른 모듈, 프로그래밍 모듈 또는 다른 구성요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱(heuristic)한 방법으로 실행될 수 있다. 또한, 일부 동작은 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
다양한 실시 예에 따르면, 한 실시 예에 따른 컴퓨터 기록 매체는 적어도 하나의 프로세서에 의해 실행 가능한 명령어를 포함하고, 상기 명령어는 HRM 센서를 항상 활성화하거나 지정된 어플리케이션 실행 시 활성화하는 동작, HRM 센서가 수집한 센싱 정보에 따라, 현재 실행 중인 어플리케이션의 지정된 기능을 실행하는 동작을 수행하도록 설정될 수 있다.
그리고 본 명세서와 도면에 개시된 본 개시의 실시 예들은 본 개시의 기술 내용을 쉽게 설명하고 본 개시의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 개시의 범위를 한정하고자 하는 것은 아니다. 따라서 본 개시의 범위는 여기에 개시된 실시 예들 이외에도 본 개시의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 개시의 범위에 포함되는 것으로 해석되어야 한다.
10 : 전자 장치 운용 시스템 20 : 전자 모듈
100 : 전자 장치 110 : 버스
120 : 입출력 모듈 130 : 통신 인터페이스
140 : 표시 모듈 150 : 저장 모듈
160 : 제어 모듈 170 : 센서 모듈

Claims (32)

  1. 신호를 수집하는 센서 모듈;
    적어도 상기 수집된 신호의 일부를 기반하여 생체 정보를 생성하는 모듈;
    적어도 상기 수집된 신호의 일부를 기반하여 근접도 정보를 생성하는 모듈;
    적어도 상기 수집된 신호의 일부를 기반하여 조도 정보를 생성하는 모듈;
    적어도 상기 생체 정보, 상기 근접도 정보, 또는 상기 조도 정보를 기반하여 전자장치의 상태를 판단하는 모듈;을 포함하는 전자장치.
  2. 제1항에 있어서,
    상기 생체 정보는 심박수인 것을 특징으로 하는 전자 장치.
  3. 제1항에 있어서,
    상기 전자장치의 상태는 전자장치의 착용상태를 포함하는 전자 장치.
  4. 제1항에 있어서,
    상기 생체 정보, 상기 근접도 정보 또는 상기 조도 정보 중 적어도 하나를 이용하여 전자장치를 제어하는 제어모듈;을 더 포함하는 전자장치
  5. 제4항에 있어서,
    상기 제어 모듈은
    상기 생체 정보의 주파수 도메인 특성 및 시간 도메인 특성 중 적어도 하나를 기반으로 상기 전자 장치의 착용 부위를 판단하는 전자 장치.
  6. 제4항에 있어서,
    상기 제어 모듈은
    상기 근접도 정보 분석을 기반으로 상기 전자 장치의 착용 여부를 판단하고, 상기 착용여부 판단과 상기 생체 신호 분석 정보를 기반으로 상기 전자 장치의 착용 부위를 판단하는 전자 장치.
  7. 제4항에 있어서,
    상기 전자 장치가 착용자의 특정 부위에 착용된 상태에서의 생체 정보를 상기 특정 부위별 생체 정보에 해당하는 참조 정보로 저장하는 저장 모듈;을 더 포함하는 전자 장치.
  8. 제7항에 있어서,
    상기 제어 모듈은
    상기 참조 정보와 수집된 정보 간의 유사도 비교를 수행하여 착용 상태 및 착용 부위를 판단하는 전자 장치.
  9. 제4항에 있어서,
    상기 제어 모듈은
    상기 착용 상태에 대응하여 상기 전자 장치의 정보 출력 형태를 다르게 하는 출력하는 전자 장치.
  10. 제9항에 있어서,
    상기 제어 모듈은
    상기 착용 상태에 대응하여 상기 정보를 가로 배열 가로 쓰기 방식, 상기 착용 상태에 대응하여 상기 정보를 가로 배열 세로 쓰기 방식, 상기 착용 상태에 대응하여 상기 정보를 세로 배열 가로 쓰기 방식, 상기 착용 상태에 대응하여 상기 정보를 세로 배열 세로 쓰기 방식, 상기 착용 상태에 대응하여 상기 정보를 상하 방향이 반전된 방식, 상기 착용 상태에 대응하여 특정 기능 실행과 관련한 소프트 버튼의 출력 위치 변경, 상기 착용 상태에 대응하여 표시 모듈에 출력되는 소프트 버튼의 실행 기능 종류 변경 중 적어도 하나로 출력하는 전자 장치.
  11. 제4항에 있어서,
    상기 제어 모듈은
    상기 착용 상태에 대응하여 상기 전자 장치의 기능 처리를 다르게 적용하는 전자 장치.
  12. 제11항에 있어서,
    상기 제어 모듈은
    상기 착용 상태에 대응하여 상기 전자 장치의 이벤트 발생을 알람하거나, 상기 착용 상태에 대응하여 상기 전자 장치의 발생된 이벤트의 내용 정보 중 적어도 일부를 출력하는 전자 장치.
  13. 제11항에 있어서,
    상기 제어 모듈은
    상기 전자 장치 미착용 시 인증 확인을 수행하는 전자 장치.
  14. 제4항에 있어서,
    상기 제어 모듈은
    상기 근접도 정보를 판단하여 착용/미착용 상태 정보를 전자 장치 혹은 외부 전자 장치에서 출력하도록 제어하는 전자 장치.
  15. 제4항에 있어서,
    상기 제어 모듈은
    상기 생체 정보와 가속도 정보 및 자이로 정보를 기반으로 수면 상태 진입 여부를 자동으로 판단하는 전자 장치.
  16. 제4항에 있어서,
    상기 제어 모듈은
    상기 전자 장치를 통해 신체정보를 센싱하여 상기 전자장치 또는 외부전자장치의 적어도 하나의 특정 동작을 수행하도록 제어하는 전자 장치
  17. 제16항에 있어서,
    상기 제어 모듈은
    상기 전자 장치를 착용한 부위의 신체 변화에 대응하여 변화되는 혈류량, 혈압, 산소포화도 중 적어도 하나의 변화된 생체 정보를 센싱하여 생체 정보 및 신체 변화에 따라 유추된 신체 동작을 기반으로 상기 전자 장치의 특정 동작을 수행하도록 제어하는 전자 장치.
  18. 센서 모듈 기반의 신호를 수집하는 과정;
    적어도 상기 수집된 신호의 일부를 기반으로 하는 생체 정보, 적어도 상기 수집된 신호의 일부를 기반으로 하는 근접도 정보, 적어도 상기 수집된 신호의 일부를 기반으로 하는 조도 정보 중 적어도 하나를 이용하여 전자장치의 상태를 판단하는 과정;을 포함하는 전자 장치 운용 방법.
  19. 제18항에 있어서,
    상기 생체 정보는 심박수인 전자 장치 운용 방법.
  20. 제18항에 있어서,
    상기 전자장치의 상태는 전자장치의 착용상태를 포함하는 전자 장치 운용 방법.
  21. 제18항에 있어서,
    상기 생체 정보, 상기 근접도 정보 또는 상기 조도 정보 중 적어도 하나를 이용하여 전자장치를 제어하는 과정;을 포함하는 전자 장치 운용 방법.
  22. 제21항에 있어서,
    상기 제어하는 과정은
    상기 생체 신호의 주파수 도메인 특성 및 시간 도메인 특성 중 적어도 하나를 기반으로 상기 전자 장치의 착용 부위를 판단하는 과정;을 포함하는 전자 장치 운용 방법.
  23. 제22항에 있어서,
    상기 제어하는 과정은
    상기 근접도 정보 분석을 기반으로 상기 전자 장치의 착용 여부를 판단하는 과정;
    상기 생체 신호 분석 정보를 기반으로 상기 전자 장치의 착용 부위를 판단하는 과정;을 포함하는 전자 장치 운용 방법.
  24. 제22항에 있어서,
    상기 전자 장치가 착용자의 특정 부위에 착용된 상태에서의 생체 신호를 수집하는 과정;
    상기 특정 부위별 생체 신호를 참조 정보로 저장하는 과정;을 더 포함하는 전자 장치 운용 방법.
  25. 제24항에 있어서,
    상기 제어하는 과정은
    상기 참조 정보와 수집된 정보 간의 유사도 비교를 수행하여 착용 상태 및 착용 부위를 판단하는 과정;을 포함하는 전자 장치 운용 방법.
  26. 제22항에 있어서,
    상기 착용 상태에 대응하여 상기 전자 장치의 정보 출력 형태를 다르게 하는 출력 과정;을 더 포함하는 전자 장치 운용 방법.
  27. 제26항에 있어서,
    상기 출력 과정은
    상기 착용 상태에 대응하여 상기 정보를 가로 배열 가로 쓰기 방식으로 출력하는 과정;
    상기 착용 상태에 대응하여 상기 정보를 가로 배열 세로 쓰기 방식으로 출력하는 과정;
    상기 착용 상태에 대응하여 상기 정보를 세로 배열 가로 쓰기 방식으로 출력하는 과정;
    상기 착용 상태에 대응하여 상기 정보를 세로 배열 세로 쓰기 방식으로 출력하는 과정;
    상기 착용 상태에 대응하여 상기 정보를 상하 방향이 반전된 방식으로 출력하는 과정;
    상기 착용 상태에 대응하여 특정 기능 실행과 관련한 소프트 버튼의 출력 위치를 변경 하는 과정;
    상기 착용 상태에 대응하여 표시 모듈에 출력되는 소프트 버튼의 실행 기능 종류를 변경하는 과정; 중 적어도 하나의 과정을 포함하는 전자 장치 운용 방법.
  28. 제22항에 있어서,
    상기 착용 상태에 대응하여 상기 전자 장치의 기능 처리를 다르게 적용하는 적용 과정;을 더 포함하는 전자 장치 운용 방법.
  29. 제28항에 있어서,
    상기 적용 과정은
    상기 착용 상태에 대응하여 상기 전자 장치의 이벤트 발생을 알람하는 과정;
    상기 착용 상태에 대응하여 상기 전자 장치의 발생된 이벤트의 내용 정보 중 적어도 일부를 출력하는 과정; 중 적어도 하나의 과정을 포함하는 전자 장치 운용 방법.
  30. 제28항에 있어서,
    상기 적용 과정은
    상기 전자 장치 미착용 시 인증 확인을 수행하는 과정;을 포함하는 전자 장치 운용 방법.
  31. 제21항에 있어서,
    상기 제어 하는 과정은
    상기 근접도 정보를 판단하여 착용/미착용 상태 정보를 전자 장치 혹은 외부 전자 장치에서 출력하도록 제어하는 과정;
    상기 생체 정보와 가속도 정보 및 자이로 정보를 기반으로 수면 상태 진입 여부를 자동으로 판단하는 과정;
    상기 전자 장치를 통해 신체정보를 센싱하여 상기 전자장치 또는 외부전자장치의 적어도 하나의 특정 동작을 수행하도록 제어하는 과정; 중 적어도 하나의 과정을 포함하는 전자 장치 운용 방법.
  32. 제21항에 있어서,
    상기 제어 하는 과정은
    상기 전자 장치를 착용한 부위의 신체 변화에 대응하여 변화되는 혈류량, 혈압, 산소포화도 중 적어도 하나의 변화된 생체 정보를 센싱하여 생체 정보 및 신체 변화에 따라 유추된 신체 동작을 기반으로 상기 전자 장치의 특정 동작을 수행하도록 제어하는 과정; 중 적어도 하나의 과정을 포함하는 전자 장치 운용 방법.
KR1020140112624A 2014-02-22 2014-08-27 전자 장치 운용 방법 및 이를 지원하는 전자 장치 KR20150099678A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/KR2015/001554 WO2015126123A1 (ko) 2014-02-22 2015-02-16 전자 장치 운용 방법 및 이를 지원하는 전자 장치
US15/120,415 US20170010669A1 (en) 2014-02-22 2015-02-16 Method for operating electronic apparatus and electronic apparatus supporting the method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20140020981 2014-02-22
KR1020140020981 2014-02-22

Publications (1)

Publication Number Publication Date
KR20150099678A true KR20150099678A (ko) 2015-09-01

Family

ID=54241684

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140112624A KR20150099678A (ko) 2014-02-22 2014-08-27 전자 장치 운용 방법 및 이를 지원하는 전자 장치

Country Status (2)

Country Link
US (1) US20170010669A1 (ko)
KR (1) KR20150099678A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170071194A (ko) * 2015-12-15 2017-06-23 삼성전자주식회사 플렉서블 전자장치 및 동작 방법
KR20170089231A (ko) * 2016-01-26 2017-08-03 삼성전자주식회사 전자 장치 및 그의 제어방법
CN110362189A (zh) * 2018-03-26 2019-10-22 精工爱普生株式会社 电子笔、显示系统以及电子笔的控制方法

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10251022B2 (en) * 2016-02-18 2019-04-02 Comcast Cable Communications, Llc Systems and methods for low energy beacon management
US10165397B2 (en) 2016-02-18 2018-12-25 Comcast Cable Communications, Llc Proximity detection and targeted communications
US10706396B2 (en) 2018-03-19 2020-07-07 Capital One Services, Llc Systems and methods for translating a gesture to initiate a financial transaction
CN109246525B (zh) * 2018-11-06 2021-01-12 西安Tcl软件开发有限公司 基于手势的耳机控制方法、装置及头戴式耳机
CN114098755A (zh) * 2020-08-25 2022-03-01 华为终端有限公司 Ecg波形显示方法及其介质和电子设备
TWI780728B (zh) * 2021-05-25 2022-10-11 佛教慈濟醫療財團法人 具有自動解鎖功能的患者固定裝置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100201512A1 (en) * 2006-01-09 2010-08-12 Harold Dan Stirling Apparatus, systems, and methods for evaluating body movements
US8854060B2 (en) * 2009-11-06 2014-10-07 BIOTRONIK CRIM Patent AG Physiological measurement instrument
CN102892308A (zh) * 2010-06-16 2013-01-23 热带产品公司 包胶的盐及其在高酸饮料中的用途
WO2013126684A1 (en) * 2012-02-22 2013-08-29 Aclaris Medical, Llc Physiological signal detecting device and system
US9606721B2 (en) * 2013-07-22 2017-03-28 Lg Electronics Inc. Mobile terminal and control method thereof
US9558336B2 (en) * 2013-10-04 2017-01-31 Salutron Inc. Persistent authentication using sensors of a user-wearable device
KR20150089371A (ko) * 2014-01-27 2015-08-05 한국전자통신연구원 인체 동작 분석 장치

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170071194A (ko) * 2015-12-15 2017-06-23 삼성전자주식회사 플렉서블 전자장치 및 동작 방법
KR20170089231A (ko) * 2016-01-26 2017-08-03 삼성전자주식회사 전자 장치 및 그의 제어방법
CN110362189A (zh) * 2018-03-26 2019-10-22 精工爱普生株式会社 电子笔、显示系统以及电子笔的控制方法
CN110362189B (zh) * 2018-03-26 2023-06-16 精工爱普生株式会社 电子笔、显示系统以及电子笔的控制方法

Also Published As

Publication number Publication date
US20170010669A1 (en) 2017-01-12

Similar Documents

Publication Publication Date Title
EP3567584B1 (en) Electronic apparatus and method for operating same
KR102613731B1 (ko) 복수의 디스플레이를 구비한 전자장치 및 그 제어 방법
KR102432620B1 (ko) 외부 객체의 근접에 따른 동작을 수행하는 전자 장치 및 그 방법
KR102398716B1 (ko) 생체 정보 검출 방법 및 그 방법을 처리하는 전자 장치
US11172450B2 (en) Electronic device and method for controlling operation thereof
CN107997767B (zh) 用于识别用户活动的方法及其电子设备
KR102430941B1 (ko) 생체 상태 정보 제공 방법 및 이를 지원하는 전자 장치
EP3382530A1 (en) Operating method of electronic device for function execution based on voice command in locked state and electronic device supporting the same
KR102373491B1 (ko) 회전체의 회전 인식 방법 및 그 방법을 처리하는 전자 장치
KR102503937B1 (ko) 전자 장치의 사용자 인터페이스 제공 방법 및 장치
KR102537543B1 (ko) 지능형 전자 장치 및 그 동작 방법
KR102489876B1 (ko) 알림을 제공하기 위한 방법 및 그 전자 장치
KR102493491B1 (ko) 생체 정보를 측정하는 전자 장치와 이의 동작 방법
KR20150099678A (ko) 전자 장치 운용 방법 및 이를 지원하는 전자 장치
EP3584729B1 (en) Electronic device for performing authentication by using multiple biometric sensors and operation method thereof
KR102324074B1 (ko) 사운드 출력 제어 방법 및 전자 장치
KR20160091114A (ko) 디스플레이 정보를 이용한 홍채 인증 방법 및 장치
KR20160063068A (ko) 전자 장치, 그 동작 방법 및 기록 매체
KR20170019127A (ko) 전자 장치 상태에 따른 제어 방법 및 그 장치
KR102324964B1 (ko) 외부 입력 장치의 입력을 처리하는 전자 장치 및 방법
KR102343990B1 (ko) 디스플레이의 서로 다른 영역을 독립적으로 제어하는 전자 장치 및 방법
KR102356450B1 (ko) 연결부를 갖는 전자 장치 및 그 동작 방법
KR102070407B1 (ko) 전자장치 및 이를 사용하여 디스플레이에 연동된 생체 센서의 제어 방법
KR20170027589A (ko) 기능 제어 방법 및 그 방법을 처리하는 전자 장치
KR102388590B1 (ko) 전자 장치 및 전자 장치의 입력 방법

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination