KR102464925B1 - Wearable device and control method thereof - Google Patents
Wearable device and control method thereof Download PDFInfo
- Publication number
- KR102464925B1 KR102464925B1 KR1020160120637A KR20160120637A KR102464925B1 KR 102464925 B1 KR102464925 B1 KR 102464925B1 KR 1020160120637 A KR1020160120637 A KR 1020160120637A KR 20160120637 A KR20160120637 A KR 20160120637A KR 102464925 B1 KR102464925 B1 KR 102464925B1
- Authority
- KR
- South Korea
- Prior art keywords
- user
- information
- state
- wearable device
- target state
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 48
- 238000001514 detection method Methods 0.000 claims abstract description 37
- 238000004891 communication Methods 0.000 claims description 14
- 230000003542 behavioural effect Effects 0.000 description 27
- 238000011161 development Methods 0.000 description 25
- 238000010586 diagram Methods 0.000 description 24
- 230000006399 behavior Effects 0.000 description 20
- 230000033001 locomotion Effects 0.000 description 17
- 235000012054 meals Nutrition 0.000 description 15
- 230000006870 function Effects 0.000 description 9
- 238000009223 counseling Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 230000036760 body temperature Effects 0.000 description 7
- 238000012544 monitoring process Methods 0.000 description 7
- 239000003102 growth factor Substances 0.000 description 6
- 230000036541 health Effects 0.000 description 5
- 230000001939 inductive effect Effects 0.000 description 5
- 235000012046 side dish Nutrition 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 208000019622 heart disease Diseases 0.000 description 4
- 238000010295 mobile communication Methods 0.000 description 4
- 238000012549 training Methods 0.000 description 4
- 230000005856 abnormality Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 235000005686 eating Nutrition 0.000 description 3
- WQZGKKKJIJFFOK-GASJEMHNSA-N Glucose Natural products OC[C@H]1OC(O)[C@H](O)[C@@H](O)[C@@H]1O WQZGKKKJIJFFOK-GASJEMHNSA-N 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 239000008280 blood Substances 0.000 description 2
- 210000004369 blood Anatomy 0.000 description 2
- 230000036772 blood pressure Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 235000006694 eating habits Nutrition 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 239000008103 glucose Substances 0.000 description 2
- 230000003862 health status Effects 0.000 description 2
- 230000036651 mood Effects 0.000 description 2
- 230000001020 rhythmical effect Effects 0.000 description 2
- 239000004984 smart glass Substances 0.000 description 2
- 239000000126 substance Substances 0.000 description 2
- 210000000707 wrist Anatomy 0.000 description 2
- 206010000117 Abnormal behaviour Diseases 0.000 description 1
- 206010035664 Pneumonia Diseases 0.000 description 1
- 238000003915 air pollution Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 230000037213 diet Effects 0.000 description 1
- 235000005911 diet Nutrition 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000008571 general function Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000010438 heat treatment Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 210000004072 lung Anatomy 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000015541 sensory perception of touch Effects 0.000 description 1
- 230000035939 shock Effects 0.000 description 1
- 230000002747 voluntary effect Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
- 230000003442 weekly effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/22—Social work or social welfare, e.g. community support activities or counselling services
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/163—Wearable computers, e.g. on a belt
-
- G06Q50/30—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
-
- H04N5/2257—
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/12—Messaging; Mailboxes; Announcements
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Computer Hardware Design (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Primary Health Care (AREA)
- Biomedical Technology (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- General Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Public Health (AREA)
- Medical Informatics (AREA)
- Child & Adolescent Psychology (AREA)
- Epidemiology (AREA)
- Economics (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- Operations Research (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
웨어러블 디바이스는, 사용자의 목표상태에 관한 정보와 목표상태에 대응하는 가이드정보를 저장하는 저장부를 구비한다. 센서부는 사용자의 상태를 감지하여 상태감지정보를 생성한다. 제어부는, 목표상태에 관한 정보와 상태감지정보에 기초하여 사용자 상태가 목표상태에 부합하는지 여부를 판단하고, 부합하지 않는 경우 가이드정보를 사용자에게 제공한다. 사용자의 상태정보에 따라 사용자의 상태가 바람직한 목표상태가 되도록 사용자를 유도할 수 있다. The wearable device includes a storage unit for storing information about a user's target state and guide information corresponding to the target state. The sensor unit detects the user's state and generates state detection information. The control unit determines whether the user's state meets the target state based on the information about the target state and the state detection information, and provides guide information to the user if it does not match. The user may be induced so that the user's state becomes a desired target state according to the user's state information.
Description
본 발명은 웨어러블 디바이스 및 그 제어방법에 관한 것이다. 상세하게는, 웨어러블 디바이스를 착용한 사용자의 상태정보에 기초하여, 사용자의 상태가 바람직한 목표상태에 이르도록 유도하는 웨어러블 디바이스 및 그 제어방법에 관한 것이다.The present invention relates to a wearable device and a method for controlling the same. In detail, the present invention relates to a wearable device and a control method thereof for inducing a user's state to reach a desired target state based on state information of a user wearing the wearable device.
스마트 디바이스에서 구현되는 학습 가이드 기능이란, 스마트 디바이스의 다양한 센서를 통해 획득되는 사용자의 상태정보에 기초하여 스마트 디바이스의 사용자를 바람직한 목표상태로 유도하는 인공지능 성장 프로그램의 일종이다. 이러한 학습 가이드 기능은, 스마트 디바이스를 통해 획득되는 사용자의 상태정보에 대한 정확도가 높아야, 사용자의 상태가 목표상태에 부합하는지를 판단할 수 있고, 이에 기초하여 사용자를 바람직한 목표상태로 유도할 수 있다.The learning guide function implemented in the smart device is a kind of artificial intelligence growth program that guides the user of the smart device to a desired target state based on the user's state information obtained through various sensors of the smart device. Such a learning guide function can determine whether the user's state matches the target state when the accuracy of the user's state information obtained through the smart device is high, and can guide the user to the desired target state based on this.
그러나, 사용자와 물리적으로 분리되어 있는 스마트 디바이스를 통해 사용자의 상태정보를 획득하면, 사용자의 상태정보의 정확도가 낮기 때문에 사용자의 상태가 목표상태에 부합하는지를 정확하게 판단할 수 없고, 사용자를 바람직한 목표상태로 유도할 수 없다.However, when the user's status information is obtained through a smart device that is physically separated from the user, it cannot be accurately determined whether the user's status meets the target status because the accuracy of the user's status information is low, and the user cannot be placed in a desired target status. cannot be led to
따라서, 본 발명의 목적은 사용자의 상태정보와 사용자의 상태가 목표상태에 부합하는지에 대한 판단의 정확도를 향상시켜서, 사용자를 바람직한 목표상태로 유도할 수 있는 웨어러블 디바이스 및 그 제어방법을 제공하는 것이다.Accordingly, an object of the present invention is to provide a wearable device capable of inducing the user to a desired target state by improving the accuracy of determining whether the user's state information and the user's state match the target state, and a method for controlling the same. .
본 발명의 상기 목적은, 사용자의 신체에 착용 가능한 웨어러블 디바이스에 있어서, 적어도 하나의 상황에 대하여 마련되는 사용자의 목표상태에 관한 정보와, 상기 목표상태에 대응하는 가이드정보를 저장하는 저장부와; 상기 사용자의 상태를 감지하여 상태감지정보를 생성하는 센서부와; 및 상기 저장부에 저장된 상기 사용자의 목표상태에 관한 정보와, 상기 센서부에 의해 생성된 상기 상태감지정보에 기초하여 상기 사용자 상태가 상기 목표상태에 부합하는지 여부를 판단하고, 상기 사용자 상태가 상기 목표상태에 부합하지 않는 경우, 상기 저장부에 저장된 상기 목표상태에 대응하는 가이드정보를 제공하는 제어부를 포함하는 웨어러블 디바이스에 의해 달성할 수 있다.The above object of the present invention is a wearable device that can be worn on a user's body, comprising: a storage unit for storing information about a user's target state provided for at least one situation, and guide information corresponding to the target state; a sensor unit that detects the user's state and generates state detection information; and determining whether the user state matches the target state based on the information about the target state of the user stored in the storage unit and the state detection information generated by the sensor unit, and the user state is the When the target state is not met, it can be achieved by the wearable device including a control unit that provides guide information corresponding to the target state stored in the storage unit.
여기서, 상기 웨어러블 디바이스는 음성 출력이 가능한 음성출력부를 포함하고, 상기 제어부는 상기 가이드정보에 대응하는 음성을 출력하도록 상기 음성출력부를 제어할 수 있다.Here, the wearable device may include a voice output unit capable of outputting a voice, and the controller may control the voice output unit to output a voice corresponding to the guide information.
여기서, 상기 웨어러블 디바이스는 상기 사용자의 음성을 수신하는 음성수신부를 포함하고, 상기 제어부는 상기 음성수신부를 통해 수신한 상기 사용자의 음성을 반영하여 상기 가이드정보에 대응하는 음성을 출력하도록 상기 음성출력부를 제어할 수 있다.Here, the wearable device includes a voice receiver for receiving the user's voice, and the controller reflects the user's voice received through the voice receiver and outputs the voice corresponding to the guide information. can be controlled
여기서, 상기 웨어러블 디바이스는 영상의 표시가 가능한 디스플레이부를 포함하고, 상기 제어부는 상기 가이드정보에 대응하는 캐릭터를 표시하도록 상기 디스플레이부를 제어할 수 있다.Here, the wearable device may include a display unit capable of displaying an image, and the controller may control the display unit to display a character corresponding to the guide information.
여기서, 상기 웨어러블 디바이스는 상기 사용자의 이미지를 촬상하는 영상획득부를 포함하고, 상기 제어부는 상기 영상획득부를 통해 촬상한 상기 사용자의 이미지를 반영하여 상기 캐릭터를 표시하도록 상기 디스플레이부를 제어할 수 있다.Here, the wearable device may include an image acquisition unit that captures the user's image, and the controller may control the display unit to display the character by reflecting the user's image captured through the image acquisition unit.
여기서, 상기 저장부는 상기 목표상태에 대응하는 리워드에 관한 정보를 저장하고, 상기 제어부는 상기 상태감지정보에 기초하여 상기 사용자 상태가 상기 목표상태에 부합하는 경우, 상기 리워드에 관한 정보를 제공할 수 있다.Here, the storage unit may store information about a reward corresponding to the target state, and the control unit may provide information about the reward when the user state matches the target state based on the state detection information. have.
여기서, 상기 리워드에 관한 정보는 상기 캐릭터의 성장에 관한 정보 및 상기 사용자의 소원에 관한 정보 중 적어도 하나를 포함할 수 있다.Here, the information about the reward may include at least one of information about the growth of the character and information about the user's wishes.
여기서, 상기 캐릭터의 성장에 관한 정보는 상기 상태감지정보에 기초하여 상기 캐릭터의 단계별 성장에 관한 정보를 포함할 수 있다.Here, the information on the growth of the character may include information on the step-by-step growth of the character based on the state detection information.
여기서, 상기 제어부는 복수의 상기 상태감지정보에 기초하여 상기 사용자의 동작 패턴을 결정하고, 상기 결정된 동작 패턴에 대응하는 상기 가이드정보를 제공할 수 있다.Here, the control unit may determine the user's operation pattern based on a plurality of the state detection information, and provide the guide information corresponding to the determined operation pattern.
여기서, 상기 웨어러블 디바이스는 상기 사용자에 관한 부가정보를 수신하는 통신부를 포함하고, 상기 제어부는 상기 수신된 부가정보에 대응하는 상기 가이드정보를 제공할 수 있다.Here, the wearable device may include a communication unit for receiving additional information about the user, and the control unit may provide the guide information corresponding to the received additional information.
또한, 본 발명의 상기 목적은, 사용자의 신체에 착용 가능한 웨어러블 디바이스의 제어방법에 있어서, 적어도 하나의 상황에 대하여 마련되는 사용자의 목표상태에 관한 정보와, 상기 목표상태에 대응하는 가이드정보를 저장하는 단계와; 상기 사용자의 상태를 감지하여 상태감지정보를 생성하는 단계와; 상기 저장된 상기 사용자의 목표상태에 관한 정보와, 상기 생성된 상기 상태감지정보에 기초하여 상기 사용자 상태가 상기 목표상태에 부합하는지 여부를 판단하는 단계와; 및 상기 사용자 상태가 상기 목표상태에 부합하지 않는 경우, 상기 저장된 상기 목표상태에 대응하는 가이드정보를 제공하는 단계를 포함하는 웨어러블 디바이스의 제어방법에 의해서 달성될 수 있다.In addition, the above object of the present invention, in a method of controlling a wearable device that can be worn on a user's body, information about a user's target state prepared for at least one situation, and guide information corresponding to the target state, are stored. step of; generating state detection information by sensing the user's state; determining whether the user state matches the target state based on the stored information on the target state of the user and the generated state detection information; and providing guide information corresponding to the stored target state when the user state does not match the target state.
여기서, 상기 가이드정보를 제공하는 단계는 상기 가이드정보에 대응하는 음성을 출력하는 단계를 포함할 수 있다.Here, the step of providing the guide information may include outputting a voice corresponding to the guide information.
여기서, 상기 음성을 출력하는 단계는 상기 사용자의 음성을 수신하는 단계 및 상기 수신한 상기 사용자의 음성을 반영하여 상기 가이드정보에 대응하는 음성을 출력하는 단계를 포함할 수 있다.Here, outputting the voice may include receiving the user's voice and outputting a voice corresponding to the guide information by reflecting the received user's voice.
여기서, 상기 가이드정보를 제공하는 단계는 상기 가이드정보에 대응하는 캐릭터를 표시하는 단계를 포함할 수 있다.Here, the step of providing the guide information may include displaying a character corresponding to the guide information.
여기서, 상기 캐릭터를 표시하는 단계는 상기 사용자의 이미지를 촬상하는 단계 및 상기 촬상한 상기 사용자의 이미지를 반영하여 상기 캐릭터를 표시하는 단계를 포함할 수 있다.Here, the displaying of the character may include capturing an image of the user and displaying the character by reflecting the captured image of the user.
여기서, 상기 저장하는 단계는 상기 목표상태에 대응하는 리워드에 관한 정보를 저장하는 단계를 포함하고, 상기 가이드정보를 제공하는 단계는 상기 상태감지정보에 기초하여 상기 사용자 상태가 상기 목표상태에 부합하는 경우, 상기 리워드에 관한 정보를 제공하는 단계를 포함할 수 있다.Here, the storing includes storing information about a reward corresponding to the target state, and the providing of the guide information may include: In this case, the method may include providing information about the reward.
여기서, 상기 리워드에 관한 정보는 상기 캐릭터의 성장에 관한 정보 및 상기 사용자의 소원에 관한 정보 중 적어도 하나를 포함할 수 있다. Here, the information about the reward may include at least one of information about the growth of the character and information about the user's wishes.
여기서, 상기 캐릭터의 성장에 관한 정보는 상기 상태감지정보에 기초하여 상기 캐릭터의 단계별 성장에 관한 정보를 포함할 수 있다.Here, the information on the growth of the character may include information on the step-by-step growth of the character based on the state detection information.
여기서, 상기 가이드정보를 제공하는 단계는 복수의 상기 상태감지정보에 기초하여 상기 사용자의 동작 패턴을 결정하는 단계 및 상기 결정된 동작 패턴에 대응하는 상기 가이드정보를 제공하는 단계를 포함할 수 있다.Here, the providing of the guide information may include determining the user's operation pattern based on a plurality of the state detection information and providing the guide information corresponding to the determined operation pattern.
여기서, 상기 상태감지정보를 생성하는 단계는 상기 사용자에 관한 부가정보를 수신하는 단계를 포함하고, 상기 가이드정보를 제공하는 단계는 상기 수신된 부가정보에 대응하는 상기 가이드정보를 제공하는 단계를 포함할 수 있다.Here, the generating of the state detection information includes receiving additional information about the user, and the providing of the guide information includes providing the guide information corresponding to the received additional information. can do.
또한, 본 발명의 상기 목적은, 컴퓨터가 읽을 수 있는 코드로서 웨어러블 디바이스의 제어방법을 수행하는 코드를 포함하는 컴퓨터 프로그램이 저장된 기록매체에 있어서, 상기 웨어러블 디바이스의 제어방법은, 적어도 하나의 상황에 대하여 마련되는 사용자의 목표상태에 관한 정보와, 상기 목표상태에 대응하는 가이드정보를 저장하는 단계와; 상기 사용자의 상태를 감지하여 상태감지정보를 생성하는 단계와; 상기 저장된 상기 사용자의 목표상태에 관한 정보와, 상기 생성된 상기 상태감지정보에 기초하여 상기 사용자 상태가 상기 목표상태에 부합하는지 여부를 판단하는 단계와; 및 상기 사용자 상태가 상기 목표상태에 부합하지 않는 경우, 상기 저장된 상기 목표상태에 대응하는 가이드정보를 제공하는 단계를 포함하는 컴퓨터가 읽을 수 있는 프로그램이 기록된 기록매체에 의해서 달성될 수 있다.In addition, the above object of the present invention is a computer program readable by a computer program including a code for performing a control method of a wearable device is stored in a recording medium, wherein the control method of the wearable device, storing information about a user's target state and guide information corresponding to the target state; generating state detection information by sensing the user's state; determining whether the user state matches the target state based on the stored information on the target state of the user and the generated state detection information; and providing guide information corresponding to the stored target state when the user state does not match the target state.
본 발명에 의하면, 사용자의 상태정보와 사용자의 상태가 목표상태에 부합하는지에 대한 판단의 정확도가 향상되어, 사용자를 바람직한 목표상태로 유도할 수 있는 웨어러블 디바이스 및 그 제어방법을 제공할 수 있다.Advantageous Effects of Invention According to the present invention, it is possible to provide a wearable device capable of inducing the user to a desired target state and a method for controlling the same by improving the accuracy of determining whether the user's state information and the user's state match the target state.
도 1은 학습 가이드 시스템에 관한 예시도이다.
도 2는 도 1의 모 디바이스에 관한 블록도이다.
도 3은 도 1의 웨어러블 디바이스에 관한 블록도이다.
도 4 및 도 5는 웨어러블 디바이스에 관한 예시도이다.
도 6 내지 도 9은 웨어러블 디바이스에 의해 진행되는 학습 가이드 프로그램에 관한 예시도이다.
도 10은 웨어러블 디바이스에 저장되는 정보에 관한 예시도이다.
도 11은 사용자의 상태가 목표상태에 부합하는지 여부를 판단하는 과정에 관한 예시도이다.
도 12 내지 도 19는 웨어러블 디바이스의 제어방법에 관한 순서도이다.
도 20 내지 도 23은 웨어러블 디바이스의 제어방법에 관한 예시도이다.
도 24는 웨어러블 디바이스를 포함하는 스마트 네트워크 시스템에 관한 예시도이다.
도 25는 도 24의 웨어러블 디바이스의 제어방법에 관한 순서도이다.
도 26는 도 24의 스마트 네트워크 시스템의 예시도이다.
도 27은 도 26의 스마트 네트워크 시스템의 예시도이다.
도 28은 스마트 네트워크 시스템에 의해 진행되는 행동발달 가이드 프로그램에 관한 예시도이다.
도 29은 스케쥴 기반 분석 과정을 나타내는 순서도이다.
도 30 및 도 31은 도 28의 스마트 네트워크 시스템의 제어방법에 관한 순서도 및 예시도이다.1 is an exemplary diagram of a learning guide system.
FIG. 2 is a block diagram of the parent device of FIG. 1 .
FIG. 3 is a block diagram of the wearable device of FIG. 1 .
4 and 5 are exemplary views of a wearable device.
6 to 9 are exemplary diagrams of a learning guide program performed by a wearable device.
10 is an exemplary diagram of information stored in a wearable device.
11 is an exemplary diagram illustrating a process of determining whether a user's state meets a target state.
12 to 19 are flowcharts related to a control method of a wearable device.
20 to 23 are exemplary diagrams of a control method of a wearable device.
24 is an exemplary diagram of a smart network system including a wearable device.
25 is a flowchart illustrating a method of controlling the wearable device of FIG. 24 .
FIG. 26 is an exemplary diagram of the smart network system of FIG. 24 .
27 is an exemplary diagram of the smart network system of FIG. 26 .
28 is an exemplary diagram of a behavioral development guide program performed by a smart network system.
29 is a flowchart illustrating a schedule-based analysis process.
30 and 31 are flowcharts and exemplary diagrams of a method for controlling the smart network system of FIG. 28 .
이하에서는 첨부도면을 참조하여 본 발명에 대해 상세히 설명한다. 이하 실시예에서는 본 발명의 사상과 직접적인 관련이 있는 구성들에 관해서만 설명하며, 그 외의 구성에 관해서는 설명을 생략한다. 그러나, 본 발명의 사상이 적용된 장치 또는 시스템을 구현함에 있어서, 이와 같이 설명이 생략된 구성이 불필요함을 의미하는 것이 아님을 밝힌다.Hereinafter, the present invention will be described in detail with reference to the accompanying drawings. In the following embodiments, only the components directly related to the spirit of the present invention will be described, and descriptions of other components will be omitted. However, in implementing the device or system to which the spirit of the present invention is applied, it is revealed that this does not mean that the configuration in which the description is omitted is unnecessary.
도 1은 학습 가이드 시스템(100)에 관한 예시도이다. 도 1을 참조하면, 본 실시예에 따른 학습 가이드 시스템(100)은 모 디바이스(110), 웨어러블 디바이스(120), 및 서버(130)로 구성된다. 모 디바이스(110)는 다양한 기능을 수행하는 복수의 어플리케이션을 탑재하고 있으며, 자체적으로 어플리케이션을 실행하여 그에 따른 기능을 수행할 수 있는 스마트 디바이스이다. 예를 들어, 모 디바이스(110)는 스마트폰, 넷북, 태블릿, 노트북 등이 될 수 있다, 다만, 이하에서는 모 디바이스(110)가 스마트폰인 경우를 가정하고 설명한다.1 is an exemplary diagram of a
모 디바이스(110)는 복수의 어플리케이션 중에서 학습 가이드 어플리케이션을 자체적으로 실행하여, 웨어러블 디바이스(120)에서 학습 가이드 프로그램이 진행되게 할 수 있다. 즉, 모 디바이스(110)는 학습 가이드 프로그램의 설정화면을 디스플레이부(115)에 표시하고, 복수의 웨어러블 디바이스 중에서 특정한 웨어러블 디바이스(120)에서 특정한 미션에 대한 학습 가이드 프로그램이 진행되도록 설정할 수 있다.The
여기서, 학습 가이드 프로그램이란, 다양한 상황 속에서 웨어러블 디바이스(120)의 사용자가 달성해야 하는 미션을 제공하고, 미션을 달성할 수 있도록 유도하는 프로그램이다. 구체적으로, 학습 가이드 프로그램의 미션이 시작되면, 웨어러블 디바이스(120)는 사용자의 동작, 움직임 등과 같은 사용자 상태정보를 획득하고, 획득한 사용자 상태정보에 기초하여 사용자가 해당 미션을 제대로 달성하는지를 판단한다. 즉, 웨어러블 디바이스(120)는 사용자 상태정보에 기초하여 웨어러블 디바이스(120)의 사용자의 상태가 해당 미션이 달성된 상태를 나타내는 목표상태에 부합하는지를 판단한다. 만일, 사용자의 상태가 목표상태에 부합하지 않으면, 웨어러블 디바이스(120)는 사용자의 상태가 목표상태에 부합하도록 가이드정보를 제공하며, 사용자의 상태가 목표상태에 부합하면 리워드정보를 제공한다.Here, the learning guide program is a program that provides a mission to be achieved by the user of the
모 디바이스(110)는 웨어러블 디바이스(110)에서 진행되는 학습 가이드 프로그램의 경과를 실시간으로 모니터링할 수 있다. 즉, 모 디바이스(110)는 웨어러블 디바이스(110)의 사용자의 상태가 목표상태에 부합하는지를 실시간으로 확인할 수 있고, 확인 결과에 따라 해당 미션에 대한 학습 가이드 프로그램을 재차 진행할 지, 아니면, 다른 미션에 대한 학습 가이드 프로그램을 진행할 지를 판단할 수 있다.The
웨어러블 디바이스(120)도 모 디바이스(110)와 같이 다양한 기능을 수행하는 복수의 어플리케이션을 탑재하고, 어플리케이션을 자체적으로 실행할 수 있는 스마트 기기이다. 웨어러블 디바이스(120)는 모 디바이스(110)의 제어에 의해 설정된 학습 가이드 프로그램을 진행할 수 있다. 이러한, 웨어러블 디바이스(120)는 스마트워치, 팔찌, 안경, 모자, 마이크로 칩 등과 같이 사용자의 신체에 착용, 부착, 또는 이식이 가능한 스마트 디바이스이다. 따라서, 웨어러블 디바이스(120)가 획득하는 사용자 상태정보에 대한 정확도가 높기 때문에, 이에 기초하여 사용자의 상태가 목표상태에 부합하는지에 대한 판단의 정확도도 높일 수 있는 것이다. 다만, 이하에서는 웨어러블 디바이스(120)가 스마트워치인 경우를 가정하여 설명한다.The
웨어러블 디바이스(120)는 사용자의 상태가 목표상태에 부합하는지에 여부에 따라 가이드정보 또는 리워드정보를 선택적으로 사용자에게 제공할 수 있다. 여기서, 가이드정보는 학습 가이드 프로그램을 통하여 주어진 미션을 사용자가 달성하지 못하여 사용자의 상태가 목표상태에 부합하지 않는 것으로 판단되는 경우에, 사용자의 상태가 목표상태에 부합하도록 도와주기 위한 정보이다. 한편, 리워드정보는 학습 가이드 프로그램을 통하여 주어진 미션을 사용자가 달성하여 사용자의 상태가 목표상태에 부합하는 것으로 판단되는 경우에, 사용자에게 주어지는 보상에 관한 정보이다. 웨어러블 디바이스(120)는 다양한 방법으로 가이드정보와 리워드정보를 사용자에게 제공할 수 있으나, 바람직하게는, 가상 캐릭터를 디스플레이부(125)에 표시하고, 표시된 가상 캐릭터의 동작과 음성으로 가이드정보와 리워드정보를 사용자에게 제공할 수 있다.The
한편, 서버(130)는 학습 가이드 프로그램의 진행 과정에서 필요한 미션에 관한 정보, 미션에 대응하는 목표상태에 관한 정보, 가이드정보, 리워드정보, 캐릭터에 관한정보, 보상 아이템에 관한 정보를 저장할 수 있다. 서버(130)는 모 디바이스(110)나 웨어러블 디바이스(120)의 요청에 따라 이러한 정보를 모 디바이스(110)나 웨어러블 디바이스(120)에 제공할 수 있다. 경우에 따라서, 서버(130)는 웨어러블 디바이스(120)가 획득하는 사용자 상태정보를 수신하여 이를 기초로 사용자의 상태가 목표상태에 부합하는지를 직접 판단할 수 있고, 판단 결과에 따라 가이드정보나 리워드정보를 웨어러블 디바이스(120)로 제공할 수 있다.On the other hand, the
이와 같이, 본 실시예에 따른 학습 가이드 시스템(100)은 학습 가이드 프로그램을 진행하면서, 정확도가 높은 사용자 상태정보에 기초하여 웨어러블 디바이스(120)의 사용자의 상태가 목표상태에 부합하는지를 정확하게 판단할 수 있다. 따라서, 웨어러블 디바이스(120)의 사용자의 상태가 목표상태가 되도록 효과적으로 유도할 수 있다. In this way, the learning
도 2는 도 1의 모 디바이스(110)에 관한 블록도이다. 도 2를 참조하면, 모 디바이스(110)는 디스플레이부(115), 저장부(210), 센서부(220), 통신부(230), 및 제어부(240)를 갖는다. 디스플레이부(115)는 표시 가능하도록 처리된 영상 데이터에 기초하여 영상을 표시하는 LCD, PDP, OLED 등의 패널로 마련된다.FIG. 2 is a block diagram of the
저장부(210)는 다양한 기능을 수행하는 복수의 어플리케이션이나 어플리케이션을 실행하기 위한 데이터를 저장하는 메모리(memory)이다. 이를 위해, 저장부(210)는 HDD, SSD, 메모리 카드, RAM, ROM 등으로 마련된다. 입력부(220)는 음성을 획득하는 음성수신부 및 영상을 획득하는 영상획득부를 갖는다. 음성수신부는 마이크로 마련되며 영상획득부는 카메라로 마련될 수 있다. 통신부(230)는 이동 통신망을 통하여 기지국, 웨어러블 디바이스(120), 서버(130) 중 적어도 하나와 무선 데이터를 송수신하는 이동통신 모듈과, 근거리 통신이 가능한 블루투스 모듈을 갖는다. The
제어부(240)는 모 디바이스(110)의 구성의 동작을 전반적으로 제어하는 프로세서(processor)이다. 예를 들어, 제어부(240)는 저장부(210)에 저장된 학습 가이드 어플리케이션을 실행하여, 특정한 미션에 대한 학습 가이드 프로그램이 웨어러블 디바이스(120)에서 진행되도록 제어할 수 있다. 다만, 모 디바이스(110)의 구성은 도 2에 도시된 바에 한정되지 않으므로, 스마트폰의 일반적인 기능인 전화 통화, 문자메시지 송수신, 채팅메시지 송수신, 이메일 송수신 등과 관련된 기능을 원활하게 수행하기 위해 필요한 구성을 더 포함할 수 있다. 예를 들어, 모 디바이스(110)는 사용자 입력을 수신하는 사용자 인터페이스부(user interface), 모 디바이스(110)의 주변 정보를 감지하는 센서부, 모 디바이스(110)의 각 구성에 전원을 공급하는 배터리, 음향을 출력하는 음향출력부, 진동을 발생시키는 햅팁부 등을 더 포함할 수 있다.The
도 3은 도 1의 웨어러블 디바이스(120)에 관한 블록도이다. 도 3을 참조하면, 웨어러블 디바이스(120)는 입력부(310), 디스플레이부(320), 센서부(330), 제어부(340), 통신부(350), 사용자 인터페이스부(360), 저장부(370), 배터리(380), 및 출력부(390)을 갖는다. 입력부(310)는 마이크와 같이 음성을 획득하는 음성수신부(311)와 카메라와 같이 영상을 획득하는 영상획득부(312)로 마련된다. 디스플레이부(320)는 도 1의 디스플레이부(125)에 대응되며, 표시 가능하도록 처리된 영상 데이터에 기초하여 영상을 표시하는 LCD, OLED, PDP 등의 패널로 마련된다. 센서부(330)는 웨어러블 디바이스(200)의 모션을 감지하는 가속도 센서(332), 자이로스코프(gyroscope) 센서(333)와 같은 6축 센서(331), 폐도미터(335), 심박수 센서(336)로 마련된다. 이 외에도, 센서부(330)는 위치 센서, 혈당 센서나 혈압 센서와 같은 바이오 센서(biosensor), 화학물질을 측정하는 화학 센서, 온도 센서를 더 포함할 수 있다.FIG. 3 is a block diagram of the
제어부(340)는 웨어러블 디바이스(120)의 각 구성의 동작을 전반적으로 제어하는 프로세서(processor)이다. 예를 들어, 제어부(340)는 모 디바이스(110)의 제어에 의해서나 자체적으로 특정 미션에 대한 학습 가이드 프로그램을 실행하고, 센서부(330)를 통하여 사용자 상태정보를 획득한다. 제어부(340)는 획득되는 사용자 상태정보에 기초하여 현재 사용자의 상태가 목표상태에 부합하는지를 판단하고, 판단 결과에 따라 가이드정보나 리워드정보를 출력하도록 디스플레이부(320)나 출력부(390)를 제어한다.The
통신부(350)는 이동 통신망을 통하여 기지국, 모 디바이스(110), 서버(130) 중 적어도 하나와 무선 데이터를 송수신하는 이동통신 모듈과, 근거리 통신이 가능한 블루투스 모듈(351)을 갖는다. 블루투스 모듈(351)은 블루투스 저전력 기술을 사용하여, 모 디바이스(110), 서버(130), 다른 스마트 디바이스와 저전력으로 장시간 데이터를 송수신할 수 있다. 저장부(370)는 복수의 어플리케이션이나 어플리케이션을 실행하기 위한 데이터를 저장하는 메모리(memory)이다. 예를 들어, 저장부(370)는 학습 가이드 어플리케이션을 저장할 뿐만 아니라, 학습 가이드 어플리케이션의 실행에 따라 진행되는 학습 가이드 프로그램의 미션에 관한 정보, 미션에 대응하는 목표상태에 관한 정보, 가이드정보, 및 리워드정보를 저장할 수 있다. 이를 위해, 저장부(210)는 HDD, SSD, 메모리 카드, RAM, ROM 등으로 마련된다.The
배터리(380)는 웨어러블 디바이스(110)의 각 구성에 전원을 공급하며, 충전 등을 위하여 웨어러블 디바이스(110)에 착탈이 가능하게 결합될 수 있다. 출력부(390)는 통화 중인 상대방 음성이나 오디오 데이터를 출력하는 음향출력부(391)와, 사용자가 촉각으로 느낄 수 있는 진동을 발생시키는 햅틱부(392)를 갖는다. 이 외에도, 웨어러블 디바이스(120)는 필요에 따라 다양한 구성을 더 포함할 수 있다.The
도 4 및 도 5는 웨어러블 디바이스(120)에 관한 예시도이다. 도 4를 참조하면, 웨어러블 디바이스(120)는 원형, 다각형 등 다양한 모양의 외형을 형성하는 본체(410)를 포함한다. 본체(410)에는 음성수신부(311), 음향출력부(391), 및 디스플레이부(320)가 마련된다. 경우에 따라서, 웨어러블 디바이스(120)는 본체(410)를 사용자의 손목에 고정하는 밴드부(440)를 포함할 수 있다. 4 and 5 are exemplary views of the
웨어러블 디바이스(120)는 다양한 모드로 실행이 가능한데, 홈 모드에서는 실행 가능한 복수의 어플리케이션을 나타내는 복수의 아이콘(430)을 디스플레이부(320)에 표시하여 홈 화면을 구성할 수 있다. 복수의 아이콘(430)은 원형으로 배열되거나 매트릭스 형태로 배열될 수 있다. 다만, 홈 화면의 종류나 구성에는 제한이 없으므로, 날씨 화면, 시계 화면, 달력 화면 등으로 홈 화면이 구성될 수 있다. 웨어러블 디바이스(120)는 복수의 아이콘(430)을 표시하고 있는 홈 화면에서 복수의 아이콘(430) 중 적어도 하나를 선택하는 사용자 입력이 수신되면, 선택된 아이콘에 대응하는 어플리케이션을 실행한다. 웨어러블 디바이스(120)는 실행된 어플리케이션에 대응하는 동작을 수행하고, 수행되는 동작을 나타내는 화면을 표시한다.The
예를 들어, 도 5를 참조하면, 웨어러블 디바이스(120)는 사용자의 입력에 따라 선택된 아이콘에 대응하는 학습 가이드 어플리케이션을 실행하고, 학습 가이드 어플리케이션에 대응하는 동작을 수행한다. 즉, 웨어러블 디바이스(120)는 학습 가이드 프로그램을 진행한다. 학습 가이드 프로그램은 다양한 상황 속에서 마련되는 특정한 미션에 대해 웨어러블 디바이스(120)의 사용자의 상태정보를 획득하고, 획득된 상태정보에 기초하여 사용자의 상태가 목표상태에 부합하는지를 판단하여, 판단 결과에 따라 가이드정보나 리워드정보를 제공하는 프로그램이다. 특정한 미션에 대한 학습 가이드 프로그램을 진행하기 위해서는, 웨어러블 디바이스(120)의 사용자가 해당 미션에 대해 거부감을 갖지 않도록 환경을 조성할 필요가 있다. 따라서, 사용자가 친밀감을 가질 수 있는 가상 캐릭터(530)를 디스플레이부(320)에 표시할 수 있다. 이러한 가상 캐릭터(530)를 통해 학습 가이드 프로그램을 진행하면서, 적절하게 가이드정보나 리워드정보를 제공하면, 사용자가 미션을 원활하게 수행할 수 있게 된다.For example, referring to FIG. 5 , the
가상 캐릭터(530)의 종류 및 형상에는 제한이 없지만, 웨어러블 디바이스(120)의 사용자가 친밀감과 동질감을 느낄 수 있는 것이 좋다. 예를 들어, 웨어러블 디바이스(120)의 사용자의 사진, 사용자를 닮은 캐리커쳐, 만화, 평소 좋아하는 동물 등을 가상 캐릭터(530)로 구성할 수 있다. 이러한 가상 캐릭터(530)는 웨어러블 디바이스(120)에서 직접 구성할 수 있지만, 모 디바이스(110)나 서버(130)를 통해 제공받을 수도 있다.There is no limitation on the type and shape of the
도 6 내지 도 9은 웨어러블 디바이스(120)에서 진행되는 학습 가이드 프로그램에 관한 예시도이다. 도 6을 참조하면, 학습 가이드 프로그램은 모 디바이스(110)에 의해 시작될 수 있는데, 모 디바이스(110)는 학습 가이드 프로그램을 통해 진행할 수 있는 다양한 상황, 미션, 서브 미션에 관한 목록을 디스플레이부(115)에 표시할 수 있다. 여기서, 상황은 다양한 미션과 서브 미션을 포함하는 상위 카테고리이며, 미션은 특정 상황에서 사용자가 달성해야 하는 구체적인 목표상태를 의미할 수 있다. 서브 미션은 미션의 하위개념으로서 미션보다 좀더 구체적인 목표상태를 의미할 수 있다. 예를 들어, 도 6에 도시된 바와 같이 상황은 '집안'이 될 수 있고, 미션은 '집안'에서 수행할 수 있는 '식사'가 될 수 있고, 서브 미션은 '식사' 미션의 일부 단계인 '식탁에 앉기'가 될 수 있다. 다만, 이러한 구분이 필연적인 것은 아니므로, 모 디바이스(110)는 학습 가이드 프로그램을 통해 진행할 수 있는 목록을 상황, 미션, 서브 미션 중 어느 하나로만 표시할 수 있다. 이하에서는, 설명의 편의를 위해서 상황, 미션, 및 서브 미션은 '미션'으로 통칭하기로 한다.6 to 9 are exemplary diagrams of a learning guide program performed in the
모 디바이스(110)의 사용자가 표시된 목록 중에서 특정한 미션을 선택하면, 모 디바이스(110)는 웨어러블 디바이스(120)에서 해당 미션에 관한 학습 가이드 프로그램이 진행되도록 명령 데이터를 웨어러블 디바이스(120)에 전송한다. 웨어러블 디바이스(120)는 모 디바이스(110)의 명령 데이터에 따라 학습 가이드 어플리케이션을 실행하여, 해당 미션에 대한 학습 가이드 프로그램을 시작한다. 예를 들어, 모 디바이스(110)의 사용자가 '집안'에서 '식사' 중 '식탁에 앉기'(610) 미션을 선택하면, 웨어러블 디바이스(120)는 학습 가이드 어플리케이션을 실행하여 '식탁에 앉기'(610) 미션에 대한 학습 가이드 프로그램을 진행하게 된다.When the user of the
이하에서는, 도 7을 참조하여, '식탁에 앉기'(610) 미션에 대해 사용자의 상태가 목표상태에 부합하지 않는 경우, 웨어러블 디바이스(120)의 동작에 대해 좀더 자세히 설명한다. 웨어러블 디바이스(120)는 '식탁에 앉기'(610) 미션이 진행되면, 목표상태에 대응하는 가이드정보를 사용자에게 제공할 수 있다. 가이드정보는 학습 가이드 프로그램이 진행되는 동안 웨어러블 디바이스(120)의 사용자가 해당 미션을 수행할 수 있도록 적절한 타이밍에 다양한 내용으로 제공될 수 있다. '식탁에 앉기'(610) 미션에 대한 학습 가이드 프로그램이 시작되면, 사용자가 해당 미션에 대한 학습 가이드 프로그램이 시작되었음을 인지할 수 있도록 "식탁에 앉기 미션 시작되었어. 식사 시간이니 의자에 앉자"라는 가이드정보를 제공할 수 있다. 이러한 가이드정보는 '식탁에 앉기'(610) 미션의 목표상태인 '식탁에 앉아 있는 상태'에 대한 것일 수도 있고, 목표상태로 유도하기 위한 것일 수도 있다.Hereinafter, with reference to FIG. 7 , the operation of the
그럼에도 불구하고, 웨어러블 디바이스(120)의 사용자가 해당 미션을 수행하지 않는 경우에는, 경고 차원에서 "그만 놀고, 식사 시간이니 의자에 앉자"라는 가이드정보를 제공할 수 있다. 바람직하게는, 이러한 가이드정보를 가상 캐릭터(530)의 음성과 동작의 애니메이션으로 제공할 수 있다. 예를 들어, 가상 캐릭터(530)가 웨어러블 디바이스(120)의 사용자를 닮은 캐리커쳐인 경우에, 캐릭커쳐가 사용자 자신의 음성을 출력하면서, 식탁 의자에 앉는 애니메이션을 반복적으로 표시되면, 웨어러블 디바이스(120)의 사용자가 좀더 '식탁에 앉기'(610) 미션을 자연스럽게 수행하도록 유도할 수 있는 것이다. Nevertheless, when the user of the
한편, 목표상태에 관한 정보나 가이드정보는 웨어러블 디바이스(120)의 사용자의 성별, 연령, 학습 수준, 장애 여부 등에 따라 적절하게 변경될 수 있다. 예를 들어, 웨어러블 디바이스(120)의 사용자가 휠체어를 타고 이동해야 하는 장애 아동인 경우에는, '식탁에 앉기'(610) 미션에 대한 바람직한 목표상태는 '사용자가 휠체어에 탑승하여 식탁으로 이동한 상태'가 될 수 있다. 따라서, 웨어러블 디바이스(120)는 목표상태에 대응하는 가이드정보로서 "식사 시간이니 휠체어를 타고 식탁으로 이동하자"라는 음성과 가상 캐릭터(530)가 휠체어를 타고 식탁으로 이동하는 애니메이션을 제공할 수 있다. Meanwhile, information on the target state or guide information may be appropriately changed according to the gender, age, learning level, disability, etc. of the user of the
본 실시예에 따른 웨어러블 디바이스(120)는 사용자의 손목에 착용되는 스마트워치이므로, 사용자와 물리적으로 분리되어 있는 다른 스마트 디바이스와 비교해서, 획득하는 사용자 상태정보의 정확도가 높다. 이러한 정확도를 바탕으로, 웨어러블 디바이스(120)는 사용자의 상태가 목표상태에 부합하는지를 정확하게 판단할 수 있는 것이다. 만일, 사용자가 '식탁에 앉기'(610) 미션을 수행하지 않은 결과 사용자의 상태가 목표상태에 부합하지 않는 것으로 판단되면, 웨어러블 디바이스(120)는 사용자의 상태가 목표상태에 부합하도록 가이드정보를 제공한다. 이 때 제공되는 가이드정보는 '식탁에 앉기'(610) 미션 시작 시에 제공되는 가이드정보와 상이하게 제공될 수 있다. 즉, 웨어러블 디바이스(120)는 "식사 시간이니 의자에 앉자"를 좀더 높은 음량으로 제공하거나 강한 어조로 제공할 수 있을 것이다. 또한, 미션 시작 시에 표시되는 가상 캐릭터(530)의 상태와 다른 상태의 가상 캐릭터(730)를 표시할 수도 있다. 여기서, 캐릭터의 상태는 일반 상태와 특별 상태로 구분할 있는데, 일반 상태는 기분 좋음, 우울함, 즐거움 등을 나타내며, 특별 상태는 신남, 기쁨, 화남, 무기력함 등을 나타낸다. 즉, 미션 시작 시에는 일반 상태 중 기분 좋음이나 즐거움을 나타내는 가상 캐릭터(530)를 표시하다가, 사용자의 상태가 목표상태에 부합하지 않는 경우에는, 특별 상태 중 화남이나 무기력함을 나타내는 가상 캐릭터(730)를 표시할 수 있다. 경우에 따라서, 가상 캐릭터(730)의 몸무게나 크기(740)를 나타내는 숫자나 그래프를 단계적으로 줄여서 표시할 수 있다.Since the
이하에서는, 도 8을 참조하여, '식탁에 앉기'(610) 미션에 대해 사용자의 상태가 목표상태에 부합하는 경우, 웨어러블 디바이스(120)의 동작에 대해 좀더 자세히 설명한다. 사용자의 상태가 목표상태에 부합하는 것으로 판단하면, 웨어러블 디바이스(120)는 리워드정보로서 가상 캐릭터(830)의 음성으로 "참 잘했어"를 출력하거나 가상 캐릭터(830)가 특별 상태 중에 신남이나 기쁨을 나타내는 애니메이션을 표시할 수 있다. 경우에 따라서는, 캐릭터(830)의 몸무게나 크기(840)를 나타내는 숫자나 그래프를 조절하여 표시할 수 있다. 만일, 사용자의 상태가 목표상태에 부합하는 횟수가 반복되면, 반복 횟수에 따라 가상 캐릭터(830)의 신남이나 기쁨의 정도에 가중치를 적용하여 단계적으로 표시하거나, 몸무게나 크기(840)를 나타내는 숫자나 그래프에 가중치를 적용하여 단계적으로 표시할 수 있을 것이다.Hereinafter, with reference to FIG. 8 , the operation of the
이와 같이, 웨어러블 디바이스(120)는 사용자의 상태정보에 기초하여 사용자의 상태가 목표상태에 부합하는지에 대한 판단에 따라, 사용자에게 가이드정보나 리워드정보를 제공함으로써, 웨어러블 디바이스(120)의 사용자의 상태가 목표상태에 부합하도록 유도할 수 있다.In this way, the
이하에서는, 도 9를 참조하여, '식탁에 앉기'(610) 미션에 대해 사용자의 상태가 목표상태에 부합하는 경우, 웨어러블 디바이스(120)의 다른 동작에 대해 좀더 자세히 설명한다. 웨어러블 디바이스(120)는 사용자의 상태가 목표상태에 부합하는 것으로 판단하면, 웨어러블 디바이스(120)는 리워드정보(940)로서 가상 캐릭터(530)의 성장에 관한 정보, 아이템에 관한 정보, 및 사용자의 소원에 관한 정보 중 적어도 하나를 제공할 수 있다.Hereinafter, other operations of the
가상 캐릭터(530)의 성장에 관한 정보는 캐릭터의 크기, 형상, 몸무게, 및 성숙도 등을 변경하기 위한 정보이다. 이러한 가상 캐릭터(530)의 성장에 관한 정보는 웨어러블 디바이스(120)의 사용자의 연령, 성별, 성숙도, 성장 속도, 사용자의 상태가 목표상태에 이르는 시간이나 속도, 목표상태에 부합하지 않는다는 내용의 가이드정보를 출력한 횟수 등을 종합적으로 고려하여 단계적으로 구성할 수 있다. The information on the growth of the
아이템에 관한 정보는 가상 캐릭터(530)에 반영하여 표시할 수 있는 아이템에 관한 정보를 의미한다. 아이템은 웨어러블 디바이스(120)의 사용자가 수행하는 미션에 대응하여 제공되는 것이 바람직하다. 예를 들어, '1km 러닝(running)' 미션에 대해 사용자의 상태가 목표상태에 부합하는 경우에는, 트레이닝 복이나 트레이닝 운동화를 가상 캐릭터(530)에 반영하여 표시할 수 있다. 반대의 경우에는, 트레이닝 복이나 트레이닝 운동화를 삭제하고 가상 캐릭터(530)를 표시할 수 있다.The information about the item means information about the item that can be displayed by being reflected in the
사용자의 소원에 관한 정보는 가상 캐릭터(530)와 아이템 이외에 웨어러블 디바이스(120)의 사용자에게 임의적으로 제공 가능한 리워드정보를 의미한다. 이러한 사용자의 소원에 관한 정보는 모 디바이스(110)에서 임의적으로 설정하여 제공하는 것이 바람직하다. 즉, 모 디바이스(110)의 사용자는 웨어러블 디바이스(120)의 사용자의 연령, 성별, 성숙도, 성장 속도 등을 고려하여 가장 적절한 형태의 리워드정보를 설정할 수 있다. 예를 들어, 모 디바이스(110)의 사용자는 '식탁에 앉기'(610) 미션에 대한 사용자의 소원에 관한 정보로서 '물놀이 가기'나 '동물원 가기'와 같이 사용자의 호기심을 자극할 만한 내용을 소원에 관한 정보로 설정할 수 있다. 만일, 사용자의 상태가 목표상태에 부합되면, 설정된 소원에 관한 정보가 쿠폰 형태로 웨어러블 디바이스(120)의 사용자에게 제공될 것이며, 이러한 사실이 모 디바이스(110)에 전송될 것이다.The information about the user's wish means reward information that can be arbitrarily provided to the user of the
도 10은 웨어러블 디바이스(120)에 저장되는 정보에 관한 예시도이다. 웨어러블 디바이스(120)는 다양한 미션에 따른 사용자의 목표상태에 관한 정보, 목표상태에 대응하는 가이드정보, 및 리워드정보를 저장부(370)에 저장할 수 있다. 경우에 따라서, 이러한 정보는 모 디바이스(110)나 서버(130)에 저장된 것이어서 이들로부터 제공된 것일 수 있다.10 is an exemplary diagram of information stored in the
'식탁에 앉기' 미션을 포함하고 있는 '식사' 상황을 예로 들어 설명하면, '식사' 상황은 '식탁에 앉기'(m1), '골고루 먹기'(m2), '집중해서 먹기'(m3), '끝까지 먹기'(m4), '정리하기'(m5), '인사하기'(m5) 미션으로 구성될 수 있다. 이 중에서 '식탁에 앉기'(m1) 미션에 대한 목표상태는 '식탁 의자에 앉아 있는 상태'(t1)가 될 수 있고, 가이드정보는 '식사 시간이니 의자에 앉자'(g1)라는 음성과 가상 캐릭터(530)가 식탁 의자에 앉는 동작을 반복하는 애니메이션이 될 수 있다. 다만, 각 미션에 관한 목표상태에 관한 정보와 가이드정보는 필요에 따라 다양한 종류와 내용으로 설정할 수 있다. 예를 들어, '식탁에 앉기'(m1) 미션에 대해 식탁으로 의자를 옮기는 게임을 수행하게 하여 소정 점수 이상을 획득하도록 목표상태와 가이드정보를 설정할 수 있다.Taking the 'meal' situation including the 'sitting at the table' mission as an example, the 'meal' situation is 'sitting at the table' (m1), 'eating evenly' (m2), 'eating with concentration' (m3). , 'Eat to the end' (m4), 'Organize' (m5), and 'Greetings' (m5) missions. Among them, the target state for the 'sitting at the table' (m1) mission can be 'sit on the table chair' (t1), and the guide information is 'it's time to eat, so let's sit on the chair' (g1) and the virtual It may be an animation in which the
한편, 목표상태에 관한 정보와 가이드정보는 모 디바이스(110)와 인터랙션(interaction)을 통해 설정될 수도 있으므로, 예를 들어, '골고루 먹기'(m2) 미션에 대해, 모 디바이스(110)에서 지정한 다수의 반찬을 소정 횟수 이상 각각 섭취하는 것을 목표상태로 설정하고, 해당 반찬을 골고루 섭취하도록 독려하는 내용을 가이드정보로 설정할 수 있다.On the other hand, since information about the target state and guide information may be set through interaction with the
도 11은 사용자의 상태가 목표상태에 부합하는지 여부를 판단하는 과정에 관한 예시도이다. '식탁에 앉기'(m1) 미션을 예로 들어 설명하면, 웨어러블 디바이스(120)는 센서부(330)를 통해 사용자의 상태정보를 획득하여, 사용자의 상태감지정보를 생성한다. 여기서, 상태감지정보는 사용자의 움직임 정보(a1), 음성 상태 정보(b1), 및 얼굴 상태 정보(c1)로 구성된다. 웨어러블 디바이스(120)는 사용자의 움직임 정보(a1), 음성 상태 정보(b1), 및 얼굴 상태 정보(c1) 중 적어도 하나에 기초하여 사용자의 상태(S1)가 '식탁에 앉기'(m1) 미션의 목표상태인 '식탁 의자에 앉아 있는 상태'(t1)에 부합하는지를 판단한다. 11 is an exemplary diagram illustrating a process of determining whether a user's state meets a target state. Taking the 'sit at the table' (m1) mission as an example, the
구체적으로, 웨어러블 디바이스(120)는 가속도 센서(332), 자이로스코프 센서(333), 페도미터(335) 및 심박수 센서(336) 등을 통해 웨어러블 디바이스(120)의 사용자의 움직임 정보(a1)를 생성하고, 사용자의 움직임 정보(a1)가 제1 상한값보다 크면, 사용자가 여전히 움직이는 것으로 판단할 수 있다. 즉, 웨어러블 디바이스(120)는 사용자의 움직임 정보(a1)가 제1 상한값보다 크면, 사용자의 상태(S1)는 목표상태인 '식탁 의자에 앉아 있는 상태'(t1)에 부합하지 않는 것으로 판단하고, 사용자의 상태가 목표상태(t1)에 부합하도록 독려하는 내용의 가이드정보(g11)를 사용자에게 제공한다. 반면에, 웨어러블 디바이스(120)는 사용자의 움직임 정보(a1)가 제1 상한값보다 작으면, 사용자의 상태는 목표상태(t1)에 부합하는 것으로 판단하고, 사용자를 칭찬하는 내용의 리워드정보(g12)를 제공할 수 있다.Specifically, the
또한, 웨어러블 디바이스(120)는 음성수신부(311)를 통해 수신한 사용자의 음성에 기초하여 사용자의 음성 상태 정보(b1)를 생성하고, 사용자의 음성 상태 정보(b1)가 제2 상한값보다 크면, 사용자의 상태(S1)는 목표상태(t1)에 부합하지 않는 것으로 판단할 수 있다. 예를 들어, 사용자의 음성이 소정 데시벨 이상이면 사용자의 음성 상태 정보(b1)가 제2 상한값보다 크다고 판단하고, 사용자의 상태가 목표상태(t1)에 부합하도록 독려하는 내용의 가이드정보(g11)를 사용자에게 제공한다. 다만, 사용자의 음성 외에 주변 소음에 기초하여 사용자의 상태가 목표상태(t1)에 부합하는지를 판단할 수 있다.In addition, the
또한, 웨어러블 디바이스(120)는 영상획득부(312)를 통해 획득한 사용자의 이미지에 기초하여 사용자의 얼굴 상태 정보(c1)를 생성하고, 사용자의 얼굴 상태 정보(c1)가 제3 상한값보다 크면, 사용자의 상태(S1)는 목표상태(t1)에 부합하지 않는 것으로 판단할 수 있다. 예를 들어, 사용자가 눈을 감고 자고 있는 경우에 사용자의 얼굴 상태 정보(c1)가 제3 상한값보다 크다고 판단하고, 사용자의 상태가 목표상태(t1)에 부합하도록 독려하는 내용의 가이드정보(g11)를 사용자에게 제공한다. 다만, 사용자의 이미지 외에 주변 이미지를 사용하여 사용자의 상태가 목표상태(t1)에 부합하는지를 판단할 수 있다.In addition, the
도 12 내지 도 19는 웨어러블 디바이스(120)의 제어방법에 관한 순서도이다. 도 12를 참조하면, 웨어러블 디바이스(120)는 모 디바이스(110)의 제어에 의하거나 자체적으로 학습 가이드 어플리케이션을 실행하고, 학습 가이드 프로그램을 통해 진행할 다양한 미션을 표시할 수 있다(S1201). 모 디바이스(110)의 제어에 의하거나 자체적으로 특정한 미션이 선택되면, 웨어러블 디바이스(120)는 해당 미션에 대한 학습 가이드 프로그램을 진행한다(S1202). 다만, 복수의 미션을 포함하는 특정한 상황이 선택될 수 있으며, 이 경우, 특정한 상황에 포함되는 복수의 미션에 대한 학습 가이드 프로그램이 순차적으로 진행될 수 있다.12 to 19 are flowcharts of a control method of the
웨어러블 디바이스(120)는 사용자의 상태를 감지할 수 있다(S1203). 특히, 웨어러블 디바이스(120)는 사용자의 신체에 부착, 착용, 또는 이식이 가능하므로, 사용자의 상태를 정확하게 감지할 수 있다. 웨어러블 디바이스(120)는 감지된 사용자의 상태에 기초하여, 사용자가 주어진 미션을 수행하는지 여부를 판단한다(S1204). 사용자의 상태의 정확도가 높으므로, 사용자의 미션 수행 여부에 대한 판단의 정확도도 높아지게 된다. 웨어러블 디바이스(120)는 판단 결과에 따라 가이드정보나 리워드정보를 사용자에게 제공한다(S1205). 따라서, 웨어러블 디바이스(120)는 사용자가 미션을 수행할 수 있도록 효과적으로 유도할 수 있다.The
도 13을 참조하면, 웨어러블 디바이스(120)는 미션에 대한 목표상태 정보와 목표상태에 대응하는 가이드정보를 저장부(370)에 저장한다(S1301). 웨어러블 디바이스(120)는 센서부(330)를 통하여 사용자의 상태를 감지하여 상태감지정보를 생성한다(S1302). 웨어러블 디바이스(120)는 저장부(370)에 저장된 목표상태 정보와 센서부(330)에 의해 생성된 상태감지정보를 비교하여, 목표상태와 사용자의 상태가 상호 부합하는지를 판단할 수 있다(S1303). 만일, 목표상태와 사용자 상태가 부합하지 않으면, 웨어러블 디바이스(120)는 저장부(370)에 저장된 목표상태에 대응하는 가이드정보를 사용자에게 제공한다(S1304).Referring to FIG. 13 , the
한편, 이러한 웨어러블 디바이스(120)의 제어방법은, 컴퓨터가 읽을 수 있는 기록매체로 구현될 수 있다. 구체적으로, 적어도 하나의 상황에 대하여 마련되는 사용자의 목표상태에 관한 정보와, 이러한 목표상태에 대응하는 가이드정보를 저장하는 단계, 사용자의 상태를 감지하여 상태감지정보를 생성하는 단계, 저장된 상기 사용자의 목표상태에 관한 정보 및 생성된 상기 상태감지정보에 기초하여 사용자 상태가 목표상태에 부합하는지 여부를 판단하는 단계, 및 사용자 상태가 목표상태에 부합하지 않는 경우, 저장된 목표상태에 대응하는 가이드정보를 제공하는 단계를 포함하는 웨어러블 디바이스(120)의 제어방법을 수행하는 프로그램이 저장된 기록매체로 구현이 가능하다.Meanwhile, the control method of the
도 14를 참조하면, 웨어러블 디바이스(120)는 다양한 미션에 대한 목표상태 정보 및 목표상태에 대응하는 가이드정보를 저장할 수 있다(S1401). 여기서, 가이드정보는 리워드정보를 포함할 수 있다. 웨어러블 디바이스(120)는 가이드정보를 사용자에게 미리 제공한다(S1402). 이로써, 사용자가 주어진 미션을 수행할 수 있는 준비를 할 수 있게 한다. 웨어러블 디바이스(120)는 센서부(330)를 통하여 사용자의 상태를 감지하여 상태감지정보를 생성한다(S1403). 웨어러블 디바이스(120)는 저장부(370)에 저장된 목표상태 정보와 센서부(330)에 의해 생성된 상태감지정보를 비교한다(S1404). 웨어러블 디바이스(120)는 비교결과에 기초하여, 사용자의 상태가 목표상태에 부합하는지를 판단할 수 있다(S1405). Referring to FIG. 14 , the
만일, 목표상태와 사용자 상태가 부합하지 않으면, 웨어러블 디바이스(120)는 가이드정보를 재차 제공한다(S1406). 반면에, 그렇지 않으면, 웨어러블 디바이스(120)는 완료상태에 대응하는 가이드정보, 즉, 리워드정보를 제공한다(S1407).If the target state and the user state do not match, the
도 15에서 도 14과 중복되는 내용은 생략한다. 도 15를 참조하면, 웨어러블 디바이스(120)는 목표상태와 사용자 상태가 부합하지 않는 경우에는, 음성수신부(311)를 통하여 사용자의 음성을 수신하고(S1505), 수신된 사용자의 음성을 반영하여 가이드정보를 제공한다(S1506). 다만, 목표상태와 사용자 상태가 부합하지 않는 경우에만 사용자의 음성을 수신하는 것에 한정되지 않으므로, 미션 수행 전에 사용자의 음성을 수신하거나 미션 수행 과정 중 적절한 시기에 사용자의 음성을 수신할 수 있다. 이와 같이, 가이드정보에 사용자의 음성을 반영하여 제공하면, 미션에 대해 거부감이 줄어들어 사용자가 자연스럽게 미션을 수행하도록 유도할 수 있다. In FIG. 15, content overlapping with FIG. 14 will be omitted. Referring to FIG. 15 , when the target state and the user state do not match, the
도 16에서 도 14와 중복되는 내용은 생략한다. 도 16을 참조하면, 웨어러블 디바이스(120)는 목표상태와 사용자 상태가 부합하지 않으면, 영상획득부(312)를 통하여 사용자의 이미지를 촬상하고(S1604), 촬상된 사용자의 이미지를 가이드정보에 반영하여 사용자에게 제공한다(S1605). 다만, 목표상태와 사용자 상태가 부합하지 않는 경우에만 사용자의 이미지를 촬상하는 것에 한정되지 않으므로, 미션 수행 전에 사용자의 이미지를 촬상하거나 미션 수행 과정 중 적절한 시기에 사용자의 이미지를 촬상할 수 있다. 이와 같이, 가이드정보에 사용자의 이미지를 반영하여 제공하면, 미션에 대해 거부감이 줄어들어 사용자가 자연스럽게 미션을 수행하도록 유도할 수 있다. In FIG. 16, the content overlapping with FIG. 14 will be omitted. Referring to FIG. 16 , if the target state and the user state do not match, the
도 17에서 도 14과 중복되는 설명은 생략한다. 도 17을 참조하면, 웨어러블 디바이스(120)는 목표상태와 사용자 상태가 부합하지 않으면, 생성된 상태감지정보에 기초하여 사용자의 동작 패턴을 결정하고(S1704), 결정된 동작 패턴을 목표상태에 대응하는 가이드정보에 반영한다(S1705).In FIG. 17, a description overlapping with FIG. 14 will be omitted. Referring to FIG. 17 , if the target state and the user state do not match, the
예를 들어, '골고루 먹기'(m2) 미션에 학습 가이드 프로그램이 진행되고 있는 경우에, 웨어러블 디바이스(120)의 사용자가 특정 반찬만을 가져오는 동작을 반복하여 목표상태에 부합하지 않는 것으로 판단되면, 웨어러블 디바이스(120)는 가이드정보로서 특정 반찬만을 섭취한다는 내용의 음성을 출력하거나 특정 반찬만을 섭취하는 가상 캐릭터를 애니메이션으로 표시할 수 있다. 이렇게, 사용자의 동작 패턴을 가이드정보에 반영하여 제공하면, 사용자가 자신의 행동을 직접 확인하게 되고, 자발적으로 미션을 수행하도록 유도할 수 있게 된다.For example, when the learning guide program is in progress in the 'Eat evenly' (m2) mission, if it is determined that the user of the
도 18을 참조하면, 웨어러블 디바이스(120)는 학습 가이드 프로그램으로 진행할 수 있는 다양한 미션에 대한 목표상태 정보, 목표상태에 대응하는 가이드정보, 및 리워드정보를 저장한다(S1801). 웨어러블 디바이스(120)는 학습 가이드 프로그램이 시작되면, 미션에 관한 목표상태에 대응하는 가이드정보를 사용자에게 제공한다(S1802). 경우에 따라서, 웨어러블 디바이스(120)는 가이드정보와 함께 리워드정보를 사용자에게 제공하여 사용자의 자발적인 참여를 유도할 수 있다. 웨어러블 디바이스(120)는 사용자의 상태를 감지하여 상태감지정보를 생성한다(S1803). 웨어러블 디바이스(120)는 저장된 목표상태 정보와 생성된 상태감지정보를 비교하여(S1804), 목표상태와 사용자 상태가 상호 부합하는지를 판단할 수 있다(S1805).Referring to FIG. 18 , the
만일, 목표상태와 사용자 상태가 부합하지 않으면, 웨어러블 디바이스(120)는 사용자가 미션을 다시 수행할 수 있도록 가이드정보를 재차 제공한다(S1806). 반면에, 목표상태와 사용자 상태가 부합하면, 웨어러블 디바이스(120)는 리워드정보를 사용자에게 제공한다(S1807).If the target state and the user state do not match, the
도 19를 참조하면, 웨어러블 디바이스(120)는 주어진 미션에 관한 학습 가이드 프로그램을 진행하고, 사용자의 동작을 감지한다(S1901). 웨어러블 디바이스(120)는 감지된 사용자의 동작에 기초하여 사용자의 운동량, 활동량, 식습관, 잠습관 등을 분석할 수 있다(S1902). 여기서, 분석 대상은 미션에 따라 달라진다. 예를 들어, 운동 미션이 진행되면, 사용자의 운동량이나 활동량이 분석 대상이 되고, 식사 미션이 진행되면, 식습관이나 식사량이 분석 대상이 된다. 웨어러블 디바이스(120)는 분석 대상을 분석하여 사용자의 성장량을 추출한다(S1903). 웨어러블 디바이스(120)는 캐릭터의 성장 팩터를 결정한다(S1904). 여기서, 캐릭터의 성장 팩터란, 추출된 성장량을 가상 캐릭터(530)에 반영하기 위해 사용되는 캐릭터의 속성을 의미한다. 캐릭터의 속성은 가상 캐릭터(530)의 형상, 크기, 표정, 아이템 중 적어도 하나를 포함할 수 있다. 또한, 캐릭터의 성장 팩터는 친밀성, 사회성 등의 추상적 개념도 포함할 수 있는데, 캐릭터의 성장 팩터가 추상적 개념인 경우에는 숫자나 그래프로 구체화하여 표시할 수 있을 것이다. 웨어러블 디바이스(120)는 추출된 성장량에 따라 캐릭터의 성장 팩터를 변경한다(S1905). 예를 들어, '1km 러닝' 미션을 수행하면, 웨어러블 디바이스(120)는 캐릭터의 성장 팩터 중 하나인 외형적 크기가 증가된 가상 캐릭터(830)을 표시할 수 있다. 경우에 따라서, 웨어러블 디바이스(120)는 성장량에 따른 보상을 제공할 수 있다(S1906). 보상은 다양한 내용과 종류의 리워드정보로서 제공될 수 있다.Referring to FIG. 19 , the
특히, 웨어러블 디바이스(120)는 성장량 추이에 따른 가이드정보를 제공할 수 있다(S1907). 성장량 추이에 따른 가이드정보는 학습 가이드 프로그램의 미션을 달성하도록 사용자를 유도하는 가이드정보와는 다르다. 즉, 성장량 추이에 따른 가이드정보는 사용자가 미션을 수행한 경우에, 미션을 수행하기까지의 시간이나 속도 등을 고려하여, 차후 진행되는 미션에 대한 조언을 포함할 수 있다. 예를 들어, '1km 러닝' 미션을 수행하기까지의 시간이나 속도 등이 예전보다 지연되는 경우에는 "과도한 운동을 삼가하세요"라는 가이드정보를 음성으로 출력하거나 지친 표정을 하고 있는 가상 캐릭터(530)를 표시할 수 있다. In particular, the
도 20 내지 도 23은 웨어러블 디바이스(120)의 제어방법에 관한 예시도이다. 도 20을 참조하면, 모 디바이스(110)는 학습 가이드 어플케이션을 실행하고, 복수의 미션 중에서 특정한 미션을 선택하여 웨어러블 디바이스(120)로 전송한다(S2001). 웨어러블 디바이스(120)는 전송된 미션에 대한 학습 가이드 프로그램을 진행하고, 획득된 사용자 상태정보에 기초하여 사용자가 해당 미션을 완료하는지를 판단한다(S2002). 웨어러블 디바이스(120)는 사용자가 해당 미션을 완료하는지에 따라 가상 캐릭터(530)를 변경하고(S2004), 변경된 가상 캐릭터(740, 840)을 모 디바이스(110)에 전송한다(S2004).20 to 23 are exemplary diagrams of a control method of the
도 21에서 도 20과 중복되는 설명은 생략한다. 도 21을 참조하면, 웨어러블 디바이스(120)은 사용자가 미션을 완료한 것으로 판단하면, 이에 대한 보상으로 서버(130)에 아이템을 요청한다(S2103). 여기서, 서버에 요청하는 아이템은 완료된 미션과 관련된 것일 수 있다. 서버(130)는 웨어러블 디바이스(120)에 아이템을 전송하여(S2104), 가상 캐릭터(530)에 아이템을 반영할 수 있도록 한다(S2105).In FIG. 21 , a description overlapping with FIG. 20 will be omitted. Referring to FIG. 21 , when it is determined that the user has completed the mission, the
도 22에서 도 20과 중복되는 설명은 생략한다. 도 22를 참조하면, 웨어러블 디바이스(120)는 사용자가 미션을 완료한 것으로 판단하면(S2202), 모 디바이스(110)으로 미션이 완료되었음을 알린다(S2203). 이에 대한 보상으로 웨어러블 디바이스(120)로 아이템을 제공해 달라고 모 디바이스(110)가 서버(130)에 요청하면(S2204), 서버(130)는 아이템을 웨어러블 디바이스(120)에 전송한다(S2205).In FIG. 22, a description overlapping with FIG. 20 will be omitted. Referring to FIG. 22 , when it is determined that the user has completed the mission ( S2202 ), the
도 23을 참조하면, 모 디바이스(110)는 학습 가이드 어플리케이션을 실행하고, 복수의 미션 중에서 특정한 미션을 선택하고, 선택된 미션과 관련된 데이터를 서버(130)에 요청할 수 있다(S2301). 서버(130)는 모 디바이스(110)에 의해 선택된 학습 가이드 프로그램의 미션과 관련된 데이터를 웨어러블 디바이스(120)에 제공할 수 있다(S2302).Referring to FIG. 23 , the
도 24은 웨어러블 디바이스(120)를 포함하는 스마트 네트워크 시스템(2400)에 관한 예시도이다. 도 24를 참조하면, 스마트 네트워크 시스템(2400)은 네트워크를 통하여 복수의 스마트 디바이스 간에 사물 인터넷 환경을 제공하기 위한 시스템이며, 복수의 스마트 디바이스 및 스마트 게이트웨이(180)로 구성된다.24 is an exemplary diagram of a
스마트 디바이스들은 스마트 가전기기(Smart Appliance), 보안기기(security devices), 조명기구(Lighting devices), 에너지기기(Energy devices), 및 의료기기(Medical devices) 등을 포함할 수 있다. 스마트 가전기기는 PC, 카메라, 전화, TV, 에어컨, 로봇 청소기, 가습기, 전동 칫솔 등이 될 수 있으며, 보안기기는 도어락, 보안 카메라, CCTV(Closed Circuit Television), 보안 센서 등이 될 수 있고, 조명기구는 LED(Light Emitting Diode), 램프 등이 될 수 있고, 에너지기기는 난방기기, 전력측정기, 전력 소켓, 전기 콘센트, 멀티탭 등이 될 수 있고, 의료기기는 혈압계, 혈당계, 부하심전도계, 체온계, 체중계 등이 될 수 있다.Smart devices may include smart appliances, security devices, lighting devices, energy devices, and medical devices. Smart home appliances can be PCs, cameras, telephones, TVs, air conditioners, robot cleaners, humidifiers, electric toothbrushes, etc., and security devices can be door locks, security cameras, CCTV (Closed Circuit Television), security sensors, etc. Lighting equipment may be LED (Light Emitting Diode), lamp, etc., energy equipment may be a heating device, power meter, power socket, electrical outlet, multi-tap, etc., and medical equipment may be a blood pressure monitor, blood glucose meter, load electrocardiometer, It can be a thermometer, a weight scale, etc.
이러한 스마트 디바이스들은 유무선 통신 방식에 따라 스마트 게이트웨이(180)와 통신이 가능하며, 스마트 게이트웨이(180)로부터 제어 명령을 수신하여 제어 명령에 따라 동작하고, 스마트 게이트웨이(180)로부터 요구된 정보나 데이터를 스마트 게이트웨이(180)에게 전송할 수 있다. 스마트 게이트웨이(180)는 독립적인 장치로 구현되거나 혹은 스마트 게이트웨이(180) 기능을 구비하는 장치로서 구현될 수 있다. 예를 들어, 스마트 게이트웨이(180)는 PC, 카메라, 전화, TV 등으로 구현될 수 있다. 즉, 스마트 네트워크 시스템(2400)에서는 모든 형태의 스마트 디바이스들을 하나의 네트워크로 연결하여 통제할 수 있다.These smart devices can communicate with the
따라서, 웨어러블 디바이스(120)는 스마트 게이트웨이(180)를 통하여 다른 스마트 디바이스와 원격 접속하거나 다른 스마트 디바이스와 직접 접속하여 상호 데이터를 교환할 수 있다. 상호 교환 가능한 데이터에는 제한이 없으므로, 웨어러블 디바이스(120)는 다른 스마트 디바이스로부터 사용자의 상태에 관한 부가정보를 수신할 수 있다. 여기서, 사용자의 상태에 관한 부가정보란, 웨어러블 디바이스(120)가 사용자의 상태감지정보를 생성하기 위하여 다른 스마트 디바이스로부터 수신하는 정보를 의미한다. 예를 들어, 스마트 센서(153)는 사용자의 위치 및 동작을 감지할 수 있는 스마트 디바이스인데, 웨어러블 디바이스(120)에서 '식탁에 앉기' 미션에 대한 학습 가이드 프로그램이 진행되고 있을 때, 웨어러블 디바이스(120)는 스마트 센서(153)에 접속하여, 웨어러블 디바이스(120)의 사용자가 '식탁에 앉기' 미션을 수행할 수 있는 식당에 있는지, 아니면 식당 이외의 위치에 있는지에 관한 부가정보를 수신할 수 있다. 이 외에도, 웨어러블 디바이스(120)는 가속도 센서가 부착된 스마트 포크(151)로부터 사용자의 식사 동작에 관한 부가정보를 수신하거나 무게 센서가 부착된 스마트 그릇(152)으로부터 사용자의 식사량에 관한 부가정보를 수신할 수 있다. 웨어러블 디바이스(120)는 다수의 스마트 디바이스로부터 부가정보를 수신하여, 사용자의 상태가 목표상태에 부합하는지를 판단하고 판단 결과에 따라 가이드정보나 리워드정보를 제공할 수 있다.Accordingly, the
이와 같이, 웨어러블 디바이스(120)를 포함하는 스마트 네트워크 시스템(2400)을 사용하면, 사용자의 상태정보의 정확도가 높아질 뿐만 아니라, 사용자의 상태가 목표상태에 부합하는지 여부에 대한 판단의 정확도도 비약적으로 향상된다. 따라서, 웨어러블 디바이스(120)는 이렇게 향상된 정확도를 바탕으로 웨어러블 디바이스(120)의 사용자가 좀더 효과적으로 미션을 수행할 수 있도록 유도할 수 있다.As such, when the
도 25는 도 24의 웨어러블 디바이스(120)의 제어방법에 관한 순서도이다. 웨어러블 디바이스(120)는 학습 가이드 프로그램으로 진행할 수 있는 미션에 대한 목표상태에 관한 정보 및 목표상태에 대응하는 가이드정보를 저장한다(S2501). 웨어러블 디바이스(120)은 스스로 사용자의 상태를 감지할 뿐만 아니라 다른 스마트 디바이스로부터 사용자의 상태에 관한 부가정보를 수신한다(S2502). 웨어러블 디바이스(120)는 이에 기초하여 사용자의 상태감지정보를 생성한다(S2503). 웨어러블 디바이스(120)는 미션의 목표상태에 관한 정보와 생성된 상태감지정보를 비교하여, 목표상태와 사용자의 상태가 상호 부합하는지를 판단할 수 있다(S2504). 만일, 목표상태와 사용자의 상태가 상호 부합하는 것으로 판단되면, 웨어러블 디바이스(120)는 가이드정보를 제공할 수 있다(S2505).25 is a flowchart of a control method of the
도 26은 도 24의 스마트 네트워크 시스템(2400)의 예시도이다. 도 26의 스마트 네트워크 시스템(2600)은 도 24의 스마트 네트워크 시스템(2400)과 같이 모 디바이스(110), 웨어러블 디바이스(120), 및 복수의 스마트 디바이스 간에 사물 인터넷 환경을 제공한다. 여기서, 복수의 스마트 디바이스는 스마트 포크(151)와 같은 스마트 식사도구, 스마트 체온계(154)와 같은 의료기기, 스마트 안경(155)과 같은 생활도구를 포함할 수 있다.FIG. 26 is an exemplary diagram of the
웨어러블 디바이스(120)는 복수의 스마트 디바이스와 사물 인터넷 환경을 구성하기 위한 아이콘(560)을 표시할 수 있다. 즉, 해당 아이콘(560)이 선택되면, 웨어러블 디바이스(120)는 통신 가능한 거리 내에 있는, 스마트 포크(151), 스마트 체온계(154), 스마트 안경(155)와 같은 스마트 디바이스와 데이터 통신이 가능하도록 설정된다. 이러한 설정은, 웨어러블 디바이스(120)에서 자체적으로 가능하지만, 모 디바이스(110)에서도 웨어러블 디바이스(120)와 복수의 스마트 디바이스 간에 사물 인터넷 환경을 구성하도록 제어가 가능하다. 모 디바이스(110)에서 웨어러블 디바이스(120)와 복수의 스마트 디바이스 간에 사물 인터넷 환경을 구성하도록 제어하는 경우에는, 사물 인터넷 환경의 구성 과정을 나타내는 정보(2660)를 모 디바이스(120)에 표시할 수 있다.The
사물 인터넷 환경이 구성되면, 웨어러블 디바이스(120)는 스마트 디바이스로부터 스마트 디바이스에 관한 정보를 수신한다. 여기서, 스마트 디바이스에 관한 정보는 스마트 디바이스의 명칭, 형상, 기능, 통신 방식 등에 관한 정보일 수 있다. 웨어러블 디바이스(120)는 스마트 디바이스에 관한 정보에 기초하여 사물 인터넷 환경 내에 있는 스마트 디바이스를 나타내는 아이콘을 디스플레이부(320)에 표시할 수 있다. 이로써, 현재 사물 인터넷 환경 내에서 웨어러블 디바이스(120)와 데이터 통신이 가능한 스마트 디바이스를 사용자가 확인할 수 있게 한다. 웨어러블 디바이스(120)와 데이터 통신이 가능한 스마트 디바이스에 관한 정보는 모 디바이스(110)에 제공될 수 있다.When the Internet of Things environment is configured, the
이렇게, 사물 인터넷 환경 내에 있는 스마트 디바이스가 확인되면, 웨어러블 디바이스(120)를 통해 수행할 수 있는 미션을 선택하기가 쉬워진다. 예를 들어, 사물 인터넷 환경 내에 스마트 포크(151)가 있다는 것이 확인되면, 모 디바이스(110)의 사용자는 스마트 포크(151)를 사용하여 진행할 수 있는 '골고루 먹기' 미션을 선택할 수 있게 된다.In this way, when a smart device in the Internet of Things environment is identified, it becomes easier to select a mission that can be performed through the
사물 인터넷 환경 내에서 웨어러블 디바이스(120)의 사용자가 스마트 포크(151)를 들고 사용하면, 스마트 포크(151)에 대응하는 아이템(550)이 웨어러블 디바이스(120)에 표시되고, 동일한 아이템(2650)이 모 디바이스(110)에도 표시된다. 이 경우, 웨어러블 디바이스(120)는 스마트 포크(151)로부터 사용자 상태정보를 자동적으로 수신할 수 있도록 설정할 수 있다. 다만, 사용자의 선택에 따라 특정한 스마트 디바이스로부터 사용자 상태정보를 수신하는 것도 가능하다. 이 경우에는 선택된 스마트 디바이스에 대응하는 아이템이 웨어러블 디바이스(120)나 모 디바이스(110)에 표시될 것이다.When the user of the
도 27은 도 26의 스마트 네트워크 시스템(2600)의 예시도이다. 도 27을 참조하면, 웨어러블 디바이스(120)는 스마트 네트워크 시스템(2600) 내에 있는 스마트 체온계(154)에 연결하여 사용자의 체온 정보를 수신할 수 있다. 웨어러블 디바이스(120)는 수신한 체온 정보를 UI(570)로 디스플레이부(320)에 표시할 수 있고, 모 디바이스(110)도 웨어러블 디바이스(120)를 통하여 획득한 체온 정보를 UI(2770)로 디스플레이부(115)에 표시할 수 있다. 이 경우, 웨어러블 디바이스(120)는 측정된 체온이 특정 온도 이하인 경우에는 웨어러블 디바이스(120)에만 UI(570)를 표시하여 웨어러블 디바이스(120)의 사용자가 스스로 적절한 조치를 할 수 있도록 가이드정보를 제공할 수 있고, 특정 온도 이상인 경우에만 모 디바이스(110)나 외부 의료기관에 체온 정보를 알리도록 설정할 수 있다.FIG. 27 is an exemplary diagram of the
한편, 웨어러블 디바이스(120)는 체온 정보와 같은 건강 정보뿐만 아니라 웨어러블 디바이스(120)의 환경 정보도 획득할 수 있다. 여기서, 환경 정보는 사용자에게 직간접으로 영향을 주는 자연적 조건으로서 기온, 습도, 풍향, 자외선, 미세먼지 등에 관한 정보일 수 있다. 웨어러블 디바이스(120)는 사용자의 건강 정보와 환경 정보에 기초하여 적절한 가이드정보를 제공할 수 있다. 예를 들어, 웨어러블 디바이스(120)는 획득되는 체온 정보에 기초하여 사용자가 감기나 폐렴 등에 걸렸는지를 판단하고, 환경 정보에 기초하여 현재 공기 오염상태를 판단하여, 웨어러블 디바이스(120)의 사용자에게 외출을 자제하거나 "오늘은 먼지가 많아! 마스크를 착용했니"와 같이 마스크를 착용할 것을 독려하는 가이드정보를 제공할 수 있다. 또한, 웨어러블 디바이스(120)는 모 디바이스(110)의 사용자가 적절한 조치를 취할 수 있도록 가이드정보(2780)를 모 디바이스(110)에 제공할 수 있다.Meanwhile, the
경우에 따라서, 사물 인터넷 환경 내에 복수의 스마트 디바이스가 있는 경우에 웨어러블 디바이스(120)는 우선순위가 높은 스마트 디바이스로부터 사용자 건강정보를 수신할 수 있다. 이러한 우선순위는 웨어러블 디바이스(120)의 사용자의 심박수, 심전도, 장애 여부, 심장 질환과 같은 병력, 스트레스 지수와 같은 질병 진단 지수 등 사용자의 건강상태에 따라 결정될 수 있다. 사용자의 건강상태에 관한 정보는 모 디바이스(110)나 웨어러블 디바이스(120)를 통해 입력될 수 있고, 외부 의료기관이나 진료기관과 연동되는 서버(130)로부터 제공받을 수도 있다. 예를 들어, 웨어러블 디바이스(120)의 사용자가 심장 질환을 앓은 적이 있다는 병력이 저장되어 있는 경우에, 웨어러블 디바이스(120)의 사용자는 심장 질환 위험군으로 분류되고, 복수의 스마트 디바이스 중에서 심장 질환과 관계되는 스마트 심전도계나 심박수계로부터 우선적으로 사용자 건강정보를 수신할 수 있다.In some cases, when there are a plurality of smart devices in the Internet of Things environment, the
도 28은 스마트 네트워크 시스템(2800)에 의해 진행되는 행동발달 가이드 프로그램에 관한 예시도이다. 본 실시예에 따른 스마트 네트워크 시스템(2800)은 도 24의 스마트 네트워크 시스템(2400)과 같은 소단위 네트워크 시스템들을 네트워크를 통해 연결하여, 대단위 스마트 네트워크 시스템으로 구성될 수 있다. 예를 들어, 도 24의 스마트 네트워크 시스템(2400)는 가정집의 홈 네트워크 시스템이나 사무실의 오피스 네트워크 시스템으로 각각 구성될 수 있지만, 본 실시예에 따른 스마트 네트워크 시스템(2800)는 홈 네트워크 시스템과 오피스 네트워크 시스템을 통합할 수 있다. 다만, 도 28에서는 설명의 편의를 위해, 오피스 네트워크 시스템을 유치원이나 어린이집과 같은 교육기관 네트워크 시스템으로 가정하여 설명한다.28 is an exemplary diagram of a behavioral development guide program performed by the
스마트 네트워크 시스템(2800)은 웨어러블 디바이스(120)의 사용자의 행동발달 가이드 프로그램을 진행할 수 있다. 행동발달 가이드 프로그램이란, 특정한 미션에 대해 사용자의 상태가 목표상태에 부합하는지를 판단하는 것뿐만 아니라, 사용자의 성별, 연령, 학습 수준, 장애 여부 등에 따른 사용자의 행동발달 상태가 각 행동발달 단계의 목표상태에 부합하는지를 판단하고, 사용자의 상태가 각 행동발달 단계의 목표상태에 대응하는 가이드정보를 제공하는 프로그램이다. 이를 위해, 서버(130)는 행동발달 단계 별로 목표상태에 관한 정보와 목표상태에 대응하는 가이드정보를 미리 저장할 수 있다. 여기서, 가이드정보는 웨어러블 디바이스(120)의 사용자의 행동발달 상태가 행동발달 단계의 목표상태에 부합하지 않는 경우에, 목표상태에 부합하도록 사용자를 유도하기 위한 정보를 의미한다.The
행동발달 가이드 프로그램이 진행되면, 웨어러블 디바이스(120)는 사용자 상태정보이나 부가정보를 획득하고 사용자의 상태를 모니터링한다. 여기서, 사용자 상태정보는 웨어러블 디바이스(120)에 의해 획득되며, 부가정보는 웨어러블 디바이스(120) 이외에 스마트 네트워크 시스템(2700) 내의 스마트 디바이스에 의해 획득된다. 웨어러블 디바이스(120)는 사용자의 기본 상태정보에 기초하여 사용자 상태정보 및 부가정보를 획득할 수 있다. 여기서, 기본 상태정보란 웨어러블 디바이스(120)의 사용자가 속한 교육기관이나 가정 내의 스마트 디바이스에 의해 수집되는 정보 이외에 임의적으로 입력되는 정보를 의미한다. 예를 들어, 웨어러블 디바이스(120)의 사용자가 유아인 경우에, 유치원 시간표, 놀이 시간, 독서 시간, 식단, 신체 정보 등이 기본 상태정보에 포함될 수 있다. 또한, 외부 진료기관이나 상담기관이 제공하는 유아의 건강 검진 정보, 진료 기록, 상담 이력 정보 등이 기본 상태정보에 포함될 수 있으며, 서버(130)가 제공하는 사용자의 이전 상태정보도 포함될 수 있다.When the behavioral development guide program is in progress, the
웨어러블 디바이스(120)는 이러한 기본 상태정보에 기초하여 특정한 상태정보 및 부가정보를 획득할 수 있다. 예를 들어, 사용자가 자주 넘어진다는 기본 상태정보가 입력되면, 웨어러블 디바이스(120)는 심박수 센서(336)보다는 가속도 센서(332)나 자이로스코프(gyroscope) 센서(333)를 통해 사용자 상태정보나 부가정보를 획득할 수 있다.The
웨어러블 디바이스(120)는 사용자 상태정보나 부가정보에 기초하여 웨어러블 디바이스(120)의 사용자의 행동을 모니터링하고 모니터링 결과를 서버(130)에 제공한다. 서버(130)는 모니터링 결과를 가정, 교육기관, 외부 진료기관, 상담기관과 같은 소단위 스마트 네트워크 시스템에도 제공할 수 있다.The
경우에 따라서, 웨어러블 디바이스(120)는 서버(130)에 관심 정보를 제공할 수 있다. 관심 정보는 사용자 상태정보나 부가정보 중에서 미리 지정한 사용자의 특이한 행동이나 상태에 관한 정보이다. 예를 들어, 웨어러블 디바이스(120)의 사용자가 자주 넘어지는 경우에, 넘어지는 행동이나 넘어진 상태에 관한 정보가 관심 정보가 될 수 있다.In some cases, the
서버(130)는 모니터링 결과와 관심 정보에 기초하여 웨어러블 디바이스(120)의 사용자의 행동발달 상태를 분석한다. 특히, 서버(130)는 사용자의 행동발달 상태를 분석하기 위해서, 스케쥴 기반 분석, 행동 기반 분석, 및 동일 집단 비교 분석을 수행할 수 있다. 스케쥴 기반 분석이란, 사전에 입력된 스케쥴 정보에 기초하여, 스케쥴 대로 웨어러블 디바이스(120)의 사용자가 행동을 하는지를 분석하는 기법이다. 여기서, 도 29을 참조하여, 스케쥴 기반 분석 과정에 대한 좀더 자세하게 설명한다.The
도 29는 스케쥴 기반 분석 과정을 나타내는 순서도이다. 도 29를 참조하면, 웨어러블 디바이스(120)의 사용자에 대한 스케쥴 정보를 저장한다(S2901). 예를 들어, 사용자가 유아인 경우에, 유치원 시간표, 놀이 시간, 독서 시간 등이 스케쥴 정보가 될 수 있다. 서버(130)는 스케쥴 정보와 사용자의 상태정보를 비교한다(S2902). 여기서, 서버(130)는 스케쥴 정보와 사용자의 상태정보를 수치화하여 상호 비교할 수 있게 할 수 있다. 29 is a flowchart illustrating a schedule-based analysis process. Referring to FIG. 29 , schedule information for a user of the
서버(130)는 비교 결과에 기초하여 사용자의 상태가 스케쥴에 부합하는지를 판단한다(S2903). 판단 결과에 따라 해당 스케쥴 정보 및 사용자의 상태정보를 특이 사항으로 저장할 수 있다(S2904). 예를 들어, 서버(130)는 스케쥴 정보와 상태정보를 비교하여, 웨어러블 디바이스(120)의 사용자가 유치원에서 율동 시간에 율동을 하는지, 식사 시간에 식사를 하는지, 독서 시간에 독서를 하는지를 판단할 수 있다. 율동 시간에 사용자가 율동을 하는 것으로 판단되지만, 식사 시간에 식사를 하거나, 독서 시간에 독서를 하지 않는 것으로 판단되면, 서버(130)는 식사 시간과 독서 시간에 사용자의 상태정보를 특이 사항으로 저장할 수 있다. 경우에 따라서, 이러한 특이 사항은 가정의 모 디바이스(110)에 제공될 수 있다. The
이러한 스케쥴 기반 분석 과정은 이하에서 설명되는 행동 기반 분석이나 동일 집단 비교 분석에 적용될 수 있다. 즉, 서버(130)는 웨어러블 디바이스(120)의 사용자의 음성이나 움직임에 특이한 변화가 있는지를 확인하고 이상이 있는지를 분석할 수 있다. 이를 위해, 서버(130)는 웨어러블 디바이스(120)의 행동에 관한 정보를 저장하고 있으며, 행동 정보와 사용자 상태정보의 비교를 통해, 사용자의 상태에 이상이 있는지를 판단할 수 있다. 여기서, 서버(130)는 행동 정보를 사용자의 상태정보와 비교할 수 있도록 수치화할 수 있다. 비교 결과, 웨어러블 디바이스(120)의 사용자에게 이상이 있는 것으로 판단되면, 해당 행동 정보를 특이 사항으로 저장할 수 있다. 예를 들어, 서버(130)는 낙상에 대한 행동 정보를 저장할 수 있기 때문에, 웨어러블 디바이스(120)의 사용자가 낙상한 상태인지를 판단할 수 있다. 다만, 행동 기반 분석은 단발성 행동을 배제하기 위해 주간이나 월간 단위로 행동의 추이를 누적하여 분석하는 것이 바람직하다.This schedule-based analysis process may be applied to the behavior-based analysis described below or the same-group comparison analysis. That is, the
동일 집단 비교 분석이란, 웨어러블 디바이스(120)의 사용자와 동일한 상황에 있는 또래의 행동과 비교하는 기법이다. 예를 들어, 서버(130)는 유치원에서 같은 커리큘럼에 따라 수업을 받는 친구들의 상태정보나 부가정보를 동일 집단 정보로 저장하고, 이러한 동일 집단 정보에 웨어러블 디바이스(120)의 사용자의 상태정보가 부합하는지를 판단한다. 만일, 상태정보나 부가정보가 친구들의 그것의 평균과 과도하게 차이나는 경우에, 서버(130)는 이를 특이 사항으로 저장한다.The same-group comparison analysis is a technique of comparing the behavior of the user of the
다시, 도 28을 참조하면, 서버(130)는 스케쥴 기반 분석, 행동 기반 분석, 및 동일 집단 비교 분석을 통한 분석 결과에 따라 사용자의 행동발달 상태가 행동발달 단계 별로 목표상태에 부합하는지를 판단하고, 판단 결과에 따라 적절한 가이드정보를 제공할 수 있다. 즉, 서버(130)는 행동발달 상태 판단 결과와 함께 웨어러블 디바이스(120)의 사용자의 행동발달 상태가 목표상태에 부합되도록 유도하는 가이드정보를 웨어러블 디바이스(120), 가정의 모 디바이스(110), 및 교육기관의 모 디바이스(111))에 각각 제공할 수 있다. 예를 들어, 행동발달 상태 판단 결과로서, 사용자의 활동성에 문제가 있다면, 서버(130)는 가정의 모 디바이스(110)에는 가정에서 사용자와 함께 부모가 진행할 수 있는 가이드정보를 제공하고, 교육기관의 모 디바이스(111)에는 교육기관에서 선생님의 지도하에 사용자가 진행할 수 있는 가이드정보를 제공할 수 있다. 필요한 경우에, 서버(130)가 이러한 가이드정보를 다른 서버로부터 다운로드하여 제공할 수 있다.Again, referring to FIG. 28, the
한편, 서버(130)는 외부 전문 진료기관이나 상담기관에 행동발달 상태 판단 결과를 제공하고 전문적 가이드정보를 요청할 수 있다. 서버(130)는 이들로부터 전문적 가이드정보를 수신하고, 이를 웨어러블 디바이스(120), 가정의 모 디바이스(110), 및 교육기관의 모 디바이스(111)에 각각 제공할 수 있다.Meanwhile, the
이와 같이, 본 실시예에 따른 스마트 디바이스 시스템(2800)은 웨어러블 디바이스(120)를 통하여 정확도가 높은 상태정보 및 부가정보를 획득하여 서버(130)에 제공할 수 있고, 서버(130)를 통하여 사용자의 행동발달 상태를 정확하게 판단함으로써, 사용자의 행동발달 상태가 적절한 단계에 이르도록 종합적인 가이드를 제공할 수 있다.As described above, the
도 30 및 도 31은 도 28의 스마트 네트워크 시스템(2800)의 제어방법에 관한 순서도 및 예시도이다. 도 30을 참조하면, 스마트 네트워크 시스템(2800)은 웨어러블 디바이스(120)의 사용자의 행동발달 가이드 프로그램을 진행할 수 있다(S3001). 행동발달 가이드 프로그램은 이에 대응하는 어플리케이션을 탑재하고 있는 모 디바이스(110, 111)나 웨어러블 디바이스(120)에 의해 실행될 수 있다. 웨어러블 디바이스(120)는 사용자의 기본 상태정보를 수신하고(S3002), 이에 기초하여 사용자 상태정보나 부가정보를 획득한다(S3003). 웨어러블 디바이스(120)는 획득한 사용자 상태정보 및 부가정보에 기초하여 사용자 행동을 모니터링하고, 모니터링 결과와 특이한 행동에 관한 관심 정보를 서버(130)에 제공한다(S3004). 서버(130)는 모니터링 결과와 관심 정보에 기초하여 웨어러블 디바이스(120)의 사용자의 행동발달 상태를 분석한다(S3005). 여기서, 스케쥴 기반 분석, 행동 기반 분석, 및 동일 집단 비교 분석이 사용될 수 있다. 서버(130)는 분석 결과에 따라 웨어러블 디바이스(120)의 사용자의 행동발달 상태가 행동발달 단계 별로 목표상태에 부합하는지를 판단한다(S3006). 서버(130)는 판단 결과에 따라 가이드정보를 제공할 수 있는데, 바람직하게는, 외부 전문 진료기관이나 상담기관으로부터 전문적 가이드정보를 수신하고(S3007), 이를 웨어러블 디바이스(120), 가정의 모 디바이스(110), 및 교육기관의 모 디바이스(111)에 각각 제공할 수 있다(S3008).30 and 31 are flowcharts and exemplary diagrams of a control method of the
도 31을 참조하면, 도 28의 스마트 네트워크 시스템(2800)의 웨어러블 디바이스(120)는 사용자의 행동발달 가이드 프로그램이 진행되면, 사용자의 기본 상태정보를 가정, 교육기관, 외부 진료기관, 상담기관, 및 서버(130)로부터 수신할 수 있다(S3101), 여기서, 서버(130)가 제공하는 기본 상태정보에는 웨어러블 디바이스(120)의 사용자의 이전 상태정보나 이상행동 정보를 포함할 수 있다. 웨어러블 디바이스(120)는 이러한 기본 상태정보에 기초하여 웨어러블 디바이스(120)의 사용자의 행동을 모니터링한다(S3102). 웨어러블 디바이스(120)가 모니터링 결과를 서버(130)에 제공하면(S3103), 서버(130)는 이를 가정, 교육기관, 외부 진료기관, 및 상담기관에 제공할 수 있다(S3104). 경우에 따라서, 웨어러블 디바이스(120)는 사용자의 특이 사항과 같은 관심 정보도 모니터링할 수 있다. 여기서, 웨어러블 디바이스(120)는 센서부에 의해 감지되는 충격에 기초하여 사용자의 운동량이나 충격량의 피크값을 산출하고, 산출된 피크값이 소정 범위 내에 있는지를 모니터링 할 수 있는데, 이러한 피크값이 소정 범위를 벗어나는 경우에 이를 관심 정보로 모니터링하는 것이다. 경우에 따라서, 웨어러블 디바이스(120)는 산출된 피크값의 추이에 따라 소정 범위를 유동적으로 조절할 수도 있다.Referring to FIG. 31 , the
이러한 관심 정보가 웨어러블 디바이스(120)로부터 수신되면(S3105), 서버(130)는 모니터링 결과와 관심 정보에 기초하여 웨어러블 디바이스(120)의 사용자의 행동발달 상태를 분석 및 판단한다(S3106). 서버(130)는 판단 결과에 따라 외부 전문 진료기관이나 상담기관에 전문적 가이드정보를 요청한다(S3107). 외부 전문 진료기관이나 상담기관으로부터 전문적 가이드정보를 수신하면(S3108), 서버(130)는 이를 웨어러블 디바이스(120), 가정의 모 디바이스(110), 및 교육기관의 모 디바이스(111)에 각각 제공할 수 있다(S3109). 필요한 경우에, 서버(130)가 이러한 가이드정보를 다른 서버로부터 다운로드하여 제공할 수 있다.When such interest information is received from the wearable device 120 (S3105), the
이상, 바람직한 실시예를 통하여 본 발명에 관하여 상세히 설명하였으나, 본 발명은 이에 한정되는 것은 아니며 특허청구범위 내에서 다양하게 실시될 수 있다.As mentioned above, although the present invention has been described in detail through preferred embodiments, the present invention is not limited thereto and may be variously practiced within the scope of the claims.
모 디바이스: 110
웨어러블 디바이스: 120
서버: 130Parent device: 110
Wearable devices: 120
Server: 130
Claims (21)
적어도 하나의 상황에 대하여 마련되는 사용자의 목표상태에 관한 정보와, 상기 목표상태에 대응하는 가이드정보 및 상기 목표상태에 대응하는 리워드에 관한 정보를 저장하는 저장부;
상기 사용자의 상태를 감지하여 상태감지정보를 생성하는 센서부;
영상의 표시가 가능한 디스플레이부;
상기 사용자의 이미지를 촬상하는 영상획득부; 및
상기 저장부에 저장된 상기 사용자의 목표상태에 관한 정보와, 상기 센서부에 의해 생성된 상기 상태감지정보에 기초하여 상기 사용자 상태가 상기 목표상태에 부합하는지 여부를 판단하고,
상기 사용자 상태가 상기 목표상태에 부합하지 않는 경우, 상기 저장부에 저장된 상기 목표상태에 대응하는 가이드정보를 식별하고, 상기 식별된 가이드정보에 대응하는 캐릭터를 상기 영상획득부를 통해 촬상된 상기 사용자의 이미지를 반영하여 표시하도록 상기 디스플레이부를 제어하고,
상기 사용자 상태가 상기 목표상태에 부합하는 경우, 상기 리워드에 관한 정보를 제공하는 제어부;
를 포함하는 웨어러블 디바이스.In a wearable device that can be worn on a user's body,
a storage unit for storing information about a user's target state provided for at least one situation, guide information corresponding to the target state, and information about a reward corresponding to the target state;
a sensor unit that detects the user's state and generates state detection information;
a display unit capable of displaying an image;
an image acquisition unit for capturing an image of the user; and
Determining whether the user's state matches the target state based on the information about the user's target state stored in the storage unit and the state detection information generated by the sensor unit,
When the user state does not match the target state, guide information corresponding to the target state stored in the storage unit is identified, and a character corresponding to the identified guide information is captured by the user through the image acquisition unit. Controls the display unit to reflect and display the image,
a control unit providing information about the reward when the user state matches the target state;
A wearable device comprising a.
음성 출력이 가능한 음성출력부를 더 포함하고,
상기 제어부는 상기 가이드정보에 대응하는 음성을 출력하도록 상기 음성출력부를 제어하는 웨어러블 디바이스. According to claim 1,
Further comprising an audio output unit capable of audio output,
The control unit is a wearable device for controlling the voice output unit to output a voice corresponding to the guide information.
상기 사용자의 음성을 수신하는 음성수신부를 포함하고,
상기 제어부는 상기 음성수신부를 통해 수신한 상기 사용자의 음성을 반영하여 상기 가이드정보에 대응하는 음성을 출력하도록 상기 음성출력부를 제어하는 웨어러블 디바이스. 3. The method of claim 2,
Comprising a voice receiver for receiving the user's voice,
The control unit is a wearable device for controlling the voice output unit to output the voice corresponding to the guide information by reflecting the user's voice received through the voice receiving unit.
상기 리워드에 관한 정보는 상기 캐릭터의 성장에 관한 정보 및 상기 사용자의 소원에 관한 정보 중 적어도 하나를 포함하는 웨어러블 디바이스.According to claim 1,
The information about the reward is a wearable device including at least one of information about the growth of the character and information about the user's wishes.
상기 캐릭터의 성장에 관한 정보는 상기 캐릭터의 단계별 성장에 관한 정보를 포함하는 웨어러블 디바이스.8. The method of claim 7,
The information on the growth of the character is a wearable device including information on the step-by-step growth of the character.
상기 제어부는 복수의 상기 상태감지정보에 기초하여 상기 사용자의 동작 패턴을 결정하고, 상기 결정된 동작 패턴에 대응하는 상기 가이드정보를 제공하는 웨어러블 디바이스.According to claim 1,
The control unit determines the user's operation pattern based on a plurality of the state detection information, and provides the guide information corresponding to the determined operation pattern.
상기 사용자에 관한 부가정보를 수신하는 통신부를 더 포함하고,
상기 제어부는 상기 수신된 부가정보에 대응하는 상기 가이드정보를 제공하는 웨어러블 디바이스.According to claim 1,
Further comprising a communication unit for receiving additional information about the user,
The control unit is a wearable device that provides the guide information corresponding to the received additional information.
적어도 하나의 상황에 대하여 마련되는 사용자의 목표상태에 관한 정보와, 상기 목표상태에 대응하는 가이드정보 및 상기 목표상태에 대응하는 리워드에 관한 정보를 저장하는 단계;
상기 사용자의 상태를 감지하여 상태감지정보를 생성하는 단계;
상기 사용자의 이미지를 촬상하는 단계;
상기 저장된 상기 사용자의 목표상태에 관한 정보와, 상기 생성된 상기 상태감지정보에 기초하여 상기 사용자 상태가 상기 목표상태에 부합하는지 여부를 판단하는 단계;
상기 사용자 상태가 상기 목표상태에 부합하지 않는 경우, 상기 저장된 상기 목표상태에 대응하는 가이드정보를 식별하는 단계;
상기 식별된 가이드정보에 대응하는 캐릭터를 상기 촬상된 사용자의 이미지를 반영하여 표시하는 단계; 및
상기 사용자 상태가 상기 목표상태에 부합하는 경우, 상기 리워드에 관한 정보를 제공하는 단계;
를 포함하는 웨어러블 디바이스의 제어방법.In the control method of a wearable device that can be worn on a user's body,
storing information about a user's target state prepared for at least one situation, guide information corresponding to the target state, and information about a reward corresponding to the target state;
generating state detection information by detecting the user's state;
taking an image of the user;
determining whether the user state matches the target state based on the stored information on the target state of the user and the generated state detection information;
when the user state does not match the target state, identifying the stored guide information corresponding to the target state;
displaying a character corresponding to the identified guide information by reflecting the captured image of the user; and
providing information about the reward when the user state matches the target state;
A control method of a wearable device comprising a.
상기 가이드정보를 제공하는 단계는 상기 가이드정보에 대응하는 음성을 출력하는 단계를 포함하는 웨어러블 디바이스의 제어방법. 12. The method of claim 11,
The step of providing the guide information includes outputting a voice corresponding to the guide information.
상기 음성을 출력하는 단계는,
상기 사용자의 음성을 수신하는 단계, 및
상기 수신한 상기 사용자의 음성을 반영하여 상기 가이드정보에 대응하는 음성을 출력하는 단계
를 포함하는 웨어러블 디바이스의 제어방법. 13. The method of claim 12,
The step of outputting the voice is
receiving the user's voice; and
outputting a voice corresponding to the guide information by reflecting the received voice of the user
A control method of a wearable device comprising a.
상기 리워드에 관한 정보는 상기 캐릭터의 성장에 관한 정보 및 상기 사용자의 소원에 관한 정보 중 적어도 하나를 포함하는 웨어러블 디바이스의 제어방법.12. The method of claim 11,
The information on the reward is a control method of a wearable device including at least one of information about the growth of the character and information about the user's wishes.
상기 캐릭터의 성장에 관한 정보는 상기 캐릭터의 단계별 성장에 관한 정보를 포함하는 웨어러블 디바이스의 제어방법.18. The method of claim 17,
The information on the growth of the character is a control method of a wearable device including information on the step-by-step growth of the character.
상기 가이드정보를 제공하는 단계는,
복수의 상기 상태감지정보에 기초하여 상기 사용자의 동작 패턴을 결정하는 단계, 및
상기 결정된 동작 패턴에 대응하는 상기 가이드정보를 제공하는 단계
를 포함하는 웨어러블 디바이스의 제어방법.12. The method of claim 11,
The step of providing the guide information includes:
determining an operation pattern of the user based on a plurality of the state detection information; and
providing the guide information corresponding to the determined operation pattern;
A control method of a wearable device comprising a.
상기 상태감지정보를 생성하는 단계는 상기 사용자에 관한 부가정보를 수신하는 단계를 포함하고,
상기 가이드정보를 제공하는 단계에서는 상기 수신된 부가정보에 대응하는 상기 가이드정보를 제공하는 것을 특징으로 하는 웨어러블 디바이스의 제어방법.12. The method of claim 11,
The generating of the state detection information includes receiving additional information about the user,
In the providing of the guide information, the control method of a wearable device, characterized in that providing the guide information corresponding to the received additional information.
상기 웨어러블 디바이스의 제어방법은,
적어도 하나의 상황에 대하여 마련되는 사용자의 목표상태에 관한 정보와, 상기 목표상태에 대응하는 가이드정보 및 상기 목표상태에 대응하는 리워드에 관한 정보를 저장하는 단계;
상기 사용자의 상태를 감지하여 상태감지정보를 생성하는 단계;
상기 사용자의 이미지를 촬상하는 단계;
상기 저장된 상기 사용자의 목표상태에 관한 정보와, 상기 생성된 상기 상태감지정보에 기초하여 상기 사용자 상태가 상기 목표상태에 부합하는지 여부를 판단하는 단계; 및
상기 사용자 상태가 상기 목표상태에 부합하지 않는 경우, 상기 저장된 상기 목표상태에 대응하는 가이드정보를 식별하는 단계;
상기 식별된 가이드정보에 대응하는 캐릭터를 상기 촬상된 사용자의 이미지를 반영하여 표시하는 단계; 및
상기 사용자 상태가 상기 목표상태에 부합하는 경우, 상기 리워드에 관한 정보를 제공하는 단계;
를 포함하는 컴퓨터가 읽을 수 있는 프로그램이 기록된 기록매체.In the computer-readable recording medium recording a program for performing a control method of a wearable device,
The control method of the wearable device,
storing information about a user's target state prepared for at least one situation, guide information corresponding to the target state, and information about a reward corresponding to the target state;
generating state detection information by detecting the user's state;
taking an image of the user;
determining whether the user state matches the target state based on the stored information on the target state of the user and the generated state detection information; and
when the user state does not match the target state, identifying the stored guide information corresponding to the target state;
displaying a character corresponding to the identified guide information by reflecting the captured image of the user; and
providing information about the reward when the user state matches the target state;
A computer-readable recording medium containing a program recorded thereon.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/KR2016/011461 WO2017090887A1 (en) | 2015-11-25 | 2016-10-13 | Wearable device and control method for wearable device |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020150165846 | 2015-11-25 | ||
KR20150165846 | 2015-11-25 | ||
KR1020160050165A KR20170061051A (en) | 2015-11-25 | 2016-04-25 | Wearable device and control method thereof |
KR1020160050165 | 2016-04-25 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20170061059A KR20170061059A (en) | 2017-06-02 |
KR102464925B1 true KR102464925B1 (en) | 2022-11-09 |
Family
ID=59222471
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020160120637A KR102464925B1 (en) | 2015-11-25 | 2016-09-21 | Wearable device and control method thereof |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102464925B1 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20230419353A1 (en) * | 2020-08-19 | 2023-12-28 | A. Kyung Jang | Habit-Forming Software and Device Operating Method Therefor |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014500740A (en) * | 2010-11-01 | 2014-01-16 | ナイキ インターナショナル リミテッド | Wearable device assembly with athletic function |
JP5714855B2 (en) * | 2010-09-16 | 2015-05-07 | オリンパス株式会社 | Image generation system, program, and information storage medium |
-
2016
- 2016-09-21 KR KR1020160120637A patent/KR102464925B1/en active IP Right Grant
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5714855B2 (en) * | 2010-09-16 | 2015-05-07 | オリンパス株式会社 | Image generation system, program, and information storage medium |
JP2014500740A (en) * | 2010-11-01 | 2014-01-16 | ナイキ インターナショナル リミテッド | Wearable device assembly with athletic function |
Also Published As
Publication number | Publication date |
---|---|
KR20170061059A (en) | 2017-06-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111936036B (en) | Using biometric sensor data to detect neurological status to guide in-situ entertainment | |
Neff et al. | Self-tracking | |
CN105094343B (en) | A kind of virtual robot system and its interference method for promoting user's physical and mental health | |
US20170031449A1 (en) | Wearable device | |
Stephanidis et al. | Human factors in ambient intelligence environments | |
CN109599161A (en) | Body movement and body-building monitor | |
US20140085077A1 (en) | Sedentary activity management method and apparatus using data from a data-capable band for managing health and wellness | |
KR102326694B1 (en) | Dementia patient training system applying interactive technology | |
CN107000210A (en) | Apparatus and method for providing lasting partner device | |
Berger et al. | The stories people tell about the home through IoT toolkits | |
Rajanna et al. | Step up life: a context aware health assistant | |
KR20220062197A (en) | Cognitive function assessment system and method of assessing cognitive funtion | |
Calvo et al. | Introduction to affective computing | |
JP2021177347A (en) | Virtual disease experience system, virtual disease experience method, and program | |
JP6920731B2 (en) | Sleep improvement system, terminal device and sleep improvement method | |
KR102464925B1 (en) | Wearable device and control method thereof | |
Aladwan et al. | A tale of two perspectives: A conceptual framework of user expectations and experiences of instructional fitness apps | |
KR20200032927A (en) | Method and apparatus for improving mental condition | |
Diana | My robot gets me: how social design can make new products more human | |
Krietemeyer et al. | A shared realities workflow for interactive design using virtual reality and three-dimensional depth sensing | |
Brotman et al. | Building change: Constructive design of smart domestic environments for goal achievement | |
Martindale et al. | " Proof in the Pudding" Designing IoT Plants to Promote Wellbeing | |
Novak et al. | A pilot study for utilizing additive manufacturing and responsive rewards in physical activity gamification | |
KR20170061051A (en) | Wearable device and control method thereof | |
KR20180130903A (en) | Interactive Smart Toy and Service Syetem thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right |