WO2020197250A1 - 사용자의 측두근을 모니터링하는 안경 및 컴퓨터 프로그램 - Google Patents

사용자의 측두근을 모니터링하는 안경 및 컴퓨터 프로그램 Download PDF

Info

Publication number
WO2020197250A1
WO2020197250A1 PCT/KR2020/004026 KR2020004026W WO2020197250A1 WO 2020197250 A1 WO2020197250 A1 WO 2020197250A1 KR 2020004026 W KR2020004026 W KR 2020004026W WO 2020197250 A1 WO2020197250 A1 WO 2020197250A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
user
sensor unit
sensing data
detachable module
Prior art date
Application number
PCT/KR2020/004026
Other languages
English (en)
French (fr)
Inventor
박태수
Original Assignee
박태수
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 박태수 filed Critical 박태수
Publication of WO2020197250A1 publication Critical patent/WO2020197250A1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/45—For evaluating or diagnosing the musculoskeletal system or teeth
    • A61B5/4519—Muscles
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/22—Ergometry; Measuring muscular strength or the force of a muscular blow
    • A61B5/224—Measuring muscular strength
    • A61B5/228—Measuring muscular strength of masticatory organs, e.g. detecting dental force
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6802—Sensor mounted on worn items
    • A61B5/6803—Head-worn items, e.g. helmets, masks, headphones or goggles
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02—Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0219—Inertial sensors, e.g. accelerometers, gyroscopes, tilt switches

Definitions

  • the present disclosure relates to glasses and a computer program that monitors the user's temporal muscles, and more particularly, to glasses and a computer program that monitors the user's temporal muscles through a sensor provided in an attaching/detaching module of the glasses.
  • eating habits related to mastication are closely related to not only dental health but also digestive function. Specifically, it is very important to intake food at an appropriate number of chewing because alpha amylase is not secreted unless the mastication exercise is done correctly, and the above functions can be performed smoothly only when food is chopped.
  • ferrotin secreted from the salivary glands produces an anti-aging effect that strengthens bone and tooth tissue.
  • the amount of ferrotin secreted increases as the number of mastications of food increases.
  • Korean Patent Application Publication No. 10-2017-0026915 exists as a prior art document.
  • the present disclosure has been conceived in response to the above-described background technology, and an object of the present disclosure is to provide glasses and a computer program for monitoring a user's temporal muscles through a sensor provided in an attaching/detaching module of the glasses.
  • glasses for monitoring a user's temporal muscles include: a lens frame; A first temple and a second temple rotatably connected to both sides of the lens frame by hinges; And a first detachable module attached to and detached from one end of the first temple. A second detachable module attached to and detached from one end of the second temple; A first sensor unit provided on a first side of the first detachable module in contact with the user's temporal muscles to obtain first sensing data; And a second sensor unit provided on a second side facing the first side of the first attaching/detaching module without contacting the temporal muscle to obtain second sensing data.
  • the glasses may further include a controller configured to generate change amount data based on the first sensing data and the second sensing data.
  • the controller calculates a first sum value obtained by summing the first X-axis data, the first Y-axis data, and the first Z-axis data included in the first sensing data, and includes the second sensing data.
  • the glasses further include a memory for storing authoring threshold data for acquiring authoring exercise data, wherein the control unit may obtain authoring exercise data based on the change amount data and the authoring threshold data.
  • each of the first sensor unit and the second sensor unit measures a moving direction, a moving distance, and a speed related to linear motion of each of the X, Y, and Z axes, and the first sensing data and the second Sensing data can be acquired.
  • each of the first sensor unit and the second sensor unit further measures an angular velocity related to a rotational motion of the X axis, the Y axis, and the Z axis, and the first sensing data and the second sensing data Can be obtained.
  • each of the first sensor unit and the second sensor unit further measures the magnitude and direction of a magnetic field corresponding to each of the X axis, the Y axis, and the Z axis, so that the first sensing data and the second Sensing data can be acquired.
  • the glasses may include: a third sensor unit provided on a third side of the second detachable module in contact with the user's temporal muscle to obtain third sensing data; And a fourth sensor unit provided on a fourth side facing the third side of the second attaching and detaching module without contacting the temporal muscle to obtain fourth sensing data.
  • the controller generates eating habit information based on the authoring exercise data, and controls the communication unit to transmit the eating habit information to a user terminal, and the eating habit information includes at least one of authoring speed, authoring number, and authoring intensity.
  • the eating habit information includes at least one of authoring speed, authoring number, and authoring intensity.
  • the memory further stores recommended eating habit information, and the recommended eating habit information may include at least one of a recommended writing speed, a recommended writing number, and a recommended writing strength.
  • the glasses include an output unit that is in close contact with a region of the rear of the auricle of the user's ear while each of the first temple and the second temple is over both ears of the user and transmits an acoustic signal to the user;
  • the control unit calculates comparison data by comparing the eating habit information and the recommended eating habit information, based on the comparison data, determines whether to output the sound signal, and according to whether the sound signal is output,
  • the output unit may be controlled to output the sound signal.
  • the glasses may include: a communication unit configured to transmit the first sensing data and the second sensing data to a user terminal and to receive a feedback signal corresponding to the sensing data from the user terminal; And an output unit that transmits an acoustic signal to the user based on the feedback signal received from the user terminal.
  • a computer program stored in a computer-readable storage medium includes instructions for causing a user terminal to perform the following operations, and the operations include: receiving first sensing data and second sensing data from a wearable device worn by the user; And generating change amount data based on the first sensing data and the second sensing data, wherein the first sensing data comprises: a first attaching/detaching module in contact with the user's temporal muscle in the wearable device.
  • the first sensing data comprises: a first attaching/detaching module in contact with the user's temporal muscle in the wearable device.
  • Data obtained by a first sensor unit provided on a side of the first side, and the second sensing data is a second sensor provided on a second side facing the first side without contacting the user's temporal muscle in the wearable device It may be additionally acquired data.
  • the generating of the change amount data may include calculating a first sum value obtained by summing the first X-axis data, the first Y-axis data, and the first Z-axis data included in the first sensing data; Calculating a second sum value obtained by summing the second X-axis data, the second Y-axis data, and the second Z-axis data included in the second sensing data; And generating the change amount data based on the first sum value and the second sum value, wherein the change amount data is an absolute value of a result of subtracting the second sum value from the first sum value.
  • the operations may further include acquiring authoring exercise data based on the change amount data and authoring threshold data pre-stored in the memory of the user terminal.
  • the operations may include generating dietary habit information based on the authored exercise data; And outputting the eating habit information on a screen, wherein the eating habit information may include at least one of a writing speed, a writing frequency, and a writing intensity.
  • the operations may include calculating comparison data by comparing the eating habit information and recommended eating habit information previously stored in a memory of the user terminal; Determining whether to transmit a feedback signal based on the comparison data; And transmitting the feedback signal to the wearable device so that an acoustic signal corresponding to the feedback signal is output from the wearable device according to whether the feedback signal is transmitted.
  • the recommended eating habit information may include at least one of a recommended writing speed, a recommended writing number, and a recommended writing strength.
  • a user's temporal muscle is monitored through a sensor provided in an attaching/detaching module of the glasses to recognize a mastication movement, and feedback based on the recognized mastication movement may be provided.
  • FIG. 1 is a block diagram of a detachable module included in glasses for monitoring a user's temporal muscles according to some embodiments of the present disclosure.
  • FIG. 2 is a conceptual diagram as viewed from one direction of an example of glasses for monitoring a user's temporal muscle to which a detachable module is coupled according to some embodiments of the present disclosure.
  • FIG 3 is a view for explaining an example in which the temple of the glasses and the detachable module for monitoring a user's temporal muscles are separated according to some embodiments of the present disclosure.
  • FIG. 4 is a flowchart illustrating an example of a method of obtaining mastication exercise data based on variance data and mastication threshold data by glasses for monitoring a user's temporal muscles according to some embodiments of the present disclosure.
  • FIG. 5 is a flowchart illustrating an example of a method of outputting an acoustic signal based on eating habit information by glasses for monitoring a user's temporal muscles, according to some embodiments of the present disclosure.
  • FIG. 6 is a flowchart illustrating an example of a method of obtaining, by a user terminal, authoring exercise data based on change amount data and authoring threshold data according to some embodiments of the present disclosure.
  • FIG. 7 is a flowchart illustrating an example of a method for a user terminal to transmit a feedback signal to a wearable device according to some embodiments of the present disclosure.
  • FIG. 8 is a view for explaining a position of a sensor unit provided in an attaching/detaching module of glasses for monitoring a user's temporal muscle according to some embodiments of the present disclosure.
  • FIG. 9 is a diagram for describing an example in which a sensor unit recognizes a mastication motion as a user's temporal muscle relaxes and contracts according to some embodiments of the present disclosure.
  • FIG. 10 is a diagram for describing an example of change amount data according to some embodiments of the present disclosure.
  • FIG. 11 is a diagram for describing another example of change amount data according to some embodiments of the present disclosure.
  • FIG. 12 is a diagram for explaining an example of wearing glasses for monitoring the user's temporal muscles according to some embodiments of the present disclosure.
  • FIG. 13 is a diagram for explaining an example of a method in which glasses for monitoring a user's temporal muscles are switched to a hands-free mode through movement of a user's temporal muscles and an example of sensing data measured by a sensor unit according to some embodiments of the present disclosure .
  • FIG. 14 shows a simplified and general schematic diagram of an exemplary computing environment in which some embodiments of the present disclosure may be implemented.
  • first, second, etc. are used to describe various devices or components, it is a matter of course that these devices or components are not limited by these terms. These terms are only used to distinguish one device or component from another device or component. Therefore, it goes without saying that the first device or component mentioned below may be a second device or component within the spirit of the present disclosure.
  • a component described as “below” or “beneath” of another component will be placed “above” the other component.
  • the exemplary term “below” may include both directions below and above. Components may be oriented in other directions, and thus spatially relative terms may be interpreted according to the orientation.
  • the description is limited to the first detachable module 210 for convenience of description, but the content of the present disclosure is not limited thereto, but the second The same embodiments described for the first detachable module 210 may also be applied to the detachable module 220.
  • FIG. 1 is a block diagram of a detachable module included in glasses for monitoring a user's temporal muscles according to some embodiments of the present disclosure.
  • the glasses 100 for monitoring the user's temporal muscles may include a first detachable module 210 and a second detachable module 220.
  • each of the first detachable module 210 and the second detachable module 220 may be coupled to a portion at which the tip of the temple is located. That is, glasses according to some embodiments of the present disclosure may combine the first detachable module 210 and the second detachable module 220 instead of the spectacle tip in general glasses.
  • the description is limited to the first detachable module 210, but the content of the present disclosure is not limited thereto, and the first detachable module 210 is also included in the second detachable module 220.
  • the same embodiments described may be applied.
  • the first detachable module 210 may include a first connector 211, a first output unit 212, a first communication unit 216, a first control unit 217, a first memory 218, and a sensor unit.
  • the components shown in FIG. 1 are not essential in implementing the first detachable module 210, so the first detachable module 210 described in the present specification is more than the components listed above, or It can have fewer components.
  • the sensor unit of the first detachable module 210 may include a first sensor unit 231 and a second sensor unit 232.
  • the first sensor unit 231 may be provided on the first side of the first detachable module 210 in contact with the user's temporal muscle to obtain first sensing data.
  • the second sensor unit 232 may be provided on a second side opposite to the first side of the first attaching/detaching module 210 without contacting the user's temporal muscles to obtain second sensing data.
  • the first sensor unit 231 and the second sensor unit 232 of the first attachable and detachable module 210 may be built into or external to the first detachable module 210. However, it may be aesthetically desirable that the first sensor unit 231 and the second sensor unit 232 be positioned inside the first detachable module 210.
  • first sensor unit 231 and the second sensor unit 232 may be disposed on the first detachable module 210 to be spaced apart from each other.
  • the first sensor unit 231 and the second sensor unit 232 are accelerations that measure a moving direction, a moving distance, and a speed related to a linear motion of a measurement object (here, the user's temporal muscle). It may be at least one of a sensor, a gyro sensor that measures an angular velocity related to a rotational motion of the measurement object, and a geomagnetic sensor that measures the size of a magnetic field of the measurement object.
  • the first sensor unit 231 may obtain first sensing data by measuring a moving direction, a moving distance, and a speed related to linear motion of each of the X-axis, Y-axis, and Z-axis.
  • the second sensor unit 232 may obtain second sensing data by measuring a moving direction, a moving distance, and a speed related to linear motion of each of the X, Y, and Z axes. That is, each of the first sensor unit 231 and the second sensor unit 232 may acquire sensing data corresponding to three axes.
  • each of the first sensor unit 231 and the second sensor unit 232 measures a moving direction, a moving distance, and a speed related to linear motion of each of the X, Y, and Z axes, and the X axis
  • First sensing data and second sensing data may be obtained by further measuring an angular velocity related to a rotational motion of each of the Y and Z axes. That is, each of the first sensor unit 231 and the second sensor unit 232 may acquire sensing data corresponding to 6 axes.
  • each of the first sensor unit 231 and the second sensor unit 232 measures a moving direction, a moving distance, and a speed related to linear motion of each of the X, Y, and Z axes, and , Further measuring the angular velocity related to the rotational motion of each of the Y-axis and Z-axis, and further measuring the magnitude and direction of the magnetic field corresponding to each of the X-axis, Y-axis, and Z-axis to obtain the first sensing data and the second sensing data.
  • each of the first sensor unit 231 and the second sensor unit 232 may acquire sensing data corresponding to 9 axes.
  • the first controller 217 of the first attaching/detaching module 220 may acquire change amount data based on the sensing data acquired by the sensor unit. Specifically, the first control unit 217 may generate change amount data based on the first sensing data and the second sensing data.
  • the change amount data is data generated based on the first sensing data and the second sensing data, and may be data used to check the user's movement. That is, the change amount data may be data used to determine whether the user's movement is a movement related to the authored movement or a movement not related to the authored movement.
  • the first controller 217 may calculate a first sum value of first X-axis data, first Y-axis data, and first Z-axis data included in the first sensing data.
  • the first control unit 217 may calculate a second sum value of the second X-axis data, the second Y-axis data, and the second Z-axis data included in the second sensing data.
  • the first control unit 217 may generate change amount data based on the first sum value and the second sum value.
  • the second detachable module 220 may also include a sensor unit.
  • the sensor unit of the second detachable module 220 may include a third sensor unit 233 and a fourth sensor unit 234.
  • the third sensor unit 233 may be provided on the third side of the second detachable module 220 in contact with the user's temporal muscle to obtain third sensing data.
  • the fourth sensor unit 234 may be provided on a fourth side opposite to the third side of the second attaching/detaching module 220 without contacting the user's temporal muscles to obtain fourth sensing data.
  • the third sensor unit 233 and the fourth sensor unit 234 of the second detachable module 220 may be built into or external to the second detachable module 220. However, it may be aesthetically desirable that the third sensor unit 233 and the fourth sensor unit 234 are located inside the second detachable module 220.
  • the third sensor unit 233 and the fourth sensor unit 234 may be disposed on the second detachable module 220 to be spaced apart from each other.
  • the third sensor unit 233 and the fourth sensor unit 234 are accelerations that measure a moving direction, a moving distance, and a speed related to a linear motion of a measurement object (here, the user's temporal muscle). It may be at least one of a sensor, a gyro sensor that measures an angular velocity related to a rotational motion of the measurement object, and a geomagnetic sensor that measures the size of a magnetic field of the measurement object.
  • the third sensor unit 233 may obtain third sensing data by measuring a moving direction, a moving distance, and a speed related to linear motion of each of the X-axis, Y-axis, and Z-axis.
  • the fourth sensor unit 234 may obtain fourth sensing data by measuring a moving direction, a moving distance, and a speed related to linear motion of each of the X, Y, and Z axes. That is, each of the third sensor unit 233 and the fourth sensor unit 234 may acquire sensing data corresponding to three axes.
  • each of the third sensor unit 233 and the fourth sensor unit 234 measures a moving direction, a moving distance, and a speed related to linear motion of each of the X, Y, and Z axes, and the X axis, By further measuring the angular velocity related to the rotational motion of each of the Y-axis and the Z-axis, third sensing data and fourth sensing data may be obtained. That is, each of the third sensor unit 233 and the fourth sensor unit 234 may acquire sensing data corresponding to 6 axes.
  • each of the third sensor unit 233 and the fourth sensor unit 234 measures a moving direction, a moving distance, and a speed related to linear motion of each of the X, Y, and Z axes, and , Further measuring the angular velocity related to the rotational motion of each of the Y-axis and Z-axis, and further measuring the magnitude and direction of the magnetic field corresponding to each of the X-axis, Y-axis, and Z-axis, thereby providing the third sensing data and the fourth sensing data.
  • each of the third sensor unit 233 and the fourth sensor unit 234 may acquire sensing data corresponding to 9 axes.
  • the change amount data is generated based on the sensing data corresponding to axis 9 and then the user's movement is determined by using the change amount data
  • the change amount data is based on the sensing data corresponding to axis 3 or 6
  • the accuracy may be higher than that of determining whether the user's movement is the authored movement by using the change amount data after generating. Therefore, it may be desirable to generate change amount data based on sensing data corresponding to 9 axes. However, it is not limited thereto.
  • the first control unit 217 of the first detachable module 210 may be implemented to control the overall operation of the first detachable module 210.
  • the first controller 217 may perform various operations and process data performed by the first attaching/detaching module 210.
  • the first control unit 217 of the first attaching and detaching module 210 includes a central processing unit (CPU), a co-processor, an arithmetic processing unit (APU), and a digital signal processor. It may be a signal processor (DSP), an application processor (AP), and a communication processor (CP).
  • CPU central processing unit
  • APU arithmetic processing unit
  • DSP signal processor
  • AP application processor
  • CP communication processor
  • the second detachable module 220 may also include a second control unit 227.
  • the second control unit 227 may be implemented to control the overall operation of the second detachable module 220.
  • the second control unit 227 may perform various operations and process data performed by the second attaching/detaching module 220.
  • the second control unit 227 of the second detachable module 220 includes a central processing unit (CPU), a co-processor, an arithmetic processing unit (APU), and a digital signal processor. It may be a signal processor (DSP), an application processor (AP), and a communication processor (CP).
  • CPU central processing unit
  • APU arithmetic processing unit
  • DSP signal processor
  • AP application processor
  • CP communication processor
  • Each of the first and second memories 218 and 228 stores data supporting various functions of the first and second detachable modules 210 and 220.
  • Each of the first memory 218 and the second memory 228 is a plurality of application programs (application programs or applications) driven by each of the first detachable module 210 and the second detachable module 220, the first Data and commands for each operation of the detachable module 210 and the second detachable module 220 may be stored.
  • Each of the first memory 218 and the second memory 228 is a first attaching/detaching such as a random access memory (RAM) such as a dynamic random access memory (DRAM) or a static random access memory (SRAM).
  • RAM random access memory
  • DRAM dynamic random access memory
  • SRAM static random access memory
  • the stored information is instantaneously erased when the power is turned off. It may mean, but is not limited to these.
  • the application program is stored in the first memory 218 of the first detachable module 210 from the time of shipment for the basic functions of the first detachable module 210, and is installed on the first detachable module 210, and the first The first control unit 217 of the detachable module 210 may be driven to perform an operation (or function) of the first detachable module 210.
  • the application program is stored in the second memory 228 of the second detachable module 220 from the time of shipment for basic functions of the second detachable module 220, and is installed on the second detachable module 220,
  • the second control unit 227 of the second detachable module 220 may be driven to perform an operation (or function) of the second detachable module 220.
  • the first memory 218 of the first attaching/detaching module 210 may store authoring threshold data for acquiring authoring exercise data.
  • the authoring threshold data may be data including a threshold value for recognizing a time point at which the authoring exercise is performed using the change amount data. A detailed description of this will be described later in more detail in FIG. 4.
  • the first controller 217 of the first attaching/detaching module 210 may control the first communication unit 216 to transmit the eating habit information to the user terminal 300.
  • the eating habit information is information indicating a current eating habit of a user who wears the glasses 100 for monitoring the temporal muscle and may include at least one of a writing speed, a writing number, and a writing intensity.
  • the first memory 218 of the first detachable module 210 may store recommended eating habit information for generating a feedback signal (sound signal).
  • the recommended eating habit information is information on eating habits recommended to the user, and may include at least one of a recommended writing speed, a recommended writing number, and a recommended writing strength.
  • the first control unit 217 of the first attaching/detaching module 210 may compare the eating habit information and the recommended eating habit information to calculate comparison data. Also, the first control unit 217 may determine whether to output an audio signal based on the comparison data. In addition, the first control unit 217 may control the first output unit 212 to output the sound signal according to whether or not the sound signal is output.
  • the acoustic signal is information related to eating habits, and may be an acoustic signal that enables a user wearing glasses to correct his eating habit.
  • the first control unit 217 transmits the sound signal to the second detachable module 220 so that the second output unit 222 of the second detachable module 220 outputs the sound signal. ) Can also be controlled.
  • first detachable module 210 and the second detachable module 220 interlock with each other to output a sound corresponding to the sound signal through the first output unit 212 and the second output unit 222. I can.
  • the first control unit 217 of the first attaching/detaching module 210 includes the first sensing data and the second sensing data acquired by the sensor unit to the user terminal 300 through the first communication unit 216.
  • the sensing data may be transmitted and a feedback signal corresponding to the sensing data may be received from the user terminal 300.
  • the first communication unit 216 of the first detachable module 210 may receive a feedback signal from the user terminal 300 or an external terminal through short-range communication.
  • the present invention is not limited thereto, and the first communication unit 216 may receive a feedback signal from the user terminal 300 or an external terminal through wireless Internet technology.
  • the feedback signal may be a signal generated by the user terminal 300 or an external terminal as a signal for outputting an acoustic signal for the first attaching/detaching module 210 to correct a user's eating habits.
  • the first control unit 217 When the first communication unit 216 of the first detachable module 210 receives a feedback signal from the user terminal 300 or an external terminal, the first control unit 217 first outputs an acoustic signal corresponding to the feedback signal.
  • the output unit 212 can be controlled.
  • the acoustic signal is information related to eating habits, and may be an acoustic signal that enables a user wearing glasses to correct his eating habit.
  • the first communication unit 216 of the first attaching and detaching module 210 may transmit an acoustic signal corresponding to the feedback signal received from the user terminal 300 or an external terminal to the second attaching and detaching module 220.
  • the second detachable module 220 may include a second communication unit and a second output unit 222.
  • the second communication unit of the second detachable module 220 may receive an acoustic signal from the first detachable module 210.
  • the second output unit 222 of the second detachable module 220 may output a sound corresponding to the sound signal received from the first detachable module 210.
  • the first detachable module 210 and the second detachable module 220 interlock with each other to output the sound corresponding to the feedback information through the first output unit 212 and the second output unit 222. I can.
  • Each of the first output unit 212 of the first detachable module 210 and the second output unit 222 of the second detachable module 220 may be either a bone conduction speaker or a piezo speaker.
  • the first communication unit 216 of the first detachable module 210 may be built into or external to the first detachable module 210. However, it may be aesthetically desirable that the first communication unit 216 be located inside the first detachable module 210.
  • the first communication unit 216 may be configured to transmit and receive a wireless signal from the user terminal 300 or an external terminal in a communication network based on wireless Internet technologies.
  • the first communication unit 216 of the first detachable module 210 may be configured to transmit and receive data between the second detachable module 220 different from the first detachable module 210.
  • wireless Internet technologies include WLAN (Wireless LAN), Wi-Fi (Wireless-Fidelity), Wi-Fi (Wireless Fidelity) Direct, DLNA (Digital Living Network Alliance), WiBro (Wireless Broadband), WiMAX (World Interoperability for Microwave Access), HSDPA (High Speed Downlink Packet Access), HSUPA (High Speed Uplink Packet Access), LTE (Long Term Evolution), LTE-A (Long Term Evolution-Advanced), etc., and the first detachable module ( The first communication unit 216 of 210) may transmit and receive data according to at least one wireless Internet technology in a range including Internet technologies not listed above.
  • the first communication unit 216 of the first detachable module 210 may perform short range communication.
  • Short-range communication technologies include Bluetooth (Bluetooth), RFID (Radio Frequency Identification), Infrared Data Association (IrDA), UWB (Ultra Wideband), ZigBee, NFC (Near Field Communication), Wi-Fi (Wireless-Fidelity). ), Wi-Fi Direct, and Wireless Universal Serial Bus (USB) technologies may be used.
  • Bluetooth Bluetooth
  • RFID Radio Frequency Identification
  • IrDA Infrared Data Association
  • UWB Ultra Wideband
  • ZigBee Ultra Wideband
  • NFC Near Field Communication
  • Wi-Fi Wireless-Fidelity
  • Wi-Fi Direct Wireless Universal Serial Bus
  • USB Wireless Universal Serial Bus
  • the second communication unit 226 of the second attaching and detaching module 220 may perform a function similar to the first communication unit 216 of the first attaching and detaching module 210 described above. That is, the second communication unit 226 may be configured to transmit and receive wireless signals from the user terminal 300 or an external terminal in a communication network based on wireless Internet technologies. In addition, the second communication unit 226 of the second detachable module 220 may be configured to transmit and receive data between the first detachable module 210 different from the second detachable module 220. However, it is not limited thereto.
  • the glasses 100 for monitoring the user's temporalis may include a connection cable that transmits at least one of an acoustic signal, a current, and a power.
  • the first connector 211 of the first detachable module 210 and the third connector 221 of the second detachable module 220 may be connected to the connection cable.
  • each of the first communication unit 216 of the first attaching and detaching module 210 and the second communication unit of the second attaching and detaching module 220 are mutually sound through a connection cable built into the glasses 100 for monitoring the user's temporal muscles. At least one of a signal, a current, and a power can be transmitted and received.
  • the glasses 100 for monitoring the user's temporal muscles may not include a connection cable.
  • the first detachable module 210 may not include the first connector 211.
  • the second detachable module 220 may not include the third connector 221.
  • each of the first attaching and detaching module 210 and the second attaching and detaching module 220 may transmit and receive sound signals to and from each other through wireless communication.
  • the first detachable module 210 and the second detachable module 220 may be driven by batteries provided in each of the first detachable module 210 and the second detachable module 220.
  • At least one of the first detachable module 210 and the second detachable module 220 may further include a microphone.
  • the microphone processes external sound signals into electrical voice data.
  • the processed voice data may be used in various ways according to a function (or an application program being executed) being executed in each of the first attaching and detaching module 210 and the second attaching and detaching module 220. Meanwhile, in the microphone, various noise removal algorithms may be implemented to remove noise generated in a process of receiving an external sound signal.
  • Each of the first detachable module 210 and the second detachable module 220 may recognize ambient noise through a microphone.
  • the controllers of each of the first attaching and detaching module 210 and the second attaching and detaching module 220 may adjust the volume of the output sound corresponding to the perceived noise level.
  • the controller of each of the first attaching and detaching module 210 and the second attaching and detaching module 220 sets a volume corresponding to a preset decibel when the perceived amount of ambient noise is greater than or equal to a preset decibel (eg, 80 dB). You can adjust the volume so that sound is output.
  • a preset decibel eg, 80 dB
  • control unit of each of the first detachable module 210 and the second detachable module 220 generates the volume of sound output from the first attachable and detachable module 210 and the second detachable module 220 as ambient noise is generated. This can prevent the user from having to adjust the settings.
  • Each of the first detachable module 210 and the second detachable module 220 may further include a user input unit.
  • the user input unit may be provided on an outer surface of each of the first detachable module 210 and the second detachable module 220.
  • the present invention is not limited thereto, and the user input unit may be provided in the first temple and the second temple of the glasses 100 for monitoring the user's temporal muscles.
  • the user input unit is for receiving information from the user, and when information is input through the user input unit, the control units of the first detachable module 210 and the second detachable module 220 correspond to the input The operation of each of the 210 and the second detachable module 220 may be controlled.
  • the user input unit is a mechanical input means (or a mechanical key, for example, a button located on one side of a detachable module, a dome switch, a jog wheel, a jog switch, etc.) and a touch input means It may include.
  • a control unit of each of the first attaching and detaching module 210 and the second attaching and detaching module 220 may control whether or not to monitor the temporal muscle of the user based on information input through the user input unit.
  • the first control unit 217 of the first attaching/detaching module 210 recognizes that a touch is input once through the user input unit during sound output, the first sensor unit 231 and the second sensor unit 232 It can be controlled to stop the acquisition of sensing data to be performed.
  • the first sensor unit 231 and the second sensor unit 232 The sensor unit may be controlled to resume acquisition of sensing data performed in
  • the first control unit 217 of the first attaching/detaching module 210 corresponds to an input to the user input unit of the glasses 100 that monitors the user's temporal muscles, and the first sensor unit 231 and the second sensor unit 232 ) Can be controlled.
  • the present invention is not limited thereto, and the second control unit 227 of the second attaching/detaching module 220 also responds to an input to the user input unit of the glasses 100 for monitoring the user's temporal muscles, and the third sensor unit 233 and The operation of the fourth sensor unit 234 may be controlled in the same manner as the operation of the first sensor unit 231 and the second sensor unit 232.
  • Each of the first detachable module 210 and the second detachable module 220 may further include a lighting unit.
  • the lighting unit may include a light emission diode (LED).
  • LED light emission diode
  • Such an illumination unit allows the user to visually check the operating state of the glasses 100 for monitoring the user's temporal muscles through the blinking of the LED, and improves the aesthetics of the design for the glasses 100 for monitoring the user's temporal muscles.
  • the lighting unit may be controlled by the first control unit 217 of the first detachable module 210 to display the temporal muscle monitoring state. For example, the lighting unit may be turned on when the user's temporal muscles are being monitored, and may be turned off when the user's temporal muscles are not being monitored.
  • the lighting unit may display the battery state of the first detachable module 210.
  • the lighting unit is blue when the battery is charging, green when the remaining battery is over 80%, orange when the remaining battery is 40% to 80%, and red when the remaining battery is less than 40%. Lighting can be output.
  • the user can intuitively recognize various state information of the first detachable module 210 through the lighting unit of the detachable module 200.
  • the lighting unit may be controlled by the second control unit 227 of the second detachable module 220.
  • the lighting unit may display the battery state of the second detachable module 220.
  • the user terminal 300 may include a personal computer (PC), a notebook (note book), a mobile terminal, a smart phone, a tablet PC, etc. owned by the user.
  • PC personal computer
  • notebook note book
  • mobile terminal a smart phone
  • tablet PC etc. owned by the user.
  • all types of terminals capable of accessing a wired/wireless network may be included.
  • the user terminal 300 may include a control unit and a communication unit.
  • the present invention is not limited thereto, and the user terminal 300 may include fewer or more components than the above-described components.
  • control unit and the communication unit included in the user terminal 300 perform the same functions as the first control unit 217 and the first communication unit 216 included in the first attaching/detaching module 210, a detailed description thereof will be omitted. .
  • FIG. 2 is a conceptual diagram as viewed from one direction of an example of glasses for monitoring a user's temporal muscle to which a detachable module is coupled according to some embodiments of the present disclosure.
  • the glasses 100 for monitoring the user's temporal muscles may include a lens frame 110, a first temple 120, a second temple 130, and a detachable module 200.
  • the components shown in FIG. 2 are not essential in implementing the glasses 100 for monitoring the user's temporal muscles, so the glasses 100 for monitoring the user's temporal muscles described in the present specification are the components listed above. It may have more or fewer components than those.
  • the detachable module 200 that can be attached to and detached from the glasses 100 for monitoring the user's temporal muscle is a first detachable module 210 and a second detachable module that is detachable to the left and right of the glasses 100 for monitoring the user's temporal muscles.
  • a module 220 may be included.
  • the lens frame 110 of the spectacles 100 for monitoring the user's temporal muscles may have a shape surrounding two lenses.
  • the shape of the lens frame 110 is not limited thereto.
  • Each of the first temple 120 and the second temple 130 of the eyeglasses 100 for monitoring the user's temporal muscles may be hinged to each side of the lens frame 110 so as to be rotatable.
  • each of the first temple 120 and the second temple 130 may be spread over both ears of the user when the user wears glasses.
  • the first detachable module 210 may be attached to and detached from one end of the first temple 120.
  • the second detachable module 220 may be attached to and detached from one end of the second temple 130.
  • each of the first detachable module 210 and the second detachable module 220 may include a sensor unit 230.
  • the sensor unit 230 of the first detachable module 210 may include a first sensor unit 231 and a second sensor unit 232.
  • the first sensor unit 231 may be provided on the first side of the first detachable module 210 in contact with the user's temporal muscle to obtain first sensing data.
  • the second sensor unit 232 may be provided on a second side opposite to the first side of the first attaching/detaching module 210 without contacting the user's temporal muscles to obtain second sensing data.
  • the sensor unit 230 of the second detachable module 220 may include a third sensor unit 233 and a fourth sensor unit 234.
  • the third sensor unit 233 may be provided on the third side of the second detachable module 220 in contact with the user's temporal muscle to obtain third sensing data.
  • the fourth sensor unit 234 may be provided on a fourth side opposite to the third side of the second attaching/detachable module 220 without contacting the user's temporal muscle to obtain fourth sensing data.
  • the first sensor unit 231 and the second sensor unit 232 of the first attachable and detachable module 210 may be built into or external to the first detachable module 210.
  • the first sensor unit 231 and the second sensor unit 232 are shown as being external to the first detachable module 210 in order to help understanding by using intuitive expressions, but the first sensor unit 231 ) And the second sensor unit 232 may be aesthetically desirable to be located inside the first detachable module 210.
  • the third sensor unit 233 and the fourth sensor unit 234 of the second detachable module 220 are also illustrated in FIG. 2 by using an intuitive expression to aid in understanding. Although 234 is shown as an exterior shape of the second detachable module 220, it would be aesthetically preferable that the third sensor unit 233 and the fourth sensor unit 234 are located inside the second detachable module 220. I can.
  • first sensor unit 231 and the second sensor unit 232 may be disposed on the first detachable module 210 to be spaced apart from each other.
  • third sensor unit 233 and the fourth sensor unit 234 may be disposed on the second detachable module 220 to be spaced apart from each other. A detailed description of this will be described later in FIG. 8.
  • the sensor unit 230 is an acceleration sensor that measures a moving direction, a moving distance, and a speed related to the linear motion of the measurement object, a gyro sensor that measures an angular velocity related to the rotational motion of the measurement object, and the magnitude of the magnetic field of the measurement object. It may be at least one of the geomagnetic sensors.
  • each of the first detachable module 210 and the second detachable module 220 may include a first output unit 212 and a second output unit 222, respectively. Therefore, each of the first output unit 212 and the second output unit 222 is arranged to face the direction of the lens frame 110 so that when the user wears the glasses 100 for monitoring the user's temporal muscles, the first output unit Each of the 212 and the second output unit 222 may be in close contact with a region of the back of the user's auricle.
  • the first output unit 212 provided in the first attaching/detaching module 210 is in a state in which the first temple 120 and the second temple 130 each span both ears of the user, (Eg, left ear) may be in close contact with a region of the back of the auricle.
  • the second output unit 222 provided in the second attaching and detaching module 220 includes the first temple 120 and the second temple 130 in a state where each of the first temple 120 and the second temple 130 spans both ears of the user, and the second ear of the user ( For example, the right ear) may be in close contact with a region on the back of the auricle.
  • Each of the first detachable module 210 and the second detachable module 220 may include a wired connection port (eg, an aux port).
  • a signal line eg, an aux cable
  • each wired connection port of the first detachable module 210 and the second detachable module 220 may include a wired connection port (eg, an aux port).
  • the first control unit 217 of the first detachable module 210 may control the first communication unit 216 to transmit an acoustic signal to the second detachable module 220 through a signal line.
  • each of the first detachable module 210 and the second detachable module 220 may not include a wired connection port.
  • each of the first detachable module 210 and the second detachable module 220 may transmit/receive sound signals to each other through wireless communication, not through a signal line.
  • the first detachable module 210 and the second detachable module 220 may be driven by batteries provided in each of the first detachable module 210 and the second detachable module 220.
  • FIG 3 is a view for explaining an example in which the temple of the glasses and the detachable module for monitoring a user's temporal muscles are separated according to some embodiments of the present disclosure.
  • each of the first attaching and detaching module 210 and the second attaching and detaching module 220 includes a first temple 120 of the glasses 100 for monitoring a user's temporal muscles and It may be combined with each of the second temple (130).
  • a protrusion 150 may be provided at one end of each of the first temple 120 and the second temple 130 of the eyeglasses 100 for monitoring the user's temporal muscles.
  • each of the first detachable module 210 and the second detachable module 220 may be provided with a receiving portion into which the protrusion 150 is inserted.
  • the size of the protrusion 150 may correspond to the size of the receiving portion. Accordingly, the first temple 120 and the second temple 130 of the eyeglasses 100 for monitoring the user's temporal muscles, the first detachable module 210 and the second detachable module 220 may be firmly coupled.
  • each of the first temple 120 and the second temple 130 of the eyeglasses 100 may have a stepped portion at a portion coupled to each of the first detachable module 210 and the second detachable module 220.
  • each of the first detachable module 210 and the second detachable module 220 has the first temple 120 and the second temple at a portion coupled to each of the first temple 120 and the second temple 130 (130)
  • a stepped step may be formed in a shape corresponding to the stepped step formed on each. Therefore, the first temple 120 and the second temple 130 of the eyeglasses 100 for monitoring the user's temporal muscles, the first detachable module 210 and the second detachable module 220 may be more rigidly coupled. .
  • the first connector 211 provided in the first detachable module 210 and the second connector 121 provided in the first temple 120 ) can be combined.
  • the third connector 221 provided in the second detachable module 220 and the third provided in the second temple 130 4 connectors can be mated.
  • the glasses 100 for monitoring the user's temporal muscles may include a connection cable 140 for transmitting at least one of an acoustic signal, a current, and a power.
  • the second connector 121 of the first detachable module 210 and the third connector 221 of the second detachable module 220 may be connected through a connection cable.
  • each of the lens frame 110, the first temple 120, and the second temple 130 of the glasses 100 may include a through hole in the center.
  • the connection cable 140 may be embedded in the through hole.
  • the connection cable 140 receives at least one of an acoustic signal, a current having a specific value, and a power having a specific value from the first attaching and detaching module 210 to the second attaching and detaching module 220 (reversely also possible).
  • the current having a specific value or the power having a specific value may be a current or power generated from a battery provided in the first detachable module 210.
  • the first control unit 217 of the first attaching and detaching module 210 may transmit an acoustic signal generated based on the user's eating habit information to the second attaching and detaching module 220 through the connection cable 140.
  • each of the first control unit 217 of the first detachable module 210 and the second control unit 227 of the second detachable module 220 interlock with each other to output a sound corresponding to the sound signal.
  • Each of the unit 212 and the second output unit 222 may be controlled.
  • the present invention is not limited thereto, and the glasses 100 for monitoring the user's temporal muscles may not include a connection cable.
  • the first detachable module 210 may not include the first connector 211.
  • the second detachable module 220 may not include the third connector 221.
  • each of the first attaching and detaching module 210 and the second attaching and detaching module 220 may transmit and receive sound signals to and from each other through wireless communication.
  • the first control unit 217 of the first attaching and detaching module 210 controls the first communication unit 216 to wirelessly transmit the acoustic signal generated based on the user's eating habit information to the second attaching and detaching module 220. I can. At this time, each of the first control unit 217 of the first detachable module 210 and the second control unit 227 of the second detachable module 220 interlock with each other through wireless communication to output sound corresponding to the sound signal. Each of the first and second output units 212 and 222 may be controlled so as to be performed.
  • the first detachable module 210 and the second detachable module 220 are the first detachable module 210 and the second detachable module (220) It may be driven by a battery provided in each.
  • the first detachable module 210 may include a sensor unit 230.
  • the sensor unit 230 of the first detachable module 210 may include a first sensor unit 231 and a second sensor unit 232.
  • the first sensor unit 231 may be provided on the first side of the first detachable module 210 in contact with the user's temporal muscle to obtain first sensing data.
  • the second sensor unit 232 may be provided on a second side opposite to the first side of the first attaching/detaching module 210 without contacting the user's temporal muscles to obtain second sensing data.
  • the second detachable module 220 may also include a sensor unit 230.
  • the sensor unit 230 of the second detachable module 220 may include a third sensor unit 233 and a fourth sensor unit 234.
  • the third sensor unit 233 and the fourth sensor unit 234 are located at different positions (eg, right and left) from the position where the first sensor unit 231 and the second sensor unit 232 are provided. , It is provided on a third side that is in contact with the user's temporal muscle and a fourth side that is not in contact with the user's temporal muscle and is opposite to the third side to obtain third sensing data and fourth sensing data.
  • the first detachable module 210 may include a battery 213.
  • the battery 213 of the first detachable module 210 receives external power and internal power under the control of the first control unit 217 to supply power to each of the components included in the first detachable module 210. Supply.
  • the battery 213 may be a built-in battery or a replaceable battery.
  • the second detachable module 220 may also include a battery.
  • the battery of the second detachable module 220 also receives external power and internal power under the control of the second control unit 227 to supply power to each of the components included in the second detachable module 220.
  • the battery may be a built-in battery or a replaceable battery.
  • each of the first detachable module 210 and the second detachable module 220 may include a charging terminal.
  • the charging terminal 214 of the first detachable module 210 may be connected to an external charging device so as to supply external power to the battery 213.
  • the charging terminal 214 may include a positive terminal and a negative terminal to be connected to an external charging device to receive power.
  • the charging terminal of the second detachable module 220 may also be connected to an external charging device so as to supply external power to the battery.
  • the charging terminal may include a positive terminal and a negative terminal to be connected to an external charging device to receive power.
  • the second communication unit may be deactivated. Specifically, the second detachable module 220 may recognize whether a current having a specific value or a power having a specific value has been received from the first attaching and detaching module 210.
  • the second control unit of the second detachable module 220 is coupled to the first connector 211 of the first detachable module 210 and the second connector 121 of the first temple 120, and the second As the third connector 221 of the detachable module and the fourth connector of the second temple 130 are coupled, a current having a specific value or power having a specific value from the first attaching and detaching module 210 is connected to the connection cable 140 You can receive it through.
  • the current having a specific value or the power having a specific value may be a current or power generated from a battery provided in the first detachable module 210.
  • the second communication unit may be deactivated.
  • the sound signal may be transmitted and received between the first detachable module 210 and the second detachable module 220 through the connection cable 140.
  • the first detachable module 210 may transmit an acoustic signal to the second detachable module through the connection cable.
  • the first detachable module 210 and the second detachable module 220 may interlock with each other to output a sound corresponding to the sound signal through the first output unit 212 and the second output unit 222. .
  • the second communication unit may be maintained in an activated state.
  • the second communication unit of the second attaching/detaching module 220 may receive the sound signal through wireless communication (specifically, short-range communication), and may output sound corresponding to the sound signal.
  • the first attaching and detaching module 210 transmits an acoustic signal to the second communication unit 216 through the first communication unit 216 in a state in which communication is connected with the second communication unit of the second attaching and detaching module 220 through the first communication unit 216. It can be transmitted to the detachable module 220.
  • the first detachable module 210 and the second detachable module 220 may interlock with each other to output a sound corresponding to the sound signal through the first output unit 212 and the second output unit 222. .
  • each of the lens frame 110, the first temple 120, and the second temple 130 of the eyeglasses 100 for monitoring the user's temporal muscles may not have a hole in the center.
  • the glasses 100 for monitoring the user's temporal muscles may not include the connection cable 140 embedded in the through hole.
  • the sound signal may be transmitted and received through short-range communication by the first communication unit 216 and the second communication unit of each of the first detachable module 210 and the second detachable module 220.
  • the first attaching and detaching module 210 transmits an acoustic signal to the second communication unit 216 through the first communication unit 216 in a state in which communication is connected with the second communication unit of the second attaching and detaching module 220 through the first communication unit 216. It can be transmitted to the detachable module 220.
  • the first detachable module 210 and the second detachable module 220 may interlock with each other to output a sound corresponding to the sound signal through the first output unit 212 and the second output unit 222. .
  • FIG. 4 is a flowchart illustrating an example of a method of obtaining mastication exercise data based on variance data and mastication threshold data by glasses for monitoring a user's temporal muscles according to some embodiments of the present disclosure.
  • the first controller 217 of the first detachable module 210 sums the first X-axis data, the first Y-axis data, and the first Z-axis data included in the first sensing data.
  • One first sum value may be calculated (S111).
  • the first X-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the X axis by the first sensor unit 231 over time.
  • the first Y-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the Y axis by the first sensor unit 231 over time.
  • the first Z-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the Z-axis by the first sensor unit 231 over time. That is, the first control unit 217 calculates the sum of at least one of the acceleration values, angular velocity values, and magnetic field values measured by the first sensor unit 231 around the X-axis, Y-axis, and Z-axis at each time. It can be calculated as the first sum value.
  • the first control unit 217 of the first detachable module 210 calculates a second sum value obtained by summing the second X-axis data, the second Y-axis data, and the second Z-axis data included in the second sensing data. It can be done (S112).
  • the second X-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the X axis by the second sensor unit 232 over time.
  • the second Y-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the Y axis by the second sensor unit 232 over time.
  • the second Z-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the Z axis by the second sensor unit 232 over time. That is, the first control unit 217 calculates a sum of at least one of the acceleration values, angular velocity values, and magnetic field values measured by the second sensor unit 232 around the X-axis, Y-axis and Z-axis at each time. It can be calculated as the second sum value.
  • the first control unit 217 of the first attaching/detaching module 210 may generate change amount data based on the first sum value and the second sum value (S113). Specifically, the first control unit 217 may generate change amount data by calculating an absolute value of a result of subtracting the second sum value from the first sum value. More specifically, the first control unit 217 may calculate an absolute value of a result of subtracting the second sum value from the first sum value calculated at each time, and record the calculated absolute value as change amount data. have. That is, the change amount data may indicate that the absolute value changes over time.
  • sensing data of a gyro sensor is accurate in a short measurement time
  • sensing data of an acceleration sensor is accurate in a long measurement time
  • the first controller 217 of the first attaching/detaching module 210 may acquire sensing data by fusing a section with high accuracy among sensing data of each of the gyro sensor and the acceleration sensor.
  • the first control unit 217 may remove noise from the change amount data by using a Kalman filter.
  • the Kalman filter is a recursive filter that tracks a mechanical state in which noise is included, and removes noise from data based on measurements made over time.
  • Kalman filtering is an optimal state estimation process applied to a dynamic system including irregular external disturbances, and the Kalman filter is an iterative algorithm for optimally estimating unknown state variables of the dynamic system from noise-bearing data measured at discrete real-time intervals.
  • the Kalman filtering procedure performed by the first control unit 217 is designed to estimate state variables in a linear model, linearization must be performed in the process of deriving a filtering equation for variance data, which is a nonlinear model.
  • the first control unit 217 performs real-time linear Taylor approximation from the previously estimated state variable, and may remove noise for the change amount data by using an Extended Kalman filter obtained here.
  • the first control unit 217 of the first attaching/detaching module 210 may acquire the authoring exercise data based on the change amount data and the authoring threshold data generated in step S113 (S114).
  • the authoring threshold data may be data including a threshold value for recognizing a time point at which the authoring exercise is performed using the change amount data.
  • the first control unit 217 of the first attaching/detaching module 210 may extract values equal to or greater than a threshold value included in the authoring threshold data among absolute values at each time included in the change amount data.
  • the first control unit 217 recognizes the time point at which the extracted values are acquired, and the sensing data obtained by the first sensor unit 231 at that time point and the second sensor unit 232 at that time point. Sensing data may be acquired as authored exercise data.
  • the first control unit 217 compares the absolute values at each time included in the change amount data with the authoring threshold value included in the authoring threshold data, recognizes the time when the user performed the authoring exercise, and By acquiring the sensing data acquired through the first sensor unit 231 and the second sensor unit 232 as authored exercise data, the sensing data generated by the user walking or turning his head may be filtered.
  • FIG. 5 is a flowchart illustrating an example of a method of outputting an acoustic signal based on eating habit information by glasses for monitoring a user's temporal muscles, according to some embodiments of the present disclosure.
  • the first controller 217 of the first attaching/detaching module 210 may generate eating habit information based on the authored exercise data (S121).
  • the first control unit 217 is based on the authoring exercise data, which is the sensing data obtained through the first sensor unit 231 and the second sensor unit 232 at the time when the user performs the authoring exercise, The number of authors per hour can be created as information on eating habits.
  • the first controller 217 of the first attaching and detaching module 210 may control the first communication unit 216 to transmit the eating habits information to the user terminal 300 (S122).
  • the user terminal 300 displays an interface including eating habits information on the display of the user terminal 300 or outputs a sound including eating habits information through a speaker of the user terminal 300. I can. Therefore, the user can receive information about his or her own eating habits through sight or hearing.
  • the eating habit information is information on the current eating habits of the user who wears the glasses 100 for monitoring the temporal muscle, and may include at least one of a writing speed, a writing frequency, and a writing intensity.
  • the first control unit 217 of the first attaching/detaching module 210 may calculate comparison data by comparing eating habit information and recommended eating habit information (S123). Specifically, the first controller 217 may calculate comparison value data by comparing the eating habit information and the recommended eating habit information.
  • the first control unit 217 of the first attaching and detaching module 210 indicates that the user's eating habits information is “authoring speed: 25 times per minute”, and the recommended eating habits information is “authoring speed: 30 times per minute”
  • comparison data such as “the number of authoring by the user is 5 times less than the recommended number of authoring” can be calculated by comparing the eating habit information and the recommended eating habit information.
  • the first controller 217 of the first attaching/detaching module 210 may determine whether to output an acoustic signal based on the comparison data (S124). Specifically, the first control unit 217 may determine to output an acoustic signal when it is recognized that the user has authored less than the recommended number of authoring according to the comparison data. For example, the first control unit 217 may determine to output an acoustic signal when the comparison data is “the number of writing by the user is less than the recommended number of writing five times”.
  • the first output unit 212 when it is determined that the first controller 217 of the first detachable module 210 outputs an acoustic signal (S125, Yes), the first output unit 212 to output an acoustic signal Can be controlled (S126).
  • the first control unit 217 said, “XXX, you just ate food in a hurry.
  • the first output unit 212 may be controlled to output an acoustic signal such as “Chew and swallow food 35 times this time”.
  • the acoustic signal is not limited to the above-described embodiment, and may include acoustic signals such as a warning sound and a siren sound.
  • the first control unit 217 of the first attaching/detaching module 210 does not output an acoustic signal (S125, No)
  • the controller of the user terminal 300 extracts only the sensing data related to the authoring exercise from the sensing data acquired from the wearable device (the glasses 100 for monitoring the user's temporal muscles), and then the extracted sensing. Data can be analyzed. A detailed description of this will be given below with reference to FIGS. 6 and 7.
  • FIG. 6 is a flowchart illustrating an example of a method of obtaining, by a user terminal, authoring exercise data based on change amount data and authoring threshold data according to some embodiments of the present disclosure.
  • the communication unit of the user terminal 300 may receive the first sensing data and the second sensing data from the wearable device worn by the user (here, the glasses 100 for monitoring the user's temporal muscles). Can be (S211).
  • the first sensing data may be data acquired by the first sensor unit 231 provided on the first side of the first attaching/detachable module in contact with the user's temporal muscle in the wearable device.
  • the second sensing data may be data obtained by the second sensor unit 232 provided on a second side opposite to the first side without contacting the user's temporal muscles in the wearable device.
  • control unit of the user terminal 300 may generate change amount data based on the first sensing data and the second sensing data received in step S211 (S212).
  • the controller of the user terminal 300 may calculate a first sum value of the first X-axis data, the first Y-axis data, and the first Z-axis data included in the first sensing data.
  • the first X-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the X axis by the first sensor unit 231 over time.
  • the first Y-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the Y axis by the first sensor unit 231 over time.
  • the first Z-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the Z-axis by the first sensor unit 231 over time. That is, the first control unit 217 calculates the sum of at least one of the acceleration values, angular velocity values, and magnetic field values measured by the first sensor unit 231 around the X-axis, Y-axis, and Z-axis at each time. It can be calculated as the first sum value.
  • control unit of the user terminal 300 may calculate a second sum of the second X-axis data, the second Y-axis data, and the second Z-axis data included in the second sensing data.
  • the second X-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the X axis by the second sensor unit 232 over time.
  • the second Y-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the Y axis by the second sensor unit 232 over time.
  • the second Z-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the Z axis by the second sensor unit 232 over time. That is, the first control unit 217 calculates a sum of at least one of the acceleration values, angular velocity values, and magnetic field values measured by the second sensor unit 232 around the X-axis, Y-axis and Z-axis at each time. It can be calculated as the second sum value.
  • control unit of the user terminal 300 may generate the change amount data based on the first sum value and the second sum value. More specifically, the first control unit 217 may calculate an absolute value of a result of subtracting the second sum value from the first sum value calculated at each time, and record the calculated absolute value as change amount data. have. That is, the change amount data may indicate that the absolute value changes over time.
  • sensing data of a gyro sensor is accurate in a short measurement time
  • sensing data of an acceleration sensor is accurate in a long measurement time
  • the controller of the user terminal 300 may acquire sensing data by fusing a section with high accuracy among sensing data of each of the gyro sensor and the acceleration sensor.
  • control unit of the user terminal 300 may remove noise from the variation data by using a Kalman filter.
  • the Kalman filter is a recursive filter that tracks a mechanical state including noise, and is based on measurements made over time.
  • Kalman filtering is an optimal state estimation process applied to a dynamic system including irregular external disturbances, and the Kalman filter is an iterative algorithm for optimally estimating unknown state variables of the dynamic system from noise-bearing data measured at discrete real-time intervals.
  • the Kalman filtering procedure performed by the control unit of the user terminal 300 is designed to estimate state variables in a linear model, linearization must be performed in the process of deriving a filtering equation for variance data, which is a nonlinear model.
  • the control unit of the user terminal 300 performs real-time linear Taylor approximation from the previously estimated state variable, and may remove noise for the change amount data using an Extended Kalman filter obtained here.
  • the control unit of the user terminal 300 may obtain the authoring exercise data based on the change amount data and the authoring threshold data generated in step S212 (S213).
  • the authoring threshold data may be data including a threshold value for recognizing a time point at which the authoring exercise is performed using the change amount data.
  • control unit of the user terminal 300 may extract values greater than or equal to a threshold value included in the authoring threshold data from among absolute values at each time included in the change amount data.
  • control unit of the user terminal 300 recognizes the time point at which the extracted values are acquired, and the sensing data obtained by the first sensor unit 231 at that time point and the second sensor unit 232 at that time point.
  • the sensed data may be acquired as authored exercise data.
  • control unit of the user terminal 300 compares the absolute values at each time with the authoring threshold value included in the authoring threshold data to recognize the time when the user performed the authoring exercise, and at that time, the first sensor unit ( By acquiring the sensing data acquired through the 231) and the second sensor unit 232 as authored exercise data, the sensing data generated by the user walking or turning his head may be filtered.
  • FIG. 7 is a flowchart illustrating an example of a method for a user terminal to transmit a feedback signal to a wearable device according to some embodiments of the present disclosure.
  • the controller of the user terminal 300 may generate eating habit information based on the authored exercise data (S221).
  • the control unit of the user terminal 300 based on the authoring exercise data, which is sensing data obtained through the first sensor unit 231 and the second sensor unit 232 at the time when the user performs the authoring exercise, The number of authors per unit time can be generated as eating habit information.
  • the user terminal 300 may output eating habit information on a screen (S222).
  • the present invention is not limited thereto, and sound including eating habits information may be output through a speaker of the user terminal 300. Therefore, the user can receive information about his or her own eating habits through sight or hearing.
  • the eating habit information is information on the current eating habits of the user who wears the glasses 100 for monitoring the temporal muscle, and may include at least one of a writing speed, a writing frequency, and a writing intensity.
  • the user terminal 300 "Currently, the number of authoring per minute is 25.” Text such as, etc. can be displayed on the screen or sound can be output through a speaker.
  • the user terminal 300 may calculate comparison data by comparing the eating habit information and the recommended eating habit information (S223). Specifically, the user terminal 300 may calculate comparison value data by comparing the eating habit information and the recommended eating habit information. For example, if the user terminal 300 has the user's eating habits information "authoring rate: 25 times per minute” and the recommended eating habits information is "authoring speed: 30 times per minute", eating habits information and recommended eating habits information By comparing the data, comparison data such as "the number of authoring by the user is 5 times less than the recommended number of authoring" can be calculated.
  • the user terminal 300 may determine whether to transmit a feedback signal based on the comparison data (S224).
  • the feedback signal may be a signal transmitted by the user terminal 300 to the wearable device so that the first attaching/detaching module 210 outputs an acoustic signal that enables the user's eating habits to be corrected.
  • the user terminal 300 when the user terminal 300 recognizes that the user has authored less than the recommended authoring number according to the comparison data, the user terminal 300 transmits a feedback signal to the wearable device (here, the glasses 100 for monitoring the user's temporal muscle). You can decide to do it. For example, the user terminal 300 may determine to transmit a feedback signal to the wearable device when the comparison data is “the number of authoring by the user is less than the recommended number of authoring five times”.
  • the user terminal 300 may transmit the feedback signal to the wearable device (S226).
  • the wearable device may output an acoustic signal corresponding to the feedback signal so that the user can consume food close to the recommended eating habit information. For example, on a wearable device, “XXX, you just ate food in a hurry. For a healthy eating habit, an acoustic signal such as "Chew and swallow food 35 times this time” may be output.
  • the acoustic signal is not limited to the above-described embodiment, and may include acoustic signals such as a warning sound and a siren sound.
  • the user terminal 300 recognizes that the user is performing a writing exercise corresponding to the recommended eating habit, and performs a specific control for transmitting the feedback signal. I can't.
  • the control unit included in the wearable device for example, the first control unit 217 and /Or the second control unit 227 does not need to extract and analyze the sensing data.
  • the number of tasks to be processed by the control unit included in the wearable device may be reduced, and thus the amount of battery consumption of the wearable device may be reduced.
  • FIG. 8 is a view for explaining a position of a sensor unit provided in an attaching/detaching module of glasses for monitoring a user's temporal muscle according to some embodiments of the present disclosure.
  • the attaching/detaching module 200 of the glasses 100 for monitoring the temporal muscle may include a sensor unit.
  • the sensor unit included in the first detachable module 210 specifically, the first sensor unit 231 and the second sensor unit 232 included in the first detachable module 210
  • a person of ordinary skill in the art of the present disclosure also applies the third sensor unit 233 and the fourth sensor unit 234 included in the second detachable module 220 to the first detachable module 210 to be described below.
  • the included first sensor unit 231 and the second sensor unit 232 may be provided at positions corresponding to each other.
  • the first sensor unit 231 and the second sensor unit 232 of the first attachable and detachable module 210 may be built into or external to the first detachable module 210.
  • the first sensor unit 231 and the second sensor unit 232 are shown as being external to the first attaching and detaching module 210 in order to help understanding by using intuitive expressions, but the first sensor unit 231 ) And the second sensor unit 232 may be aesthetically desirable to be located inside the first detachable module 210.
  • first sensor unit 231 and the second sensor unit 232 may be disposed on the first detachable module 210 to be spaced apart from each other.
  • a sensor unit included in the attaching/detaching module 200 of the eyeglasses 100 for monitoring the user's temporal muscle may detect a change in the user's temporal muscle when the user wears the glasses.
  • the first detachable module 210 may include a first sensor unit 231 on a first side of the user's temporal muscle.
  • the first detachable module 210 may include a second sensor unit 232 on a second side opposite to the first side without contacting the user's temporal muscles. Accordingly, each of the first sensor unit 231 and the second sensor unit 232 may detect the amount of change in the temporal muscle when the user's temporal muscle moves.
  • the first attaching/detaching module 210 may include a space for accommodating the first sensor unit 231.
  • the accommodation space exists between the first sensor unit 231 and the second sensor unit 232, and the second sensor unit 232 is located on the first side where the first sensor unit 231 is located. It is an inwardly formed space, and a space in which the first sensor unit 231 can move may be provided.
  • the first sensor unit 231 provided on the first side of the first detachable module 210 in contact with the user's temporal muscle accommodates the first detachable module 210 when the user performs a mastication exercise and moves the temporal muscle. It is accommodated in space, so its location can be changed.
  • the second sensor unit 232 provided on the second side facing the first side without contacting the user's temporal muscles on the first attaching and detaching module 210 does not change the position even if the user’s temporal muscles move. I can. That is, when the user's temporal muscle moves, only the first sensor unit 231 may move, and the second sensor unit 232 may not move.
  • the first sensor unit 231 and the second sensor unit 232 may move together.
  • the magnitude of the absolute value obtained by subtracting the second sum value from the first sum value described above in FIGS. 4 and 6 may have a first value when the user performs the authoring exercise. And, when the user does not perform the authoring exercise and has a general movement, the magnitude of the absolute value obtained by subtracting the second sum value from the first sum value described in FIGS. 4 and 6 is a second value smaller than the first value. Can have. Therefore, the first control unit 217 extracts only the sensing data when the absolute value is greater than or equal to the threshold value existing between the first value and the second value, and selects only the sensing data in the case of the authoring exercise as authoring exercise data. It becomes possible to extract.
  • the positive or negative values described as examples of the sensing values of each of the first sensing data and the second sensing data are only some examples to aid understanding of the present disclosure, and are not limited thereto.
  • FIG. 9 is a diagram for describing an example in which a sensor unit recognizes a mastication motion as a user's temporal muscle relaxes and contracts according to some embodiments of the present disclosure.
  • the user's temporal muscle relaxes and contracts repeatedly, so that the thickness of the temporal muscle becomes thinner and thicker may be repeated. For example, when the user's upper and lower teeth are widened, the user's temporal muscles relax and become thinner, and when the user's upper and lower teeth collide, the user's temporal muscles may contract and increase in thickness.
  • the sensor unit includes an acceleration sensor that measures a moving direction, a moving distance, and a speed related to a linear motion of a measurement object, a gyro sensor that measures an angular velocity related to a rotational motion of the measurement object, and a magnetic field of the measurement object. It may be at least one of geomagnetic sensors that measure the size. That is, the sensor unit adjacent to the temporal muscle moves together with the temporal muscle and may measure at least one of a moving direction, a moving distance, a speed, a rotational motion, and an angular velocity of the temporal muscle.
  • the sensor unit may obtain sensing data by measuring a moving direction, a moving distance, and a speed related to linear motion of each of the X, Y, and Z axes. That is, the sensor unit may acquire sensing data corresponding to three axes.
  • the sensor unit measures a moving direction, a moving distance, and a speed related to a linear motion of each of the X, Y, and Z axes, and further measures an angular velocity related to a rotational motion of each of the X, Y, and Z axes.
  • Sensing data may be obtained. That is, the sensor unit may acquire sensing data corresponding to 6 axes.
  • the sensor unit measures the movement direction, movement distance, and speed related to the linear motion of each of the X, Y, and Z axes, and further measures the angular velocity related to the rotational motion of each of the X, Y, and Z axes. And, it is possible to obtain sensing data by further measuring the magnitude and direction of the magnetic field corresponding to each of the X, Y, and Z axes. That is, the sensor unit may acquire sensing data corresponding to 9 axes.
  • a sensor unit provided in the first detachable module 210 and/or the second detachable module 220 may detect contraction and relaxation of the user's facial muscles to generate an electrical signal.
  • the sensor unit may be composed of a piezoelectric sensor using a piezoelectric film.
  • a piezoelectric sensor is a sensor using an element having a piezoelectric effect, and can convert vibration into electricity and vice versa.
  • the sensor unit of the glasses 100 for monitoring the user's temporal muscle may generate an electrical signal by receiving pressure from the outside of the user's skull.
  • the glasses 100 for monitoring the user's temporal muscles may detect that the user's teeth have been bumped by analyzing the electrical signal.
  • the sensor unit is not limited to the above-described piezoelectric sensor, and may be configured with various sensors capable of detecting changes in the user's body.
  • the sensor unit is a pressure sensor, a temperature sensor, a humidity sensor, an acceleration sensor, and a bio sensor that measures pulse, blood pressure, blood sugar, oxygen saturation, etc. sensor), etc.
  • At least one sensor unit may be provided in the glasses 100 for monitoring the user's temporal muscles, and the glasses 100 for monitoring the user's temporal muscles in order to detect the amount of change in the user's temporal muscles. It may be desirable to be located on the user's skull side of the side.
  • the location and number of the sensor units are not limited to the above-described embodiment, and the method of detecting the amount of change in the temporal muscle by the glasses 100 for monitoring the user's temporal muscle is also not limited to the above-described embodiment.
  • FIG. 10 is a diagram for describing an example of change amount data according to some embodiments of the present disclosure.
  • the first control unit 217 of the first detachable module 210 includes the first sensing data (A first sum value obtained by summing the first X-axis data, the first Y-axis data, and the first Z-axis data included in 71) may be calculated.
  • Equation 1 Equation 1 below.
  • R represents the first sum value
  • rX represents the first X-axis data
  • rY represents the first Y-axis data
  • rZ represents the first Z-axis data
  • the first X-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the X axis by the first sensor unit 231 over time.
  • the first Y-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the Y axis by the first sensor unit 231 over time.
  • the first Z-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the Z-axis by the first sensor unit 231 over time.
  • the first control unit 217 of the first attaching and detaching module 210 (the second control unit 227 of the second attaching and detaching module 220 or the control unit of the user terminal) is a second sensor included in the second sensing data 72.
  • a second sum value obtained by summing the X-axis data, the second Y-axis data, and the second Z-axis data may be calculated.
  • Equation 2 Equation 2
  • L denotes the second sum value
  • lX denotes the second X-axis data
  • lY denotes the second Y-axis data
  • lZ may denote the second Z-axis data.
  • the second X-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the X axis by the second sensor unit 232 over time.
  • the second Y-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the Y axis by the second sensor unit 232 over time.
  • the second Z-axis data may include at least one of an acceleration value, an angular velocity value, and a magnetic field value measured around the Z axis by the second sensor unit 232 over time.
  • the first control unit 217 of the first detachable module 210 subtracts the second sum value from the first sum value.
  • Equation 3 an equation for generating change amount data applying an absolute value to a result of subtracting the second sum value from the first sum value may be as shown in Equation 3 below.
  • R is the first X-axis data (rX) expressed in the first sub-graph 81
  • the third sub-graph 83 Represents the first sum value of each of the expressed first Z-axis data rZ
  • L is the second X-axis data (lX) expressed in the first sub-graph 81
  • the second sub-graph 82 expressed.
  • a second sum value of each of the second Y-axis data lY and the second Z-axis data lZ expressed in the third sub-graph 83 is represented, and Result indicates change amount data.
  • the first control unit 217 of the first attaching and detaching module 210 (the second control unit 227 of the second attaching and detaching module 220 or the control unit of the user terminal) is provided with the change amount data and the authoring threshold.
  • Authored exercise data can be extracted using the data.
  • the authoring threshold data may be data including a threshold value for recognizing a time point at which the authoring exercise is performed using the change amount data.
  • the first control unit 217 of the first attaching and detaching module 210 (the second control unit 227 of the second attaching and detaching module 220 or the control unit of the user terminal) is absolute at each time included in the change amount data.
  • values greater than or equal to the threshold value 74 (eg, 120) included in the authoring threshold data may be extracted.
  • the first control unit 217 (the second control unit 227 of the second detachable module 220 or the control unit of the user terminal) recognizes the time points (58 seconds, 125 seconds, 140 seconds) at which the extracted values are acquired.
  • the sensed data may be acquired as authored exercise data.
  • FIG. 11 is a diagram for describing another example of change amount data according to some embodiments of the present disclosure.
  • sensing data of a gyro sensor is accurate in a short measurement time
  • sensing data of an acceleration sensor is accurate in a long measurement time
  • the first controller 217 of the first attaching/detaching module 210 may acquire sensing data by fusing a section with high accuracy among sensing data of each of the gyro sensor and the acceleration sensor in order to increase the accuracy of the sensing data.
  • the first sensor unit 231 may be a gyro sensor and an acceleration sensor.
  • the second sensor unit 232 may also be a gyro sensor and an acceleration sensor.
  • each of the first sensor unit 231 and the second sensor unit 232 is In the case of a sensor, it may be a graph in which sensing values obtained from the acceleration sensor are expressed.
  • the first control unit 217 of the first attaching/detaching module 210 is a sensing value of the first X-axis data rX expressed in the fourth sub-graph 84, and the fifth sub-graph.
  • a first sum value of each of the sensing values of the first Y-axis data rY expressed in (85) and the first Z-axis data rZ expressed in the sixth sub-graph 86 may be calculated.
  • the first control unit 217 of the first attaching/detaching module 210 is a sensing value of the second X-axis data lX expressed in the fourth sub-graph 84 and the first control unit 217 expressed in the fifth sub-graph 85.
  • a second sum value of each of a sensing value of the 2 Y-axis data lY and a sensing value of the second Z-axis data lZ expressed in the sixth sub-graph 86 may be calculated.
  • each of the seventh sub-graph 87, the eighth sub-graph 88, and the ninth sub-graph 89 is a gyro sensor unit 231 and a second sensor unit 232 respectively.
  • it may be a graph representing sensing values of the acquired sensing data.
  • the first control unit 217 of the first attaching/detaching module 210 is a sensing value of the first X-axis data rX expressed in the seventh sub-graph 87, and the eighth sub-graph.
  • a first sum value of each of the sensing values of the first Y-axis data rY expressed in (88) and the first Z-axis data rZ expressed in the ninth sub-graph 89 may be calculated.
  • the first control unit 217 of the first attaching/detaching module 210 is a sensing value of the second X-axis data lX expressed in the seventh sub-graph 87 and the first control unit 217 expressed in the eighth sub-graph 88.
  • a second sum value of each of the sensing values of the 2 Y-axis data lY and the sensing values of the second Z-axis data lZ expressed in the ninth sub-graph 89 may be calculated.
  • the first control unit 217 of the first attaching/detaching module 210 may divide the time point at which the sensing data is acquired through the sensor unit into at least two sections.
  • the first control unit 217 may be divided into a first section in which the horizontal axis (when sensing data is acquired through the sensor unit) is 0 to 50 and a second section in which the horizontal axis is 51 to 100.
  • the first sensing data and the first sensor 231 are acceleration sensors when the first sensor 231 is a gyro sensor.
  • a first sum value may be calculated by fusing the first sensing data acquired in the second section.
  • the first control unit 217 includes the second sensing data acquired in the first section and the second sensor unit 232 being an acceleration sensor when the second sensor unit 232 is a gyro sensor.
  • a second sum value may be calculated by fusing the second sensing data acquired in the second section.
  • the first control unit 217 may generate change amount data by calculating an absolute value of a result of subtracting the second sum value from the first sum value.
  • the first control unit 217 generates change amount data based on sensing data acquired through a gyro sensor in order to increase the accuracy of the change amount data, and the change amount based on sensing data of the acceleration sensor. After creating the data, you can fuse the two variance data.
  • the first control unit 217 of the first attaching/detaching module 210 calculates a first sum value of the first sensing data obtained when the first sensor unit 231 is an acceleration sensor, and the second sensor unit ( When 232 is an acceleration sensor, a second sum value of the acquired second sensing data may be calculated. Also, the first control unit 217 may generate first change amount data by calculating an absolute value of a result of subtracting the second sum value from the first sum value.
  • the first controller 217 of the first attaching/detaching module 210 calculates a first sum value of the first sensing data acquired when the first sensor unit 231 is a gyro sensor, and the second sensor unit 232 When) is a gyro sensor, a second sum value of the acquired second sensing data may be calculated. Also, the first control unit 217 may generate second change amount data by calculating an absolute value of a result of subtracting the second sum value from the first sum value.
  • the first control unit 217 may divide the time point at which the sensing data is acquired through the sensor unit into at least two sections in order to increase the accuracy of the change amount data.
  • the first control unit 217 may be divided into a first section in which the horizontal axis (when sensing data is acquired through the sensor unit) is 0 to 100 and a second section in which the horizontal axis is 101 to 200.
  • the first control unit 217 may generate variance data with high accuracy by fusing data of a first section of the second variation data and data of a second section of the first variation data.
  • the first control unit 217 of the first attaching/detaching module 210 may use a Kalman filter to remove noise of the change amount data.
  • the Kalman filter is a recursive filter that tracks a mechanical state including noise, and is based on measurements made over time.
  • Kalman filtering is an optimal state estimation process applied to a dynamic system including irregular external disturbances, and the Kalman filter is an iterative algorithm for optimally estimating unknown state variables of the dynamic system from noise-bearing data measured at discrete real-time intervals.
  • the Kalman filtering procedure performed by the first control unit 217 is designed to estimate state variables in a linear model, linearization must be performed in the process of deriving a filtering equation for variance data, which is a nonlinear model.
  • the first control unit 217 performs real-time linear Taylor approximation from the previously estimated state variable, and may remove noise for the change amount data by using an Extended Kalman filter obtained here.
  • FIG. 12 is a diagram for explaining an example of wearing glasses for monitoring the user's temporal muscles according to some embodiments of the present disclosure.
  • the sensor unit of the eyeglasses 100 for monitoring the user's temporal muscle may detect a change in the user's temporal muscle when the user wears the eyeglasses.
  • the first sensor unit 231 of the first detachable module 210 may be located on a first side of the user's temporal muscles.
  • the second sensor unit 232 of the first detachable module 210 may be located on a second side opposite to the first side. Accordingly, each of the first sensor unit 231 and the second sensor unit 232 may detect a change amount of the user's temporal muscle.
  • the first attaching/detaching module 210 may include an accommodation space of the first sensor unit 231. Specifically, each of the first sensor unit 231 and the second sensor unit 232 may be spaced apart to create an accommodation space for the first detachable module 210.
  • the first sensor unit 231 provided on the first side of the first attaching and detaching module 210 in contact with the user's temporal muscle moves, when the user's temporal muscle moves, the accommodation space of the first attaching and detaching module 210 (the first The sensor unit 231 and the second sensor unit 232 are spaced apart from each other and are accommodated in an existing space), so that the position may be changed.
  • the second sensor unit 232 provided on the second side facing the first side without contacting the user's temporal muscles on the first attaching and detaching module 210 does not change the position even if the user’s temporal muscles move. I can.
  • the first sensor unit 231 when the first sensor unit 231 is accommodated in the accommodation space of the first detachable module 210 when the user's temporal muscle moves, the first sensor unit 231 when the user's temporal muscle moves. ) Only moves and the second sensor unit 232 does not move, the absolute value of the subtraction value of the second sum value from the first sum value calculated by the first controller 217 of the first attaching/detaching module 210 It can grow. Accordingly, the first control unit 217 may extract the authored exercise data by extracting only when the absolute value is equal to or greater than the threshold value.
  • the detachable module 200 may be located in a region behind the auricle of the user's ear.
  • the first output unit 212 of the first detachable module 210 may be disposed to face the rear of the user's auricle.
  • the first output unit 212 of the first detachable module 210 may be in close contact with a region of the rear of the auricle of the first ear E10 of the user.
  • the user may be provided with a clearer and improved sound quality.
  • the user can simultaneously receive ambient noise to prevent safety accidents and prevent a hearing loss by not directly affecting the eardrum.
  • the detachable module 200 may include a rail structure therein.
  • an output unit may be provided on the rail structure of the detachable module 200.
  • the position of the output unit may be adjusted according to the shape of the user's ear. Therefore, the user can use the glasses 100 to monitor the user's temporal muscles regardless of the shape of the ear.
  • FIG. 13 is a view for explaining an example of sensing data measured by a sensor unit and a method in which glasses for monitoring a user's temporal muscles are converted to a hands-free mode through movement of the temporal muscles according to some embodiments of the present disclosure .
  • the first control unit 217 of the first attaching/detaching module 210 may recognize that the user's temporal muscles maintain a contracted state for a predetermined time or longer through the sensor unit.
  • the first control unit 217 of the first attaching/detaching module 210 may switch to the hands-free mode when it recognizes that the user's temporal muscles maintain the contraction state for a predetermined time or longer.
  • the first control unit 217 of the first attaching/detaching module 210 compares the change amount data and the mastication threshold data to extract the user's mastication exercise data, When it is recognized that the contraction has been maintained for a predetermined time (eg, 3 seconds) or more, it is possible to switch to the handsfree mode.
  • a predetermined time eg, 3 seconds
  • the glasses 100 for monitoring the user's temporal muscles are switched to the hands-free mode by the first control unit 217, the user has a voice receiver (not shown) of the first detachable module 210 Si) and the first output unit 212 may perform a voice call.
  • the first controller 217 may control the voice call function of the user terminal by communicating with the user terminal in a short distance based on the movement of the user's temporal muscles.
  • the first control unit 217 can detect this and receive a call from the user terminal, and the user's temporal muscle is maintained in a contracted state for more than 3 seconds. Then, the first control unit 217 may detect this and terminate the incoming call to the user terminal.
  • the first control unit 217 detects the movement of the user's temporal muscles. Thus, a picture can be taken and stored through the camera unit (not shown) of the user terminal.
  • the first control unit 217 may perform short-range communication with the user terminal 300 through the first communication unit 216. For example, when the glasses 100 for monitoring the user's temporal muscles are in the hands-free mode and there is no incoming call to the user terminal 300, the first control unit 217 May take a picture through the camera of the user terminal 300.
  • the functions of the hands-free mode of the glasses 100 for monitoring the user's temporal muscles are not limited to the above-described functions, and may include more functions.
  • the first control unit 217 of the first detachable module 210 switches to the hands-free mode and performs various functions of the hands-free mode, it is not limited thereto, and the second detachable module ( The second control unit 220 may also perform the same function as the first control unit 217 described above.
  • FIG. 14 shows a simplified and general schematic diagram of an exemplary computing environment in which some embodiments of the present disclosure may be implemented.
  • modules herein include routines, procedures, programs, components, data structures, etc. that perform particular tasks or implement particular abstract data types.
  • the method of the present disclosure is not limited to single-processor or multiprocessor computer systems, minicomputers, mainframe computers, as well as personal computers, handheld computing devices, microprocessor-based or programmable household appliances, and the like (each of which It will be appreciated that it may be implemented with other computer system configurations, including one or more associated devices).
  • the described embodiments of the present disclosure may also be practiced in a distributed computing environment where certain tasks are performed by remote processing devices that are connected through a communication network.
  • program modules may be located in both local and remote memory storage devices.
  • Computers typically include a variety of computer-readable media.
  • Computer-readable media can be any computer-readable media, including volatile and non-volatile media, transitory and non-transitory media, removable and non-transitory media. Includes removable media.
  • Computer-readable media may include computer-readable storage media and computer-readable transmission media.
  • Computer-readable storage media include volatile and nonvolatile media, transitory and non-transitory media, removable and non-removable media implemented in any method or technology for storing information such as computer-readable instructions, data structures, program modules or other data. Includes the medium.
  • Computer storage media include RAM, ROM, EEPROM, flash memory or other memory technology, CD-ROM, digital video disk (DVD) or other optical disk storage device, magnetic cassette, magnetic tape, magnetic disk storage device, or other magnetic storage device, Or any other medium that can be accessed by a computer and used to store desired information.
  • Computer-readable storage media include volatile and nonvolatile media, transitory and non-transitory media, removable and non-removable media implemented in any method or technology for storing information such as computer-readable instructions, data structures, program modules or other data. Includes the medium.
  • Computer-readable storage media include RAM, ROM, EEPROM, flash memory or other memory technology, CD-ROM, digital video disk (DVD) or other optical disk storage, magnetic cassette, magnetic tape, magnetic disk storage, or other magnetic storage. Devices, or any other medium that can be accessed by a computer and used to store desired information.
  • Computer-readable transmission media typically implement computer-readable instructions, data structures, program modules or other data on a modulated data signal such as a carrier wave or other transport mechanism. Includes all information delivery media.
  • modulated data signal refers to a signal in which one or more of the characteristics of the signal is set or changed to encode information in the signal.
  • computer-readable transmission media include wired media such as a wired network or direct-wired connection, and wireless media such as acoustic, RF, infrared, and other wireless media. Combinations of any of the above-described media are also intended to be included within the scope of computer-readable transmission media.
  • System bus 1508 couples system components, including, but not limited to, system memory 1506 to processing unit 1504.
  • the processing unit 1504 may be any of a variety of commercially available processors. Dual processors and other multiprocessor architectures may also be used as processing unit 1504.
  • the system bus 1508 may be any of several types of bus structures that may be additionally interconnected to a memory bus, a peripheral bus, and a local bus using any of a variety of commercial bus architectures.
  • System memory 1506 includes read-only memory (ROM) 1510 and random access memory (RAM) 1512.
  • the basic input/output system (BIOS) is stored in nonvolatile memory 1510 such as ROM, EPROM, EEPROM, etc. This BIOS is a basic input/output system that helps transfer information between components in the computer 1502, such as during startup. Includes routines.
  • RAM 1512 may also include high-speed RAM, such as static RAM, for caching data.
  • Computer 1502 also includes an internal hard disk drive (HDD) 1514 (e.g., EIDE, SATA)—this internal hard disk drive 1514 can also be configured for external use within a suitable chassis (not shown).
  • HDD hard disk drive
  • FDD magnetic floppy disk drive
  • optical disk drive 1520 e.g., CD-ROM
  • the disc 1522 is for reading or reading from or writing to other high-capacity optical media such as DVD).
  • the hard disk drive 1514, the magnetic disk drive 1516, and the optical disk drive 1520 are each connected to the system bus 1508 by a hard disk drive interface 1524, a magnetic disk drive interface 1526, and an optical drive interface 1528. ) Can be connected.
  • the interface 1524 for implementing an external drive includes, for example, at least one or both of USB (Universal Serial Bus) and IEEE 1394 interface technologies.
  • drives and their associated computer readable media provide non-volatile storage of data, data structures, computer executable instructions, and the like.
  • drives and media correspond to storing any data in a suitable digital format.
  • the description of the computer-readable storage medium above refers to a removable optical medium such as a HDD, a removable magnetic disk, and a CD or DVD, those skilled in the art may include a zip drive, a magnetic cassette, a flash memory card, a cartridge, It will be appreciated that other types of computer-readable storage media, such as etc., may also be used in the exemplary operating environment and that any such media may contain computer-executable instructions for performing the methods of the present disclosure. .
  • a number of program modules including an operating system 1530, one or more application programs 1532, other program modules 1534, and program data 1536, may be stored in the drive and RAM 1512. All or part of the operating system, applications, modules, and/or data may also be cached in RAM 1512. It will be appreciated that the present disclosure may be implemented on a number of commercially available operating systems or combinations of operating systems.
  • a user may input commands and information into the computer 1502 through one or more wired/wireless input devices, for example, pointing devices such as a keyboard 1538 and a mouse 1540.
  • Other input devices may include a microphone, IR remote control, joystick, game pad, stylus pen, touch screen, and the like.
  • These and other input devices are often connected to the processing unit 1504 through an input device interface 1542 that is connected to the system bus 1508, but the parallel port, IEEE 1394 serial port, game port, USB port, IR interface, It can be connected by other interfaces such as etc.
  • a monitor 1544 or other type of display device is also connected to the system bus 1508 via an interface such as a video adapter 1546.
  • the computer generally includes other peripheral output devices (not shown) such as speakers, printers, etc.
  • Computer 1502 may operate in a networked environment using logical connections to one or more remote computers, such as remote computer(s) 1548, via wired and/or wireless communication.
  • the remote computer(s) 1548 may be a workstation, server computer, router, personal computer, portable computer, microprocessor-based entertainment device, peer device, or other common network node, and is generally referred to as computer 1502. Although including many or all of the described components, for simplicity, only memory storage device 1550 is shown.
  • the logical connections shown include wired/wireless connections to a local area network (LAN) 1552 and/or a larger network, for example, a wide area network (WAN) 1554.
  • LAN and WAN networking environments are common in offices and companies, and facilitate an enterprise-wide computer network such as an intranet, all of which can be connected to a worldwide computer network, for example the Internet.
  • the computer 1502 When used in a LAN networking environment, the computer 1502 is connected to the local network 1552 via a wired and/or wireless communication network interface or adapter 1556. Adapter 1556 may facilitate wired or wireless communication to LAN 1552, which LAN 1552 also includes a wireless access point installed therein to communicate with wireless adapter 1556.
  • the computer 1502 When used in a WAN networking environment, the computer 1502 may include a modem 1558, connected to a communication server on the WAN 1554, or other means of establishing communication over the WAN 1554, such as through the Internet. Has. Modem 1558, which may be an internal or external and wired or wireless device, is connected to the system bus 1508 through a serial port interface 1542.
  • program modules described for the computer 1502 or portions thereof may be stored in the remote memory/storage device 1550. It will be appreciated that the network connections shown are exemplary and other means of establishing communication links between computers may be used.
  • Computer 1502 is associated with any wireless device or entity deployed and operated in wireless communication, e.g., a printer, scanner, desktop and/or portable computer, portable data assistant (PDA), communications satellite, wireless detectable tag. It operates to communicate with any device or place and phone. This includes at least Wi-Fi and Bluetooth wireless technologies. Thus, the communication may be a predefined structure as in a conventional network or may simply be ad hoc communication between at least two devices.
  • wireless communication e.g., a printer, scanner, desktop and/or portable computer, portable data assistant (PDA), communications satellite, wireless detectable tag. It operates to communicate with any device or place and phone. This includes at least Wi-Fi and Bluetooth wireless technologies.
  • the communication may be a predefined structure as in a conventional network or may simply be ad hoc communication between at least two devices.
  • Wi-Fi Wireless Fidelity
  • Wi-Fi is a wireless technology such as a cell phone that allows such devices, for example computers, to transmit and receive data indoors and outdoors, ie anywhere within the coverage area of a base station.
  • Wi-Fi networks use a wireless technology called IEEE 802.11 (a,b,g, etc.) to provide a secure, reliable and high-speed wireless connection.
  • Wi-Fi can be used to connect computers to each other, to the Internet, and to a wired network (using IEEE 802.3 or Ethernet).
  • Wi-Fi networks can operate in unlicensed 2.4 and 5 GHz radio bands, for example at 11 Mbps (802.11a) or 54 Mbps (802.11b) data rates, or in products that include both bands (dual band). have.
  • a person of ordinary skill in the art of the present disclosure includes various exemplary logical blocks, modules, processors, means, circuits and algorithm steps described in connection with the embodiments disclosed herein, electronic hardware, (convenience). For the sake of clarity, it will be appreciated that it may be implemented by various forms of program or design code or a combination of both (referred to herein as "software"). To clearly illustrate this interchangeability of hardware and software, various illustrative components, blocks, modules, circuits and steps have been described above generally in terms of their functionality. Whether such functionality is implemented as hardware or software depends on the particular application and design constraints imposed on the overall system. Those of ordinary skill in the art of the present disclosure may implement the described functions in various ways for each specific application, but such implementation decisions should not be interpreted as being outside the scope of the present disclosure.
  • the various embodiments presented herein may be implemented as a method, apparatus, or article of manufacture using standard programming and/or engineering techniques.
  • article of manufacture includes a computer program, carrier, or media accessible from any computer-readable device.
  • computer-readable storage media include magnetic storage devices (e.g., hard disks, floppy disks, magnetic strips, etc.), optical disks (e.g., CD, DVD, etc.), smart cards, and flash Memory devices (eg, EEPROMs, cards, sticks, key drives, etc.), but are not limited thereto.
  • machine-readable medium includes, but is not limited to, wireless channels and various other media capable of storing, holding, and/or transmitting instruction(s) and/or data.
  • the present disclosure relates to glasses and a computer program that monitors the user's temporal muscles, and more particularly, to glasses and a computer program that monitors the user's temporal muscles through a sensor provided in an attaching/detaching module of the glasses.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Physics & Mathematics (AREA)
  • Public Health (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Dentistry (AREA)
  • Orthopedic Medicine & Surgery (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Rheumatology (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

본 개시의 몇몇 실시예에 따른, 사용자의 측두근을 모니터링하는 안경이 개시된다. 상기 안경은: 렌즈 프레임; 상기 렌즈 프레임의 양측에 회동 가능하게 힌지로 연결되는 제 1 템플 및 제 2 템플; 및 상기 제 1 템플의 일단에 착탈되는 제 1 착탈 모듈; 상기 제 2 템플의 일단에 착탈되는 제 2 착탈 모듈; 사용자의 측두근과 접하는 상기 제 1 착탈 모듈의 제 1 측면에 구비되어 제 1 센싱 데이터를 획득하는 제 1 센서부; 및 상기 측두근과 접하지 않고 상기 제 1 착탈 모듈의 상기 제 1 측면에 대향하는 제 2 측면에 구비되어 제 2 센싱 데이터를 획득하는 제 2 센서부;를 포함할 수 있다.

Description

사용자의 측두근을 모니터링하는 안경 및 컴퓨터 프로그램
본 개시는 사용자의 측두근을 모니터링하는 안경 및 컴퓨터 프로그램에 관한 것으로, 보다 구체적으로 안경의 착탈 모듈에 구비된 센서를 통해 사용자의 측두근을 모니터링하는 안경 및 컴퓨터 프로그램에 관한 것이다.
건강과 관련하여 음식물을　저작(mastication)과 관련된 식습관은 치아 건강뿐만 아니라 소화 기능에도 밀접한 관련이 존재한다. 구체적으로, 음식물을 잘게　저작하여야 위 기능이 원활히 수행될 수 있으며, 알파 아밀라아제는 저작 운동을 올바르게 하지 않으면 분비되지 않으므로 적절한 저작 횟수로 음식물을　섭취하는 것은 매우 중요하다.
한편, 침샘에서 분비되는 페로틴이라는 호르몬은 뼈와 치아 조직을 튼튼하게 하는 노화 방지 효과를 발생시킨다. 이러한 페로틴은 음식물의 저작 횟수가 많아질수록 분비량이 증가한다.
이러한 사용자의 식습관(저작 운동)을 측정 및 분석하기 위한 다양한 장치들이 개발되어지고 있다. 하지만, 종래의 식습관 분석 기기들은 사용자의 볼 쪽에 위치한 깨물근(교근)을 기반으로 식습관을 분석한다. 하지만, 이는 말을 할 때 깨물근의 수축정도와 음식을 저작할 때 수축정도를 구분하기 어렵기 때문에, 관측자 혹은 카메라를 통해서 말을 할 때와 음식을 저작할 때를 구별해야 하는 번거로움이 존재한다.
또한, 깨물근(교근)에 압전 센서 또는 근전도 센서를 위치하게 될 경우, 미관상 착용이 부담스럽고, 식사를 하는 데에 있어서 불편함이 존재한다.
따라서, 사용자가 일상에서 불편함없이 착용할 수 있으며, 사용자의 측두근을 감지해 발화운동과 저작운동을 정확하게 구분하고, 식습관을 파악해 사용자가 올바른 식습관을 함양하도록 피드백할 수 있는 수단이 필요하다.
선행기술 문헌으로 대한민국 공개특허공보 제10-2017-0026915호가 존재한다.
본 개시는 전술한 배경기술에 대응하여 안출된 것으로, 안경의 착탈 모듈에 구비된 센서를 통해 사용자의 측두근을 모니터링하는 안경 및 컴퓨터 프로그램을 제공하는 것을 목적으로 한다.
본 개시의 기술적 과제들은 이상에서 언급한 기술적 과제로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
전술한 바와 같은 과제를 해결하기 위한 본 개시의 몇몇 실시예에 따라, 사용자의 측두근을 모니터링하는 안경이 개시된다. 상기 안경은: 렌즈 프레임; 상기 렌즈 프레임의 양측에 회동 가능하게 힌지로 연결되는 제 1 템플 및 제 2 템플; 및 상기 제 1 템플의 일단에 착탈되는 제 1 착탈 모듈; 상기 제 2 템플의 일단에 착탈되는 제 2 착탈 모듈; 사용자의 측두근과 접하는 상기 제 1 착탈 모듈의 제 1 측면에 구비되어 제 1 센싱 데이터를 획득하는 제 1 센서부; 및 상기 측두근과 접하지 않고 상기 제 1 착탈 모듈의 상기 제 1 측면에 대향하는 제 2 측면에 구비되어 제 2 센싱 데이터를 획득하는 제 2 센서부;를 포함할 수 있다.
또한, 상기 안경은, 상기 제 1 센싱 데이터 및 상기 제 2 센싱 데이터에 기초하여, 변화량 데이터를 생성하는 제어부;를 더 포함할 수 있다.
또한, 상기 제어부는, 상기 제 1 센싱 데이터에 포함된 제 1 X 축 데이터, 제 1 Y 축 데이터 및 제 1 Z 축 데이터를 합산한 제 1 합산 값을 산출하고, 상기 제 2 센싱 데이터에 포함된 제 2 X 축 데이터, 제 2 Y 축 데이터 및 제 2 Z 축 데이터를 합산한 제 2 합산 값을 산출하고, 상기 제 1 합산 값 및 상기 제 2 합산 값에 기초하여 상기 변화량 데이터를 생성하고, 상기 변화량 데이터는, 상기 제 1 합산 값에서 상기 제 2 합산 값을 감산한 결과 값의 절대 값일 수 있다.
또한, 상기 안경은, 저작 운동 데이터를 획득하기 위한 저작 임계 데이터를 저장하는 메모리;를 더 포함하고, 상기 제어부는, 상기 변화량 데이터 및 상기 저작 임계 데이터에 기초하여, 저작 운동 데이터를 획득할 수 있다.
또한, 상기 제 1 센서부 및 상기 제 2 센서부 각각은, X 축, Y 축 및 Z 축 각각의 직선 운동과 관련된 이동 방향, 이동 거리 및 속도를 측정하여, 상기 제 1 센싱 데이터 및 상기 제 2 센싱 데이터를 획득할 수 있다.
또한, 상기 제 1 센서부 및 상기 제 2 센서부 각각은, 상기 X 축, 상기 Y 축 및 상기 Z 축 각각의 회전 운동과 관련된 각속도를 더 측정하여, 상기 제 1 센싱 데이터 및 상기 제 2 센싱 데이터를 획득할 수 있다.
또한, 상기 제 1 센서부 및 상기 제 2 센서부 각각은, 상기 X 축, 상기 Y 축 및 상기 Z 축 각각에 대응하는 자계의 크기 및 방향을 더 측정하여, 상기 제 1 센싱 데이터 및 상기 제 2 센싱 데이터를 획득할 수 있다.
또한, 상기 안경은, 상기 사용자의 측두근과 접하는 상기 제 2 착탈 모듈의 제 3 측면에 구비되어 제 3 센싱 데이터를 획득하는 제 3 센서부; 및 상기 측두근과 접하지 않고 상기 제 2 착탈 모듈의 상기 제 3 측면에 대향하는 제 4 측면에 구비되어 제 4 센싱 데이터를 획득하는 제 4 센서부;를 더 포함할 수 있다.
또한, 상기 제어부는, 상기 저작 운동 데이터에 기초하여 식습관 정보를 생성하고, 상기 식습관 정보를 사용자 단말기로 전송하도록 통신부를 제어하고, 상기 식습관 정보는, 저작 속도, 저작 횟수 및 저작 강도 중 적어도 하나를 포함할 수 있다.
또한, 상기 메모리는, 권장 식습관 정보를 더 저장하고, 상기 권장 식습관 정보는, 권장 저작 속도, 권장 저작 횟수 및 권장 저작 강도 중 적어도 하나를 포함할 수 있다.
또한, 상기 안경은, 상기 제 1 템플 및 상기 제 2 템플 각각이 사용자의 양쪽 귀에 걸쳐진 상태에서 상기 사용자의 귀의 귓바퀴 후면의 일 영역에 밀착되고, 음향 신호를 상기 사용자에게 전달하는 출력부;를 더 포함하고, 상기 제어부는, 상기 식습관 정보 및 상기 권장 식습관 정보를 비교하여 비교 데이터를 산출하고, 상기 비교 데이터에 기초하여, 상기 음향 신호의 출력 여부를 결정하고, 상기 음향 신호의 출력 여부에 따라, 상기 음향 신호를 출력하도록 상기 출력부를 제어할 수 있다.
또한, 상기 안경은, 사용자 단말기로 상기 제 1 센싱 데이터 및 상기 제 2 센싱 데이터를 전송하고, 상기 사용자 단말기로부터 상기 센싱 데이터에 대응하는 피드백 신호를 수신하는 통신부; 및 상기 사용자 단말기로부터 수신한 상기 피드백 신호에 기초하여, 음향 신호를 상기 사용자에게 전달하는 출력부;를 더 포함할 수 있다.
전술한 바와 같은 과제를 해결하기 위한 본 개시의 몇몇 실시예에 따라, 컴퓨터 판독가능 저장 매체에 저장된 컴퓨터 프로그램이 개시된다. 상기 컴퓨터 프로그램은 사용자 단말기로 하여금 이하의 동작들을 수행하기 위한 명령들을 포함하며, 상기 동작들은: 상기 사용자가 착용한 웨어러블 디바이스로부터 제 1 센싱 데이터 및 제 2 센싱 데이터를 수신하는 동작; 및 상기 제 1 센싱 데이터 및 상기 제 2 센싱 데이터에 기초하여, 변화량 데이터를 생성하는 동작;을 포함하고, 상기 제 1 센싱 데이터는, 상기 웨어러블 디바이스에서 상기 사용자의 측두근과 접하는 제 1 착탈 모듈의 제 1 측면에 구비된 제 1 센서부가 획득한 데이터이고, 상기 제 2 센싱 데이터는, 상기 웨어러블 디바이스에서 상기 사용자의 측두근과 접하지 않고, 상기 제 1 측면에 대향하는 제 2 측면에 구비된 제 2 센서부가 획득한 데이터일 수 있다.
또한, 상기 변화량 데이터를 생성하는 동작은, 상기 제 1 센싱 데이터에 포함된 제 1 X 축 데이터, 제 1 Y 축 데이터 및 제 1 Z 축 데이터를 합산한 제 1 합산 값을 산출하는 동작; 상기 제 2 센싱 데이터에 포함된 제 2 X 축 데이터, 제 2 Y 축 데이터 및 제 2 Z 축 데이터를 합산한 제 2 합산 값을 산출하는 동작; 및 상기 제 1 합산 값 및 상기 제 2 합산 값에 기초하여 상기 변화량 데이터를 생성하는 동작;을 포함하고, 상기 변화량 데이터는, 상기 제 1 합산 값에서 상기 제 2 합산 값을 감산한 결과 값의 절대 값일 수 있다.
또한, 상기 동작들은, 상기 변화량 데이터 및 상기 사용자 단말기의 메모리에 사전 저장된 저작 임계 데이터에 기초하여 저작 운동 데이터를 획득하는 동작;을 더 포함할 수 있다.
또한, 상기 동작들은, 상기 저작 운동 데이터에 기초하여 식습관 정보를 생성하는 동작; 및 상기 식습관 정보를 화면으로 출력하는 동작;을 더 포함하고, 상기 식습관 정보는, 저작 속도, 저작 횟수 및 저작 강도 중 적어도 하나를 포함할 수 있다.
도한, 상기 동작들은, 상기 식습관 정보 및 상기 사용자 단말기의 메모리에 사전 저장된 권장 식습관 정보를 비교하여 비교 데이터를 산출하는 동작; 상기 비교 데이터에 기초하여, 피드백 신호의 전송 여부를 결정하는 동작; 및 상기 피드백 신호의 전송 여부에 따라, 상기 피드백 신호에 대응하는 음향 신호가 상기 웨어러블 디바이스에서 출력되도록 상기 피드백 신호를 상기 웨어러블 디바이스로 전송하는 동작; 을 더 포함하고, 상기 권장 식습관 정보는, 권장 저작 속도, 권장 저작 횟수 및 권장 저작 강도 중 적어도 하나를 포함할 수 있다.
본 개시에서 얻을 수 있는 기술적 해결 수단은 이상에서 언급한 해결 수단들로 제한되지 않으며, 언급하지 않은 또 다른 해결 수단들은 아래의 기재로부터 본 개시가 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
본 개시는 안경의 착탈 모듈에 구비된 센서를 통해 사용자의 측두근을 모니터링하여 저작 운동을 인식하고, 인식된 저작 운동에 기초한 피드백을 제공할 수 있다.
본 개시에서 얻을 수 있는 효과는 이상에서 언급한 효과로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 개시가 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
다양한 양상들이 이제 도면들을 참조로 기재되며, 여기서 유사한 참조 번호들은 총괄적으로 유사한 구성요소들을 지칭하는데 이용된다. 이하의 실시예에서, 설명 목적을 위해, 다수의 특정 세부사항들이 하나 이상의 양상들의 총체적 이해를 제공하기 위해 제시된다. 그러나, 그러한 양상(들)이 이러한 구체적인 세부사항들 없이 실시될 수 있음은 명백할 것이다.
도 1은 본 개시의 몇몇 실시예에 따른 사용자의 측두근을 모니터링 하는 안경에 포함된 착탈 모듈의 블록 구성도이다.
도 2는 본 개시의 몇몇 실시예에 따른 착탈 모듈이 결합된 사용자의 측두근을 모니터링하는 안경의 일례를 일 방향에서 바라본 개념도이다.
도 3은 본 개시의 몇몇 실시예에 따른 사용자의 측두근을 모니터링하는 안경의 템플과 착탈 모듈이 분리된 일례를 설명하기 위한 도면이다.
도 4는 본 개시의 몇몇 실시예에 따른 사용자의 측두근을 모니터링하는 안경이 변화량 데이터 및 저작 임계 데이터에 기초하여 저작 운동 데이터를 획득하는 방법의 일례를 설명하기 위한 흐름도이다.
도 5는 본 개시의 몇몇 실시예에 따른 사용자의 측두근을 모니터링하는 안경이 식습관 정보에 기초하여 음향 신호를 출력하는 방법의 일례를 설명하기 위한 흐름도이다.
도 6은 본 개시의 몇몇 실시예에 따른 사용자 단말기가 변화량 데이터 및 저작 임계 데이터에 기초하여 저작 운동 데이터를 획득하는 방법의 일례를 설명하기 위한 흐름도이다.
도 7은 본 개시의 몇몇 실시예에 따른 사용자 단말기가 피드백 신호를 웨어러블 디바이스로 전송하는 방법의 일례를 설명하기 위한 흐름도이다.
도 8은 본 개시의 몇몇 실시예에 따른 사용자의 측두근을 모니터링하는 안경의 착탈 모듈에 구비된 센서부의 위치를 설명하기 위한 도면이다.
도 9는 본 개시의 몇몇 실시예에 따른 센서부가 사용자의 측두근이 이완 및 수축함에 따라 저작 운동을 인식하는 일례를 설명하기 위한 도면이다.
도 10은 본 개시의 몇몇 실시예에 따른 변화량 데이터의 일례를 설명하기 위한 도면이다.
도 11은 본 개시의 몇몇 실시예에 따른 변화량 데이터의 다른 일례를 설명하기 위한 도면이다.
도 12는 본 개시의 몇몇 실시예에 따른 사용자의 측두근을 모니터링하는 안경을 사용자가 착용한 일례를 설명하기 위한 도면이다.
도 13은 본 개시의 몇몇 실시예에 따른 사용자의 측두근을 모니터링 하는 안경이 측두근의 움직임을 통해 핸즈프리(hands-free) 모드로 전환되는 방법 및 센서부가 측정한 센싱 데이터의 일례를 설명하기 위한 도면이다.
도 14는 본 개시의 몇몇 실시예들이 구현될 수 있는 예시적인 컴퓨팅 환경에 대한 간략하고 일반적인 개략도를 도시한다.
다양한 실시예들 및/또는 양상들이 이제 도면들을 참조하여 개시된다. 하기 설명에서는 설명을 목적으로, 하나 이상의 양상들의 전반적 이해를 돕기 위해 다수의 구체적인 세부사항들이 개시된다. 그러나, 이러한 양상(들)은 이러한 구체적인 세부사항들 없이도 실행될 수 있다는 점 또한 본 개시의 기술 분야에서 통상의 지식을 가진 자에게 감지될 수 있을 것이다. 이후의 기재 및 첨부된 도면들은 하나 이상의 양상들의 특정한 예시적인 양상들을 상세하게 기술한다. 하지만, 이러한 양상들은 예시적인 것이고 다양한 양상들의 원리들에서의 다양한 방법들 중 일부가 이용될 수 있으며, 기술되는 설명들은 그러한 양상들 및 그들의 균등물들을 모두 포함하고자 하는 의도이다. 구체적으로, 본 명세서에서 사용되는 "실시예", "예", "양상", "예시" 등은 기술되는 임의의 양상 또는 설계가 다른 양상 또는 설계들보다 양호하다거나, 이점이 있는 것으로 해석되지 않을 수도 있다.
이하, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략한다. 또한, 본 명세서에 개시된 실시예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않는다.
본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 개시를 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소 외에 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다.
비록 제1, 제2 등이 다양한 소자나 구성요소들을 서술하기 위해서 사용되나, 이들 소자나 구성요소들은 이들 용어에 의해 제한되지 않음은 물론이다. 이들 용어들은 단지 하나의 소자나 구성요소를 다른 소자나 구성요소와 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 소자나 구성요소는 본 개시의 기술적 사상 내에서 제2 소자나 구성요소 일 수도 있음은 물론이다.
다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 개시가 속하는 기술분야에서 통상의 지식을 가진 자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.
더불어, 용어 "또는"은 배타적 "또는"이 아니라 내포적 "또는"을 의미하는 것으로 의도된다. 즉, 달리 특정되지 않거나 문맥상 명확하지 않은 경우에, "X는 A 또는 B를 이용한다"는 자연적인 내포적 치환 중 하나를 의미하는 것으로 의도된다. 즉, X가 A를 이용하거나; X가 B를 이용하거나; 또는 X가 A 및 B 모두를 이용하는 경우, "X는 A 또는 B를 이용한다"가 이들 경우들 어느 것으로도 적용될 수 있다. 또한, 본 명세서에 사용된 "및/또는"이라는 용어는 열거된 관련 아이템들 중 하나 이상의 아이템의 가능한 모든 조합을 지칭하고 포함하는 것으로 이해되어야 한다.
더불어, 본 명세서에서 사용되는 용어 "정보" 및 "데이터"는 종종 서로 상호교환 가능하도록 사용될 수 있다.
어떤 구성 요소가 다른 구성 요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성 요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성 요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성 요소가 다른 구성 요소에 "직접 연결되어" 있다거나 "직접 접속되어"있다고 언급된 때에는, 중간에 다른 구성 요소가 존재하지 않는 것으로 이해되어야 할 것이다.
이하의 설명에서 사용되는 구성 요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.
구성 요소(elements) 또는 층이 다른 구성 요소 또는 층의 "위(on)" 또는 "상(on)"으로 지칭되는 것은 다른 구성 요소 또는 층의 바로 위뿐만 아니라 중간에 다른 층 또는 다른 구성 요소를 개재한 경우를 모두 포함한다. 반면, 구성 요소가 "직접 위(directly on)" 또는 "바로 위"로 지칭되는 것은 중간에 다른 구성 요소 또는 층을 개재하지 않은 것을 나타낸다.
공간적으로 상대적인 용어인 "아래(below)", "아래(beneath)", "하부(lower)", "위(above)", "상부(upper)" 등은 도면에 도시되어 있는 바와 같이 하나의 구성 요소 또는 다른 구성 요소들과의 상관관계를 용이하게 기술하기 위해 사용될 수 있다. 공간적으로 상대적인 용어는 도면에 도시되어 있는 방향에 더하여 사용시 또는 동작시 소자의 서로 다른 방향을 포함하는 용어로 이해되어야 한다.
예를 들면, 도면에 도시되어 있는 구성 요소를 뒤집을 경우, 다른 구성 요소의 "아래(below)" 또는 "아래(beneath)"로 기술된 구성 요소는 다른 구성 요소의 "위(above)"에 놓여질 수 있다. 따라서, 예시적인 용어인 "아래"는 아래와 위의 방향을 모두 포함할 수 있다. 구성 요소는 다른 방향으로도 배향될 수 있고, 이에 따라 공간적으로 상대적인 용어들은 배향에 따라 해석될 수 있다.
본 개시의 목적 및 효과, 그리고 그것들을 달성하기 위한 기술적 구성들은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 본 개시를 설명하는데 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 개시의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 개시에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다.
그러나 본 개시는 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있다. 단지 본 실시예들은 본 개시가 완전하도록 하고, 본 개시가 속하는 기술분야에서 통상의 지식을 가진 자에게 개시의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 개시는 청구항의 범주에 의해 정의될 뿐이다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
본 명세서에서 개시된 착탈 모듈(200)과 관련하여 대칭되는 구성이 있는 경우, 설명의 편의를 위해 제 1 착탈 모듈(210)에 한정하여 이하 설명하나, 본 개시의 내용은 이에 한정되는 것은 아니고 제 2 착탈 모듈(220)에도 제 1 착탈 모듈(210)에 대하여 설명되는 동일한 실시예들이 적용될 수 있다.
도 1은 본 개시의 몇몇 실시예에 따른 사용자의 측두근을 모니터링 하는 안경에 포함된 착탈 모듈의 블록 구성도이다.
도 1을 참조하면, 사용자의 측두근을 모니터링하는 안경(100)은 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220)을 포함할 수 있다. 여기서, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각은 안경 다리의 팁이 위치하는 부분에 결합될 수 있다. 즉, 본 개시의 몇몇 실시예에 따른 안경은 일반적인 안경에서 안경 팁 대신 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220)을 결합할 수 있다.
이하의 설명에서 설명의 편의를 위해 제 1 착탈 모듈(210)에 한정하여 이하 설명하나, 본 개시의 내용은 이에 한정되는 것은 아니고 제 2 착탈 모듈(220)에도 제 1 착탈 모듈(210)에 대하여 설명되는 동일한 실시예들이 적용될 수 있다.
제 1 착탈 모듈(210)은 제 1 커넥터(211), 제 1 출력부(212), 제 1 통신부(216), 제 1 제어부(217), 제 1 메모리(218) 및 센서부를 포함할 수 있다. 다만, 도 1에 도시된 구성요소들은 제 1 착탈 모듈(210)을 구현하는데 있어서 필수적인 것은 아니어서, 본 명세서 상에서 설명되는 제 1 착탈 모듈(210)은 위에서 열거된 구성요소들 보다 많거나, 또는 적은 구성요소들을 가질 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210)의 센서부는 제 1 센서부(231) 및 제 2 센서부(232)를 포함할 수 있다. 여기서, 제 1 센서부(231)는 사용자의 측두근과 접하는 제 1 착탈 모듈(210)의 제 1 측면에 구비되어 제 1 센싱 데이터를 획득할 수 있다. 또한, 제 2 센서부(232)는 사용자의 측두근과 접하지 않고 제 1 착탈 모듈(210)의 상기 제 1 측면에 대향하는 제 2 측면에 구비되어 제 2 센싱 데이터를 획득할 수 있다.
제 1 착탈 모듈(210)의 제 1 센서부(231) 및 제 2 센서부(232)는 제 1 착탈 모듈(210)에 내장되거나 외장될 수 있다. 다만, 제 1 센서부(231) 및 제 2 센서부(232)는 제 1 착탈 모듈(210)의 내부에 위치하는 것이 미관상 바람직할 수 있다.
한편, 제 1 센서부(231)와 제 2 센서부(232)는 서로 이격되도록 제 1 착탈 모듈(210)에 배치될 수 있다.
상술한 센서부의 구체적인 위치에 대한 설명은 이하의 도 8을 참조하여 좀더 자세히 후술한다.
본 개시의 몇몇 실시예에 따르면, 제 1 센서부(231) 및 제 2 센서부(232)는 측정 대상(여기서, 사용자의 측두근)의 직선 운동과 관련된 이동 방향, 이동 거리 및 속도를 측정하는 가속도 센서, 측정 대상의 회전 운동과 관련된 각속도를 측정하는 자이로 센서 및 측정 대상의 자계의 크기를 측정하는 지자기 센서 중 적어도 하나일 수 있다.
일례로, 제 1 센서부(231)는 X 축, Y 축 및 Z 축 각각의 직선 운동과 관련된 이동 방향, 이동 거리 및 속도를 측정하여, 제 1 센싱 데이터를 획득할 수 있다. 또한, 제 2 센서부(232)는 X 축, Y 축 및 Z 축 각각의 직선 운동과 관련된 이동 방향, 이동 거리 및 속도를 측정하여 제 2 센싱 데이터를 획득할 수 있다. 즉, 제 1 센서부(231) 및 제 2 센서부(232) 각각은 3축에 대응하는 센싱 데이터를 획득할 수 있다.
다른 일례로, 제 1 센서부(231) 및 제 2 센서부(232) 각각은, X 축, Y 축 및 Z 축 각각의 직선 운동과 관련된 이동 방향, 이동 거리 및 속도를 측정하고, X 축, Y 축 및 Z 축 각각의 회전 운동과 관련된 각속도를 더 측정하여, 제 1 센싱 데이터 및 제 2 센싱 데이터를 획득할 수 있다. 즉, 제 1 센서부(231) 및 제 2 센서부(232) 각각은 6축에 대응하는 센싱 데이터를 획득할 수 있다.
또 다른 일례로, 제 1 센서부(231) 및 제 2 센서부(232) 각각은, X 축, Y 축 및 Z 축 각각의 직선 운동과 관련된 이동 방향, 이동 거리 및 속도를 측정하고, X 축, Y 축 및 Z 축 각각의 회전 운동과 관련된 각속도를 더 측정하며, X 축, Y 축 및 Z 축 각각에 대응하는 자계의 크기 및 방향을 더 측정하여, 제 1 센싱 데이터 및 제 2 센싱 데이터를 획득할 수 있다. 즉, 제 1 센서부(231) 및 제 2 센서부(232) 각각은 9축에 대응하는 센싱 데이터를 획득할 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(220)의 제 1 제어부(217)는 센서부가 획득한 센싱 데이터에 기초하여, 변화량 데이터를 획득할 수 있다. 구체적으로, 제 1 제어부(217)는 제 1 센싱 데이터 및 제 2 센싱 데이터에 기초하여, 변화량 데이터를 생성할 수 있다. 여기서, 변화량 데이터는 제 1 센싱 데이터 및 제 2 센싱 데이터에 기초하여 생성되는 데이터로 사용자의 움직임을 확인하는데 사용되는 데이터일 수 있다. 즉, 변화량 데이터는 사용자의 움직임이 저작 운동과 관련된 움직임인지 아니면 저작 운동과 관련 없는 움직임인지 여부를 판별하는데 사용되는 데이터일 수 있다.
예를 들어, 제 1 제어부(217)는 제 1 센싱 데이터에 포함된 제 1 X 축 데이터, 제 1 Y 축 데이터 및 제 1 Z 축 데이터의 제 1 합산 값을 산출할 수 있다. 또한, 제 1 제어부(217)는 제 2 센싱 데이터에 포함된 제 2 X 축 데이터, 제 2 Y 축 데이터 및 제 2 Z 축 데이터의 제 2 합산 값을 산출할 수 있다. 그리고, 제 1 제어부(217)는 제 1 합산 값 및 상기 제 2 합산 값에 기초하여 변화량 데이터를 생성할 수 있다.
상술한 제 1 착탈 모듈(220)의 제 1 제어부(217)가 변화량 데이터를 생성하는 방법에 대한 구체적인 설명은 이하 도 4, 도 6, 도 10 및 도 11을 참조하여 자세히 후술한다.
본 개시의 다른 몇몇 실시예에 따르면, 제 2 착탈 모듈(220)도 센서부를 포함할 수 있다. 구체적으로, 제 2 착탈 모듈(220)의 센서부는 제 3 센서부(233) 및 제 4 센서부(234)를 포함할 수 있다. 여기서, 제 3 센서부(233)는 사용자의 측두근과 접하는 제 2 착탈 모듈(220)의 제 3 측면에 구비되어 제 3 센싱 데이터를 획득할 수 있다. 또한, 제 4 센서부(234)는 사용자의 측두근과 접하지 않고 제 2 착탈 모듈(220)의 제 3 측면에 대향하는 제 4 측면에 구비되어 제 4 센싱 데이터를 획득할 수 있다.
제 2 착탈 모듈(220)의 제 3 센서부(233) 및 제 4 센서부(234)는 제 2 착탈 모듈(220)에 내장되거나 외장될 수 있다. 다만, 제 3 센서부(233) 및 제 4 센서부(234)는 제 2 착탈 모듈(220)의 내부에 위치하는 것이 미관상 바람직할 수 있다.
한편, 제 3 센서부(233)와 제 4 센서부(234)는 서로 이격되도록 제 2 착탈 모듈(220)에 배치될 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 3 센서부(233) 및 제 4 센서부(234)는 측정 대상(여기서, 사용자의 측두근)의 직선 운동과 관련된 이동 방향, 이동 거리 및 속도를 측정하는 가속도 센서, 측정 대상의 회전 운동과 관련된 각속도를 측정하는 자이로 센서 및 측정 대상의 자계의 크기를 측정하는 지자기 센서 중 적어도 하나일 수 있다.
일례로, 제 3 센서부(233)는 X 축, Y 축 및 Z 축 각각의 직선 운동과 관련된 이동 방향, 이동 거리 및 속도를 측정하여, 제 3 센싱 데이터를 획득할 수 있다. 또한, 제 4 센서부(234)는 X 축, Y 축 및 Z 축 각각의 직선 운동과 관련된 이동 방향, 이동 거리 및 속도를 측정하여 제 4 센싱 데이터를 획득할 수 있다. 즉, 제 3 센서부(233) 및 제 4 센서부(234) 각각은 3축에 대응하는 센싱 데이터를 획득할 수 있다.
다른 일례로, 제 3 센서부(233) 및 제 4 센서부(234) 각각은, X 축, Y 축 및 Z 축 각각의 직선 운동과 관련된 이동 방향, 이동 거리 및 속도를 측정하고, X 축, Y 축 및 Z 축 각각의 회전 운동과 관련된 각속도를 더 측정하여, 제 3 센싱 데이터 및 제 4 센싱 데이터를 획득할 수 있다. 즉, 제 3 센서부(233) 및 제 4 센서부(234) 각각은 6축에 대응하는 센싱 데이터를 획득할 수 있다.
또 다른 일례로, 제 3 센서부(233) 및 제 4 센서부(234) 각각은, X 축, Y 축 및 Z 축 각각의 직선 운동과 관련된 이동 방향, 이동 거리 및 속도를 측정하고, X 축, Y 축 및 Z 축 각각의 회전 운동과 관련된 각속도를 더 측정하며, X 축, Y 축 및 Z 축 각각에 대응하는 자계의 크기 및 방향을 더 측정하여, 제 3 센싱 데이터 및 제 4 센싱 데이터를 획득할 수 있다. 즉, 제 3 센서부(233) 및 제 4 센서부(234) 각각은 9축에 대응하는 센싱 데이터를 획득할 수 있다.
9축에 대응하는 센싱 데이터에 기초하여 변화량 데이터를 생성한 후 해당 변화량 데이터를 이용하여 사용자의 움직임이 저작 운동인지 여부를 판별하는 경우, 3축 또는 6축에 대응하는 센싱 데이터에 기초하여 변화량 데이터를 생성한 후 해당 변화량 데이터를 이용하여 사용자의 움직임이 저작 운동인지 여부를 판별하는 것보다 정확도가 높아질 수 있다. 따라서, 9축에 대응하는 센싱 데이터에 기초하여 변화량 데이터를 생성하는 것이 바람직할 수 있다. 다만, 이에 한정되는 것은 아니다.
제 1 착탈 모듈(210)의 제 1 제어부(217)는 상기 제 1 착탈 모듈(210)의 전반적인 동작을 제어하도록 구현될 수 있다. 제 1 제어부(217)는 제 1 착탈 모듈(210)에서 수행되는 다양한 연산들을 수행 및 데이터를 처리할 수 있다.
제 1 착탈 모듈(210)의 제 1 제어부(217)는 중앙 처리 장치(Central Processing Unit; CPU), 코프로세서(co-processor), 산술 처리 장치(Arithmetic Processing Unit; APU), 디지털 신호 프로세서(Digital Signal Processor; DSP), 애플리케이션 프로세서(Application Processor; AP) 및 통신 프로세서(Communication Processor; CP) 등 일 수 있다.
제 2 착탈 모듈(220) 또한 제 2 제어부(227)를 포함할 수 있다. 상기 제 2 제어부(227)는 상기 제 2 착탈 모듈(220)의 전반적인 동작을 제어하도록 구현될 수 있다. 제 2 제어부(227)는 제 2 착탈 모듈(220)에서 수행되는 다양한 연산들을 수행 및 데이터를 처리할 수 있다.
제 2 착탈 모듈(220)의 제 2 제어부(227)는 중앙 처리 장치(Central Processing Unit; CPU), 코프로세서(co-processor), 산술 처리 장치(Arithmetic Processing Unit; APU), 디지털 신호 프로세서(Digital Signal Processor; DSP), 애플리케이션 프로세서(Application Processor; AP) 및 통신 프로세서(Communication Processor; CP) 등 일 수 있다.
제 1 메모리(218) 및 제 2 메모리(228) 각각은 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각의 다양한 기능을 지원하는 데이터를 저장한다. 제 1 메모리(218) 및 제 2 메모리(228) 각각은 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application)), 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각의 동작을 위한 데이터들, 명령어들을 저장할 수 있다.
제 1 메모리(218) 및 제 2 메모리(228) 각각은 동적 램(DRAM, dynamic random access memory), 정적램(SRAM, static random access memory) 등의 랜덤 액세스 메모리(RAM)와 같은, 제 1 착탈 모듈(210)의 제 1 제어부(217) 또는 제 2 착탈 모듈(220)의 제 2 제어부(227)가 직접 접근하는 주된 저장 장치로서 전원이 꺼지면 저장된 정보가 순간적으로 지워지는 휘발성(volatile) 저장 장치를 의미할 수 있지만, 이들로 한정되는 것은 아니다.
응용 프로그램은 제 1 착탈 모듈(210)의 기본적인 기능을 위하여 출고 당시부터 제 1 착탈 모듈(210)의 제 1 메모리(218)에 저장되고, 제 1 착탈 모듈(210) 상에 설치되어, 제 1 착탈 모듈(210)의 제 1 제어부(217)에 의하여 상기 제 1 착탈 모듈(210)의 동작(또는 기능)을 수행하도록 구동될 수 있다.
또한, 응용 프로그램은 제 2 착탈 모듈(220)의 기본적인 기능을 위하여 출고 당시부터 제 2 착탈 모듈(220)의 제 2 메모리(228)에 저장되고, 제 2 착탈 모듈(220) 상에 설치되어, 제 2 착탈 모듈(220)의 제 2 제어부(227)에 의하여 상기 제 2 착탈 모듈(220)의 동작(또는 기능)을 수행하도록 구동될 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210)의 제 1 메모리(218)는 저작 운동 데이터를 획득하기 위한 저작 임계 데이터를 저장하고 있을 수 있다. 여기서, 저작 임계 데이터는 변화량 데이터를 이용하여 저작 운동을 수행한 시점을 인식하기 위한 임계 값을 포함하는 데이터일 수 있다. 이에 대한 자세한 설명은 도 4에서 좀더 자세히 후술한다.
한편, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 식습관 정보를 사용자 단말기(300)로 전송하도록 제 1 통신부(216)를 제어할 수 있다. 여기서, 식습관 정보는 측두근을 모니터링 하는 안경(100)을 착용한 사용자의 현재 식습관을 나타내는 정보로써 저작 속도, 저작 횟수 및 저작 강도 중 적어도 하나를 포함할 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210)의 제 1 메모리(218)는 피드백 신호(음향 신호)를 생성하기 위한 권장 식습관 정보를 저장하고 있을 수 있다. 여기서, 권장 식습관 정보는 사용자에게 권장되는 식습관에 대한 정보로써 권장 저작 속도, 권장 저작 횟수 및 권장 저작 강도 중 적어도 하나를 포함할 수 있다.
이 경우, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 식습관 정보 및 권장 식습관 정보를 비교하여 비교 데이터를 산출할 수 있다. 또한, 제 1 제어부(217)는 비교 데이터에 기초하여, 음향 신호의 출력 여부를 결정할 수 있다. 또한, 제 1 제어부(217)는 음향 신호의 출력 여부에 따라, 상기 음향 신호를 출력하도록 제 1 출력부(212)를 제어할 수 있다. 여기서, 음향 신호는 식습관과 관련된 정보로써, 안경을 착용하고 있는 사용자가 식습관을 교정할 수 있도록 하는 음향 신호일 수 있다.
한편, 제 1 제어부(217)는 제 2 착탈 모듈(220)의 제 2 출력부(222)에서 상기 음향 신호를 출력하도록 상기 음향 신호를 제 2 착탈 모듈(220)로 전송하도록 제 1 통신부(216)를 제어할 수도 있다.
즉, 제 1 착탈 모듈(210) 및 상기 제 2 착탈 모듈(220)은, 서로 연동하여 상기 음향 신호에 대응하는 음향을 제 1 출력부(212) 및 제 2 출력부(222)를 통해 출력할 수 있다.
본 개시의 다른 몇몇 실시예에 따르면, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 제 1 통신부(216)를 통해 사용자 단말기(300)로 센서부가 획득한 제 1 센싱 데이터 및 제 2 센싱 데이터를 전송하고, 상기 사용자 단말기(300)로부터 상기 센싱 데이터에 대응하는 피드백 신호를 수신할 수도 있다.
여기서, 제 1 착탈 모듈(210)의 제 1 통신부(216)는 근거리 통신을 통해 사용자 단말기(300) 또는 외부 단말기로부터 피드백 신호를 수신할 수 있다. 다만, 이에 한정되는 것은 아니고 제 1 통신부(216)는 무선 인터넷 기술을 통해 사용자 단말기(300) 또는 외부 단말기로부터 피드백 신호를 수신할 수도 있다. 여기서, 피드백 신호는 제 1 착탈 모듈(210)이 사용자의 식습관을 교정할 수 있도록 하는 음향 신호를 출력하도록 하는 신호로써 사용자 단말기(300) 또는 외부 단말기가 생성한 신호일 수 있다.
제 1 착탈 모듈(210)의 제 1 통신부(216)가 사용자 단말기(300) 또는 외부 단말기로부터 피드백 신호를 수신한 경우, 제 1 제어부(217)는 피드백 신호에 대응하는 음향 신호를 출력하도록 제 1 출력부(212)를 제어할 수 있다. 여기서, 음향 신호는 식습관과 관련된 정보로써, 안경을 착용하고 있는 사용자가 식습관을 교정할 수 있도록 하는 음향 신호일 수 있다.
한편, 제 1 착탈 모듈(210)의 제 1 통신부(216)는 사용자 단말기(300) 또는 외부 단말기로부터 수신한 피드백 신호에 대응하는 음향 신호를 제 2 착탈 모듈(220)로 전송할 수 있다. 여기서, 제 2 착탈 모듈(220)은 제 2 통신부 및 제 2 출력부(222)를 포함할 수 있다.
제 2 착탈 모듈(220)의 제 2 통신부는 제 1 착탈 모듈(210)로부터 음향 신호를 수신할 수 있다. 또한, 제 2 착탈 모듈(220)의 제 2 출력부(222)는 상기 제 1 착탈 모듈(210)로부터 수신한 음향 신호에 대응하는 음향을 출력할 수 있다.
즉, 제 1 착탈 모듈(210) 및 상기 제 2 착탈 모듈(220)은, 서로 연동하여 상기 피드백 정보에 대응하는 음향을 제 1 출력부(212) 및 제 2 출력부(222)를 통해 출력할 수 있다.
제 1 착탈 모듈(210)의 제 1 출력부(212) 및 제 2 착탈 모듈(220)의 제 2 출력부(222) 각각은 골전도 스피커 또는 피에조 스피커 중 어느 하나일 수 있다.
제 1 착탈 모듈(210)의 제 1 통신부(216)는 제 1 착탈 모듈(210)에 내장되거나 외장될 수 있다. 다만, 제 1 통신부(216)는 제 1 착탈 모듈(210)의 내부에 위치하는 것이 미관상 바람직할 수 있다.
제 1 통신부(216)는 무선 인터넷 기술들에 따른 통신망에서 사용자 단말기(300) 또는 외부 단말기로부터 무선 신호를 송수신하도록 이루어질 수 있다. 또한, 제 1 착탈 모듈(210)의 제 1 통신부(216)는 제 1 착탈 모듈(210)과 상이한 제 2 착탈 모듈(220) 상호간 데이터를 송수신하도록 이루어질 수도 있다. 다만, 이에 한정되는 것은 아니다.
무선 인터넷 기술로는, 예를 들어 WLAN(Wireless LAN), Wi-Fi(Wireless-Fidelity), Wi-Fi(Wireless Fidelity) Direct, DLNA(Digital Living Network Alliance), WiBro(Wireless Broadband), WiMAX(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access), HSUPA(High Speed Uplink Packet Access), LTE(Long Term Evolution), LTE-A(Long Term Evolution-Advanced) 등이 있으며, 제 1 착탈 모듈(210)의 제 1 통신부(216)는 상기에서 나열되지 않은 인터넷 기술까지 포함한 범위에서 적어도 하나의 무선 인터넷 기술에 따라 데이터를 송수신할 수 있다.
한편, 제 1 착탈 모듈(210)의 제 1 통신부(216)는 근거리 통신(Short range communication)을 수행할 수도 있다. 근거리 통신 기술로는 블루투스(Bluetooth쪠), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association; IrDA), UWB(Ultra Wideband), ZigBee, NFC(Near Field Communication), Wi-Fi(Wireless-Fidelity), Wi-Fi Direct, Wireless USB(Wireless Universal Serial Bus) 기술 중 적어도 하나가 이용될 수 있다. 다만, 이에 한정되는 것은 아니고 제 1 통신부(216)는 상기에서 나열되지 않은 근거리 통신 기술을 통해 제 2 착탈 모듈(220), 사용자 단말기(300) 또는 외부 단말기로부터 데이터를 송수신할 수 있다.
한편, 제 2 착탈 모듈(220)의 제 2 통신부(226)는 상술한 제 1 착탈 모듈(210)의 제 1 통신부(216)와 유사한 기능을 수행할 수 있다. 즉, 제 2 통신부(226)는 무선 인터넷 기술들에 따른 통신망에서 사용자 단말기(300) 또는 외부 단말기로부터 무선 신호를 송수신하도록 이루어질 수 있다. 또한, 제 2 착탈 모듈(220)의 제 2 통신부(226)는 제 2 착탈 모듈(220)과 상이한 제 1 착탈 모듈(210) 상호간 데이터를 송수신하도록 이루어질 수도 있다. 다만, 이에 한정되는 것은 아니다.
사용자의 측두근을 모니터링하는 안경(100)은 음향 신호, 전류 및 전원 중 적어도 하나를 전달하는 커넥션 케이블을 포함할 수 있다. 이 경우, 제 1 착탈 모듈(210)의 제 1 커넥터(211) 및 제 2 착탈 모듈(220)의 제 3 커넥터(221)는 상기 커넥션 케이블과 연결될 수 있다.
또한, 제 1 착탈 모듈(210)의 제 1 통신부(216) 및 제 2 착탈 모듈(220)의 제 2 통신부 각각은 사용자의 측두근을 모니터링하는 안경(100)에 내장된 커넥션 케이블을 통해 상호 간 음향 신호, 전류 및 전원 중 적어도 하나를 송수신할 수 있다.
다만, 이에 한정되는 것은 아니고, 사용자의 측두근을 모니터링 하는 안경(100)은 커넥션 케이블을 포함하지 않을 수 있다. 또한, 제 1 착탈 모듈(210)은 제 1 커넥터(211)를 포함하지 않을 수 있다. 또한, 제 2 착탈 모듈(220)은 제 3 커넥터(221)를 포함하지 않을 수 있다. 이 경우, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각은 무선 통신을 통해 상호간 음향 신호를 송수신 할 수 있다. 또한, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220)은 상기 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각에 구비된 배터리로 구동될 수 있다.
제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 중 적어도 하나는 마이크를 더 포함할 수 있다.
마이크는 외부의 음향 신호를 전기적인 음성 데이터로 처리한다. 처리된 음성 데이터는 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각에서 수행 중인 기능(또는 실행 중인 응용 프로그램)에 따라 다양하게 활용될 수 있다. 한편, 마이크에는 외부의 음향 신호를 입력 받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.
제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각은 마이크를 통해 주변 소음을 인식할 수 있다. 이 경우, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각의 제어부는 인식된 소음의 크기에 대응하여 출력되는 음향의 음량을 조정할 수 있다.
일례로, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각의 제어부는 인식된 주변 소음의 크기가 기 설정된 데시벨(예를 들어, 80dB) 이상인 경우, 기 설정된 데시벨에 대응하는 음량으로 음향이 출력되도록 음량을 조정할 수 있다.
따라서, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각의 제어부는 주변 소음이 발생됨에 따라, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각에서 출력되는 음향의 음량을 조정해야 하는 사용자의 번거로움을 방지할 수 있다.
제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각은 사용자 입력부를 더 포함할 수 있다. 사용자 입력부는 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각의 외면에 구비될 수 있다. 다만, 이에 한정되는 것은 아니고, 사용자 입력부는 사용자의 측두근을 모니터링하는 안경(100)의 제 1 템플 및 제 2 템플에 구비될 수도 있다.
사용자 입력부는 사용자로부터 정보를 입력 받기 위한 것으로서, 사용자 입력부를 통해 정보가 입력되면, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각의 제어부는 입력된 정보에 대응되도록 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각의 동작을 제어할 수 있다. 이러한, 사용자 입력부는 기계식(mechanical) 입력수단(또는, 메커니컬 키, 예를 들어, 착탈 모듈의 일 면에 위치하는 버튼, 돔 스위치(dome switch), 조그 휠, 조그 스위치 등) 및 터치식 입력수단을 포함할 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각의 제어부는 사용자 입력부를 통해 입력된 정보에 기초하여, 사용자의 측두근의 모니터링 여부를 제어할 수 있다.
일례로, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 음향 출력 중 사용자 입력부를 통해 터치가 1회 입력되었다고 인식하면, 제 1 센서부(231) 및 제 2 센서부(232)에서 수행하는 센싱 데이터의 획득을 중단하도록 제어할 수 있다. 또한, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 센싱 데이터의 획득이 중단된 상태에서 터치가 1회 입력되었다고 인식하면, 제 1 센서부(231) 및 제 2 센서부(232)에서 수행하는 센싱 데이터의 획득을 재개하도록 센서부를 제어할 수 있다.
따라서, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 사용자의 측두근을 모니터링하는 안경(100)의 사용자 입력부에 대한 입력에 대응하여 제 1 센서부(231) 및 제 2 센서부(232)의 동작을 제어할 수 있다. 다만, 이에 한정되는 것은 아니고, 제 2 착탈 모듈(220)의 제 2 제어부(227)도 사용자의 측두근을 모니터링하는 안경(100)의 사용자 입력부에 대한 입력에 대응하여 제 3 센서부(233) 및 제 4 센서부(234)의 동작을 제 1 센서부(231)와 제 2 센서부(232)의 동작을 제어하는 것과 동일하게 제어할 수도 있다.
제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각은 조명부를 더 포함할 수 있다.
예를 들어, 조명부는 LED(Light Emission Diode)를 포함할 수 있다. 이러한 조명부는 상기 LED의 점멸을 통하여 사용자의 측두근을 모니터링하는 안경(100)의 동작 상태를 가시적으로 확인할 수 있도록 하며 사용자의 측두근을 모니터링하는 안경(100)에 대한 디자인의 심미성을 향상시킬 수 있다.
조명부는 측두근 모니터링 상태를 표시하도록 제 1 착탈 모듈(210)의 제 1 제어부(217)에 의해 제어될 수 있다. 예를 들어, 조명부는 사용자의 측두근이 모니터링 중인 상태일 때 조명이 턴 온되고, 모니터링 중이 아닌 상태일 때 조명이 턴 오프 될 수 있다.
또한, 조명부는 제 1 착탈 모듈(210)의 배터리 상태를 표시할 수 있다. 예를 들어, 조명부는 배터리가 충전중인 경우 청색, 배터리의 잔량이 80%이상인 경우 녹색, 배터리의 잔량이 40% 내지 80%인 경우 주황색 및 배터리의 잔량이 40%미만인 경우 적색 등으로 상이한 색상의 조명을 출력할 수 있다.
따라서, 사용자는 착탈 모듈(200)의 조명부를 통해 상기 제 1 착탈 모듈(210)의 다양한 상태 정보를 직관적으로 인식할 수 있다.
다만, 상술한 예시에 한정되는 것은 아니고, 조명부는 제 2 착탈 모듈(220)의 제 2 제어부(227)에 의해 제어될 수도 있다. 또한, 조명부는 제 2 착탈 모듈(220)의 배터리 상태를 표시할 수도 있다.
상술한 사용자의 측두근을 모니터링하는 안경(100)의 구성 요소에 대한 설명은 이하의 도 2 내지 도 3를 참조하여 좀더 자세히 후술한다.
한편, 사용자 단말기(300)는 사용자가 소유하고 있는 PC(personal computer), 노트북(note book), 모바일 단말기(mobile terminal), 스마트 폰(smart phone), 태블릿 PC(tablet pc) 등을 포함할 수 있으며, 유/무선 네트워크에 접속할 수 있는 모든 종류의 단말을 포함할 수 있다.
도면에 도시되지 않았지만, 사용자 단말기(300)는 제어부 및 통신부를 포함할 수 있다. 다만, 이에 한정되는 것은 아니고 사용자 단말기(300)는 상술한 구성요소 보다 적거나 많은 구성 요소를 포함할 수 있다.
한편, 사용자 단말기(300)에 포함된 제어부와 통신부는 제 1 착탈 모듈(210)에 포함된 제 1 제어부(217) 및 제 1 통신부(216)와 동일한 기능을 수행하므로 이에 대한 자세한 설명은 생략한다.
도 2는 본 개시의 몇몇 실시예에 따른 착탈 모듈이 결합된 사용자의 측두근을 모니터링하는 안경의 일례를 일 방향에서 바라본 개념도이다.
도 2를 참조하면, 사용자의 측두근을 모니터링하는 안경(100)은 렌즈 프레임(110), 제 1 템플(120), 제 2 템플(130) 및 착탈 모듈(200)을 포함할 수 있다. 다만, 도 2에 도시된 구성요소들은 사용자의 측두근을 모니터링하는 안경(100)을 구현하는데 있어서 필수적인 것은 아니어서, 본 명세서 상에서 설명되는 사용자의 측두근을 모니터링하는 안경(100)은 위에서 열거된 구성요소들 보다 많거나, 또는 적은 구성요소들을 가질 수 있다.
사용자의 측두근을 모니터링하는 안경(100)에 착탈될 수 있는 착탈 모듈(200)은 사용자의 측두근을 모니터링하는 안경(100)의 왼쪽 및 오른쪽 각각에 착탈되는 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220)을 포함할 수 있다.
사용자의 측두근을 모니터링하는 안경(100)의 렌즈 프레임(110)은 두개의 렌즈를 둘러싸는 형상을 가질 수 있다. 다만, 렌즈 프레임(110)의 형상이 이에 한정되는 것은 아니다.
사용자의 측두근을 모니터링하는 안경(100)의 제 1 템플(120) 및 제 2 템플(130) 각각은, 렌즈 프레임(110)의 양측에 회동 가능하게 힌지로 연결될 수 있다. 또한, 제 1 템플(120) 및 제 2 템플(130) 각각은, 사용자가 안경을 착용할 시 상기 사용자의 양쪽 귀에 걸쳐질 수 있다. 제 1 템플(120)의 일단에 제 1 착탈 모듈(210)이 착탈 될 수 있다. 또한, 제 2 템플(130)의 일단에 제 2 착탈 모듈(220)이 착탈 될 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각은 센서부(230)를 포함할 수 있다. 구체적으로, 제 1 착탈 모듈(210)의 센서부(230)는 제 1 센서부(231) 및 제 2 센서부(232)를 포함할 수 있다. 여기서, 제 1 센서부(231)는 사용자의 측두근과 접하는 제 1 착탈 모듈(210)의 제 1 측면에 구비되어 제 1 센싱 데이터를 획득할 수 있다. 또한, 제 2 센서부(232)는 상기 사용자의 측두근과 접하지 않고 제 1 착탈 모듈(210)의 상기 제 1 측면에 대향하는 제 2 측면에 구비되어 제 2 센싱 데이터를 획득할 수 있다.
또한, 제 2 착탈 모듈(220)의 센서부(230)는 제 3 센서부(233) 및 제 4 센서부(234)를 포함할 수 있다. 여기서, 제 3 센서부(233)는 사용자의 측두근과 접하는 제 2 착탈 모듈(220)의 제 3 측면에 구비되어 제 3 센싱 데이터를 획득할 수 있다. 또한, 제 4 센서부(234)는 상기 사용자의 측두근과 접하지 않고 제 2 착탈 모듈(220)의 상기 제 3 측면에 대향하는 제 4 측면에 구비되어 제 4 센싱 데이터를 획득할 수 있다.
제 1 착탈 모듈(210)의 제 1 센서부(231) 및 제 2 센서부(232)는 제 1 착탈 모듈(210)에 내장되거나 외장될 수 있다. 도 2에서는 직관적인 표현을 이용하여 이해를 돕기 위해 제 1 센서부(231) 및 제 2 센서부(232)가 제 1 착탈 모듈(210)에 외장된 형상으로 도시하였으나, 제 1 센서부(231) 및 제 2 센서부(232)는 제 1 착탈 모듈(210)의 내부에 위치하는 것이 미관상 바람직할 수 있다.
제 2 착탈 모듈(220)의 제 3 센서부(233) 및 제 4 센서부(234) 또한 도 2에서는 직관적인 표현을 이용하여 이해를 돕기 위해 제 3 센서부(233) 및 제 4 센서부(234)가 제 2 착탈 모듈(220)에 외장된 형상으로 도시하였으나, 제 3 센서부(233) 및 제 4 센서부(234)는 제 2 착탈 모듈(220)의 내부에 위치하는 것이 미관상 바람직할 수 있다.
한편, 제 1 센서부(231)와 제 2 센서부(232)는 서로 이격되도록 제 1 착탈 모듈(210)에 배치될 수 있다. 또한, 제 3 센서부(233)와 제 4 센서부(234)는 서로 이격되도록 제 2 착탈 모듈(220)에 배치될 수 있다. 이에 대한 자세한 설명은 도 8에서 후술한다.
여기서, 센서부(230)는 측정 대상의 직선 운동과 관련된 이동 방향, 이동 거리 및 속도를 측정하는 가속도 센서, 측정 대상의 회전 운동과 관련된 각속도를 측정하는 자이로 센서 및 측정 대상의 자계의 크기를 측정하는 지자기 센서 중 적어도 하나일 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각은 제 1 출력부(212) 및 제 2 출력부(222) 각각을 포함할 수 있다. 따라서, 제 1 출력부(212) 및 제 2 출력부(222) 각각은 렌즈 프레임(110) 방향을 바라보도록 배치되어 사용자가 사용자의 측두근을 모니터링하는 안경(100)을 착용하였을 시 제 1 출력부(212) 및 제 2 출력부(222) 각각이 사용자의 귓바퀴 후면의 일 영역에 밀착될 수 있다.
구체적으로, 제 1 착탈 모듈(210)에 구비된 제 1 출력부(212)는 제 1 템플(120) 및 제 2 템플(130) 각각이 사용자의 양쪽 귀에 걸쳐진 상태에서, 상기 사용자의 제 1 귀(예컨대, 왼쪽 귀)의 귓바퀴 후면의 일 영역에 밀착될 수 있다.
또한, 제 2 착탈 모듈(220)에 구비된 제 2 출력부(222)는 제 1 템플(120) 및 제 2 템플(130) 각각이 사용자의 양쪽 귀에 걸쳐진 상태에서, 상기 사용자의 제 2 귀(예컨대, 오른쪽 귀)의 귓바퀴 후면의 일 영역에 밀착될 수 있다.
상술한 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각이 사용자의 측두근을 모니터링하는 안경(100)에 탈부착되는 실시예에 대한 구체적인 설명은 이하 도 3을 참조하여 자세히 후술한다.
제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220)각각은 유선 연결 포트(예를 들어, aux 포트)를 포함할 수 있다. 또한, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220)각각의 유선 연결 포트에는 신호선(예를 들어, aux 케이블)이 연결될 수 있다.
이 때, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 음향 신호를 신호선을 통해 제 2 착탈 모듈(220)로 전송하도록 제 1 통신부(216)를 제어할 수 있다.
다만, 이에 한정되는 것은 아니고, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각은 유선 연결 포트를 포함하지 않을 수도 있다. 이 경우, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각은 신호선이 아닌, 무선 통신을 통해 상호간 음향 신호를 송수신 할 수 있다. 또한, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220)은 상기 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각에 구비된 배터리로 구동될 수 있다.
도 3은 본 개시의 몇몇 실시예에 따른 사용자의 측두근을 모니터링하는 안경의 템플과 착탈 모듈이 분리된 일례를 설명하기 위한 도면이다.
도 3과 관련하여 도 1 및 도 2의 설명에서 상술한 바와 중복되는 내용은 다시 설명하지 않으며, 이하 차이점을 중심으로 설명한다.
도 3을 참조하면, 본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각은 사용자의 측두근을 모니터링하는 안경(100)의 제 1 템플(120) 및 제 2 템플(130) 각각과 결합될 수 있다.
일례로, 사용자의 측두근을 모니터링하는 안경(100)의 제 1 템플(120) 및 제 2 템플(130) 각각의 일단에 돌출부(150)가 구비될 수 있다. 또한, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각에는 상기 돌출부(150)가 삽입되는 수용부가 구비될 수 있다. 여기서, 돌출부(150)의 크기는 수용부의 크기에 대응할 수 있다. 따라서, 사용자의 측두근을 모니터링하는 안경(100)의 제 1 템플(120) 및 제 2 템플(130)과 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220)은 견고하게 결합될 수 있다.
한편, 안경(100)의 제 1 템플(120) 및 제 2 템플(130) 각각은 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각과 결합되는 부분에 단턱을 구비할 수 있다. 또한, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각은 제 1 템플(120) 및 제 2 템플(130) 각각과 결합하는 부분에 상기 제 1 템플(120) 및 상기 제 2 템플(130) 각각에 형성된 단턱과 대응하는 형상으로 단턱이 형성될 수 있다. 따라서, 사용자의 측두근을 모니터링하는 안경(100)의 제 1 템플(120) 및 제 2 템플(130)과 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220)은 보다 견고하게 결합될 수 있다.
제 1 착탈 모듈(210)이 제 1 템플(120)과 결합될 경우, 제 1 착탈 모듈(210)에 구비된 제 1 커넥터(211)와 제 1 템플(120)에 구비된 제 2 커넥터(121)는 결합될 수 있다.
도시되진 않았지만, 제 2 착탈 모듈(220)이 제 2 템플(130)과 결합될 경우, 제 2 착탈 모듈(220)에 구비된 제 3 커넥터(221)와 제 2 템플(130)에 구비된 제 4 커넥터가 결합될 수 있다.
한편, 사용자의 측두근을 모니터링하는 안경(100)은 음향 신호, 전류 및 전원 중 적어도 하나를 전달하는 커넥션 케이블(140)을 포함할 수 있다. 이 경우, 제 1 착탈 모듈(210)의 제 2 커넥터(121)와 제 2 착탈 모듈(220)의 제 3 커넥터(221)는 커넥션 케이블을 통해 연결될 수 있다.
구체적으로, 안경(100)의 렌즈 프레임(110), 제 1 템플(120) 및 제 2 템플(130) 각각은 중앙에 통공을 포함할 수 있다. 커넥션 케이블(140)은 상기 통공에 내장될 수 있다. 또한, 커넥션 케이블(140)은 제 1 착탈 모듈(210)에서 제 2 착탈 모듈(220)(역의 경우도 가능)로 음향 신호, 특정 값을 갖는 전류 및 특정 값을 갖는 전원 중 적어도 하나를 수신하여 전달할 수 있다. 여기서, 특정 값을 갖는 전류 또는 특정 값을 갖는 전원은, 제 1 착탈 모듈(210)에 구비된 배터리로부터 발생되는 전류 또는 전원일 수 있다.
좀더 구체적으로, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 사용자의 식습관 정보에 기초하여 생성한 음향 신호를 커넥션 케이블(140)을 통해 제 2 착탈 모듈(220)로 전송할 수 있다.
이 때, 제 1 착탈 모듈(210)의 제 1 제어부(217) 및 제 2 착탈 모듈(220)의 제 2 제어부(227) 각각은, 서로 연동하여 음향 신호에 대응하는 음향을 출력하도록 제 1 출력부(212) 및 제 2 출력부(222) 각각을 제어할 수 있다.
다만, 이에 한정되는 것은 아니고, 사용자의 측두근을 모니터링 하는 안경(100)은 커넥션 케이블을 포함하지 않을 수 있다. 또한, 제 1 착탈 모듈(210)은 제 1 커넥터(211)를 포함하지 않을 수 있다. 또한, 제 2 착탈 모듈(220)은 제 3 커넥터(221)를 포함하지 않을 수 있다. 이 경우, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각은 무선 통신을 통해 상호간 음향 신호를 송수신 할 수 있다.
구체적으로, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 사용자의 식습관 정보에 기초하여 생성한 음향 신호를 제 2 착탈 모듈(220)로 무선 전송하도록 제 1 통신부(216)를 제어할 수 있다. 이 때, 제 1 착탈 모듈(210)의 제 1 제어부(217) 및 제 2 착탈 모듈(220)의 제 2 제어부(227) 각각은, 무선 통신을 통해 서로 연동하여 음향 신호에 대응하는 음향을 출력하도록 제 1 출력부(212) 및 제 2 출력부(222) 각각을 제어할 수 있다.
한편, 사용자의 측두근을 모니터링 하는 안경(100)은 커넥션 케이블을 포함하지 않는 경우, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220)은 상기 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각에 구비된 배터리로 구동될 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210)은 센서부(230)를 포함할 수 있다. 구체적으로, 제 1 착탈 모듈(210)의 센서부(230)는 제 1 센서부(231) 및 제 2 센서부(232)를 포함할 수 있다. 여기서, 제 1 센서부(231)는 사용자의 측두근과 접하는 제 1 착탈 모듈(210)의 제 1 측면에 구비되어 제 1 센싱 데이터를 획득할 수 있다. 또한, 제 2 센서부(232)는 상기 사용자의 측두근과 접하지 않고 제 1 착탈 모듈(210)의 상기 제 1 측면에 대향하는 제 2 측면에 구비되어 제 2 센싱 데이터를 획득할 수 있다.
제 2 착탈 모듈(220) 또한 센서부(230)를 포함할 수 있다. 제 2 착탈 모듈(220)의 센서부(230)는 제 3 센서부(233) 및 제 4 센서부(234)를 포함할 수 있다. 또한, 제 3 센서부(233) 및 제 4 센서부(234)는 제 1 센서부(231) 및 제 2 센서부(232)가 구비된 위치와 상이한 위치(예를 들어, 우측과 좌측)에서, 사용자의 측두근과 접하는 제 3 측면 및 사용자의 측두근과 접하지 않고, 제 3 측면에 대향하는 제 4 측면에 구비되어 제 3 센싱 데이터 및 제 4 센싱 데이터를 획득할 수 있다.
상술한 센서부(230)의 구체적인 위치에 대한 설명은 이하의 도 8을 참조하여 좀더 자세히 후술한다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210)은 배터리(213)를 포함할 수 있다. 제 1 착탈 모듈(210)의 배터리(213)는 제 1 제어부(217)의 제어 하에서, 외부의 전원, 내부의 전원을 인가받아 제 1 착탈 모듈(210)에 포함된 각 구성요소들에 전원을 공급한다. 상기 배터리(213)는 내장형 배터리 또는 교체가능한 형태의 배터리가 될 수 있다.
제 2 착탈 모듈(220) 또한 배터리를 포함할 수 있다. 제 2 착탈 모듈(220)의 배터리 또한 제 2 제어부(227)의 제어 하에서, 외부의 전원, 내부의 전원을 인가받아 제 2 착탈 모듈(220)에 포함된 각 구성요소들에 전원을 공급한다. 상기 배터리는 내장형 배터리 또는 교체가능한 형태의 배터리가 될 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각은 충전 단자를 포함할 수 있다.
제 1 착탈 모듈(210)의 충전 단자(214)는 배터리(213)에 외부 전원을 공급할 수 있도록 외부 충전 장치와 연결될 수 있다. 또한, 충전 단자(214)는 외부 충전 장치와 연결되어 전원을 공급받을 수 있도록 양극 단자 및 음극 단자를 포함할 수 있다.
제 2 착탈 모듈(220)의 충전 단자 또한 배터리에 외부 전원을 공급할 수 있도록 외부 충전 장치와 연결될 수 있다. 또한, 충전 단자는 외부 충전 장치와 연결되어 전원을 공급받을 수 있도록 양극 단자 및 음극 단자를 포함할 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 2 착탈 모듈(220)의 제 2 제어부는 제 1 착탈 모듈(210)과 커넥션 케이블(140)을 통해 연결된 경우, 제 2 통신부를 비활성화 시킬 수 있다. 구체적으로, 제 2 착탈 모듈(220)은 제 1 착탈 모듈(210)로부터 특정 값을 갖는 전류 또는 특정 값을 갖는 전원을 수신했는지 여부를 인식할 수 있다.
예를 들어, 제 2 착탈 모듈(220)의 제 2 제어부는 제 1 착탈 모듈(210)의 제 1 커넥터(211)와 제 1 템플(120)의 제 2 커넥터(121)가 결합되고, 제 2 착탈 모듈의 제 3 커넥터(221)와 제 2 템플(130)의 제 4 커넥터가 결합됨에 따라, 제 1 착탈 모듈(210)로부터 특정 값을 갖는 전류 또는 특정 값을 갖는 전원을 커넥션 케이블(140)을 통해 수신할 수 있다. 여기서, 특정 값을 갖는 전류 또는 특정 값을 갖는 전원은, 제 1 착탈 모듈(210)에 구비된 배터리로부터 발생되는 전류 또는 전원일 수 있다.
제 2 착탈 모듈(220)은, 제 1 착탈 모듈(210)로부터 특정 값을 갖는 전류 또는 특정 값을 갖는 전원을 수신했다고 인식한 경우, 제 2 통신부를 비활성화 할 수 있다. 이 경우, 음향 신호는 커넥션 케이블(140)을 통해 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 간 송수신 될 수 있다.
즉, 제 1 착탈 모듈(210)은 음향 신호를 상기 커넥션 케이블을 통해 상기 제 2 착탈 모듈에 전송할 수 있다. 이 경우, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220)은 서로 연동하여 음향 신호에 대응하는 음향을 제 1 출력부(212) 및 제 2 출력부(222)를 통해 출력할 수 있다.
한편, 제 2 착탈 모듈(220)은, 제 1 착탈 모듈(210)로부터 특정 값을 갖는 전류 또는 특정 값을 갖는 전원을 수신했다고 인식하지 못한 경우, 제 2 통신부를 활성화된 상태로 유지될 수 있다. 이 경우, 제 2 착탈 모듈(220)의 제 2 통신부는 음향 신호를 무선 통신(구체적으로, 근거리 통신)을 통해 수신하여, 음향 신호에 대응하는 음향을 출력할 수 있다.
구체적으로, 제 1 착탈 모듈(210)은 제 1 통신부(216)를 통해 제 2 착탈 모듈(220)의 제 2 통신부와 통신이 연결된 상태에서, 음향 신호를 제 1 통신부(216)를 통해 제 2 착탈 모듈(220)에 전송할 수 있다. 이 경우, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220)은 서로 연동하여 음향 신호에 대응하는 음향을 제 1 출력부(212) 및 제 2 출력부(222)를 통해 출력할 수 있다.
다만, 상술한 예시에 한정되는 것은 아니고, 사용자의 측두근을 모니터링하는 안경(100)의 렌즈 프레임(110), 제 1 템플(120) 및 제 2 템플(130) 각각은 중앙에 통공이 없을 수도 있다. 따라서, 사용자의 측두근을 모니터링하는 안경(100)은 통공에 내장되는 커넥션 케이블(140)을 포함하지 않을 수 있다. 이 경우, 음향 신호는 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220) 각각의 제 1 통신부(216) 및 제 2 통신부에 의해 근거리 통신으로 송수신 될 수 있다.
구체적으로, 제 1 착탈 모듈(210)은 제 1 통신부(216)를 통해 제 2 착탈 모듈(220)의 제 2 통신부와 통신이 연결된 상태에서, 음향 신호를 제 1 통신부(216)를 통해 제 2 착탈 모듈(220)에 전송할 수 있다. 이 경우, 제 1 착탈 모듈(210) 및 제 2 착탈 모듈(220)은 서로 연동하여 음향 신호에 대응하는 음향을 제 1 출력부(212) 및 제 2 출력부(222)를 통해 출력할 수 있다.
도 4는 본 개시의 몇몇 실시예에 따른 사용자의 측두근을 모니터링하는 안경이 변화량 데이터 및 저작 임계 데이터에 기초하여 저작 운동 데이터를 획득하는 방법의 일례를 설명하기 위한 흐름도이다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 제 1 센싱 데이터에 포함된 제 1 X 축 데이터, 제 1 Y 축 데이터 및 제 1 Z 축 데이터를 합산한 제 1 합산 값을 산출할 수 있다(S111). 제 1 X 축 데이터는 제 1 센서부(231)가 시간에 따라 X축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다. 제 1 Y축 데이터는 제 1 센서부(231)가 시간에 따라 Y축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다. 제 1 Z 축 데이터는 제 1 센서부(231)가 시간에 따라 Z축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다. 즉, 제 1 제어부(217)는 각각의 시간에서 X축, Y축 및 Z축을 중심으로 제 1 센서부(231)가 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 전부 합산한 값을 제 1 합산 값으로 산출할 수 있다.
또한, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 제 2 센싱 데이터에 포함된 제 2 X 축 데이터, 제 2 Y 축 데이터 및 제 2 Z 축 데이터를 합산한 제 2 합산 값을 산출할 수 있다(S112). 제 2 X 축 데이터는 제 2 센서부(232)가 시간에 따라 X축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다. 제 2 Y축 데이터는 제 2 센서부(232)가 시간에 따라 Y축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다. 제 2 Z 축 데이터는 제 2 센서부(232)가 시간에 따라 Z축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다. 즉, 제 1 제어부(217)는 각각의 시간에서 X축, Y축 및 Z축을 중심으로 제 2 센서부(232)가 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 전부 합산한 값을 제 2 합산 값으로 산출할 수 있다.
또한, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 제 1 합산 값 및 제 2 합산 값에 기초하여, 변화량 데이터를 생성할 수 있다(S113). 구체적으로, 제 1 제어부(217)는 제 1 합산 값에서 제 2 합산 값을 감산한 결과 값의 절대 값을 산출하여 변화량 데이터를 생성할 수 있다. 좀더 구체적으로, 제 1 제어부(217)는 각각의 시간에서 산출된 제 1 합산 값에서 제 2 합산 값을 감산한 결과 값의 절대 값을 산출하고, 상기 산출된 절대 값을 변화량 데이터로 기록할 수 있다. 즉, 변화량 데이터는 시간의 흐름에 따라 절대 값이 변화하는 것을 나타낼 수 있다.
한편, 본 개시의 몇몇 실시예에 따르면, 자이로 센서의 센싱 데이터는 측정 시간이 짧은 시간에 정확하고, 가속도 센서의 센싱 데이터는 측정 시간이 긴 시간에 정확하다. 따라서, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 자이로 센서 및 가속도 센서 각각의 센싱 데이터 중 정확도가 높은 구간을 융합하여 센싱 데이터를 획득할 수 있다.
상술한 제 1 제어부(217)가 정확도가 높은 구간을 융합하여 센싱 데이터를 획득하는 방법에 대한 설명은 이하 도 11을 참조하여 자세히 후술한다.
또한, 제 1 제어부(217)는 칼만 필터(Kalman　Filter)를 이용하여 변화량 데이터의 노이즈를 제거할 수 있다. 여기서, 칼만 필터는 잡음이 포함되어 있는 역학적 상태를 추적하는 재귀 필터로서 시간에 따라 진행한 측정을 기반으로 데이터에서 노이즈를 제거한다. 칼만 필터링은 불규칙 외난을 포함하는 동적 시스템에 적용되는 최적 상태 추정과정으로서, 칼만 필터는 이산 실시간격마다 측정되는 잡음이 실린 데이터로부터 동적시스템의 미지의 상태변수를 최적으로 추정하기위한 반복적 알고리즘이다.
구체적으로, 제 1 제어부(217)가 수행하는 칼만 필터링 절차는 선형모델에서 상태변수들을 추정하기 위해 만들어진 것이므로, 비선형 모델인 변화량 데이터에 대한 필터링 식을 유도하는 과정에서 선형화를 수행해야 한다. 이 경우, 제 1 제어부(217)는 이전의 추정된 상태변수로부터 실시간 선형 테일러 근사화를 하게 되고, 여기서 얻어지는 확장 칼만 필터(Extended Kalman　Filter)를 이용하여 변화량 데이터에 대한 노이즈를 제거할 수 있다.
한편, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 단계(S113)에서 생성된 변화량 데이터 및 저작 임계 데이터에 기초하여, 저작 운동 데이터를 획득할 수 있다(S114). 여기서, 저작 임계 데이터는 변화량 데이터를 이용하여 저작 운동을 수행한 시점을 인식하기 위한 임계 값을 포함하는 데이터일 수 있다.
구체적으로, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 변화량 데이터에 포함된 각각의 시간에서의 절대 값들 중 저작 임계 데이터에 포함된 임계 값 이상인 값들을 추출할 수 있다. 그리고, 제 1 제어부(217)는 상기 추출된 값들이 획득된 시점을 인식하고, 해당 시점에 제 1 센서부(231)에서 획득된 센싱 데이터와 해당 시점에 제 2 센서부(232)에서 획득된 센싱 데이터를 저작 운동 데이터로 획득할 수 있다.
즉, 제 1 제어부(217)는 변화량 데이터에 포함된 각각의 시간에서의 절대 값들을 저작 임계 데이터에 포함된 저작 임계 값과 비교하여 사용자가 저작 운동을 수행한 시점을 인식하고, 해당 시점에서 제 1 센서부(231) 및 제 2 센서부(232)를 통해 획득된 센싱 데이터를 저작 운동 데이터로 획득함으로써, 사용자가 걷거나, 고개를 돌려 발생된 센싱 데이터를 필터링할 수 있다.
도 5는 본 개시의 몇몇 실시예에 따른 사용자의 측두근을 모니터링하는 안경이 식습관 정보에 기초하여 음향 신호를 출력하는 방법의 일례를 설명하기 위한 흐름도이다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 저작 운동 데이터에 기초하여, 식습관 정보를 생성할 수 있다(S121). 예를 들어, 제 1 제어부(217)는 사용자가 저작 운동을 수행한 시점에 제 1 센서부(231) 및 제 2 센서부(232)를 통해 획득된 센싱 데이터인 저작 운동 데이터에 기초하여, 단위 시간 당 사용자의 저작 횟수를 식습관 정보로 생성할 수 있다.
또한, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 식습관 정보를 사용자 단말기(300)로 전송하도록 제 1 통신부(216)를 제어할 수 있다(S122).
이 경우, 사용자 단말기(300)는 식습관 정보를 상기 사용자 단말기(300)의 디스플레이 상에 식습관 정보를 포함하는 인터페이스를 디스플레이하거나, 사용자 단말기(300)의 스피커를 통해 식습관 정보를 포함하는 음향을 출력할 수 있다. 따라서, 사용자는 시각 또는 청각을 통해 본인의 식습관 정보를 전달받을 수 있다. 여기서, 식습관 정보는 측두근을 모니터링 하는 안경(100)을 착용한 사용자의 현재 식습관에 대한 정보로써 저작 속도, 저작 횟수 및 저작 강도 중 적어도 하나를 포함할 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 식습관 정보 및 권장 식습관 정보를 비교하여, 비교 데이터를 산출할 수 있다(S123). 구체적으로, 제 1 제어부(217)는 식습관 정보와 권장 식습관 정보를 비교하여 비교치 데이터를 산출할 수 있다.
예를 들어, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 사용자의 식습관 정보가 “저작 속도: 1분에 25회”이고, 권장 식습관 정보가 “저작 속도: 1분에 30회”인 경우, 식습관 정보와 권장 식습관 정보를 비교하여 “사용자의 저작 횟수가 권장 저작 횟수 보다 5회 적음”과 같은 비교 데이터를 산출할 수 있다.
또한, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 비교 데이터에 기초하여, 음향 신호의 출력 여부를 결정할 수 있다(S124). 구체적으로, 제 1 제어부(217)는 비교 데이터에 따라, 사용자가 권장 저작 횟수보다 적은 횟수로 저작한다고 인식한 경우, 음향 신호를 출력할 것을 결정할 수 있다. 예를 들어, 제 1 제어부(217)는 비교 데이터가 “사용자의 저작 횟수가 권장 저작 횟수 보다 5회 적음”이면, 음향 신호를 출력하도록 결정할 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 음향 신호를 출력할 것으로 결정한 경우(S125, Yes), 음향 신호를 출력하도록 제 1 출력부(212)를 제어할 수 있다(S126). 예를 들어, 제 1 제어부(217)는 “XXX님, 방금 전 음식물을 급하게 드셨군요. 건강한 식습관을 위해서 이번에는 음식물을 35번을 씹어 삼키세요”와 같은 음향 신호를 출력하도록 제 1 출력부(212)를 제어할 수 있다. 다만, 음향 신호는 전술한 실시예에 한정되지 않으며, 경고음, 사이렌 소리와 같은 청각 신호들도 포함할 수 있다.
한편, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 음향 신호를 출력하지 않을 것으로 결정한 경우(S125, No), 사용자가 권장 식습관에 대응하는 저작 운동을 하고 있다고 인식하여, 음향 신호를 출력하기 위한 특정 제어를 하지 않을 수 있다.
한편, 본 개시의 몇몇 실시예에 따르면 사용자 단말기(300)의 제어부가 웨어러블 디바이스(사용자의 측두근을 모니터링하는 안경(100))에서 획득한 센싱 데이터에서 저작 운동과 관련된 센싱 데이터만 추출한 후에 추출된 센싱 데이터를 분석할 수 있다. 이에 대한 자세한 설명은 이하 도 6 및 도 7을 참조하여 설명한다.
도 6은 본 개시의 몇몇 실시예에 따른 사용자 단말기가 변화량 데이터 및 저작 임계 데이터에 기초하여 저작 운동 데이터를 획득하는 방법의 일례를 설명하기 위한 흐름도이다.
본 개시의 몇몇 실시예에 따르면, 사용자 단말기(300)의 통신부는 사용자가 착용한 웨어러블 디바이스(여기서, 사용자의 측두근을 모니터링 하는 안경(100))로부터 제 1 센싱 데이터 및 제 2 센싱 데이터를 수신할 수 있다(S211).
여기서, 제 1 센싱 데이터는, 웨어러블 디바이스에서 사용자의 측두근과 접하는 제 1 착탈 모듈의 제 1 측면에 구비된 제 1 센서부(231)가 획득한 데이터일 수 있다. 또한, 제 2 센싱 데이터는, 웨어러블 디바이스에서 사용자의 측두근과 접하지 않고, 제 1 측면에 대향하는 제 2 측면에 구비된 제 2 센서부(232)가 획득한 데이터 일 수 있다.
한편, 사용자 단말기(300)의 제어부는 단계(S211)에서 수신한 제 1 센싱 데이터 및 제 2 센싱 데이터에 기초하여, 변화량 데이터를 생성할 수 있다(S212).
구체적으로, 사용자 단말기(300)의 제어부는 제 1 센싱 데이터에 포함된 제 1 X 축 데이터, 제 1 Y 축 데이터 및 제 1 Z 축 데이터의 제 1 합산 값을 산출할 수 있다. 제 1 X 축 데이터는 제 1 센서부(231)가 시간에 따라 X축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다. 제 1 Y축 데이터는 제 1 센서부(231)가 시간에 따라 Y축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다. 제 1 Z 축 데이터는 제 1 센서부(231)가 시간에 따라 Z축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다. 즉, 제 1 제어부(217)는 각각의 시간에서 X축, Y축 및 Z축을 중심으로 제 1 센서부(231)가 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 전부 합산한 값을 제 1 합산 값으로 산출할 수 있다.
또한, 사용자 단말기(300)의 제어부는 제 2 센싱 데이터에 포함된 제 2 X 축 데이터, 제 2 Y 축 데이터 및 제 2 Z 축 데이터의 제 2 합산 값을 산출할 수 있다. 제 2 X 축 데이터는 제 2 센서부(232)가 시간에 따라 X축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다. 제 2 Y축 데이터는 제 2 센서부(232)가 시간에 따라 Y축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다. 제 2 Z 축 데이터는 제 2 센서부(232)가 시간에 따라 Z축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다. 즉, 제 1 제어부(217)는 각각의 시간에서 X축, Y축 및 Z축을 중심으로 제 2 센서부(232)가 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 전부 합산한 값을 제 2 합산 값으로 산출할 수 있다.
그리고, 사용자 단말기(300)의 제어부는 제 1 합산 값 및 제 2 합산 값에 기초하여 상기 변화량 데이터를 생성할 수 있다. 좀더 구체적으로, 제 1 제어부(217)는 각각의 시간에서 산출된 제 1 합산 값에서 제 2 합산 값을 감산한 결과 값의 절대 값을 산출하고, 상기 산출된 절대 값을 변화량 데이터로 기록할 수 있다. 즉, 변화량 데이터는 시간의 흐름에 따라 절대 값이 변화하는 것을 나타낼 수 있다.
한편, 본 개시의 몇몇 실시예에 따르면, 자이로 센서의 센싱 데이터는 측정 시간이 짧은 시간에 정확하고, 가속도 센서의 센싱 데이터는 측정 시간이 긴 시간에 정확하다. 따라서, 사용자 단말기(300)의 제어부는 자이로 센서 및 가속도 센서 각각의 센싱 데이터 중 정확도가 높은 구간을 융합하여 센싱 데이터를 획득할 수 있다.
또한, 사용자 단말기(300)의 제어부는 칼만 필터(Kalman　Filter)를 이용하여 변화량 데이터의 노이즈를 제거할 수 있다. 여기서, 칼만 필터는 잡음이 포함되어 있는 역학적 상태를 추적하는 재귀 필터로서 시간에 따라 진행한 측정을 기반으로 한다. 칼만 필터링은 불규칙 외난을 포함하는 동적 시스템에 적용되는 최적 상태 추정과정으로서, 칼만 필터는 이산 실시간격마다 측정되는 잡음이 실린 데이터로부터 동적시스템의 미지의 상태변수를 최적으로 추정하기위한 반복적 알고리즘이다.
구체적으로, 사용자 단말기(300)의 제어부가 수행하는 칼만 필터링 절차는 선형모델에서 상태변수들을 추정하기 위해 만들어진 것이므로, 비선형 모델인 변화량 데이터에 대한 필터링 식을 유도하는 과정에서 선형화를 수행해야 한다. 이 경우, 사용자 단말기(300)의 제어부는 이전의 추정된 상태변수로부터 실시간 선형 테일러 근사화를 하게 되고, 여기서 얻어지는 확장 칼만 필터(Extended Kalman　Filter)를 이용하여 변화량 데이터에 대한 노이즈를 제거할 수 있다.
한편, 사용자 단말기(300)의 제어부는 단계(S212)에서 생성된 변화량 데이터 및 저작 임계 데이터에 기초하여 저작 운동 데이터를 획득할 수 있다(S213). 여기서, 저작 임계 데이터는 변화량 데이터를 이용하여 저작 운동을 수행한 시점을 인식하기 위한 임계 값을 포함하는 데이터일 수 있다.
구체적으로, 사용자 단말기(300)의 제어부는 변화량 데이터에 포함된 각각의 시간에서의 절대 값들 중 저작 임계 데이터에 포함된 임계 값 이상인 값들을 추출할 수 있다. 그리고, 사용자 단말기(300)의 제어부는 상기 추출된 값들이 획득된 시점을 인식하고, 해당 시점에 제 1 센서부(231)에서 획득된 센싱 데이터와 해당 시점에 제 2 센서부(232)에서 획득된 센싱 데이터를 저작 운동 데이터로 획득할 수 있다.
즉, 사용자 단말기(300)의 제어부는 각각의 시간에서의 절대 값들을 저작 임계 데이터에 포함된 저작 임계 값과 비교하여 사용자가 저작 운동을 수행한 시점을 인식하고, 해당 시점에서 제 1 센서부(231) 및 제 2 센서부(232)를 통해 획득된 센싱 데이터를 저작 운동 데이터로 획득함으로써, 사용자가 걷거나, 고개를 돌려 발생된 센싱 데이터를 필터링할 수 있다.
도 7은 본 개시의 몇몇 실시예에 따른 사용자 단말기가 피드백 신호를 웨어러블 디바이스로 전송하는 방법의 일례를 설명하기 위한 흐름도이다.
본 개시의 몇몇 실시예에 따르면, 사용자 단말기(300)의 제어부는 저작 운동 데이터에 기초하여, 식습관 정보를 생성할 수 있다(S221). 예를 들어, 사용자 단말기(300)의 제어부는 사용자가 저작 운동을 수행한 시점에 제 1 센서부(231) 및 제 2 센서부(232)를 통해 획득된 센싱 데이터인 저작 운동 데이터에 기초하여, 단위 시간 당 사용자의 저작 횟수를 식습관 정보로 생성할 수 있다.
이 경우, 사용자 단말기(300)는 식습관 정보를 화면으로 출력할 수 있다(S222). 다만, 이에 한정되는 것은 아니고, 사용자 단말기(300)의 스피커를 통해 식습관 정보를 포함하는 음향을 출력할 수도 있다. 따라서, 사용자는 시각 또는 청각을 통해 본인의 식습관 정보를 전달받을 수 있다. 여기서, 식습관 정보는 측두근을 모니터링 하는 안경(100)을 착용한 사용자의 현재 식습관에 대한 정보로써 저작 속도, 저작 횟수 및 저작 강도 중 적어도 하나를 포함할 수 있다. 예를 들어, 사용자 단말기(300)는 “현재 1분당 저작 횟수는 25회입니다.” 등과 같은 텍스트를 화면에 표시하거나, 음향을 스피커로 출력할 수 있다.
또한, 사용자 단말기(300)는 식습관 정보 및 권장 식습관 정보를 비교하여, 비교 데이터를 산출할 수 있다(S223). 구체적으로, 사용자 단말기(300)는 식습관 정보와 권장 식습관 정보를 비교하여 비교치 데이터를 산출할 수 있다. 예를 들어, 사용자 단말기(300)는 사용자의 식습관 정보가 “저작 속도: 1분에 25회”이고, 권장 식습관 정보가 “저작 속도: 1분에 30회”인 경우, 식습관 정보와 권장 식습관 정보를 비교하여 “사용자의 저작 횟수가 권장 저작 횟수 보다 5회 적음”과 같은 비교 데이터를 산출할 수 있다.
본 개시의 몇몇 실시예에 따르면, 사용자 단말기(300)는 비교 데이터에 기초하여, 피드백 신호의 전송 여부를 결정할 수 있다(S224). 여기서, 피드백 신호는 사용자의 식습관을 교정할 수 있도록 하는 음향 신호를 제 1 착탈 모듈(210)에서 출력하도록 사용자 단말기(300)가 웨어러블 디바이스로 전송하는 신호일 수 있다.
구체적으로, 사용자 단말기(300)는 비교 데이터에 따라, 사용자가 권장 저작 횟수보다 적은 횟수로 저작한다고 인식한 경우, 피드백 신호를 웨어러블 디바이스(여기서, 사용자의 측두근을 모니터링하는 안경(100))로 전송하도록 결정할 수 있다. 예를 들어, 사용자 단말기(300)는 비교 데이터가 “사용자의 저작 횟수가 권장 저작 횟수 보다 5회 적음”이면, 피드백 신호를 웨어러블 디바이스로 전송할 것을 결정할 수 있다.
본 개시의 몇몇 실시예에 따르면, 사용자 단말기(300)는 비교 데이터에 기초하여, 피드백 신호를 웨어러블 디바이스로 전송할 것으로 결정한 경우(S225, Yes), 피드백 신호를 웨어러블 디바이스로 전송할 수 있다(S226).
이 경우, 웨어러블 디바이스는 사용자가 권장 식습관 정보에 가깝게 음식을 섭취할 수 있도록 상기 피드백 신호에 대응하는 음향 신호를 출력할 수 있다. 예를 들어, 웨어러블 디바이스에서 “XXX님, 방금 전 음식물을 급하게 드셨군요. 건강한 식습관을 위해서 이번에는 음식물을 35번을 씹어 삼키세요”와 같은 음향 신호가 출력될 수 있다. 다만, 음향 신호는 전술한 실시예에 한정되지 않으며, 경고음, 사이렌 소리와 같은 청각 신호들도 포함할 수 있다.
한편, 사용자 단말기(300)는 피드백 신호를 웨어러블 디바이스로 전송하지 않을 것으로 결정한 경우(S225, No), 사용자가 권장 식습관에 대응하는 저작 운동을 하고 있다고 인식하여, 피드백 신호를 전송하기 위한 특정 제어를 하지 않을 수 있다.
도 6 및 도 7과 같이 사용자 단말기(300)의 제어부가 센싱 데이터에서 웨어러블 디바이스에서 획득한 센싱 데이터를 추출 및 분석하는 경우, 웨어러블 디바이스에 포함된 제어부(예를 들어, 제 1 제어부(217) 및/또는 제 2 제어부(227))는 센싱 데이터를 추출 및 분석할 필요가 없다. 이 경우, 웨어러블 디바이스에 포함된 제어부가 처리할 작업이 감소되어, 웨어러블 디바이스의 배터리 소모량이 줄어들 수 있다.
전술한 도 4 내지 도 7의 단계는 필요에 의해 순서가 변경될 수 있으며, 적어도 하나 이상의 단계가 생략 또는 추가될 수 있다. 또한, 전술한 단계는 본 개시의 실시예에 불과할 뿐, 본 개시의 권리 범위는 이에 한정되지 않는다.
도 8은 본 개시의 몇몇 실시예에 따른 사용자의 측두근을 모니터링하는 안경의 착탈 모듈에 구비된 센서부의 위치를 설명하기 위한 도면이다.
본 개시의 몇몇 실시예에 따르면, 측두근을 모니터링하는 안경(100)의 착탈 모듈(200)은 센서부를 포함할 수 있다.
여기서, 설명의 편의를 위해 제 1 착탈 모듈(210)에 포함된 센서부, 구체적으로, 제 1 착탈 모듈(210)에 포함된 제 1 센서부(231) 및 제 2 센서부(232)에 대하여 설명한다. 본 개시의 기술 분야에서 통상의 지식을 가진 자는 제 2 착탈 모듈(220)에 포함된 제 3 센서부(233) 및 제 4 센서부(234) 또한 이하에서 설명될 제 1 착탈 모듈(210)에 포함된 제 1 센서부(231) 및 제 2 센서부(232)와 대응되는 위치에 구비될 수 있음을 이해할 수 있을 것이다.
제 1 착탈 모듈(210)의 제 1 센서부(231) 및 제 2 센서부(232)는 제 1 착탈 모듈(210)에 내장되거나 외장될 수 있다. 도 8에서는 직관적인 표현을 이용하여 이해를 돕기 위해 제 1 센서부(231) 및 제 2 센서부(232)가 제 1 착탈 모듈(210)에 외장된 형상으로 도시하였으나, 제 1 센서부(231) 및 제 2 센서부(232)는 제 1 착탈 모듈(210)의 내부에 위치하는 것이 미관상 바람직할 수 있다.
한편, 제 1 센서부(231)와 제 2 센서부(232)는 서로 이격되도록 제 1 착탈 모듈(210)에 배치될 수 있다.
본 개시의 몇몇 실시예에 따르면, 사용자의 측두근을 모니터링하는 안경(100)의 착탈 모듈(200)에 포함된 센서부는 사용자가 안경을 착용하였을 때, 사용자의 측두근의 변화량을 감지할 수 있다.
도 8에 도시된 바와 같이, 제 1 착탈 모듈(210)은 사용자의 측두근과 접하는 제 1 측면에 제 1 센서부(231)를 구비할 수 있다. 또한, 제 1 착탈 모듈(210)은 사용자의 측두근과 접하지 않고, 제 1 측면에 대향하는 제 2 측면에 제 2 센서부(232)를 구비할 수 있다. 따라서, 제 1 센서부(231) 및 제 2 센서부(232) 각각은 사용자의 측두근이 움직일때, 상기 측두근의 변화량을 감지할 수 있다.
좀더 구체적으로, 제 1 착탈 모듈(210)은 제 1 센서부(231)의 수용 공간을 포함할 수 있다. 여기서, 수용 공간은 상기 제 1 센서부(231)와 상기 제 2 센서부(232) 사이에 존재하며 제 1 센서부(231)가 위치하는 제 1 측면에서 제 2 센서부(232)가 위치하는 안쪽으로 파인 공간으로, 상기 제 1 센서부(231)가 움직일 수 있는 공간을 제공할 수 있다. 이 경우, 제 1 착탈 모듈(210) 상에서 사용자의 측두근과 접하는 제 1 측면에 구비된 제 1 센서부(231)는 사용자가 저작 운동을 하여 측두근이 움직일 때, 제 1 착탈 모듈(210)의 수용 공간으로 수용되어, 위치가 변화될 수 있다.
한편, 제 1 착탈 모듈(210) 상에서 사용자의 측두근과 접하지 않고, 제 1 측면에 대향하는 제 2 측면에 구비된 제 2 센서부(232)는 사용자의 측두근이 움직이더라도, 위치의 변화가 없을 수 있다. 즉, 사용자의 측두근이 움직일 때 제 1 센서부(231)만 움직이고, 제 2 센서부(232)는 움직이지 않을 수 있다.
그리고, 사용자가 저작 운동을 하는 경우가 아니고, 사용자가 고개를 돌리거나 걸어가는 경우와 같은 움직임을 갖는 경우, 제 1 센서부(231) 및 제 2 센서부(232)는 같이 움직일 수 있다.
따라서, 도 4 및 도 6에서 상술한 제 1 합산 값에서 제 2 합산 값을 감산한 절대 값의 크기는 사용자가 저작 운동을 하는 경우에 제 1 값을 가질 수 있다. 그리고, 사용자가 저작 운동을 하지 않고 일반 적인 움직임을 가질 경우, 도 4 및 도 6에서 상술한 제 1 합산 값에서 제 2 합산 값을 감산한 절대 값의 크기는 제 1 값 보다 작은 제 2 값을 가질 수 있다. 따라서, 제 1 제어부(217)는 상기 절대 값이 제 1 값과 제 2 값 사이에 존재하는 임계 값 이상인 경우의 센싱 데이터만 추출하여 센싱 데이터 중 저작 운동이 있는 경우의 센싱 데이터만 저작 운동 데이터로 추출할 수 있게 된다.
상술한 도 8의 설명에서 제 1 센싱 데이터 및 제 2 센싱 데이터 각각의 센싱 값에 대한 예시로써 기재된 양의 값 또는 음의 값은 본 개시의 이해를 돕기 위한 몇몇 예시일 뿐 이에 한정되지 않는다.
도 9는 본 개시의 몇몇 실시예에 따른 센서부가 사용자의 측두근이 이완 및 수축함에 따라 저작 운동을 인식하는 일례를 설명하기 위한 도면이다.
사용자가 저작운동을 하는 경우, 사용자의 측두근은 이완 및 수축을 반복하여, 측두근의 두께가 얇아지고 두꺼워지는 과정이 반복될 수 있다. 예를 들어, 사용자의 상하 치아가 벌어지면, 사용자의 측두근은 이완하여 두께가 얇아지고, 사용자의 상하 치아가 부딪히면, 사용자의 측두근은 수축하여 두께가 두꺼워질 수 있다.
본 개시의 몇몇 실시예에 따르면, 센서부는 측정 대상의 직선 운동과 관련된 이동 방향, 이동 거리 및 속도를 측정하는 가속도 센서, 측정 대상의 회전 운동과 관련된 각속도를 측정하는 자이로 센서 및 측정 대상의 자계의 크기를 측정하는 지자기 센서 중 적어도 하나일 수 있다. 즉, 측두근과 인접한 센서부가 측두근과 함께 움직이며, 측두근의 이동 방향, 이동 거리, 속도, 회전 운동 및 각속도 중 적어도 하나를 측정할 수 있다.
일례로, 센서부는 X 축, Y 축 및 Z 축 각각의 직선 운동과 관련된 이동 방향, 이동 거리 및 속도를 측정하여, 센싱 데이터를 획득할 수 있다. 즉, 센서부는 3축에 대응하는 센싱 데이터를 획득할 수 있다.
다른 일례로, 센서부는 X 축, Y 축 및 Z 축 각각의 직선 운동과 관련된 이동 방향, 이동 거리 및 속도를 측정하고, X 축, Y 축 및 Z 축 각각의 회전 운동과 관련된 각속도를 더 측정하여, 센싱 데이터를 획득할 수 있다. 즉, 센서부는 6축에 대응하는 센싱 데이터를 획득할 수 있다.
또 다른 일례로, 센서부는 X 축, Y 축 및 Z 축 각각의 직선 운동과 관련된 이동 방향, 이동 거리 및 속도를 측정하고, X 축, Y 축 및 Z 축 각각의 회전 운동과 관련된 각속도를 더 측정하며, X 축, Y 축 및 Z 축 각각에 대응하는 자계의 크기 및 방향을 더 측정하여, 센싱 데이터를 획득할 수 있다. 즉, 센서부는 9축에 대응하는 센싱 데이터를 획득할 수 있다.
본 개시의 다른 몇몇 실시예에 따르면, 제 1 착탈 모듈(210) 및/또는 제 2 착탈 모듈(220)에 구비된 센서부는 사용자의 안면 근육의 수축 및 이완을 감지하여 전기신호를 발생시킬 수 있다. 여기서, 센서부는 압전 필름(Piezoelectric film)을 이용한 압전 센서(Piezoelectric sensor)로 구성될 수 있다. 압전 센서는 압전효과를 가진 소자를 이용한 센서로서, 진동을 전기로, 또 역으로 전기적 펄스를 진동으로 변환할 수 있다.
예를 들어, 사용자의 상하 치아가 부딪혀 사용자의 측두근이 수축하고, 두께가 두꺼워지면, 사용자의 측두근을 모니터링하는 안경(100)의 센서부는 사용자의 두개골 바깥쪽으로 압력을 받아 전기신호를 발생시킬 수 있다. 이 경우, 사용자의 측두근을 모니터링하는 안경(100)은 전기신호를 분석하여 사용자의 치아가 부딪혔다는 것을 감지할 수 있다.
센서부는 전술한 압전 센서에 한정되지 않으며, 사용자의 신체 변화를 감지할 수 있는 다양한 센서로도 구성될 수 있다. 예를 들어, 센서부는 압력 센서(pressure sensor), 온도 센서(temperature sensor), 습도 센서(humidity sensor), 가속도 센서(acceleration sensor) 및 맥박이나 혈압, 혈당, 산소포화도 등을 측정하는 바이오 센서(bio sensor) 등으로 구성될 수도 있다.
본 개시의 몇몇 실시예에 따르면, 센서부는 사용자의 측두근을 모니터링하는 안경(100)에 적어도 한 개 이상 구비될 수 있으며, 사용자의 측두근의 변화량을 감지하기 위해서는 사용자의 측두근을 모니터링하는 안경(100)의 측면 중 사용자 두개골 쪽에 위치하는 것이 바람직할 수 있다.
다만, 센서부가 구비되는 위치 및 개수는 전술한 실시예에 한정되지 않으며, 사용자의 측두근을 모니터링하는 안경(100)이 측두근의 변화량을 감지하는 방법 또한 전술한 실시예에 한정되지 않는다.
도 10은 본 개시의 몇몇 실시예에 따른 변화량 데이터의 일례를 설명하기 위한 도면이다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210)의 제 1 제어부(217)(제 2 착탈 모듈(220)의 제 2 제어부(227) 또는 사용자 단말기의 제어부)는 제 1 센싱 데이터(71)에 포함된 제 1 X 축 데이터, 제 1 Y 축 데이터 및 제 1 Z 축 데이터를 합산한 제 1 합산 값을 산출할 수 있다.
일례로, 제 1 합산 값을 산출하는 식은 이하 수학식 1과 같을 수 있다.
Figure PCTKR2020004026-appb-img-000001
여기서, R은 제 1 합산 값을 나타내고, rX는 제 1 X 축 데이터를 나타내며, rY는 제 1 Y 축 데이터를 나타내고, rZ는 제 1 Z 축 데이터를 나타낼 수 있다.
제 1 X 축 데이터는 제 1 센서부(231)가 시간에 따라 X축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다. 제 1 Y축 데이터는 제 1 센서부(231)가 시간에 따라 Y축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다. 제 1 Z 축 데이터는 제 1 센서부(231)가 시간에 따라 Z축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다.
또한, 제 1 착탈 모듈(210)의 제 1 제어부(217)(제 2 착탈 모듈(220)의 제 2 제어부(227) 또는 사용자 단말기의 제어부)는 제 2 센싱 데이터(72)에 포함된 제 2 X 축 데이터, 제 2 Y 축 데이터 및 제 2 Z 축 데이터를 합산한 제 2 합산 값을 산출할 수 있다.
일례로, 제 2 합산 값을 산출하는 식은 이하 수학식 2와 같을 수 있다.
Figure PCTKR2020004026-appb-img-000002
여기서, L은 제 2 합산 값을 나타내고, lX는 제 2 X 축 데이터를 나타내며, lY는 제 2 Y 축 데이터를 나타내고, lZ는 제 2 Z 축 데이터를 나타낼 수 있다.
제 2 X 축 데이터는 제 2 센서부(232)가 시간에 따라 X축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다. 제 2 Y축 데이터는 제 2 센서부(232)가 시간에 따라 Y축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다. 제 2 Z 축 데이터는 제 2 센서부(232)가 시간에 따라 Z축을 중심으로 측정한 가속도 값, 각속도 값 및 자계 값 중 적어도 하나를 포함할 수 있다.
그리고, 제 1 착탈 모듈(210)의 제 1 제어부(217)(제 2 착탈 모듈(220)의 제 2 제어부(227) 또는 사용자 단말기의 제어부)는 제 1 합산 값에서 제 2 합산 값을 감산한 결과 값에 절대 값을 적용한 변화량 데이터를 생성할 수 있다. 좀더 구체적으로, 제 1 제어부(217)는 각각의 시간에서 산출된 제 1 합산 값에서 제 2 합산 값을 감산한 결과 값의 절대 값을 산출하고, 상기 산출된 절대 값을 변화량 데이터로 기록할 수 있다. 즉, 변화량 데이터는 시간의 흐름에 따라 절대 값이 변화하는 것을 나타낼 수 있다.
일례로, 제 1 합산 값에서 제 2 합산 값을 감산한 결과 값에 절대 값을 적용하는 변화량 데이터를 생성하는 식은 이하 수학식 3과 같을 수 있다.
Figure PCTKR2020004026-appb-img-000003
여기서, R은 제 1 서브 그래프(81)에 표현된 제 1 X 축 데이터(rX), 제 2 서브 그래프(82)에 표현된 제 1 Y 축 데이터(rY) 및 제 3 서브 그래프(83)에 표현된 제 1 Z 축 데이터(rZ) 각각의 제 1 합산 값을 나타내고, L은 제 1 서브 그래프(81)에 표현된 제 2 X 축 데이터(lX), 제 2 서브 그래프(82)에 표현된 제 2 Y 축 데이터(lY) 및 제 3 서브 그래프(83)에 표현된 제 2 Z 축 데이터(lZ) 각각의 제 2 합산 값을 나타내며, Result는 변화량 데이터를 나타낸다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210)의 제 1 제어부(217)(제 2 착탈 모듈(220)의 제 2 제어부(227) 또는 사용자 단말기의 제어부)는 변화량 데이터 및 저작 임계 데이터를 이용하여 저작 운동 데이터를 추출할 수 있다. 여기서, 저작 임계 데이터는 변화량 데이터를 이용하여 저작 운동을 수행한 시점을 인식하기 위한 임계 값을 포함하는 데이터일 수 있다.
구체적으로, 제 1 착탈 모듈(210)의 제 1 제어부(217)(제 2 착탈 모듈(220)의 제 2 제어부(227) 또는 사용자 단말기의 제어부)는 변화량 데이터에 포함된 각각의 시간에서의 절대 값들 중 저작 임계 데이터에 포함된 임계 값(74)(예를 들어, 120) 이상인 값들을 추출할 수 있다. 그리고, 제 1 제어부(217)(제 2 착탈 모듈(220)의 제 2 제어부(227) 또는 사용자 단말기의 제어부)는 상기 추출된 값들이 획득된 시점(58초, 125초, 140초)을 인식하고, 해당 시점에 제 1 센서부(231)(또는 제 3 센서부(233))에서 획득된 센싱 데이터와 해당 시점에 제 2 센서부(232)(또는 제 4 센서부(234))에서 획득된 센싱 데이터를 저작 운동 데이터로 획득할 수 있다.
도 11은 본 개시의 몇몇 실시예에 따른 변화량 데이터의 다른 일례를 설명하기 위한 도면이다.
본 개시의 몇몇 실시예에 따르면, 자이로 센서의 센싱 데이터는 측정 시간이 짧은 시간에 정확하고, 가속도 센서의 센싱 데이터는 측정 시간이 긴 시간에 정확하다. 따라서, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 센싱 데이터의 정확도를 높이기 위해 자이로 센서 및 가속도 센서 각각의 센싱 데이터 중 정확도가 높은 구간을 융합하여 센싱 데이터를 획득할 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 1 센서부(231)는 자이로 센서 및 가속도 센서일 수 있다. 제 2 센서부(232) 또한 자이로 센서 및 가속도 센서일 수 있다.
도 11을 참조하면, 제 4 서브 그래프(84), 제 5 서브 그래프(85) 및 제 6 서브 그래프(86) 각각은, 제 1 센서부(231) 및 제 2 센서부(232) 각각이 가속도 센서일 때, 상기 가속도 센서로부터 획득된 센싱 값들이 표현된 그래프일 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 제 4 서브 그래프(84)에 표현된 제 1 X 축 데이터(rX)의 센싱 값, 제 5 서브 그래프(85)에 표현된 제 1 Y 축 데이터(rY)의 센싱 값 및 제 6 서브 그래프(86)에 표현된 제 1 Z 축 데이터(rZ)의 센싱 값 각각의 제 1 합산 값을 산출할 수 있다. 또한, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 제 4 서브 그래프(84)에 표현된 제 2 X 축 데이터(lX)의 센싱 값, 제 5 서브 그래프(85)에 표현된 제 2 Y 축 데이터(lY)의 센싱 값 및 제 6 서브 그래프(86)에 표현된 제 2 Z 축 데이터(lZ)의 센싱 값 각각의 제 2 합산 값을 산출할 수 있다.
도 11을 참조하면, 제 7 서브 그래프(87), 제 8 서브 그래프(88) 및 제 9 서브 그래프(89) 각각은 제 1 센서부(231) 및 제 2 센서부(232) 각각이 자이로 센서일 때, 획득한 센싱 데이터의 센싱 값들을 표현한 그래프일 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 제 7 서브 그래프(87)에 표현된 제 1 X 축 데이터(rX)의 센싱 값, 제 8 서브 그래프(88)에 표현된 제 1 Y 축 데이터(rY)의 센싱 값 및 제 9 서브 그래프(89)에 표현된 제 1 Z 축 데이터(rZ)의 센싱 값 각각의 제 1 합산 값을 산출할 수 있다. 또한, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 제 7 서브 그래프(87)에 표현된 제 2 X 축 데이터(lX)의 센싱 값, 제 8 서브 그래프(88)에 표현된 제 2 Y 축 데이터(lY)의 센싱 값 및 제 9 서브 그래프(89)에 표현된 제 2 Z 축 데이터(lZ)의 센싱 값 각각의 제 2 합산 값을 산출할 수 있다.
한편, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 센서부를 통해 센싱 데이터가 획득된 시점을 적어도 두 개의 구간으로 나눌 수 있다. 예를 들어, 제 1 제어부(217)는 가로축(센서부를 통해 센싱 데이터가 획득된 시점)이 0 내지 50인 제 1 구간 및 가로축이 51 내지 100인 제 2 구간으로 나눌 수 있다.
그리고, 제 1 제어부(217)는 센싱 데이터의 정확도를 높이기 위해 제 1 센서부(231)가 자이로 센서일 때 제 1 구간에서 획득된 제 1 센싱 데이터와 제 1 센서부(231)가 가속도 센서일 때 제 2 구간에서 획득된 제 1 센싱 데이터를 융합하여 제 1 합산 값을 산출할 수 있다.
또한, 제 1 제어부(217)는 센싱 데이터의 정확도를 높이기 위해 제 2 센서부(232)가 자이로 센서일 때 제 1 구간에서 획득된 제 2 센싱 데이터와 제 2 센서부(232)가 가속도 센서일 때 제 2 구간에서 획득된 제 2 센싱 데이터를 융합하여 제 2 합산 값을 산출할 수 있다.
이 경우, 제 1 제어부(217)는 제 1 합산 값에서 제 2 합산 값을 감산한 결과 값의 절대 값을 산출하여 변화량 데이터를 생성할 수 있다.
본 개시의 다른 몇몇 실시예에 따르면, 제 1 제어부(217)는 변화량 데이터의 정확도를 높이기 위해 자이로 센서를 통해 획득된 센싱 데이터에 기초하여 변화량 데이터를 생성하고, 가속도 센서의 센싱 데이터에 기초하여 변화량 데이터를 생성한 후, 두 개의 변화량 데이터를 융합할 수 있다.
이 경우, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 제 1 센서부(231)가 가속도 센서일 때 획득된 제 1 센싱 데이터의 제 1 합산 값을 산출하고, 제 2 센서부(232)가 가속도 센서일 때 획득된 제 2 센싱 데이터의 제 2 합산 값을 산출할 수 있다. 또한, 제 1 제어부(217)는 제 1 합산 값에서 제 2 합산 값을 감산한 결과 값의 절대 값을 산출하여 제 1 변화량 데이터를 생성할 수 있다.
그리고, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 제 1 센서부(231)가 자이로 센서일 때 획득된 제 1 센싱 데이터의 제 1 합산 값을 산출하고, 제 2 센서부(232)가 자이로 센서일 때 획득된 제 2 센싱 데이터의 제 2 합산 값을 산출할 수 있다. 또한, 제 1 제어부(217)는 제 1 합산 값에서 제 2 합산 값을 감산한 결과 값의 절대 값을 산출하여 제 2 변화량 데이터를 생성할 수 있다.
이 때, 제 1 제어부(217)는 변화량 데이터의 정확도를 높이기 위해 센서부를 통해 센싱 데이터가 획득된 시점을 적어도 두 개의 구간으로 나눌 수 있다. 예를 들어, 제 1 제어부(217)는 가로축(센서부를 통해 센싱 데이터가 획득된 시점)이 0 내지 100인 제 1 구간 및 가로축이 101 내지 200인 제 2 구간으로 나눌 수 있다.
그리고, 제 1 제어부(217)는 제 2 변화량 데이터 중 제 1 구간의 데이터와 제 1 변화량 데이터 중 제 2 구간의 데이터를 융합하여, 정확도 높은 변화량 데이터를 생성할 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 칼만 필터(Kalman　Filter)를 이용하여 변화량 데이터의 노이즈를 제거할 수 있다. 여기서, 칼만 필터는 잡음이 포함되어 있는 역학적 상태를 추적하는 재귀 필터로서 시간에 따라 진행한 측정을 기반으로 한다. 칼만 필터링은 불규칙 외난을 포함하는 동적 시스템에 적용되는 최적 상태 추정과정으로서, 칼만 필터는 이산 실시간격마다 측정되는 잡음이 실린 데이터로부터 동적시스템의 미지의 상태변수를 최적으로 추정하기위한 반복적 알고리즘이다.
구체적으로, 제 1 제어부(217)가 수행하는 칼만 필터링 절차는 선형모델에서 상태변수들을 추정하기 위해 만들어진 것이므로, 비선형 모델인 변화량 데이터에 대한 필터링 식을 유도하는 과정에서 선형화를 수행해야 한다. 이 경우, 제 1 제어부(217)는 이전의 추정된 상태변수로부터 실시간 선형 테일러 근사화를 하게 되고, 여기서 얻어지는 확장 칼만 필터(Extended Kalman　Filter)를 이용하여 변화량 데이터에 대한 노이즈를 제거할 수 있다.
도 12는 본 개시의 몇몇 실시예에 따른 사용자의 측두근을 모니터링하는 안경을 사용자가 착용한 일례를 설명하기 위한 도면이다.
본 개시의 몇몇 실시예에 따르면, 사용자의 측두근을 모니터링하는 안경(100)의 센서부는 사용자가 안경을 착용하였을 때, 사용자의 측두근의 변화량을 감지할 수 있다.
구체적으로, 도 12를 참조하면, 제 1 착탈 모듈(210)의 제 1 센서부(231)는 사용자의 측두근에 밀착되는 제 1 측면에 위치할 수 있다. 또한, 제 1 착탈 모듈(210)의 제 2 센서부(232)는 제 1 측면과 대향하는 제 2 측면에 위치할 수 있다. 따라서, 제 1 센서부(231) 및 제 2 센서부(232) 각각은, 사용자의 측두근의 변화량을 감지할 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210)은 제 1 센서부(231)의 수용 공간을 포함할 수 있다. 구체적으로, 제 1 센서부(231) 및 제 2 센서부(232) 각각은 제 1 착탈 모듈(210)의 수용 공간을 생성하기 위해 이격 배치될 수 있다.
이 경우, 제 1 착탈 모듈(210) 상에서 사용자의 측두근과 접하는 제 1 측면에 구비된 제 1 센서부(231)는 사용자의 측두근이 움직일 때, 제 1 착탈 모듈(210)의 수용 공간(제 1 센서부(231)와 제 2 센서부(232)가 이격 배치되어 존재하는 공간)으로 수용되어, 위치가 변화될 수 있다.
한편, 제 1 착탈 모듈(210) 상에서 사용자의 측두근과 접하지 않고, 제 1 측면에 대향하는 제 2 측면에 구비된 제 2 센서부(232)는 사용자의 측두근이 움직이더라도, 위치의 변화가 없을 수 있다.
본 개시의 몇몇 실시예에 따르면, 제 1 센서부(231)가 사용자의 측두근이 움직일 때 제 1 착탈 모듈(210)의 수용 공간으로 수용될 경우, 사용자의 측두근이 움직일 때 제 1 센서부(231)만 움직이고, 제 2 센서부(232)는 움직이지 않기 때문에, 제 1 착탈 모듈(210)의 제 1 제어부(217)가 산출하는 제 1 합산 값에서 제 2 합산 값의 감산 값의 절대 값은 커질 수 있다. 따라서, 제 1 제어부(217)는 상기 절대 값이 임계 값 이상인 경우만 추출하여 저작 운동 데이터를 추출할 수 있다.
본 개시의 몇몇 실시예에 따르면, 사용자의 측두근을 모니터링하는 안경(100)은 사용자가 안경을 착용하였을 때, 사용자의 귀의 귓바퀴 후면의 일 영역에 착탈 모듈(200)이 위치할 수 있다. 또한, 제 1 착탈 모듈(210)의 제 1 출력부(212)는 사용자의 귓바퀴 후면을 향하도록 배치될 수 있다.
구체적으로 도 12를 참조하면, 제 1 착탈 모듈(210)의 제 1 출력부(212)는 사용자의 제 1 귀(E10)의 귓바퀴 후면의 일 영역에 밀착될 수 있다. 이 경우, 사용자는 보다 선명하고 품질이 향상된 사운드를 제공받을 수 있다. 또한, 사용자는 귀를 열어놓고 출력되는 음향을 인식함으로써 주변의 소음을 동시에 수신하여 안전사고를 예방하면서 고막에 직접적인 영향을 주지 않도록 하여 난청을 예방할 수 있다.
본 개시의 몇몇 실시예에 따르면, 착탈 모듈(200)은 내부에 레일 구조물을 포함할 수 있다.
구체적으로, 착탈 모듈(200)의 레일 구조물 상에 출력부가 구비될 수 있다. 이 경우, 사용자의 귀의 형태에 따라 출력부의 위치가 조정될 수 있다. 따라서, 사용자는 귀의 형상과 상관없이 사용자의 측두근을 모니터링하는 안경(100)을 사용할 수 있다.
도 13은 본 개시의 몇몇 실시예에 따른 사용자의 측두근을 모니터링하는 안경이 측두근의 움직임을 통해 핸즈프리(hands-free) 모드로 전환되는 방법 및 센서부가 측정한 센싱 데이터의 일례를 설명하기 위한 도면이다.
본 개시의 몇몇 실시예에 따르면, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 센서부를 통해 사용자의 측두근이 소정의 시간 이상 수축 상태를 유지하는 것을 인식할 수 있다. 또한, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 사용자의 측두근이 소정의 시간 이상 수축 상태를 유지하는 것을 인식한 경우 핸즈프리 모드로 전환할 수 있다.
예를 들어, 도 13에 도시된 센싱 데이터와 같이, 제 1 착탈 모듈(210)의 제 1 제어부(217)는 변화량 데이터와 저작 임계 데이터를 비교하여 사용자의 저작 운동 데이터를 추출하여 사용자의 측두근이 소정의 시간(예컨대, 3초) 이상 수축을 유지되었다고 인식한 경우, 핸드프리 모드로 전환할 수 있다.
본 개시의 몇몇 실시예에 따르면, 사용자는, 사용자의 측두근을 모니터링하는 안경(100)이 제 1 제어부(217)에 의해 핸즈프리 모드로 전환된 경우, 제 1 착탈 모듈(210)의 음성 수신부(미도시)와 제 1 출력부(212)를 통해 음성통화를 수행할 수 있다. 이 경우, 제 1 제어부(217)는 사용자의 측두근의 움직임에 기초하여 사용자 단말기와 근거리 통신하여 사용자 단말기의 음성통화 기능을 제어할 수 있다.
예를 들어, 사용자의 측두근이 3초 이상 수축 상태를 유지하면, 제 1 제어부(217)는 이를 감지하여 사용자 단말기에 걸려온 전화를 수신할 수 있고, 사용자의 측두근이 다시 3초 이상 수축 상태를 유지하면, 제 1 제어부(217)는 이를 감지하여 사용자 단말기에 걸려온 전화를 종료할 수 있다.
본 개시의 다른 몇몇 실시예에 따르면, 사용자의 측두근을 모니터링하는 안경(100)이 제 1 제어부(217)에 의해 핸즈프리 모드로 전환된 경우, 제 1 제어부(217)는 사용자의 측두근의 움직임을 감지하여 사용자 단말기의 카메라부(미도시)를 통해 사진을 촬영하고 저장할 수 있다. 이 경우, 제 1 제어부(217)는 제 1 통신부(216)를 통해 사용자 단말기(300)와 근거리 통신을 할 수 있다. 예를 들어, 사용자의 측두근을 모니터링하는 안경(100)이 핸즈프리 모드이고, 사용자 단말기(300)에 걸려온 전화가 없을 경우, 사용자의 측두근이 3초 이상 수축 상태를 유지하면, 제 1 제어부(217)는 사용자 단말기(300)의 카메라를 통해 사진을 촬영할 수 있다.
상술한 사용자의 측두근을 모니터링하는 안경(100)의 핸즈프리 모드의 기능은 전술한 기능들에 한정되지 않으며, 이보다 많은 기능을 포함할 수 있다. 또한, 제 1 착탈 모듈(210)의 제 1 제어부(217)가 핸드프리 모드로 전환하고, 핸즈프리 모드의 다양한 기능을 수행하는 몇몇 실시예를 기재하였지만, 이에 한정되는 것은 아니고, 제 2 착탈 모듈(220)의 제 2 제어부 또한 상술한 제 1 제어부(217)와 동일한 기능을 수행할 수도 있다.
도 14는 본 개시의 몇몇 실시예들이 구현될 수 있는 예시적인 컴퓨팅 환경에 대한 간략하고 일반적인 개략도를 도시한다.
본 개시가 일반적으로 하나 이상의 컴퓨터 상에서 실행될 수 있는 컴퓨터 실행가능 명령어와 관련하여 전술되었지만, 당업자라면 본 개시가 기타 프로그램 모듈들과 결합되어 및/또는 하드웨어와 소프트웨어의 조합으로서 구현될 수 있다는 것을 잘 알 것이다.
일반적으로, 본 명세서에서의 모듈은 특정의 태스크를 수행하거나 특정의 추상 데이터 유형을 구현하는 루틴, 프로시져, 프로그램, 컴포넌트, 데이터 구조, 기타 등등을 포함한다. 또한, 당업자라면 본 개시의 방법이 단일-프로세서 또는 멀티프로세서 컴퓨터 시스템, 미니컴퓨터, 메인프레임 컴퓨터는 물론 퍼스널 컴퓨터, 핸드헬드 컴퓨팅 장치, 마이크로프로세서-기반 또는 프로그램가능 가전 제품, 기타 등등(이들 각각은 하나 이상의 연관된 장치와 연결되어 동작할 수 있음)을 비롯한 다른 컴퓨터 시스템 구성으로 실시될 수 있다는 것을 잘 알 것이다.
본 개시의 설명된 실시예들은 또한 어떤 태스크들이 통신 네트워크를 통해 연결되어 있는 원격 처리 장치들에 의해 수행되는 분산 컴퓨팅 환경에서 실시될 수 있다. 분산 컴퓨팅 환경에서, 프로그램 모듈은 로컬 및 원격 메모리 저장 장치 둘다에 위치할 수 있다.
컴퓨터는 통상적으로 다양한 컴퓨터 판독가능 매체를 포함한다. 컴퓨터에 의해 액세스 가능한 매체는 그 어떤 것이든지 컴퓨터 판독가능 매체가 될 수 있고, 이러한 컴퓨터 판독가능 매체는 휘발성 및 비휘발성 매체, 일시적(transitory) 및 비일시적(non-transitory) 매체, 이동식 및 비-이동식 매체를 포함한다. 제한이 아닌 예로서, 컴퓨터 판독가능 매체는 컴퓨터 판독가능 저장 매체 및 컴퓨터 판독가능 전송 매체를 포함할 수 있다. 컴퓨터 판독가능 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보를 저장하는 임의의 방법 또는 기술로 구현되는 휘발성 및 비휘발성 매체, 일시적 및 비-일시적 매체, 이동식 및 비이동식 매체를 포함한다. 컴퓨터 저장 매체는 RAM, ROM, EEPROM, 플래시 메모리 또는 기타 메모리 기술, CD-ROM, DVD(digital video disk) 또는 기타 광 디스크 저장 장치, 자기 카세트, 자기 테이프, 자기 디스크 저장 장치 또는 기타 자기 저장 장치, 또는 컴퓨터에 의해 액세스될 수 있고 원하는 정보를 저장하는 데 사용될 수 있는 임의의 기타 매체를 포함하지만, 이에 한정되지 않는다.
컴퓨터 판독가능 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보를 저장하는 임의의 방법 또는 기술로 구현되는 휘발성 및 비휘발성 매체, 일시적 및 비-일시적 매체, 이동식 및 비이동식 매체를 포함한다. 컴퓨터 판독가능 저장 매체는 RAM, ROM, EEPROM, 플래시 메모리 또는 기타 메모리 기술, CD-ROM, DVD(digital video disk) 또는 기타 광 디스크 저장 장치, 자기 카세트, 자기 테이프, 자기 디스크 저장 장치 또는 기타 자기 저장 장치, 또는 컴퓨터에 의해 액세스될 수 있고 원하는 정보를 저장하는 데 사용될 수 있는 임의의 기타 매체를 포함하지만, 이에 한정되지 않는다.
컴퓨터 판독가능 전송 매체는 통상적으로 반송파(carrier wave) 또는 기타 전송 메커니즘(transport mechanism)과 같은 피변조 데이터 신호(modulated data signal)에 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터등을 구현하고 모든 정보 전달 매체를 포함한다. 피변조 데이터 신호라는 용어는 신호 내에 정보를 인코딩하도록 그 신호의 특성들 중 하나 이상을 설정 또는 변경시킨 신호를 의미한다. 제한이 아닌 예로서, 컴퓨터 판독가능 전송 매체는 유선 네트워크 또는 직접 배선 접속(direct-wired connection)과 같은 유선 매체, 그리고 음향, RF, 적외선, 기타 무선 매체와 같은 무선 매체를 포함한다. 상술된 매체들 중 임의의 것의 조합도 역시 컴퓨터 판독가능 전송 매체의 범위 안에 포함되는 것으로 한다.
컴퓨터(1502)를 포함하는 본 개시의 여러가지 측면들을 구현하는 예시적인 환경(1500)이 나타내어져 있으며, 컴퓨터(1502)는 처리 장치(1504), 시스템 메모리(1506) 및 시스템 버스(1508)를 포함한다. 시스템 버스(1508)는 시스템 메모리(1506)(이에 한정되지 않음)를 비롯한 시스템 컴포넌트들을 처리 장치(1504)에 연결시킨다. 처리 장치(1504)는 다양한 상용 프로세서들 중 임의의 프로세서일 수 있다. 듀얼 프로세서 및 기타 멀티프로세서 아키텍처도 역시 처리 장치(1504)로서 이용될 수 있다.
시스템 버스(1508)는 메모리 버스, 주변장치 버스, 및 다양한 상용 버스 아키텍처 중 임의의 것을 사용하는 로컬 버스에 추가적으로 상호 연결될 수 있는 몇 가지 유형의 버스 구조 중 임의의 것일 수 있다. 시스템 메모리(1506)는 판독 전용 메모리(ROM)(1510) 및 랜덤 액세스 메모리(RAM)(1512)를 포함한다. 기본 입/출력 시스템(BIOS)은 ROM, EPROM, EEPROM 등의 비휘발성 메모리(1510)에 저장되며, 이 BIOS는 시동 중과 같은 때에 컴퓨터(1502) 내의 구성요소들 간에 정보를 전송하는 일을 돕는 기본적인 루틴을 포함한다. RAM(1512)은 또한 데이터를 캐싱하기 위한 정적 RAM 등의 고속 RAM을 포함할 수 있다.
컴퓨터(1502)는 또한 내장형 하드 디스크 드라이브(HDD)(1514)(예를 들어, EIDE, SATA)―이 내장형 하드 디스크 드라이브(1514)는 또한 적당한 섀시(도시 생략) 내에서 외장형 용도로 구성될 수 있음―, 자기 플로피 디스크 드라이브(FDD)(1516)(예를 들어, 이동식 디스켓(1518)으로부터 판독을 하거나 그에 기록을 하기 위한 것임), 및 광 디스크 드라이브(1520)(예를 들어, CD-ROM 디스크(1522)를 판독하거나 DVD 등의 기타 고용량 광 매체로부터 판독을 하거나 그에 기록을 하기 위한 것임)를 포함한다. 하드 디스크 드라이브(1514), 자기 디스크 드라이브(1516) 및 광 디스크 드라이브(1520)는 각각 하드 디스크 드라이브 인터페이스(1524), 자기 디스크 드라이브 인터페이스(1526) 및 광 드라이브 인터페이스(1528)에 의해 시스템 버스(1508)에 연결될 수 있다. 외장형 드라이브 구현을 위한 인터페이스(1524)는 예를 들어, USB(Universal Serial Bus) 및 IEEE 1394 인터페이스 기술 중 적어도 하나 또는 그 둘다를 포함한다.
이들 드라이브 및 그와 연관된 컴퓨터 판독가능 매체는 데이터, 데이터 구조, 컴퓨터 실행가능 명령어, 기타 등등의 비휘발성 저장을 제공한다. 컴퓨터(1502)의 경우, 드라이브 및 매체는 임의의 데이터를 적당한 디지털 형식으로 저장하는 것에 대응한다. 상기에서의 컴퓨터 판독가능 저장 매체에 대한 설명이 HDD, 이동식 자기 디스크, 및 CD 또는 DVD 등의 이동식 광 매체를 언급하고 있지만, 당업자라면 집 드라이브(zip drive), 자기 카세트, 플래쉬 메모리 카드, 카트리지, 기타 등등의 컴퓨터에 의해 판독가능한 다른 유형의 저장 매체도 역시 예시적인 운영 환경에서 사용될 수 있으며 또 임의의 이러한 매체가 본 개시의 방법들을 수행하기 위한 컴퓨터 실행가능 명령어를 포함할 수 있다는 것을 잘 알 것이다.
운영 체제(1530), 하나 이상의 어플리케이션 프로그램(1532), 기타 프로그램 모듈(1534) 및 프로그램 데이터(1536)를 비롯한 다수의 프로그램 모듈이 드라이브 및 RAM(1512)에 저장될 수 있다. 운영 체제, 어플리케이션, 모듈 및/또는 데이터의 전부 또는 그 일부분이 또한 RAM(1512)에 캐싱될 수 있다. 본 개시가 여러가지 상업적으로 이용가능한 운영 체제 또는 운영 체제들의 조합에서 구현될 수 있다는 것을 잘 알 것이다.
사용자는 하나 이상의 유선/무선 입력 장치, 예를 들어, 키보드(1538) 및 마우스(1540) 등의 포인팅 장치를 통해 컴퓨터(1502)에 명령 및 정보를 입력할 수 있다. 기타 입력 장치(도시 생략)로는 마이크, IR 리모콘, 조이스틱, 게임 패드, 스타일러스 펜, 터치 스크린, 기타 등등이 있을 수 있다. 이들 및 기타 입력 장치가 종종 시스템 버스(1508)에 연결되어 있는 입력 장치 인터페이스(1542)를 통해 처리 장치(1504)에 연결되지만, 병렬 포트, IEEE 1394 직렬 포트, 게임 포트, USB 포트, IR 인터페이스, 기타 등등의 기타 인터페이스에 의해 연결될 수 있다.
모니터(1544) 또는 다른 유형의 디스플레이 장치도 역시 비디오 어댑터(1546) 등의 인터페이스를 통해 시스템 버스(1508)에 연결된다. 모니터(1544)에 부가하여, 컴퓨터는 일반적으로 스피커, 프린터, 기타 등등의 기타 주변 출력 장치(도시 생략)를 포함한다.
컴퓨터(1502)는 유선 및/또는 무선 통신을 통한 원격 컴퓨터(들)(1548) 등의 하나 이상의 원격 컴퓨터로의 논리적 연결을 사용하여 네트워크화된 환경에서 동작할 수 있다. 원격 컴퓨터(들)(1548)는 워크스테이션, 서버 컴퓨터, 라우터, 퍼스널 컴퓨터, 휴대용 컴퓨터, 마이크로프로세서-기반 오락 기기, 피어 장치 또는 기타 통상의 네트워크 노드일 수 있으며, 일반적으로 컴퓨터(1502)에 대해 기술된 구성요소들 중 다수 또는 그 전부를 포함하지만, 간략함을 위해, 메모리 저장 장치(1550)만이 도시되어 있다. 도시되어 있는 논리적 연결은 근거리 통신망(LAN)(1552) 및/또는 더 큰 네트워크, 예를 들어, 원거리 통신망(WAN)(1554)에의 유선/무선 연결을 포함한다. 이러한 LAN 및 WAN 네트워킹 환경은 사무실 및 회사에서 일반적인 것이며, 인트라넷 등의 전사적 컴퓨터 네트워크(enterprise-wide computer network)를 용이하게 해주며, 이들 모두는 전세계 컴퓨터 네트워크, 예를 들어, 인터넷에 연결될 수 있다.
LAN 네트워킹 환경에서 사용될 때, 컴퓨터(1502)는 유선 및/또는 무선 통신 네트워크 인터페이스 또는 어댑터(1556)를 통해 로컬 네트워크(1552)에 연결된다. 어댑터(1556)는 LAN(1552)에의 유선 또는 무선 통신을 용이하게 해줄 수 있으며, 이 LAN(1552)은 또한 무선 어댑터(1556)와 통신하기 위해 그에 설치되어 있는 무선 액세스 포인트를 포함하고 있다. WAN 네트워킹 환경에서 사용될 때, 컴퓨터(1502)는 모뎀(1558)을 포함할 수 있거나, WAN(1554) 상의 통신 서버에 연결되거나, 또는 인터넷을 통하는 등, WAN(1554)을 통해 통신을 정하는 기타 수단을 갖는다. 내장형 또는 외장형 및 유선 또는 무선 장치일 수 있는 모뎀(1558)은 직렬 포트 인터페이스(1542)를 통해 시스템 버스(1508)에 연결된다. 네트워크화된 환경에서, 컴퓨터(1502)에 대해 설명된 프로그램 모듈들 또는 그의 일부분이 원격 메모리/저장 장치(1550)에 저장될 수 있다. 도시된 네트워크 연결이 예시적인 것이며 컴퓨터들 사이에 통신 링크를 설정하는 기타 수단이 사용될 수 있다는 것을 잘 알 것이다.
컴퓨터(1502)는 무선 통신으로 배치되어 동작하는 임의의 무선 장치 또는 개체, 예를 들어, 프린터, 스캐너, 데스크톱 및/또는 휴대용 컴퓨터, PDA(portable data assistant), 통신 위성, 무선 검출가능 태그와 연관된 임의의 장비 또는 장소, 및 전화와 통신을 하는 동작을 한다. 이것은 적어도 Wi-Fi 및 블루투스 무선 기술을 포함한다. 따라서, 통신은 종래의 네트워크에서와 같이 미리 정의된 구조이거나 단순하게 적어도 2개의 장치 사이의 애드혹 통신(ad hoc communication)일 수 있다.
Wi-Fi(Wireless Fidelity)는 유선 없이도 인터넷 등으로의 연결을 가능하게 해준다. Wi-Fi는 이러한 장치, 예를 들어, 컴퓨터가 실내에서 및 실외에서, 즉 기지국의 통화권 내의 아무 곳에서나 데이터를 전송 및 수신할 수 있게 해주는 셀 전화와 같은 무선 기술이다. Wi-Fi 네트워크는 안전하고 신뢰성 있으며 고속인 무선 연결을 제공하기 위해 IEEE 802.11(a,b,g, 기타)이라고 하는 무선 기술을 사용한다. 컴퓨터를 서로에, 인터넷에 및 유선 네트워크(IEEE 802.3 또는 이더넷을 사용함)에 연결시키기 위해 Wi-Fi가 사용될 수 있다. Wi-Fi 네트워크는 비인가 2.4 및 5 GHz 무선 대역에서, 예를 들어, 11Mbps(802.11a) 또는 54 Mbps(802.11b) 데이터 레이트로 동작하거나, 양 대역(듀얼 대역)을 포함하는 제품에서 동작할 수 있다.
본 개시의 기술 분야에서 통상의 지식을 가진 자는 여기에 개시된 실시예들과 관련하여 설명된 다양한 예시적인 논리 블록들, 모듈들, 프로세서들, 수단들, 회로들 및 알고리즘 단계들이 전자 하드웨어, (편의를 위해, 여기에서 "소프트웨어"로 지칭되는) 다양한 형태들의 프로그램 또는 설계 코드 또는 이들 모두의 결합에 의해 구현될 수 있다는 것을 이해할 것이다. 하드웨어 및 소프트웨어의 이러한 상호 호환성을 명확하게 설명하기 위해, 다양한 예시적인 컴포넌트들, 블록들, 모듈들, 회로들 및 단계들이 이들의 기능과 관련하여 위에서 일반적으로 설명되었다. 이러한 기능이 하드웨어 또는 소프트웨어로서 구현되는지 여부는 특정한 어플리케이션 및 전체 시스템에 대하여 부과되는 설계 제약들에 따라 좌우된다. 본 개시의 기술 분야에서 통상의 지식을 가진 자는 각각의 특정한 어플리케이션에 대하여 다양한 방식들로 설명된 기능을 구현할 수 있으나, 이러한 구현 결정들은 본 개시의 범위를 벗어나는 것으로 해석되어서는 안 될 것이다.
여기서 제시된 다양한 실시예들은 방법, 장치, 또는 표준 프로그래밍 및/또는 엔지니어링 기술을 사용한 제조 물품(article)으로 구현될 수 있다. 용어 "제조 물품"은 임의의 컴퓨터-판독가능 장치로부터 액세스 가능한 컴퓨터 프로그램, 캐리어, 또는 매체(media)를 포함한다. 예를 들어, 컴퓨터-판독가능 저장 매체는 자기 저장 장치(예를 들면, 하드 디스크, 플로피 디스크, 자기 스트립, 등), 광학 디스크(예를 들면, CD, DVD, 등), 스마트 카드, 및 플래쉬 메모리 장치(예를 들면, EEPROM, 카드, 스틱, 키 드라이브, 등)를 포함하지만, 이들로 제한되는 것은 아니다. 용어 "기계-판독가능 매체"는 명령(들) 및/또는 데이터를 저장, 보유, 및/또는 전달할 수 있는 무선 채널 및 다양한 다른 매체를 포함하지만, 이들로 제한되는 것은 아니다.
제시된 프로세스들에 있는 단계들의 특정한 순서 또는 계층 구조는 예시적인 접근들의 일례임을 이해하도록 한다. 설계 우선순위들에 기반하여, 본 개시의 범위 내에서 프로세스들에 있는 단계들의 특정한 순서 또는 계층 구조가 재배열될 수 있다는 것을 이해하도록 한다. 첨부된 방법 청구항들은 샘플 순서로 다양한 단계들의 엘리먼트들을 제공하지만 제시된 특정한 순서 또는 계층 구조에 한정되는 것을 의미하지는 않는다.
제시된 실시예들에 대한 설명은 임의의 본 개시의 기술 분야에서 통상의 지식을 가진 자가 본 개시를 이용하거나 또는 실시할 수 있도록 제공된다. 이러한 실시예들에 대한 다양한 변형들은 본 개시의 기술 분야에서 통상의 지식을 가진 자에게 명백할 것이며, 여기에 정의된 일반적인 원리들은 본 개시의 범위를 벗어남이 없이 다른 실시예들에 적용될 수 있다. 그리하여, 본 개시는 여기에 제시된 실시예들로 한정되는 것이 아니라, 여기에 제시된 원리들 및 신규한 특징들과 일관되는 최광의의 범위에서 해석되어야 할 것이다.
상기와 같이 발명의 실시를 위한 최선의 형태에서 관련 내용을 기술하였다.
본 개시는 사용자의 측두근을 모니터링하는 안경 및 컴퓨터 프로그램에 관한 것으로, 보다 구체적으로 안경의 착탈 모듈에 구비된 센서를 통해 사용자의 측두근을 모니터링하는 안경 및 컴퓨터 프로그램에 관한 것이다.

Claims (17)

  1. 사용자의 측두근을 모니터링하는 안경으로서,
    렌즈 프레임;
    상기 렌즈 프레임의 양측에 회동 가능하게 힌지로 연결되는 제 1 템플 및 제 2 템플; 및
    상기 제 1 템플의 일단에 착탈되는 제 1 착탈 모듈;
    상기 제 2 템플의 일단에 착탈되는 제 2 착탈 모듈;
    사용자의 측두근과 접하는 상기 제 1 착탈 모듈의 제 1 측면에 구비되어 제 1 센싱 데이터를 획득하는 제 1 센서부; 및
    상기 측두근과 접하지 않고 상기 제 1 착탈 모듈의 상기 제 1 측면에 대향하는 제 2 측면에 구비되어 제 2 센싱 데이터를 획득하는 제 2 센서부;
    를 포함하는,
    사용자의 측두근을 모니터링하는 안경.
  2. 제 1 항에 있어서,
    상기 제 1 센싱 데이터 및 상기 제 2 센싱 데이터에 기초하여, 변화량 데이터를 생성하는 제어부;
    를 더 포함하는,
    사용자의 측두근을 모니터링하는 안경.
  3. 제 2 항에 있어서,
    상기 제어부는,
    상기 제 1 센싱 데이터에 포함된 제 1 X 축 데이터, 제 1 Y 축 데이터 및 제 1 Z 축 데이터를 합산한 제 1 합산 값을 산출하고,
    상기 제 2 센싱 데이터에 포함된 제 2 X 축 데이터, 제 2 Y 축 데이터 및 제 2 Z 축 데이터를 합산한 제 2 합산 값을 산출하고,
    상기 제 1 합산 값 및 상기 제 2 합산 값에 기초하여 상기 변화량 데이터를 생성하고,
    상기 변화량 데이터는,
    상기 제 1 합산 값에서 상기 제 2 합산 값을 감산한 결과 값의 절대 값인,
    사용자의 측두근을 모니터링하는 안경.
  4. 제 3 항에 있어서,
    저작 운동 데이터를 획득하기 위한 저작 임계 데이터를 저장하는 메모리;
    를 더 포함하고,
    상기 제어부는,
    상기 변화량 데이터 및 상기 저작 임계 데이터에 기초하여, 저작 운동 데이터를 획득하는,
    사용자의 측두근을 모니터링하는 안경.
  5. 제 1 항에 있어서,
    상기 제 1 센서부 및 상기 제 2 센서부 각각은,
    X 축, Y 축 및 Z 축 각각의 직선 운동과 관련된 이동 방향, 이동 거리 및 속도를 측정하여, 상기 제 1 센싱 데이터 및 상기 제 2 센싱 데이터를 획득하는,
    사용자의 측두근을 모니터링하는 안경.
  6. 제 5 항에 있어서,
    상기 제 1 센서부 및 상기 제 2 센서부 각각은,
    상기 X 축, 상기 Y 축 및 상기 Z 축 각각의 회전 운동과 관련된 각속도를 더 측정하여, 상기 제 1 센싱 데이터 및 상기 제 2 센싱 데이터를 획득하는,
    사용자의 측두근을 모니터링하는 안경.
  7. 제 6 항에 있어서,
    상기 제 1 센서부 및 상기 제 2 센서부 각각은,
    상기 X 축, 상기 Y 축 및 상기 Z 축 각각에 대응하는 자계의 크기 및 방향을 더 측정하여, 상기 제 1 센싱 데이터 및 상기 제 2 센싱 데이터를 획득하는,
    사용자의 측두근을 모니터링하는 안경.
  8. 제 1 항에 있어서,
    상기 사용자의 측두근과 접하는 상기 제 2 착탈 모듈의 제 3 측면에 구비되어 제 3 센싱 데이터를 획득하는 제 3 센서부; 및
    상기 측두근과 접하지 않고 상기 제 2 착탈 모듈의 상기 제 3 측면에 대향하는 제 4 측면에 구비되어 제 4 센싱 데이터를 획득하는 제 4 센서부;
    를 더 포함하는,
    사용자의 측두근을 모니터링하는 안경.
  9. 제 4 항에 있어서,
    상기 제어부는,
    상기 저작 운동 데이터에 기초하여 식습관 정보를 생성하고,
    상기 식습관 정보를 사용자 단말기로 전송하도록 통신부를 제어하고,
    상기 식습관 정보는,
    저작 속도, 저작 횟수 및 저작 강도 중 적어도 하나를 포함하는,
    사용자의 측두근을 모니터링하는 안경.
  10. 제 4 항에 있어서,
    상기 메모리는,
    권장 식습관 정보를 더 저장하고,
    상기 권장 식습관 정보는,
    권장 저작 속도, 권장 저작 횟수 및 권장 저작 강도 중 적어도 하나를 포함하는,
    사용자의 측두근을 모니터링하는 안경.
  11. 제 10 항에 있어서,
    상기 제 1 템플 및 상기 제 2 템플 각각이 사용자의 양쪽 귀에 걸쳐진 상태에서 상기 사용자의 귀의 귓바퀴 후면의 일 영역에 밀착되고, 음향 신호를 상기 사용자에게 전달하는 출력부;
    를 더 포함하고,
    상기 제어부는,
    상기 식습관 정보 및 상기 권장 식습관 정보를 비교하여 비교 데이터를 산출하고,
    상기 비교 데이터에 기초하여, 상기 음향 신호의 출력 여부를 결정하고,
    상기 음향 신호의 출력 여부에 따라, 상기 음향 신호를 출력하도록 상기 출력부를 제어하는,
    사용자의 측두근을 모니터링하는 안경.
  12. 제 1 항에 있어서,
    사용자 단말기로 상기 제 1 센싱 데이터 및 상기 제 2 센싱 데이터를 전송하고, 상기 사용자 단말기로부터 상기 센싱 데이터에 대응하는 피드백 신호를 수신하는 통신부; 및
    상기 사용자 단말기로부터 수신한 상기 피드백 신호에 기초하여, 음향 신호를 상기 사용자에게 전달하는 출력부;
    를 더 포함하는,
    사용자의 측두근을 모니터링하는 안경.
  13. 컴퓨터 판독가능 저장 매체에 저장된 컴퓨터 프로그램으로서,
    상기 컴퓨터 프로그램은 사용자 단말기로 하여금 이하의 동작들을 수행하기 위한 명령들을 포함하며, 상기 동작들은:
    상기 사용자가 착용한 웨어러블 디바이스로부터 제 1 센싱 데이터 및 제 2 센싱 데이터를 수신하는 동작; 및
    상기 제 1 센싱 데이터 및 상기 제 2 센싱 데이터에 기초하여, 변화량 데이터를 생성하는 동작;
    을 포함하고,
    상기 제 1 센싱 데이터는,
    상기 웨어러블 디바이스에서 상기 사용자의 측두근과 접하는 제 1 착탈 모듈의 제 1 측면에 구비된 제 1 센서부가 획득한 데이터이고,
    상기 제 2 센싱 데이터는,
    상기 웨어러블 디바이스에서 상기 사용자의 측두근과 접하지 않고, 상기 제 1 측면에 대향하는 제 2 측면에 구비된 제 2 센서부가 획득한 데이터인,
    컴퓨터 판독가능 저장 매체에 저장된 컴퓨터 프로그램.
  14. 제 13 항에 있어서,
    상기 변화량 데이터를 생성하는 동작은,
    상기 제 1 센싱 데이터에 포함된 제 1 X 축 데이터, 제 1 Y 축 데이터 및 제 1 Z 축 데이터를 합산한 제 1 합산 값을 산출하는 동작;
    상기 제 2 센싱 데이터에 포함된 제 2 X 축 데이터, 제 2 Y 축 데이터 및 제 2 Z 축 데이터를 합산한 제 2 합산 값을 산출하는 동작; 및
    상기 제 1 합산 값 및 상기 제 2 합산 값에 기초하여 상기 변화량 데이터를 생성하는 동작;
    을 포함하고,
    상기 변화량 데이터는,
    상기 제 1 합산 값에서 상기 제 2 합산 값을 감산한 결과 값의 절대 값인,
    컴퓨터 판독가능 저장 매체에 저장된 컴퓨터 프로그램.
  15. 제 14 항에 있어서,
    상기 변화량 데이터 및 상기 사용자 단말기의 메모리에 사전 저장된 저작 임계 데이터에 기초하여 저작 운동 데이터를 획득하는 동작;
    을 더 포함하는,
    컴퓨터 판독가능 저장 매체에 저장된 컴퓨터 프로그램.
  16. 제 15 항에 있어서,
    상기 저작 운동 데이터에 기초하여 식습관 정보를 생성하는 동작; 및
    상기 식습관 정보를 화면으로 출력하는 동작;
    을 더 포함하고,
    상기 식습관 정보는,
    저작 속도, 저작 횟수 및 저작 강도 중 적어도 하나를 포함하는,
    컴퓨터 판독가능 저장 매체에 저장된 컴퓨터 프로그램.
  17. 제 16 항에 있어서,
    상기 식습관 정보 및 상기 사용자 단말기의 메모리에 사전 저장된 권장 식습관 정보를 비교하여 비교 데이터를 산출하는 동작;
    상기 비교 데이터에 기초하여, 피드백 신호의 전송 여부를 결정하는 동작; 및
    상기 피드백 신호의 전송 여부에 따라, 상기 피드백 신호에 대응하는 음향 신호가 상기 웨어러블 디바이스에서 출력되도록 상기 피드백 신호를 상기 웨어러블 디바이스로 전송하는 동작;
    을 더 포함하고,
    상기 권장 식습관 정보는,
    권장 저작 속도, 권장 저작 횟수 및 권장 저작 강도 중 적어도 하나를 포함하는,
    컴퓨터 판독가능 저장 매체에 저장된 컴퓨터 프로그램.
PCT/KR2020/004026 2019-03-26 2020-03-25 사용자의 측두근을 모니터링하는 안경 및 컴퓨터 프로그램 WO2020197250A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2019-0034549 2019-03-26
KR1020190034549A KR102125055B1 (ko) 2019-03-26 2019-03-26 사용자의 측두근을 모니터링하는 안경 및 컴퓨터 프로그램

Publications (1)

Publication Number Publication Date
WO2020197250A1 true WO2020197250A1 (ko) 2020-10-01

Family

ID=71137117

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2020/004026 WO2020197250A1 (ko) 2019-03-26 2020-03-25 사용자의 측두근을 모니터링하는 안경 및 컴퓨터 프로그램

Country Status (2)

Country Link
KR (1) KR102125055B1 (ko)
WO (1) WO2020197250A1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230244298A1 (en) * 2020-06-24 2023-08-03 Nippon Telegraph And Telephone Corporation Information Input Device
US11874962B2 (en) * 2020-06-24 2024-01-16 Nippon Telegraph And Telephone Corporation Information input device

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4730037B2 (ja) * 2005-09-27 2011-07-20 パナソニック電工株式会社 咀嚼計
JP2016093255A (ja) * 2014-11-12 2016-05-26 日本電信電話株式会社 咀嚼検知システム、方法およびプログラム
JP2017127511A (ja) * 2016-01-21 2017-07-27 花浦　敏孝 咀嚼検出装置及び食習慣管理システム
JP2018033568A (ja) * 2016-08-30 2018-03-08 株式会社吉田製作所 食生活管理装置
JP2018175030A (ja) * 2017-04-04 2018-11-15 学校法人 中央大学 頭部筋活動検知装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101921661B1 (ko) 2015-08-31 2018-11-27 건국대학교 산학협력단 식습관 개선 시스템 및 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4730037B2 (ja) * 2005-09-27 2011-07-20 パナソニック電工株式会社 咀嚼計
JP2016093255A (ja) * 2014-11-12 2016-05-26 日本電信電話株式会社 咀嚼検知システム、方法およびプログラム
JP2017127511A (ja) * 2016-01-21 2017-07-27 花浦　敏孝 咀嚼検出装置及び食習慣管理システム
JP2018033568A (ja) * 2016-08-30 2018-03-08 株式会社吉田製作所 食生活管理装置
JP2018175030A (ja) * 2017-04-04 2018-11-15 学校法人 中央大学 頭部筋活動検知装置

Also Published As

Publication number Publication date
KR102125055B1 (ko) 2020-06-19

Similar Documents

Publication Publication Date Title
WO2016036155A1 (en) Method of providing user with battery power notification in mobile device and mobile device therefor
WO2016200204A1 (en) Electronic device and control method thereof
WO2016099097A1 (ko) 이동 단말을 이용한 스케줄 알림 방법 및 그 이동 단말
WO2018155951A1 (en) Method of obtaining biometric information in electronic device and electronic device for the same
WO2019132344A1 (en) Method for controlling earpiece and electronic device for supporting the same
WO2016080804A1 (en) Apparatus for measuring bioelectrical signals
WO2017003043A1 (ko) 이동 단말기 및 그 제어 방법
WO2016072749A1 (en) Electronic device, and method for analyzing face information in electronic device
EP3189506A1 (en) Method of providing user with battery power notification in mobile device and mobile device therefor
WO2015142071A1 (en) Wearable device and method of operating the same
WO2016093516A1 (en) Method and apparatus for providing integrity check data
WO2020101249A1 (en) Method, electronic device, and storage medium for detecting biometric information
WO2016017970A1 (en) Method and device for encrypting or decrypting content
WO2016195161A1 (en) Watch type terminal and method for controlling the same
WO2020197250A1 (ko) 사용자의 측두근을 모니터링하는 안경 및 컴퓨터 프로그램
WO2016117745A1 (ko) 전자 디바이스 및 그 제어방법
WO2016204496A1 (en) System and method of providing information of peripheral device
WO2017039051A1 (ko) 와치 타입 이동단말기 및 그 제어방법
WO2016068578A1 (en) Method for controlling operation of electronic device and electronic device using the same
EP3220815A1 (en) Apparatus for measuring bioelectrical signals
WO2015167318A1 (en) Wearable device and method of controlling the same
WO2019083195A1 (en) ELECTRONIC APPARATUS AND METHOD FOR CONTROLLING TIME MEASUREMENT
WO2018124589A1 (en) Ear unit and portable sound device
WO2017061722A1 (ko) 이동단말기 및 그 제어방법
WO2018048098A1 (en) Portable camera and controlling method therefor

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20779996

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20779996

Country of ref document: EP

Kind code of ref document: A1