KR102331694B1 - Mask to get dynamic movement of face and its operation method - Google Patents
Mask to get dynamic movement of face and its operation method Download PDFInfo
- Publication number
- KR102331694B1 KR102331694B1 KR1020190146251A KR20190146251A KR102331694B1 KR 102331694 B1 KR102331694 B1 KR 102331694B1 KR 1020190146251 A KR1020190146251 A KR 1020190146251A KR 20190146251 A KR20190146251 A KR 20190146251A KR 102331694 B1 KR102331694 B1 KR 102331694B1
- Authority
- KR
- South Korea
- Prior art keywords
- face
- mask
- inner skin
- person
- skin
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/011—Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Dermatology (AREA)
- General Health & Medical Sciences (AREA)
- Neurology (AREA)
- Neurosurgery (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Rehabilitation Tools (AREA)
Abstract
본 발명은 안면의 동적 움직임 획득을 위한 마스크에 관한 것으로, 보다 상세하게는 사용자의 목의 부하를 최소화하고, 얼굴 각도, 조명, 배경에 상관없이 정확하게 안면의 동적 움직임을 도출할 수 있는 안면의 동적 움직임 획득을 위한 마스크에 관한 것이다. 본 발명의 구은 사람의 안면과 대응되는 형상으로 마련되며 상기 안면에 밀착되는 내피부; 및 상기 내피부에 부착되는 복수의 센서부를 포함하며 상기 센서부는 안면 근육의 변화에 따른 상기 내피부의 변형에 대한 동적 움직임을 측정하도록 마련된 것을 특징으로 하는 안면의 동적 움직임 획득을 위한 마스크를 제공한다.The present invention relates to a mask for acquiring the dynamic movement of the face, and more particularly, to minimize the load on the user's neck, and to accurately derive the dynamic movement of the face regardless of the face angle, lighting, or background. It relates to a mask for motion acquisition. The inner skin is provided in a shape corresponding to the face of the baked person of the present invention and is in close contact with the face; and a plurality of sensor units attached to the inner skin, wherein the sensor unit provides a mask for acquiring dynamic movement of the face, characterized in that it is provided to measure the dynamic movement for the deformation of the inner skin according to the change of the facial muscle.
Description
본 발명은 안면의 동적 움직임 획득을 위한 마스크에 관한 것으로, 보다 상세하게는 사용자의 목의 부하를 최소화하고, 얼굴 각도, 조명, 배경에 상관없이 정확하게 안면의 동적 움직임을 도출할 수 있는 안면의 동적 움직임 획득을 위한 마스크에 관한 것이다.The present invention relates to a mask for acquiring the dynamic movement of the face, and more particularly, to minimize the load on the user's neck, and to accurately derive the dynamic movement of the face regardless of the face angle, lighting, or background. It relates to a mask for motion acquisition.
사람의 얼굴을 따라 캐릭터가 움직이는 애니메트로닉스 기술, 사람의 얼굴에 대응하는 캐릭터 생성 기술, 얼굴 편마비 또는 뇌졸중 환자의 재활 정도 측정 기술들은 모두 안면 근육의 움직임을 정확하게 측정하는 기술이 필요하다. Animatronics technology in which a character moves along a human face, a character creation technology corresponding to a human face, and a technique for measuring the degree of rehabilitation of a patient with facial hemiplegia or stroke all require a technology to accurately measure the movement of the facial muscles.
이에, 종래에는 카메라를 이용하여 안면의 특징점을 추출하고, 이 특징점들의 동적 움직임을 획득하는 방법을 사용하였다. 그러나, 이러한 방법은 안면의 각도와, 배경, 조명의 상황에 매우 민감하게 반응하며, 외부 요인에 따른 오차가 크다는 문제가 있다.Accordingly, in the prior art, a method of extracting facial feature points using a camera and obtaining dynamic motions of these feature points was used. However, this method has a problem in that it responds very sensitively to the angle of the face, the background, and the lighting conditions, and has a large error due to external factors.
이러한 문제를 해결하기 위해, 종래에는 헤드마운트에 카메라를 고정하여 머리가 움직이더라도 언제나 동일한 각도에서 안면을 획득하는 장치가 고안된 바가 있다. 그러나, 이러한 기술은 사용자의 목부위에 부하가 크기 때문에 장시간 사용이 어렵고, 환자에게 적용하는데에 특히 어려움이 있었다.In order to solve this problem, conventionally, there has been devised a device for obtaining a face at the same angle even if the head moves by fixing the camera to the head mount. However, this technique is difficult to use for a long time because the load on the user's neck is large, and it was particularly difficult to apply to a patient.
또한, 안면 부위에 얇은 박막형의 EMG센서를 부착하여 안면 부위의 동적 움직임을 획득하는 기술도 종래에 사용되어 왔다. 그러나, 이러한 EMG센서를 안면에 직접 부착하는 방식은 사용자의 피부상태에 따라 노이즈가 크며, 센서의 제작에도 높은 비용이 소요되어 경제적이지 못한 문제가 있었다.In addition, a technique for acquiring a dynamic movement of the facial region by attaching a thin film-type EMG sensor to the facial region has also been conventionally used. However, this method of directly attaching the EMG sensor to the face has a problem in that noise is large depending on the skin condition of the user, and the manufacturing of the sensor is also expensive, so it is not economical.
따라서, 경제적이면서도 외부 환경의 영향을 최소한으로 받아 안면의 동적 움직임을 정확하게 획득할 수 있는 기술이 필요하다.Therefore, there is a need for a technology capable of accurately acquiring the dynamic movement of the face while being economical and receiving minimal influence from the external environment.
상기와 같은 문제를 해결하기 위한 본 발명의 목적은 사용자의 목의 부하를 최소화하고, 얼굴 각도, 조명, 배경에 상관없이 정확하게 안면의 동적 움직임을 도출할 수 있는 안면의 동적 움직임 획득을 위한 마스크를 제공하는 것이다.An object of the present invention to solve the above problems is to minimize the load on the user's neck, and to obtain a mask for obtaining dynamic movements of the face that can accurately derive the dynamic movements of the face regardless of the face angle, lighting, or background will provide
본 발명이 이루고자 하는 기술적 과제는 이상에서 언급한 기술적 과제로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The technical problems to be achieved by the present invention are not limited to the technical problems mentioned above, and other technical problems not mentioned can be clearly understood by those of ordinary skill in the art to which the present invention belongs from the description below. There will be.
상기와 같은 목적을 달성하기 위한 본 발명의 구성은 사람의 안면과 대응되는 형상으로 마련되며 상기 안면에 밀착되는 내피부; 및 상기 내피부에 부착되는 복수의 센서부를 포함하며 상기 센서부는 안면 근육의 변화에 따른 상기 내피부의 변형에 대한 동적 움직임을 측정하도록 마련된 것을 특징으로 하는 안면의 동적 움직임 획득을 위한 마스크를 제공한다.The configuration of the present invention for achieving the above object is provided in a shape corresponding to a person's face, and the inner skin is in close contact with the face; and a plurality of sensor units attached to the inner skin, wherein the sensor unit provides a mask for acquiring dynamic movement of the face, characterized in that it is provided to measure the dynamic movement of the inner skin according to the change of the facial muscle.
본 발명의 실시예에 있어서, 상기 내피부는, 실리콘 소재로 마련되며, 상기 안면에 밀착되어 상기 안면의 변화에 대응되도록 변형되는 것을 특징으로 할 수 있다.In an embodiment of the present invention, the inner skin is provided with a silicone material, and is in close contact with the face and may be characterized in that it is deformed to correspond to a change in the face.
본 발명의 실시예에 있어서, 상기 센서부는, 상기 내피부에 부착되며, 플렉시블 기판으로 이루어진 기판모듈; 및 상기 기판모듈에 결합되는 센서모듈을 포함하는 것을 특징으로 할 수 있다.In an embodiment of the present invention, the sensor unit is attached to the inner skin, the substrate module made of a flexible substrate; and a sensor module coupled to the substrate module.
본 발명의 실시예에 있어서, 상기 기판모듈은, 플렉시블 리본형 기판으로 이루어지며, 사람 안면의 주요 근육 부위에 위치하도록 마련된 것을 특징으로 할 수 있다.In an embodiment of the present invention, the substrate module is made of a flexible ribbon-type substrate, and may be characterized in that it is provided to be located in the main muscle part of the human face.
본 발명의 실시예에 있어서, 상기 센서모듈은, 상기 내피부의 변형에 따라 움직이는 상기 기판모듈의 각속도 및 가속도를 측정하도록 마련된 것을 특징으로 할 수 있다.In an embodiment of the present invention, the sensor module may be characterized in that it is provided to measure the angular velocity and acceleration of the substrate module moving according to the deformation of the inner skin.
본 발명의 실시예에 있어서, 상기 센서모듈은, IMU(Inertial Measurement Unit) 센서인 것을 특징으로 할 수 있다.In an embodiment of the present invention, the sensor module may be an Inertial Measurement Unit (IMU) sensor.
본 발명의 실시예에 있어서, 상기 내피부를 상기 사람의 안면에 밀착시키도록 마련되며, 사람의 안면과 대응되는 형상으로 마련되는 외피부를 더 포함하는 것을 특징으로 할 수 있다.In an embodiment of the present invention, the inner skin is provided to closely contact the person's face, and may further include an outer skin provided in a shape corresponding to the person's face.
본 발명의 실시예에 있어서, 상기 외피부는, 사람의 안면과 대응되는 형상으로 마련되는 외피마스크; 및 상기 외피마스크의 양측으로 연장 형성되며, 사람의 귀에 걸리도록 마련되는 고정마스크를 더 포함하며, 상기 고정마스크는 사람의 귀에 걸렸을 때, 상기 외피마스크가 상기 내피부를 사람의 안면에 밀착시키도록 마련된 것을 특징으로 할 수 있다.In an embodiment of the present invention, the outer skin, an outer mask provided in a shape corresponding to a person's face; and a fixed mask extending from both sides of the outer mask and provided to be caught on a person's ear, wherein the fixed mask is provided to bring the inner skin into close contact with a person's face when the fixed mask is caught on a person's ear can be characterized as
상기와 같은 목적을 달성하기 위한 본 발명의 구성은 안면의 동적 움직임 획득을 위한 마스크의 작동방법에 있어서, a) 상기 외피부를 이용하여 상기 내피부를 안면에 밀착시키는 단계; b) 상기 안면에 밀착된 상기 내피부가 상기 안면의 근육 움직임에 따라 변형되는 단계; c) 상기 센서부가 상기 안면에 밀착된 상기 내피부의 변형에 따른 각속도 및 가속도를 측정하는 단계; 및 d) 측정된 상기 각속도 및 가속도를 이용하여 안면의 동적 움직임 정보를 도출하는 단계를 포함하는 것을 특징으로 하는 안면의 동적 움직임 획득을 위한 마스크의 작동방법을 제공한다.The configuration of the present invention for achieving the above object is a method of operating a mask for obtaining dynamic movement of the face, comprising: a) adhering the inner skin to the face using the outer skin; b) transforming the inner skin in close contact with the face according to the muscle movement of the face; c) measuring the angular velocity and acceleration according to the deformation of the inner skin in close contact with the face by the sensor unit; and d) deriving dynamic motion information of the face using the measured angular velocity and acceleration.
본 발명의 실시예에 있어서, 상기 c) 단계는, 상기 내피부에 부착되어 상기 내피부의 변형에 따라 움직이는 기판모듈의 각속도 및 가속도를 측정하도록 마련된 것을 특징으로 할 수 있다.In an embodiment of the present invention, the step c) may be characterized in that it is attached to the inner skin and is provided to measure the angular velocity and acceleration of the substrate module moving according to the deformation of the inner skin.
상기와 같은 구성에 따르는 본 발명의 효과는, 얼굴 각도나 조명, 배경에 민감하지 않기 때문에 정확한 안면의 동적움직임을 획득할 수 있다.The effect of the present invention according to the configuration as described above, since it is not sensitive to the angle of the face, the lighting, or the background, it is possible to obtain an accurate dynamic movement of the face.
사용자의 목 근육에 주는 부하를 최소화할 수 있어, 환자에게도 적용이 용이하다.Since the load on the user's neck muscles can be minimized, it is easy to apply to the patient.
EMG 센서에 비해 센서 비용이 저렴한 IMU센서를 적용하여 경제적이다.It is economical by applying the IMU sensor, which is cheaper than the EMG sensor.
본 발명의 효과는 상기한 효과로 한정되는 것은 아니며, 본 발명의 상세한 설명 또는 특허청구범위에 기재된 발명의 구성으로부터 추론 가능한 모든 효과를 포함하는 것으로 이해되어야 한다.It should be understood that the effects of the present invention are not limited to the above-described effects, and include all effects that can be inferred from the configuration of the invention described in the detailed description or claims of the present invention.
도 1은 본 발명의 일실시예에 따른 안면의 동적 움직임 획득을 위한 마스크의 예시도이다.
도 2는 본 발명의 일실시예에 따른 안면의 동적 움직임 획득을 위한 마스크의 센서부를 나타낸 예시도이다.
도 3은 본 발명의 일실시예에 따른 안면의 동적 움직임 획득을 위한 마스크의 작동방법의 순서도이다.1 is an exemplary diagram of a mask for acquiring dynamic motion of a face according to an embodiment of the present invention.
Figure 2 is an exemplary view showing a sensor unit of the mask for acquiring the dynamic motion of the face according to an embodiment of the present invention.
3 is a flowchart of a method of operating a mask for acquiring dynamic facial motion according to an embodiment of the present invention.
이하에서는 첨부한 도면을 참조하여 본 발명을 설명하기로 한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며, 따라서 여기에서 설명하는 실시예로 한정되는 것은 아니다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.Hereinafter, the present invention will be described with reference to the accompanying drawings. However, the present invention may be embodied in several different forms, and thus is not limited to the embodiments described herein. And in order to clearly explain the present invention in the drawings, parts irrelevant to the description are omitted, and similar reference numerals are attached to similar parts throughout the specification.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결(접속, 접촉, 결합)"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 부재를 사이에 두고 "간접적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 구비할 수 있다는 것을 의미한다.Throughout the specification, when a part is said to be “connected (connected, contacted, coupled)” with another part, it is not only “directly connected” but also “indirectly connected” with another member interposed therebetween. "Including cases where In addition, when a part "includes" a certain component, this means that other components may be further provided without excluding other components unless otherwise stated.
본 명세서에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terms used herein are used only to describe specific embodiments, and are not intended to limit the present invention. The singular expression includes the plural expression unless the context clearly dictates otherwise. In this specification, terms such as "comprises" or "have" are intended to designate that the features, numbers, steps, operations, components, parts, or combinations thereof described in the specification exist, but one or more other features It should be understood that this does not preclude the existence or addition of numbers, steps, operations, components, parts, or combinations thereof.
이하 첨부된 도면을 참고하여 본 발명의 실시예를 상세히 설명하기로 한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.
도 1은 본 발명의 일실시예에 따른 안면의 동적 움직임 획득을 위한 마스크의 예시도이고, 도 2는 본 발명의 일실시예에 따른 안면의 동적 움직임 획득을 위한 마스크의 센서부를 나타낸 예시도이다.1 is an exemplary view of a mask for obtaining dynamic motion of the face according to an embodiment of the present invention, and FIG. 2 is an exemplary view showing a sensor unit of a mask for obtaining dynamic motion of the face according to an embodiment of the present invention .
도 1 및 도 2에 도시된 것처럼, 안면의 동적 움직임 획득을 위한 마스크(100)는 내피부(110), 센서부(120) 및 외피부(130)를 포함한다.As shown in FIGS. 1 and 2 , the
상기 내피부(110)는 사람의 안면과 대응되는 형상으로 마련되며, 상기 안면에 밀착되도록 마련될 수 있다.The
보다 구체적으로, 상기 내피부(110)는 실리콘 소재의 마스크 형태로 마련되어 상기 안면에 밀착되며, 상기 안면의 변화에 대응되게 변형되도록 마련될 수 있다.More specifically, the
상기 센서부(120)는 상기 내피부(110)에 부착되며, 복수개로 마련될 수 있다.The
그리고, 상기 센서부(120)는 안면 근육의 변화에 따른 상기 내피부(110)의 변형에 대한 동적 움직임을 측정하도록 마련될 수 있다.In addition, the
구체적으로, 상기 센서부(120)는 기판모듈(121) 및 센서모듈(122)을 포함한다.Specifically, the
상기 기판모듈(121)은 상기 내피부(110)에 부착되며, 플렉시블(flexible) 기판으로 이루어질 수 있다. The
특히, 상기 기판모듈(121)은 플렉시블 리판형 기판으로 이루어질 수 있으며, 사람 안면의 주요 근육 부위와 대응되는 위치에 마련될 수 있다.In particular, the
일 예로, 상기 기판모듈(121)은 안면의 주요 근육 부위의 형태에 대응되도록 이의 형상에 따라 연장 형성될 수 있다.For example, the
그리고, 상기 기판모듈(121)은 하나의 주요 근육 부위에 하나만 형성되는 것이 아니라 복수개의 가닥 형태로 마련되며, 여러 방향으로 연장 형성된 패치 형태로 마련될 수도 있다. 이처럼 마련된 상기 기판모듈(121)은 근육의 다양한 방향으로의 움직임을 보다 정확하게 측정하도록 할 수 있다.In addition, the
상기 센서모듈(122)은 상기 기판모듈(121)에 하나 이상 결합되어 마련될 수 있다.One or
상기 센서모듈(122)은, 상기 내피부(110)의 변형에 따라 움직이는 상기 기판모듈(121)의 각속도 및 가속도를 측정하도록 마련될 수 있다.The
그리고, 상기 센서모듈(122)은, IMU(Inertial Measurement Unit) 센서일 수 있다.Also, the
보다 구체적으로, 상기 내피부(110)는 사람의 안면에 밀착된 상태이기 때문에, 안면 근육의 움직임에 따라 이와 대응되게 변형될 수 있다. 이때, 상기 내피부(110)에 부착된 상기 기판모듈(121)들은 유연한 소재로 마련되어 있기 때문에 상기 내피부(110)의 변형에 대응되게 신축, 이동, 회전 등의 움직임을 갖게 된다.More specifically, since the
이처럼 상기 기판모듈(121)이 움직이게 되면, 상기 기판모듈(122)에 결합된 상기 센서모듈(122)은 이의 움직임에 대한 각속도 및 가속도를 측정하여 근육의 움직임을 정확하게 측정할 수 있다.As such, when the
상기 외피부(130)는 상기 내피부(110)를 상기 사람의 안면에 밀착시키도록 마련되며, 사람의 안면과 대응되는 형상으로 마련될 수 있다.The
상기 외피부(130)는 외피마스크(131) 및 고정마스크(132)를 포함한다.The
상기 외피마스크(131)는 사람의 안면과 대응되는 형상으로 마련될 수 있다. 구체적으로, 상기 외피마스크(131)는 상기 내피부(110)의 외측을 덮도록 마련되며, 상기 내피부(110)와 대응되는 형상의 마스크로 마련될 수 있다.The outer skin mask 131 may be provided in a shape corresponding to a person's face. Specifically, the outer skin mask 131 is provided to cover the outside of the
상기 센서부(120)는 상기 내피부(110)와 상기 외피부(130) 사이에 마련될 수 있다.The
상기 고정마스크(132)는 상기 외피마스크(131)의 양측으로 연장 형성되며, 사람의 귀에 걸리도록 마련될 수 있다.The fixing mask 132 is formed to extend to both sides of the outer mask 131, it may be provided to be caught on a person's ear.
그리고, 상기 고정마스크(132)는 사람의 귀에 걸렸을 때, 상기 외피마스크(131)가 상기 내피부(110)를 사람의 안면에 밀착시키기 위해 가압하도록 마련될 수 있다.And, when the fixed mask 132 is caught in a person's ear, the outer skin mask 131 may be provided to press the
이처럼 마련된 본 발명은 얼굴 각도나 조명, 배경에 민감하지 않기 때문에 정확한 안면의 동적움직임을 획득할 수 있다.Since the present invention prepared in this way is not sensitive to the angle of the face, the lighting, or the background, it is possible to obtain accurate dynamic motion of the face.
또한, 사용자의 목 근육에 주는 부하를 최소화할 수 있어, 환자에게도 적용이 용이하다.In addition, it is possible to minimize the load on the user's neck muscles, it is easy to apply to the patient.
그리고, 본 발명의 상기 센서모듈(122)은 EMG 센서에 비해 센서 비용이 저렴한 IMU센서를 적용하여 경제적이다.In addition, the
도 3은 본 발명의 일실시예에 따른 안면의 동적 움직임 획득을 위한 마스크의 작동방법의 순서도이다.3 is a flowchart of a method of operating a mask for acquiring dynamic facial motion according to an embodiment of the present invention.
도 3에 도시된 것처럼, 안면의 동적 움직임 획득을 위한 마스크(100)의 작동방법은 먼저, 외피부를 이용하여 내피부를 안면에 밀착시키는 단계(S10)를 수행할 수 있다.As shown in FIG. 3 , the operating method of the
외피부를 이용하여 내피부를 안면에 밀착시키는 단계(S10)에서, 상기 외피부(130)의 상기 고정마스크(132)를 사람의 귀에 걸음으로써, 상기 외피마스크(131)가 상기 내피부(110)를 사람의 안면측으로 가압하여 밀착시킬 수 있다.In the step (S10) of adhering the inner skin to the face using the outer skin, by hanging the fixing mask 132 of the
외피부를 이용하여 내피부를 안면에 밀착시키는 단계(S10) 이후에는, 안면에 밀착된 내피부가 안면의 근육 움직임에 따라 변형되는 단계(S20)가 이루어질 수 있다.After the step (S10) of adhering the inner skin to the face using the outer skin, a step (S20) in which the inner skin in close contact with the face is deformed according to the muscle movement of the face may be performed.
안면에 밀착된 내피부가 안면의 근육 움직임에 따라 변형되는 단계(S20)에서, 상기 내피부(110)가 안면에 밀착된 상태에서 안면의 근육이 움직이게 되면, 상기 내피부(110)도 함께 변형되어 움직이게 될 수 있다.In the step (S20) in which the inner skin in close contact with the face is deformed according to the movement of the muscles of the face, when the muscles of the face move while the
안면에 밀착된 내피부가 안면의 근육 움직임에 따라 변형되는 단계(S20) 이후에는, 센서부가 안면에 밀착된 내피부의 변형에 따른 각속도 및 가속도를 측정하는 단계(S30)가 이루어질 수 있다.After the step (S20) in which the inner skin in close contact with the face is deformed according to the muscle movement of the face, a step (S30) of measuring angular velocity and acceleration according to the deformation of the inner skin in close contact with the face by the sensor unit may be performed.
센서부가 안면에 밀착된 내피부의 변형에 따른 각속도 및 가속도를 측정하는 단계(S30)에서, 상기 내피부(110)에 부착된 상기 기판모듈(121)들은 유연한 소재로 마련되어 있기 때문에 상기 내피부(110)의 변형에 대응되게 신축, 이동, 회전 등의 움직임을 갖게 된다. 이처럼 상기 기판모듈(121)이 움직이게 되면, 상기 기판모듈(122)에 결합된 상기 센서모듈(122)은 이의 움직임에 대한 각속도 및 가속도를 측정하여 근육의 움직임을 정확하게 측정할 수 있다.In the step (S30) of the sensor unit measuring the angular velocity and acceleration according to the deformation of the inner skin in close contact with the face, since the
센서부가 안면에 밀착된 내피부의 변형에 따른 각속도 및 가속도를 측정하는 단계(S30) 이후에는, 측정된 각속도 및 가속도를 이용하여 안면의 동적 움직임 정보를 도출하는 단계(S40)가 이루어질 수 있다.After the sensor unit measures the angular velocity and acceleration according to the deformation of the inner skin in close contact with the face (S30), a step (S40) of deriving dynamic motion information of the face using the measured angular velocity and acceleration may be performed.
측정된 각속도 및 가속도를 이용하여 안면의 동적 움직임 정보를 도출하는 단계(S40)에서, 상기 안면의 동적 움직임 정보는 각 안면 근육의 움직임에 대한 정보 및 이를 가공한 2차 정보일 수 있다.In the step of deriving the dynamic movement information of the face using the measured angular velocity and acceleration (S40), the dynamic movement information of the face may be information on the movement of each facial muscle and secondary information processed therefrom.
즉, 측정된 각속도 및 가속도를 이용하여 안면의 동적 움직임 정보를 도출하는 단계(S40)에서는 각 안면 근육의 움직임에 따른 얼굴 표정, 감정 등을 도출하도록 마련될 수도 있다.That is, in the step of deriving the dynamic motion information of the face using the measured angular velocity and acceleration ( S40 ), it may be provided to derive a facial expression, emotion, etc. according to the movement of each facial muscle.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.The above description of the present invention is for illustration, and those of ordinary skill in the art to which the present invention pertains can understand that it can be easily modified into other specific forms without changing the technical spirit or essential features of the present invention. will be. Therefore, it should be understood that the embodiments described above are illustrative in all respects and not restrictive. For example, each component described as a single type may be implemented in a dispersed form, and likewise components described as distributed may be implemented in a combined form.
본 발명의 범위는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.The scope of the present invention is indicated by the following claims, and all changes or modifications derived from the meaning and scope of the claims and their equivalent concepts should be construed as being included in the scope of the present invention.
100: 안면의 동적 움직임 획득을 위한 마스크
110: 내피부
120: 센서부
121: 기판모듈
122: 센서모듈
130: 외피부
131: 외피마스크
132: 고정마스크100: Mask for acquiring dynamic movement of the face
110: inner skin
120: sensor unit
121: board module
122: sensor module
130: outer skin
131: outer mask
132: fixed mask
Claims (10)
상기 내피부에 부착되는 복수의 센서부를 포함하며
상기 센서부는 안면 근육의 변화에 따른 상기 내피부의 변형에 대한 동적 움직임을 측정하도록 마련되고,
상기 센서부는,
상기 내피부에 부착되며, 플렉시블 기판으로 이루어진 기판모듈; 및
상기 기판모듈에 결합되는 센서모듈을 포함하며,
상기 센서모듈은,
상기 내피부의 변형에 따라 움직이는 상기 기판모듈의 각속도 및 가속도를 측정하도록 마련된 것을 특징으로 하는 안면의 동적 움직임 획득을 위한 마스크.
an inner skin that is provided in a shape corresponding to a person's face and is in close contact with the face; and
It includes a plurality of sensor parts attached to the inner skin,
The sensor unit is provided to measure the dynamic movement for the deformation of the inner skin according to the change of the facial muscle,
The sensor unit,
a substrate module attached to the inner skin and made of a flexible substrate; and
It includes a sensor module coupled to the substrate module,
The sensor module is
Mask for acquiring dynamic movement of the face, characterized in that it is provided to measure the angular velocity and acceleration of the substrate module moving according to the deformation of the inner skin.
상기 내피부는,
실리콘 소재로 마련되며, 상기 안면에 밀착되어 상기 안면의 변화에 대응되도록 변형되는 것을 특징으로 하는 안면의 동적 움직임 획득을 위한 마스크.
The method of claim 1,
The inner skin is
A mask for acquiring dynamic movement of the face, characterized in that it is made of a silicone material and is in close contact with the face and is deformed to correspond to the change of the face.
상기 기판모듈은,
플렉시블 리본형 기판으로 이루어지며,
사람 안면의 주요 근육 부위에 위치하도록 마련된 것을 특징으로 하는 안면의 동적 움직임 획득을 위한 마스크.
The method of claim 1,
The substrate module,
It consists of a flexible ribbon-type substrate,
A mask for acquiring dynamic movements of the face, characterized in that it is provided to be located in the main muscle region of the human face.
상기 센서모듈은,
IMU(Inertial Measurement Unit) 센서인 것을 특징으로 하는 안면의 동적 움직임 획득을 위한 마스크.
The method of claim 1,
The sensor module is
A mask for acquiring dynamic movements of the face, characterized in that it is an Inertial Measurement Unit (IMU) sensor.
상기 내피부를 상기 사람의 안면에 밀착시키도록 마련되며, 사람의 안면과 대응되는 형상으로 마련되는 외피부를 더 포함하는 것을 특징으로 하는 안면의 동적 움직임 획득을 위한 마스크.
The method of claim 1,
The mask for obtaining dynamic movement of the face, characterized in that it further comprises an outer skin provided to closely contact the inner skin to the face of the person, the outer skin provided in a shape corresponding to the face of the person.
상기 외피부는,
사람의 안면과 대응되는 형상으로 마련되는 외피마스크; 및
상기 외피마스크의 양측으로 연장 형성되며, 사람의 귀에 걸리도록 마련되는 고정마스크를 더 포함하며,
상기 고정마스크는 사람의 귀에 걸렸을 때, 상기 외피마스크가 상기 내피부를 사람의 안면에 밀착시키도록 마련된 것을 특징으로 하는 안면의 동적 움직임 획득을 위한 마스크.
8. The method of claim 7,
The outer skin is
an outer mask provided in a shape corresponding to a person's face; and
It is formed extending on both sides of the outer mask, further comprising a fixed mask provided to be caught on a person's ear,
When the fixed mask is caught in a person's ear, the mask for acquiring dynamic movement of the face, characterized in that the outer skin mask is provided to bring the inner skin into close contact with the person's face.
a) 사용자가 상기 외피부를 이용하여 상기 내피부를 안면에 밀착시키는 단계;
b) 상기 안면에 밀착된 상기 내피부가 사용자의 안면의 근육 움직임에 따라 변형되는 단계;
c) 상기 센서부가 상기 안면에 밀착된 상기 내피부의 변형에 따른 각속도 및 가속도를 측정하는 단계; 및
d) 상기 센서부에 의해 측정된 상기 각속도 및 가속도를 이용하여 안면의 동적 움직임 정보가 도출되는 단계를 포함하는 것을 특징으로 하는 안면의 동적 움직임 획득을 위한 마스크의 작동방법.
In the method of operating the mask for acquiring the dynamic motion of the face according to claim 7,
a) a step of a user using the outer skin to bring the inner skin into close contact with the face;
b) transforming the inner skin in close contact with the face according to the muscle movement of the user's face;
c) measuring the angular velocity and acceleration according to the deformation of the inner skin in close contact with the face by the sensor unit; and
d) using the angular velocity and acceleration measured by the sensor unit to derive the dynamic motion information of the face, the operating method of the mask for acquiring the dynamic motion of the face, characterized in that it comprises the step of deriving.
상기 c) 단계는,
상기 내피부에 부착되어 상기 내피부의 변형에 따라 움직이는 기판모듈의 각속도 및 가속도를 측정하도록 마련된 것을 특징으로 하는 안면의 동적 움직임 획득을 위한 마스크의 작동방법.10. The method of claim 9,
Step c) is,
Method of operating a mask for acquiring dynamic movement of the face, characterized in that it is attached to the inner skin and is provided to measure the angular velocity and acceleration of the substrate module moving according to the deformation of the inner skin.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020190146251A KR102331694B1 (en) | 2019-11-14 | 2019-11-14 | Mask to get dynamic movement of face and its operation method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020190146251A KR102331694B1 (en) | 2019-11-14 | 2019-11-14 | Mask to get dynamic movement of face and its operation method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20210059162A KR20210059162A (en) | 2021-05-25 |
| KR102331694B1 true KR102331694B1 (en) | 2021-11-29 |
Family
ID=76145436
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020190146251A KR102331694B1 (en) | 2019-11-14 | 2019-11-14 | Mask to get dynamic movement of face and its operation method |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102331694B1 (en) |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101633057B1 (en) | 2015-04-22 | 2016-06-23 | 재단법인 실감교류인체감응솔루션연구단 | Facial Motion Capture Method for Head-Mounted Display System |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7204250B1 (en) * | 1999-12-16 | 2007-04-17 | Compumedics Limited | Bio-mask |
| US7554549B2 (en) * | 2004-10-01 | 2009-06-30 | Sony Corporation | System and method for tracking facial muscle and eye motion for computer graphics animation |
| US8798374B2 (en) | 2008-08-26 | 2014-08-05 | The Regents Of The University Of California | Automated facial action coding system |
-
2019
- 2019-11-14 KR KR1020190146251A patent/KR102331694B1/en active IP Right Grant
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101633057B1 (en) | 2015-04-22 | 2016-06-23 | 재단법인 실감교류인체감응솔루션연구단 | Facial Motion Capture Method for Head-Mounted Display System |
Non-Patent Citations (1)
| Title |
|---|
| Y.Liu et. al., "Flexible, Stretchable Sensors for Wearable Health Monitoring: Sensing Mechanisms, Materials, Fabrication Strategies and Features,"Sensors 2018, vol. 18, no. 645, 2018.02.22. |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20210059162A (en) | 2021-05-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11723582B2 (en) | Non-invasive and non-contact measurement in early therapeutic intervention | |
| US11783627B2 (en) | Methods and apparatus for detecting and classifying facial motions | |
| Hsu et al. | Skin-coupled personal wearable ambulatory pulse wave velocity monitoring system using microelectromechanical sensors | |
| KR102558531B1 (en) | Friction-Based Tactile Sensors for Measuring Grip Stability | |
| Rihar et al. | Infant trunk posture and arm movement assessment using pressure mattress, inertial and magnetic measurement units (IMUs) | |
| CN106164911B (en) | Mapping wearer mobility for apparel design | |
| US20210275103A1 (en) | Biological information processing apparatus and information processing method | |
| CN109891251A (en) | Information processing equipment | |
| KR101913618B1 (en) | Device for joint movement measure | |
| US20170328795A1 (en) | Visuo-haptic sensor | |
| KR102331694B1 (en) | Mask to get dynamic movement of face and its operation method | |
| Liu et al. | A new IMMU-based data glove for hand motion capture with optimized sensor layout | |
| Grieve et al. | 3-d fingertip touch force prediction using fingernail imaging with automated calibration | |
| CN109223503A (en) | Measure method, apparatus, equipment and the storage medium of CPR according to pressing depth | |
| Sun et al. | Measuring fingertip forces by imaging the fingernail | |
| WO2017090815A1 (en) | Apparatus and method for measuring joint range of motion | |
| EP3692897A1 (en) | Guided energy release method and device based on three-dimensional spatial skin temperature topographic map | |
| Ma et al. | A soft capacitive wearable sensing system for lower-limb motion monitoring | |
| Sun et al. | Predicting fingertip forces by imaging coloration changes in the fingernail and surrounding skin | |
| Viana et al. | GymApp: A real time physical activity trainner on wearable devices | |
| González et al. | Online identification and visualization of the statically equivalent serial chain via constrained kalman filter | |
| CN109297507B (en) | Human body limb movement capturing method free of alignment action based on inertial sensor | |
| CN110051361A (en) | A kind of wearable lower limb skeleton motion detection device | |
| Ro et al. | Development of a wearable soft sensor system for measuring finger motions | |
| CN113873637A (en) | Positioning method, positioning device, terminal and storage medium |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |