KR20220069355A - Smart mirror for managing a body shape - Google Patents

Smart mirror for managing a body shape Download PDF

Info

Publication number
KR20220069355A
KR20220069355A KR1020200156388A KR20200156388A KR20220069355A KR 20220069355 A KR20220069355 A KR 20220069355A KR 1020200156388 A KR1020200156388 A KR 1020200156388A KR 20200156388 A KR20200156388 A KR 20200156388A KR 20220069355 A KR20220069355 A KR 20220069355A
Authority
KR
South Korea
Prior art keywords
user
body shape
data
image
display device
Prior art date
Application number
KR1020200156388A
Other languages
Korean (ko)
Inventor
임희정
Original Assignee
주식회사 더블유지에스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 더블유지에스 filed Critical 주식회사 더블유지에스
Priority to KR1020200156388A priority Critical patent/KR20220069355A/en
Publication of KR20220069355A publication Critical patent/KR20220069355A/en

Links

Images

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/30—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to physical therapies or activities, e.g. physiotherapy, acupressure or exercising
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
    • A61B5/1079—Measuring physical dimensions, e.g. size of the entire body or parts thereof using optical or photographic means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1124—Determining motor skills
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1126—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
    • A61B5/1128—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using image analysis
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003—Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A63B24/0006—Computerised comparison for qualitative assessment of motion sequences or the course of a movement
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0075—Means for generating exercise programs or schemes, e.g. computerized virtual trainer, e.g. using expert databases
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/60—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to nutrition control, e.g. diets
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003—Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A63B24/0006—Computerised comparison for qualitative assessment of motion sequences or the course of a movement
    • A63B2024/0009—Computerised real time comparison with previous movements or motion sequences of the user
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003—Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A63B24/0006—Computerised comparison for qualitative assessment of motion sequences or the course of a movement
    • A63B2024/0012—Comparing movements or motion sequences with a registered reference
    • A63B2024/0015—Comparing movements or motion sequences with computerised simulations of movements or motion sequences, e.g. for generating an ideal template as reference to be achieved by the user
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0075—Means for generating exercise programs or schemes, e.g. computerized virtual trainer, e.g. using expert databases
    • A63B2024/0081—Coaching or training aspects related to a group of users

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Biophysics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Physics & Mathematics (AREA)
  • Surgery (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Dentistry (AREA)
  • Molecular Biology (AREA)
  • Veterinary Medicine (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Physiology (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Nutrition Science (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • Radiology & Medical Imaging (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

The present invention relates to a smart mirror for managing a user's customized body shape, which can provide an optimal exercise guide service through an analysis of a user's body shape by using a depth camera and artificial intelligence technology regardless of time and space, and also enables one-on-one matching exercise or group matching exercise based on real-time feedback by providing a real-time video lecture service among a coach and multiple participants.

Description

사용자 맞춤형 체형관리가 가능한 스마트 미러{SMART MIRROR FOR MANAGING A BODY SHAPE}A smart mirror that enables customized body shape management {SMART MIRROR FOR MANAGING A BODY SHAPE}

본 발명은 사용자 맞춤형 체형관리가 가능한 스마트 미러에 관한 것으로서, 보다 구체적으로는, 깊이 카메라 및 인공지능 기술을 이용하여 사용자의 체형 분석을 통한 최적의 운동 가이드 서비스를 시공간에 구애받지 않고 제공할 수 있음은 물론, 코치 및 다수 참여자 간의 실시간 화상 강의 서비스를 제공함으로써 실시간 피드백에 기반한 1:1 매칭운동 혹은 그룹 매칭운동이 가능하도록 하는 사용자 맞춤형 체형관리가 가능한 스마트 미러에 관한 것이다.The present invention relates to a smart mirror capable of user-customized body shape management, and more specifically, it is possible to provide an optimal exercise guide service through analysis of a user's body shape using a depth camera and artificial intelligence technology regardless of time and space. Of course, it relates to a smart mirror capable of user-customized body shape management that enables 1:1 matching exercise or group matching exercise based on real-time feedback by providing a real-time video lecture service between a coach and multiple participants.

최근, 코로나 19와 같은 팬데믹 상황이 발생하는 가운데, 비대면 생활패턴의 증가 및 집단 활동이 감소함은 물론, 언택트로 인한 재택근무, 온라인쇼핑 서비스, 원격의료 서비스, 원격교육 서비스, OTT 등 4차 산업혁명 기술이 확산되면서 사회적 거리두기 실천을 위해 기존의 라이프 스타일에도 많은 변화가 일어나고 있다.Recently, amid the outbreak of a pandemic such as Corona 19, not only the increase in non-face-to-face life patterns and group activities decrease, but also telecommuting due to untact, online shopping service, telemedicine service, distance education service, OTT, etc. As the 4th industrial revolution technology spreads, many changes are taking place in the existing lifestyle to practice social distancing.

특히, 피트니스 산업에 있어서도 기존 피트니스 센터 이용자들은 대부분 온라인 영상에 기반한 홈트레이닝으로 전환하고 있는 가운데, 오프라인 피트니스 센터의 영업 부진, 매출 하락 등이 이슈화되고 있는 현실이다.In particular, in the fitness industry, while most existing fitness center users are switching to home training based on online videos, sluggish sales and declining sales of offline fitness centers are becoming issues.

온라인 영상에 기반한 홈트레이닝 산업은 편의성 및 안전성을 기반으로 현재 급격한 성장을 이루고 있지만, 코치가 옆에서 직접 자세를 교정해줄 수 없다는 문제점과 온라인 영상 특성 상 오프라인 강의에 비해 지속성 및 동기부여가 떨어진다는 문제점이 있다.The home training industry based on online video is currently experiencing rapid growth based on convenience and safety, but the coach cannot correct the posture directly from the side, and due to the nature of the online video, the persistence and motivation are low compared to offline lectures. There is this.

특히, 홈트레이닝을 하는 이용자들은 체형, 체력, 근력량, 신체조건 등이 제각각 인데 반해, 온라인 홈트레이닝 영상을 통해서는 이러한 모든 이용자 각각의 체형에 적합한 운동을 가이드해줄 수 없다는 점에서, 현재 온라인 영상에 기반한 홈트레이닝을 하면서도 자신의 체형이나 신체조건에 맞는 최적의 운동을 가이드해줄 수 있는 서비스 및 기술이 요구되고 있다.In particular, while home training users have different body types, stamina, muscle strength, and physical conditions, online home training videos cannot guide you through exercises suitable for each user's body type. There is a demand for services and technologies that can guide the optimal exercise for one's body type and physical condition while performing home training based on this.

한국등록특허 제10-2043878호Korean Patent Registration No. 10-2043878

본 발명은 상술된 문제점을 해결하기 위해 도출된 것으로서, 깊이 카메라 및 인공지능 기술을 이용하여 사용자의 체형 분석을 통한 최적의 운동 가이드 서비스를 시공간에 구애받지 않고 제공할 수 있음은 물론, 코치 및 다수 참여자 간의 실시간 화상 강의 서비스를 제공함으로써 실시간 피드백에 기반한 1:1 매칭운동 혹은 그룹 매칭운동이 가능하도록 하는 사용자 맞춤형 체형관리가 가능한 스마트 미러를 제공하고자 한다.The present invention was derived to solve the above problems, and it is possible to provide an optimal exercise guide service through analysis of the user's body type using a depth camera and artificial intelligence technology regardless of time and space, as well as coaches and many others. By providing a real-time video lecture service between participants, we want to provide a smart mirror that enables customized body shape management that enables 1:1 matching exercise or group matching exercise based on real-time feedback.

본 발명의 일 실시예에 따른 사용자 맞춤형 체형관리가 가능한 스마트 미러는 내측에 디스플레이 장치가 마련되되, 상기 디스플레이 장치를 통해 출력되는 화면이 외부에서 투영되도록 형성되는 미러 몸체부, 상기 미러 몸체부의 일측에 마련되며, 사용자를 촬영하여 사용자 촬영 데이터를 획득하는 촬영부 및 획득된 상기 사용자 촬영 데이터와 기 저장된 기준 데이터를 비교한 결과를 토대로 상기 사용자의 체형 상태를 분석하고, 분석 결과를 토대로 관리방법 데이터를 생성하는 분석부를 포함하며, 생성된 상기 관리방법 데이터는 상기 디스플레이 장치의 화면을 통해 출력되어 사용자에게 시인되는 것을 특징으로 할 수 있다.In the smart mirror capable of user-customized body shape management according to an embodiment of the present invention, a display device is provided inside, a mirror body formed so that a screen output through the display device is projected from the outside, and one side of the mirror body It is provided, and analyzes the user's body shape based on a result of comparing the obtained reference data with a photographing unit that captures the user and acquires user photographing data, and the obtained user photographing data with pre-stored reference data, and collects management method data based on the analysis result It may include an analysis unit to generate, the generated management method data is output through the screen of the display device may be characterized in that it is visually recognized by the user.

일 실시예에서, 상기 촬영부는 사용자를 촬영하는 깊이 카메라(depth camera)를 포함하는 것을 특징으로 할 수 있다.In an embodiment, the photographing unit may include a depth camera for photographing a user.

일 실시예에서, 상기 분석부는 하나 이상의 학습용 사용자 촬영 데이터와 학습용 기준 데이터를 비교하는 과정을 반복 학습한 결과를 토대로, 상기 사용자 촬영 데이터로부터 사용자의 각 신체부위 별 체형 이미지를 분류 및 수치화하고, 상기 기준 데이터에 포함된 각 신체부위 별 기준 체형 이미지의 수치값과 상기 각 신체부위 별 체형 이미지의 수치값을 서로 비교한 후, 수치값 편차가 높은 신체부위를 기준으로 사용자의 체형 상태를 6단계의 체형 상태 중 어느 하나 이상의 체형 상태로 결정하는 것을 특징으로 할 수 있다.In an embodiment, the analysis unit classifies and digitizes a body shape image for each body part of the user from the user imaged data based on a result of repeated learning of comparing one or more user imaged data for learning with reference data for learning, and the After comparing the numerical values of the reference figure image for each body part included in the reference data with the numerical values of the figure image for each body part, the user's body shape is determined based on the body part with a high numerical value deviation in 6 steps It may be characterized in that it is determined as any one or more of the body shape states.

일 실시예에서, 상기 분석부는 상기 수치값 편차가 높은 신체부위를 기준으로, 각 신체부위 별 상응하는 운동 프로그램 정보 및 식습관 정보를 상기 관리방법 데이터에 포함시키는 것을 특징으로 할 수 있다.In an embodiment, the analysis unit may include, in the management method data, corresponding exercise program information and eating habits information for each body part, based on the body part having the high numerical value deviation.

일 실시예에서, 상기 분석부는 상기 사용자 촬영 데이터를 토대로 사용자의 각 신체부위 별 체형 이미지를 사용자의 관리 전 체형 상태로 설정하고, 상기 기준 데이터에 포함된 각 신체부위 별 기준 체형 이미지를 사용자의 관리 후 체형 상태로 설정한 후, 각 이미지를 서로 오버랩하여 상기 디스플레이 장치의 화면을 통해 출력되도록 하는 것을 특징으로 할 수 있다.In one embodiment, the analysis unit sets a body shape image for each body part of the user based on the user photographing data as the user's overall body shape state, and manages the reference body shape image for each body part included in the reference data for the user After setting the body shape state, each image may be overlapped with each other to be output through the screen of the display device.

일 실시예에서, 상기 분석부는 하나 이상의 학습용 사용자 촬영 데이터와 학습용 기준 데이터를 비교하는 과정을 반복 학습한 결과를 토대로, 상기 사용자 촬영 데이터로부터 사용자의 의류착용 유무를 판단하는 것을 특징으로 할 수 있다.In an embodiment, the analysis unit may determine whether or not the user wears clothes from the user imaged data based on a result of repeating learning of comparing one or more user imaged data for learning with reference data for learning.

일 실시예에서, 사용자의 상기 디스플레이 장치에 대한 조작을 기반으로 생성된 사용자 계정이 유무선 네트워크 통신을 통해 외부 서버와 연결되도록 하는 통신부를 더 포함하며, 상기 통신부는 상기 외부 서버에 연결된 코치 단말과 연동된 코치 계정에 의해 개설된 그룹운동방에 참여요청을 송신 후 상기 코치 단말의 허가 신호를 수신하여 상기 사용자 계정이 그룹운동방에 입장되도록 하고, 상기 외부 서버에 의해 상기 코치 단말로부터 운동시작요청이 수신되는 경우, 상기 코치 단말로부터 수신되는 실시간 영상과 상기 외부 서버에 연결된 하나 이상의 타 사용자 단말로부터 수신되는 실시간 영상과 상기 촬영부를 통해 촬영되는 실시간 사용자 영상이 상기 디스플레이 장치의 화면을 통해 출력되도록 하며, 또한 상기 외부 서버에 연결된 상기 코치 단말 및 상기 하나 이상의 타 사용자 단말 중 어느 하나 이상에 상기 실시간 사용자 영상을 제공하여 각 단말의 화면 상에 상기 실시간 사용자 영상이 출력되도록 하는 것을 특징으로 할 수 있다.In one embodiment, a user account generated based on the user's manipulation of the display device further includes a communication unit for connecting to an external server through wired/wireless network communication, wherein the communication unit is linked with a coach terminal connected to the external server After sending a request to participate in the group exercise room opened by the coach account, a permission signal from the coach terminal is received so that the user account enters the group exercise room, and the exercise start request is received from the coach terminal by the external server When received, the real-time image received from the coach terminal, the real-time image received from one or more other user terminals connected to the external server, and the real-time user image photographed through the photographing unit are output through the screen of the display device, In addition, by providing the real-time user image to any one or more of the coach terminal and the one or more other user terminals connected to the external server, it may be characterized in that the real-time user image is output on the screen of each terminal.

일 실시예에서, 상기 미러 몸체부는 마이크 및 스피커를 포함하며, 상기 통신부는 상기 코치 단말로부터 수신되는 실시간 음성이 상기 스피커를 통해 출력되도록 하고, 또한 상기 마이크를 통해 입력되는 실시간 음성이 상기 외부 서버를 통해 상기 코치 단말에 제공 및 출력되도록 하는 것을 특징으로 할 수 있다.In one embodiment, the mirror body includes a microphone and a speaker, the communication unit so that the real-time voice received from the coach terminal is output through the speaker, and also the real-time voice input through the microphone to the external server It may be characterized in that it is provided and output to the coach terminal through the.

일 실시예에서, 상기 통신부는 사용자의 상기 디스플레이 장치에 대한 조작을 기반으로 강의 영상 재생에 대한 요청신호가 생성되는 경우, 상기 사용자 계정이 유무선 네트워크 통신을 통해 강의 영상 제공 서버와 연결되도록 하며, 상기 강의 영상 제공 서버로부터 수신되는 강의 영상이 상기 디스플레이 장치의 화면을 통해 출력되도록 하는 것을 특징으로 할 수 있다.In one embodiment, the communication unit causes the user account to be connected to the lecture image providing server through wired/wireless network communication when a request signal for reproducing the lecture image is generated based on the user's manipulation of the display device, It may be characterized in that the lecture image received from the lecture image providing server is output through the screen of the display device.

본 발명의 일 측면에 따르면, 깊이 카메라 및 인공지능 기술을 이용하여 사용자의 체형 분석을 통한 최적의 운동 가이드 서비스를 시공간에 구애받지 않고 제공할 수 있음은 물론, 코치 및 다수 참여자 간의 실시간 화상 강의 서비스를 제공함으로써 실시간 피드백에 기반한 1:1 매칭운동 혹은 그룹 매칭운동이 가능하도록 하는 이점을 가진다.According to one aspect of the present invention, it is possible to provide an optimal exercise guide service through analysis of a user's body type using a depth camera and artificial intelligence technology regardless of time and space, as well as a real-time video lecture service between a coach and multiple participants It has the advantage of enabling 1:1 matching exercise or group matching exercise based on real-time feedback by providing

특히, 인공지능 체형 분석 솔루션을 통해 팔, 복부, 다리 등의 분할과 의류 착용 유무, 체형의 이슈정보나 대략적인 수치 등을 자동으로 분석 및 도출할 수 있으며, 이를 기반으로 사용자에게 최적의 운동방식, 식습관을 추천해줄 수 있는 이점을 가진다.In particular, the artificial intelligence body type analysis solution can automatically analyze and derive the division of arms, abdomen, legs, etc., whether or not clothing is worn, and issue information or approximate figures of the body type, and based on this, it is possible to automatically analyze and derive the optimal exercise method for users. , it has the advantage of recommending eating habits.

도 1은 본 발명의 일 실시예에 따른 사용자 맞춤형 체형관리가 가능한 스마트 미러(100)의 구성을 도시한 도면이다.
도 2는 도 1에 도시된 사용자 맞춤형 체형관리가 가능한 스마트 미러(100)의 전체적인 형상을 도시한 도면이다.
도 3은 도 2에 도시된 촬영부(120)를 통해 사용자를 촬영 및 사용자 촬영 데이터를 획득하는 상태를 도시한 도면이다.
도 4는 사용자 촬영 데이터를 토대로 결정된 체형 상태가 디스플레이 장치의 화면을 통해 출력되는 상태를 도시한 도면이다.
도 5는 사용자의 신체부위 별 체형 이미지 및 기준 체형 이미지가 오버랩되어 디스플레이 장치의 화면을 통해 출력되는 상태를 도시한 도면이다.
도 6은 사용자 계정이 코치 계정에 의해 개설된 그룹운동방에 입장 및 다수 사용자 간 실시간 영상이 출력되는 상태를 도시한 도면이다.
도 7은 사용자 계정의 그룹운동방 참여도에 따른 보상이 디스플레이 장치의 화면을 통해 출력되는 상태를 도시한 도면이다.1 is a diagram illustrating the configuration of a smart mirror 100 capable of user-customized body shape management according to an embodiment of the present invention.
FIG. 2 is a view showing the overall shape of the smart mirror 100 capable of user-customized body shape management shown in FIG. 1 .
FIG. 3 is a diagram illustrating a state in which a user is photographed and user photographing data is acquired through the photographing unit 120 illustrated in FIG. 2 .
4 is a diagram illustrating a state in which a body shape state determined based on user photographing data is output through a screen of a display device.
FIG. 5 is a diagram illustrating a state in which a body shape image for each body part of a user and a reference body shape image are overlapped and output through the screen of the display device.
6 is a diagram illustrating a state in which a user account enters a group exercise room opened by a coach account and a real-time image is output between multiple users.
7 is a diagram illustrating a state in which a reward according to a user account's participation in a group exercise room is output through the screen of the display device.

이하, 본 발명의 이해를 돕기 위하여 바람직한 실시예를 제시한다. 그러나 하기의 실시예는 본 발명을 보다 쉽게 이해하기 위하여 제공되는 것일 뿐, 실시예에 의해 본 발명의 내용이 한정되는 것은 아니다. 또한 하기에서 분석부 및 통신부는 별도 물리적인 형체가 있는 구성으로 해석되기 보다는 본 발명에 따른 사용자 맞춤형 체형관리가 가능한 스마트 미러(100)의 기능을 구성적으로 표현한 의미로 해석됨이 바람직하다.Hereinafter, preferred examples are presented to help the understanding of the present invention. However, the following examples are only provided for easier understanding of the present invention, and the content of the present invention is not limited by the examples. In addition, in the following, the analysis unit and the communication unit are preferably interpreted as a meaning of constructively expressing the functions of the smart mirror 100 capable of user-customized body shape management according to the present invention, rather than being interpreted as a configuration having a separate physical shape.

도 1은 본 발명의 일 실시예에 따른 사용자 맞춤형 체형관리가 가능한 스마트 미러(100)의 구성을 도시한 도면이고, 도 2는 도 1에 도시된 사용자 맞춤형 체형관리가 가능한 스마트 미러(100)의 전체적인 형상을 도시한 도면이다.1 is a diagram showing the configuration of a smart mirror 100 capable of user-customized body shape management according to an embodiment of the present invention, and FIG. 2 is a view of the smart mirror 100 capable of user-customized body shape management shown in FIG. It is a drawing showing the overall shape.

도 1 및 도 2를 살펴보면, 본 발명의 일 실시예에 따른 사용자 맞춤형 체형관리가 가능한 스마트 미러(100)는 크게 미러 몸체부(110), 촬영부(120), 분석부(130) 및 통신부(140)를 포함하여 구성된다.1 and 2, the smart mirror 100 capable of user-customized body shape management according to an embodiment of the present invention is largely a mirror body 110, a photographing unit 120, an analysis unit 130, and a communication unit ( 140) is included.

먼저, 미러 몸체부(110)는 전신거울 형태로 형성되며, 직립된 상태에서 상측이 후방으로 일부 각도로 기울어지되 고정 프레임을 통해 고정각도가 유지되는 형태로 형성된다.First, the mirror body 110 is formed in the form of a full-length mirror, and in an upright state, the upper side is inclined at some angle to the rear, but the fixed angle is maintained through the fixed frame.

미러 몸체부(110)는 평상시에는 거울처럼 빛을 반사하지만, 내측에 디스플레이 장치(110a)가 마련됨에 따라 디스플레이 장치(110a)를 통해 출력되는 화면이 미러 몸체부(110)의 외부 거울을 통해 외측으로 투영될 수 있다. 이때, 디스플레이 장치(110a)는 정전식 터치 센서를 포함함에 따라 사용자의 터치 동작을 인식하게 되며, 디스플레이 장치(110a)를 덮는 외부 거울은 디스플레이 장치(110a)의 터치 동작에 전혀 방해되지 않는 두께를 가진다.The mirror body 110 normally reflects light like a mirror, but as the display device 110a is provided on the inside, the screen output through the display device 110a is displayed outside through the external mirror of the mirror body 110 . can be projected as At this time, the display apparatus 110a recognizes the user's touch operation by including the capacitive touch sensor, and the external mirror covering the display apparatus 110a has a thickness that does not interfere with the touch operation of the display apparatus 110a at all. have

미러 몸체부(110)의 일측, 보다 구체적으로 외부 거울의 상부에는 미러 몸체부(110) 주변에 위치한 사용자의 신체를 촬영하여 사용자 촬영 데이터를 획득하는 촬영부(120)가 마련된다.On one side of the mirror body 110 , more specifically, on the upper portion of the external mirror, a photographing unit 120 for photographing a user's body located around the mirror body 110 to obtain user photographing data is provided.

도 3은 도 2에 도시된 촬영부(120)를 통해 사용자를 촬영 및 사용자 촬영 데이터를 획득하는 상태를 도시한 도면이다.FIG. 3 is a diagram illustrating a state in which a user is photographed and user photographing data is acquired through the photographing unit 120 illustrated in FIG. 2 .

도 3을 살펴보면, 촬영부(120)는 사용자의 신체를 촬영하되, 사용자의 3차원 체형분석을 위하여 너비, 높이, 깊이를 측정할 수 있는 깊이 카메라(depth camera)가 적용된다. 이러한 촬영부(120)는 미러 몸체부(110)의 외부 거울 내측에 삽입된 형태이기 때문에, 미러 몸체부(110)를 측면에서 보았을 때 촬영부(120)가 외부 거울에서 돌출되지 않는다. 여기에서, 깊이 카메라는 단일 렌즈를 사용하여 피사체를 촬영하는 2D 카메라와는 달리, 적외선 방출기, 컬러 센서, 적외선 깊이 센서 등을 포함하는 3D 카메라를 의미한다. 촬영부(120)에 의해 촬영된 사용자 촬영 데이터는 후술되는 분석부(130)로 제공되어 사용자의 체형분석을 위한 정보로 이용된다.Referring to FIG. 3 , the photographing unit 120 photographs the user's body, but a depth camera capable of measuring width, height, and depth is applied to analyze the user's three-dimensional body shape. Since the photographing unit 120 is inserted inside the external mirror of the mirror body 110 , the photographing unit 120 does not protrude from the external mirror when the mirror body 110 is viewed from the side. Here, the depth camera refers to a 3D camera including an infrared emitter, a color sensor, an infrared depth sensor, and the like, unlike a 2D camera that captures a subject using a single lens. The user photographed data photographed by the photographing unit 120 is provided to the analysis unit 130 to be described later and used as information for analyzing the user's body type.

다시 도 1 및 도 2로 돌아와서, 분석부(130)는 촬영부(120)를 통해 획득된 사용자 촬영 데이터를 기 저장된 기준 데이터와 비교한 결과를 토대로 사용자의 체형 상태를 분석하고, 분석 결과를 토대로 사용자에 적합한 최적의 관리방법 데이터를 생성하며, 생성된 관리방법 데이터가 미러 몸체부(110)의 디스플레이 장치(110a)를 통해 출력되도록 한다. 이에 관해서는 도 4 및 도 5를 통해 보다 구체적으로 살펴보기로 한다.1 and 2 again, the analysis unit 130 analyzes the user's body shape based on a result of comparing the user photographed data acquired through the photographing unit 120 with pre-stored reference data, and based on the analysis result An optimal management method data suitable for a user is generated, and the generated management method data is output through the display device 110a of the mirror body 110 . This will be described in more detail with reference to FIGS. 4 and 5 .

도 4는 사용자 촬영 데이터를 토대로 결정된 체형 상태가 디스플레이 장치의 화면을 통해 출력되는 상태를 도시한 도면이고, 도 5는 사용자의 신체부위 별 체형 이미지 및 기준 체형 이미지가 오버랩되어 디스플레이 장치의 화면을 통해 출력되는 상태를 도시한 도면이다.4 is a diagram illustrating a state in which a body shape state determined based on user photographing data is output through the screen of the display device, and FIG. 5 is a body shape image for each body part of the user and a reference body shape image overlapped through the screen of the display device. It is a diagram showing the output state.

도 4 및 도 5를 살펴보면, 분석부(130)는 하나 이상의 학습용 사용자 촬영 데이터와 학습용 기준 데이터를 비교하는 과정을 반복 학습하는 머신러닝 기술에 기반하여, 사용자의 전신을 촬영한 사용자 촬영 데이터로부터 사용자의 각 신체부위 별 체형 이미지를 분류 및 수치화한다. 이는 촬영부(120)에 적용된 깊이 카메라가 형태 정보 및 수치 정보를 모두 획득할 수 있는 점에 기반한다.4 and 5, the analysis unit 130 is based on a machine learning technology that repeatedly learns a process of comparing one or more user imaged data for learning and reference data for learning, from the user imaged data photographing the user's whole body. Classify and quantify body shape images for each body part of This is based on the fact that the depth camera applied to the photographing unit 120 can acquire both shape information and numerical information.

예컨대, 사용자 촬영 데이터로부터 사용자의 각 신체부위(복부, 하체, 상체(팔), 상체(등))를 자동으로 분류한 후, 표준체형 대비 각 신체부위가 비만 상태인지, 마른 상태인지를 판단하게 된다. 이때 기준 데이터에는 이미 표준체형의 각 신체부위 별 형태 정보 및 수치 정보에 기초한 수치값이 포함되어 있기 때문에, 분석부(130)에서는 사용자 촬영 데이터로부터 분류된 각 신체부위들을 표준체형의 각 신체부위들과 비교한 후, 수치값의 편차가 높은 신체부위를 기준으로 사용자의 체형 상태를 6단계의 체형 상태 중 어느 하나 이상의 체형 상태로 결정하게 된다.For example, after automatically classifying each body part (abdomen, lower body, upper body (arm), upper body (etc)) from the user's photographed data, it is determined whether each body part is obese or skinny compared to the standard body type. do. At this time, since the reference data already includes numerical values based on shape information and numerical information for each body part of the standard body type, the analysis unit 130 uses each body part classified from the user's photographed data as each body part of the standard body type. After comparing with , the user's body shape is determined as any one or more body shape states among the six body shape states on the basis of the body part having a high deviation of the numerical value.

이때, 결정되는 6단계의 체형 상태는 1)복부비만, 2)하체비만, 3)상체비만(팔), 4)상체비만(등), 5)하체마름, 6)상체마름을 의미한다.At this time, the body state of the six stages to be determined means 1) abdominal obesity, 2) lower body obesity, 3) upper body obesity (arms), 4) upper body obesity (back), 5) lower body thinness, and 6) upper body thinness.

즉, 분석부(130)에서는 사용자 촬영 데이터로부터 분류된 각 신체부위들의 수치값과 표준체형의 각 신체부위들의 수치값을 서로 비교한 후 편차가 높은 신체부위를 기준으로, 해당 사용자가 현재 복부비만 상태인지, 하체비만 상태인지, 상체 중에서도 팔이 비만 상태인지, 상체 중에서도 등이 비만 상태인지, 하체마름 상태인지, 상체마름 상태인지를 판단하게 된다. 또한, 분석부(130)에서는 Hello Data 플랫폼을 이용하여 레이블링(laveling) 작업을 수행하게 된다That is, the analysis unit 130 compares the numerical values of each body part classified from the user's photographing data with the numerical values of each body part of the standard body type, and then based on the body part with high deviation, the user is currently obese It is determined whether the state, whether the lower body is obese, the upper body is the arm obese state, the upper body is the back obese state, the lower body state is a skinny state, or the upper body state is a skinny state. In addition, the analysis unit 130 performs a labeling operation using the Hello Data platform.

또한, 분석부(130)는 사용자의 현재 체형 상태에 대한 체형 이미지와 표준 체형의 체형 이미지를 시각적으로 부각시켜 표시함으로써 사용자에게 더욱 직관적으로 알릴 수 있는데, 이는 다음과 같다.In addition, the analysis unit 130 may more intuitively inform the user by visually emphasizing and displaying the body shape image of the user's current body shape state and the body shape image of the standard body type, as follows.

도 5는 사용자의 신체부위 별 체형 이미지 및 기준 체형 이미지가 오버랩되어 디스플레이 장치의 화면을 통해 출력되는 상태를 도시한 도면이다.FIG. 5 is a diagram illustrating a state in which a body shape image for each body part of a user and a reference body shape image are overlapped and output through the screen of the display device.

도 5를 살펴보면, 분석부(130)는 사용자 촬영 데이터를 토대로 사용자의 각 신체부위 별 체형 이미지를 사용자의 관리 전 상태로 설정하여 미러 몸체부(110)의 디스플레이 장치(110a)의 화면에 출력되도록 하고, 또한 기준 데이터에 포함된 표준체형의 각 신체부위 별 기준 체형 이미지를 사용자의 관리 후 상태로 설정하여 디스플레이 장치(110a)의 화면에 출력되도록 한다.Referring to FIG. 5 , the analysis unit 130 sets the body shape image for each body part of the user to the state before the user's management based on the user photographed data and outputs it on the screen of the display device 110a of the mirror body unit 110 . In addition, the reference body shape image for each body part of the standard body type included in the reference data is set as a state after the user's management so as to be output on the screen of the display device 110a.

이때, 각 이미지는 서로 오버랩된 상태에서 서로 다른 색상으로 표시될 수 있기 때문에, 사용자로 하여금 관리 전, 관리 후 상태를 직관적으로 파악할 수 있도록 함은 물론, 각 신체부위 별로 관리 시에는 어떤 체형으로 변화될 수 있는지도 미리 예기로 보여줄 수 있는 이점을 가지게 된다.At this time, since each image can be displayed in different colors while overlapping each other, it allows the user to intuitively understand the state before and after management, as well as changing into a body type when managing each body part. It has the advantage of being able to show in advance whether it will be possible.

다시 도 1 및 도 2로 돌아와서, 분석부(130)는 사용자들이 적어도 500벌 이상의 의류를 착용하여 촬영한 데이터인 학습용 사용자 촬영 데이터와 이를 학습용 기준 데이터와 비교하는 과정을 반복 학습한 결과를 토대로, 촬영부(120)를 통해 획득된 사용자 촬영 데이터에서 사용자의 의류착용 유무를 판단하게 된다. 특히, 분석부(130)에서는 체형의 수치화 및 다양화를 위하여 적어도 500건 이상의 체형 이미지 및 체형 수치정보를 수집한 후, 의류착용 유무, 종류 등의 분류와 체형 이미지 수치화를 위하여 Hello Data 플랫폼을 이용하여 레이블링(laveling) 작업을 수행하게 된다.Returning to FIGS. 1 and 2 again, the analysis unit 130 repeats the learning process of comparing user-taken data for learning, which is data captured by users wearing at least 500 pieces of clothing, with reference data for learning, based on the result of repeated learning, Whether or not the user wears clothes is determined from the user photographing data acquired through the photographing unit 120 . In particular, the analysis unit 130 collects at least 500 body shape images and body shape numerical information for digitization and diversification of body types, and then uses the Hello Data platform to classify whether or not to wear clothes, types, etc. and to quantify body shape images. Thus, the labeling operation is performed.

한편, 분석부(130)에서는 앞서 살펴본 사용자의 체형 분석 결과에 기초하여, 체형 특징 별로 적합한 최적의 관리방법 데이터를 생성 후 이를 디스플레이 장치(110a)의 화면을 통해 출력하게 된다.Meanwhile, the analysis unit 130 generates optimal management method data suitable for each body type feature based on the user's body shape analysis result as described above, and then outputs it through the screen of the display device 110a.

여기에서, 관리방법 데이터라 함은, 체형 특징 별 운동 정보, 운동 프로그램, 운동 종류, 운동 시간은 물론 식습관 정보, 식단 정보 등을 모두 포함하는 정보를 의미한다. 이를 통해, 사용자는 자신의 체형에 맞는 최적의 관리방법을 확인할 수 있게 된다.Here, the management method data means information including exercise information for each body type characteristic, exercise program, exercise type, exercise time, eating habits information, diet information, and the like. Through this, the user can check the optimal management method for his or her body type.

통신부(140)는 사용자가 외부 거울에 투영된 디스플레이 장치(110a)의 화면을 터치하는 터치 조작에 기반하여 생성된 사용자 계정이 유무선 네트워크 통신을 통해 외부 서버와 연결되도록 한다. 이에 관해서는 도 6을 통해 보다 구체적으로 살펴보기로 한다.The communication unit 140 allows a user account generated based on a touch operation in which the user touches the screen of the display apparatus 110a projected on the external mirror to be connected to an external server through wired/wireless network communication. This will be described in more detail with reference to FIG. 6 .

도 6은 사용자 계정이 코치 계정에 의해 개설된 그룹운동방에 입장 및 다수 사용자 간 실시간 영상이 출력되는 상태를 도시한 도면이다.6 is a diagram illustrating a state in which a user account enters a group exercise room opened by a coach account and a real-time image is output between multiple users.

도 6을 살펴보면, 통신부(140)는 외부 서버에 연결된 코치 단말과 연동된 코치 계정에 의해 개설된 그룹운동방에 참여요청을 송신한 후, 코치 단말로부터 해당 참여요청에 대한 피드백으로서 허가 신호가 수신될 경우, 해당 사용자 계정이 해당 그룹운동방에 입장되도록 한다. 이때, 그룹운동방은 코치 단말에 의해서 개설될 수 있으며, 최신순, 인기순 리스트 정렬, 필터 적용 등이 구현될 수 있다.Referring to FIG. 6 , after the communication unit 140 transmits a request to participate in a group exercise room opened by a coach account linked to a coach terminal connected to an external server, a permission signal is received from the coach terminal as feedback for the participation request. If so, the user account is allowed to enter the group exercise room. In this case, the group exercise room may be opened by the coach terminal, and list sorting by latest order, popularity order, filter application, etc. may be implemented.

사용자 계정이 그룹운동방에 접속된 후, 코치 단말로부터 운동시작요청이 수신되는 경우, 통신부(140)는 코치 단말로부터 수신되는 실시간 영상과, 외부 서버에 연결된 다른 사용자들의 사용자 단말 각각으로부터 수신되는 실시간 영상과, 앞서 살펴본 촬영부(120)를 통해 촬영되는 사용자의 실시간 사용자 영상이 디스플레이 장치(110a)의 화면을 통해 출력되도록 한다.After the user account is connected to the group exercise room, when an exercise start request is received from the coach terminal, the communication unit 140 receives a real-time image received from the coach terminal and real-time received from each of the user terminals of other users connected to the external server. The image and the real-time user image of the user captured through the above-described photographing unit 120 are output through the screen of the display apparatus 110a.

즉, 코치 단말에 마련된 카메라 장치를 통해 촬영되는 영상이 디스플레이 장치(110a)의 화면에 실시간으로 출력됨은 물론, 타 사용자들의 단말에 마련된 카메라 장치를 통해 촬영되는 영상이 디스플레이 장치(110a)의 화면에 실시간으로 출력될 수 있기 때문에, 결과적으로는 코치의 지도 하에 모든 사용자들이 그룹운동을 진행할 수 있게 된다.That is, the image captured by the camera device provided in the coach terminal is output on the screen of the display device 110a in real time, as well as the image taken through the camera device provided in the terminals of other users is displayed on the screen of the display device 110a. Because it can be output in real time, as a result, all users can proceed with group exercise under the guidance of the coach.

이때, 코치 단말 및 타 사용자들의 단말이라 함은, 본원발명에서와 같은 사용자 맞춤형 체형관리가 가능한 스마트 미러(100)를 의미할 수 있다. 따라서, 코치도 자신의 집 혹은 피트니스 센터에 설치된 사용자 맞춤형 체형관리가 가능한 스마트 미러(100)를 통해 회원가입 후 코치 계정으로 그룹운동방을 개설할 수 있고, 해당 그룹운동방에 접속된 타 사용자 맞춤형 체형관리가 가능한 스마트 미러(100)를 이용하는 사용자들 각각은 마치 다중 화상회의와 같이 실시간 영상으로 소통하면서 운동을 진행할 수 있게 된다.In this case, the coach terminal and terminals of other users may refer to the smart mirror 100 capable of user-customized body shape management as in the present invention. Accordingly, the coach can also open a group exercise room with the coach account after signing up for a membership through the smart mirror 100 that enables user-customized body shape management installed in his or her home or fitness center, and can be customized for other users connected to the group exercise room. Each of the users using the smart mirror 100 capable of body shape management can exercise while communicating with real-time images like multiple video conferences.

이때, 미러 몸체부(110)에는 마이크 및 스피커가 마련됨에 따라, 통신부(140)에서는 코치 단말로부터 수신되는 실시간 음성이 스피커를 통해 출력되도록 함은 물론, 마이크를 통해 입력되는 사용자의 실시간 음성이 코치 단말에 마련된 스피커를 통해 출력되도록 함으로써, 코치와 사용자들 간의 실시간 소통이 가능하게 된다.At this time, as a microphone and a speaker are provided in the mirror body part 110 , the communication unit 140 not only outputs the real-time voice received from the coach terminal through the speaker, but also the real-time voice of the user input through the microphone is the coach By outputting the output through a speaker provided in the terminal, real-time communication between the coach and users is possible.

또한, 일 실시예에서 통신부(140)는 사용자가 디스플레이 장치(110a)를 조작하여 강의 영상 재생에 대한 요청신호가 생성되는 경우, 해당 요청신호를 토대로 사용자 계정이 유무선 네트워크 통신을 통해 강의 영상 제공 서버와 연결되도록 하며, 강의 영상 제공 서버로부터 수신되는 강의 영상이 디스플레이 장치(110a)의 화면을 통해 출력되도록 한다. 여기에서, 강의 영상 제공 서버라 함은, 뮤복(MUBOK), 뮤핏(MUFIT), 필라테스, 웨이트 등 전문 강사들이 제공하는 코칭 영상 제공 서버를 의미할 수 있다.In addition, in an embodiment, when the user operates the display device 110a to generate a request signal for reproducing a lecture video, the communication unit 140 establishes a lecture image providing server through wired/wireless network communication based on the request signal. and the lecture image received from the lecture image providing server is output through the screen of the display device 110a. Here, the lecture video providing server may mean a coaching video providing server provided by professional instructors such as MUBOK, MUFIT, Pilates, and weight.

또한, 일 실시예에서 본 발명에 따른 사용자 맞춤형 체형관리가 가능한 스마트 미러(100)는 그룹운동방에 접속된 사용자 계정의 참여 일수 및 참여도에 관하여, 코치 단말에 의해 책정되는 보상 포인트 정보를 수신한 후 이를 디스플레이 장치(110a)의 화면에 출력할 수 있다. 이에 관해서는 도 7을 통해 살펴보기로 한다.In addition, in an embodiment, the smart mirror 100 capable of user-customized body shape management according to the present invention receives reward point information determined by the coach terminal with respect to the number of days and the degree of participation of the user account connected to the group exercise room. After this, it may be output on the screen of the display device 110a. This will be described with reference to FIG. 7 .

도 7은 사용자 계정의 그룹운동방 참여도에 따른 보상이 디스플레이 장치의 화면을 통해 출력되는 상태를 도시한 도면이다.7 is a diagram illustrating a state in which a reward according to a user account's participation in a group exercise room is output through the screen of the display device.

도 7을 살펴보면, 그룹운동방에 접속된 다수의 사용자들 각각의 계정은, 코치 단말에 의해 책정되는 보상 포인트 정보를 토대로 랭킹이 적용되어 높은 순위에 따라 차등적으로 노출될 수 있다. 예컨대, 월단위 운동 기록 및 참여도에 따라 보상 포인트가 책정될 수 있다. 이에 따라, 그룹운동 참여자들로 하여금 우수 참여자가 누구인지 서로 선의의 경쟁심을 유발할 수 있어 운동에 대한 동기 부여 및 운동 지속률을 향상시킬 수 있는 이점을 가지게 된다.Referring to FIG. 7 , each account of a plurality of users connected to the group exercise room may be differentially exposed according to a high ranking by applying a ranking based on reward point information determined by the coach terminal. For example, reward points may be set according to monthly exercise records and participation. Accordingly, group exercise participants can induce a spirit of competition in good faith with each other to determine who the best participants are, thereby having the advantage of improving the motivation for exercise and the exercise continuity rate.

상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.Although the above has been described with reference to the preferred embodiment of the present invention, those skilled in the art will be able to variously modify and change the present invention without departing from the spirit and scope of the present invention as set forth in the claims below. You will understand that you can.

100: 사용자 맞춤형 체형관리가 가능한 스마트 미러
110: 미러 몸체부
110a: 디스플레이 장치
120: 촬영부
130: 분석부
140: 통신부100: Smart mirror that can manage user-customized body shape
110: mirror body
110a: display device
120: filming unit
130: analysis unit
140: communication department

Claims (10)

내측에 디스플레이 장치가 마련되되, 상기 디스플레이 장치를 통해 출력되는 화면이 외부에서 투영되도록 형성되는 미러 몸체부;
상기 미러 몸체부의 일측에 마련되며, 사용자를 촬영하여 사용자 촬영 데이터를 획득하는 촬영부; 및
획득된 상기 사용자 촬영 데이터와 기 저장된 기준 데이터를 비교한 결과를 토대로 상기 사용자의 체형 상태를 분석하고, 분석 결과를 토대로 관리방법 데이터를 생성하는 분석부;를 포함하며,
생성된 상기 관리방법 데이터는 상기 디스플레이 장치의 화면을 통해 출력되어 사용자에게 시인되는 것을 특징으로 하는, 사용자 맞춤형 체형관리가 가능한 스마트 미러.
a mirror body having a display device provided therein, the screen output through the display device being projected from the outside;
a photographing unit provided on one side of the mirror body, photographing a user to obtain user photographing data; and
and an analysis unit that analyzes the user's body shape based on a result of comparing the acquired user photographing data with pre-stored reference data, and generates management method data based on the analysis result;
The generated management method data is output through the screen of the display device, characterized in that it is visually recognized by the user, a smart mirror capable of user-customized body shape management.
 제1항에 있어서,
상기 촬영부는,
사용자를 촬영하는 깊이 카메라(depth camera);를 포함하는 것을 특징으로 하는, 사용자 맞춤형 체형관리가 가능한 스마트 미러.
According to claim 1,
The photographing unit,
A smart mirror capable of user-customized body shape management, characterized in that it includes; a depth camera for photographing a user.
 제1항에 있어서,
상기 분석부는,
하나 이상의 학습용 사용자 촬영 데이터와 학습용 기준 데이터를 비교하는 과정을 반복 학습한 결과를 토대로, 상기 사용자 촬영 데이터로부터 사용자의 각 신체부위 별 체형 이미지를 분류 및 수치화하고,
상기 기준 데이터에 포함된 각 신체부위 별 기준 체형 이미지의 수치값과 상기 각 신체부위 별 체형 이미지의 수치값을 서로 비교한 후, 수치값 편차가 높은 신체부위를 기준으로 사용자의 체형 상태를 6단계의 체형 상태 중 어느 하나 이상의 체형 상태로 결정하는 것을 특징으로 하는, 사용자 맞춤형 체형관리가 가능한 스마트 미러.
According to claim 1,
The analysis unit,
Based on the result of repeating the learning process of comparing one or more user-photographed data for learning with reference data for learning, classifying and quantifying body shape images for each body part of the user from the user-photographed data,
After comparing the numerical values of the reference figure image for each body part included in the reference data with the numerical values of the figure image for each body part, the user's body shape state is determined based on the body part with a high numerical value deviation in 6 steps A smart mirror capable of user-customized body shape management, characterized in that it is determined by any one or more of the body shape states.
 제3항에 있어서,
상기 분석부는,
상기 수치값 편차가 높은 신체부위를 기준으로, 각 신체부위 별 상응하는 운동 프로그램 정보 및 식습관 정보를 상기 관리방법 데이터에 포함시키는 것을 특징으로 하는, 사용자 맞춤형 체형관리가 가능한 스마트 미러.
4. The method of claim 3,
The analysis unit,
A smart mirror capable of user-customized body shape management, characterized in that the management method data includes corresponding exercise program information and eating habits information for each body part based on the body part having a high deviation in the numerical value.
 제1항에 있어서,
상기 분석부는,
상기 사용자 촬영 데이터를 토대로 사용자의 각 신체부위 별 체형 이미지를 사용자의 관리 전 체형 상태로 설정하고, 상기 기준 데이터에 포함된 각 신체부위 별 기준 체형 이미지를 사용자의 관리 후 체형 상태로 설정한 후, 각 이미지를 서로 오버랩하여 상기 디스플레이 장치의 화면을 통해 출력되도록 하는 것을 특징으로 하는, 사용자 맞춤형 체형관리가 가능한 스마트 미러.
According to claim 1,
The analysis unit,
After setting the body shape image for each body part of the user as the user's pre-managed body shape based on the user shooting data, and setting the reference body shape image for each body part included in the reference data as the user's post-management body shape state, A smart mirror capable of user-customized body shape management, characterized in that each image is overlapped with each other and output through the screen of the display device.
 제1항에 있어서,
상기 분석부는,
하나 이상의 학습용 사용자 촬영 데이터와 학습용 기준 데이터를 비교하는 과정을 반복 학습한 결과를 토대로, 상기 사용자 촬영 데이터로부터 사용자의 의류착용 유무를 판단하는 것을 특징으로 하는, 사용자 맞춤형 체형관리가 가능한 스마트 미러.
According to claim 1,
The analysis unit,
A smart mirror capable of user-customized body shape management, characterized in that it is determined whether or not the user wears clothes from the user imaged data based on a result of repeated learning of comparing one or more user imaged data for learning with reference data for learning.
 제1항에 있어서,
사용자의 상기 디스플레이 장치에 대한 조작을 기반으로 생성된 사용자 계정이 유무선 네트워크 통신을 통해 외부 서버와 연결되도록 하는 통신부;를 더 포함하며,
상기 통신부는,
상기 외부 서버에 연결된 코치 단말과 연동된 코치 계정에 의해 개설된 그룹운동방에 참여요청을 송신 후 상기 코치 단말의 허가 신호를 수신하여 상기 사용자 계정이 그룹운동방에 입장되도록 하고,
상기 외부 서버에 의해 상기 코치 단말로부터 운동시작요청이 수신되는 경우, 상기 코치 단말로부터 수신되는 실시간 영상과 상기 외부 서버에 연결된 하나 이상의 타 사용자 단말로부터 수신되는 실시간 영상과 상기 촬영부를 통해 촬영되는 실시간 사용자 영상이 상기 디스플레이 장치의 화면을 통해 출력되도록 하며, 또한
상기 외부 서버에 연결된 상기 코치 단말 및 상기 하나 이상의 타 사용자 단말 중 어느 하나 이상에 상기 실시간 사용자 영상을 제공하여 각 단말의 화면 상에 상기 실시간 사용자 영상이 출력되도록 하는 것을 특징으로 하는, 사용자 맞춤형 체형관리가 가능한 스마트 미러.
According to claim 1,
Further comprising; a communication unit for allowing the user account created based on the user's manipulation of the display device to be connected to an external server through wired/wireless network communication;
The communication unit,
After sending a request to participate in a group exercise room opened by a coach account linked with a coach terminal connected to the external server, receiving a permission signal from the coach terminal so that the user account enters the group exercise room,
When an exercise start request is received from the coach terminal by the external server, a real-time image received from the coach terminal, a real-time image received from one or more other user terminals connected to the external server, and a real-time user photographed through the photographing unit An image is output through the screen of the display device, and
User-tailored body shape management, characterized in that the real-time user image is provided to any one or more of the coach terminal and the one or more other user terminals connected to the external server so that the real-time user image is output on the screen of each terminal Smart mirror that can.
 제7항에 있어서,
상기 미러 몸체부는 마이크 및 스피커를 포함하며,
상기 통신부는,
상기 코치 단말로부터 수신되는 실시간 음성이 상기 스피커를 통해 출력되도록 하고, 또한 상기 마이크를 통해 입력되는 실시간 음성이 상기 외부 서버를 통해 상기 코치 단말에 제공 및 출력되도록 하는 것을 특징으로 하는, 사용자 맞춤형 체형관리가 가능한 스마트 미러.
8. The method of claim 7,
The mirror body includes a microphone and a speaker,
The communication unit,
User-tailored body shape management, characterized in that the real-time voice received from the coach terminal is output through the speaker, and the real-time voice input through the microphone is provided and output to the coach terminal through the external server Smart mirror that can.
 제7항에 있어서,
상기 통신부는,
사용자의 상기 디스플레이 장치에 대한 조작을 기반으로 강의 영상 재생에 대한 요청신호가 생성되는 경우,
상기 사용자 계정이 유무선 네트워크 통신을 통해 강의 영상 제공 서버와 연결되도록 하며, 상기 강의 영상 제공 서버로부터 수신되는 강의 영상이 상기 디스플레이 장치의 화면을 통해 출력되도록 하는 것을 특징으로 하는, 사용자 맞춤형 체형관리가 가능한 스마트 미러.
8. The method of claim 7,
The communication unit,
When a request signal for video playback of a lecture is generated based on the user's manipulation of the display device,
The user account is connected to the lecture image providing server through wired/wireless network communication, and the lecture image received from the lecture image providing server is output through the screen of the display device. smart mirror.
 미러 몸체부의 일측에 마련된 촬영부를 통해, 사용자를 촬영하여 사용자 촬영 데이터를 획득하는 단계;
획득된 상기 사용자 촬영 데이터와 기 저장된 기준 데이터를 비교한 결과를 토대로, 분석부에서 상기 사용자의 체형 상태를 분석하고 분석 결과를 토대로 관리방법 데이터를 생성하는 단계; 및
상기 사용자 촬영 데이터 및 상기 관리방법 데이터를 상기 미러 몸체부의 내측에 마련된 디스플레이 장치의 화면을 통해 출력하여 사용자에게 시인되도록 하는 단계;를 포함하는 것을 특징으로 하는, 사용자 맞춤형 체형관리가 가능한 스마트 미러를 이용한 사용자 맞춤형 체형관리 방법.acquiring user photographing data by photographing a user through a photographing unit provided on one side of the mirror body;
Based on a result of comparing the acquired user shooting data with pre-stored reference data, an analysis unit analyzes the user's body shape state and generates management method data based on the analysis result; and
Outputting the user imaged data and the management method data through a screen of a display device provided inside the mirror body so that the user can see it; User-tailored body shape management method.
KR1020200156388A 2020-11-20 2020-11-20 Smart mirror for managing a body shape KR20220069355A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200156388A KR20220069355A (en) 2020-11-20 2020-11-20 Smart mirror for managing a body shape

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200156388A KR20220069355A (en) 2020-11-20 2020-11-20 Smart mirror for managing a body shape

Publications (1)

Publication Number Publication Date
KR20220069355A true KR20220069355A (en) 2022-05-27

Family

ID=81791694

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200156388A KR20220069355A (en) 2020-11-20 2020-11-20 Smart mirror for managing a body shape

Country Status (1)

Country Link
KR (1) KR20220069355A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102603758B1 (en) * 2022-11-08 2023-11-21 주식회사 엔이에스 Customized exercise suggestion platform based on body type analysis using digital mirror
WO2024080705A1 (en) * 2022-10-12 2024-04-18 주식회사 스튜디오랩 Electronic device and method for taking picture by same

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102043878B1 (en) 2017-06-05 2019-11-12 김지훈 Online exercise training apparatus and the method thereof

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102043878B1 (en) 2017-06-05 2019-11-12 김지훈 Online exercise training apparatus and the method thereof

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024080705A1 (en) * 2022-10-12 2024-04-18 주식회사 스튜디오랩 Electronic device and method for taking picture by same
KR102603758B1 (en) * 2022-11-08 2023-11-21 주식회사 엔이에스 Customized exercise suggestion platform based on body type analysis using digital mirror

Similar Documents

Publication Publication Date Title
US20210008413A1 (en) Interactive Personal Training System
US20210000404A1 (en) Systems and methods for automated recognition of bodily expression of emotion
CN103561652B (en) Method and system for assisting patients
US10843078B2 (en) Affect usage within a gaming context
US20220296966A1 (en) Cross-Platform and Connected Digital Fitness System
US10922997B2 (en) Customizing content for musculoskeletal exercise feedback
US11183079B2 (en) Augmented reality guided musculoskeletal exercises
US10902741B2 (en) Exercise feedback system for musculoskeletal exercises
KR20110017258A (en) Fitness learning system based on user's participation and the method of training
KR20220069355A (en) Smart mirror for managing a body shape
KR20210129570A (en) Exercise lecture managing server to inducing competition of users by providing user customized exercise mission
US20210265055A1 (en) Smart Meditation and Physiological System for the Cloud
CN113117306A (en) Yoga auxiliary learning method, system and storage medium
CN111542876A (en) Information processing apparatus, information processing method, and program
US20230116624A1 (en) Methods and systems for assisted fitness
JP2017120366A (en) Picture display device and picture display method
US9621847B2 (en) Terminal, system, display method, and recording medium storing a display program
TW201919735A (en) Moveable fitness equipment controller, information transmission and collection device combined with fitness equipment, and fitness equipment and control method
US20230252910A1 (en) Methods and systems for enhanced training of a user
KR20230042852A (en) Artificial intelligence smart mirror for body shape correction
JP2021037168A (en) Movement analysis system, movement analysis program, and movement analysis method
CN112702520B (en) Object co-photographing method and device, electronic equipment and computer-readable storage medium
US10887629B1 (en) Basketball video interaction method and device, intelligent basketball stand and storage medium
EP3548996A1 (en) Eye gaze angle feedback in a remote meeting
Humpe et al. The Rhythm of Flow: Detecting Facial Expressions of Flow Experiences Using CNNs

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E601 Decision to refuse application