WO2023128274A1 - 운동 가이드 동영상 제공 방법 및 그 장치 - Google Patents

운동 가이드 동영상 제공 방법 및 그 장치 Download PDF

Info

Publication number
WO2023128274A1
WO2023128274A1 PCT/KR2022/018236 KR2022018236W WO2023128274A1 WO 2023128274 A1 WO2023128274 A1 WO 2023128274A1 KR 2022018236 W KR2022018236 W KR 2022018236W WO 2023128274 A1 WO2023128274 A1 WO 2023128274A1
Authority
WO
WIPO (PCT)
Prior art keywords
posture
user
exercise guide
exercise
guide video
Prior art date
Application number
PCT/KR2022/018236
Other languages
English (en)
French (fr)
Inventor
유선경
박재상
Original Assignee
주식회사 디랙스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020220057272A external-priority patent/KR20230100558A/ko
Application filed by 주식회사 디랙스 filed Critical 주식회사 디랙스
Priority to CN202280080006.7A priority Critical patent/CN118354824A/zh
Publication of WO2023128274A1 publication Critical patent/WO2023128274A1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/20—3D [Three Dimensional] animation
    • G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts

Definitions

  • the present disclosure relates to a method and apparatus for providing an exercise guide video.
  • the exercise guide image is an image in which an instructor or trainer performs an aerobic motion, a yoga motion, or a fitness exercise motion, and the user can exercise by following the instructor's motion demonstrated in the exercise guide video.
  • the present disclosure provides a method and apparatus for providing an exercise guide video for each level of a user.
  • the present disclosure provides a method and apparatus for providing an exercise guide video based on reverse playback.
  • the present disclosure provides a method and apparatus for providing an exercise guide video based on a user's motion.
  • a method for providing an exercise guide video comprising: displaying an exercise guide video including a repetitive motion; Recognizing a user's posture while the exercise guide video is displayed; comparing the posture of the user with a reference posture corresponding to the posture of the user included in the exercise guide video; and terminating the display of the exercise guide video when the similarity between the posture of the user and the reference posture for a predetermined time is less than a reference value.
  • the predetermined time may be longer than a time corresponding to one set motion included in the exercise guide video.
  • the method may further include displaying the exercise guide video corresponding to the user's exercise speed when the similarity between the user's posture and the reference posture is greater than or equal to the reference value.
  • the displayed reference posture corresponds to the user's posture.
  • Increasing the playback speed of the video may include.
  • the displayed reference posture corresponds to the user's posture. It may include; reducing the playback speed of the video.
  • the exercise guide video is displayed until the displayed reference posture corresponds to the user's posture. It may include; pausing playback of the guide video.
  • the reference section may be more than a section corresponding to a subset motion in the exercise guide video.
  • the method may further include generating the exercise guide video including two or more set motions based on reverse reproduction of a section of an original video including one set motion.
  • an electronic device includes a display displaying an exercise guide video including a repetitive motion; a motion sensor for recognizing a user's posture; and comparing the posture of the user with a reference posture corresponding to the posture of the user included in the exercise guide video, and displaying the exercise guide video when a similarity between the posture of the user and the reference posture for a predetermined time is less than a reference value. quit
  • the predetermined time may be longer than a time corresponding to one set motion included in the exercise guide video.
  • the processor may display the exercise guide video corresponding to the user's exercise speed when the similarity between the user's posture and the reference posture is greater than or equal to the reference value.
  • the processor determines that the user's posture is ahead of the reference posture displayed in the exercise guide video by a reference section, the processor increases the playback speed of the exercise guide video so that the displayed reference posture corresponds to the user's posture. can make it
  • the processor reduces the playing speed of the exercise guide video so that the displayed reference posture corresponds to the user's posture. can make it
  • the processor determines that the user's posture lags behind the reference posture displayed in the exercise guide video by a standard interval, the processor temporarily reproduces the exercise guide video until the displayed reference posture corresponds to the user's posture.
  • the reference section may be more than a section corresponding to a subset motion in the exercise guide video.
  • the processor changes the body shape of a character representing the user in response to the similarity when the similarity between the posture of the user and the reference posture for the predetermined time or more is equal to or greater than the reference value, and the changed body shape of the character is set to the can be shown on the display.
  • the number of set motions may be adjusted.
  • set motions which are repetitive motions, are provided without interruption in the video, so that the user's sense of immersion in the exercise can be enhanced.
  • An exercise guide video is controlled by a user's exercise speed, and thus may be provided to the user more usefully.
  • FIG. 1 is a diagram schematically illustrating an exercise equipment management system according to an embodiment.
  • FIG. 2 is a block diagram illustrating a management server according to an exemplary embodiment.
  • FIG. 3 is a block diagram illustrating an exercise device according to an exemplary embodiment.
  • FIG. 4 is a block diagram illustrating a mirror display according to an exemplary embodiment.
  • FIG. 5 is a flowchart illustrating a method of providing an exercise guide video according to an exemplary embodiment.
  • FIG. 6 is a diagram illustrating an original video composed of one set motion according to an exemplary embodiment.
  • FIG. 7 is a reference diagram illustrating a method of generating an exercise guide video including a plurality of set motions according to an exemplary embodiment.
  • FIG. 8 is a reference diagram for explaining a method of generating an exercise guide video including a plurality of set motions according to another embodiment.
  • FIG. 9 is a reference diagram for explaining a method of providing a video including a plurality of set motions as a comparative example.
  • FIG. 10 is a diagram illustrating an original video including a plurality of set motions according to an exemplary embodiment.
  • 11 is a reference diagram for explaining a method of providing an exercise guide video using one set section among a plurality of set sections according to an embodiment.
  • FIG. 12 is a reference diagram for explaining a method of providing an exercise guide video using a plurality of set sections according to an embodiment.
  • FIG. 13 is a diagram illustrating an original video including different type set operations according to an exemplary embodiment.
  • FIG. 14 is a reference diagram explaining a method of generating an exercise guide image including repetitive exercise according to an exemplary embodiment.
  • 15 is a reference diagram explaining a method of generating an exercise guide image including repetitive motion according to another embodiment.
  • 16 is a flowchart illustrating a method of providing an exercise guide video based on a user's motion, according to an exemplary embodiment.
  • 17 is a reference view illustrating a method of providing an exercise guide video when a user's posture precedes a reference posture, according to an exemplary embodiment.
  • FIG. 18 is a reference view illustrating a method of providing an exercise guide video when a user's posture lags behind a reference posture, according to an exemplary embodiment.
  • 19 is a reference view illustrating a method of providing an exercise guide video when a user's posture lags behind a reference posture according to another embodiment.
  • 20 is a reference diagram illustrating a method of displaying a character indicating a user according to an exemplary embodiment.
  • 21 is a reference diagram for explaining a method of expressing an exercise effect with a character according to an exemplary embodiment.
  • a system 1 may include a management server 10, an exercise device 20, a mirror display 30, a user terminal 40, and a manager terminal 50 connected through a network.
  • the system 1 may further include a payment server and a content server associated with the management server 10 .
  • Networks include a Local Area Network (LAN), a Wide Area Network (WAN), a Value Added Network (VAN), a Personal Area Network (PAN), and a mobile radio communication network) or various types of wired and wireless networks such as satellite communication networks.
  • LAN Local Area Network
  • WAN Wide Area Network
  • VAN Value Added Network
  • PAN Personal Area Network
  • mobile radio communication network or various types of wired and wireless networks such as satellite communication networks.
  • the management server 10 is connected to the exercise equipment 20, the mirror display 30, the user terminal 40, and the manager terminal 50 through a network to enable transmission and reception of data, and requests from the manager terminal 50.
  • the management server 10 controls the exercise device 20 in the health center according to the request of the user terminal 40, or uses the exercise result received from the exercise device 20 to determine the exercise history and exercise result. It is also possible to generate corresponding calorie information and the like.
  • the management server 10 may be an operating server of an Internet site.
  • the management server 10 operates a dedicated app and/or web program connected to the exercise device 20, the mirror display 30, the user terminal 40 and the manager terminal 50, etc. support functions can be performed.
  • the management server 10 has a function of supporting an interface necessary to build an application such as an application programming interface (API) on a web/app so that an application for implementing a content platform of a digital information display can run. can also be done
  • the exercise device 20 may include an exercise body that is implemented as a weight training machine or a treadmill and moves according to a user's motion. Also, the exercise device 20 may provide an exercise guide to the user under the control of the management server 10 and may transmit the user's exercise result to the management server 10 . The exercise device 20 may be set in various modes under the user's manipulation or the control of the management server 10 .
  • the user terminal 40 is a terminal registered in the management server 10 to receive exercise management service, and accesses the management server 10, the access terminal 20, and the exercise device 20 through a wired or wireless network to provide data data. It is a terminal capable of transmitting and receiving.
  • the user terminal 40 includes a smart phone, PC, tablet PC, laptop, smart TV, mobile phone, personal digital assistant (PDA), laptop, media player, global positioning system (GPS) device, e-book reader, digital broadcasting terminal, and navigation device. , digital cameras, wearable devices and other mobile and non-mobile computing devices and smart bands, but the present invention is not limited thereto.
  • the user terminal 40 may mean not only a terminal owned by a user receiving an exercise management service, but also an arbitrary terminal through which a registered user can log in by accessing the management server 10 .
  • the manager terminal 50 is a terminal registered in the management server 10 to provide exercise management services, and is a terminal capable of transmitting and receiving data by accessing the management server 10 through a wired or wireless network.
  • the manager terminal 50 includes a smart phone, PC, tablet PC, laptop, smart TV, mobile phone, personal digital assistant (PDA), laptop, media player, global positioning system (GPS) device, e-book reader, digital broadcasting terminal, and navigation device. , digital cameras, wearable devices and other mobile or non-mobile computing devices, but the present invention is not limited thereto.
  • the administrator terminal 50 may mean a terminal owned by a person registered as an administrator in the management server 10, as well as an arbitrary terminal through which a registered administrator can log in by accessing the management server 10. .
  • FIG. 2 is a block diagram illustrating a management server 10 according to an exemplary embodiment.
  • the management server 10 connects external terminals such as an access terminal 20, an exercise device 20, a mirror display 30, a user terminal 40, a manager terminal 50, etc. to a network.
  • the first communication unit 110 that communicates through, the user's exercise program, the user's exercise history, a list of health centers, a database 120 storing information on the mode of the exercise device 20, and the management server 10
  • a first processor ( 150) may be included.
  • the first processor 150 may generate a user's exercise program, manage the usage status of the center, and set the mode of the exercise device 20 according to the request of the manager terminal 50 .
  • the access terminal 20, the manager terminal 50, and the user terminal 40 may also include a communication unit, a storage unit, a user interface, and a processor.
  • the exercise device 20 may be an aerobic exercise device or an anaerobic exercise device.
  • the exercise device 20 may be an aerobic exercise device such as a treadmill, a bicycle, an elliptical, a stair exercise machine, or a chest.
  • Anaerobic exercise equipment such as press, shoulder press, arm curl lat pull down peck deck fly, city draw, low pull chining dipping, leg curl, leg extension, leg press, inner space, outer space, total hip, torso back extension, updominal, etc. can
  • the exercise device 20 includes an exercise body 210, a sensor 220, a second communication unit 240, a first memory 250, a second user interface 260, a second output unit 270, and a second processor. (280).
  • the exercise body 210 is a physical exercise device that moves according to the user's motion.
  • the exercise body 210 according to one example may add, decrease, or maintain a load according to a set exercise level.
  • the exercise body 210 may vary according to the type of exercise device 20 .
  • the sensor 220 may detect movement of components included in the exercise body 210 and transmit the result to the second processor 280 .
  • the sensor 220 may include a laser sensor 220, a motion sensor, a gyro sensor, and the like.
  • the second communication unit 240 may communicate with external devices such as the management server 10, the access terminal 20, other exercise devices 20, the user terminal 40, and the manager terminal 50.
  • the second communication unit 240 includes the management server 10 and a local area network (LAN), a wide area network (WAN), a value added network (VAN), and a personal local area wireless communication (Personal Area Network). Network; PAN), mobile communication network (mobile radio communication network) or satellite communication network, etc. can communicate through various types of wired and wireless networks.
  • the second communication unit 240 communicates with the access terminal 20, the user terminal 40, and the manager terminal 50 through a local area network (LAN), personal area network (PAN), and the like. It can communicate over a local area network.
  • the second communication unit 240 may perform remote communication with the manager terminal 50 .
  • the first memory 250 may store various information used by at least one component (eg, the second processor 280 or the sensor 220) included in the exercise device 20 .
  • the above information may include, for example, software (eg, a program) and input data or output data for commands related thereto.
  • the first memory 250 may include a volatile first memory 250 or a non-volatile first memory 250 .
  • the first memory 250 may include an adjustment motion range or a threshold motion range determined in advance according to user information.
  • the second user interface 250 may receive a command or data to be used for the exercise device 20 from an outside of the exercise device 20 (eg, a user).
  • the second user interface 250 may include, for example, a microphone, a mouse, a keyboard, an electronic tag, or a digital pen (eg, a stylus pen).
  • the user may input user information through the second user interface 250 .
  • the user information may include one or more of the user's name, age, gender, height, weight, and sports history.
  • the second output unit 270 may provide output information.
  • Output information may be user information, user exercise information, or information for guiding a user's exercise.
  • the second output unit 270 may include a display for displaying output information.
  • the second output unit 270 may be physically or electrically connected to the exercise body 210 .
  • the display may be installed on the frame structure of the athletic body 210 .
  • the present disclosure is not limited thereto, and the display 60, including the second communication unit 230, may be connected to receive a predetermined signal from the exercise body 210 even though it is arranged to be spaced apart from the exercise body 210.
  • the second processor 280 may control the overall exercise device 20 and control the second communication unit 240 to communicate with external devices.
  • the second processor 280 may, for example, execute software (eg, a program) to control at least one other component (eg, hardware or software component) connected to the second processor 280, It can perform various data processing or calculations.
  • the second processor 280 transfers commands or data received from other components (eg, the sensor 220 or the second communication unit 230) to the first memory.
  • a command or data stored in the volatile memory 250 may be loaded, a command or data stored in the volatile memory may be processed, and result data may be stored in a non-volatile memory of the first memory 250 .
  • the mirror display 30 is a device capable of providing one or more of a mirror function and a display function according to a user's needs.
  • a film (not shown) having a polarization function is further provided on the display to reflect specific light (eg, light corresponding to the user's posture) and to reflect specific light (eg, an image output from the display).
  • Light corresponding to can be understood to encompass known devices capable of performing the roles of a display and a mirror at the same time by transmitting.
  • the mirror display 30 may include a third communication unit 310, a second memory 320, a third user interface 330, a display 340, a mirror 350, and a third processor 360.
  • the third communication unit 310 may communicate with external devices such as the management server 10 , the user terminal 40 , and the manager terminal 50 .
  • the third communication unit 310 includes the management server 10 and a local area network (LAN), a wide area network (WAN), a value added network (VAN), and a personal local area wireless communication (Personal Area Network). Network; PAN), mobile communication network (mobile radio communication network) or satellite communication network, etc. can communicate through various types of wired and wireless networks.
  • the third communication unit 310 may communicate with the user terminal 40 and the manager terminal 50 through a local area network such as a local area network (LAN) or a personal area network (PAN). there is.
  • the mirror display 30 can be prevented from being controlled by an external device other than the management server 10 .
  • the third communication unit 310 may perform remote communication with the manager terminal 50 .
  • a variety of information used by at least one component (eg, the third processor 360) included in the mirror display 30 may be stored in the second memory 320 .
  • the above information may include, for example, software (eg, a program) and input data or output data for commands related thereto.
  • the second memory 320 may include a volatile second memory 320 or a non-volatile second memory 320 .
  • the second memory 320 may pre-store an original video that may be used to generate an exercise guide video.
  • the third user interface 250 may receive various user commands.
  • the third user interface may receive a user command for playing an exercise guide video displayed on the mirror display 30 .
  • the user may input an exercise event and number of sets to play the exercise guide video through the third user interface.
  • the display may display an exercise guide video under the control of the third processor 360 .
  • the display may be implemented as a liquid crystal display (LCD), organic light emitting diodes (OLED), or the like, and may further include a touch screen to function as a third user interface.
  • LCD liquid crystal display
  • OLED organic light emitting diodes
  • the mirror 350 may be disposed on at least a portion of the front surface of the display.
  • the mirror 350 may include a film that reflects light incident from the outside and transmits light incident from the display, for example, a polarizing film.
  • the third processor 360 generally controls the mirror display 30 and may control the third communication unit 310 to communicate with external devices.
  • the third processor 360 may, for example, execute software (eg, a program) to control at least one other component (eg, hardware or software component) connected to the third processor 360, It can perform various data processing or calculations.
  • the third processor 360 transfers commands or data received from other components (eg, the third communication unit 230 or the third user interface) to the second memory.
  • the second volatile memory may be loaded, the command or data stored in the volatile second memory may be processed, and the resulting data may be stored in a non-volatile second memory among the second memories.
  • the third processor 360 may store an original video including one set motion received from a server or the like in the second memory.
  • the original video may be divided into a plurality of sections. Specifically, the original video may be divided into a preparation section (R) indicating a preparatory motion, a finishing section (E) indicating a finishing motion, and a set section (S) that may be a repetitive motion.
  • the original video is a video that includes a squat exercise, which is an example of a set motion
  • the original video has a preparation section (R) representing an action to prepare for the squat exercise, and a finishing section (E) representing an action to finish the squat exercise.
  • a set period (S) in which the squat motion can be repeated that is, a set period (S) representing a sitting-and-rising motion.
  • the set section S may be divided into two sub-sections based on an inflection point, for example, a point at which the direction of motion is switched.
  • the set section (S) is a section representing a squat motion
  • the set section (S) may be divided into a first section indicating a sitting motion and a second section indicating a rising motion based on a sitting point of the squat motion.
  • the forward section (F) the action that occurs is the backward movement of the sitting motion
  • the second section representing the occurring action is the reverse section (B). Can be called.
  • the third processor 360 may receive and store the original video divided into a plurality of sections from an external source, for example, a server. However, it is not limited thereto. The third processor 360 may divide and store the received original video into a plurality of sections as described above. Alternatively, after storing the original video, the third processor 360 may generate an exercise guide video after dividing the original video into a plurality of sections when a request to reproduce the exercise guide video is received by a user command or the like.
  • the mirror display 30 may further include a detection sensor.
  • a motion detection sensor is a device for acquiring a user's motion, and may include a vision camera, a vision sensor, an acceleration sensor, a gyro sensor, a geomagnetic sensor, an infrared sensor, and the like.
  • the motion detection sensor 370 may extract a region corresponding to a user's joint from the detected data and obtain coordinate data, velocity data, and the like of the corresponding joint.
  • the motion detection sensor is described as one component of the mirror display, but is not limited thereto.
  • a motion detection sensor may be a separate device.
  • a camera of a user terminal may perform a function of a motion detection sensor.
  • FIG. 5 is a flowchart illustrating a method of providing an exercise guide video according to an exemplary embodiment.
  • the third processor 360 may receive a play command of the exercise guide video including the number of times for the set motion from the third communication unit 310 or the third user interface 330 (S410).
  • the mirror display 30 can change from a standby mode to an operating mode.
  • the mirror display 30 may request an exercise item to be played on a user terminal carried by the user.
  • the user terminal may request playback of an exercise guide image for a corresponding exercise event by transmitting the pre-stored exercise event and the number of set motions of the above-described exercise event to the mirror display 30 .
  • the user may input a play command of the exercise guide video by inputting the number of times for an exercise event and a set motion through the user interface of the mirror display 30 .
  • the third processor 360 may generate an exercise guide video including set motions corresponding to the number of times based on reverse reproduction of a partial section of the original video (S420).
  • the third processor 360 may generate a video corresponding to the set motion by reproducing and reverse-playing a partial section of the original video.
  • the number of set operations included in the generated video may increase as the number of steps of reproducing and replaying a partial section increases. A detailed method of generating an exercise guide video will be described later.
  • the third processor 360 may display the generated exercise guide video on the display 340 (S430).
  • the third processor 360 may display the exercise guide video on the display after completion, or may display the exercise guide video on the display at the same time as the exercise guide video is generated. Generating and displaying an exercise guide video may be referred to as playing the exercise guide video.
  • FIG. 6 is a diagram illustrating an original video composed of one set motion according to an exemplary embodiment.
  • the original video 50 may be divided into a plurality of different sections.
  • the original video 50 may be divided into a preparation section (R) indicating a preparation motion, a finishing section (E) indicating a finishing motion, and a set section (S) that may be a repetitive motion.
  • the set section (S) may be divided into a forward section (F) and a reverse section (B) based on an inflection point of the operation, that is, a point at which the direction of the operation is switched.
  • the set interval (S) representing the motion of sitting and rising is the forward interval (F) representing the motion of sitting down from the starting point of the set interval (S) to the sitting point, and the set interval (S) from the sitting point.
  • the motion included in the forward section F may be opposite to the motion included in the backward section B.
  • the motion included in the forward video may be a sitting motion
  • the motion included in the forward motion video may be a rising motion.
  • the time during which the forward section F is reproduced and the time during which the backward section B is reproduced may be the same, but is not limited thereto.
  • the reproduction time of the forward section F and the reproduction time of the backward section B may be within an error range of 10%.
  • a pose in the video at the start point of the set section (S) and a pose in the video at the end point of the set section (S) may be the same. However, it is not limited thereto.
  • the pose at the start point of the set section S and the pose at the end point of the set section S may be within an error range of 10%.
  • the original video 50 may be pre-stored in the second memory 320 of the mirror display 30 .
  • the third processor 360 may generate an exercise guide video 50a including a plurality of repeated motions, ie, a plurality of set motions, by using the original video 50 of one set motion of FIG. 5 .
  • FIG. 7 is a reference diagram for explaining a method of generating an exercise guide video 50 including a plurality of set motions according to an exemplary embodiment.
  • the third processor 360 When receiving a command to play an exercise guide video including n number of set motions from the third user interface 330 or an external device, stores the original video 50 corresponding to the exercise guide video in the second memory. It can be read at (320).
  • the third processor 360 receives the original video 50 from an external device, for example, the management server 10 or the user terminal 30, temporarily stores it in the second memory 320, and then stores the original video 50 ) can be used.
  • the original video 50 may include a plurality of sections R, F, B, and E, and the plurality of sections R, F, B, and E may be distinguished by markers or the like. . However, it is not limited thereto. If the original video 50 is not divided into a plurality of sections (R, F, B, E), the third processor 360 may divide the original video 50 into a plurality of sections using markers, etc., as described in FIG. 6 . .
  • the third processor 360 may generate an exercise guide image 50a including n sets of motions based on reverse playback of a partial section of the original video.
  • the third processor 360 may reproduce the preparation section R of the original video 50 .
  • the third processor 360 may reverse reproduce some sections of the set section S. Specifically, since the forward section F includes a sitting motion, it may include an action that occurs when the forward section F is reproduced in reverse. Thus, the third processor 360 reproduces the forward section (F) and reversely reproduces the forward section (F) at the inflection point (P 2 ) to generate a first set section (S 1 ) of sitting down and getting up. After the third processor 360 reproduces the forward section (F), when the step of reproducing the forward section (F) is performed n-1 times, n-1 set sections (SE 1 , SE 2 ,) are generated. can do.
  • the third processor 360 may generate an n-th set section SEn by sequentially reproducing the forward section F and the backward section B. Finally, the third processor 360 may complete creation of the exercise guide video 50a by reproducing the finishing section E.
  • FIG. 8 is a reference diagram for explaining a method of generating an exercise guide video including a plurality of set motions according to another embodiment.
  • the third processor 360 Upon receiving a request for playback of an exercise guide video including n number of set motions from the third user interface 330 or an external device, the third processor 360 performs reverse playback of some sections of the original video 50 An exercise guide image including n sets of motions may be generated.
  • the third processor 360 may reproduce a preparation section R of the original video 50 .
  • the third processor 360 may generate the first set interval SE 1 by reproducing the forward interval F and the backward interval B.
  • the third processor 360 may generate the second set section SE 2 by reproducing the reverse section B after reproducing the reverse section B. For example, if the reverse section B is a video including an action that occurs, the video including a sitting motion may be reproduced by replaying the reverse section B in reverse.
  • the third processor 360 generates n-1 set intervals (SE 2 , , SE n ) by performing the step of reproducing the reverse interval (B) n-1 times after reproducing the reverse interval (B). can do.
  • the third processor 360 may play the finishing section E to complete generation 50b of the exercise guide video.
  • exercise guide videos 50a and 50b including a plurality of set motions based on reverse playback of some sections of the original video 50 including one set motion, so that the video is cut off.
  • an exercise guide video including a plurality of set motions is acquired by filming, a person who repeats the set motions, for example, a trainer, may deform the trainer's posture as the set motions are repeated.
  • the number of set operations is increased by repeating playback and reverse playback of a portion of the original video, it is possible to fundamentally prevent motion from being disturbed.
  • multiple sets of motions may be implemented by repeatedly reproducing a set section of the original video 50 representing one set motion.
  • FIG. 9 is a reference diagram for explaining a method of providing a video including a plurality of set motions as a comparative example.
  • the third processor 360 may play a set section SE 1 after reproducing a preparation section R of the original video 50 .
  • Repeat play is played by moving from the end point (P 3 ) of the set section (S) to the time point (P 1 ) of the set section (S), and even for a short period of time, video interruption may occur. And, if the pose in the video at the end point (P 3 ) of the set section (S) and the pose in the video at the start point (P 1 ) of the set section (S) do not match, the discontinuity of the image may be further weighted. .
  • the original video 50 is generally an image obtained by photographing a person's motion process, and the pose at the end point (P 3 ) of the set section (S) and the start point (P 1 ) of the set section (S).
  • the poses may not match completely.
  • exercise guide videos 50a and 50b including a plurality of set motions are generated using inverse reproduction of some sections of the original video 50, the starting point of the set motion and the set motion As the end point of the operation is the same, there is no disconnection of the video.
  • the user can improve the sense of immersion in the exercise while watching the image.
  • the original video 50 of FIG. 6 is an original video composed of one set of motions. However, it is not limited thereto.
  • the original video may be a video including more than two sets of motions. In general, repetitive exercises may include multiple set movements.
  • the original video may be composed of a set motion of a basic number, and the third processor 360 may generate an exercise guide video including a set motion exceeding the basic number based on reverse reproduction of a partial section of the original video.
  • the original video 60 may include a set motion of which the basic number is two times.
  • the set section (S) of the original video 60 may include a first set section (S 1 ) and a second set section (S 2 ) including the same type of set motion.
  • the third processor 360 may increase the number of set motions by repeating reproduction and reverse reproduction of some sections of the set section S. there is.
  • 11 is a reference diagram for explaining a method of providing an exercise guide video using one set section among a plurality of set sections according to an embodiment.
  • the third processor 360 reproduces and reverses the forward section (F 1 ) of the first set section (S 1 ) among the set section (S), so that the first set section ( SE 1 ) can be created.
  • the third processor 360 generates n-2 set intervals by performing steps of reproducing and reverse-reproducing the forward interval F 1 of the first set interval S 1 among the set intervals S, n-2 times. can do.
  • the third processor 360 reproduces the first set section S1 and the second set section S2 of the original video 60 to obtain the n-1th set section SEn-1 and the n-th set section SEn- 1 .
  • a set section (SE N ) may be generated.
  • the set interval is increased by reproducing and reverse reproducing the forward interval F 1 of the first set interval S 1 , but is not limited thereto.
  • the set period can be increased by reproducing and reverse-playing the reverse period B 1 of the first set period S 1 .
  • the number of set operations may be increased by using reproduction and reverse reproduction of the forward section (F 2 ) or backward section (B 2 ) of the second set section (S 2 ).
  • the third processor 360 may increase the set operation by reproducing and replaying a part of the first set period S and a part of the second set period S.
  • the third processor 360 may increase the set intervals by reproducing and inversely reproducing a partial interval of the first set interval S 1 and a partial interval of the second set interval S 2 .
  • the third processor 360 reproduces the forward section F 1 and the backward section B 1 of the first set section S 1 of the original video 60 so that the first set section ( SE 1 ) can be created.
  • the third processor 360 generates the second set interval (SE 2 ) by reproducing and backward reproducing the forward interval (F 2 ) of the second set interval (S 2 ), and the processor 360 generates the first set interval (S 2 ). 1 ), the third set section SE 3 may be generated by reproducing and reproducing the reverse section B 1 .
  • the processor repeats reproduction and reverse reproduction of the forward section F 2 of the second set section S 2 and reverse reproduction and reproduction of the reverse section B 1 of the first set section S 1 , thereby performing the fourth set section. It is possible to generate the n-1th set section in .
  • the third processor 360 may generate the nth set interval SE n by sequentially reproducing the forward interval F 2 and backward interval B 2 of the second set interval S 2 .
  • the number of reverse playbacks or reverse playback sections can be diversified.
  • the original video contains one kind of set action. However, it is not limited thereto.
  • An original video may include a plurality of different type set operations.
  • the original video may include a first-type set motion capable of repetitive motion in the right direction and a second-type set motion capable of repetitive motion in the left direction.
  • the third processor 360 may provide an exercise guide image by using reverse playback of a partial section of the original video.
  • an original video 70 may be divided into a plurality of sections R, S, and E.
  • the original video 70 can be divided into a preparation section (R) representing a preparatory motion, a finishing section (E) indicating a finishing motion, and a set section (S) that can be a repetitive motion.
  • the set section (S) can be divided into a plurality of set sections (AS, BS) based on the point where the type of repetitive exercise is changed.
  • the lunge exercise can be divided into a right lunge exercise with the right leg behind, that is, the first type set interval (AS) and a left lunge exercise with the left leg behind, that is, the second type set interval (BS).
  • Each set section may be divided into a forward section (AF, BF) and a reverse section (AB, BB) based on a point where the direction of operation is switched.
  • each of the right lunge movement and the left lunge movement may be divided into a forward section representing a sitting down motion and a backward section representing a rising motion.
  • the set section (S) of the lunge exercise is a first type set section (AS) representing an operation from the starting point (P 1 ) of the set action to the point where the right side is 90 degrees and the upper body is lowered (P 12 ).
  • BS 2nd type set section (BS) showing motions from the point where the forward section (BF) and the left side of the left side are 90 degrees and the upper body is lowered (P 22 ) to the point where the side is straightened and the upper body is raised (P 23 )
  • the playback time of the forward section of each type of set section and the playback time of the reverse section of the set section of the corresponding type may be the same, but, for example, the forward section and the reverse section) are played The time may be within the margin of error of 10%.
  • a pose in the video at a start point of each type of set section may be the same as a pose in the video at an end point of a set section of a corresponding type. However, it is not limited thereto. For example, a pose at a starting point of each type of set interval and a pose at an end point of a corresponding type of set interval may be within an error range of 10%.
  • the third processor 360 may generate an exercise guide video including a plurality of set motions using the original video 70 of FIG. 13 .
  • FIG. 14 is a reference diagram for explaining a method of generating an exercise guide image 70a including repetitive exercise according to an exemplary embodiment.
  • the third processor 360 When n sets of motions are requested from the third user interface 320 or an external device, the third processor 360 performs an exercise guide video including n sets of motions based on reverse playback of some sections of the original video 70 ( 70a) can be created.
  • the third processor 360 may reproduce the preparation section R of the original video 70 .
  • the third processor 360 includes a forward section (AF) of the first type set section (AS), a reverse section (AB) of the first type set section (AS), and a forward section (AF) of the second type set section (AS). ) are sequentially played, and the forward section (BF) of the second type set section (BS) is reproduced in reverse to generate the first set section (ASE 1 , BSE 1 ).
  • the third processor 360 When the original video includes a lunge exercise, the third processor 360 reproduces the forward section (AF) of the first type set section (AS) and the reverse section (AB) of the first type set section (AS), right You can create a video of your lunge workout. Then, when the third processor 360 reversely reproduces the forward section BF of the second type set section BS after reproducing the forward section BF of the second type set section BS, the third processor ( 360) may generate a video of the left lunge exercise. That is, the forward section (BF) of the second type set section (BS) is a video in which the upper body goes down while the left knee is bent. This is because it can be a video in which the upper body rises as it unfolds.
  • the third processor 360 reversely reproduces the reverse section AB of the first type set section AS, and reverses the reverse section AB of the first type set section AS and the second type set section BS.
  • Second set intervals ASE2 and BSE2 may be generated by reproducing the forward interval BF of the second type set interval BS in reverse after sequentially reproducing the forward interval BF.
  • the third processor 360 reversely reproduces the reverse section AB of the first type set section AS, and the reverse section AB of the first type set section AS and the second type set section BS After sequentially reproducing the forward section (BF), if the step of reproducing the forward section (BF) of the second type set section (BS) in reverse is performed n-2 times, the third processor 360 sets n-2 times. intervals can be created.
  • the third processor 360 reversely reproduces the reverse section AB of the first type set section AS, and reverses the reverse section AB of the first type set section AS and the second type set section BS. ) of the forward section (BF) and the reverse section (BB) of the second type set section (BS) can be sequentially reproduced to generate the n-th set section (ASE n , BSE n ). Finally, the third processor 360 may complete creation of the exercise guide video 70a by reproducing the finishing section E.
  • the third processor 360 generates n first-type set intervals using the first type set interval AS, and generates n second-type set intervals using the second type set interval BS.
  • 15 is a reference diagram explaining a method of generating an exercise guide image 70b including repetitive motions according to another embodiment.
  • the third processor 360 When n sets of motions are requested from the third user interface 310 or an external device, the third processor 360 performs an exercise guide video including n sets of motions based on reverse playback of some sections of the original video 70 ( 70b) can be reproduced.
  • the third processor 360 may reproduce the preparation section R of the original video 70 .
  • the third processor 360 After reproducing the forward section AF of the first type set section AS, the third processor 360 performs the step of reproducing the forward section AF of the first type set section AS n-1 times. By doing so, it is possible to generate n-1 first type set intervals (AS 1 , ). And, by sequentially reproducing the forward section (AF) of the first type set section (AS) and the reverse section (AB) of the first type set section (AS), the nth first type set section (AS n ) is generated. can do.
  • the third processor 360 performs the step of reproducing the forward section (BF) of the second type set section (BS) after reproducing the forward section (BF) of the second type set section (BS) in n-1 By performing n-1 times, it is possible to generate the second type set period (BS1, ). Then, the third processor 360 sequentially reproduces the forward section BF of the second type set section BS and the backward section BB of the second type set section BS, thereby generating the nth second type set. A section (BS n ) may be created.
  • the third processor 360 may complete creation of the exercise guide video 70b by reproducing the finishing section E.
  • FIG. 15 it is assumed that the reverse reproduction of FIG. 7 is based on repeated generation of each type set section n times, but is not limited thereto.
  • the reverse reproduction of FIG. 8 may be applied to the reverse reproduction of the type set section.
  • the reverse reproduction of FIG. 7 and the reverse reproduction of FIG. 8 may be combined and applied.
  • FIGS. 14 and 15 a method of providing an exercise guide video using an original video including two different types of set motions has been described, but is not limited thereto.
  • an exercise guide video may be created using not only one set of original videos including different types of repetitive motions but also two or more basic sets of different types of repetitive motion pictures.
  • the generated exercise guide video may be provided on the mirror display 30 or may be provided on another device.
  • An exercise guide video according to an embodiment may be adjusted or ended in response to a user's motion.
  • the third processor 360 may display an exercise guide video on the display 340 (S610).
  • the third processor 360 can change the mirror display 30 from a standby mode to an operating mode when a user enters within a predetermined distance from the mirror display 30 .
  • the mirror display 30 may request an exercise item to be played on the user terminal 40 carried by the user.
  • the user terminal 40 may request playback of an exercise guide video for a corresponding exercise event by transmitting the pre-stored exercise event and the number of set motions of the above-described exercise event to the mirror display 30 .
  • the user may input an exercise guide video display command by inputting the number of times for an exercise item and a set motion through the third user interface 330 of the mirror display 30 .
  • the third processor 360 generates an exercise guide video including a plurality of set motions based on reverse playback of some sections of the original video, and displays the generated exercise guide video on the display 340.
  • Exercise guide videos for each user or each set may be pre-stored in the second memory 320 .
  • the third processor 360 may read a pre-stored exercise guide video corresponding to a user or set according to a play request command and display it on the display 340 .
  • the third processor 360 may recognize the user's posture (S620).
  • the motion detection sensor 370 detects a user's motion and transmits the result to the third processor 360 .
  • the motion detection sensor 370 is equipment for acquiring a user's movement, and includes a vision camera, a vision sensor, an acceleration sensor, a gyro sensor, a geomagnetic sensor, and an infrared sensor. etc.
  • the third processor 360 may recognize the user's posture using motion data received from the motion detection sensor 370 .
  • the third processor 360 may extract feature points for recognizing a posture from the image data including the user.
  • the feature point may be a region representing a human body.
  • the feature point may be a shoulder, a shoulder joint, an upper arm, an elbow joint, a lower arm, a wrist joint, a hand, a torso, a hip joint, an upper leg, a knee joint, a lower leg, an ankle joint, and a foot.
  • the third processor 360 may recognize the user's posture by analyzing feature points, a connection angle (stereoscopic angle) of each feature point, and a distance (stereoscopic distance) of each feature point.
  • the third processor 360 may recognize a 2D posture by using a deep learning learning method, a fast human pose estimation (FPD) learning method, or the like for motion data.
  • the third processor 360 may recognize a 3D posture using a model-based method using a 3D body model or a model-free method estimating without a 3D model.
  • FPD fast human pose estimation
  • the human body posture recognition technology can be applied in various known methods.
  • the third processor 360 may recognize a posture (hereinafter referred to as a 'standard posture') of a target (eg, a trainer) included in an exercise guide video in a manner similar to a manner in which a user recognizes a posture. there is. However, it is not limited thereto.
  • the third processor 360 may generate motion modeling by estimating a reference posture from an original video, and pre-store the original video and motion modeling together. Also, when displaying an exercise guide video based on an original video, the third processor 360 may extract a reference posture while transforming a motion model matched with the displayed exercise guide video. Operation modeling may be performed by the third processor 360 or may be performed by an external device such as a server.
  • the third processor 360 determines the user's posture and reference from the detected image data.
  • the posture of the user and the reference posture may be recognized by extracting the posture.
  • the third processor 360 may compare the user's posture with a reference posture corresponding to the user's posture included in the exercise guide video (S630).
  • the third processor 360 may calculate a similarity between a current posture of the user at a specific time point, for example, and a reference posture corresponding to the posture of the user while being included in the exercise guide video.
  • the user's posture recognized at a specific time point and the reference posture displayed on the display 340 may be different. For example, when the user's exercise speed is slower than the playback speed of the exercise guide video, the user's posture may lag behind the reference posture displayed on the display 340 . That is, the reference posture corresponding to the user's posture included in the exercise guide video is already displayed.
  • the third processor 360 may compare the recognized posture of the user with a previously displayed reference posture corresponding to the posture of the user.
  • the user's posture may precede the reference posture displayed on the display 340 . That is, the reference posture corresponding to the user's posture included in the exercise guide video may not be displayed yet.
  • the third processor 360 may compare the recognized user's posture with the reference posture corresponding to the user's posture only when the reference posture corresponding to the user's posture is displayed on the display 340 .
  • the third processor 360 may use angle or distance-based similarity of feature points.
  • the third processor 360 may quantitatively calculate the degree of similarity by calculating the degree of similarity for each angle of the feature points or the distance between the feature points, assigning a weight to each degree of similarity, and then summing the points. Similarity may be calculated for all feature points, or similarity may be calculated for some important feature points in the reference posture. Since various known methods are applied to the similarity calculation method, a detailed description thereof will be omitted.
  • the third processor 360 may display an exercise guide video on the display 340 corresponding to the user's exercise speed (S650).
  • a playback speed of the exercise guide video may be determined based on the original video.
  • the playback speed of the exercise guide video may be adjusted according to a user's command. However, since the playback speed is fixed regardless of the user's exercise speed, the playback speed of the exercise guide video may be different from the user's exercise speed.
  • the user's exercise speed may be slower than the playback speed of the exercise guide video. If the user exercises according to the playing speed of the exercise guide video, he or she may get injured or not be able to exercise in the correct posture. Alternatively, since the user's exercise speed slows down as the number of set motions increases, while the playback speed of the exercise guide video is constant, the user may be injured or unable to exercise in a correct posture.
  • the third processor 360 may adjust the reproduction speed of the exercise guide video in response to the user's exercise speed.
  • the third processor 360 may determine that the user's exercise speed is faster than the reproduction speed of the exercise guide video.
  • the reference interval may be a time interval corresponding to a subset operation or a set operation among set operations.
  • each of a forward section and a backward section may be a time section corresponding to a subset motion
  • the sum of the forward section and backward section may be a time section corresponding to the set motion.
  • the reference interval may be preset by a user or a manager differently according to an exercise event.
  • the third processor 360 may specify the currently recognized user's posture based on the previously recognized user's posture. For example, the third processor 360 may determine whether the currently transplanted user's posture is the posture of the forward section or the backward section of the squat exercise based on the user's previously recognized posture. Similarly, the third processor 360 may determine the current reference posture based on the previous reference posture.
  • the third processor 360 may increase the playback speed of the exercise guide video so that the displayed reference posture corresponds to the recognized user's posture.
  • the playback speed may be adjusted in proportion to the user's movement speed or may be adjusted by stepwise size change.
  • the third processor 360 increases the playing speed of the exercise guide video by 1.1 times or 1.2 times so that the displayed reference posture corresponds to the user's posture, that is, the reference posture displayed at a specific point in time matches the user's posture. It can be adjusted to one of times, 1.5 times, and 2 times.
  • the third processor 360 may determine that the user's exercise speed is slower than the playback speed of the exercise guide video. Thus, the third processor 360 may reduce the playing speed of the exercise guide video so that the displayed reference posture corresponds to the recognized user's posture, that is, the reference posture displayed at a specific point in time matches the user's posture. there is.
  • the playback speed may be adjusted in proportion to the user's motion speed or may be adjusted by stepwise size change. For example, the third processor 360 may adjust the playback speed of the exercise guide video to one of 0.9 times, 0.8 times, and 0.5 times so that the reference posture corresponds to the user's posture.
  • the third processor 360 may pause playback of the exercise guide video until the displayed reference posture corresponds to the user's posture. Also, if the user's posture matches the reference posture displayed in the exercise guide video, the third processor 360 may play the exercise guide video again.
  • the third processor 360 determines the relationship between the user's movement speed and the reproduction speed based on the recognized user's posture and reference posture, but is not limited thereto.
  • the third processor 360 may determine a relationship between the user's exercise speed and the play speed based on a time during which a specific user's motion is performed and a playback time at which the reference motion corresponding to the specific user's motion is displayed.
  • the third processor 360 may profile the motion of the user from the recognized postures of the user, that is, the motion of the user, and classify the profiled motion of the user in units of subsets. Also, the third processor may compare a time required for the user to perform the subset with a playback time required for reproducing the subset section of the exercise guide video.
  • the third processor may determine that the movement speed of the user and the reproduction speed are the same if the difference between the operating time and the playing time is within the reference time.
  • the third processor may determine that the movement speed of the user is slower than the playback speed when the operating time is longer than the playing time by a reference time or longer.
  • the third processor may determine that the movement speed of the user is faster than the playback speed when the operating time is shorter than the playing time by a reference time or more.
  • the reference time may be a time corresponding to a subset section, and may be set by a user or a manager differently according to an exercise event.
  • a conventional method of calculating the movement speed of the user may be applied.
  • the third processor 360 may stop displaying the exercise guide video.
  • the predetermined time may be a time corresponding to one set operation. However, it is not limited thereto.
  • the predetermined time may be a time corresponding to two or three set operations.
  • the third processor 360 may end display of the exercise guide video. If the result of the user's motion is not received from the motion detection sensor 370, the third processor 360 may determine the similarity between the user's posture and the reference posture as '0'. If the motion detection sensor 370 fails to detect the user's motion, it may mean that the user leaves the place where the user exercises.
  • the third processor 360 may prevent unnecessary exercise guide videos from being played by ending the display of the exercise guide videos. Thus, it is possible to prevent power waste of the exercise equipment or the mirror display 30 .
  • the third processor 360 may provide information related to the reproduction speed of the exercise guide video and information about the degree of similarity between the user's posture and the reference posture while providing the exercise guide video.
  • the above information may be provided with at least one of character, graph, text, and sound.
  • 17 to 19 are reference views illustrating a method of providing an exercise guide video according to an exemplary embodiment.
  • the third processor 360 may display an exercise guide video 710 on the display 340 .
  • the user may perform the exercise while viewing the reference posture displayed in the exercise guide video.
  • the third processor 360 may compare the user's posture with a reference posture corresponding to the user's posture, calculate a similarity between the user's posture and the reference posture, and display the result 720 on the display 340. .
  • the user can check the accuracy of his/her own posture based on similarity.
  • the third processor 360 may determine that the user's exercise speed is faster than the playback speed of the exercise guide video. The third processor 360 may increase the playback speed of the exercise guide video so that the displayed reference posture corresponds to the user's posture.
  • the third processor 360 may display on the display 340 a first indicator 730 notifying that the reproduction speed of the exercise guide video has increased.
  • the third processor 360 may display a second indicator 740 on the display 340 to guide the user to slow down the exercise speed.
  • the third processor 360 may determine that the user's exercise speed is slower than the reproduction speed of the exercise guide video. Also, the third processor 360 may reduce the playback speed of the exercise guide video so that the displayed reference posture corresponds to the user's posture.
  • the third processor 360 may display on the display 340 a third indicator 830 notifying that the reproduction speed of the exercise guide video has decreased.
  • the third processor 360 may display on the display 340 a fourth indicator 840 guiding the user to increase the exercise speed.
  • the third processor 360 continues the exercise guide video until the displayed reference posture corresponds to the user's posture. Playback can be paused. And, as shown in FIG. 19 , the third processor 360 may display on the display 340 a fifth indicator 930 notifying that playback of the exercise guide video is paused. When the user's posture reaches the reference posture displayed on the display 340, the third processor 360 may resume playing the exercise guide video.
  • the third processor 360 may temporarily stop playing the exercise guide video. However, it is not limited thereto. If it is determined that the user's posture lags behind the reference posture by the reference section, the third processor 360 may pause playback of the exercise guide video at the end point of the subset motion or the end point of the set motion among the exercise guide videos.
  • the third processor 360 may store the user's exercise speed and refer to it when playing the next exercise guide video. For example, when the user exercises faster than the playback speed whenever exercising, the third processor 360 may increase the playback speed of the exercise guide video to a preset playback speed.
  • the third processor 360 may provide an indicator indicating a degree of similarity between the user's posture and the corresponding reference posture, but is not limited thereto.
  • the third processor 360 may also provide information on effects according to the user's exercise.
  • the third processor 360 may display the exercise effect in the body shape of a character that refers to the user, for example, an avatar.
  • 20 and 21 are reference views illustrating a method of providing an exercise effect according to an exemplary embodiment.
  • the third processor 360 may display a character 1010 indicating the user before playing the exercise guide video.
  • the third processor 360 compares the user's posture with a reference posture corresponding to the user's posture, and calculates a similarity between the user's posture and the reference posture.
  • the third processor 360 may change the body shape of the character based on the calculated similarity result, and display the character 1010 whose body shape is changed on the display 340 .
  • a squat exercise has an effect of strengthening lower body muscles and reducing fat.
  • the third processor 360 creates a character 1010 with strengthened lower body muscles and reduced fat. It can be displayed on the display 340.
  • the exercise guide video may be created by the exercise device or a server capable of communicating with the exercise device or mirror display 30, and the exercise device or mirror display 30 may display the created exercise guide video.
  • the exercise guide video is a general electronic device including a display, for example, a smartphone, PC, tablet PC, laptop, smart TV, mobile phone, PDA (personal digital assistant), laptop, media player, digital broadcasting terminal, It can be created in navigation devices, wearable devices and other mobile and non-mobile computing devices, and can also be created in electronic devices capable of communicating with display devices.
  • the method according to an embodiment of the present disclosure may be implemented in the form of program instructions that can be executed through various computer means and recorded in a computer readable medium.
  • Computer readable media may include program instructions, data files, data structures, etc. alone or in combination. Program commands recorded on the medium may be specially designed and configured for the present disclosure, or may be known and usable to those skilled in computer software.
  • Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic media such as floptical disks.
  • - includes hardware devices specially configured to store and execute program instructions, such as magneto-optical media, and ROM, RAM, flash memory, and the like.
  • Examples of program instructions include high-level language codes that can be executed by a computer using an interpreter, as well as machine language codes such as those produced by a compiler.
  • Computer readable media can be any available media that can be accessed by a computer and includes both volatile and nonvolatile media, removable and non-removable media. Also, computer readable media may include both computer storage media and communication media. Computer storage media includes both volatile and nonvolatile, removable and non-removable media implemented in any method or technology for storage of information such as computer readable instructions, data structures, program modules or other data. Communication media typically includes computer readable instructions, data structures, program modules, or other data in a modulated data signal such as a carrier wave, or other transport mechanism, and includes any information delivery media. In addition, some embodiments of the present disclosure may be implemented as a computer program or computer program product including instructions executable by a computer, such as a computer program executed by a computer.
  • the device-readable storage medium may be provided in the form of a non-transitory storage medium.
  • 'non-temporary storage medium' only means that it is a tangible device and does not contain signals (e.g., electromagnetic waves), and this term refers to the case where data is stored semi-permanently in the storage medium and temporary It does not discriminate if it is saved as .
  • a 'non-temporary storage medium' may include a buffer in which data is temporarily stored.
  • the method according to various embodiments disclosed in this document may be provided by being included in a computer program product.
  • Computer program products may be traded between sellers and buyers as commodities.
  • a computer program product is distributed in the form of a device-readable storage medium (eg compact disc read only memory (CD-ROM)), or through an application store or between two user devices (eg smartphones). It can be distributed (e.g., downloaded or uploaded) directly or online.
  • a computer program product eg, a downloadable app
  • a device-readable storage medium such as a memory of a manufacturer's server, an application store server, or a relay server. It can be temporarily stored or created temporarily.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physical Education & Sports Medicine (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Architecture (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

운동 가이드 동영상 제공 방법 및 그 장치를 개시한다. 본 운동 가이드 동영상 제공 방법은, 반복 동작이 포함된 운동 가이드 동영상이 표시되는 동안 사용자의 자세를 인식하고, 사용자의 자세와 운동 가이드 동영상에 포함되면서 사용자의 자세에 대응하는 기준 자세를 비교하는 단계 및 일정 시간 동안 상기 사용자의 자세와 기준 자세간의 유사도가 기준값 미만이면, 운동 가이드 동영상의 표시를 종료한다.

Description

운동 가이드 동영상 제공 방법 및 그 장치
본 개시는 운동 가이드 동영상을 제공하는 방법 및 그 장치에 관한 것이다.
최근 들어, 일과 개인 생활의 균형을 나타내는 워라밸(work and life balance)가 주목 받으면서, 퇴근 후, 주말, 또는 여유 시간에 운동 등 자신의 삶을 위한 소비가 증가하고 있다. 워라밸의 하나로서 자신의 건강을 관리하고자 하는 사용자의 욕구가 증가하고 있으며, 약간의 시간 투자로 삶의 질을 향상시키기 위해, 수영, 헬스, PT(Personal Training), 골프, 필라테스 등 다양한 운동을 하는 사용자들이 증가하고 있다.
운동을 하는 사용자가 증가함에 따라 올바른 자세로 운동하고자 하는 욕구도 증가하고 있으며, 이에 따른 운동 가이드를 제공하는 영상 등이 제공되고 있다. 운동 가이드 영상은, 강사 또는 트레이너 등이 에어로빅 동작, 요가 동작, 헬스 운동 동작을 하는 영상으로서, 사용자는 운동 가이드 동영상에서 시연되는 강사 등의 동작을 따라 운동할 수 있다.
그러나, 기존 운동 가이드 영상은 시간 단위의 운동을 가이드할 뿐 사용자별로 선택적으로 가이드하지 않는다.
본 개시는 사용자의 수준별 운동 가이드 동영상을 제공하는 방법 및 그 장치를 제공한다.
본 개시는 역재생을 기초하여 운동 가이드 동영상을 제공하는 방법 및 그 장치를 제공한다.
본 개시는 사용자의 동작에 기초하여 운동 가이드 동영상을 제공하는 방법 및 그 장치를 제공한다.
본 발명의 일 측면(aspect)에 따른 운동 가이드 동영상을 제공하는 방법에 있어서, 반복 동작이 포함된 운동 가이드 동영상을 표시하는 단계; 상기 운동 가이드 동영상이 표시되는 동안 사용자의 자세를 인식하는 단계; 상기 사용자의 자세와 상기 운동 가이드 동영상에 포함된 상기 사용자의 자세에 대응하는 기준 자세를 비교하는 단계; 및 일정 시간 동안 상기 사용자의 자세와 상기 기준 자세간의 유사도가 기준값 미만이면, 상기 운동 가이드 동영상의 표시를 종료하는 단계;를 포함한다.
그리고, 상기 일정 시간은, 상기 운동 가이드 동영상에 포함된 1회의 세트 동작에 대응하는 시간 이상일 수 있다.
또한, 상기 사용자의 자세와 상기 기준 자세간의 유사도가 상기 기준값 이상이면, 상기 사용자의 운동 속도에 대응하여 상기 운동 가이드 동영상을 표시하는 단계;를 더 포함할 수 있다.
그리고, 상기 운동 가이드 동영상을 표시하는 단계는, 상기 사용자의 자세가 상기 운동 가이드 동영상 중 표시되는 기준 자세보다 기준 구간 앞선다고 판단되면, 상기 표시되는 기준 자세가 상기 사용자의 자세에 대응되도록 상기 운동 가이드 동영상의 재생 속도를 증가시키는 단계;를 포함할 수 있다.
또한, 상기 운동 가이드 동영상을 표시하는 단계는, 상기 사용자의 자세가 상기 운동 가이드 동영상 중 표시되는 기준 자세보다 기준 구간 뒤쳐졌다고 판단되면, 상기 표시되는 기준 자세가 상기 사용자의 자세에 대응되도록 상기 운동 가이드 동영상의 재생 속도를 감소시키는 단계;를 포함할 수 있다.
그리고, 상기 운동 가이드 동영상을 표시하는 단계는, 상기 사용자의 자세가 상기 운동 가이드 동영상 중 표시되는 기준 자세보다 기준 구간 뒤쳐졌다고 판단되면, 상기 표시되는 기준 자세가 상기 사용자의 자세에 대응될때까지 상기 운동 가이드 동영상의 재생을 일시 정지하는 단계;를 포함할 수 있다.
또한, 상기 기준 구간은 상기 운동 가이드 동영상 중 서브 세트 동작에 대응하는 구간 이상일 수 있다.
그리고, 상기 일정 시간 이상 동안 상기 사용자의 자세와 상기 기준 자세간의 유사도가 상기 기준값 이상이면, 상기 사용자를 나타내는 캐릭터의 체형을 상기 유사도에 대응하여 변경시키는 단계; 및 변경된 상기 캐릭터의 체형을 표시하는 단계;를 더 포함할 수 있다.
그리고, 1회의 세트 동작을 포함하는 원본 동영상 중 일부 구간의 역재생에 기초하여 2회 이상의 세트 동작을 포함하는 상기 운동 가이드 동영상을 생성하는 단계;를 더 포함할 수 있다.
한편, 일 실시예에 따른 전자 장치는, 반복 동작이 포함된 운동 가이드 동영상을 표시하는 디스플레이; 사용자의 자세를 인식하는 모션 감지 센서; 및 상기 사용자의 자세와 상기 운동 가이드 동영상에 포함되면서 상기 사용자의 자세에 대응하는 기준 자세를 비교하고, 일정 시간 동안 상기 사용자의 자세와 상기 기준 자세간의 유사도가 기준값 미만이면, 상기 운동 가이드 동영상의 표시를 종료한다.
그리고, 상기 디스플레이 상에 배치되며, 상기 운동 가이드 동영상을 표시하면서 상기 사용자의 자세에 대응하는 광을 반사시킬 수 있다. 상기 일정 시간은, 상기 운동 가이드 동영상에 포함된 1회의 세트 동작에 대응하는 시간 이상일 수 있다.
또한, 상기 프로세서는, 상기 사용자의 자세와 상기 기준 자세간의 유사도가 상기 기준값 이상이면, 상기 사용자의 운동 속도에 대응하여 상기 운동 가이드 동영상을 표시할 수 있다.
그리고, 상기 프로세서는, 상기 사용자의 자세가 상기 운동 가이드 동영상 중 표시되는 기준 자세보다 기준 구간 앞선다고 판단되면, 상기 표시되는 기준 자세가 상기 사용자의 자세에 대응되도록 상기 운동 가이드 동영상의 재생 속도를 증가시킬 수 있다.
또한, 상기 프로세서는, 상기 사용자의 자세가 상기 운동 가이드 동영상 중 표시되는 기준 자세보다 기준 구간 뒤쳐졌다고 판단되면, 상기 표시되는 기준 자세가 상기 사용자의 자세에 대응되도록 상기 운동 가이드 동영상의 재생 속도를 감소시킬 수 있다.
그리고, 상기 프로세서는, 상기 사용자의 자세가 상기 운동 가이드 동영상 중 표시되는 기준 자세보다 기준 구간 뒤쳐졌다고 판단되면, 상기 표시되는 기준 자세가 상기 사용자의 자세에 대응될때까지 상기 운동 가이드 동영상의 재생을 일시 정지할 수 있다.
또한, 상기 기준 구간은 상기 운동 가이드 동영상 중 서브 세트 동작에 대응하는 구간 이상일 수 있다.
그리고, 상기 프로세서는, 상기 일정 시간 이상 동안 상기 사용자의 자세와 상기 기준 자세간의 유사도가 상기 기준값 이상이면, 상기 사용자를 나타내는 캐릭터의 체형을 상기 유사도에 대응하여 변경시키고, 변경된 상기 캐릭터의 체형을 상기 디스플레이에 표시할 수 있다.
일 실시예에 따른 운동 가이드 동영상은 세트 동작의 횟수를 조절할 수 있다.
일 실시예에 따른 운동 가이드 동영상은 반복 동작인 세트 동작이 영상의 끊김 없이 제공되어 사용자의 운동에 대한 몰입감을 높일 수 있다.
일 실시예에 따른 운동 가이드 동영상은 사용자의 운동 속도에 의해 조절되는 바, 사용자에게 보다 유용하게 제공될 수 있다.
도 1은 일 실시예에 따른 운동 기기 관리 시스템을 개략적으로 도시한 도면이다.
도 2는 일 실시예에 따른 관리 서버를 나타내는 블록도이다.
도 3는 일 실시예에 따른 운동 기기를 나타내는 블록도이다.
도 4는 일 실시예에 따른 미러 디스플레이를 나타내는 블록도이다.
도 5는 일 실시예에 따른 운동 가이드 동영상을 제공하는 방법을 설명하는 흐름도이다.
도 6는 일 실시예에 따른 하나의 세트 동작으로 구성된 원본 동영상을 도시한 도면이다.
도 7은 일 실시예에 따른 복수 회의 세트 동작을 포함하는 운동 가이드 동영상을 생성하는 방법을 설명하는 참조도면이다.
도 8은 다른 실시예에 따른 복수 회의 세트 동작을 포함하는 운동 가이드 동영상을 생성하는 방법을 설명하는 참조도면이다.
도 9는 비교예로서, 복수 회의 세트 동작을 포함하는 동영상을 제공하는 방법을 설명하는 참조도면이다.
도 10은 일 실시예에 따른 복수의 세트 동작을 포함하는 원본 동영상을 도시한 도면이다.
도 11은 일 실시예에 따른 복수의 세트 구간 중 하나의 세트 구간을 이용하여 운동 가이드 동영상을 제공하는 방법을 설명하는 참조도면이다.
도 12은 일 실시예에 따른 복수의 세트 구간을 이용하여 운동 가이드 동영상을 제공하는 방법을 설명하는 참조도면이다.
도 13는 일 실시예에 따른 서로 다른 타입 세트 동작을 포함하는 원본 동영상을 도시한 도면이다.
도 14은 일 실시예에 따른 반복 운동을 포함하는 운동 가이드 영상을 생성하는 방법을 설명하는 참조도면이다.
도 15는 다른 실시예에 따른 반복 운동을 포함하는 운동 가이드 영상을 생성하는 방법을 설명하는 참조도면이다.
도 16은 일 실시예에 따른 사용자의 동작에 기초하여 운동 가이드 동영상을 제공하는 방법을 설명하는 흐름도이다.
도 17은 일 실시예에 따른 사용자의 자세가 기준 자세보다 앞선 경우, 운동 가이드 동영상을 제공하는 방법을 설명하는 참조도면이다.
도 18은 일 실시예에 따른 사용자의 자세가 기준 자세보다 뒤처진 경우, 운동 가이드 동영상을 제공하는 방법을 설명하는 참조도면이다.
도 19는 다른 실시예에 따른 사용자의 자세가 기준 자세보다 뒤처진 경우, 운동 가이드 동영상을 제공하는 방법을 설명하는 참조도면이다.
도 20은 일 실시예에 따른 사용자를 지칭하는 캐릭터를 표시하는 방법을 설명하는 참조도면이다.
도 21은 일 실시예에 따른 캐릭터로 운동효과를 나타내는 방법을 설명하는 참조도면이다.
본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.
제1, 제2 등의 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 구성 요소들은 용어들에 의하여 한정되어서는 안 된다. 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만 사용된다.
도 1은 일 실시예에 따른 운동 기기 관리 시스템(1)을 개략적으로 도시한 도면이다. 도 1을 참조하면, 시스템(1)은 네트워크로 연결된 관리 서버(10), 운동 기기(20), 미러 디스플레이(30), 사용자 단말(40) 및 관리자 단말(50)을 포함할 수 있다. 이외에도 시스템(1)은 관리 서버(10)와 연계된 결제 서버 및 콘텐츠 서버 등을 더 포함할 수 있다.
네트워크는 근거리 통신망(Local Area Network; LAN), 광역 통신망(Wide Area Network; WAN), 부가가치 통신망(Value Added Network; VAN), 개인 근거리 무선통신(Personal Area Network; PAN), 이동 통신망(mobile radio communication network) 또는 위성 통신망 등과 같은 다양한 종류의 유무선 네트워크로 구현될 수 있다.
관리 서버(10)는 운동 기기(20), 미러 디스플레이(30), 사용자 단말(40), 및 관리자 단말(50) 등과 네트워크를 통해 연결되어 데이터의 송수신이 가능하고, 관리자 단말(50)의 요청에 따라 사용자의 운동 스케쥴, 운동 종목 리스트 등을 저장하고, 사용자 단말(40) 또는 운동 기기(20)로부터 수신된 정보로부터 사용자의 운동 결과 등을 저장하며, 관리자 단말(50) 또는 사용자 단말(40)의 요청에 따라 상기한 운동 결과를 관리자 단말(50) 또는 사용자 단말(40)에 제공할 수도 있다.
또한, 관리 서버(10)는 사용자 단말(40)의 요청에 따라 헬스 센터에 있는 운동 기기(20) 등을 제어하거나, 운동 기기(20)로부터 수신된 운동 결과를 이용하여 운동 이력, 운동 결과에 대응하는 칼로리 정보 등을 생성할 수도 있다.
관리 서버(10)는 인터넷 사이트의 운영 서버일 수 있다. 관리 서버(10)에서는 운동 기기(20), 미러 디스플레이(30), 사용자 단말(40) 및 관리자 단말(50) 등과 연결되는 전용 앱(App) 및/또는 웹(Web) 프로그램을 운영하거나, 이를 지원하는 기능을 수행할 수 있다. 또한, 관리 서버(10)는 디지털 정보 디스플레이의 콘텐츠 플랫폼을 구현하기 위한 애플리케이션이 구동할 수 있도록, 웹/앱 상에서 API(Application Programming Interface)와 같은 애플리케이션을 구축할 수 있도록 필요한 인터페이스를 지원하는 기능을 수행할 수도 있다.
운동 기기(20)는 웨이트 트레이닝 기구 또는 러닝 머신 등으로 구현되어 사용자의 움직임에 따라 움직이는 운동 본체를 포함할 수 있다. 또한 운동 기기(20)는 관리 서버(10)의 제어하에 사용자에게 운동 가이드를 제공할 수 있고, 사용자의 운동 결과를 관리 서버(10)에 전송할 수도 있다. 운동 기기(20)는 사용자의 조작 또는 관리 서버(10)의 제어하에 다양한 모드로 설정될 수 있다.
사용자 단말(40)은 운동 관리 서비스를 제공받고자 관리 서버(10)에 등록된 단말로서, 유선 또는 무선 네트워크를 통해 관리 서버(10), 출입 단말(20) 및 운동 기기(20) 등에 접속하여 데이터를 송수신할 수 있는 단말이다. 사용자 단말(40)은 스마트폰, PC, 태블릿 PC, 노트북, 스마트 TV, 휴대폰, PDA(personal digital assistant), 랩톱, 미디어 플레이어, GPS(global positioning system) 장치, 전자책 단말기, 디지털방송용 단말기, 네비게이션, 디지털 카메라, 웨어러블 장치 및 기타 모바일, 비모바일 컴퓨팅 장치 및 스마트 밴드일 수 있으나, 본 발명이 이에 한정되는 것은 아니다. 여기서 사용자 단말(40)은 운동 관리 서비스를 제공받는 사용자가 소유하는 단말뿐만 아니라, 등록된 사용자가 관리 서버(10)에 접속하여 로그인을 수행할 수 있는 임의의 단말을 의미할 수 있다.
관리자 단말(50)은 운동 관리 서비스를 제공하고자 관리 서버(10)에 등록된 단말로서, 유선 또는 무선 네트워크를 통해 관리 서버(10)에 접속하여 데이터를 송수신할 수 있는 단말이다. 관리자 단말(50)은 스마트폰, PC, 태블릿 PC, 노트북, 스마트 TV, 휴대폰, PDA(personal digital assistant), 랩톱, 미디어 플레이어, GPS(global positioning system) 장치, 전자책 단말기, 디지털방송용 단말기, 네비게이션, 디지털 카메라, 웨어러블 기기 및 기타 모바일 또는 비모바일 컴퓨팅 장치일 수 있으나, 본 발명이 이에 한정되는 것은 아니다. 여기서 관리자 단말(50)은 관리 서버(10)에 관리자로 등록된 자가 소유하는 단말뿐만 아니라, 등록된 관리자가 관리 서버(10)에 접속하여 로그인을 수행할 수 있는 임의의 단말을 의미할 수 있다.
도 2는 일 실시예에 따른 관리 서버(10)를 나타내는 블록도이다. 도 2를 참조하면, 관리 서버(10)는 외부 단말, 예를 들어, 출입 단말(20), 운동 기기(20), 미러 디스플레이(30), 사용자 단말(40), 관리자 단말(50) 등과 네트워크를 통해 통신하는 제1 통신부(110), 사용자의 운동 프로그램, 사용자의 운동 이력, 헬스 센터의 일실 리스트, 운동 기기(20)의 모드에 대한 정보 등이 저장된 데이터베이스(120), 관리 서버(10)를 관리하는 관리자 등의 사용자 명령을 입력받는 제1 사용자 인터페이스(130), 헬스 센터의 상태를 표시하거나 알리는 제1 출력부(140) 및 관리 서버(20)의 전반적인 기능을 수행하는 제1 프로세서(150)를 포함할 수 있다. 제1 프로세서(150)는 관리자 단말(50)의 요청에 따라 사용자의 운동 프로그램을 생성하거나, 센터의 이용 현황을 관리하고, 운동 기기(20)의 모드를 설정할 수도 있다.
도면에는 도시되어 있지 않지만, 출입 단말(20), 관리자 단말(50) 및 사용자 단말(40)도, 통신부, 저장부, 사용자 인터페이스, 및 프로세서 등을 포함할 수 있다.
도 3는 일 실시예에 따른 운동 기기(20)를 나타내는 블록도이다. 일 실시예에 따른 운동 기기(20)는 유산소 운동 기기 또는 무산소 운동 기기일 수 있다, 예를 들어, 운동 기기(20)는 트레드밀, 자전거, 일립티컬, 계단운동기구, 등과 같은 유산소 운동 기기, 체스트프레스, 쇼울더프레스, 암컬 랫풀다운 펙덱플라이, 시티드로우, 로우풀 치닝 딥핑, 레그컬, 레그익스텐션, 레그프레스, 이너사이, 아웃사이, 토탈힙, 토르소 백익스텐션, 업도미널 등과 같은 무산소 운동 기기일 수 있다.
운동 기기(20)는 운동 본체(210), 센서(220), 제2 통신부(240), 제1 메모리(250), 제2 사용자 인터페이스(260), 제2 출력부(270) 및 제2 프로세서(280)를 포함할 수 있다.
운동 본체(210)는 사용자의 움직임에 따라 움직이는 물리적 운동 기구이다. 일 예시에 따른 운동 본체(210)는 설정된 운동 레벨에 따라 부하를 추가, 감소 또는 유지시킬 수 있다. 운동 본체(210)는 운동 기기(20)의 종류에 따라 다양할 수 있다.
센서(220)는 운동 본체(210)에 포함된 구성요소들의 움직임을 감지하고, 그 결과를 제2 프로세서(280)에 전달할 수 있다. 상기한 센서(220)는 레이저 센서(220), 움직임 센서, 자이로 센서 등을 포함할 수 있다.
제2 통신부(240)는 외부 기기, 예를 들어, 관리 서버(10), 출입 단말(20), 다른 운동 기기(20), 사용자 단말(40), 관리자 단말(50) 등과 통신할 수 있다. 제2 통신부(240)는 관리 서버(10)와 근거리 통신망(Local Area Network; LAN), 광역 통신망(Wide Area Network; WAN), 부가가치 통신망(Value Added Network; VAN), 개인 근거리 무선통신(Personal Area Network; PAN), 이동 통신망(mobile radio communication network) 또는 위성 통신망 등과 같은 다양한 종류의 유무선 네트워크를 통해 통신할 수 있다. 그리고, 제2 통신부(240)는 출입 단말(20), 사용자 단말(40) 및 관리자 단말(50)과는 근거리 통신망(Local Area Network; LAN), 개인 근거리 무선통신(Personal Area Network; PAN) 등 근거리 통신망으로 통신할 수 있다. 그리하여, 운동 기기(20)가 관리 서버(10) 이외의 다른 외부 기기에 의해 제어되는 방지할 수 있다. 그러나, 이에 한정되지 않는다. 경우에 따라서는 제2 통신부(240)는 관리자 단말(50)과 원거리 통신을 할 수도 있다.
제1 메모리(250)에는 운동 기기(20)에 포함된 적어도 하나의 구성요소(예: 제2 프로세서(280) 또는 센서(220))에 의해 사용되는 다양한 정보를 저장할 수 있다. 상기한 정보는, 예를 들어, 소프트웨어(예: 프로그램) 및, 이와 관련된 명령에 대한 입력 데이터 또는 출력 데이터를 포함할 수 있다. 제1 메모리(250)는, 휘발성 제1 메모리(250) 또는 비휘발성 제1 메모리(250)를 포함할 수 있다. 일 예로서, 제1 메모리(250)는 사용자 정보에 따라 미리 결정되는 조정 운동 범위 또는 임계 운동 범위를 포함할 수 있다.
제2 사용자 인터페이스(250)는 운동 기기(20)에 사용될 명령 또는 데이터를 운동 기기(20)의 외부(예: 사용자)로부터 수신할 수 있다. 제2 사용자 인터페이스(250)는, 예를 들면, 마이크, 마우스, 키보드, 전자 태그 또는 디지털 펜(예: 스타일러스 펜)을 포함할 수 있다. 일 예로서, 사용자는 제2 사용자 인터페이스(250)를 통해 사용자 정보를 입력할 수 있다. 예를 들어 사용자 정보는 사용자의 이름, 나이, 성별, 신장, 몸무게, 운동 경력 중 하나 이상을 포함할 수 있다.
제2 출력부(270)는 출력 정보를 제공할 수 있다. 일 예시에 따른 출력 정보는 사용자 정보, 사용자 운동 정보 또는 사용자의 운동을 가이드하는 정보일 수 있다. 일 예로서, 제2 출력부(270)는 출력 정보를 표시하기 위한 디스플레이를 포함할 수 있다. 또한, 제2 출력부(270)는 물리적 또는 전기적으로 운동 본체(210)에 연결될 수 있다. 예를 들어, 디스플레이는 운동 본체(210)의 프레임 구조물에 설치될 수 있다. 다만, 본 개시가 이에 제한되는 것은 아니며, 디스플레이(60)는 제2 통신부(230)를 포함하여 운동 본체(210)로부터 이격되도록 배치되더라도 운동 본체(210)로부터 소정의 신호를 받도록 연결될 수도 있다.
제2 프로세서(280)는 운동 기기(20)를 전반적으로 제어하고, 외부 기기와 통신할 수 있도록 제2 통신부(240)를 제어할 수도 있다. 제2 프로세서(280)는, 예를 들면, 소프트웨어(예: 프로그램)를 실행하여 제2 프로세서(280)에 연결된 적어도 하나의 다른 구성요소(예: 하드웨어 또는 소프트웨어 구성요소)를 제어할 수 있고, 다양한 데이터 처리 또는 연산을 수행할 수 있다. 일 실시예에 따르면, 데이터 처리 또는 연산의 적어도 일부로서, 제2 프로세서(280)는 다른 구성요소(예: 센서(220) 또는 제2 통신부(230))로부터 수신된 명령 또는 데이터를 제1 메모리(250) 중 휘발성 제1 메모리(250)에 로드하고, 휘발성 메모리에 저장된 명령 또는 데이터를 처리하고, 결과 데이터를 제1 메모리(250) 중 비휘발성 메모리에 저장할 수 있다.
도 4는 일 실시예에 따른 미러 디스플레이(30)를 나타내는 블록도이다. 미러 디스플레이(30)는 사용자의 필요에 따라 미러(Mirror) 기능 및 디스플레이(Display) 기능 중 하나 이상을 제공할 수 있는 장치이다. 디스플레이 상에 편광 기능을 포함하는 필름(미도시됨)을 더 구비하고 있어, 특정 빛(예를 들어, 사용자의 자세에 대응하는 빛)은 반사시키고 특정 빛(예를 들어, 디스플레이에서 출력되는 이미지에 대응하는 빛)은 투과시킴으로써 디스플레이와 거울의 역할을 동시에 수행할 수 있는 공지된 장치를 포괄하는 것으로 이해될 수 있다.
미러 디스플레이(30)는 제3 통신부(310), 제2 메모리(320), 제3 사용자 인터페이스(330), 디스플레이(340), 미러(350) 및 제3 프로세서(360)를 포함할 수 있다.
제3 통신부(310)는 외부 기기, 예를 들어, 관리 서버(10), 사용자 단말(40), 관리자 단말(50) 등과 통신할 수 있다. 제3 통신부(310)는 관리 서버(10)와 근거리 통신망(Local Area Network; LAN), 광역 통신망(Wide Area Network; WAN), 부가가치 통신망(Value Added Network; VAN), 개인 근거리 무선통신(Personal Area Network; PAN), 이동 통신망(mobile radio communication network) 또는 위성 통신망 등과 같은 다양한 종류의 유무선 네트워크를 통해 통신할 수 있다. 그리고, 제3 통신부(310)는 사용자 단말(40) 및 관리자 단말(50)과는 근거리 통신망(Local Area Network; LAN), 개인 근거리 무선통신(Personal Area Network; PAN) 등 근거리 통신망으로 통신할 수 있다. 그리하여, 미러 디스플레이(30)는 관리 서버(10) 이외의 다른 외부 기기에 의해 제어되는 방지할 수 있다. 그러나, 이에 한정되지 않는다. 경우에 따라서는 제3 통신부(310)는 관리자 단말(50)과 원거리 통신을 할 수도 있다.
제2 메모리(320)에는 미러 디스플레이(30)에 포함된 적어도 하나의 구성요소(예: 제3 프로세서(360))에 의해 사용되는 다양한 정보를 저장할 수 있다. 상기한 정보는, 예를 들어, 소프트웨어(예: 프로그램) 및, 이와 관련된 명령에 대한 입력 데이터 또는 출력 데이터를 포함할 수 있다. 제2 메모리(320)는, 휘발성 제2 메모리(320) 또는 비휘발성 제2 메모리(320)를 포함할 수 있다. 일 예로서, 제2 메모리(320)는 운동 가이드 동영상을 생성하는데 이용될 수 있는 원본 동영상이 기저장되어 있을 수 있다.
제3 사용자 인터페이스(250)는 각종 사용자 명령을 입력받을 수 있다. 일 예로서, 제3 사용자 인터페이스는 미러 디스플레이(30)가 표시할 수 있는 운동 가이드 동영상을 재생하기 위한 사용자 명령을 수신받을 수 있다. 사용자는 운동 가이드 동영상을 재생할 운동 종목 및 세트 횟수 등을 제3 사용자 인터페이스를 통해 입력할 수 있다.
디스플레이는 제3 프로세서(360)의 제어하에 운동 가이드 동영상을 표시할 수 할 수 있다. 디스플레이는 LCD(Liquid Crystal Display), OLED(Organic Light Emitting Diodes) 등으로 구현될 수 있으며, 터치 스크린을 더 포함하여 제3 사용자 인터페이스 기능도 할 수 있다.
또한, 미러(350)는 디스플레이의 전면 중 적어도 일부 영역상에 배치될 수 있다. 미러(350)는 외부에서 입사된 광을 반사시키고 디스플레이에서 입사된 광을 투과시키는 필름, 예를 들어, 편광 필름을 포함할 수 있다.
제3 프로세서(360)는 미러 디스플레이(30)를 전반적으로 제어하고, 외부 기기와 통신할 수 있도록 제3 통신부(310)를 제어할 수도 있다. 제3 프로세서(360)는, 예를 들면, 소프트웨어(예: 프로그램)를 실행하여 제3 프로세서(360)에 연결된 적어도 하나의 다른 구성요소(예: 하드웨어 또는 소프트웨어 구성요소)를 제어할 수 있고, 다양한 데이터 처리 또는 연산을 수행할 수 있다. 일 실시예에 따르면, 데이터 처리 또는 연산의 적어도 일부로서, 제3 프로세서(360)는 다른 구성요소(예: 제3 통신부(230) 또는 제3 사용자 인터페이스)로부터 수신된 명령 또는 데이터를 제2 메모리(320) 중 휘발성 제2 메모리에 로드하고, 휘발성 제2 메모리에 저장된 명령 또는 데이터를 처리하고, 결과 데이터를 제2 메모리 중 비휘발성 제2 메모리에 저장할 수 있다. 예를 들어, 제3 프로세서(360)는 서버 등으로부터 수신된 하나의 세트 동작을 포함하는 원본 동영상을 제2 메모리에 저장할 수 있다.
원본 동영상은 복수 개의 구간으로 구분될 수 있다. 구체적으로, 원본 동영상은 준비 동작을 나타내는 준비 구간(R), 마무리 동작을 나타내는 마무리 구간(E), 반복 동작이 될 수 있는 세트 구간(S)으로 구분될 수 있다. 예를 들어, 원본 동영상은 세트 동작의 예인, 스쿼트 운동을 포함하는 동영상인 경우, 원본 동영상은 스쿼트 운동을 준비하는 동작을 나타내는 준비 구간(R), 스쿼트 운동을 마무리하는 동작을 나타내는 마무리 구간(E), 스쿼트 동작이 반복될 수 있는 세트 구간(S), 즉, 앉았다 일어나는 동작을 나타내는 세트 구간(S)으로 구분될 수 있다.
세트 구간(S)은 변곡점, 예를 들어, 동작의 방향이 전환되는 지점을 기준으로 두 개의 서브 구간으로 구분될 수 있다. 세트 구간(S)이 스쿼트 동작을 나타내는 구간인 경우, 스쿼트 동작의 앉은 지점을 기준으로, 세트 구간(S)은 앉아지는 동작을 나타내는 제1 구간과, 일어나는 동작을 나타내는 제2 구간으로 구분될 수 있다. 앉아지는 동작을 나타내는 제1 구간이 순방향 구간(F)이라고 할 때 일어나는 동작은 앉아지는 동작의 역방향 동작인 바, 일어나는 동작을 나타내는 제2 구간은 역방향 구간(B)이라고 칭할 수 있다.
제3 프로세서(360)는 외부, 예를 들어, 서버로부터 복수 개의 구간으로 구분된 원본 동영상을 수신받아 저장할 수 있다. 그러나, 이에 한정된 않는다. 제3 프로세서(360)는 수신된 원본 동영상을 앞서 설명한 바와 같은 복수 개의 구간으로 구분하여 저장할 수 있다. 또는 제3 프로세서(360)는 원본 동영상을 저장한 후, 사용자 명령 등에 의해 운동 가이드 동영상의 재생을 요청받으면 원본 동영상을 복수 개의 구간으로 구분한 후 운동 가이드 동영상을 생성할 수 있다.
미러 디스플레이(30)는 감지 센서를 더 포함할 수 있다. 모션 감지 센서는 사용자의 움직임을 획득하기 위한 장비로서, 비전 카메라, 비전 센서, 가속도 센서, 자이로 센서, 지자기 센서, 적외선 센서 등을 포함할 수 있다.
모션 감지 센서(370)는 검출된 데이터로부터 사용자의 관절에 대응하는 영역을 추출하여 해당하는 관절의 좌표 데이터, 속도 데이터 등을 획득할 수 있다.
도 4에서 모션 감지 센서는 미러 디스플레이의 일 구성요소로 설명하였으나, 이에 한정되지 않는다. 모션 감지 센서는 별도의 장치일 수 있다. 또는 사용자 단말의 카메라가 모션 감지 센서의 기능을 수행할 수도 있다.
도 5는 일 실시예에 따른 운동 가이드 동영상을 제공하는 방법을 설명하는 흐름도이다.
제3 프로세서(360)는 제3 통신부(310) 또는 제3 사용자 인터페이스(330) 등으로부터 세트 동작에 대한 횟수를 포함하는 운동 가이드 동영상의 재생 명령을 수신받을 수 있다(S410). 사용자가 미러 디스플레이(30)와 일정 거리내에 진입하면, 미러 디스플레이(30)는 대기 모드에서 동작 모드로 변경할 수 있다. 그리고, 미러 디스플레이(30)는 사용자가 휴대하는 사용자 단말 등에 재생할 운동 종목을 요청할 수 있다. 사용자 단말은 기저장된 운동 종목과 상기한 운동 종목의 세트 동작에 대한 횟수를 미러 디스플레이(30)에 전송함으로써 해당 운동 종목에 대한 운동 가이드 영상의 재생을 요청할 수 있다. 또는 사용자는 미러 디스플레이(30)의 사용자 인터페이스를 통해 운동 종목 및 세트 동작에 대한 횟수를 입력함으로써 운동 가이드 동영상의 재생 명령을 입력할 수 있다.
제3 프로세서(360)는 원본 동영상 중 일부 구간의 역재생을 기초로 횟수에 대응하는 세트 동작을 포함한 운동 가이드 동영상을 생성할 수 있다(S420). 제3 프로세서(360)는 원본 동영상 중 일부 구간의 재생 및 역재생함으로써 세트 동작에 대응하는 동영상을 생성할 수 있다. 일부 구간의 재생 및 역재생하는 단계가 증가할수록 생성된 동영상에 포함된 세트 동작의 횟수도 증가할 수 있다. 운동 가이드 동영상을 생성하는 구체적인 방법은 후술하기로 한다.
제3 프로세서(360)는 생성된 운동 가이드 동영상을 디스플레이(340)에 표시할 수 있다(S430). 제3 프로세서(360)는 운동 가이드 동영상의 생성을 완성 후 디스플레이에 표시할 수도 있고, 운동 가이드 동영상의 생성과 동시에 디스플레이에 표시할 수도 있다. 운동 가이드 동영상을 생성하고 표시하는 것을 운동 가이드 동영상을 재생한다고 칭할 수 있다.
도 6는 일 실시예에 따른 하나의 세트 동작으로 구성된 원본 동영상을 도시한 도면이다. 도 6을 참조하면, 원본 동영상(50)은 서로 다른 복수 개의 구간으로 구분될 수 있다. 원본 동영상(50)은 준비 동작을 나타내는 준비 구간(R), 마무리 동작을 나타내는 마무리 구간(E), 반복 운동의 동작이 될 수 있는 세트 구간(S)으로 구분된 수 있다.
세트 구간(S)은 동작의 변곡점, 즉, 동작의 방향이 전환되는 지점을 기준으로 순방향 구간(F)과 역방향 구간(B)으로 구분될 수 있다. 예를 들어, 스쿼트 운동 중 앉았다 일어나는 동작을 나타내는 세트 구간(S)은 세트 구간(S)의 시작 지점에서 앉은 지점까지의 앉아지는 동작을 나타내는 순방향 구간(F)과 앉은 지점에서부터 세트 구간(S)의 종료 지점까지의 일어나는 동작을 나타내는 역방향 구간(B)으로 구분될 수 있다. 순방향 구간(F)에 포함된 동작은 역방향 구간(B)에 포함된 동작과 서로 반대일 수 있다. 예를 들어, 순방향 동영상에 포함된 동작은 앉아지는 동작인 반면, 순방향 동영상에 포함된 동작은 일어나는 동작일 수 있다.
순방향 구간(F)이 재생되는 시간과 역방향 구간(B)이 재생되는 시간은 동일할 수 있으나, 이에 한정되지 않는다. 예를 들어, 순방향 구간(F)이 재생되는 시간과 역방향 구간(B)이 재생되는 시간은 10%의 오차 범위 이내일 수도 있다.
세트 구간(S)의 시작 지점에서의 동영상 내 포즈와 세트 구간(S)의 종료 지점에서의 동영상내 포즈는 동일할 수 있다. 그러나, 이에 한정되지 않는다. 예를 들어, 세트 구간(S)의 시작 지점에서의 포즈와 세트 구간(S)의 종료 지점에서의 포즈는 10%의 오차 범위 이내일 수 있다.
상기한 원본 동영상(50)의 미러 디스플레이(30)의 제2 메모리(320)에 기저장되어 있을 수 있다.
제3 프로세서(360)는 도 5의 1세트 동작의 원본 동영상(50)을 이용하여 복수 회의 반복 동작 즉, 복수 회의 세트 동작을 포함하는 운동 가이드 동영상(50a)을 생성할 수 있다.
도 7은 일 실시예에 따른 복수 회의 세트 동작을 포함하는 운동 가이드 동영상(50)을 생성하는 방법을 설명하는 참조도면이다.
제3 사용자 인터페이스(330) 또는 외부 기기로부터 n회의 세트 동작을 포함하는 운동 가이드 동영상의 재생 명령을 수신받으면, 제3 프로세서(360)는 운동 가이드 동영상에 대응하는 원본 동영상(50)을 제2 메모리(320)에서 독출할 수 있다. 제3 프로세서(360)는 외부 기기, 예를 들어, 관리 서버(10), 사용자 단말(30) 등으로부터 원본 동영상(50)을 수신하여 제2 메모리(320)에 임시 저장한 후 원본 동영상(50)을 이용할 수 있다.
원본 동영상(50)은 도 6에서 설명한 바와 같이 복수 개의 구간(R, F, B, E)을 포함할 수 있으며, 복수 개의 구간(R, F, B, E)이 마커 등에 의해 구분될 수 있다. 그러나 이에 한정되지 않는다. 원본 동영상(50)이 복수 개의 구간(R, F, B, E)으로 구분되지 않는 경우, 제3 프로세서(360)는 도 6에서 설명한 바와 같이, 마커 등을 이용하여 복수 개의 구간으로 구분할 수도 있다.
제3 프로세서(360)는 원본 동영상 중 일부 구간의 역재생을 기초로 n 세트 동작을 포함하는 운동 가이드 영상(50a)을 생성할 수 있다.
도 7에 도시된 바와 같이, 제3 프로세서(360)는 원본 동영상(50) 중 준비 구간(R)을 재생할 수 있다.
제3 프로세서(360)는 세트 구간(S)을 재생함에 있어서, 세트 구간(S) 중 일부 구간을 역재생할 수 있다. 구체적으로, 순방향 구간(F)은 앉아지는 동작을 포함하기 때문에 순방향 구간(F)을 역재생하면 일어나는 동작을 포함할 수 있다. 그리하여, 제3 프로세서(360)는 순방향 구간(F)을 재생한 후 변곡점(P2)에 순방향 구간(F)을 역재생하면, 앉았다 일어나는 첫번째 세트 구간(S1)을 생성할 수 있다. 제3 프로세서(360)가 순방향 구간(F)을 재생한 후 순방향 구간(F)을 역재생하는 단계를 n-1 회 수행하면 n-1 회의 세트 구간(SE1, SE2,쪋)을 생성할 수 있다.
그리고, 제3 프로세서(360)는 순방향 구간(F) 및 역방향 구간(B)을 순차적으로 재생하면 n번째의 세트 구간(SEn)을 생성할 수 있다. 마지막으로 제3 프로세서(360)는 마무리 구간(E)을 재생함으로써 운동 가이드 동영상(50a)의 생성을 완성할 수 있다.
도 8은 다른 실시예에 따른 복수 회의 세트 동작을 포함하는 운동 가이드 동영상을 생성하는 방법을 설명하는 참조도면이다.
제3 사용자 인터페이스(330) 또는 외부 기기 등으로부터 n회의 세트 동작을 포함하는 운동 가이드 동영상의 재생 요청을 수신받으면, 제3 프로세서(360)는 원본 동영상(50) 중 일부 구간의 역재생을 기초로 n 세트 동작을 포함하는 운동 가이드 영상을 생성할 수 있다.
도 8에 도시된 바와 같이, 제3 프로세서(360)는 원본 동영상(50) 중 준비 구간(R)을 재생할 수 있다.
제3 프로세서(360)는 순방향 구간(F) 및 역방향 구간(B)을 재생함으로써 세트 첫번째 세트 구간(SE1)을 생성할 수 있다.
그리고, 제3 프로세서(360)는 역방향 구간(B)을 역재생한 후 역방향 구간(B)을 재생함으로써 두번째 세트 구간(SE2)을 생성할 수 있다. 예를 들어, 역방향 구간(B)이 일어나는 동작을 포함하는 동영상이면, 역방향 구간(B)을 역재생함으로서 앉아지는 동작을 포함하는 동영상이 재생될 수 있다. 제3 프로세서(360)는 역방향 구간(B)을 역재생한 후 역방향 구간(B)을 재생하는 단계를 n-1회 수행함으로써 n-1 회 세트 구간(SE2,쪋, SEn)을 생성할 수 있다.
제3 프로세서(360)는 마무리 구간(E)을 재생하여 운동 가이드 동영상의 생성(50b)을 완료할 수 있다.
상기와 같이, 하나의 세트 동작을 포함하는 원본 동영상(50) 중 일부 구간의 역재생을 기초로 복수 회의 세트 동작을 포함하는 운동 가이드 동영상(50a, 50b)을 생성할 수 있는 바, 영상의 끊김이 없는 운동 가이드 동영상을 생성할 수 있다. 하나의 세트 동작을 나타내는 원본 동영상을 이용하기 때문에 세트 동작이 반복된다 하더라도 동작이 흐트러지지 않는 동영상을 제공할 수 있다. 만약, 복수 회의 세트 동작을 포함하는 운동 가이드 동영상을 촬영에 의해 획득한다면, 세트 동작을 반복하는 사람, 예를 들어, 트레이너는 세트 동작을 반복할수록 트레이너의 자세가 변형될 수 있다. 그러나, 원본 동영상의 일부 구간을 재생 및 역재생을 반복함으로써 세트 동작의 횟수를 증가시키는 바, 동작이 흐트러지는 것을 원천적으로 방지할 수 있다.
또한, 세트 동작의 횟수 별로 원본 동영상을 제작 및 저장할 필요가 없어, 원본 동영상의 제작 비용을 절감할 수 있고, 원본 동영상의 저장 용량을 줄일 수 있다.
한편, 1 세트 동작을 나타내는 원본 동영상(50) 중 세트 구간을 반복 재생함으로써 복수 회의 세트 동작을 구현할 수도 있다.
도 9는 비교예로서, 복수 회의 세트 동작을 포함하는 동영상을 제공하는 방법을 설명하는 참조도면이다.
도 9를 참조하면, 제3 프로세서(360)는 원본 동영상(50) 중 준비 구간(R)을 재생한 후, 세트 구간(SE1)을 재생할 수 있다. 제3 프로세서(360)는 세트 구간(S)을 n회 반복 재생할 수 있다. 즉, 제3 프로세서(360)는 세트 구간(S=SE1)을 반복 재생한 후 세트 구간(S=SE1)의 종료 지점(P3)에 도달하면 세트 구간(S)의 시작 지점(P1)으로 이동하여 세트 구간(S=SE2)을 다시 재생할 수 있다.
반복 재생은 세트 구간(S)의 종료 지점(P3)에서 세트 구간(S)의 시간 지점(P1)으로 이동하여 재생되는 바, 짧은 시간이라 할지라도 영상의 끊김 현상이 발생할 수 있다. 그리고, 세트 구간(S)의 종료 지점(P3)에서의 동영상 내 포즈와 세트 구간(S)의 시작 지점(P1)에서 동영상 내 포즈가 일치하지 않는 경우 영상의 불연속성을 더욱 가중될 수 있다.
원본 동영상(50)은 일반적으로 사람의 운동 과정을 촬영하여 획득된 영상인 바, 세트 구간(S)의 종료 지점(P3)에서의 포즈와 세트 구간(S)의 시작 지점(P1)에서 포즈가 완전히 일치하지 않을 수 있다. 그리하여, 반복 재생에 생성된 운동 가이드 동영상(50C)에서 끊김 현상이 발생하는 것은 불가피할 것으로 예상된다. 이러한 끊김 현상은 사용자의 운동에 대한 몰입감을 저하시킬 수 있다.
한편, 일 실시예에 따른 바와 같이, 원본 동영상(50) 중 일부 구간의 역쟁생을 이용하여 복수 회의 세트 동작을 포함하는 운동 가이드 동영상(50a, 50b)을 생성하면, 세트 동작의 시작 지점과 세트 동작의 종료 지점이 동일한 바 영상의 끊김 현상이 발생하지 않는다. 그리하여, 사용자는 영상을 보면서 운동에 대한 몰입감을 향상시킬 수 있다.
도 6의 원본 동영상(50)은 1 세트 동작으로 구성된 원본 동영상이다. 그러나, 이에 한정되지 않는다. 원본 동영상은 2 세트 동작 이상을 포함하는 동영상일 수도 있다. 일반적으로 반복 운동은 복수 회의 세트 동작을 포함할 수 있다. 그리하여, 원본 동영상은 기본 횟수의 세트 동작으로 구성될 수 있으며, 제3 프로세서(360)는 원본 동영상의 일부 구간의 역재생을 기초로 기본 횟수를 초과하는 세트 동작을 포함하는 운동 가이드 동영상을 생성할 수 있다.
도 10은 일 실시예에 따른 복수의 세트 동작을 포함하는 원본 동영상(60)을 도시한 도면이다. 도 10에 도시된 바와 같이, 원본 동영상(60)은 기본 횟수가 2회인 세트 동작을 포함할 수 있다. 예를 들어, 원본 동영상(60)의 세트 구간(S)은 동일한 타입의 세트 동작을 포함하는 제1 세트 구간(S1) 및 제2 세트 구간(S2)을 포함할 수 있다.
기본 횟수를 초과하는 세트 동작을 포함하는 운동 가이드 동영상을 생성하고자 하는 경우, 제3 프로세서(360)는 세트 구간(S) 중 일부 구간의 재생 및 역재생을 반복함으로써 세트 동작의 횟수를 증가시킬 수 있다.
도 11은 일 실시예에 따른 복수의 세트 구간 중 하나의 세트 구간을 이용하여 운동 가이드 동영상을 제공하는 방법을 설명하는 참조도면이다.
도 11에 도시된 바와 같이, 예를 들어, 제3 프로세서(360)는 세트 구간(S) 중 제1 세트 구간(S1)의 순방향 구간(F1)을 재생 및 역재생함으로써 첫번째 세트 구간(SE1)을 생성할 수 있다. 제3 프로세서(360)는 세트 구간(S) 중 제1 세트 구간(S1)의 순방향 구간(F1)을 재생 및 역재생하는 단계를 n-2회 수행함으로써 n-2회의 세트 구간을 생성할 수 있다.
그리고, 제3 프로세서(360)은 원본 동영상(60)의 제1 세트 구간(S1) 및 제2 세트 구간(S2)을 재생함으로써 n-1번째의 세트 구간(SEn-1) 및 n-번째의 세트 구간(SEN)을 생성할 수 있다.
도 11에서는 제1 세트 구간(S1)의 순방향 구간(F1)을 재생 및 역재생함으로써 세트 구간을 증가시켰으나, 이에 한정되지 않는다. 제1 세트 구간(S1)의 역방향 구간(B1)을 재생 및 역재생함으로써 세트 구간을 증가시킬 수 있다. 또는 제2 세트 구간(S2)의 순방향 구간(F2) 또는 역방향 구간(B2)의 재생 및 역재생을 이용하여 세트 동작의 횟수를 증가시킬 수 있다.
또는, 제3 프로세서(360)는 제1 세트 구간(S)의 일부 구간 및 제2 세트 구간(S)의 일부 구간을 재생 및 역재새함으로써 세트 동작을 증가시킬 수도 있다.
도 12는 일 실시예에 따른 복수의 세트 구간을 이용하여 운동 가이드 동영상(60b)을 제공하는 방법을 설명하는 참조도면이다. 제3 프로세서(360)는 제1 세트 구간(S1)의 일부 구간 및 제2 세트 구간(S2)의 일부 구간을 재생 및 역재생함으로써 세트 구간을 증가시킬 수 있다.
도 12에 도시된 바와 같이, 제3 프로세서(360)는 원본 동영상(60)의 제1 세트 구간(S1)의 순방향 구간(F1) 및 역방향 구간(B1)을 재생함으로써 첫번째 세트 구간(SE1)을 생성할 수 있다.
제3 프로세서(360)는 제2 세트 구간(S2)의 순방향 구간(F2)을 재생 및 역재생함으로써 두번째 세트 구간(SE2)을 생성하고, 프로세서(360)는 제1 세트 구간(S1)의 역방향 구간(B1)을 역재생 및 재생함으로써 세번째 세트 구간(SE3)을 생성할 수 있다. 프로세서는 제2 세트 구간(S2)의 순방향 구간(F2)을 재생 및 역재생과 제1 세트 구간(S1)의 역방향 구간(B1)을 역재생 및 재생을 반복 수행함으로서 네번째 세트 구간에서 n-1 번쩨 세트 구간을 생성할 수 있다.
제3 프로세서(360)는 제2 세트 구간(S2)의 순방향 구간(F2) 및 역방향 구간(B2)을 순차적으로 재생함으로써 n번째 세트 구간(SEn)을 생성할 수 있다.
기본 횟수의 세트 동작을 포함하는 원본 동영상(60)을 이용하여 운동 가이드 동영상(60a, 60b)을 생성하기 때문에 역재생 회수 또는 역재생 구간을 다변화시킬 수 있다.
원본 동영상은 한 종류의 세트 동작을 포함하고 있다. 그러나, 이에 한정되지 않는다. 원본 동영상은 복수 개의 서로 다른 타입 세트 동작을 포함할 수 있다. 예를 들어 원본 동영상은 우측 방향으로 반복 운동할 수 있는 제1 타입 세트 동작, 좌측 방향으로 반복 운동할 수 있는 제2 타입 세트 동작을 포함할 수 있다. 제3 프로세서(360)는 원본 동영상의 일부 구간에 대한 역재생을 이용하여 운동 가이드 영상을 제공할 수 있다.
도 13은 일 실시예에 따른 서로 다른 타입 세트 동작을 포함하는 원본 동영상(70)을 도시한 도면이다. 도 13를 참조하면, 원본 동영상(70)은 복수 개의 구간(R, S, E)으로 구분될 수 있다. 원본 동영상(70)은 준비 동작을 나타내는 준비 구간(R), 마무리 동작을 나타내는 마무리 구간(E), 반복 운동의 동작이 될 수 있는 세트 구간(S)으로 구분할 수 있다.
세트 구간(S)은 반복 운동의 타입이 변경되는 지점을 기준으로 복수 개의 세트 구간(AS, BS)으로 구분할 수 있다. 예를 들어, 세트 구간(S)은 반복 운동의 타입이 변경되는 지점(P13=P21)을 제1 타입 세트 구간(AS)과 제2 타입 세트 구간(BS)으로 구분될 수 있다, 예를 들어, 런지 운동은 우측 다리를 뒤로하는 우측 런지 운동 즉, 제1 타입 세트 구간(AS)과 좌측 다리를 뒤로하는 좌측 런지 운동 즉, 제2 타입 세트 구간(BS)으로 구분될 수 있다.
각 세트 구간(AS, BS)은 동작의 방향이 전환되는 지점을 기준으로 순방향 구간(AF, BF)과 역방향 구간(AB, BB)으로 구분될 수 있다. 예를 들어, 우측 런지 운동과 좌측 런지 운동 각각은 앉아지는 동작을 나타내는 순방향 구간과 일어나는 동작을 나타내는 역방향 구간)으로 구분될 수 있다.
예를 들어, 런지 운동의 세트 구간(S)은 세트 동작의 시작 지점(P1)에서 우측 무뤂이 90도가 되고 상체가 낮춰진 지점(P12)까지의 동작을 나타내는 제1 타입 세트 구간(AS)의 순방향 구간(AF), 우측 무뤂이 90도가 되고 상체가 낮춰진 지점(P12)에서 양 무뤂이 펴지고 상체가 올라간 지점(P13=P21)까지의 동작을 나타내는 제1 타입 세트 구간(AS)의 역방향 구간(AB), 양 무뤂이 펴지고 상체가 올라간 지점(P13=P21)에서 좌측 무뤂이 90도가 되고 상체가 낮춰진 지점(P22)까지의 동작을 나타내는 제2 타입 세트 구간(BS)의 순방향 구간(BF) 및 좌측 무뤂이 90도가 되고 상체가 낮춰진 지점(P22)에서 무뤂이 펴지고 상체가 올라간 지점(P23)까지의 동작을 나타내는 제2 타입 세트 구간(BS)의 역방향 구간(BB)으로 구분될 수 있다.
각 타입의 세트 구간의 순방향 구간이 재생되는 시간과 그에 대응하는 타입의 세트 구간의 역방향 구간이 재생되는 시간은 동일할 수 있으나, 예를 들어, 순방향 구간이 재생되는 시간과 역방향 구간)이 재생되는 시간은 10%의 오차 범위 이내일 수도 있다.
각 타입의 세트 구간의 시작 지점에서의 동영상내 포즈와 그에 대응하는 타입의 세트 구간의 종료 지점에서의 동영상내 포즈는 동일할 수 있다. 그러나, 이에 한정되지 않는다. 예를 들어, 각 타입의 세트 구간의 시작 지점에서의 포즈와 그에 대응하는 타입의 세트 구간의 종료 지점에서의 포즈는 10%의 오차 범위 이내일 수 있다.
제3 프로세서(360)는 도 13의 원본 동영상(70)을 이용하여 복수 회의 세트 동작을 포함하는 운동 가이드 동영상을 생성할 수 있다.
도 14는 일 실시예에 따른 반복 운동을 포함하는 운동 가이드 영상(70a)을 생성하는 방법을 설명하는 참조도면이다.
제3 사용자 인터페이스(320) 또는 외부 기기로부터 n회의 세트 동작이 요청되면, 제3 프로세서(360)는 원본 동영상(70) 중 일부 구간의 역재생을 기초로 n 세트 동작을 포함하는 운동 가이드 동영상(70a)을 생성할 수 있다.
도 14에 도시된 바와 같이, 제3 프로세서(360)는 원본 동영상(70) 중 준비 구간(R)을 재생할 수 있다.
제3 프로세서(360)는 제1 타입 세트 구간(AS)의 순방향 구간(AF), 제1 타입 세트 구간(AS)의 역방향 구간(AB) 및 제2 타입 세트 구간(AS)의 순방향 구간(AF)을 순차적으로 재생하고, 제2 타입 세트 구간(BS)의 순방향 구간(BF)을 역재생함으로서 첫번째 세트 구간(ASE1, BSE1)을 생성할 수 있다.
원본 동영상이 런지 운동을 포함하는 경우, 제3 프로세서(360)가 제1 타입 세트 구간(AS)의 순방향 구간(AF) 및 제1 타입 세트 구간(AS)의 역방향 구간(AB)을 재생하면 우측 런지 운동의 동영상을 생성할 수 있다. 그리고, 제3 프로세서(360)가 제2 타입 세트 구간(BS)의 순방향 구간(BF)을 재생한 후 제2 타입 세트 구간(BS)의 순방향 구간(BF)을 역재생하면, 제3 프로세서(360)는 좌측 런지 운동의 동영상을 생성할 수 있다. 즉, 제2 타입 세트 구간(BS)의 순방향 구간(BF)은 좌측 무릎이 굽혀지면서 상체가 아래로 내려가는 동영상인 바, 제2 타입 세트 구간(BS)의 순방향 구간(BF)을 역재생하면 좌측 무뤂이 펴지면서 상체가 위로 올라가는 동영상이 될 수 있기 때문이다.
제3 프로세서(360)는 제1 타입 세트 구간(AS)의 역방향 구간(AB)을 역재생하고, 제1 타입 세트 구간(AS)의 역방향 구간(AB) 및 제2 타입 세트 구간(BS)의 순방향 구간(BF)을 순차적으로 재생한 후 제2 타입 세트 구간(BS)의 순방향 구간(BF)을 역재생하면 두번째 세트 구간(ASE2, BSE2)을 생성할 수 있다.
제3 프로세서(360)가 제1 타입 세트 구간(AS)의 역방향 구간(AB)을 역재생하고, 제1 타입 세트 구간(AS)의 역방향 구간(AB) 및 제2 타입 세트 구간(BS)의 순방향 구간(BF)을 순차적으로 재생한 후 제2 타입 세트 구간(BS)의 순방향 구간(BF)을 역재생하는 단계를 n-2회 수행하면, 제3 프로세서(360)는 n-2회의 세트 구간을 생성할 수 있다.
그리고, 제3 프로세서(360)는 제1 타입 세트 구간(AS)의 역방향 구간(AB)을 역재생하고, 제1 타입 세트 구간(AS)의 역방향 구간(AB), 제2 타입 세트 구간(BS)의 순방향 구간(BF) 및 제2 타입 세트 구간(BS)의 역방향 구간(BB)을 순차적으로 재생함으로써 n번째 세트 구간(ASEn, BSEn)을 생성할 수있다. 마지막으로, 제3 프로세서(360)는 마무리 구간(E)을 재생함으로써 운동 가이드 동영상(70a)의 생성을 완성할 수 있다.
도 14에는 제1 타입 세트 구간(AS)과 제2 타입 세트 구간(BS)을 교번적으로 재생하는 방법을 설명하였으나 이에 한정되지 않는다. 제3 프로세서(360)는 제1 타입 세트 구간(AS)을 이용하여 n회의 제1 타입 세트 구간을 생성하고, 제2 타입 세트 구간(BS)을 이용하여 n회의 제2 타입 세트 구간을 생성할 수 있다.
도 15는 다른 실시예에 따른 반복 운동을 포함하는 운동 가이드 영상(70b)을 생성하는 방법을 설명하는 참조도면이다.
제3 사용자 인터페이스(310) 또는 외부 기기로부터 n회의 세트 동작이 요청되면, 제3 프로세서(360)는 원본 동영상(70) 중 일부 구간의 역재생을 기초로 n 세트 동작을 포함하는 운동 가이드 동영상(70b)을 재생할 수 있다.
도 15에 도시된 바와 같이, 제3 프로세서(360)는 원본 동영상(70) 중 준비 구간(R)을 재생할 수 있다.
제3 프로세서(360)는 제1 타입 세트 구간(AS)의 순방향 구간(AF)을 재생한 후 제1 타입 세트 구간(AS)의 순방향 구간(AF)을 역재생하는 단계를 n-1회 수행함으로써 n-1회의 제1 타입 세트 구간(AS1,쪋)을 생성할 수 있다. 그리고, 제1 타입 세트 구간(AS)의 순방향 구간(AF) 및 제1 타입 세트 구간(AS)의 역방향 구간(AB)을 순차적으로 재생함으로써 n회째의 제1 타입 세트 구간(ASn)을 생성할 수 있다.
그리고, 제3 프로세서(360)는 제2 타입 세트 구간(BS)의 순방향 구간(BF)을 재생한 후 제2 타입 세트 구간(BS)의 순방향 구간(BF)을 역재생하는 단계를 n-1회 수행함으로써 n-1회의 제2 타입 세트 구간(BS1,쪋)을 생성할 수 있다. 그리고, 제3 프로세서(360)는 제2 타입 세트 구간(BS)의 순방향 구간(BF) 및 제2 타입 세트 구간(BS)의 역방향 구간(BB)을 순차적으로 재생함으로써 n회째의 제2 타입 세트 구간(BSn)을 생성할 수 있다.
마지막으로 제3 프로세서(360)는 마무리 구간(E)을 재생함으로써 운동 가이드 동영상(70b)의 생성을 완료할 수 있다.
도 15에서는 각 타입 세트 구간을 n번 반복 생성함으로써 있어서, 도 7의 역재생을 기초한다고 하였으나, 이에 한정되지 않는다. 타입 세트 구간의 역재생은 도 8의 역재생이 적용될 수 있다. 또는 도 7의 역재생과 도 8의 역재생이 조합되어 적용될 수도 있다.
도 14 및 도 15에서는 서로 다른 두 개 타입의 세트 동작을 포함하는 원본 동영상을 이용하여 운동 가이드 동영상을 제공하는 방법을 설명하였으나, 이에 한정되지 않는다. 3개 이상의 서로 다른 타입의 세트 동작을 포함하는 원본 동영상을 이용하여서 운동 가이드 동영상을 제공할 수 있음도 물론이다. 또한 1 세트의 서로 다른 타입의 반복 운동을 포함하는 원본 동영상 뿐만 아니라 2 이상의 기본 세트의 서로 다른 타입의 반복 운동을 포함하는 원본 동영상을 이용하여서도 운동 가이드 동영상을 생성할 수도 있다.
생성된 운동 가이드 동영상은 미러 디스플레이(30)에서 제공될 수도 있고, 다른 장치에서 제공될 수도 있다.
일 실시예에 따른 운동 가이드 동영상은 사용자의 동작에 대응하여 조절되거나 종료될 수 있다.
도 16은 일 실시예에 따른 사용자의 동작에 기초하여 운동 가이드 동영상을 제공하는 방법을 설명하는 흐름도이다. 도 16을 참조하면, 제3 프로세서(360)는 운동 가이드 동영상을 디스플레이(340)에 표시할 수 있다(S610). 제3 프로세서(360)는 사용자가 미러 디스플레이(30)로부터 일정 거리내에 진입하면, 미러 디스플레이(30)는 대기 모드에서 동작 모드로 변경할 수 있다. 그리고, 미러 디스플레이(30)는 사용자가 휴대하는 사용자 단말(40) 등에 재생할 운동 종목을 요청할 수 있다. 사용자 단말(40)은 기저장된 운동 종목과 상기한 운동 종목의 세트 동작에 대한 횟수를 미러 디스플레이(30)에 전송함으로써 해당 운동 종목에 대한 운동 가이드 동영상의 재생을 요청할 수 있다.
또는, 사용자는 미러 디스플레이(30)의 제3 사용자 인터페이스(330)를 통해 운동 종목 및 세트 동작에 대한 횟수를 입력함으로써 운동 가이드 동영상의 표시 명령을 입력할 수 있다.
제3 프로세서(360)는 앞서 기술한 바와 같이 원본 동영상 중 일부 구간의 역재생을 기초로 복수 개의 세트 동작을 포함하는 운동 가이드 동영상을 생성하고, 생성된 운동 가이드 동영상을 디스플레이(340)에 표시할 수 있다. 그러나, 이에 한정되지 않는다. 제2 메모리(320)에는 사용자별 또는 세트별 운동 가이드 동영상이 기저장되어 있을 수 있다. 제3 프로세서(360)는 재생 요청 명령에 따라 기저장된 사용자 또는 세트에 대응하는 운동 가이드 동영상을 독출하여 디스플레이(340)에 표시할 수 있다.
제3 프로세서(360)는 사용자의 자세를 인식할 수 있다(S620). 모션 감지 센서(370)는 사용자의 동작을 감지하여 그 결과를 제3 프로세서(360)에 전달한다. 모션 감지 센서(370)는 사용자의 움직임을 획득하기 위한 장비로서, 비전 카메라, 비전 센서, 가속도 센서, 자이로 센서, 지자기 센서, 적외선 세서 등일 수 있다. 제3 프로세서(360)는 모션 감지 센서(370)로부터 수신된 동작 데이터를 이용하여 사용자의 자세를 인식할 수 있다.
예를 들어, 동작 데이터가 사용자를 포함하는 이미지 데이터인 경우, 제3 프로세서(360)는 사용자를 포함하는 이미지 데이터에서 자세를 인식하기 위한 특징점들을 추출할 수 있다. 상기한 특징점은 사람 신체를 나타내는 영역일 수 있다. 예를 들어, 특징점은 어깨, 어깨 관절, 상측팔, 팔굽 관절, 하측팔, 손목관절, 손, 몸통, 고관절, 상부다리, 무릅관절, 하부다리, 발목관절, 발 등일 수 있다. 제3 프로세서(360)는 특징점, 각 특징점의 연결 각도(입체적 각도), 각 특징점의 거리(입체적 거리) 등을 분석하여 사용자의 자세를 인식할 수 있다.
예를 들어, 제3 프로세서(360)는 동작 데이터에 딥러닝 학습 방식, FPD(Fast Human Pose Estimation) 학습방식 등을 이용하여 2차원 자세를 인식할 수 있다. 또는 제3 프로세서(360)는 3D Body Model을 가지고 하는 Model-based 방식 또는 3D 모델 없이 추정하는 Modelfree 방식등을 이용하여 3차원의 자세를 인식할 수도 있다. 그러나, 이에 한정되지 않는다. 공지된 다양한 방식으로 인체 자세 인식 기술이 적용될 수 있음은 물론이다.
제3 프로세서(360)는, 사용자가 자세를 인식하는 방식과 유사한 방식으로, 운동 가이드 동영상에 포함된 타겟(예를 들어, 트레이너)의 자세(이하, '기준 자세'라고 한다)를 인식할 수 있다. 그러나, 이에 한정되지 않는다. 제3 프로세서(360)는 원본 동영상으로부터 기준 자세를 추정하여 동작 모델링을 생성하고, 원본 동영상과 동작 모델링을 함께 기저장할 수 있다. 그리고, 원본 동영상에 기초하여 운동 가이드 동영상을 표시할 때, 제3 프로세서(360)는 표시된 운동 가이드 동영상과 매칭된 동작 모델링도 함께 변형시키면서 기준 자세를 추출할 수 있다. 동작 모델링은 제3 프로세서(360)가 수행할 수도 있지만, 서버 등 외부 기기가 수행할 수도 있다.
또는, 모션 감지 센서(370)가 디스플레이(340)의 화면에 표시되는 사용자의 자세와 타겟의 자세를 촬영하는 비젼 카메라인 경우, 제3 프로세서(360)는 감지된 이미지 데이터에서 사용자의 자세와 기준 자세를 추출하는 방식으로 사용자의 자세 및 기준 자세를 인식할 수 있다.
제3 프로세서(360)는 사용자의 자세와 운동 가이드 동영상에 포함된 사용자의 자세에 대응하는 기준 자세를 비교할 수 있다(S630). 제3 프로세서(360)는 특정 시점, 예를 들어, 현재의 사용자의 자세와 운동 가이드 동영상에 포함되면서 사용자의 자세에 대응하는 기준 자세에 대한 유사도를 산출할 수 있다.
한편, 특정 시점에 인식된 사용자의 자세와 디스플레이(340)에 표시된 기준 자세가 다를 수 있다. 예를 들어, 사용자의 운동 속도가 운동 가이드 동영상의 재생 속도보다 늦은 경우, 사용자의 자세는 디스플레이(340)에 표시되는 기준 자세보다 뒤쳐질 수 있다. 즉 운동 가이드 동영상에 포함된 사용자의 자세에 대응하는 기준 자세는 기표시되었다. 제3 프로세서(360)는 인식된 사용자의 자세를 사용자의 자세에 대응하는 기표시된 기준 자세와 비교할 수 있다.
또는, 사용자의 운동 속도가 운동 가이드 동영상의 재생 속도보다 빠른 경우, 사용자의 자세는 디스플레이(340)에 표시되는 기준 자세보다 앞설 수 있다. 즉 운동 가이드 동영상에 포함된 사용자의 자세에 대응하는 기준 자세는 아직 표시되지 않을 수 있다. 제3 프로세서(360)는 사용자의 자세에 대응하는 기준 자세가 디스플레이(340)에 표시될 때, 비로소, 인식된 사용자의 자세와 사용자의 자세에 대응하는 기준 자세를 비교할 수 있다.
유사도가 높을수록 사용자의 자세과 기준 자세간의 일치율이 높다는 것을 의미한다. 제3 프로세서(360)는 특징점들의 각도 또는 거리 기반의 유사도를 사용할 수 있다. 제3 프로세서(360)는 특징점들의 각도 또는 특징점들간의 거리별 유사도를 산출하고, 각 유사도에 가중치를 부여한 후 합산하는 방식으로 정량적으로 유사도를 산출할 수 있다. 특징점 모두에 대한 유사도를 산출할 수도 있지만, 기준 자세에서 중요한 일부 특징점에 대한 유사도를 산출할 수도 있다. 유사도 산출 방식은 공지된 다양한 방식이 적용되는 바 구체적인 설명은 생략한다.
사용자의 자세와 기준 자세간의 유사도가 기준값 이상이면(S640-Yes), 제3 프로세서(360)는 사용자의 운동 속도에 대응하여 운동 가이드 동영상을 디스플레이(340)에 표시할 수 있다(S650).
운동 가이드 동영상의 재생 속도는 원본 동영상에 기초하여 결정될 수 있다. 또는, 사용자의 명령 등에 따라 운동 가이드 동영상의 재생 속도가 조절될 수 있다. 그러나, 상기한 재생 속도는 사용자의 운동 속도와 상관없이 고정되어 있기 때문에 운동 가이드 동영상의 재생 속도와 사용자의 운동 속도가 다를 수 있다.
사용자가 노약자이거나 컨디션이 좋지 않는 경우 또는 사용자가 초보 운동자인 경우, 사용자의 운동 속도는 운동 가이드 동영상의 재생 속도보다 느릴 수 있다. 사용자가 운동 가이드 동영상의 재생 속도에 맞춰 운동하게 되면 다치거나 올바른 자세로 운동하지 못할 수 있다. 또는, 사용자는 세트 동작의 횟수가 증가할수록 운동 속도가 느려지는 반면, 운동 가이드 동영상의 재생 속도는 일정한 바, 사용자는 다치거나 정확한 자세로 운동하지 못할 수 있다.
일 실시예에 따른 제3 프로세서(360)는 사용자의 운동 속도에 대응하여 운동 가이드 동영상의 재생 속도를 조절할 수 있다.
사용자의 자세가 사용자의 자세에 대응하는 기준 자세보다 기준 구간 앞선다고 판단되면, 제3 프로세서(360)는 사용자의 운동 속도가 운동 가이드 동영상의 재생 속도보다 빠르다고 결정할 수 있다. 여기서, 기준 구간은 세트 동작 중 서브 세트 동작 또는 세트 동작에 대응하는 시간 구간일 수 있다. 예를 들어, 스쿼트 운동의 경우, 순방향 구간 및 역방향 구간 각각이 서브 세트 동작에 대응하는 시간 구간이고, 순방향 구간과 역방향 구간의 합이 세트 동작에 대응하는 시간 구간일 수 있다. 기준 구간은 운동 종목에 따라 다르게 사용자 또는 관리자 등에 의해 기설정될 수 있다.
제3 프로세서(360)은 이전에 인식된 사용자의 자세를 기초로 현재 인식된 사용자의 자세를 특정할 수 있다. 예를 들어, 제3 프로세서(360)는 이전에 인식된 사용자의 자세를 기초로 현재 이식된 사용자의 자세가 스쿼트 운동의 순방향 구간의 자세인지 역방향 구간의 자세인지 결정할 수 있다. 마찬가지로, 제3 프로세서(360)은 현재의 기준 자세를 이전의 기준 자세를 기초로 결정할 수 있다.
제3 프로세서(360)는 표시되는 기준 자세가 인식된 사용자의 자세에 대응되도록 운동 가이드 동영상의 재생 속도를 증가시킬 수 있다. 재생 속도는 사용자의 운동 속도에 비례하여 조절될 수도 있고, 단계적 크기 변경으로 조절될 수도 있다. 예를 들어, 제3 프로세서(360)는 표시되는 기준 자세가 사용자의 자세가 대응되도록, 즉, 특정 시점에 표시되는 기준 자세와 사용자의 자세가 일치하도록 운동 가이드 동영상의 재생 속도를 1.1배, 1.2배, 1.5배, 2배 중 어느 하나로 조절할 수 있다.
사용자의 자세가 표시되는 기준 자세보다 기준 구간 뒤쳐졌다고 판단되면, 제3 프로세서(360)는 사용자의 운동 속도가 운동 가이드 동영상이 재생 속도보다 느리다고 결정할 수 있다. 그리하여, 제3 프로세서(360)는 표시되는 기준 자세가 인식된 사용자의 자세에 대응되도록, 즉, 특정 시점에 표시되는 기준 자세와 사용자의 자세가 일치하도록, 운동 가이드 동영상의 재생 속도를 감소시킬 수 있다. 재생 속도는 사용자의 동작 속도에 비례하여 조절될 수도 있고, 단계적 크기 변경으로 조절될 수도 있다. 예를 들어, 제3 프로세서(360)는 기준 자세가 사용자의 자세에 대응되도록 운동 가이드 동영상의 재생 속도를 0.9배, 0.8배, 0.5배 중 어느 하나로 조절할 수 있다.
사용자의 자세가 기준 자세보다 기준 구간 뒤쳐졌다고 판단되면, 제3 프로세서(360)는 표시되는 기준 자세가 사용자의 자세에 대응될 때까지 운동 가이드 동영상의 재생을 일시 정지할 수 있다. 그리고, 사용자의 자세와 운동 가이드 동영상에 표시된 기준 자세가 일치하면, 제3 프로세서(360)는 다시 운동 가이드 동영상을 재생할 수 있다.
제3 프로세서(360)는 인식된 사용자의 자세 및 기준 자세를 기초로 사용자의 운동 속도와 재생 속도간의 관계를 결정한다고 하였으나 이에 한정되지 않는다. 제3 프로세서(360)는 특정한 사용자의 동작이 수행되는 시간과 상기한 특정한 사용자의 동작에 대응하는 기준 동작이 표시되는 재생 시간을 기초로 사용자의 운동 속도와 재생 속도간의 관계를 결정할 수 있다.
예를 들어, 제3 프로세서(360)는 인식된 사용자의 자세들로부터 사용자의 움직임 즉, 사용자의 동작을 프로파일링하고, 프로파일링된 사용자의 동작을 서브 세트 단위로 구분할 수 있다. 그리고, 제3 프로세서는 사용자가 서브 세트를 수행하는데 소요되는 시간과 운동 가이드 동영상의 서브 세트 구간을 재생하는데 소요되는 재생 시간과 비교할 수 있다.
제3 프로세서는 동작 시간과 재생 시간간의 차가 기준 시간이내이면 사용자의 운동 속도와 재생 속도는 동일하다고 결정할 수 있다. 제3 프로세서는 동작 시간이 재생 시간보다 기준 시간 이상 긴 경우, 사용자의 운동 속도가 재생 속도보다 느리다고 결정할 수 있다. 또는, 제3 프로세서는 동작 시간이 재생 시간보다 기준 시간 이상 짧은 경우, 사용자의 운동 속도가 재생 속도보다 빠르다고 결정할 수 있다. 여기서 기준 시간은 서브 세트 구간에 대응하는 시간일 수 있으며, 운동 종목에 따라 다르게 사용자 또는 관리자 등에 의해 설정될 수 있다. 이밖에도 사용자의 운동 속도를 산출하는 방법은 종래의 운동 속도 산출 방법이 적용될 수 있다.
일정 시간 동안 사용자의 자세와 사용자의 자세에 대응하는 기준 자세의 유사도가 기준값 미만이면, 제3 프로세서(360)는 운동 가이드 동영상의 표시를 종료할 수 있다. 상기한 일정 시간은 1회 세트 동작에 대응하는 시간일 수 있다. 그러나, 이에 한정되지 않는다. 일정 시간은 2회 또는 3회의 세트 동작에 대응하는 시간일 수 있다.
일정 시간 동안 모션 감지 센서(370)로부터 사용자의 동작에 대한 결과를 수신받지 못하는 경우, 제3 프로세서(360)는 운동 가이드 동영상의 표시를 종료할 수 있다. 모션 감지 센서(370)로부터 사용자의 동작에 대한 결과를 수신받지 않으면, 제3 프로세서(360)는 사용자의 자세와 기준 자세간의 유사도는 'O'으로 결정할 수 있다. 모션 감지 센서(370)가 사용자의 동작을 검출하는 못하는 경우, 사용자가 운동하는 장소를 이탈한 것을 의미할 수 있다.
기준 자세가 아닌 사용자의 자세가 일정 시간 동안 지속되면, 제3 프로세서(360)는 운동 가이드 동영상의 표시를 종료함으로서, 불필요한 운동 가이드 동영상의 재생을 방지할 수 있다. 그리하여, 운동 기기 또는 미러 디스플레이(30)의 전력 낭비를 방지할 수 있다.
제3 프로세서(360)는 운동 가이드 동영상을 제공하면서 운동 가이드 동영상의 재생 속도와 관련된 정보, 사용자의 자세와 기준 자세간의 유사도에 대한 정보를 함께 제공할 수 있다. 상기한 정보는 캐릭터, 그래프, 텍스트 및 음향 중 적어도 하나로 제공될 수 있다.
도 17 내지 도 19는 일 실시예에 따른 운동 가이드 동영상을 제공하는 방법을 설명하는 참조도면이다.
도 17에 도시된 바와 같이, 제3 프로세서(360)는 운동 가이드 동영상(710)을 디스플레이(340)에 표시할 수 있다. 사용자는 운동 가이드 동영상에 표시된 기준 자세를 보면서 운동을 수행할 수 있다. 제3 프로세서(360)는 사용자의 자세와 사용자의 자세에 대응하는 기준 자세를 비교하고, 사용자의 자세와 기준 자세간의 유사도를 산출한 후 그 결과(720)를 디스플레이(340)에 표시할 수 있다. 사용자는 유사도로 자신의 자세에 대한 정확도를 확인할 수 있다.
또한, 사용자의 자세가 그에 대응하는 기준 자세보다 기준 구간 앞섰다고 판단되면, 제3 프로세서(360)는 사용자의 운동 속도가 운동 가이드 동영상이 재생 속도보다 빠르다고 결정할 수 있다. 제3 프로세서(360)는 표시되는 기준 자세가 사용자의 자세에 대응하도록 운동 가이드 동영상의 재생 속도를 증가시킬 수 있다.
그리고, 도 17에 도시된 바와 같이, 제3 프로세서(360)는 운동 가이드 동영상의 재생 속도가 증가하였음을 알리는 제1 인디케이터(730)를 디스플레이(340)에 표시할 수 있다. 뿐만 아니라, 제3 프로세서(360)는 사용자가 운동 속도를 늦출 것을 안내하는 제2 인디케이터(740)를 디스플레이(340)에 표시할 수 있다.
또는, 사용자의 자세가 기준 자세보다 기준 구간 뒤쳐졌다고 판단되면, 제3 프로세서(360)는 사용자의 운동 속도가 운동 가이드 동영상의 재생 속도보다 느리다고 결정할 수 있다. 그리고, 제3 프로세서(360)는 표시되는 기준 자세가 사용자의 자세에 대응되도록 운동 가이드 동영상의 재생 속도를 감소시킬 수 있다.
그리고, 도 18에 도시된 바와 같이, 제3 프로세서(360)는 운동 가이드 동영상의 재생 속도가 감소하였음을 알리는 제3 인디케이터(830)를 디스플레이(340)에 표시할 수 있다. 뿐만 아니라, 제3 프로세서(360)는 사용자가 운동 속도를 높일 것을 안내하는 제4 인디케이터(840)를 디스플레이(340)에 표시할 수 있다.
또는, 도 19에 도시된 바와 같이, 사용자의 자세가 그에 대응하는 기준 자세보다 기준 구간 뒤쳐졌다고 판단되면, 제3 프로세서(360)는 표시되는 기준 자세가 사용자의 자세에 대응할 때까지 운동 가이드 동영상의 재생을 일시 정지할 수 있다. 그리고, 도 19에 도시된 바와 같이, 제3 프로세서(360)는 운동 가이드 동영상의 재생이 일시 정지되었음을 알리는 제5 인디케이터(930)를 디스플레이(340)에 표시할 수 있다. 사용자의 자세가 디스플레이(340)에 표시된 기준 자세에 도달하면, 제3 프로세서(360)는 운동 가이드 동영상의 재생을 다시 시작할 수 있다.
사용자의 자세가 대응하는 기준 자세보다 기준 구간만큼 뒤쳐진 것으로 판단되는 순간, 제3 프로세서(360)는 운동 가이드 동영상의 재생을 일시 정지할 수 있다. 그러나, 이에 한정되지 않는다. 사용자의 자세가 기준 자세보다 기준 구간만큼 뒤쳐진 것으로 판단되면, 제3 프로세서(360)는 운동 가이드 동영상 중 서브 세트 동작 종료 지점 또는 세트 동작 종료 지점에서 운동 가이드 동영상의 재생을 일시 정지할 수 있다.
제3 프로세서(360)는 사용자의 운동 속도를 저장하고, 다음 운동 가이드 동영상의 재생시 참고할 수 있다. 예를 들어, 사용자는 운동할때마다 재생 속도보다 빠르게 운동하는 경우, 제3 프로세서(360)는 운동 가이드 동영상의 재생 속도를 기설정된 재생 속도보다 증가시킬 수 있다.
제3 프로세서(360)는 사용자의 자세와 그에 대응하는 기준 자세간의 유사도를 나타내는 인디케이터를 제공할 수 있다고 하였으나, 이에 한정되지 않는다. 제3 프로세서(360)는 사용자의 운동에 따른 효과에 대한 정보도 제공할 수 있다. 제3 프로세서(360)는 사용자를 지칭하는 캐릭터, 예를 들어, 아바타의 체형으로 운동 효과를 표시할 수 있다.
도 20 및 도 21은 일 실시예에 따른 운동 효과를 제공하는 방법을 설명하는 참조도면이다. 도 20에 도시된 바와 같이, 제3 프로세서(360)는 운동 가이드 동영상을 재생하기 전 사용자를 지칭하는 캐릭터(1010)를 표시할 수 있다.
그리고, 제3 프로세서(360)는 운동 가이드 동영상을 표시하는 동안, 사용자의 자세와 사용자의 자세에 대응하는 기준 자세를 비교하고, 사용자의 자세와 기준 자세의 유사도를 산출한다. 제3 프로세서(360)는 산출된 유사도의 결과에 기초하여 캐릭터의 체형을 변경시키고, 체형이 변경된 캐릭터(1010)를 디스플레이(340)에 표시할 수 있다. 예를 들어, 스쿼트 운동은 하체 근육을 강화시키고 지방을 감소시키는 효과가 있는 바, 도 21에 도시된 바와 같이, 제3 프로세서(360)는 하체 근육이 강화되고 지방이 감소된 캐릭터(1010)를 디스플레이(340)에 표시할 수 있다.
지금까지 미러 디스플레이(30)가 운동 가이드 동영상을 생성한다고 하였으나, 이에 한정되지 않는다. 운동 가이드 동영상은 운동 기기가 생성할 수도 있고, 운동 기기 또는 미러 디스플레이(30)와 통신 가능한 서버가 생성하고, 운동 기기 또는 미러 디스플레이(30)가 생성된 운동 가이드 동영상을 표시할 수도 있다. 뿐만 아니라, 운동 가이드 동영상은 디스플레이를 포함하는 일반적인 전자 장치, 예를 들어, 스마트폰, PC, 태블릿 PC, 노트북, 스마트 TV, 휴대폰, PDA(personal digital assistant), 랩톱, 미디어 플레이어, 디지털방송용 단말기, 네비게이션, 웨어러블 장치 및 기타 모바일, 비모바일 컴퓨팅 장치 등에서도 생성 가능하고, 디스플레이 장치와 통신 가능한 전자 장치에서 생성할 수도 있다.
본 개시의 일 실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 매체에 기록되는 프로그램 명령은 본 개시를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.
본 개시의 일부 실시예는 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체 및 통신 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. 통신 매체는 전형적으로 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호의 기타 데이터, 또는 기타 전송 메커니즘을 포함하며, 임의의 정보 전달 매체를 포함한다.　 또한, 본 개시의 일부 실시예는 컴퓨터에 의해 실행되는 컴퓨터 프로그램과 같은 컴퓨터에 의해 실행가능한 명령어를 포함하는 컴퓨터 프로그램 또는 컴퓨터 프로그램 제품 (computer program product)으로도 구현될 수 있다.
기기로 읽을 수 있는 저장매체는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, ‘비일시적 저장매체'는 실재(tangible)하는 장치이고, 신호(signal)(예: 전자기파)를 포함하지 않는다는 것을 의미할 뿐이며, 이 용어는 데이터가 저장매체에 반영구적으로 저장되는 경우와 임시적으로 저장되는 경우를 구분하지 않는다. 예로, '비일시적 저장매체'는 데이터가 임시적으로 저장되는 버퍼를 포함할 수 있다.
일 실시예에 따르면, 본 문서에 개시된 다양한 실시예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로 배포되거나, 또는 어플리케이션 스토어를 통해 또는 두개의 사용자 장치들(예: 스마트폰들) 간에 직접, 온라인으로 배포(예: 다운로드 또는 업로드)될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품(예: 다운로더블 앱(downloadable app))의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 기기로 읽을 수 있는 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
이제까지 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims (15)

  1. 운동 가이드 동영상을 제공하는 방법에 있어서,
    반복 동작이 포함된 운동 가이드 동영상을 표시하는 단계;
    상기 운동 가이드 동영상이 표시되는 동안 사용자의 자세를 인식하는 단계;
    상기 사용자의 자세와 상기 운동 가이드 동영상에 포함된 상기 사용자의 자세에 대응하는 기준 자세를 비교하는 단계; 및
    일정 시간 동안 상기 사용자의 자세와 상기 기준 자세간의 유사도가 기준값 미만이면, 상기 운동 가이드 동영상의 표시를 종료하는 단계;를 포함하는 운동 가이드 동영상 제공 방법.
  2. 제 1항에 있어서,
    상기 일정 시간은,
    상기 운동 가이드 동영상에 포함된 1회의 세트 동작에 대응하는 시간 이상인 운동 가이드 동영상 제공 방법.
  3. 제 1항에 있어서,
    상기 사용자의 자세와 상기 기준 자세간의 유사도가 상기 기준값 이상이면, 상기 사용자의 운동 속도에 대응하여 상기 운동 가이드 동영상을 표시하는 단계;를 더 포함하는 운동 가이드 동영상 제공 방법.
  4. 제 3항에 있어서,
    상기 운동 가이드 동영상을 표시하는 단계는,
    상기 사용자의 자세가 상기 운동 가이드 동영상 중 표시되는 기준 자세보다 기준 구간 앞선다고 판단되면, 상기 표시되는 기준 자세가 상기 사용자의 자세에 대응되도록 상기 운동 가이드 동영상의 재생 속도를 증가시키는 단계;를 포함하는 운동 가이드 동영상 제공 방법.
  5. 제 3항에 있어서,
    상기 운동 가이드 동영상을 표시하는 단계는,
    상기 사용자의 자세가 상기 운동 가이드 동영상 중 표시되는 기준 자세보다 기준 구간 뒤쳐졌다고 판단되면, 상기 표시되는 기준 자세가 상기 사용자의 자세에 대응되도록 상기 운동 가이드 동영상의 재생 속도를 감소시키는 단계;를 포함하는 운동 가이드 동영상 제공 방법.
  6. 제 3항에 있어서,
    상기 운동 가이드 동영상을 표시하는 단계는,
    상기 사용자의 자세가 상기 운동 가이드 동영상 중 표시되는 기준 자세보다 기준 구간 뒤쳐졌다고 판단되면, 상기 표시되는 기준 자세가 상기 사용자의 자세에 대응될때까지 상기 운동 가이드 동영상의 재생을 일시 정지하는 단계;를 포함하는 운동 가이드 동영상 제공 방법.
  7. 제 3항에 있어서,
    상기 기준 구간은
    상기 운동 가이드 동영상 중 서브 세트 동작에 대응하는 구간이상인 운동 가이드 동영상 제공 방법.
  8. 제 1항에 있어서,
    상기 일정 시간 이상 동안 상기 사용자의 자세와 상기 기준 자세간의 유사도가 상기 기준값 이상이면, 상기 사용자를 나타내는 캐릭터의 체형을 상기 유사도에 대응하여 변경시키는 단계; 및
    변경된 상기 캐릭터의 체형을 표시하는 단계;를 더 포함하는 운동 가이드 동영상 제공 방법.
  9. 제 1항에 있어서,
    1회의 세트 동작을 포함하는 원본 동영상 중 일부 구간의 역재생에 기초하여 2회 이상의 세트 동작을 포함하는 상기 운동 가이드 동영상을 생성하는 단계;를 더 포함하는 운동 가이드 동영상 제공 방법.
  10. 제 1항 내지 제 9항 중 어느 한 항의 방법을 컴퓨터에서 수행하기 위한 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록매체.
  11. 반복 동작이 포함된 운동 가이드 동영상을 표시하는 디스플레이;
    사용자의 자세를 인식하는 모션 감지 센서; 및
    상기 사용자의 자세와 상기 운동 가이드 동영상에 포함되면서 상기 사용자의 자세에 대응하는 기준 자세를 비교하고, 일정 시간 동안 상기 사용자의 자세와 상기 기준 자세간의 유사도가 기준값 미만이면, 상기 운동 가이드 동영상의 표시를 종료하는 프로세서;를 포함하는 전자 장치.
  12. 제 11항에 있어서,
    상기 디스플레이상에 배치되며, 상기 운동 가이드 동영상에 대응하는 광을 투과시키면서 상기 사용자의 자세에 대응하는 광을 반사시키는 필름;을 더 포함하는 전자 장치.
  13. 제 11항에 있어서,
    상기 일정 시간은,
    상기 운동 가이드 동영상에 포함된 1회의 세트 동작에 대응하는 시간 이상인 전자 장치.
  14. 제 11항에 있어서,
    상기 프로세서는,
    상기 사용자의 자세와 상기 기준 자세간의 유사도가 상기 기준값 이상이면, 상기 사용자의 운동 속도에 대응하여 상기 운동 가이드 동영상을 표시하는 전자 장치.
  15. 제 14항에 있어서,
    상기 프로세서는,
    상기 사용자의 자세가 상기 운동 가이드 동영상 중 표시되는 기준 자세보다 기준 구간 앞선다고 판단되면, 상기 표시되는 기준 자세가 상기 사용자의 자세에 대응되도록 상기 운동 가이드 동영상의 재생 속도를 증가시키는 전자 장치.
PCT/KR2022/018236 2021-12-28 2022-11-17 운동 가이드 동영상 제공 방법 및 그 장치 WO2023128274A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202280080006.7A CN118354824A (zh) 2021-12-28 2022-11-17 运动指南视频提供方法及其装置

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR10-2021-0190372 2021-12-28
KR20210190372 2021-12-28
KR1020220057272A KR20230100558A (ko) 2021-12-28 2022-05-10 운동 가이드 동영상 제공 방법 및 그 장치
KR10-2022-0057272 2022-05-10

Publications (1)

Publication Number Publication Date
WO2023128274A1 true WO2023128274A1 (ko) 2023-07-06

Family

ID=86999437

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2022/018236 WO2023128274A1 (ko) 2021-12-28 2022-11-17 운동 가이드 동영상 제공 방법 및 그 장치

Country Status (1)

Country Link
WO (1) WO2023128274A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140015679A (ko) * 2012-07-06 2014-02-07 (주)에스엔 감성복합센서를 이용한 3ｄ 헬스 아바타 서비스 시스템
KR101751458B1 (ko) * 2016-06-08 2017-06-29 (주)나라소프트 동영상 연동 스포츠 시뮬레이션 장치
KR102049096B1 (ko) * 2019-03-27 2019-11-26 주식회사 마이베네핏 혼합 현실 기반의 운동 시스템
US20200402638A1 (en) * 2019-06-20 2020-12-24 Codevision Inc. Exercise assistant device and exercise assistant method
KR102262725B1 (ko) * 2019-05-20 2021-06-10 엘지전자 주식회사 개인 운동관리 시스템 및 이의 제어방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140015679A (ko) * 2012-07-06 2014-02-07 (주)에스엔 감성복합센서를 이용한 3ｄ 헬스 아바타 서비스 시스템
KR101751458B1 (ko) * 2016-06-08 2017-06-29 (주)나라소프트 동영상 연동 스포츠 시뮬레이션 장치
KR102049096B1 (ko) * 2019-03-27 2019-11-26 주식회사 마이베네핏 혼합 현실 기반의 운동 시스템
KR102262725B1 (ko) * 2019-05-20 2021-06-10 엘지전자 주식회사 개인 운동관리 시스템 및 이의 제어방법
US20200402638A1 (en) * 2019-06-20 2020-12-24 Codevision Inc. Exercise assistant device and exercise assistant method

Similar Documents

Publication Publication Date Title
WO2021215690A1 (ko) 운동강의 제공 시스템 및 이를 이용한 운동강의 제공 방법
WO2018194273A1 (en) Image display apparatus and method
WO2018084577A1 (en) Data recognition model construction apparatus and method for constructing data recognition model thereof, and data recognition apparatus and method for recognizing data thereof
EP3937154A1 (en) Method for video interaction and electronic device
WO2013157848A1 (en) Method of displaying multimedia exercise content based on exercise amount and multimedia apparatus applying the same
WO2016028042A1 (en) Method of providing visual sound image and electronic device implementing the same
EP3529686A1 (en) Method and apparatus for providing guidance in a virtual environment
WO2020133765A1 (zh) 健身管理方法、装置及计算机可读存储介质
WO2016089047A1 (ko) 컨텐트를 제공하는 방법 및 디바이스
WO2022092782A1 (ko) 증강현실 인터랙티브 스포츠 장치를 이용한 개인별 운동량 측정 방법
WO2019240562A1 (en) Electronic device and operating method thereof for outputting response to user input, by using application
WO2023074980A1 (ko) 동작 인식 기반 상호작용 방법 및 기록 매체
WO2020130691A1 (en) Electronic device and method for providing information thereof
WO2014038828A1 (en) Method and apparatus for executing application in device
KR20200015890A (ko) 정보 처리 장치, 정보 처리 방법 및 프로그램
WO2020105979A1 (en) Image processing apparatus and control method thereof
WO2020221121A1 (zh) 视频查询方法、装置、设备及存储介质
WO2022065763A1 (en) Display apparatus and method for controlling thereof
WO2022010177A1 (en) Device and method for generating summary video
WO2022154483A1 (ko) 전자 장치 및 전자 장치의 동작 방법
WO2023128274A1 (ko) 운동 가이드 동영상 제공 방법 및 그 장치
EP3593539A1 (en) Image display apparatus and method
JP2007172389A (ja) コンテント配信装置
WO2018124464A1 (ko) 전자 장치 및 전자 장치의 검색 서비스 제공 방법
WO2017164547A1 (ko) 몰입성 이벤트 기반 컨텐츠 가중치 조정 시스템 및 이를 이용한 컨텐츠 가중치 조정방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22916428

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 18702093

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2022916428

Country of ref document: EP

Effective date: 20240729