WO2021100905A1 - Method for providing training service and service system therefor - Google Patents

Method for providing training service and service system therefor Download PDF

Info

Publication number
WO2021100905A1
WO2021100905A1 PCT/KR2019/015976 KR2019015976W WO2021100905A1 WO 2021100905 A1 WO2021100905 A1 WO 2021100905A1 KR 2019015976 W KR2019015976 W KR 2019015976W WO 2021100905 A1 WO2021100905 A1 WO 2021100905A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
service
training service
training
providing
Prior art date
Application number
PCT/KR2019/015976
Other languages
French (fr)
Korean (ko)
Inventor
정규민
Original Assignee
(주)데브언리밋
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)데브언리밋 filed Critical (주)데브언리밋
Priority to PCT/KR2019/015976 priority Critical patent/WO2021100905A1/en
Publication of WO2021100905A1 publication Critical patent/WO2021100905A1/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/22—Social work or social welfare, e.g. community support activities or counselling services

Definitions

  • the present invention relates to training service provision, and more particularly, to a training service providing method and service apparatus or system for providing a training service to a user entering a specific space and providing feedback on the service through artificial intelligence. .
  • the technical task to be achieved by an embodiment of the present invention is to be optimized by analyzing the user's movement based on artificial intelligence while watching the training content in an environment that is optimal for the content consumer, that is, the user who has entered a specific space. It is to provide customized training services by providing feedback.
  • Another technical problem to be achieved by another embodiment of the present invention is to provide an adaptive training service in response to various events occurring in the process of a user consuming content.
  • Another technical problem to be achieved by another embodiment of the present invention is to provide a service device supporting or processing the above-described methods or a service system including the same.
  • a method for providing a training service in a service server for solving the above-described problem includes the steps of: detecting an object entering a specific space; Providing training service data to the detected object; Detecting occurrence of an event; Identifying the detected event; And providing artificial intelligence-based feedback data by referring to the identified event content.
  • the event is predefined in the process of receiving a request to stop or stop playback of training service data, end playback of the training service data, and playback of the training service data. It is characterized in that it is generated by at least one of the generated interrupt.
  • the interrupt may include no motion data being detected from an object for a predefined time, or comparison data between motion data of the object and the provided training service data. It is characterized in that it is generated when the training service match rate calculated as a reference is less than a predefined threshold.
  • the method comprising: extracting facial recognition data of the object; Calculating heart rate data of the object from the extracted facial recognition data of the object; And comparing predefined reference data or heart rate calculated before provision of the training service data or average heart rate data of the detected object.
  • the control command generated to generate the event or interrupt includes: controlling the reproduction rate of the training service data, stopping or terminating the reproduction of the training service data, And at least one of the feedback data output and emergency signal broadcast.
  • the control command generated to generate the event or interrupt includes controlling the reproduction of the training service data, terminating the reproduction of the training service data, and providing feedback data. And control data for controlling at least one of notification data output control data regarding whether to broadcast an emergency signal.
  • the specific space is characterized in that at least one of a virtual space capable of implementing a training service and a physical space in which a training service device is installed.
  • the provided feedback data includes data on a match rate of a posture or motion compared to the provided training service, and at least one of text, audio and image It is characterized in that it is provided in one form.
  • the provided feedback data is provided in the form of a play bar, and the size and color are provided on the play bar according to the match rate of the posture or motion. At least one of them is characterized in that a differentiated type of indicator is included.
  • a service server for providing a training service includes: a database unit; A sensor module that detects an object entering a specific space and an event; And a control unit that provides training service data to the detected object, identifies the detected event, and controls to provide artificial intelligence-based feedback data by referring to the identified event content.
  • the event is predefined in the process of receiving a request to stop or stop reproduction of training service data, ending reproduction of the training service data, and reproducing the training service data. It is characterized in that it is generated by at least one of interrupt generation.
  • control unit is configured to detect or receive no motion data from the object for a predetermined time, or to match the motion data of the object and the previously provided training service data. It characterized in that the control to generate the event only when the training service match rate calculated based on the comparison data is less than a predefined threshold.
  • control unit extracts facial recognition data of the object, calculates heart rate data of the object from the facial recognition data of the extracted object, and defines in advance. And comparing the calculated reference data or the calculated heart rate before providing the training service data to the average heart rate data of the detected object.
  • control unit controls to generate a control command for generating the event or interrupt when the difference between the two heart rate data as a result of the comparison is less than a threshold value. It is done.
  • control unit includes: controlling a reproduction rate of the training service data, stopping or terminating the reproduction of the training service data, and outputting the feedback data and broadcasting an emergency signal. And generating a control command to generate the event or interrupt, including at least one of.
  • the control unit includes a control unit for controlling reproduction of the training service data, ending reproduction of the training service data, and providing feedback data, and whether to broadcast an emergency signal. And generating a control command for generating the event or interrupt including control data for controlling at least one of the tipping data output control data.
  • the specific space is at least one of a virtual space capable of implementing a training service and a physical space in which a training service device is installed.
  • control unit provides feedback data including data on a match rate of posture or motion compared to the provided training service, but includes text, audio, and image. It is characterized in that the feedback data is provided in at least one of the forms.
  • control unit provides the feedback data in the form of a replay bar, and the size and size according to the match rate of the posture or motion on the provided reproducing bar It is characterized in that at least one of the colors is controlled to include an indicator of a differentiated form.
  • FIG. 1 is a schematic diagram of a service system for providing a training service according to an embodiment of the present invention.
  • FIG. 2 is a block diagram showing the configuration of the service server 130 according to an embodiment of the present invention.
  • 3 and 4 are diagrams illustrating a method of providing a training service in a specific space 120 according to an embodiment of the present invention.
  • FIG. 5 is a diagram illustrating a method of providing feedback data according to an embodiment of the present invention.
  • FIG. 6 is a flowchart illustrating a method of providing a training service according to an embodiment of the present invention.
  • FIG. 7 is a flowchart illustrating a method of controlling or providing a training service according to an event that may occur in the process of providing a training service according to FIG. 6.
  • FIG. 8 is a diagram illustrating a playback guide UI according to an embodiment of the present invention.
  • ...unit described in the specification refer to a unit that processes at least one function or operation, which may be implemented by hardware or software, or a combination of hardware and software.
  • “one (a or an)”, “one”, and similar related words are all in the singular and plural unless otherwise indicated in the specification or clearly contradicted by the context in the context describing the present invention. It can be used in a sense including.
  • a user may be expressed as an object to aid in understanding of the present invention and for convenience of description, and when sensing a part of the body is required, as described later, it may be mixed and used as a user.
  • FIG. 1 is a schematic diagram of a service system 100 for providing a training service according to an embodiment of the present invention.
  • the training service system 100 includes a server 130 and a database (DB) 140, and when an object 110 enters a specific space 120, training according to the present invention It is to provide a service.
  • the object 110 may carry a terminal (not shown).
  • the specific space 120 is a concept including not only a physical space providing a training service to an object 110 entering the corresponding space, but also a virtual space providing the training service. to be.
  • a physical space providing a training service to an object 110 entering the corresponding space
  • a virtual space providing the training service.
  • the specific space 120 as a physical space may include various devices for providing the training service.
  • a flat 420 or three-dimensional 430 training service content is output to a display device such as a TV or a monitor on which a flat training service as shown in FIGS. 2 to 3 is reproduced, and a display device or a wall as shown in FIG. 4.
  • a projector 410, a three-dimensional image such as a 3-dimensional (3D) image or a hologram, or a display device capable of providing a video may be included.
  • the device included in the specific space 120 may communicate with the service server 130 to provide a feedback service according to consumption of the training content of the object 110.
  • Communication or data exchange (hereinafter referred to as “data communication”) between each element constituting the “training service system 100” according to an embodiment of the present invention is performed through a wired/wireless communication network.
  • the communication network or communication protocol between each component need not necessarily be the same. In other words, a communication protocol that supports communication to facilitate data communication within the above training service system 100 is sufficient, and when different communication protocols are used between each other, conversion may be performed appropriately in a related configuration.
  • the terminal 120 may download and install software such as training service related applications and programs provided by the service server 130 in advance.
  • the terminal may include a related application program interface (API) or embedded software.
  • API application program interface
  • such a terminal includes a terminal device, a terminal, a mobile station (MS), a mobile subscriber station (MSS), a subscriber station (SS), an advanced mobile station (AMS), a wireless terminal (WT), and a machine- It may be at least one of type communication) device, M2M (machine-to-machine) device, and D2D device (device-to-device) device.
  • MS mobile station
  • MSS mobile subscriber station
  • SS subscriber station
  • AMS advanced mobile station
  • WT wireless terminal
  • a machine- It may be at least one of type communication) device, M2M (machine-to-machine) device, and D2D device (device-to-device) device.
  • M2M machine-to-machine
  • D2D device device-to-device
  • the service server 130 is an entity capable of performing data communication with devices such as at least one sensor or display device in the terminal of the object 110 or the specific space 120 through a wired/wireless communication network.
  • a computing device including hardware or/and software that controls to perform or control at least one of generating, processing, providing, and storing various data (including control commands) related to provision of the training service according to the present invention. device or apparatus).
  • the service server 130 may be referred to as a computing device or a processor, depending on the embodiment.
  • the above-described service server 130 is, Cloud server, IMS (IP multimedia subsystem) server, telephony application server, IM (instant messaging) server, media gateway control function (MGCF) It may be at least one of a server, a messaging gateway (MSG) server, a call session control function (CSCF) server, and the like.
  • IMS IP multimedia subsystem
  • IM instant messaging
  • MGW messaging gateway
  • CSCF call session control function
  • the wired/wireless communication network may be an IP network supporting large-capacity data communication through Internet Protocol (IP) or an All IP network integrating different IP networks.
  • IP Internet Protocol
  • the wired/wireless communication network includes a wired network, a mobile communication network including WCDMA, a high speed downlink packet access (HSDPA) network, and a mobile communication network including a long term evolution (LTE) network, and LTE advanced (LTE-A).
  • WCDMA wide area network
  • HSDPA high speed downlink packet access
  • LTE long term evolution
  • LTE-A LTE advanced
  • One of a mobile communication network, a satellite communication network, and a Wi-Fi network or may be formed by a combination of at least one or more of them.
  • the database 140 may be provided in the service server 130 or a display device provided in a specific space 120 or may be located remotely.
  • the training service may be provided in the form of an application.
  • the display device may download and install an application for a training service from the service server 130 in advance, and control the training service as a whole.
  • various data collected after each training service may be transmitted to the service server 130 so that the service server 130 can use it for learning through deep learning. It is provided in an updated or upgraded format to enable more efficient training services as well as object customization.
  • the database 140 may be updated by storing and learning various reference data for a training service, for example, in connection with the present invention.
  • reference data for example, reference data for determining whether a posture match, various training service data, sensing data determination reference data, reference data for heart rate estimation, various training guide reference data, various regeneration control criteria or reference data, events Or interrupt situation data, object customized reference data, exercise quantity estimation reference data through calorie calculation based on heart rate, etc.
  • reference data for calculating the correlation between heart rate and training service, heart rate and blood pressure, emergency situations including health Reference data for determination, reference data according to the correlation between at least one of the aforementioned reference data and disease or disease, various feedback data, response or feedback data of an object according to transmission of the feedback data, feedback data and intention of the object may include library(s) for reference data for determining (for example, training purpose, rest purpose, etc.), heart rate, and training service guide reference data according to age or gender.
  • the service server 130 may update the library data on a periodic/aperiodic
  • heart rate estimation as shown in FIG. 7 can be performed more often to cope with various emergency situations that may occur. have.
  • the related reference data together with the feedback data for the training service are broadcast to the guardian or the terminal of a predetermined target continuously at a predetermined period. ) Or can be transmitted.
  • various service guide data are transmitted after transmitting related data including heart rate estimation data and feedback data to the terminal of the attending physician set in advance for remote clinic. Can provide.
  • FIG. 2 is a block diagram showing a configuration of a service server 130 according to an embodiment of the present invention
  • FIGS. 3 and 4 are diagrams illustrating a method of providing a training service in a specific space 120 according to an embodiment of the present invention.
  • 5 is a diagram illustrating a method of providing feedback data according to an embodiment of the present invention
  • FIG. 6 is a flowchart illustrating a method of providing a training service according to an embodiment of the present invention
  • 7 is a flowchart illustrating a method of controlling or providing a training service according to an event that may occur in the process of providing the training service according to FIG. 6,
  • FIG. 8 is a diagram illustrating a playback guide UI according to an embodiment of the present invention. It is a drawing .
  • the service server 130 includes a communication module 201, a data processing module 202, a service processing module 203, a control unit 204, and the like.
  • the configuration of the service server 130 shown in FIG. 2 shows only the core components in relation to the present invention, and one or more other components may be further included according to embodiments, and vice versa. to be.
  • a plurality of components may be separately implemented or, conversely, a plurality of components may be modularized into one component and implemented.
  • FIG. 6 illustrates a method of providing a training service according to an embodiment of the present invention
  • FIG. 7 illustrates a method of controlling or providing a training service according to an event that may occur in the process of providing the training service according to FIG. 6.
  • each step is described based on the service server 130, but is not limited thereto. That is, in order to help the understanding of the present invention, some of the viewpoints of the specific space 120 may be included and described. In addition, although not shown, some steps necessary for carrying out the present invention may be further included or vice versa.
  • the sensor module 220 may include at least one of a camera, an image sensor, an infrared sensor, a position sensor, a weight or gravity sensor, a motion sensor for motion detection, an audio detection sensor, a tactile sensor, and a touch sensor.
  • At least one of the sensor modules 220 installed in the specific space 120 senses whether the object 110 enters or not, and a control device (not shown) provided in the specific space 120 (depending on the embodiment). If the object 110 is detected to enter the specific space 120 as a result of sensing by the control module of the projector or display device installed in a specific space (S601), this is reported to the service server 130 do.
  • control unit 204 of the service server 130 When the control unit 204 of the service server 130 receives data for detecting the entry of the object 110 into the specific space 1200 received from the control device of the specific space 120, the control unit 204 of the specific space 120 Training service data according to the present invention is provided or output through the display device 210 (S602).
  • the control device of the specific space 120 provides a training service by self-determining whether or not a predetermined condition is irrespective of the control of the service server 130 after the report, and reports the fact separately. In the case of the report, it may be transmitted with the corresponding fact.
  • the control device of the specific space 120 may provide training service data in a separate storage device or a streaming-type training service by communicating with an external storage device.
  • the control device of the specific space 120 transmits a service provision request to the corresponding external storage device or server, Part of the entire training service data (preferably at the beginning of reproduction) data is controlled to be pre-processed so that service reproduction according to capacity, etc. may be performed smoothly, and the service may be performed immediately at a predetermined time after detection. This is not always the case, and can be appropriately determined and handled in consideration of circumstances such as network traffic.
  • provision of the training service is performed under the control of the service server 130.
  • the service server 130 continuously monitors whether or not an event occurs (S603).
  • the event refers to the reception of requests such as interruption of reproduction of the training service data, suspension of reproduction, and suspension of reproduction, the normal termination of reproduction of the training service data, and occurrence of a predefined interrupt during the reproduction of the training service data. it means. That is, the event may represent various situations related to reproduction or playback control of the training service in the course of providing the training service.
  • the interrupt is, motion data related to the motion of the object 110 is not detected for a predefined time, or motion data sensed for the object 110 and the provided training service data It may be generated when the training service match ratio calculated based on the comparison data that is a result of reference comparison with reference data of is less than a predefined threshold.
  • the service server 130 identifies the detected event (S604), controls the reproduction of the training service according to the identified event content (S605), and displays the artificial intelligence-based feedback data of the specific space 120 Provided through the like (S606).
  • artificial intelligence can be used, and the same is true for heart rate estimation.
  • the artificial intelligence may refer to a learned artificial neural network or artificial intelligence and artificial neural network.
  • artificial intelligence may be implemented through various machine learning techniques.
  • various machine learning techniques may be used to learn artificial neural networks.
  • deep learning may be used as an example, and learning may be performed in a supervised learning or unsupervised learning method.
  • at least one of a deep neural network (DNN), a convolutional neural network (CNN), and a recurrent neural network (RNN) may be used as the artificial neural network.
  • DNN deep neural network
  • CNN convolutional neural network
  • RNN recurrent neural network
  • the present invention is not limited thereto, and various technologies related to artificial intelligence currently developed or developed in the future may be referenced.
  • the provided feedback data may include data on a match rate of posture or motion compared to a training service that is being provided, and such data is provided in at least one of text, audio, image, and video. Can be.
  • feedback data thus provided may be provided in the form of a playback bar.
  • indicators 501 to 507 having a size or/and color differentiated according to a match rate of the posture or motion may be used on the provided playback bar.
  • the first indicator 501, the third indicator 503, and the sixth indicator 506 indicate a case in which the match rate of posture or motion is significantly lower than the reference data
  • the fourth indicator 504 is It may represent a case where the match rate is not satisfied with the reference data, but the degree of the match is not much different from the reference data. This can be determined according to the corresponding range by dividing the match rate into a first non-conforming range, a second non-conforming range, etc.
  • the second indicator 502, the fifth indicator 505, and the seventh indicator 507 represent a portion showing a suitable match rate, and in particular, in the case of the fifth indicator 505, perfect, that is, 100% matched. May indicate a case.
  • this method or definition is only an example, and the present invention is not limited thereto.
  • the degree of the match rate may be displayed on the playback bar using numbers or the like to be more intuitively identified.
  • the playback bar may be implemented or replaced using a histogram, and feedback data may be implemented through text data or voice separately or together with it.
  • the service server 130 senses and extracts the facial recognition data of the object 110 through the sensor module 210 (S701), and the heart rate of the object 110 from the extracted facial recognition data of the object 110 Data is calculated (S702).
  • the service server 130 compares the calculated heart rate data of the object 110 with predefined reference data or the heart rate extracted before the training service data is provided, or the average heart rate data of the detected object 110 (S703). ). As a result of the comparison, when the difference between the two heart rate data exceeds the threshold value, a reproduction guide related to reproduction of the training service is provided (S704), and a control command for generating an event or an interrupt is generated (S705).
  • the service server 130 controls reproduction of the training service by referring to the generated control command (S706) and provides related feedback (S707).
  • control command generated to generate the event or interrupt may include at least one of: controlling a reproduction rate of the training service data, stopping or ending reproduction of the training service data, outputting the feedback data, and broadcasting an emergency signal. I can.
  • control command generated to generate the event or the interrupt may include control of reproduction of the training service data, termination of reproduction of the training service data, and provision of feedback data, and notification data regarding whether or not an emergency signal is broadcast. (notification data) It may include control data for controlling at least one of the output control data.
  • the reproduction guide may be formed, for example, in the form of (c) of FIG. 8, but the present invention is not limited thereto.
  • the amount of exercise that can be calculated or the amount of exercise calculated based on this may be relatively low, and thus the effectiveness of the training service may be relatively low.
  • the higher level refers to a training service having a higher intensity based on a heart rate or an amount of exercise.
  • the service server 130 based on the data collected in real-time or non-real-time for feedback on the comparison result of the step S703 or the training service reproduction process, the guide for reproduction control in (a) or (b) of FIG. It can also be provided in the form of For example, when the match rate of the training service of the object 110 is significantly low during playback, and it is determined that it is inappropriate to continue using the training service, the feedback data up to that point is provided, and a new training service corresponding to the object 110 is provided. Or other relevant additional data may be provided.
  • image data is obtained by sensing an object through a sensor, where the acquired image data may be all or part of the object.
  • the acquired image data may be all or part of the object.
  • at least a face portion is included in sensing the object.
  • the service server 130 may generate a plurality of libraries for feedback, including various data generated during or after the training service process, and return them to the object 110.
  • the returned data may be directly transmitted to a terminal of the object 110 or a display device or a control device in a specific space 120, or may be service-processed in an indirect manner through a URL or the like.
  • the above-described method can be written as a program that can be executed on a computer, and can be implemented in a general-purpose digital computer that operates the program using a computer-readable medium. Also, the structure of the data used in the above-described method can be recorded on a computer-readable medium through various means.
  • Computer-readable media storing executable computer code for performing various methods of the present invention include magnetic storage media (e.g., , floppy disk, hard disk, etc.), and optical reading media (e.g., CD-ROM, DVD Etc.).

Landscapes

  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Tourism & Hospitality (AREA)
  • Marketing (AREA)
  • Child & Adolescent Psychology (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)

Abstract

A method for providing a training service from a service server according to an embodiment of the present invention comprises the steps of: sensing the appearance of an object in a particular space; providing training service data to the sensed object; sensing occurrence of an event; identifying the sensed event; and providing artificial intelligence-based feedback data in accordance with the content of the identified event.

Description

트레이닝 서비스 제공 방법 및 그를 위한 서비스 시스템Training service provision method and service system therefor
본 발명은 트레이닝 서비스 제공에 관한 것으로, 보다 상세하게는 특정 공간에 진입하는 사용자에게 트레이닝 서비스를 제공하고 인공 지능을 통해서 해당 서비스에 대한 피드백을 제공하는 트레이닝 서비스 제공 방법 및 서비스 장치 내지 시스템에 관한 것이다.The present invention relates to training service provision, and more particularly, to a training service providing method and service apparatus or system for providing a training service to a user entering a specific space and providing feedback on the service through artificial intelligence. .
건강에 대한 관심도가 증가하여 많은 사람들이 건강을 위하여 다양한 활동을 하고자 한다. 이에 따라 댄스, 운동과 같은 주로 외부 활동과 관련된, 즉 피지컬적인 활동이 부각되고 있으나, 시간과 공간의 한계로 인하여 꾸준하게 참여하지 못하는 것이 사실이다.As the interest in health increases, many people want to do various activities for their health. As a result, physical activities related mainly to external activities such as dance and sports, that is, physical activities, are being emphasized, but it is true that they cannot participate consistently due to the limitations of time and space.
또한, 운동의 경우, 피지컬 트레이너와 같은 전문 강사로부터 배우는 경우에는 스케줄을 맞추기도 힘들뿐만 아니라 적지 않은 비용으로 인해 적극적인 참여가 쉽지 않다.In addition, in the case of exercise, when learning from a professional instructor such as a physical trainer, it is difficult to meet the schedule, and it is not easy to actively participate due to considerable cost.
최근 IT 기술의 발전과 함께 1인 미디어 시대가 열리면서 많은 컨텐츠가 생산되어 제공되고 있다. 이렇게 생산되는 컨텐츠에는 트레이닝 서비스와 관련된 컨텐츠도 있다. 다만, 컨텐츠 소비자의 입장에서는 그러한 컨텐츠를 소비하면서 배우는 것이 쉽지 않을 뿐더러 제대로 트레이닝이 되는 것인지 등에 대한 확신이 없어 대리만족이나 반대로 스트레스만 받는 경우가 많다.Along with the recent development of IT technology, as the era of one-person media opens, a lot of content has been produced and provided. The contents produced in this way include contents related to training services. However, from the perspective of content consumers, it is not easy to learn while consuming such content, and there are many cases where they are only satisfied with surrogate or conversely, because they are not sure whether or not they are properly trained.
따라서, 서비스 소비자가 쉽게 컨텐츠를 소비할 수 있고 적절한 피드백을 통하여 제대로 된 트레이닝 서비스를 받을 수 있도록 하는 서비스 플랫폼과 그를 위한 시스템에 대한 요구가 있다.Therefore, there is a need for a service platform and a system for the service platform that enables service consumers to easily consume content and receive proper training services through appropriate feedback.
상기와 같은 요구에 따라 본 발명의 일실시예가 이루고자 하는 기술적 과제는,　특정 공간에 진입한 컨텐츠 소비자, 즉 사용자에게 최적의 환경에서 트레이닝 컨텐츠를 시청하면서 상기 사용자의 움직임을 인공지능 기반으로 분석하여 최적의 피드백을 제공하여 커스터마이즈드 트레이닝 서비스를 제공하는 데 있다.In accordance with the above requirements, the technical task to be achieved by an embodiment of the present invention is to be optimized by analyzing the user's movement based on artificial intelligence while watching the training content in an environment that is optimal for the content consumer, that is, the user who has entered a specific space. It is to provide customized training services by providing feedback.
본 발명의 다른 일실시예가 이루고자 하는 기술적 과제는, 사용자가 컨텐츠를 소비하는 과정에서 발생하는 다양한 이벤트에 대응하여 적응적인 트레이닝 서비스를 제공하는 데 있다.Another technical problem to be achieved by another embodiment of the present invention is to provide an adaptive training service in response to various events occurring in the process of a user consuming content.
본 발명의 또 다른 일실시예가 이루고자 하는 기술적 과제는,　상기한 방법들을 지원하거나 처리하는 서비스 디바이스 내지 그를 포함한 서비스 시스템을 제공하는 데 있다.Another technical problem to be achieved by another embodiment of the present invention is to provide a service device supporting or processing the above-described methods or a service system including the same.
본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며,　언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The technical problems to be achieved in the present invention are not limited to the technical problems mentioned above, and other technical problems that are not mentioned will be clearly understood by those of ordinary skill in the technical field to which the present invention belongs from the following description. I will be able to.
상술한 문제점을 해결하기 위한 본 발명의　일실시예에　따른 서비스 서버에서 트레이닝 서비스 제공 방법은, 특정 공간 진입 객체를 감지하는 단계; 감지된 객체에 트레이닝 서비스 데이터를 제공하는 단계; 이벤트 발생을 감지하는 단계; 감지된 이벤트를 식별하는 단계; 및 상기 식별된 이벤트 내용을 참조하여 인공 지능 기반 피드백 데이터 제공하는 단계;를 포함하여 이루어진다.A method for providing a training service in a service server according to an embodiment of the present invention for solving the above-described problem includes the steps of: detecting an object entering a specific space; Providing training service data to the detected object; Detecting occurrence of an event; Identifying the detected event; And providing artificial intelligence-based feedback data by referring to the identified event content.
본 발명의　일실시예에　따른 서비스 서버에서 트레이닝 서비스 제공 방법에서, 상기 이벤트는, 트레이닝 서비스 데이터의 재생 중단 내지 중지 요청 수신, 상기 트레이닝 서비스 데이터의 재생 종료, 및 상기 트레이닝 서비스 데이터 재생 과정에서 미리 정의된 인터럽트 발생 중 적어도 하나에 의해 발생되는 것을 특징으로 한다.In the method for providing a training service in a service server according to an embodiment of the present invention, the event is predefined in the process of receiving a request to stop or stop playback of training service data, end playback of the training service data, and playback of the training service data. It is characterized in that it is generated by at least one of the generated interrupt.
본 발명의　일실시예에　따른 서비스 서버에서 트레이닝 서비스 제공 방법에서, 상기 인터럽트는, 미리 정의된 시간 동안 객체로부터 움직임 데이터가 감지되지 않거나, 객체의 움직임 데이터와 상기 제공되는 트레이닝 서비스 데이터의 비교 데이터를 기준으로 산출되는 트레이닝 서비스 매치율이 미리 정의된 임계치 미만인 경우에 발생되는 것을 특징으로 한다.In the method for providing a training service in a service server according to an embodiment of the present invention, the interrupt may include no motion data being detected from an object for a predefined time, or comparison data between motion data of the object and the provided training service data. It is characterized in that it is generated when the training service match rate calculated as a reference is less than a predefined threshold.
본 발명의　일실시예에　따른 서비스 서버에서 트레이닝 서비스 제공 방법에서, 상기 객체의 안면 인식 데이터를 추출하는 단계; 상기 추출한 객체의 안면 인식 데이터로부터 상기 객체의 심박수 데이터를 산출하는 단계; 및 미리 정의된 기준 데이터 또는 상기 트레이닝 서비스 데이터 제공 전 산출한 심박수 내지 감지된 객체의 평균 심박수 데이터를 비교하는 단계;를 더 포함하여 이루어지는 것을 특징으로 한다.In a method for providing a training service in a service server according to an embodiment of the present invention, the method comprising: extracting facial recognition data of the object; Calculating heart rate data of the object from the extracted facial recognition data of the object; And comparing predefined reference data or heart rate calculated before provision of the training service data or average heart rate data of the detected object.
본 발명의　일실시예에　따른 서비스 서버에서 트레이닝 서비스 제공 방법에서, 상기 비교 결과 양 심박수 데이터의 차이가 임계치 미만이면, 상기 이벤트 또는 인터럽트 발생을 위한 제어 커맨드를 발생시키는 단계;를 더 포함하여 이루어지는 것을 특징으로 한다.In the method for providing a training service in a service server according to an embodiment of the present invention, if the difference between the two heart rate data is less than a threshold value as a result of the comparison, generating a control command for generating the event or interrupt; It is characterized.
본 발명의　일실시예에　따른 서비스 서버에서 트레이닝 서비스 제공 방법에서, 상기 이벤트 또는 인터럽트를 발생시키도록 생성된 제어 커맨드는, 상기 트레이닝 서비스 데이터의 재생 속도 제어, 상기 트레이닝 서비스 데이터의 재생 중단 내지 종료, 상기 피드백 데이터 출력 및 응급 신호 브로드캐스트 중 적어도 하나를 포함하는 것을 특징으로 한다.In a method for providing a training service in a service server according to an embodiment of the present invention, the control command generated to generate the event or interrupt includes: controlling the reproduction rate of the training service data, stopping or terminating the reproduction of the training service data, And at least one of the feedback data output and emergency signal broadcast.
본 발명의　일실시예에　따른 서비스 서버에서 트레이닝 서비스 제공 방법에서, 상기 이벤트 또는 인터럽트를 발생시키도록 생성된 제어 커맨드는, 상기 트레이닝 서비스 데이터의 재생 제어, 상기 트레이닝 서비스 데이터의 재생 종료 및 피드백 데이터 제공, 및 응급 신호 브로드캐스트 여부에 관한 노티피케이션 데이터 출력 제어 데이터 중 적어도 하나의 제어를 위한 제어 데이터를 포함하는 것을 특징으로 한다.In a method for providing a training service in a service server according to an embodiment of the present invention, the control command generated to generate the event or interrupt includes controlling the reproduction of the training service data, terminating the reproduction of the training service data, and providing feedback data. And control data for controlling at least one of notification data output control data regarding whether to broadcast an emergency signal.
본 발명의　일실시예에　따른 서비스 서버에서 트레이닝 서비스 제공 방법에서, 상기 특정 공간은, 트레이닝 서비스를 구현 가능한 가상 공간과 트레이닝 서비스 디바이스가 설치된 물리 공간 중 적어도 하나인 것을 특징으로 한다.In the method for providing a training service in a service server according to an embodiment of the present invention, the specific space is characterized in that at least one of a virtual space capable of implementing a training service and a physical space in which a training service device is installed.
본 발명의　일실시예에　따른 서비스 서버에서 트레이닝 서비스 제공 방법에서, 상기 제공되는 피드백 데이터는, 상기 제공되는 트레이닝 서비스 대비 자세 내지 동작의 매치율에 대한 데이터를 포함하며, 텍스트, 오디오 및 이미지 중 적어도 하나의 형태로 제공하는 것을 특징으로 한다.In the method for providing a training service in a service server according to an embodiment of the present invention, the provided feedback data includes data on a match rate of a posture or motion compared to the provided training service, and at least one of text, audio and image It is characterized in that it is provided in one form.
본 발명의　일실시예에　따른 서비스 서버에서 트레이닝 서비스 제공 방법에서, 상기 제공되는 피드백 데이터는, 재생 바 형태로 제공되며, 상기 제공되는 재생 바 상에 상기 자세 내지 동작의 매치율에 따라 크기와 색상 중 적어도 하나가 차별화된 형태의 인디케이터가 포함되는 것을 특징으로 한다.In a method for providing a training service in a service server according to an embodiment of the present invention, the provided feedback data is provided in the form of a play bar, and the size and color are provided on the play bar according to the match rate of the posture or motion. At least one of them is characterized in that a differentiated type of indicator is included.
본 발명의　일실시예에　따른 트레이닝 서비스를 제공하는 서비스 서버는, 데이터베이스부; 특정 공간 진입 객체와 이벤트 발생을 감지하는 센서 모듈; 및 감지된 객체에 트레이닝 서비스 데이터를 제공하고, 상기 감지된 이벤트를 식별하여, 식별된 이벤트 내용을 참조하여 인공 지능 기반 피드백 데이터 제공하도록 제어하는 제어부;를 포함한다.A service server for providing a training service according to a 　 embodiment of the present invention includes: a database unit; A sensor module that detects an object entering a specific space and an event; And a control unit that provides training service data to the detected object, identifies the detected event, and controls to provide artificial intelligence-based feedback data by referring to the identified event content.
본 발명의　일실시예에　따른 트레이닝 서비스를 제공하는 서비스 서버에서, 상기 이벤트는, 트레이닝 서비스 데이터의 재생 중단 내지 중지 요청 수신, 상기 트레이닝 서비스 데이터의 재생 종료, 상기 트레이닝 서비스 데이터 재생 과정에서 미리 정의된 인터럽트 발생 중 적어도 하나에 의해 발생되는 것을 특징으로 한다.In the service server providing the training service according to the 　 embodiment of the present invention, the event is predefined in the process of receiving a request to stop or stop reproduction of training service data, ending reproduction of the training service data, and reproducing the training service data. It is characterized in that it is generated by at least one of interrupt generation.
본 발명의　일실시예에　따른 트레이닝 서비스를 제공하는 서비스 서버에서, 상기 제어부는, 미리 정의된 시간 동안 상기 객체로부터 움직임 데이터가 감지 또는 수신되지 않거나, 상기 객체의 움직임 데이터와 기제공된 트레이닝 서비스 데이터의 비교 데이터를 기준으로 산출되는 트레이닝 서비스 매치율이 미리 정의된 임계치 미만인 경우에만 상기 이벤트를 발생시키도록 제어하는 것을 특징으로 한다.In the service server providing the training service according to the 　 embodiment of the present invention, the control unit is configured to detect or receive no motion data from the object for a predetermined time, or to match the motion data of the object and the previously provided training service data. It characterized in that the control to generate the event only when the training service match rate calculated based on the comparison data is less than a predefined threshold.
본 발명의　일실시예에　따른 트레이닝 서비스를 제공하는 서비스 서버에서, 상기 제어부는, 상기 객체의 안면 인식 데이터를 추출하고, 상기 추출한 객체의 안면 인식 데이터로부터 상기 객체의 심박수 데이터를 산출하여, 미리 정의된 기준 데이터 또는 상기 트레이닝 서비스 데이터 제공 전 산출한 심박수 내지 감지된 객체의 평균 심박수 데이터를 비교하는 것을 특징으로 한다.In a service server providing a training service according to an embodiment of the present invention, the control unit extracts facial recognition data of the object, calculates heart rate data of the object from the facial recognition data of the extracted object, and defines in advance. And comparing the calculated reference data or the calculated heart rate before providing the training service data to the average heart rate data of the detected object.
본 발명의　일실시예에　따른 트레이닝 서비스를 제공하는 서비스 서버에서, 상기 제어부는, 상기 비교 결과 양 심박수 데이터의 차이가 임계치 미만이면, 상기 이벤트 또는 인터럽트 발생을 위한 제어 커맨드를 발생하도록 제어하는 것을 특징으로 한다.In a service server providing a training service according to an embodiment of the present invention, the control unit controls to generate a control command for generating the event or interrupt when the difference between the two heart rate data as a result of the comparison is less than a threshold value. It is done.
본 발명의　일실시예에　따른 트레이닝 서비스를 제공하는 서비스 서버에서, 상기 제어부는, 상기 트레이닝 서비스 데이터의 재생 속도 제어, 상기 트레이닝 서비스 데이터의 재생 중단 내지 종료, 및 상기 피드백 데이터 출력 및 응급 신호 브로드캐스트 중 적어도 하나를 포함하여 상기 이벤트 또는 인터럽트를 발생하도록 제어 커맨드를 생성하는 것을 특징으로 한다.In a service server providing a training service according to an embodiment of the present invention, the control unit includes: controlling a reproduction rate of the training service data, stopping or terminating the reproduction of the training service data, and outputting the feedback data and broadcasting an emergency signal. And generating a control command to generate the event or interrupt, including at least one of.
본 발명의　일실시예에　따른 트레이닝 서비스를 제공하는 서비스 서버에서, 상기 제어부는, 상기 트레이닝 서비스 데이터의 재생 제어, 상기 트레이닝 서비스 데이터의 재생 종료 및 피드백 데이터 제공, 및 응급 신호 브로드캐스트 여부에 관한 노티피케이션 데이터 출력 제어 데이터 중 적어도 하나의 제어를 위한 제어 데이터를 포함하는 상기 이벤트 또는 인터럽트를 발생시키는 제어 커맨드를 생성하는 것을 특징으로 한다.In the service server providing the training service according to the 　 embodiment of the present invention, the control unit includes a control unit for controlling reproduction of the training service data, ending reproduction of the training service data, and providing feedback data, and whether to broadcast an emergency signal. And generating a control command for generating the event or interrupt including control data for controlling at least one of the tipping data output control data.
본 발명의　일실시예에　따른 트레이닝 서비스를 제공하는 서비스 서버에서, 상기 특정 공간은, 트레이닝 서비스를 구현 가능한 가상 공간과 트레이닝 서비스 디바이스가 설치된 물리 공간 중 적어도 하나인 것을 특징으로 한다.In a service server providing a training service according to an embodiment of the present invention, the specific space is at least one of a virtual space capable of implementing a training service and a physical space in which a training service device is installed.
본 발명의　일실시예에　따른 트레이닝 서비스를 제공하는 서비스 서버에서, 상기 제어부는, 상기 제공되는 트레이닝 서비스 대비 자세 내지 동작의 매치율에 대한 데이터가 포함된 피드백 데이터를 제공하되, 텍스트, 오디오 및 이미지 중 적어도 하나의 형태로 상기 피드백 데이터를 제공하는 것을 특징으로 한다.In a service server providing a training service according to an embodiment of the present invention, the control unit provides feedback data including data on a match rate of posture or motion compared to the provided training service, but includes text, audio, and image. It is characterized in that the feedback data is provided in at least one of the forms.
본 발명의　일실시예에　따른 트레이닝 서비스를 제공하는 서비스 서버에서, 상기 제어부는, 상기 피드백 데이터를 재생 바 형태로 제공하되, 상기 제공되는 재생 바 상에 상기 자세 내지 동작의 매치율에 따라 크기와 색상 중 적어도 하나가 차별화된 형태의 인디케이터가 포함되도록 제어하는 것을 특징으로 한다.In the service server providing the training service according to the 　 embodiment of the present invention, the control unit provides the feedback data in the form of a replay bar, and the size and size according to the match rate of the posture or motion on the provided reproducing bar It is characterized in that at least one of the colors is controlled to include an indicator of a differentiated form.
상기와 같은 본 발명에 따르면 아래에 기재된 효과를 얻을 수 있다.　다만,　본 발명을 통해 얻을 수 있는 효과는 이에 제한되지 않는다.According to the present invention as described above, the effects described below can be obtained. However, the effect that can be obtained through the present invention is not limited thereto.
첫째,　특정 공간에 진입한 컨텐츠 소비자, 즉 사용자에게 최적의 환경에서 트레이닝 컨텐츠를 시청하면서 상기 사용자의 움직임을 인공지능 기반으로 분석하여 최적의 피드백을 제공하여 커스터마이즈드 트레이닝 서비스를 제공하는 효과가 있다.First, there is an effect of providing a customized training service by providing an optimal feedback by analyzing the user's movement based on artificial intelligence while watching the training content in an optimal environment for a content consumer who enters a specific space, that is, a user.
둘째, 사용자가 컨텐츠를 소비하는 과정에서 발생하는 다양한 이벤트에 대응하여 적응적인 트레이닝 서비스를 제공하는 효과가 있다.Second, there is an effect of providing an adaptive training service in response to various events that occur while users consume content.
셋째,　상기한 방법들을 지원하거나 처리하는 서비스 디바이스 내지 그를 포함한 서비스 시스템을 제공하는 효과가 있다.Third, there is an effect of providing a service device supporting or processing the above-described methods or a service system including the same.
도　1은 본 발명의 일실시예에 따른 트레이닝 서비스를 제공하는 서비스 시스템의 개략도이다.1 is a schematic diagram of a service system for providing a training service according to an embodiment of the present invention.
도　2는 본 발명의 일실시예에 따른 서비스 서버(130)의 구성 블록도이다.2 is a block diagram showing the configuration of the service server 130 according to an embodiment of the present invention.
도　3과 4는 본 발명의 일실시예에 따른 특정 공간(120)에서의 트레이닝 서비스 제공 방법을 설명하기 위해 도시한 도면이다.3 and 4 are diagrams illustrating a method of providing a training service in a specific space 120 according to an embodiment of the present invention.
도 5는 본 발명의 일실시예에 따른 피드백 데이터 제공 방법을 설명하기 위해 도시한 도면이다.5 is a diagram illustrating a method of providing feedback data according to an embodiment of the present invention.
도 6은 본 발명의 일실시예에 따른 트레이닝 서비스 제공 방법을 설명하기 위해 도시한 순서도이다.6 is a flowchart illustrating a method of providing a training service according to an embodiment of the present invention.
도 7은 상기 도 6에 따른 트레이닝 서비스 제공 과정에서 발생 가능한 이벤트에 따른 트레이닝 서비스 제어 내지 제공 방법을 설명하기 위해 도시한 순서도이다.7 is a flowchart illustrating a method of controlling or providing a training service according to an event that may occur in the process of providing a training service according to FIG. 6.
도 8은 본 발명의 일실시예에 따른 재생 가이드 UI를 도시한 도면이다.8 is a diagram illustrating a playback guide UI according to an embodiment of the present invention.
이하,　본 발명에 따른 바람직한 실시 형태를 첨부된 도면을 참조하여 상세하게 설명한다.　첨부된 도면과 함께 이하에 개시될 상세한 설명은 본 발명의 예시적인 실시형태를 설명하고자 하는 것이며,　본 발명이 실시될 수 있는 유일한 실시형태를 나타내고자 하는 것이 아니다.Hereinafter, with reference to the accompanying drawings, preferred embodiments according to the present invention will be described in detail. The detailed description to be disclosed hereinafter together with the accompanying drawings is intended to describe exemplary embodiments of the present invention, and is not intended to represent the only embodiments in which the present invention may be practiced.
단지 본 실시예들은 본 발명의 게시가 완전하도록 하고,　본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전히 알려주기 위해 제공되는 것이며,　본 발명은 청구항의 범주에 의해 정의될 뿐이다.Only these embodiments are provided to make the posting of the present invention complete, 　 to fully inform the scope of the invention to those of ordinary skill in the art to which the present invention belongs, and 　 the present invention to be defined by the scope of the claims. Only.
몇몇의 경우,　본 발명의 개념이 모호해지는 것을 피하기 위하여 공지의 구조 및 장치는 생략되거나,　각 구조 및 장치의 핵심기능을 중심으로 한 블록도 형식으로 도시될 수 있다.　또한,　본 명세서 전체에서 동일한 구성요소에 대해서는 동일한 도면 부호를 사용하여 설명한다.In some cases, in order to avoid obscuring the concept of the present invention, well-known structures and devices may be omitted, or may be illustrated in block diagram form centering on the core functions of each structure and device. In addition, the same components will be described using the same reference numerals throughout this specification.
명세서 전체에서,　어떤 부분이 어떤 구성요소를　"포함(comprising　또는　including)"한다고 할 때,　이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.Throughout the specification, 　when a certain part 　"comprising 　 or 　including", 　 means that other components may be further included rather than excluding other components unless otherwise stated. do.
또한,　명세서에 기재된　"…부"　의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며,　이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.　나아가, "일(a　또는　an)", "하나(one)",　및 유사 관련어는 본 발명을 기술하는 문맥에 있어서 본 명세서에 달리 지시되거나 문맥에 의해 분명하게 반박되지 않는 한,　단수 및 복수 모두를 포함하는 의미로 사용될 수 있다.In addition, the terms 　"...unit" 　 described in the specification refer to a unit that processes at least one function or operation, which may be implemented by hardware or software, or a combination of hardware and software. Furthermore, "one (a 　 or 　an)", "one", 　 and similar related words are all in the singular and plural unless otherwise indicated in the specification or clearly contradicted by the context in the context describing the present invention. It can be used in a sense including.
아울러,　본 발명의 실시예들에서 사용되는 특정(特定)　용어들은 본 발명의 이해를 돕기 위해서 제공된 것이며,　다르게 정의되지 않는 한,　기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다.　이러한 특정 용어의 사용은 본 발명의 기술적 사상을 벗어나지 않는 범위에서 다른 형태로 변경될 수 있다.In addition, 　specific terms used in the embodiments of the present invention are provided to aid understanding of the present invention, and 　unless defined otherwise, 　all terms used herein including technical or scientific terms are It has the same meaning as commonly understood by those of ordinary skill in the art to which it belongs. The use of these specific terms may be changed in other forms without departing from the technical spirit of the present invention.
본 명세서에서는 본 발명에 따른 트레이닝 서비스를 제공하는 방법 및 그를 위한 서비스 디바이스 내지 서비스 시스템에 대하여 설명한다.In this specification, a method for providing a training service according to the present invention and a service device or service system therefor will be described.
이하 본 명세서에서는 특히, 특정 공간에 진입한 컨텐츠 소비자, 즉 사용자에게 최적의 환경에서 트레이닝 컨텐츠를 소비하면서 그 움직임에 기초하여 인공지능을 통한 피드백을 포함한 트레이닝 서비스를 제공하는 실시예를 기술한다. 한편, 본 명세서에서는, 상기 사용자가 컨텐츠를 소비하는 과정에서, 발생 가능한 다양한 이벤트에 대응하여 적응적인 트레이닝 서비스를 제공하는 실시예 역시 첨부된 도면을 참조하여 설명한다.Hereinafter, in particular, an embodiment of providing a training service including feedback through artificial intelligence based on movement while consuming training content in an optimal environment to a content consumer, that is, a user entering a specific space will be described. Meanwhile, in the present specification, an embodiment in which an adaptive training service is provided in response to various events that may occur while the user consumes content is also described with reference to the accompanying drawings.
그 밖에, 본 명세서에서 단지 사용자로만 명명한 경우에도 문맥 등을 통하여 데이터 또는 그를 포함한 신호는 상기 사용자의 단말(terminal)을 통하여 이루어지는 것을 포함할 수 있다. 또한,　편의상 본 명세서와 도면에서 단수의 형태로 단말, 서버(server),　센서 등이 설명되고 도시된 경우에도 문맥을 통하여 실시예에 따라서는 복수의 형태 내지 의미를 나타내는 것으로 볼 수 있다.In addition, even when only the user is named in the present specification, data or a signal including the data through a context or the like may be included through a terminal of the user. In addition, for convenience, even when a terminal, a server, a sensor, etc. are described and illustrated in a singular form in the present specification and drawings, it can be seen as representing a plurality of forms or meanings according to embodiments through context.
한편,　본 명세서에서 본 발명의 이해를 돕고 설명의 편의상 사용자를 객체(object)로 표현할 수 있으며, 후술하는 바와 같이 신체의 일부에 대한 센싱 등이 필요한 경우에는 사용자로 혼용하여 사용할 수 있다.On the other hand, in this specification, a user may be expressed as an object to aid in understanding of the present invention and for convenience of description, and when sensing a part of the body is required, as described later, it may be mixed and used as a user.
도　1은 본 발명의 일실시예에 따른 트레이닝 서비스를 제공하는 서비스 시스템(100)의 개략도이다.1 is a schematic diagram of a service system 100 for providing a training service according to an embodiment of the present invention.
도 1을 참조하면, 트레이닝 서비스 시스템(100)은 서버(130)와 데이터베이스(DB: database)(140)를 포함하여, 특정 공간(120)에 객체(110)가 진입하면, 본 발명에 따른 트레이닝 서비스를 제공하는 것이다. 이때, 상기 객체(110)는 단말(미도시)을 휴대할 수 있다. Referring to FIG. 1, the training service system 100 includes a server 130 and a database (DB) 140, and when an object 110 enters a specific space 120, training according to the present invention It is to provide a service. In this case, the object 110 may carry a terminal (not shown).
상기에서, 특정 공간(120)이라 함은 해당 공간에 진입하는 객체(110)에 트레이닝 서비스를 제공하는 물리 공간(physical space)뿐만 아니라 상기 트레이닝 서비스를 제공하는 가상 공간(virtual space)도 포함하는 개념이다. 다만, 본 발명의 이해를 돕고 설명의 편의를 위하여, 이하에서는 물리 공간을 일실시예로 하여 설명하나, 본 발명이 반드시 이에 한정되는 것은 아니다.In the above, the specific space 120 is a concept including not only a physical space providing a training service to an object 110 entering the corresponding space, but also a virtual space providing the training service. to be. However, for the sake of better understanding of the present invention and convenience of description, the following describes a physical space as an embodiment, but the present invention is not necessarily limited thereto.
관련하여, 물리 공간으로서 특정 공간(120)은, 상기 트레이닝 서비스를 제공하기 위한 다양한 장치를 포함할 수 있다. 예컨대, 이러한 장치로서, 도 2 내지 3에서와 같은 평면 트레이닝 서비스가 재생되는 TV나 모니터와 같은 디스플레이 장치, 도 4와 같이 디스플레이 장치나 벽면 등에 평면(420) 또는 입체(430) 트레이닝 서비스 컨텐츠를 출력하는 프로젝터(projector)(410)나 3D(3-dimensional) 영상이나 홀로그램(Hologram)과 같은 입체 이미지 내지 비디오 제공이 가능한 디스플레이 장치 등이 포함될 수 있다.In connection, the specific space 120 as a physical space may include various devices for providing the training service. For example, as such a device, a flat 420 or three-dimensional 430 training service content is output to a display device such as a TV or a monitor on which a flat training service as shown in FIGS. 2 to 3 is reproduced, and a display device or a wall as shown in FIG. 4. A projector 410, a three-dimensional image such as a 3-dimensional (3D) image or a hologram, or a display device capable of providing a video may be included.
한편, 상기 특정 공간(120)에 포함된 장치는, 서비스 서버(130)와 통신하여 객체(110)의 트레이닝 컨텐츠 소비에 따른 피드백 서비스를 제공할 수 있다.Meanwhile, the device included in the specific space 120 may communicate with the service server 130 to provide a feedback service according to consumption of the training content of the object 110.
본 발명의 일실시예에 따른 상기　트레이닝 서비스 시스템(100)을 구성하는 각　구성요소 사이의 통신 내지 데이터 교환(이하‘데이터 커뮤니케이션’)은 유/무선 통신 네트워크를 통하여 이루어진다.　각 구성요소 사이에 통신 네트워크 내지 통신 프로토콜은 반드시 동일할 필요는 없다. 다시 말해,　상기　트레이닝 서비스 시스템(100) 내에서 데이터 커뮤니케이션이 원활하게 이루어지도록 통신 지원하는 통신 프로토콜이면 족하며, 상호 간에 상이한 통신 프로토콜이 이용되는 경우에는 관련 구성에서 적절히 변환 작업이 이루어질 수 있다.Communication or data exchange (hereinafter referred to as “data communication”) between each element constituting the “training service system 100” according to an embodiment of the present invention is performed through a wired/wireless communication network. The communication network or communication protocol between each component need not necessarily be the same. In other words, a communication protocol that supports communication to facilitate data communication within the 　above 　training service system 100 is sufficient, and when different communication protocols are used between each other, conversion may be performed appropriately in a related configuration.
한편,　상기 객체(110)가 단말을 소지한 경우에, 상기 단말(120)은,　상기 서비스 서버(130)에서 제공하는 트레이닝 서비스 관련 어플리케이션, 프로그램과 같은 소프트웨어를 미리 다운로드 받아 설치할 수도 있다.　이를 위해 상기 단말은, 관련 API(application program interface)　또는 임베디드 소프트웨어(embedded software)를 포함할 수도 있다.On the other hand, when the object 110 has a terminal, the terminal 120 may download and install software such as training service related applications and programs provided by the service server 130 in advance. To this end, the terminal may include a related application program interface (API) or embedded software.
한편, 그러한 단말은,　단말 장치,　터미널(terminal), MS(mobile station), MSS(mobile subscriber station), SS(subscriber station), AMS(advanced mobile station), WT(wireless terminal), MTC(machine-type communication)　장치, M2M(machine-to-machine)　장치, D2D　장치(device-to-device)　장치 중 적어도 하나일 수 있다. 물론,　이는 예시에 불과하며,　현재 개발되어 상용화되었거나 또는 향후 개발될 데이터 또는 신호 전송이 가능한 모든 장치를 포함하는 개념으로 해석되어야 한다.Meanwhile, such a terminal includes a terminal device, a terminal, a mobile station (MS), a mobile subscriber station (MSS), a subscriber station (SS), an advanced mobile station (AMS), a wireless terminal (WT), and a machine- It may be at least one of type communication) 　 device, M2M (machine-to-machine) 　 device, and D2D 　 device (device-to-device) 　 device. Of course, 　 is only an example, and should be interpreted as a concept including all devices capable of transmitting data or signals that are currently developed and commercially available or will be developed in the future.
또한,　상기 서비스 서버(130)는 유/무선 통신 네트워크를 통하여 상기 객체(110)의 단말 내지 상기 특정 공간(120) 내 적어도 하나 이상의 센서나 디스플레이 장치 등 디바이스와 데이터 커뮤니케이션을 수행 가능한 개체(entity)로,　본 발명에 따른 트레이닝 서비스 제공과 관련된 다양한 데이터(제어 커맨드 포함)를 생성,　처리, 제공,　저장 등 중 적어도 하나의 기능을 수행하거나 수행하도록 제어하는 하드웨어 또는/및 소프트웨어를 포함한 컴퓨팅 장치(computing device or apparatus)로 이해할 수 있다. 한편, 이러한 서비스 서버(130)는 실시예에 따라서는 컴퓨팅 장치, 프로세서(processor)와 같이 명명될 수도 있다.In addition, the service server 130 is an entity capable of performing data communication with devices such as at least one sensor or display device in the terminal of the object 110 or the specific space 120 through a wired/wireless communication network. As, a computing device including hardware or/and software that controls to perform or control at least one of generating, processing, providing, and storing various data (including control commands) related to provision of the training service according to the present invention. device or apparatus). Meanwhile, the service server 130 may be referred to as a computing device or a processor, depending on the embodiment.
실시예에 따르면, 전술한 서비스 서버(130)는,　클라우드(Cloud)　서버, IMS(IP multimedia subsystem)　서버,　텔레포니 어플리케이션(telephony application)　서버, IM(instant messaging)　서버, MGCF(media gateway control function)　서버, MSG(messaging gateway)　서버, CSCF(call session control function)　서버 등 중 적어도 하나일 수 있다.According to an embodiment, the above-described service server 130 is, 　Cloud 　 server, IMS (IP multimedia subsystem) 　 server, 　 telephony application 　 server, IM (instant messaging) 　 server, media gateway control function (MGCF) It may be at least one of a server, a messaging gateway (MSG) server, a call session control function (CSCF) server, and the like.
실시예에 따르면, 상기 유/무선 통신 네트워크는,　인터넷 프로토콜(IP)을 통하여 대용량 데이터 커뮤니케이션을 지원하는 IP 망 또는 서로 다른　IP　망을 통합한 올 아이피(All IP)　망일 수 있다.According to an embodiment, the wired/wireless communication network may be an IP network supporting large-capacity data communication through 　Internet Protocol (IP) or an All IP 　 network integrating different 　IP　 networks.
또한,　상기 유/무선 통신 네트워크는 유선망, WCDMA를 포함하는 이동 통신망, HSDPA(high speed downlink packet access)망 및　LTE(long term evolution)　망을 포함하는 이동 통신망, LTE advanced(LTE-A)를 포함하는 이동 통신망,　위성 통신망 및 와이파이(Wi-Fi)망 중 하나이거나 이들 중 적어도 하나 이상의 결합에 의하여 형성될 수도 있다.In addition, the wired/wireless communication network includes a wired network, a mobile communication network including WCDMA, a high speed downlink packet access (HSDPA) network, and a mobile communication network including a long term evolution (LTE) network, and LTE advanced (LTE-A). One of a mobile communication network, a satellite communication network, and a Wi-Fi network, or may be formed by a combination of at least one or more of them.
한편, 본 발명과 관련하여, 데이터베이스(140)는, 서비스 서버(130)나 특정 공간(120)에 구비된 디스플레이 장치 내에 구비되거나 원격에 위치할 수도 있다.Meanwhile, in relation to the present invention, the database 140 may be provided in the service server 130 or a display device provided in a specific space 120 or may be located remotely.
그 밖에, 트레이닝 서비스는, 어플리케이션(Application) 형태로 서비스될 수 있다. 예컨대, 디스플레이 장치는 서비스 서버(130)로부터 트레이닝 서비스를 위한 어플리케이션을 미리 다운로드 받아 설치하여 상기 트레이닝 서비스를 전반적으로 제어할 수 있다. 이 경우, 매 트레이닝 서비스 이후에 수집되는 다양한 데이터는 서비스 서버(130)로 전송하여, 상기 서비스 서버(130)에서 딥러닝을 통한 학습에 이용하도록 할 수 있으며, 이렇게 학습된 내용은 다시 상기 디스플레 장치로 업데이트 내지 업그레이드 형식으로 제공되어 보다 객체 커스터마이즈드뿐만 아니라 효율적인 트레이닝 서비스가 가능하도록 할 수 있다.In addition, the training service may be provided in the form of an application. For example, the display device may download and install an application for a training service from the service server 130 in advance, and control the training service as a whole. In this case, various data collected after each training service may be transmitted to the service server 130 so that the service server 130 can use it for learning through deep learning. It is provided in an updated or upgraded format to enable more efficient training services as well as object customization.
상기 데이터베이스(140)는 예를 들어, 본 발명과 관련하여, 트레이닝 서비스를 위한 다양한 레퍼런스 데이터를 저장하고 학습하여 업데이트를 할 수 있다. 상기 레퍼런스 데이터로, 예를 들어 자세 매치 여부 판단을 위한 기준 데이터, 다양한 트레이닝 서비스 데이터, 센싱 데이터 판단 참고 데이터, 심박수 추정을 위한 레퍼런스 데이터, 다양한 트레이닝 가이드 레퍼런스 데이터, 각종 재생 제어 기준 내지 참고 데이터, 이벤트 내지 인터럽트 상황과 관련된 데이터, 객체 커스터마이즈드와 관련된 레퍼런스 데이터, 심박수 등에 따른 칼로리 계산을 통한 운동량 추정 레퍼런스 데이터, 심박수와 트레이닝 서비스와의 상관관계 계산을 위한 레퍼런스 데이터, 심박수와 혈압 내지 건강을 포함한 응급 상황 판단을 위한 레퍼런스 데이터, 전술한 레퍼런스 데이터 중 적어도 하나와 질환 내지 병명 사이의 상관관계에 따른 레퍼런스 데이터, 다양한 피드백 데이터, 상기 피드백 데이터 전송에 따른 객체의 반응 내지 피드백 데이터, 피드백 데이터와 객체의 의도(예를 들어, 트레이닝 목적, 휴식 목적 등) 판단 등을 위한 레퍼런스 데이터, 심박수, 연령 내지 성별에 따른 트레이닝 서비스 가이드 레퍼런스 데이터 등을 위한 라이브러리(들)(Library)를 포함할 수 있다. 상기 서비스 서버(130)는 전숧한 바와 같이, 정기/비정기(periodic/aperiodic)로 상기 라이브러리 데이터를 업데이트(update)할 수 있다.The database 140 may be updated by storing and learning various reference data for a training service, for example, in connection with the present invention. As the reference data, for example, reference data for determining whether a posture match, various training service data, sensing data determination reference data, reference data for heart rate estimation, various training guide reference data, various regeneration control criteria or reference data, events Or interrupt situation data, object customized reference data, exercise quantity estimation reference data through calorie calculation based on heart rate, etc., reference data for calculating the correlation between heart rate and training service, heart rate and blood pressure, emergency situations including health Reference data for determination, reference data according to the correlation between at least one of the aforementioned reference data and disease or disease, various feedback data, response or feedback data of an object according to transmission of the feedback data, feedback data and intention of the object ( For example, it may include library(s) for reference data for determining (for example, training purpose, rest purpose, etc.), heart rate, and training service guide reference data according to age or gender. As described above, the service server 130 may update the library data on a periodic/aperiodic basis.
트레이닝 서비스 이용 대상, 즉 객체가 어린이, 환자, 노인 등과 같이 상대적으로 트레이닝 서비스에 따른 주의 내지 위험도가 높은 경우에는, 도 7과 같은 심박수 추정을 보다 자주 수행하여 발생 가능한 다양한 응급 상황에 대처하도록 할 수 있다. 관련하여, 상기와 같은 객체에 대해서는, 보호자나 미리 설정한 대상의 단말에 소정 주기로 계속하여 트레이닝 서비스에 대한 피드백 데이터와 함께 관련 참조 데이터를 미리 알림 데이터(alarm data or notification data)를 브로드캐스트(broadcast) 또는 전송할 수 있다. 한편, 응급 상황이 발생한 경우에도 마찬가지이며, 이 경우에는 특히 그와 함께 원격 진료(remote clinic)를 위한 미리 설정된 주치의의 단말로 심박수 추정 데이터, 피드백 데이터를 포함한 관련 데이터를 전송 후에 다양한 서비스 가이드 데이터를 제공할 수 있다. 한편, 이 경우에는 주치의의 의료 서비스 관련 데이터를 브로드캐스트하여 상기 특정 공간(120)의 주변에 위치한 단말에서 이를 수신하여 적절한 조치가 빠른 시간 내에 이루어지도록 서비스할 수도 있다.When the target of the training service, that is, the object has a relatively high level of attention or risk according to the training service, such as children, patients, the elderly, etc., heart rate estimation as shown in FIG. 7 can be performed more often to cope with various emergency situations that may occur. have. In relation to the above object, the related reference data together with the feedback data for the training service are broadcast to the guardian or the terminal of a predetermined target continuously at a predetermined period. ) Or can be transmitted. On the other hand, the same is the case in case of an emergency situation, and in this case, in this case, various service guide data are transmitted after transmitting related data including heart rate estimation data and feedback data to the terminal of the attending physician set in advance for remote clinic. Can provide. On the other hand, in this case, it is also possible to broadcast medical service-related data of the attending physician and receive the data from a terminal located in the vicinity of the specific space 120 so that appropriate measures can be performed in a short time.
도　2는 본 발명의 일실시예에 따른 서비스 서버(130)의 구성 블록도이고,　도　3과 4는 본 발명의 일실시예에 따른 특정 공간(120)에서의 트레이닝 서비스 제공 방법을 설명하기 위해 도시한 도면, 도 5는 본 발명의 일실시예에 따른 피드백 데이터 제공 방법을 설명하기 위해 도시한 도면, 도 6은 본 발명의 일실시예에 따른 트레이닝 서비스 제공 방법을 설명하기 위해 도시한 순서도, 도 7은 상기 도 6에 따른 트레이닝 서비스 제공 과정에서 발생 가능한 이벤트에 따른 트레이닝 서비스 제어 내지 제공 방법을 설명하기 위해 도시한 순서도, 그리고 도 8은 본 발명의 일실시예에 따른 재생 가이드 UI를 도시한 도면이다. 2 is a block diagram showing a configuration of a service server 130 according to an embodiment of the present invention, and FIGS. 3 and 4 are diagrams illustrating a method of providing a training service in a specific space 120 according to an embodiment of the present invention. 5 is a diagram illustrating a method of providing feedback data according to an embodiment of the present invention, and FIG. 6 is a flowchart illustrating a method of providing a training service according to an embodiment of the present invention; 7 is a flowchart illustrating a method of controlling or providing a training service according to an event that may occur in the process of providing the training service according to FIG. 6, and FIG. 8 is a diagram illustrating a playback guide UI according to an embodiment of the present invention. It is a drawing .
도 2를 참조하면, 본 발명에 따른 서비스 서버(130)는, 통신 모듈(201), 데이터 처리 모듈(202), 서비스 처리 모듈(203), 제어부(204) 등이 포함된다. 다만, 도 2에 도시된 서비스 서버(130)의 구성은 본 발명과 관련하여 핵심 구성요소만을 도시한 것으로, 실시예에 따라 하나 또는 그 이상의 다른 구성요소가 더 포함될 수 있으며, 반대의 경우도 마찬가지이다. 또한, 편의상 도 2에서 하나의 구성요소로 도시되었다고 하나 실시예에 따라서는 복수의 구성요소로 분리 구현될 수도 있고 반대로 복수의 구성요소들이 하나의 구성요소로 모듈화되어 구현될 수도 있다.2, the service server 130 according to the present invention includes a communication module 201, a data processing module 202, a service processing module 203, a control unit 204, and the like. However, the configuration of the service server 130 shown in FIG. 2 shows only the core components in relation to the present invention, and one or more other components may be further included according to embodiments, and vice versa. to be. In addition, although it is illustrated as a single component in FIG. 2 for convenience, according to an embodiment, a plurality of components may be separately implemented or, conversely, a plurality of components may be modularized into one component and implemented.
이하에서는, 도 6 및 도 7의 순서도를 참조하여 본 발명의 실시예에 따른 트레이닝 서비스를 도 2 내지 5를 참조하여 함께 설명한다.Hereinafter, a training service according to an embodiment of the present invention will be described together with reference to FIGS. 2 to 5 with reference to the flowcharts of FIGS. 6 and 7.
도 6은 본 발명의 일실시예에 따른 트레이닝 서비스 제공 방법을 설명하는 것이며, 도 7은 상기 도 6에 따른 트레이닝 서비스 제공 과정에서 발생 가능한 이벤트에 따른 트레이닝 서비스 제어 내지 제공 방법을 설명하는 것이다. 한편, 이하에서는, 편의상 각 단계는 서비스 서버(130)를 기준으로 설명하나, 반드시 이에 한정되는 것은 아니다. 즉, 본 발명의 이해를 돕기 위하여 일부는 특정 공간(120)의 장치 관점이 포함되어 기술될 수 있다. 또한, 비록 도시되진 않았으나, 본 발명을 실시하기 위해 필요한 일부 단계들이 더 포함되거나 반대로 생략될 수도 있다.6 illustrates a method of providing a training service according to an embodiment of the present invention, and FIG. 7 illustrates a method of controlling or providing a training service according to an event that may occur in the process of providing the training service according to FIG. 6. Meanwhile, in the following, for convenience, each step is described based on the service server 130, but is not limited thereto. That is, in order to help the understanding of the present invention, some of the viewpoints of the specific space 120 may be included and described. In addition, although not shown, some steps necessary for carrying out the present invention may be further included or vice versa.
먼저, 도 6과 도 2를 참조하여 전반적인 트레이닝 서비스 제공 방법을 설명하면, 다음과 같다.First, a method of providing an overall training service will be described with reference to FIGS. 6 and 2 as follows.
특정 공간(120)에는, 객체(110)의 진입을 식별하여 트레이닝 서비스를 제공하기 위하여 다양한 센서 디바이스들 내지 센서 모듈(220)이 설치되었을 수 있다. 이러한 센서 모듈(220)에는, 카메라, 이미지 센서, 적외선 센서, 위치 센서, 무게 내지 중력 센서, 움직임 감지를 위한 모션 센서, 오디오 감지 센서, 촉각 센서, 터치 센서 등 중 적어도 하나 이상이 포함될 수 있다.Various sensor devices or sensor modules 220 may be installed in the specific space 120 to identify the entry of the object 110 and provide a training service. The sensor module 220 may include at least one of a camera, an image sensor, an infrared sensor, a position sensor, a weight or gravity sensor, a motion sensor for motion detection, an audio detection sensor, a tactile sensor, and a touch sensor.
특정 공간(120)에 설치된 센서 모듈(220) 중 적어도 하나의 센서 디바이스에서 객체(110)의 진입 여부를 센싱하고, 상기 특정 공간(120)에 구비된 제어 디바이스(미도시)(실시예에 따라서는, 특정 공간에 설치된 프로젝터나 디스플레이 장치의 제어모듈이 해당)에서 센싱 결과 만약 해당 객체(110)가 상기 특정 공간(120)에 진입하는 것으로 감지되면(S601), 이를 서비스 서버(130)로 보고한다.At least one of the sensor modules 220 installed in the specific space 120 senses whether the object 110 enters or not, and a control device (not shown) provided in the specific space 120 (depending on the embodiment). If the object 110 is detected to enter the specific space 120 as a result of sensing by the control module of the projector or display device installed in a specific space (S601), this is reported to the service server 130 do.
서비스 서버(130)의 제어부(204)는 상기 특정 공간(120)의 제어 디바이스로부터 수신한 특정 공간(1200에 객체(110)가 진입을 감지에 대한 데이터가 수신되면, 상기 특정 공간(120)의 디스플레이 장치(210)를 통하여 본 발명에 따른 트레이닝 서비스 데이터가 제공 내지 출력되도록 한다(S602).When the control unit 204 of the service server 130 receives data for detecting the entry of the object 110 into the specific space 1200 received from the control device of the specific space 120, the control unit 204 of the specific space 120 Training service data according to the present invention is provided or output through the display device 210 (S602).
실시예에 따라서는, 상기 특정 공간(120)의 제어 디바이스는 상기 보고 후 상기 서비스 서버(130)의 제어와 상관없이, 소정 조건 여부를 스스로 판단하여 트레이닝 서비스를 제공하고, 그 사실을 별도 보고하거나 상기 보고시에 함께 해당 사실을 포함하여 전송할 수도 있다. 이 경우, 상기 특정 공간(120)의 제어 디바이스는 별도의 저장장치에 저장된 트레이닝 서비스 데이터 또는 외부 저장장치와 통신하여 스트리밍(streaming) 방식의 트레이닝 서비스 제공도 가능하다. 한편, 비록 도시되진 않았으나, 후자의 경우 상기 특정 공간(120)의 제어 디바이스는 객체(110)의 진입이 감지되면, 그와 동시에 해당 외부 저장장치 내지 서버에 서비스 제공 요청을 전송하여 통신 사정이나 데이터 용량 등에 따른 서비스 재생이 원활하게 이루어지도록 전체 트레이닝 서비스 데이터의 일부(되도록 재생 시작 부분) 데이터가 선처리되도록 제어하고, 상기 감지 후 소정 시점에 바로 서비스되도록 할 수 있다. 이는 항상 그런 것은 아니며, 네트워크 트래픽 등 사정을 고려하여 적절히 결정되고 처리될 수 있다.Depending on the embodiment, the control device of the specific space 120 provides a training service by self-determining whether or not a predetermined condition is irrespective of the control of the service server 130 after the report, and reports the fact separately. In the case of the report, it may be transmitted with the corresponding fact. In this case, the control device of the specific space 120 may provide training service data in a separate storage device or a streaming-type training service by communicating with an external storage device. Meanwhile, although not shown, in the latter case, when the entry of the object 110 is detected, the control device of the specific space 120 transmits a service provision request to the corresponding external storage device or server, Part of the entire training service data (preferably at the beginning of reproduction) data is controlled to be pre-processed so that service reproduction according to capacity, etc. may be performed smoothly, and the service may be performed immediately at a predetermined time after detection. This is not always the case, and can be appropriately determined and handled in consideration of circumstances such as network traffic.
다만, 이하에서는 편의상 트레이닝 서비스의 제공은 서비스 서버(130)의 제어에 따라 이루어지는 것으로 설명한다. However, in the following description, for convenience, provision of the training service is performed under the control of the service server 130.
이후, 서비스 서버(130)는 상기 S602 단계의 트레이닝 서비스 제공을 제어한 후에 정기/비정기로 계속하여 이벤트(event) 발생 여부를 모니터링(monitoring) 한다(S603).Thereafter, after controlling the provision of the training service in step S602, the service server 130 continuously monitors whether or not an event occurs (S603).
여기서, 이벤트라 함은, 트레이닝 서비스 데이터의 재생 중단, 재생 중지, 재생 정지 등 요청 수신, 상기 트레이닝 서비스 데이터의 정상적인 재생 종료, 및 상기 트레이닝 서비스 데이터 재생 과정에서 미리 정의된 인터럽트(interrupt) 발생 등을 의미한다. 즉, 상기 이벤트는 트레이닝 서비스 제공 과정에서 상기 트레이닝 서비스의 재생 제어(reproduction or playback control)와 관련된 다양한 상황을 나타낼 수 있다.Here, the event refers to the reception of requests such as interruption of reproduction of the training service data, suspension of reproduction, and suspension of reproduction, the normal termination of reproduction of the training service data, and occurrence of a predefined interrupt during the reproduction of the training service data. it means. That is, the event may represent various situations related to reproduction or playback control of the training service in the course of providing the training service.
한편, 상기에서, 인터럽트는, 미리 정의된 시간 동안 객체(110)의 움직임에 관한 모션 데이터(motion data)가 감지되지 않거나, 상기 객체(110)에 대해 센싱한 모션 데이터와 상기 제공되는 트레이닝 서비스 데이터의 기준 데이터(reference data)를 참조 비교한 결과 그 결과인 비교 데이터에 기초하여 산출되는 트레이닝 서비스 매치율(match ratio)이 미리 정의된 임계치(threshold) 미만인 경우에 발생될 수 있다.Meanwhile, in the above, the interrupt is, motion data related to the motion of the object 110 is not detected for a predefined time, or motion data sensed for the object 110 and the provided training service data It may be generated when the training service match ratio calculated based on the comparison data that is a result of reference comparison with reference data of is less than a predefined threshold.
서비스 서버(130)는 이후 감지된 이벤트를 식별하고(S604), 상기 식별된 이벤트 내용에 따라 트레이닝 서비스의 재생을 제어하고(S605), 인공 지능 기반의 피드백 데이터 상기 특정 공간(120)의 디스플레이 장치 등을 통하여 제공한다(S606).The service server 130 then identifies the detected event (S604), controls the reproduction of the training service according to the identified event content (S605), and displays the artificial intelligence-based feedback data of the specific space 120 Provided through the like (S606).
상기 피드백을 제공과 관련하여, 인공지능(AI: Artificial Intelligence)가 이용될 수 있으며, 심박수 추정 역시 마찬가지이다. 관련하여, 상기 인공지능은 학습된 인공신경망(artificial neural network)나 인공지능 및 인공신경망을 의미할 수 있다. 한편, 상기에서 인공지능은 다양한 머신 러닝(machine learning) 기법을 통해 구현될 수 있다. 또는, 인공신경망의 학습에 다양한 머신 러닝 기법이 이용될 수 있다. 상기에서, 머신 러닝 기법으로 딥 러닝(deep learning)이 일실시예로 이용될 수 있으며, 지도 학습(supervised learning)이나 비지도 학습(unsupervised learning) 방식으로 학습될 수 있다. 또한, 인공신경망은 DNN(Deep Neural Network), CNN(Convolutional Neural Network), RNN(Recurrent Neural Network) 등 중 적어도 하나가 이용될 수 있다. 다만, 본 발명은 이에 한정되는 것은 아니며, 현재 개발된 또는 향후 개발될 다양한 인공지능과 관련된 기술이 참조될 수 있다.In connection with providing the feedback, artificial intelligence (AI) can be used, and the same is true for heart rate estimation. In relation to this, the artificial intelligence may refer to a learned artificial neural network or artificial intelligence and artificial neural network. Meanwhile, in the above, artificial intelligence may be implemented through various machine learning techniques. Alternatively, various machine learning techniques may be used to learn artificial neural networks. In the above, as a machine learning technique, deep learning may be used as an example, and learning may be performed in a supervised learning or unsupervised learning method. In addition, at least one of a deep neural network (DNN), a convolutional neural network (CNN), and a recurrent neural network (RNN) may be used as the artificial neural network. However, the present invention is not limited thereto, and various technologies related to artificial intelligence currently developed or developed in the future may be referenced.
실시예에 따라, 상기 제공되는 피드백 데이터는, 기 제공 중인 트레이닝 서비스 대비 자세 내지 동작의 매치율에 대한 데이터를 포함할 수 있으며, 이러한 데이터는 텍스트, 오디오, 이미지 및 비디오 중 적어도 하나의 형태로 제공될 수 있다.According to an embodiment, the provided feedback data may include data on a match rate of posture or motion compared to a training service that is being provided, and such data is provided in at least one of text, audio, image, and video. Can be.
도 5를 참조하면, 이렇게 제공되는 피드백 데이터는, 재생 바 형태로 제공될 수 있다. 이때, 상기 피드백 데이터는, 상기 제공되는 재생 바 상에 상기 자세 내지 동작의 매치율에 따라, 그 크기 또는/및 색상이 차별화된 형태의 인디케이터(501 내지 507)를 이용할 수 있다. 도 5를 참조하면, 제1 인디케이터(501), 제3 인디케이터(503) 및 제6 인디케이터(506)는 기준 데이터 대비 자세 내지 동작의 매치율이 현저히 낮은 경우를 나타내며, 제4 인디케이터(504)는 매치율이 기준 데이터에 만족하진 못하였으나 그 정도가 상기 기준 데이터와 차이가 많지 않은 경우를 나타낼 수 있다. 이는 기준 데이터를 기준으로 매치율을 제1 부적합 범위, 제2 부적합 범위 등으로 구분하여, 해당 범위에 따라 결정될 수 있는데 이는 비록 매치율이 낮다고 하더라도 기준 매치율 즉, 적합/부적합 매치율의 설정에 따라 부적합도 다양하게 구부할 필요가 있기 때문이다. 마찬가지로, 제2 인디케이터(502), 제5 인디케이터(505)와 제7 인디케이터(507)는 적합한 매치율을 보인 부분을 나타내며, 특히 상기 제5 인디케이터(505)의 경우에는 퍼펙트 즉, 100% 매치된 경우를 나타낼 수 있다. 다만, 이러한 방식이나 정의는 일실시예일 뿐, 본 발명이 이에 한정되는 것은 아니다.Referring to FIG. 5, feedback data thus provided may be provided in the form of a playback bar. In this case, as the feedback data, indicators 501 to 507 having a size or/and color differentiated according to a match rate of the posture or motion may be used on the provided playback bar. Referring to FIG. 5, the first indicator 501, the third indicator 503, and the sixth indicator 506 indicate a case in which the match rate of posture or motion is significantly lower than the reference data, and the fourth indicator 504 is It may represent a case where the match rate is not satisfied with the reference data, but the degree of the match is not much different from the reference data. This can be determined according to the corresponding range by dividing the match rate into a first non-conforming range, a second non-conforming range, etc. based on the reference data. This is because there is a need to bend nonconformities in various ways. Likewise, the second indicator 502, the fifth indicator 505, and the seventh indicator 507 represent a portion showing a suitable match rate, and in particular, in the case of the fifth indicator 505, perfect, that is, 100% matched. May indicate a case. However, this method or definition is only an example, and the present invention is not limited thereto.
한편, 도 5에 비록 되시되진 않았으나, 재생 바에 매치율에 대한 정도를 숫자 등을 이용하여 표시하여 보다 직관적으로 식별되도록 구현할 수도 있다.On the other hand, although not shown in FIG. 5, the degree of the match rate may be displayed on the playback bar using numbers or the like to be more intuitively identified.
또한, 본 발명의 이해를 돕고 설명의 편의를 위하여 도 5에서는 비록 재생 바 형태의 피드백 데이터를 예시하고 그에 관해 설명하였으나, 본 발명은 이에 한정되는 것은 아니다.In addition, although the feedback data in the form of a playback bar is exemplified and described in FIG. 5 for aiding understanding of the present invention and convenience of description, the present invention is not limited thereto.
예를 들어, 상기 재생 바는 히스토그램(histogram)을 이용하여 구현되거나 대체될 수 있으며, 그와 함께 또는 별개로 텍스트 데이터나 음성을 통하여 피드백 데이터가 구현될 수도 있다.For example, the playback bar may be implemented or replaced using a histogram, and feedback data may be implemented through text data or voice separately or together with it.
물론, 상기한 피드백 데이터 구현 방식은 서로 조합되어 구현될 수도 있으며, 비록 도시하거나 설명되진 않았으나, 결과 데이터를 제공하는 다양한 방식이 참조되거나 구현을 위한 조합으로 이용될 수 있다.Of course, the feedback data implementation methods described above may be implemented in combination with each other, and although not illustrated or described, various methods of providing result data may be referred to or used as a combination for implementation.
다음으로, 도 7과 도 2를 참조하여 기 도 6에 따른 트레이닝 서비스 제공 과정에서 발생 가능한 이벤트에 따른 트레이닝 서비스 제어 내지 제공 방법을 설명하면, 다음과 같다.Next, a method of controlling or providing a training service according to an event that may occur in the process of providing the training service according to FIG. 6 will be described with reference to FIGS. 7 and 2.
서비스 서버(130)는, 센서 모듈(210)을 통하여 상기 객체(110)의 안면 인식 데이터를 센싱하여 추출하고(S701), 상기 추출한 객체(110)의 안면 인식 데이터로부터 상기 객체(110)의 심박수 데이터를 산출한다(S702).The service server 130 senses and extracts the facial recognition data of the object 110 through the sensor module 210 (S701), and the heart rate of the object 110 from the extracted facial recognition data of the object 110 Data is calculated (S702).
상기 서비스 서버(130)는, 이렇게 산출한 객체(110)의 심박수 데이터를, 미리 정의된 기준 데이터 또는 상기 트레이닝 서비스 데이터 제공 전 추출한 심박수 내지 감지된 객체(110)의 평균 심박수 데이터를 비교한다(S703). 상기 비교 결과 양 심박수 데이터의 차이가 임계치 초과하면, 트레이닝 서비스 재생과 관련된 재생 가이드를 제공하고(S704), 이벤트 또는 인터럽트 발생을 위한 제어 커맨드를 발생시킨다(S705).The service server 130 compares the calculated heart rate data of the object 110 with predefined reference data or the heart rate extracted before the training service data is provided, or the average heart rate data of the detected object 110 (S703). ). As a result of the comparison, when the difference between the two heart rate data exceeds the threshold value, a reproduction guide related to reproduction of the training service is provided (S704), and a control command for generating an event or an interrupt is generated (S705).
상기 서비스 서버(130)는 이후, 상기 발생시킨 제어 커맨드를 참조하여, 트레이닝 서비스의 재생을 제어하고(S706), 관련 피드백을 제공한다(S707).The service server 130 then controls reproduction of the training service by referring to the generated control command (S706) and provides related feedback (S707).
여기서, 상기 이벤트 또는 인터럽트를 발생시키도록 생성된 제어 커맨드는, 상기 트레이닝 서비스 데이터의 재생 속도 제어, 상기 트레이닝 서비스 데이터의 재생 중단 내지 종료, 상기 피드백 데이터 출력 및 응급 신호 브로드캐스트 중 적어도 하나를 포함할 수 있다.Here, the control command generated to generate the event or interrupt may include at least one of: controlling a reproduction rate of the training service data, stopping or ending reproduction of the training service data, outputting the feedback data, and broadcasting an emergency signal. I can.
또는/및, 상기 이벤트 또는 인터럽트를 발생시키도록 생성된 제어 커맨드는, 상기 트레이닝 서비스 데이터의 재생 제어, 상기 트레이닝 서비스 데이터의 재생 종료 및 피드백 데이터 제공, 및 응급 신호 브로드캐스트 여부에 관한 노티피케이션 데이터(notification data) 출력 제어 데이터 중 적어도 하나의 제어를 위한 제어 데이터를 포함할 수 있다.Or/and, the control command generated to generate the event or the interrupt may include control of reproduction of the training service data, termination of reproduction of the training service data, and provision of feedback data, and notification data regarding whether or not an emergency signal is broadcast. (notification data) It may include control data for controlling at least one of the output control data.
상기에서, 재생 가이드는 예를 들어, 도 8의 (c)와 같은 형태로 이루어질 수 있으나, 본 발명이 이에 한정되는 것은 아니다.In the above, the reproduction guide may be formed, for example, in the form of (c) of FIG. 8, but the present invention is not limited thereto.
한편, 상기 재생 가이드로 상기 S703 단계의 비교 결과 양 심박수 데이터의 차이가 임계치를 미만이면, 이에 기초하여 산출 가능한 운동량 또는 산출한 운동량이 적어 상대적으로 트레이닝 서비스의 효용성이 낮을 수 있으므로, 도 8의 (d)와 같이, 운동량이 적으므로 운동 강도를 높일 수 있는 재생 가이드 또는 현재 재생 중인 트레이닝 서비스의 상위 레벨의 트레이닝 서비스를 이용할 수 있도록 유도할 수 있다. 여기서, 상위 레벨이라 함은 심박수 내지 운동량을 기준으로 보다 강도가 높은 트레이닝 서비스를 의미한다.On the other hand, if the difference between the two heart rate data as a result of the comparison in step S703 with the replay guide is less than the threshold, the amount of exercise that can be calculated or the amount of exercise calculated based on this may be relatively low, and thus the effectiveness of the training service may be relatively low. As shown in d), since the amount of exercise is small, it is possible to induce to use a reproduction guide capable of increasing exercise intensity or a higher level training service of the currently playing training service. Here, the higher level refers to a training service having a higher intensity based on a heart rate or an amount of exercise.
한편, 상기 서비스 서버(130)는, 상기 S703 단계 비교 결과 또는 트레이닝 서비스 재생 과정에 피드백을 위해 실시간 또는 비실시간 수집되는 데이터에 기초하여 재생 제어를 위한 가이드를 도 8의 (a)나 (b)와 같은 형태로 제공할 수도 있다. 예컨대, 재생 중에 객체(110)의 트레이닝 서비스 매치율이 현저히 낮아, 트레이닝 서비스를 계속 이용함이 부적당하다고 판단되는 경우 등에는, 그때까지의 피드백 데이터를 제공하고 해당 객체(110)에 부합되는 새로운 트레이닝 서비스나 기타 관련 부가 데이터를 제공할 수 있다.On the other hand, the service server 130, based on the data collected in real-time or non-real-time for feedback on the comparison result of the step S703 or the training service reproduction process, the guide for reproduction control in (a) or (b) of FIG. It can also be provided in the form of For example, when the match rate of the training service of the object 110 is significantly low during playback, and it is determined that it is inappropriate to continue using the training service, the feedback data up to that point is provided, and a new training service corresponding to the object 110 is provided. Or other relevant additional data may be provided.
반면, 재생 종료 시점에 또는 재생이 종료되진 않았으나 미리 설정된 기준 매치율을 만족하거나 해당 시점에서 판단 결과 재생 종료 시점에 상기 매치율 충족이 확실시되는 경우에 미리, 이미 해당 트레이닝 서비스는 훌륭히 완수한 것으로 판단하여 해당 트레이닝 서비스이 계속 이용 등이 효율이 떨어진다고 판단되면 도 8의 (b)와 같이 재생 가이드를 제공하고 상위 레벨이나 새로운 트레이닝 서비스의 이용을 유도할 수 있다.On the other hand, when playback ends or when playback is not finished but satisfies the preset reference match rate or when it is confirmed that the match rate is satisfied at the end of playback as a result of judgment at that point, it is determined that the training service has already been successfully completed Accordingly, if it is determined that the continued use of the corresponding training service is less efficient, as shown in (b) of FIG. 8, a reproduction guide may be provided, and the use of a higher level or new training service may be induced.
한편, 상기 심박수 추정과 관련하여, 센서를 통하여 객체를 센싱하여 이미지 데이터를 획득하되, 여기서,　상기 획득되는 이미지 데이터는 상기 객체의 전부 또는 일부일 수 있다.　다만, 상기 심박수 추정과 관련하여, 상기 객체를 센싱함에 있어서 적어도 얼굴 부분을 포함하도록 한다.　Meanwhile, in relation to the heart rate estimation, image data is obtained by sensing an object through a sensor, where 　 the acquired image data may be all or part of the object. However, in relation to the heart rate estimation, at least a face portion is included in sensing the object.
한편, 서비스 서버(130)는, 트레이닝 서비스 과정에서 발생하거나 그 이후에 발생한 다양한 데이터를 포함하여 이의 피드백을 위한 다수의 라이브러리를 생성하여 객체(110)로 리턴할 수 있다. 이때, 실시예에 따라, 상기 리턴되는 데이터는 직접 객체(110)의 단말이나 특정 공간(120) 내 디스플레이 장치나 제어 디바이스로 전송되거나 URL 등을 통한 간접 방식으로 서비스 처리될 수도 있다.Meanwhile, the service server 130 may generate a plurality of libraries for feedback, including various data generated during or after the training service process, and return them to the object 110. In this case, according to an embodiment, the returned data may be directly transmitted to a terminal of the object 110 or a display device or a control device in a specific space 120, or may be service-processed in an indirect manner through a URL or the like.
한편,　상술한 방법은,　컴퓨터에서 실행될 수 있는 프로그램으로 작성 가능하고,　컴퓨터 판독 가능 매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다.　또한,　상술한 방법에서 사용된 데이터의 구조는 컴퓨터 판독 가능 매체에 여러 수단을 통하여 기록될 수 있다.　본 발명의 다양한 방법들을 수행하기 위한 실행 가능한 컴퓨터 코드를 저장하는 컴퓨터 판독 가능 매체는 마그네틱 저장매체(예를 들면,　롬,플로피 디스크,　하드 디스크 등),　광학적 판독 매체(예를 들면,　시디롬, DVD　등)와 같은 저장 매체를 포함한다.On the other hand, the above-described method can be written as a program that can be executed on a computer, and can be implemented in a general-purpose digital computer that operates the program using a computer-readable medium. Also, the structure of the data used in the above-described method can be recorded on a computer-readable medium through various means. Computer-readable media storing executable computer code for performing various methods of the present invention include magnetic storage media (e.g., 　, floppy disk, 　 hard disk, etc.), and optical reading media (e.g., CD-ROM, DVD Etc.).
본원 발명의 실시예들과 관련된 기술 분야에서 통상의 지식을 가진 자는 상기 기재의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다.　그러므로,　개시된 방법들은 한정적인 관점이 아닌 설명적 관점에서 고려되어야 한다.　본 발명의 범위는 발명의 상세한 설명이 아닌 특허청구 범위에 나타나며,　그와 동등한 범위 내에 있는 모든 차이점은 본 발명의 범위에 포함되는 것으로 해석되어야 한다.Those of ordinary skill in the technical field related to the embodiments of the present invention will appreciate that it may be implemented in a modified form without departing from the essential characteristics of the above description. Therefore, the disclosed methods should be considered from a descriptive point of view rather than a limiting point of view. The scope of the present invention appears in the claims rather than the detailed description of the invention, and all differences within the scope equivalent thereto should be construed as being included in the scope of the present invention.
본 발명인 피지컬 트레이닝을 위한 데이터 처리 등을 위한 방법 및 이를 위한 장치나 시스템에 적용하는 것이 가능하다.　It is possible to apply the present invention to a method for processing data for physical training, and an apparatus or system therefor.

Claims (20)

  1. 특정 공간 진입 객체를 감지하는 단계;Detecting an object entering a specific space;
    감지된 객체에 트레이닝 서비스 데이터를 제공하는 단계;Providing training service data to the detected object;
    이벤트 발생을 감지하는 단계;Detecting occurrence of an event;
    감지된 이벤트를 식별하는 단계; 및Identifying the detected event; And
    상기 식별된 이벤트 내용을 참조하여 인공 지능 기반 피드백 데이터 제공하는 단계;Providing artificial intelligence-based feedback data by referring to the identified event content;
    를 포함하여 이루어지는 서비스 서버에서 트레이닝 서비스 제공 방법.Training service providing method in a service server comprising a.
  2. 제1항에 있어서,The method of claim 1,
    상기 이벤트는,The above event is:
    트레이닝 서비스 데이터의 재생 중단 내지 중지 요청 수신, 상기 트레이닝 서비스 데이터의 재생 종료, 및 상기 트레이닝 서비스 데이터 재생 과정에서 미리 정의된 인터럽트 발생 중 적어도 하나에 의해 발생되는 것을 특징으로 하는 서비스 서버에서 트레이닝 서비스 제공 방법.A method for providing a training service in a service server, characterized in that generated by at least one of: receiving a request to stop or stop the reproduction of training service data, ending reproduction of the training service data, and generating a predefined interrupt during the reproduction process of the training service data. .
  3. 제2항에 있어서,The method of claim 2,
    상기 인터럽트는,The above interrupt is:
    미리 정의된 시간 동안 객체로부터 움직임 데이터가 감지되지 않거나,Motion data is not detected from the object for a predefined time
    객체의 움직임 데이터와 상기 제공되는 트레이닝 서비스 데이터의 비교 데이터를 기준으로 산출되는 트레이닝 서비스 매치율이 미리 정의된 임계치 미만인 경우에 발생되는 것을 특징으로 하는 서비스 서버에서 트레이닝 서비스 제공 방법.A training service providing method in a service server, characterized in that generated when a training service match rate calculated based on comparison data between motion data of an object and the provided training service data is less than a predefined threshold.
  4. 제2항에 있어서,The method of claim 2,
    상기 객체의 안면 인식 데이터를 추출하는 단계;Extracting facial recognition data of the object;
    상기 추출한 객체의 안면 인식 데이터로부터 상기 객체의 심박수 데이터를 산출하는 단계; 및Calculating heart rate data of the object from the extracted facial recognition data of the object; And
    미리 정의된 기준 데이터 또는 상기 트레이닝 서비스 데이터 제공 전 산출한 심박수 내지 감지된 객체의 평균 심박수 데이터를 비교하는 단계; Comparing a heart rate calculated before providing predefined reference data or the training service data, or average heart rate data of the detected object;
    를 더 포함하여 이루어지는 것을 특징으로 하는 서비스 서버에서 트레이닝 서비스 제공 방법.A method for providing a training service in a service server, characterized in that it further comprises a.
  5. 제4항에 있어서,The method of claim 4,
    상기 비교 결과 양 심박수 데이터의 차이가 임계치 미만이면, 상기 이벤트 또는 인터럽트 발생을 위한 제어 커맨드를 발생시키는 단계;Generating a control command for generating the event or interrupt when the difference between the two heart rate data is less than a threshold as a result of the comparison;
    를 더 포함하여 이루어지는 것을 특징으로 하는 서비스 서버에서 트레이닝 서비스 제공 방법.A method for providing a training service in a service server, characterized in that it further comprises a.
  6. 제4항에 있어서, The method of claim 4,
    상기 이벤트 또는 인터럽트를 발생시키도록 생성된 제어 커맨드는,The control command generated to generate the event or interrupt,
    상기 트레이닝 서비스 데이터의 재생 속도 제어, 상기 트레이닝 서비스 데이터의 재생 중단 내지 종료, 상기 피드백 데이터 출력 및 응급 신호 브로드캐스트 중 적어도 하나를 포함하는 것을 특징으로 하는 서비스 서버에서 트레이닝 서비스 제공 방법.And at least one of: controlling a reproduction rate of the training service data, stopping or ending reproduction of the training service data, outputting the feedback data, and broadcasting an emergency signal.
  7. 제4항에 있어서, The method of claim 4,
    상기 이벤트 또는 인터럽트를 발생시키도록 생성된 제어 커맨드는,The control command generated to generate the event or interrupt,
    상기 트레이닝 서비스 데이터의 재생 제어, 상기 트레이닝 서비스 데이터의 재생 종료 및 피드백 데이터 제공, 및 응급 신호 브로드캐스트 여부에 관한 노티피케이션 데이터 출력 제어 데이터 중 적어도 하나의 제어를 위한 제어 데이터를 포함하는 것을 특징으로 하는 서비스 서버에서 트레이닝 서비스 제공 방법.And control data for controlling at least one of control data for reproduction control of the training service data, termination of reproduction of the training service data and provision of feedback data, and control data for outputting notification data regarding whether to broadcast an emergency signal. How to provide training service in the service server.
  8. 제1항에 있어서,The method of claim 1,
    상기 특정 공간은,The specific space,
    트레이닝 서비스를 구현 가능한 가상 공간과 트레이닝 서비스 디바이스가 설치된 물리 공간 중 적어도 하나인 것을 특징으로 하는 서비스 서버에서 트레이닝 서비스 제공 방법.A method of providing a training service in a service server, comprising at least one of a virtual space capable of implementing a training service and a physical space in which a training service device is installed.
  9. 제1항에 있어서,The method of claim 1,
    상기 제공되는 피드백 데이터는,The provided feedback data,
    상기 제공되는 트레이닝 서비스 대비 자세 내지 동작의 매치율에 대한 데이터를 포함하며, 텍스트, 오디오 및 이미지 중 적어도 하나의 형태로 제공하는 것을 특징으로 하는 서비스 서버에서 트레이닝 서비스 제공 방법.A method for providing a training service in a service server, comprising data on a match rate of a posture or motion compared to the provided training service, and providing at least one of text, audio, and image.
  10. 제9항에 있어서,The method of claim 9,
    상기 제공되는 피드백 데이터는,The provided feedback data,
    재생 바 형태로 제공되며, 상기 제공되는 재생 바 상에 상기 자세 내지 동작의 매치율에 따라 크기와 색상 중 적어도 하나가 차별화된 형태의 인디케이터가 포함되는 것을 특징으로 하는 서비스 서버에서 트레이닝 서비스 제공 방법.A method of providing a training service in a service server, characterized in that it is provided in the form of a play bar, and an indicator in a form in which at least one of a size and a color is differentiated according to a match rate of the posture or motion is included on the provided play bar.
  11. 트레이닝 서비스를 제공하는 서비스 서버에 있어서,In a service server that provides training services,
    데이터베이스부;Database unit;
    특정 공간 진입 객체와 이벤트 발생을 감지하는 센서 모듈; 및A sensor module that detects an object entering a specific space and an event; And
    감지된 객체에 트레이닝 서비스 데이터를 제공하고, 상기 감지된 이벤트를 식별하여, 식별된 이벤트 내용을 참조하여 인공 지능 기반 피드백 데이터 제공하도록 제어하는 제어부;A control unit that provides training service data to the detected object, identifies the detected event, and controls to provide artificial intelligence-based feedback data by referring to the identified event content;
    를 포함하여 이루어지는 서비스 서버.Service server comprising a.
  12. 제11항에 있어서,The method of claim 11,
    상기 이벤트는,The above event is:
    트레이닝 서비스 데이터의 재생 중단 내지 중지 요청 수신, 상기 트레이닝 서비스 데이터의 재생 종료, 상기 트레이닝 서비스 데이터 재생 과정에서 미리 정의된 인터럽트 발생 중 적어도 하나에 의해 발생되는 것을 특징으로 하는 서비스 서버.The service server, characterized in that generated by at least one of: receiving a request for stopping or stopping the reproduction of training service data, ending reproduction of the training service data, and generating a predefined interrupt during the reproduction process of the training service data.
  13. 제12항에 있어서,The method of claim 12,
    상기 제어부는,The control unit,
    미리 정의된 시간 동안 상기 객체로부터 움직임 데이터가 감지 또는 수신되지 않거나, 상기 객체의 움직임 데이터와 기제공된 트레이닝 서비스 데이터의 비교 데이터를 기준으로 산출되는 트레이닝 서비스 매치율이 미리 정의된 임계치 미만인 경우에만 상기 이벤트를 발생시키도록 제어하는 것을 특징으로 하는 서비스 서버.The event only when motion data is not detected or received from the object for a predefined time, or the training service match rate calculated based on comparison data between the motion data of the object and the previously provided training service data is less than a predefined threshold. Service server, characterized in that for controlling to generate the.
  14. 제12항에 있어서,The method of claim 12,
    상기 제어부는,The control unit,
    상기 객체의 안면 인식 데이터를 추출하고, 상기 추출한 객체의 안면 인식 데이터로부터 상기 객체의 심박수 데이터를 산출하여, 미리 정의된 기준 데이터 또는 상기 트레이닝 서비스 데이터 제공 전 산출한 심박수 내지 감지된 객체의 평균 심박수 데이터를 비교하는 것을 특징으로 하는 서비스 서버.Extracting the facial recognition data of the object, calculating the heart rate data of the object from the facial recognition data of the extracted object, the heart rate calculated before providing predefined reference data or the training service data, or the average heart rate data of the detected object Service server, characterized in that to compare.
  15. 제14항에 있어서,The method of claim 14,
    상기 제어부는,The control unit,
    상기 비교 결과 양 심박수 데이터의 차이가 임계치 미만이면, 상기 이벤트 또는 인터럽트 발생을 위한 제어 커맨드를 발생하도록 제어하는 것을 특징으로 하는 서비스 서버.If the difference between the two heart rate data as a result of the comparison is less than a threshold value, the service server comprising controlling to generate a control command for generating the event or interrupt.
  16. 제14항에 있어서, The method of claim 14,
    상기 제어부는,The control unit,
    상기 트레이닝 서비스 데이터의 재생 속도 제어, 상기 트레이닝 서비스 데이터의 재생 중단 내지 종료, 및 상기 피드백 데이터 출력 및 응급 신호 브로드캐스트 중 적어도 하나를 포함하여 상기 이벤트 또는 인터럽트를 발생하도록 제어 커맨드를 생성하는 것을 특징으로 하는 서비스 서버.And generating a control command to generate the event or interrupt, including at least one of controlling the reproduction rate of the training service data, stopping or ending the reproduction of the training service data, and outputting the feedback data and broadcasting an emergency signal. Service server.
  17. 제14항에 있어서, The method of claim 14,
    상기 제어부는,The control unit,
    상기 트레이닝 서비스 데이터의 재생 제어, 상기 트레이닝 서비스 데이터의 재생 종료 및 피드백 데이터 제공, 및 응급 신호 브로드캐스트 여부에 관한 노티피케이션 데이터 출력 제어 데이터 중 적어도 하나의 제어를 위한 제어 데이터를 포함하는 상기 이벤트 또는 인터럽트를 발생시키는 제어 커맨드를 생성하는 것을 특징으로 하는 서비스 서버.The event including control data for controlling at least one of the reproduction control of the training service data, the reproduction termination of the training service data and the provision of feedback data, and notification data output control data regarding whether or not an emergency signal is broadcast; or A service server comprising generating a control command for generating an interrupt.
  18. 제11항에 있어서,The method of claim 11,
    상기 특정 공간은,The specific space,
    트레이닝 서비스를 구현 가능한 가상 공간과 트레이닝 서비스 디바이스가 설치된 물리 공간 중 적어도 하나인 것을 특징으로 하는 서비스 서버.A service server comprising at least one of a virtual space capable of implementing a training service and a physical space in which a training service device is installed.
  19. 제11항에 있어서,The method of claim 11,
    상기 제어부는,The control unit,
    상기 제공되는 트레이닝 서비스 대비 자세 내지 동작의 매치율에 대한 데이터가 포함된 피드백 데이터를 제공하되, 텍스트, 오디오 및 이미지 중 적어도 하나의 형태로 상기 피드백 데이터를 제공하는 것을 특징으로 하는 서비스 서버.And providing feedback data including data on a match rate of posture or motion compared to the provided training service, and providing the feedback data in the form of at least one of text, audio, and image.
  20. 제19항에 있어서,The method of claim 19,
    상기 제어부는,The control unit,
    상기 피드백 데이터를 재생 바 형태로 제공하되, 상기 제공되는 재생 바 상에 상기 자세 내지 동작의 매치율에 따라 크기와 색상 중 적어도 하나가 차별화된 형태의 인디케이터가 포함되도록 제어하는 것을 특징으로 하는 서비스 서버.Provides the feedback data in the form of a playback bar, and controls to include an indicator of a differentiated form of at least one of a size and a color on the provided playback bar according to a match rate of the posture or motion .
PCT/KR2019/015976 2019-11-20 2019-11-20 Method for providing training service and service system therefor WO2021100905A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/KR2019/015976 WO2021100905A1 (en) 2019-11-20 2019-11-20 Method for providing training service and service system therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/KR2019/015976 WO2021100905A1 (en) 2019-11-20 2019-11-20 Method for providing training service and service system therefor

Publications (1)

Publication Number Publication Date
WO2021100905A1 true WO2021100905A1 (en) 2021-05-27

Family

ID=75980513

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2019/015976 WO2021100905A1 (en) 2019-11-20 2019-11-20 Method for providing training service and service system therefor

Country Status (1)

Country Link
WO (1) WO2021100905A1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090292178A1 (en) * 2008-05-21 2009-11-26 Qualcomm Incorporated System and method of monitoring users during an interactive activity
KR20150096550A (en) * 2014-02-14 2015-08-25 부경대학교 산학협력단 Apparatus and Method for Supporting Rehabilitation Exercise
KR20160081084A (en) * 2014-12-30 2016-07-08 삼성전자주식회사 A method for displaying contents and an eletronic device therefor
KR20170010157A (en) * 2015-07-15 2017-01-26 (주)블루클라우드 Method for guiding actions of an user in interactive exercise programs and the apparatus thereof
KR20190029430A (en) * 2018-08-16 2019-03-20 아이피랩 주식회사 Online Fitness System and Personal Training Method Based on Artificial Intelligence

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090292178A1 (en) * 2008-05-21 2009-11-26 Qualcomm Incorporated System and method of monitoring users during an interactive activity
KR20150096550A (en) * 2014-02-14 2015-08-25 부경대학교 산학협력단 Apparatus and Method for Supporting Rehabilitation Exercise
KR20160081084A (en) * 2014-12-30 2016-07-08 삼성전자주식회사 A method for displaying contents and an eletronic device therefor
KR20170010157A (en) * 2015-07-15 2017-01-26 (주)블루클라우드 Method for guiding actions of an user in interactive exercise programs and the apparatus thereof
KR20190029430A (en) * 2018-08-16 2019-03-20 아이피랩 주식회사 Online Fitness System and Personal Training Method Based on Artificial Intelligence

Similar Documents

Publication Publication Date Title
CN107316520B (en) Video teaching interaction method, device, equipment and storage medium
WO2011108900A2 (en) Method and apparatus for generating bookmark information
WO2011059275A2 (en) Method and apparatus for managing data
US20210385506A1 (en) Method and electronic device for assisting live streaming
JP6582100B2 (en) Method and apparatus for providing voice service
JP7136216B2 (en) Class support system, judgment device, class support method and program
WO2012036449A2 (en) Method and apparatus for managing data
WO2020111637A1 (en) Method for managing immersion level and electronic device supporting same
CN107018385A (en) Intelligent monitoring device and method
WO2018131770A1 (en) Electronic device and control method thereof
WO2021100905A1 (en) Method for providing training service and service system therefor
WO2015130148A1 (en) Method and device for playing multimedia content in communication system
KR20140042055A (en) E-learning system of providing video for improvement of study concentration
KR100962969B1 (en) Method And System For Providing User Location-Based Content
WO2018093051A1 (en) Method for providing streaming service while converting file format in real time
WO2019132158A1 (en) Method and system for controlling flow of advertisement content on basis of video chat, and non-transitory computer-readable recording medium
WO2015115695A1 (en) Image transmitting device and method for portable terminal
WO2021221218A1 (en) Blockchain-based body motion accuracy authentication method and system therefor
KR102564148B1 (en) Method and system for coaching posture and motion analysis based on machine learining
WO2021137580A1 (en) Electronic device and control method thereof
CN112580390A (en) Security monitoring method and device based on intelligent sound box, sound box and medium
WO2024075919A1 (en) Iot camera-based smart home emergency processing device
WO2021251780A1 (en) Systems and methods for live conversation using hearing devices
CN218634062U (en) Baby monitor with multiple communication modes
WO2020036235A1 (en) Method and apparatus for recognizing object and processing data using rgb sensor

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19953072

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205A DATED 19.09.2022)

122 Ep: pct application non-entry in european phase

Ref document number: 19953072

Country of ref document: EP

Kind code of ref document: A1