CN107123321A - 提供真实培训媒体的设备和方法 - Google Patents

提供真实培训媒体的设备和方法 Download PDF

Info

Publication number
CN107123321A
CN107123321A CN201710099105.0A CN201710099105A CN107123321A CN 107123321 A CN107123321 A CN 107123321A CN 201710099105 A CN201710099105 A CN 201710099105A CN 107123321 A CN107123321 A CN 107123321A
Authority
CN
China
Prior art keywords
content
training
sound
true
media content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710099105.0A
Other languages
English (en)
Inventor
元俊喜
安载旭
宋旼柱
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nano Micro Co Ltd
Original Assignee
Nano Micro Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nano Micro Co Ltd filed Critical Nano Micro Co Ltd
Publication of CN107123321A publication Critical patent/CN107123321A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00Simulators for teaching or training purposes
    • G09B9/02Simulators for teaching or training purposes for teaching control of vehicles or other craft
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00Simulators for teaching or training purposes
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0075Means for generating exercise programs or schemes, e.g. computerized virtual trainer, e.g. using expert databases
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/003Repetitive work cycles; Sequence of movements
    • G09B19/0038Sports
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/16Control of vehicles or other craft
    • G09B19/165Control of aircraft
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B23/00Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes
    • G09B23/28Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes for medicine
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/065Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/08Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A63B24/0006Computerised comparison for qualitative assessment of motion sequences or the course of a movement
    • A63B2024/0012Comparing movements or motion sequences with a registered reference
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0075Means for generating exercise programs or schemes, e.g. computerized virtual trainer, e.g. using expert databases
    • A63B2024/0081Coaching or training aspects related to a group of users

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Multimedia (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Mathematical Physics (AREA)
  • Pure & Applied Mathematics (AREA)
  • Algebra (AREA)
  • Computational Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Chemical & Material Sciences (AREA)
  • Medicinal Chemistry (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)

Abstract

提供真实培训媒体的设备和方法。公开了一种当精通于高级技术的专家演示技术时不仅以图像和声音,而且甚至以专家的细微动作允许最真实的培训的设备和方法。

Description

提供真实培训媒体的设备和方法
技术领域
本公开涉及技术培训的领域,更具体地讲,涉及一种当精通于高级技术的专家演示技术时不仅以图像和声音,而且甚至以专家的细微动作允许最真实的培训的方法。
背景技术
需要以获取高级技术为目的的连续和重复的实践的领域中的实践者,例如操纵诸如导弹或枪炮的危险武器的军人、应该执行各种困难手术的医生、通过细微操纵来控制安全的飞行员、获取显著影响成绩的知识的运动员等,由已经精通于这些技术的专家来连续地培训。
然而,接收来自于专家的一对一培训非常困难,尽管专家尝试培训许多受训者,专家可培训的受训者(实践者)的数量有限。
因此,最近通过制作并提供培训内容已形成了更多受训者可通过培训内容来接收来自专家的培训的环境。作为代表性示例,存在互联网讲座。
然而,在简单地捕获/记录专家演示(示范)技术的情况的图像和声音的水平制作现有培训内容。因此,通过再现这种培训内容实现的培训具有这样的限制:从受训者的角度,培训不仅不太真实,而且导致受训者无法以视觉/听觉以外的形式体验专家所演示的技术。
如上所述,从意图获取特别是高级技术的受训者(例如,军人、医生、飞行员、运动员等)的角度,这些现有限制成为培训成绩的水平增加的大阻力。
因此,本公开提出了一种新型的培训内容,其在精通于高级技术的专家演示技术时不仅以图像和声音,而且甚至以专家的细微动作允许最真实的培训。
发明内容
鉴于上述情况而设计出本发明,本发明的一方面在于提供一种提供真实培训媒体的设备和方法,其在精通于高级技术的专家演示技术时不仅以图像和声音,而且甚至以专家的细微动作允许最真实的培训。
根据用于实现上述目的的本发明的第一方面,提供了一种用于提供真实培训媒体的设备。该设备包括:用户操作的培训装置,所述用户通过该培训装置来示范技术培训;多个视频图像捕获器,其被配置为在不同位置对包括培训装置的预定空间进行图像捕获;至少一个声音记录器,其被配置为记录在所述预定空间中生成的声音;运动记录器,其被配置为根据培训装置的操作来记录培训装置的运动信息;以及发生器,其被配置为利用由所述多个视频图像捕获器图像捕获的多条视频内容、由所述至少一个声音记录器记录的各条声音内容以及由运动记录器记录的运动信息来生成一条真实培训媒体内容。
优选地,用于提供真实培训媒体的设备还可包括:多个显示单元,相应的多条视频内容被映射至所述多个显示单元,并且所述多个显示单元被配置为当再现真实培训媒体内容时根据针对多条视频内容设定的多条设置信息来再现映射至显示单元的多条视频内容;至少一个声音输出单元,各条声音内容被映射至所述至少一个声音输出单元,并且所述至少一个声音输出单元被配置为当再现真实培训媒体内容时根据针对多条声音内容设定的多条设置信息来再现映射至所述至少一个声音输出单元的多条声音内容;以及培训装置驱动器,其被配置为当再现真实培训媒体内容时根据运动信息来驱动培训装置。
优选地,所述运动信息可包括培训装置的三维表示的x位置值、y位置值、z位置值、横滚扭矩值、俯仰扭矩值和偏航扭矩值当中的至少一个自由度值。
优选地,所述发生器可被配置为针对各条视频内容设定视频内容设置信息并且使用视频内容设置信息来生成真实培训媒体内容,其中,所述视频内容设置信息可基于在用户操作培训装置的情况下用户的位置以及视频图像中培训装置的暴露度和运动度中的至少一个的分析结果来设定,并且其中,所述视频内容设置信息可包括视频内容的再现期间的暂停时间点、暂停的保持时间周期和取消暂停之后的再现时间点中的至少一个以及视频图像中的特定区域的放大时间点和放大之后的放大取消时间点。
优选地,所述发生器可被配置为针对各条声音内容设定声音内容设置信息并且使用所述声音内容设置信息来生成真实培训媒体内容,其中,所述声音内容设置信息可基于是否包括通过培训装置的运动生成的特定声音、所述特定声音的音量以及是否包括用户的语音中的至少一个的分析结果来设定,并且其中,所述声音内容设置信息可包括声音内容的再现期间的音量调节值、声音输出单元的运动路径以及声音输出单元的运动速度的模式中的至少一个。
优选地,用于提供真实培训媒体的设备还可包括:内容管理器,其被配置为管理针对各个用户生成的真实培训媒体内容;以及推荐器,其被配置为当选择再现特定真实培训媒体内容时推荐对与所述特定真实培训媒体内容的情况下的培训装置相同的培训装置进行操作的另一用户的真实培训媒体内容,其中,当选择再现推荐的真实培训媒体内容时,所述发生器可被配置为利用所述特定真实培训媒体内容和所述推荐的真实培训媒体内容来生成用户比较-真实培训媒体内容。
优选地,所述特定真实培训媒体内容可包括预定单位的比较时间周期,其中,所述推荐的真实培训媒体内容可包括分别与所述特定真实培训媒体内容的比较时间周期对应的对应时间周期,并且其中,所述发生器可生成用户比较-真实培训媒体内容,使得所述特定真实培训媒体内容的比较时间周期和所述推荐的真实培训媒体内容的对应时间周期被依次再现。
根据用于实现上述目的的本发明的第二方面,提供了一种用于提供真实培训媒体的方法。该方法包括以下步骤:由多个视频图像捕获器在不同位置对包括培训装置的预定空间进行图像捕获的图像捕获步骤,用户操作所述培训装置并且用户通过培训装置来示范技术培训;由至少一个声音记录器记录在所述预定空间中生成的声音的记录步骤;由运动记录器根据培训装置的操作来记录培训装置的运动信息的运动记录步骤;以及利用经图像捕获的多条视频内容、所记录的多条声音内容以及所记录的运动信息来生成一条真实培训媒体内容的内容生成步骤。
优选地,所述方法还可包括以下步骤:当再现真实培训媒体内容时,由被映射有相应的多条视频内容的多个显示单元根据针对多条视频内容设定的多条设置信息来再现映射至显示单元的多条视频内容;当再现真实培训媒体内容时,由被映射有相应的多条声音内容的至少一个声音输出单元根据针对多条声音内容设定的多条设置信息来再现映射至所述至少一个声音输出单元的多条声音内容;以及当再现真实培训媒体内容时根据运动信息来驱动培训装置的培训装置驱动步骤。
优选地,所述运动信息可包括培训装置的三维表示的x位置值、y位置值、z位置值、横滚扭矩值、俯仰扭矩值和偏航扭矩值当中的至少一个自由度值。
优选地,所述内容生成步骤可包括以下步骤:针对各条视频内容设定视频内容设置信息并且利用所述视频内容设置信息来生成真实培训媒体内容,其中,所述视频内容设置信息可基于在用户操作培训装置的情况下用户的位置以及视频图像中培训装置的暴露度和运动度中的至少一个的分析结果来设定,并且其中,所述视频内容设置信息可包括视频内容的再现期间的暂停时间点、暂停的保持时间周期和取消暂停之后的再现时间点中的至少一个以及视频图像中的特定区域的放大时间点和放大之后的放大取消时间点。
优选地,所述内容生成步骤可包括以下步骤:针对各条声音内容设定声音内容设置信息并且使用所述声音内容设置信息来生成真实培训媒体内容,其中,所述声音内容设置信息可基于是否包括通过培训装置的运动生成的特定声音、所述特定声音的音量以及是否包括用户的语音中的至少一个的分析结果来设定,并且其中,所述声音内容设置信息可包括声音内容的再现期间的音量调节值、声音输出单元的运动路径以及声音输出单元的运动速度的模式中的至少一个。
优选地,所述方法还可包括以下步骤:管理针对各个用户生成的真实培训媒体内容的内容管理步骤;当选择再现特定真实培训媒体内容时推荐对与所述特定真实培训媒体内容的情况下的培训装置相同的培训装置进行操作的另一用户的真实培训媒体内容的推荐步骤;当选择再现推荐的真实培训媒体内容时利用所述特定真实培训媒体内容和所述推荐的真实培训媒体内容来生成用户比较-真实培训媒体内容的比较内容生成步骤;以及再现所述用户比较-真实培训媒体内容的步骤。
优选地,所述比较内容生成步骤可包括以下步骤:从所述推荐的真实培训媒体内容提取分别与所述特定真实培训媒体内容的比较时间周期对应的对应时间周期;以及生成用户比较-真实培训媒体内容,该用户比较-真实培训媒体内容被配置为使得所述特定真实培训媒体内容的比较时间周期和所述推荐的真实培训媒体内容的对应时间周期被依次再现。
因此,根据本发明的实施方式的用于提供真实培训媒体的设备和方法生成这样的效果,使得可在精通于高级技术的专家演示技术时不仅以图像和声音,而且甚至以专家的细微动作来执行最真实的培训。
附图说明
本公开的以上和其它目的、特征和优点将从以下结合附图进行的详细描述而更显而易见,附图中:
图1是示出根据本公开的示例性实施方式的真实培训媒体提供设备的配置的框图;
图2是示出根据本公开的示例性实施方式的真实培训媒体内容生成环境的示例的示图;
图3是示出根据本公开的示例性实施方式的真实培训媒体内容再现环境的示例的示图;以及
图4是示出根据本公开的示例性实施方式的真实培训媒体提供方法的流程的流程图。
具体实施方式
下文中,将参照附图详细描述本公开的实施方式。
在参照附图详细描述本公开的实施方式之前,将描述本公开的应用领域。
本公开涉及基于先前制作(生成)的培训内容的再现实现的技术培训的领域。
需要以获取高级技术为目的的连续和重复的实践的领域中的实践者,例如操纵诸如导弹或枪炮的危险武器的军人、应该执行各种困难手术的医生、通过细微操纵来控制安全的飞行员、获取显著影响成绩的知识的运动员等,由已经精通于这些技术的专家来连续地培训。
然而,接收来自于专家的一对一培训非常困难,尽管专家尝试培训许多受训者,专家可培训的受训者(实践者)的数量有限。
因此,最近通过生成并提供培训内容已形成了更多受训者可通过培训内容来接收来自专家的培训的环境。作为代表性示例,存在互联网讲座。
然而,在简单地捕获/记录专家演示(示范)技术的情况的图像和声音的水平生成现有培训内容。因此,没有增加特定努力以如上所述重现真实感,通过再现现有培训内容实现的培训具有这样的限制:从受训者的角度,培训不太真实。
并且,通过再现现有培训内容实现的培训具有这样的限制:受训者无法以视觉/听觉以外的形式感觉专家所演示的技术。
如上所述,从意图获取特别是高级技术的受训者(例如,军人、医生、飞行员、运动员等)的角度,这些现有限制成为培训成绩的水平提高的大阻力。
因此,本公开的目的在于提出一种新型的培训内容(下文中“真实培训媒体内容”),其在精通于高级技术的专家演示技术时不仅以图像和声音,而且甚至以专家的细微动作允许最真实的培训。
下文中,参照图1,将详细描述根据本公开的示例性实施方式的真实培训媒体提供设备。
首先,将在真实培训媒体内容的生成方面描述根据本公开的示例性实施方式的真实培训媒体提供设备200的配置。
参照图1,根据本公开的示例性实施方式的真实培训媒体提供设备200包括:用户操作的培训装置150,用户通过其来示范技术培训;不同位置处的多个视频图像捕获器110,其对包括培训装置150的预定空间进行图像捕获;至少一个声音记录器120,其记录所述预定空间中生成的声音;运动记录器160,其根据培训装置150的操作记录培训装置150的运动信息;以及发生器170,其利用由多个视频图像捕获器110图像捕获的多条视频内容、由至少一个声音记录器120记录的各条声音内容以及由运动记录器160记录的运动信息来生成一条真实培训媒体内容。
在如下所述在真实培训媒体内容的生成方面进行描述时,示范技术培训的用户将被称作“专家”。
培训装置150是用户(即,专家)操作的元件,用户通过其来示范技术培训。
例如,在生成用于针对军人的培训的真实培训媒体内容的情况下,培训装置150可以是管理诸如导弹或枪炮的武器的相关装置,或者可以是重现相关装置的仿真装置。
另外,在生成用于针对医生的培训的真实培训媒体内容的情况下,培训装置150可以是在手术或者手术的执行期间使用的手术装置(或者手术执行装置),或者可以是重现手术装置(或者手术执行装置)的仿真装置。在生成用于针对飞行员的培训的真实培训媒体内容的情况下,培训装置150可以是飞机驾驶装置或者重现飞机驾驶装置的仿真装置。在生成用于针对运动员的培训的真实培训媒体内容的情况下,培训装置150可以是运动装置(例如,棒球棍等)或者重现运动装置(例如,棒球棍等)的仿真装置。
不言而喻,除了针对军人的培训、针对医生的培训、针对飞行员的培训以及针对运动员的培训的上述情况之外,根据本公开的实施方式的真实培训媒体提供设备200可生成面向各种领域的受训者并进行培训的真实培训媒体内容,并且可根据真实培训媒体内容的生成而设置有培训装置150。
在这方面,培训装置150基于连接至需要记录培训装置150的运动信息的运动记录器160(下面描述)的形式的前提。
下文中,为了描述方便,将考虑并且将描述生成用于针对医生的培训的真实培训媒体内容的情况。
多个视频图像捕获器110在不同位置对包括培训装置150的预定空间进行图像捕获。
如图1所示,多个视频图像捕获器110表示在不同位置对包括培训装置150的预定空间进行图像捕获的视频图像捕获器A、B…。
此时,各个视频图像捕获器A、B…基于被设置在对包括培训装置150的预定空间进行图像捕获时能够生成最佳真实培训媒体内容(下面描述)的不同最佳位置的前提。
例如,如图2所示,当专家1操作培训装置150并且通过培训装置150示范技术培训时,考虑专家1的位置,视频图像捕获器A、B、C和D可被设置在能够生成最佳真实培训媒体内容的不同最佳位置。
至少一个声音记录器120记录预定空间(即,包括培训装置150的预定空间)中生成的声音。
至少一个声音记录器120可以是一个声音记录器,或者如图1所示,可以是多个声音记录器A、B...。
下文中,为了描述方便,将考虑并且将描述至少一个声音记录器120包括多个声音记录器A、B...的情况。
此时,各个声音记录器A、B...基于被设置在记录包括培训装置150的预定空间中生成的声音时能够生成最佳真实培训媒体内容(下面描述)的不同最佳位置的前提。
例如,如图2所示,当专家1操作培训装置150并且通过培训装置150示范技术培训时,考虑视频图像捕获器A、B、C和D的设置,声音记录器A、B和C可被设置在能够生成最佳真实培训媒体内容的不同最佳位置。
运动记录器160根据培训装置150的操作来记录培训装置150的运动信息。
具体地讲,当专家1操作培训装置150并且通过培训装置150示范技术培训时,培训装置150根据专家1对培训装置150的操作而运动。
此时,当培训装置150的运动被表示为映射至三维空间的值时,培训装置150的运动可被表示为六自由度值中的最大值。
例如,当培训装置150的运动被表示为位置时,培训装置150的运动可被表示为作为x位置值、y位置值和z位置值的自由度值。当培训装置150的运动被表示为力时,培训装置150的运动被表示为作为横滚扭矩值、俯仰扭矩值、偏航扭矩值的自由度值。
因此,当专家1操作培训装置150并且通过培训装置150示范技术培训时,运动记录器160根据培训装置150的操作来跟踪/分析培训装置150的运动,并且记录包括培训装置150的三维表示的x位置值、y位置值、z位置值、横滚扭矩值、俯仰扭矩值和偏航扭矩值当中的至少一个自由度值的运动信息。
为了生成真实培训媒体内容,当专家1操作培训装置150并且通过培训装置150示范技术培训时,如上所述的视频图像捕获器110、声音记录器120和运动记录器160彼此同步并且执行其相应的作用(图像捕获、声音记录和运动信息记录)。
发生器170利用由视频图像捕获器110图像捕获的多条视频内容、由声音记录器120记录的各条声音内容以及由运动记录器160记录的运动信息来生成一条真实培训媒体内容。
下文中,将更详细地描述生成真实培训媒体内容的处理。
针对多条视频内容中的每一条,发生器170基于在专家1操作培训装置150的情况下专家1的位置以及视频图像中培训装置150的暴露度和运动度中的至少一个的分析结果来设定包括视频内容再现期间的暂停时间点、暂停保持时间周期和取消暂停之后的再现时间点中的至少一个以及视频图像中的特定区域的放大时间点和放大之后的放大取消时间点的设置信息,随后发生器170可使用设置信息来生成真实培训媒体内容。
参照图2,具体地讲,针对多条视频内容中的每一条(即,由视频图像捕获器A、B、C和D分别图像捕获的视频内容),发生器170分析在专家1操作培训装置150的情况下专家1的位置以及视频图像中培训装置150的暴露度和运动度中的至少一个。
针对由视频图像捕获器A、B、C和D分别图像捕获的各条视频内容,发生器170分析在专家1操作培训装置150的情况下专家1的位置。
例如,当参照由视频图像捕获器A图像捕获的视频内容进行描述时,发生器170可利用视频图像捕获器A的位置作为基准来分析在专家1操作培训装置150的情况下专家1的位置,并且可确定由视频图像捕获器A图像捕获的视频内容是否为在专家1的实际视野中专家1无法看到视频图像的角度的视频图像。
受训者(图3中的标号2)按照这样的方式接收培训:要通过再现本公开中提出的真实培训媒体内容来接收培训的受训者将培训装置150持握在受训者的手中,从而感觉专家1示范的技术培训的情况下的动作。因此,操作培训装置150并且通过培训装置150示范技术培训的专家1的位置可被视为受训者2的位置。
因此,考虑在专家1操作培训装置150的情况下专家1的位置可被视为含义与受训者2的后续位置相同。
这样,针对除了视频图像捕获器A之外由视频图像捕获器B、C和D图像捕获的各条视频内容,发生器170可利用视频图像捕获器B、C和D中的每一个的位置作为基准来分析在专家1操作培训装置150的情况下专家1的位置,并且可确定由视频图像捕获器B、C和D中的每一个图像捕获的视频内容是否为在专家1的实际视野中专家1无法看到视频图像的角度的视频图像。
另外,针对由视频图像捕获器A、B、C和D图像捕获的各条视频内容,发生器170分析视频图像中培训装置150的暴露度和运动度中的至少一个。
例如,以下将参照由视频图像捕获器A图像捕获的视频内容进行描述。
发生器170分析由视频图像捕获器A图像捕获的视频内容的视频图像中培训装置150的暴露度。因此,发生器170可确定视频图像中培训装置150的暴露度是否小于预定义的最小暴露度。
另外,发生器170分析由视频图像捕获器A图像捕获的视频内容的视频图像中培训装置150的运动度。因此,发生器170可确定视频图像中培训装置150的运动度是否小于预定义的最小运动度。
这样,针对除了视频图像捕获器A之外由视频图像捕获器B、C和D图像捕获的各条视频内容,发生器170可确定各个视频内容的视频图像中培训装置150的暴露度是否小于最小暴露度,并且可确定各个视频内容的视频图像中培训装置150的运动度是否小于最小运动度。
此后,发生器170基于通过针对如上所述由各个视频图像捕获器A、B、C和D图像捕获的各条视频内容分析在专家1操作培训装置150的情况下专家1的位置(=受训者2的位置)以及视频图像中培训装置150的暴露信息和运动信息而获得的分析结果,设定各个视频内容的设置信息,其中,所述分析结果对应于视频内容是否为在专家1的实际视野中专家1无法看到视频图像的角度的视频图像、各个视频内容的视频图像中培训装置150的暴露度是否小于最小暴露度、以及各个视频内容的视频图像中培训装置150的运动度是否小于最小运动度。
更具体地讲,针对被确定为在专家1的实际视野中专家1无法看到视频图像的角度的视频图像的视频内容,发生器170设定用于维持视频内容的再现的设置信息,而不管各个视频内容的视频图像中培训装置150的暴露度是否小于最小暴露度(如下所述)。
另外,发生器170根据各个视频内容的视频图像中培训装置150的暴露度是否小于最小暴露度,针对被确定为在专家1的实际视野中专家1可看到视频图像的角度的视频图像的视频内容设定限定视频内容再现期间的暂停时间点、暂停保持时间周期以及取消暂停之后的再现时间点的设置信息。
例如,考虑这样的情况:在由视频图像捕获器B图像捕获的视频内容的再现期间从特定时间点(例如,从再现开始执行再现五分钟的时间点)的视频图像到从所述特定时间点过去两分钟的时间点的视频图像,分析(确定)培训装置150的暴露度小于最小暴露度。
在这种情况下,针对由视频图像捕获器B图像捕获的视频内容,发生器170可设定设置信息,所述设置信息将上述特定时间点(例如,从再现开始执行再现五分钟的时间点)限定为暂停时间点,将两分钟限定为暂停保持时间周期,并且将从所述特定时间点(例如,从再现开始执行再现五分钟的时间点)过去两分钟的时间点限定为取消暂停之后的再现时间点。
这是因为在多个位置图像捕获的视频内容当中可能存在培训装置150很难暴露的再现时间周期,当基于真实培训媒体内容执行培训时再现时间周期和真实培训媒体内容的再现可能暂时停止。
然后,根据各个视频内容的视频图像中培训装置150的运动度是否小于最小运动度,针对被确定为在专家1的实际视野中专家1无法看到视频图像的角度的视频图像的视频内容与被确定为在专家1的实际视野中专家1可看到视频图像的角度的视频图像的视频内容二者,发生器170设定限定视频图像中的特定区域的放大时间点和放大之后的放大取消时间点的设置信息。
这里,所述特定区域可被指定为视频图像的整个区域中包括培训装置150的预定尺寸的区域,其中与先前再现的视频图像帧相比最频繁地发生改变。
例如,考虑这样的情况:在由视频图像捕获器C图像捕获的视频内容的再现期间从特定时间点(例如,从再现开始执行再现五分钟的时间点)的视频图像到从所述特定时间点过去两分钟的视频图像,分析(确定)培训装置150的运动度小于最小运动度。
在这种情况下,针对由视频图像捕获器C图像捕获的视频内容,发生器170可设定设置信息,所述设置信息将上述特定时间点(例如,从再现开始执行再现五分钟的时间点)限定为所述特定区域的放大时间点,并且将从所述特定时间点(例如,从再现开始执行再现五分钟的时间点)过去两分钟的时间点限定为放大之后的放大取消时间点。
这是因为在多个位置图像捕获的视频内容当中可能存在正在示范与培训装置150的细微运动对应的精细技术的再现时间周期,并且当基于真实培训媒体内容的再现执行培训时需要通过放大详细示出再现时间周期。
以上述方式,发生器170可针对由各个视频图像捕获器A、B、C和D图像捕获的各条视频内容设定设置信息,然后可使用设置信息来生成真实培训媒体内容。
另外,针对各个声音内容,发生器170基于是否包括通过培训装置150的运动生成的特定声音、特定声音的音量以及是否包括专家1的语音中的至少一个的分析结果来设定包括声音内容再现期间映射的声音输出单元的运动路径、声音输出单元的运动速度的模式以及声音内容再现期间的音量调节值中的至少一个的设置信息,随后发生器170可使用设置信息来生成真实培训媒体内容。
参照图2,具体地讲,针对各个声音内容,即,针对由各个声音记录器A、B和C记录的各条声音内容,发生器170分析是否包括通过培训装置150的运动生成的特定声音、特定声音的音量以及是否包括专家1的语音中的至少一个。
针对由各个声音记录器A、B和C记录的各条声音内容,发生器170分析是否包括通过培训装置150的运动生成的特定声音以及特定声音的音量。
例如,以下将参照由声音记录器A记录的声音内容来进行描述。
发生器170分析由声音记录器A记录的声音内容的声音中是否包括通过培训装置150的运动生成的特定声音以及特定声音的音量。因此,当由声音记录器A记录的声音内容的声音中包括通过培训装置150的运动生成的特定声音时,发生器170可确定特定声音的音量是否小于预定义的特定音量。
这样,除了声音记录器A之外针对由各个声音记录器B和C记录的各条声音内容,发生器170可分析声音内容的声音中是否包括通过培训装置150的运动生成的特定声音以及特定声音的音量,从而可确定由各个声音记录器B和C记录的各条声音内容中是否包括通过培训装置150的运动生成的特定声音。当由各个声音记录器B和C记录的各条声音内容中包括特定声音时,发生器170可确定特定声音的音量是否小于特定音量。
另外,针对由各个声音记录器A、B和C记录的各条声音内容,发生器170分析是否包括专家1的语音。
例如,当参照由声音记录器A记录的声音内容进行描述时,发生器170分析由声音记录器A记录的声音内容的声音中是否包括专家1的语音。
这样,除了声音记录器A之外针对由各个声音记录器B和C记录的各条声音内容,发生器170可分析声音内容的声音中是否包括专家1的语音。
此后,如上所述,基于由各个声音记录器A、B和C记录的各条声音内容的分析结果,即,声音内容的声音中是否包括通过培训装置150的运动生成的特定声音、当声音内容的声音中包括特定声音时特定声音的音量是否小于特定音量以及声音内容的声音中是否包括专家1的语音,发生器170针对各个声音内容设定设置信息。
更具体地讲,针对被确定为包括通过培训装置150的运动生成的特定声音的声音内容,发生器170根据特定声音的音量是否小于特定音量设定设置信息,所述设置信息限定声音内容再现期间映射的声音输出单元的运动路径、声音输出单元的运动速度的模式以及声音内容再现期间的音量调节值。
例如,考虑这样的情况:分析(确定)在由声音记录器B记录的声音内容的再现期间从特定时间点(例如,从再现开始执行再现五分钟的时间点)的声音到从所述特定时间点过去10分钟的时间点的声音包括通过培训装置150的运动生成的特定声音,并且在特定时间点(例如,从再现开始执行再现五分钟的时间点)与从所述特定时间点过去10分钟的时间点之间存在特定声音的音量小于特定音量的部分再现时间周期。
在这种情况下,针对由声音记录器B记录的声音内容,发生器170可设定设置信息,所述设置信息限定音量调节值以在从特定时间点(例如,从再现开始执行再现五分钟的时间点)到从所述特定时间点过去10分钟的时间点的声音内容的再现期间将音量调节值从默认值(初始音量值)增大预定大小,限定在特定声音的音量小于特定音量的部分再现时间周期期间映射的声音输出单元(例如,如图1中的标号140B指示)向专家1的位置(=受训者2的位置)运动的运动路径,并且将根据所限定的运动路径的运动速度的模式限定为第一模式(表示预定速度的运动)、第二模式(表示具有加速度的运动)和第三模式(表示根据特定声音的音量可变的速度的运动)中的一个。
这种配置用于通过使得受训者2能够很好地倾听在多个位置记录的声音内容当中通过培训装置150的运动生成的特定声音(即,微小声音)来增加培训的真实感。
然后,针对被分析(确定)为包括专家1的语音的声音内容,发生器170设定设置信息,所述设置信息限定包括专家1的语音的再现时间周期期间的音量调节值。
例如,考虑这样的情况:分析(确定)在由声音记录器C记录的声音内容的再现期间从特定时间点(例如,从再现开始执行再现五分钟的时间点)的声音到从所述特定时间点过去10分钟的时间点的声音包括专家1的语音。
在这种情况下,针对由声音记录器C记录的声音内容,发生器170可设定设置信息,所述设置信息限定音量调节值以在从特定时间点(例如,从再现开始执行再现五分钟的时间点)到从所述特定时间点过去10分钟的时间点的声音内容的再现期间将音量调节值从默认值增大预定大小。
这种配置用于使得受训者2能够很好地倾听在多个位置记录的声音内容当中由正在示范的专家1所作的说明。
以上述方式,发生器170可针对由各个声音记录器A、B和C记录的各条声音内容设定设置信息,然后可使用设置信息来生成真实培训媒体内容。
因此,由发生器170生成的真实培训媒体内容可按照将由各个视频图像捕获器A、B、C和D图像捕获并且设定了各条设置信息的视频内容、由各个声音记录器A、B、C和D记录并且设定了各条设置信息的声音内容以及由运动记录器160记录的运动信息组合的形式来生成。
下文中,将在再现真实培训媒体内容并且通过根据本公开的实施方式的真实培训媒体提供设备200执行基于真实培训媒体内容再现的培训的情况方面进行描述。
为此,如图1所示,根据本公开的实施方式的真实培训媒体提供设备200还可包括多个显示单元130、至少一个声音输出单元140和培训装置驱动器180。
下文中,为了描述方便,类似于上述考虑,将考虑并且将描述再现为针对医生的培训生成的真实培训媒体内容的情况。
相应多条视频内容被映射至多个显示单元130;并且当再现真实培训媒体内容时,根据为多条视频内容设定的多条设置信息,多个显示单元130再现包括在真实培训媒体内容中并且被映射至相应显示单元130的视频内容。
如图1所示,多个显示单元130表示显示单元A、B和...。
此时,各个显示单元A、B和…基于在再现视频内容时被设置在使得接收基于真实培训媒体内容再现的培训的受训者2能够真实地观看视频内容的最佳位置的前提。
例如,如图3所示,当受训者2将培训装置150持握在受训者2的手中并且接收培训时,考虑受训者2的位置,显示单元A、B、C和D可被设置在使得受训者2能够真实地观看在真实培训媒体内容的再现期间显示的各条视频内容的最佳位置。
此时,优选的是,图2所示的视频图像捕获器A、B、C和D分别被一对一地映射至图3所示的显示单元A、B、C和D。
在此配置中,由视频图像捕获器A图像捕获的视频内容被映射至显示单元A,由视频图像捕获器B图像捕获的视频内容被映射至显示单元B,由视频图像捕获器C图像捕获的视频内容被映射至显示单元C,由视频图像捕获器D图像捕获的视频内容被映射至显示单元D。
因此,当参照显示单元A作为示例进行描述时,显示单元A在真实培训媒体内容的再现期间根据为视频内容设定的设置信息再现映射至显示单元A的视频内容(即,由视频图像捕获器A图像捕获的视频内容)。
这样,显示单元B、C和D中的每一个也在真实培训媒体内容的再现期间根据为视频内容设定的设置信息再现映射至显示单元B、C和D中的每一个的视频内容(即,由视频图像捕获器B、C和D中的每一个图像捕获的视频内容)。
因此,在受训者2接收基于真实培训媒体内容再现的培训的同时,受训者2可接收真实培训,使得受训者2在观看多条视频内容的同时能够专注于观看维持再现的视频内容,而非处于暂停状态的视频内容,并且使得受训者2能够专注于观看在重要时刻(即,示范与培训装置150的细微运动对应的精细技术的再现时间周期)自动放大的视频内容。
各条声音内容被映射至至少一个声音输出单元140;并且当再现真实培训媒体内容时,所述至少一个声音输出单元140根据为声音内容设定的设置信息再现包括在真实培训媒体内容中并且被映射至所述至少一个声音输出单元140的声音内容。
所述至少一个声音输出单元140可以是一个声音输出单元,或者可以是如图1所示的多个声音输出单元A、B和…。
下文中,为了描述方便,将考虑并且将描述所述至少一个声音输出单元140包括多个声音输出单元A、B和...的情况。
此时,各个声音输出单元A、B和...基于在再现声音内容时被设置在使得接收基于真实培训媒体内容再现的培训的受训者2能够真实地倾听声音内容的最佳位置的前提。
例如,如图3所示,当受训者2将培训装置150持握在受训者2的手中并且接收培训时,考虑受训者2的位置,声音输出单元A、B、C和D可被设置在使得受训者2能够真实地倾听在真实培训媒体内容的再现期间输出的各条声音内容的最佳位置。
此时,优选的是,图2所示的声音记录器A、B和C分别被一对一地映射至图3所示的声音输出单元A、B和C。
在此配置中,由声音记录器A记录的声音内容被映射至声音输出单元A,由声音记录器B记录的声音内容被映射至声音输出单元B,由声音记录器C记录的声音内容被映射至声音输出单元C。
因此,在作为示例描述声音输出单元A的情况下,当再现真实培训媒体内容时,根据为声音内容设定的设置信息,声音输出单元A在自动地调节音量值或者根据运动速度模式中的运动路径运动的同时再现映射至声音输出单元A的声音内容(即,由声音记录器A记录的声音内容)。
这样,当再现真实培训媒体内容时,根据为声音内容设定的设置信息,声音输出单元B和C中的每一个也在自动地调节音量值或者根据运动速度模式中的运动路径运动的同时再现映射至声音输出单元B和C中的每一个的声音内容(即,由声音输出单元B和C中的每一个记录的声音内容)。
另外,在图3中,声音输出单元A、B和C中的每一个被设置(安装)在轨道上以能够活动。然而,此配置仅是示例。
除了如图3所示的采用轨道的方案之外,声音输出单元A、B和C中的每一个可根据声音输出单元A、B和C中的每一个设置有独立的运动手段(例如,轮)的方案活动。
因此,在受训者2接收基于真实培训媒体内容再现的培训的同时,受训者2可接收真实培训,使得受训者2在倾听多条声音内容的同时更仔细地倾听诸如专家1所作的说明的内容、通过培训装置150的运动生成的微小声音等的重要事项。
当再现真实培训媒体内容时,培训装置驱动器180根据运动信息执行控制操作以用于使培训装置150运动。
即,当再现真实培训媒体内容时,培训装置驱动器180根据包括在真实培训媒体内容中的运动信息中的x位置值、y位置值、z位置值、横滚扭矩值、俯仰扭矩值和偏航扭矩值来执行控制操作以用于使培训装置150运动。
因此,在受训者2接收基于真实培训媒体内容再现的培训的同时,受训者2可在受训者2将培训装置150持握在受训者2的手中并且根据专家1所示范的技术按原样感觉培训装置150的运动的同时接收培训。
另外,根据本公开的实施方式的真实培训媒体提供设备200还可包括内容管理器190和推荐器100。
内容管理器190管理针对各个专家生成的真实培训媒体内容。
即,在真实培训媒体提供设备200中,内容管理器190根据专家来对通过多个专家生成的真实培训媒体内容进行分类,并且管理分类的真实培训媒体内容。
当选择再现特定真实培训媒体内容时,推荐器100推荐对与所述特定真实培训媒体内容的情况下的培训装置相同的培训装置进行操作的另一专家的真实培训媒体内容。
即,如果选择再现真实培训媒体提供设备200期望再现以用于培训的特定真实培训媒体内容,当存在对与所述特定真实培训媒体内容的情况下的培训装置相同的培训装置进行操作的另一专家的真实培训媒体内容时,推荐器100推荐另一专家的真实培训媒体内容。
当选择再现推荐的真实培训媒体内容时,发生器170利用特定真实培训媒体内容和推荐的真实培训媒体内容生成专家比较-真实培训媒体内容。
具体地讲,当选择再现推荐的真实培训媒体内容时,针对推荐的真实培训媒体内容可视为同意推荐。
当选择再现推荐的真实培训媒体内容时,即,当同意推荐时,发生器170可利用期望选择并再现的所述特定真实培训媒体内容与推荐的真实培训媒体内容生成具有使得受训者能够比较并体验两个专家通过相同的培训装置示范的各个技术的形式的专家比较-真实培训媒体内容。
更具体地讲,发生器170按照预定单位的比较时间周期将特定真实培训媒体内容分成份。例如,发生器170可按照以10分钟为单位的比较时间周期将特定真实培训媒体内容分成份。
发生器170从推荐的真实培训媒体内容提取分别与所述特定真实培训媒体内容的比较时间周期对应的对应时间周期。
例如,发生器170可将分别与所述特定真实培训媒体内容的比较时间周期对应的运动信息与推荐的真实培训媒体内容的运动信息进行比较,可针对各个比较时间周期寻找推荐的真实培训媒体内容中具有运动信息的最高匹配率的时间周期,并且可提取找到的时间周期作为与比较时间周期对应的对应时间周期。
此后,发生器170可生成专家比较-真实培训媒体内容,其被配置为使得特定真实培训媒体内容的比较时间周期和推荐的真实培训媒体内容的对应时间周期按照预定单位(即,10分钟)依次再现。
因此,当再现专家比较-真实培训媒体内容时,显示单元A、B、C和D、声音输出单元A、B和C以及培训装置驱动器180可通过依次重复以下操作来使得受训者2比较并体验两个专家通过相同培训装置示范的各个技术:再现特定真实培训媒体内容的10分钟单位的比较时间周期以及推荐的真实培训媒体内容的10分钟单位的对应时间周期;以及再次再现特定真实培训媒体内容的10分钟单位的下一比较时间周期以及推荐的真实培训媒体内容的10分钟单位的下一对应时间周期。
如上所述,根据本公开的实施方式的真实培训媒体提供设备200提供基于真实培训媒体内容再现的培训环境,其通过生成新型的培训内容(即,真实培训媒体内容)并且通过再现真实培训媒体内容来使得受训者能够接收更真实的培训,所述真实培训媒体内容在精通于高级技术的专家演示技术时不仅以图像和声音,而且甚至以专家的细微动作允许最真实的培训。
因此,真实培训媒体提供设备200可克服使用现有培训内容的培训的限制,并且可生成这样的效果,使得可在精通于高级技术的专家演示技术时不仅以图像和声音,而且甚至以专家的细微动作执行最真实的培训。
下文中,将参照图4描述根据本公开的示例性实施方式的真实培训媒体提供方法。
为了描述方便,根据本公开的实施方式的真实培训媒体提供方法将被称为“真实培训媒体提供设备200的操作方法”并且将进行其描述。
在根据本公开的实施方式的真实培训媒体提供设备200的操作方法中,当在步骤S100中专家操作培训装置150并且通过培训装置150示范技术培训时,在步骤S110中,在不同的位置对包括培训装置150的预定空间进行图像捕获。
例如,如图2所示,当专家1操作培训装置150并且通过培训装置150示范技术培训时,考虑专家1的位置,视频图像捕获器A、B、C和D可被设置在能够生成最佳真实培训媒体内容的不同最佳位置。
因此,根据本公开的实施方式的真实培训媒体提供设备200的操作方法可控制视频图像捕获器A、B、C和D以对包括培训装置150的预定空间进行图像捕获。
另外,当在步骤S100中专家1操作培训装置150并且通过培训装置150示范技术培训时,在步骤S120中,根据本公开的实施方式的真实培训媒体提供设备200的操作方法记录在预定空间(即,包括培训装置150的预定空间)中生成的声音。
例如,如图2所示,当专家1操作培训装置150并且通过培训装置150示范技术培训时,考虑视频图像捕获器A、B、C和D的设置,声音记录器A、B和C可被设置在能够生成最佳真实培训媒体内容的不同最佳位置。
因此,根据本公开的实施方式的真实培训媒体提供设备200的操作方法可控制声音记录器A、B和C记录在预定空间中生成的声音。
另外,当在步骤S100中专家1操作培训装置150并且通过培训装置150示范技术培训时,在步骤S130中,根据本公开的实施方式的真实培训媒体提供设备200的操作方法根据培训装置150的操作记录培训装置150的运动信息。
具体地讲,根据本公开的实施方式的真实培训媒体提供设备200的操作方法根据培训装置150的操作来记录包括培训装置150的x位置值、y位置值、z位置值、横滚扭矩值、俯仰扭矩值和偏航扭矩值当中的至少一个自由度值的运动信息。
在步骤S140中,根据本公开的实施方式的真实培训媒体提供设备200的操作方法利用在步骤S110中图像捕获的多条视频内容、在步骤S120中记录的各条声音内容以及在步骤S130中记录的运动信息来生成一条真实培训媒体内容。
更具体地讲,针对由各个视频图像捕获器A、B、C和D图像捕获的多条视频内容中的每一条,根据本公开的实施方式的真实培训媒体提供设备200的操作方法基于在专家1操作培训装置150的情况下专家1的位置以及视频图像中培训装置150的暴露度和运动度中的至少一个的分析结果来设定设置信息,所述设置信息包括视频内容再现期间的暂停时间点、暂停保持时间周期和取消暂停之后的再现时间点中的至少一个以及视频图像中的特定区域的放大时间点和放大之后的放大取消时间点。
另外,针对由各个声音记录器A、B和C记录的各条声音内容,根据本公开的实施方式的真实培训媒体提供设备200的操作方法基于是否包括通过培训装置150的运动生成的特定声音、特定声音的音量以及是否包括专家1的语音中的至少一个的分析结果来设定设置信息,所述设置信息包括在声音内容的再现期间映射的声音输出单元的运动路径、声音输出单元的运动速度的模式以及声音内容再现期间的音量调节值中的至少一个。
此后,如上所述,根据本公开的实施方式的真实培训媒体提供设备200的操作方法可生成由视频图像捕获器A、B、C和D图像捕获并且设定了设置信息的各条视频内容、由声音记录器A、B和C记录并且设定了设置信息的各条声音内容以及运动信息组合的形式的真实培训媒体内容。
然后,在步骤S150中,根据本公开的实施方式的真实培训媒体提供设备200的操作方法针对各个专家管理如上所述生成的真实培训媒体内容。即,真实培训媒体提供设备200针对各个专家分类并管理通过多个专家生成的真实培训媒体内容。
下文中,将在再现真实培训媒体内容并且由根据本公开的实施方式的真实培训媒体提供设备200执行基于真实培训媒体内容再现的培训的情况方面进行描述。
当在步骤S160中选择再现真实培训媒体提供设备200期望再现以用于培训的特定真实培训媒体内容时,在步骤S170中,如果存在对与所述特定真实培训媒体内容的情况下的培训装置相同的培训装置进行操作的另一专家的真实培训媒体内容,则根据本公开的实施方式的真实培训媒体提供设备200的操作方法推荐真实培训媒体内容。
当没有选择再现推荐的真实培训媒体内容,即,不同意推荐(步骤S180为否)时,在步骤S190中,根据本公开的实施方式的真实培训媒体提供设备200的操作方法再现所述特定真实培训媒体内容。
即,根据本公开的实施方式的真实培训媒体提供设备200的操作方法通过以下步骤来再现特定真实培训媒体内容:控制显示单元A、B和C根据为各条视频内容设定的设置信息再现包括在特定真实培训媒体内容中并且被映射至各个显示单元A、B和C的视频内容;控制声音输出单元A、B和C根据为各条声音内容设定的设置信息再现包括在特定真实培训媒体内容中并且被映射至各个声音输出单元A、B和C的声音内容;以及根据包括在特定真实培训媒体内容中的运动信息中的x位置值、y位置值、z位置值、横滚扭矩值、俯仰扭矩值和偏航扭矩值执行控制操作以用于使培训装置150运动。
此外,当选择再现推荐的真实培训媒体内容,即,同意推荐(步骤S180为是)时,在步骤S200中,根据本公开的实施方式的真实培训媒体提供设备200的操作方法可利用期望选择并再现的特定真实培训媒体内容与推荐的真实培训媒体内容来生成具有使得受训者能够比较并体验两个专家通过相同的培训装置示范的各个技术的形式的专家比较-真实培训媒体内容。
更具体地讲,根据本公开的实施方式的真实培训媒体提供设备200的操作方法按照预定单位的比较时间周期将所述特定真实培训媒体内容分成份。例如,根据本公开的实施方式的真实培训媒体提供设备200的操作方法可按照以10分钟为单位的比较时间周期将所述特定真实培训媒体内容分成份。
根据本公开的实施方式的真实培训媒体提供设备200的操作方法从推荐的真实培训媒体内容提取分别与所述特定真实培训媒体内容的比较时间周期对应的对应时间周期。
例如,根据本公开的实施方式的真实培训媒体提供设备200的操作方法可将分别与所述特定真实培训媒体内容的比较时间周期对应的运动信息与推荐的真实培训媒体内容的运动信息进行比较,可针对各个比较时间周期寻找推荐的真实培训媒体内容中具有运动信息的最高匹配率的时间周期,并且可提取所找到的时间周期作为与比较时间周期对应的对应时间周期。
此后,根据本公开的实施方式的真实培训媒体提供设备200的操作方法可生成专家比较-真实培训媒体内容,其被配置为使得所述特定真实培训媒体内容的比较时间周期和推荐的真实培训媒体内容的对应时间周期按照预定单位(即,10分钟)依次再现。
然后,在步骤S210中,根据本公开的实施方式的真实培训媒体提供设备200的操作方法再现专家比较-真实培训媒体内容。
因此,当再现专家比较-真实培训媒体内容时,显示单元A、B、C和D、声音输出单元A、B和C以及培训装置150可通过依次重复以下操作来使得受训者2比较并体验两个专家通过相同培训装置示范的各个技术:再现特定真实培训媒体内容的10分钟单位的比较时间周期以及推荐的真实培训媒体内容的10分钟单位的对应时间周期;以及再次再现特定真实培训媒体内容的10分钟单位的下一比较时间周期以及推荐的真实培训媒体内容的10分钟单位的下一对应时间周期。
如上所述,根据本公开的实施方式的真实培训媒体提供方法提供基于真实培训媒体内容再现的培训环境,其通过生成新型的培训内容(即,真实培训媒体内容)并且通过再现真实培训媒体内容来使得受训者能够接收更真实的培训,所述真实培训媒体内容在精通于高级技术的专家演示技术时不仅以图像和声音,而且甚至以专家的细微动作允许最真实的培训。
因此,根据本公开的实施方式的真实培训媒体提供方法可克服使用现有培训内容的培训的限制,并且可生成这样的效果,使得可在精通于高级技术的专家演示技术时不仅以图像和声音,而且甚至以专家的细微动作执行最真实的培训。
此外,结合本文所公开的实施方式描述的方法、算法或控制功能的步骤可直接实现于硬件中,或者可按照可通过各种计算机手段执行的程序指令的形式来实现,并且可被记录在计算机可读记录介质中。计算机可读记录介质可包括程序指令、数据文件、数据结构等(单独地或其组合)。记录在计算机可读记录介质上的程序指令可为本公开专门设计和配置,或者可为计算机软件领域的技术人员已知从而可用的。计算机可读记录介质的示例可包括:磁介质,例如硬盘、软盘和磁带;光学记录介质,例如紧凑盘只读存储器(CD-ROM)和数字多功能盘(DVD);磁光介质,例如软光盘;以及专门被配置为存储并执行程序指令的硬件装置,例如只读存储器(ROM)、随机存取存储器(RAM)、闪存等。程序指令的示例可包括由编译器创建的机器语言代码以及可由计算机利用解释器等执行的高级语音代码。上述硬件装置可被配置为作为一个或更多个软件模块操作以执行本公开的操作,反之亦然。
尽管上文中参照示例性实施方式详细描述了本公开,本公开不限于上述示例性实施方式,本公开的技术构思将达到在不脱离以下权利要求书中要求保护的本公开的主题的情况下本公开所属技术领域的普通技术人员可进行形式上的各种改变和修改的范围。
本申请基于2016年2月24日提交的韩国专利申请No.10-2016-0021861并且要求其优先权,其完整内容通过引用并入本文。

Claims (14)

1.一种用于提供真实培训媒体的设备,该设备包括:
用户操作的培训装置,所述用户通过该培训装置来示范技术培训;
多个视频图像捕获器,所述多个视频图像捕获器被配置为在不同位置对包括所述培训装置的预定空间进行图像捕获;
至少一个声音记录器,所述至少一个声音记录器被配置为记录在所述预定空间中生成的声音;
运动记录器,该运动记录器被配置为根据所述培训装置的操作来记录所述培训装置的运动信息;以及
发生器,该发生器被配置为利用由所述多个视频图像捕获器图像捕获的多条视频内容、由所述至少一个声音记录器记录的相应的多条声音内容以及由所述运动记录器记录的所述运动信息来生成一条真实培训媒体内容。
2.根据权利要求1所述的设备,该设备还包括:
多个显示单元,相应的多条视频内容被映射至所述多个显示单元,并且所述多个显示单元被配置为当再现所述真实培训媒体内容时根据针对所述多条视频内容设定的多条设置信息来再现映射至所述显示单元的所述多条视频内容;
至少一个声音输出单元,相应的多条声音内容被映射至所述至少一个声音输出单元,并且所述至少一个声音输出单元被配置为当再现所述真实培训媒体内容时根据针对所述多条声音内容设定的多条设置信息来再现映射至所述至少一个声音输出单元的所述多条声音内容;以及
培训装置驱动器,该培训装置驱动器被配置为当再现所述真实培训媒体内容时根据所述运动信息来驱动所述培训装置。
3.根据权利要求1所述的设备,其中,所述运动信息包括所述培训装置的三维表示的x位置值、y位置值、z位置值、横滚扭矩值、俯仰扭矩值和偏航扭矩值当中的至少一个自由度值。
4.根据权利要求1所述的设备,其中,所述发生器被配置为针对所述多条视频内容中的每一条设定视频内容设置信息并且使用所述视频内容设置信息来生成所述真实培训媒体内容,
其中,所述视频内容设置信息是基于对在用户操作所述培训装置的情况下所述用户的位置以及所述视频图像中所述培训装置的暴露度和运动度中的至少一个进行分析的结果来设定的,并且
其中,所述视频内容设置信息包括视频内容的再现期间的暂停时间点、暂停的保持时间周期和取消暂停之后的再现时间点中的至少一个以及视频图像中的特定区域的放大时间点和放大之后的放大取消时间点。
5.根据权利要求1所述的设备,其中,所述发生器被配置为针对所述多条声音内容中的每一条设定声音内容设置信息并且使用所述声音内容设置信息来生成所述真实培训媒体内容,
其中,所述声音内容设置信息是基于对是否包括由所述培训装置的运动生成的特定声音、所述特定声音的音量以及是否包括用户的语音中的至少一个进行分析的结果来设定的,并且
其中,所述声音内容设置信息包括所述声音内容的再现期间的音量调节值、声音输出单元的运动路径以及所述声音输出单元的运动速度的模式中的至少一个。
6.根据权利要求1所述的设备,该设备还包括:
内容管理器,该内容管理器被配置为管理针对各个用户生成的真实培训媒体内容;以及
推荐器,该推荐器被配置为当选择再现特定真实培训媒体内容时推荐对与所述特定真实培训媒体内容的情况下的培训装置相同的培训装置进行操作的另一用户的真实培训媒体内容,
其中,当选择再现推荐的真实培训媒体内容时,所述发生器被配置为利用所述特定真实培训媒体内容和所述推荐的真实培训媒体内容来生成用户比较-真实培训媒体内容。
7.根据权利要求6所述的设备,其中,所述特定真实培训媒体内容包括预定单位的比较时间周期,
其中,所述推荐的真实培训媒体内容包括分别与所述特定真实培训媒体内容的所述比较时间周期对应的对应时间周期,并且
其中,所述发生器生成所述用户比较-真实培训媒体内容,使得所述特定真实培训媒体内容的所述比较时间周期和所述推荐的真实培训媒体内容的所述对应时间周期被依次再现。
8.一种用于提供真实培训媒体的方法,该方法包括以下步骤:
由多个视频图像捕获器在不同位置对包括培训装置的预定空间进行图像捕获的图像捕获步骤,其中,用户操作所述培训装置并且所述用户通过所述培训装置来示范技术培训;
由至少一个声音记录器记录在所述预定空间中生成的声音的记录步骤;
由运动记录器根据所述培训装置的操作来记录所述培训装置的运动信息的运动记录步骤;以及
利用经图像捕获的多条视频内容、所记录的多条声音内容以及所记录的运动信息来生成一条真实培训媒体内容的内容生成步骤。
9.根据权利要求8所述的方法,该方法还包括以下步骤:
当再现所述真实培训媒体内容时,由被映射有相应的所述多条视频内容的多个显示单元根据针对所述多条视频内容设定的多条设置信息来再现映射至所述显示单元的所述多条视频内容;
当再现所述真实培训媒体内容时,由被映射有相应的所述多条声音内容的至少一个声音输出单元根据针对所述多条声音内容设定的多条设置信息来再现映射至所述至少一个声音输出单元的所述多条声音内容;以及
当再现所述真实培训媒体内容时根据所述运动信息来驱动所述培训装置的培训装置驱动步骤。
10.根据权利要求8所述的方法,其中,所述运动信息包括所述培训装置的三维表示的x位置值、y位置值、z位置值、横滚扭矩值、俯仰扭矩值和偏航扭矩值当中的至少一个自由度值。
11.根据权利要求8所述的方法,其中,所述内容生成步骤包括以下步骤:
针对所述多条视频内容中的每一条设定视频内容设置信息并且利用所述视频内容设置信息来生成所述真实培训媒体内容,
其中,所述视频内容设置信息是基于对在用户操作所述培训装置的情况下所述用户的位置以及所述视频图像中所述培训装置的暴露度和运动度中的至少一个进行分析的结果来设定的,并且
其中,所述视频内容设置信息包括视频内容的再现期间的暂停时间点、暂停的保持时间周期和取消暂停之后的再现时间点中的至少一个以及视频图像中的特定区域的放大时间点和放大之后的放大取消时间点。
12.根据权利要求8所述的方法,其中,所述内容生成步骤包括以下步骤:
针对所述多条声音内容中的每一条设定声音内容设置信息并且使用所述声音内容设置信息来生成所述真实培训媒体内容,
其中,所述声音内容设置信息是基于对是否包括由所述培训装置的运动生成的特定声音、所述特定声音的音量以及是否包括用户的语音中的至少一个进行分析的结果来设定的,并且
其中,所述声音内容设置信息包括所述声音内容的再现期间的音量调节值、声音输出单元的运动路径以及所述声音输出单元的运动速度的模式中的至少一个。
13.根据权利要求8所述的方法,该方法还包括以下步骤:
管理针对各个用户生成的真实培训媒体内容的内容管理步骤;
当选择再现特定真实培训媒体内容时推荐对与所述特定真实培训媒体内容的情况下的培训装置相同的培训装置进行操作的另一用户的真实培训媒体内容的推荐步骤;
当选择再现推荐的真实培训媒体内容时利用所述特定真实培训媒体内容和所述推荐的真实培训媒体内容来生成用户比较-真实培训媒体内容的比较内容生成步骤;以及
再现所述用户比较-真实培训媒体内容的步骤。
14.根据权利要求13所述的方法,其中,所述比较内容生成步骤包括以下步骤:
从所述推荐的真实培训媒体内容提取分别与所述特定真实培训媒体内容的比较时间周期对应的对应时间周期;以及
生成用户比较-真实培训媒体内容,该用户比较-真实培训媒体内容被配置为使得所述特定真实培训媒体内容的所述比较时间周期和所述推荐的真实培训媒体内容的所述对应时间周期被依次再现。
CN201710099105.0A 2016-02-24 2017-02-23 提供真实培训媒体的设备和方法 Pending CN107123321A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2016-0021861 2016-02-24
KR1020160021861A KR101892622B1 (ko) 2016-02-24 2016-02-24 실감교육미디어 제공 장치 및 실감교육미디어 제공 방법

Publications (1)

Publication Number Publication Date
CN107123321A true CN107123321A (zh) 2017-09-01

Family

ID=59629488

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710099105.0A Pending CN107123321A (zh) 2016-02-24 2017-02-23 提供真实培训媒体的设备和方法

Country Status (3)

Country Link
US (1) US10515563B2 (zh)
KR (1) KR101892622B1 (zh)
CN (1) CN107123321A (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AT521861A1 (de) * 2018-11-13 2020-05-15 Atomic Austria Gmbh Verfahren und elektronisches System zum Unterstützen einer Person bei der Ausübung von Skisport
CN110248235B (zh) * 2019-06-26 2022-06-17 深圳市轱辘车联数据技术有限公司 软件教学方法、装置、终端设备及介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5984684A (en) * 1996-12-02 1999-11-16 Brostedt; Per-Arne Method and system for teaching physical skills
US20060003300A1 (en) * 2004-06-30 2006-01-05 Interactive Sports Training, Llc (Formerly Known As Major League Partners) Method and apparatus for creating a personal sports lesson
US20100034519A1 (en) * 2006-10-23 2010-02-11 Masahiro Kato Video reproducing apparatus, video display system and record medium
KR20110065388A (ko) * 2009-12-07 2011-06-15 광주과학기술원 의료 훈련 시뮬레이션 시스템 및 방법
CN102169642A (zh) * 2011-04-06 2011-08-31 李一波 具有智能纠错功能的交互式虚拟教师系统
CN102592484A (zh) * 2010-11-16 2012-07-18 韩国电子通信研究院 用于基于虚拟现实的训练模拟器的可重配置平台管理设备
KR20120088317A (ko) * 2011-01-31 2012-08-08 주식회사 영국전자 수술 영상 저장 및 재생 방법 및 시스템
KR20140077029A (ko) * 2012-12-13 2014-06-23 전자부품연구원 복강경 수술용 시뮬레이션 장치 및 방법

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002200206A (ja) * 2000-12-28 2002-07-16 Asobous:Kk 移動体画像通信を用いたスポーツにおける体の動かし方の指導検索方法
KR20050013461A (ko) 2003-07-28 2005-02-04 이솔정보통신(주) 원격 교육용 강의영상 편집 시스템
WO2012051605A2 (en) * 2010-10-15 2012-04-19 Jammit Inc. Dynamic point referencing of an audiovisual performance for an accurate and precise selection and controlled cycling of portions of the performance
US9613659B2 (en) * 2013-03-15 2017-04-04 Fitbit, Inc. Generating custom audio content for an exercise session
US9589207B2 (en) * 2013-11-21 2017-03-07 Mo' Motion Ventures Jump shot and athletic activity analysis system
US20150356780A1 (en) * 2014-06-05 2015-12-10 Wipro Limited Method for providing real time guidance to a user and a system thereof
WO2016112194A1 (en) * 2015-01-07 2016-07-14 Visyn Inc. System and method for visual-based training

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5984684A (en) * 1996-12-02 1999-11-16 Brostedt; Per-Arne Method and system for teaching physical skills
US20060003300A1 (en) * 2004-06-30 2006-01-05 Interactive Sports Training, Llc (Formerly Known As Major League Partners) Method and apparatus for creating a personal sports lesson
US20100034519A1 (en) * 2006-10-23 2010-02-11 Masahiro Kato Video reproducing apparatus, video display system and record medium
KR20110065388A (ko) * 2009-12-07 2011-06-15 광주과학기술원 의료 훈련 시뮬레이션 시스템 및 방법
CN102592484A (zh) * 2010-11-16 2012-07-18 韩国电子通信研究院 用于基于虚拟现实的训练模拟器的可重配置平台管理设备
KR20120088317A (ko) * 2011-01-31 2012-08-08 주식회사 영국전자 수술 영상 저장 및 재생 방법 및 시스템
CN102169642A (zh) * 2011-04-06 2011-08-31 李一波 具有智能纠错功能的交互式虚拟教师系统
KR20140077029A (ko) * 2012-12-13 2014-06-23 전자부품연구원 복강경 수술용 시뮬레이션 장치 및 방법

Also Published As

Publication number Publication date
US20170243503A1 (en) 2017-08-24
KR101892622B1 (ko) 2018-10-04
KR20170099586A (ko) 2017-09-01
US10515563B2 (en) 2019-12-24

Similar Documents

Publication Publication Date Title
US8024276B2 (en) Method for interactive learning and training
Leite et al. Emotional storytelling in the classroom: Individual versus group interaction between children and robots
Sors et al. The contribution of early auditory and visual information to the discrimination of shot power in ball sports
Tessler et al. Using cargo-bot to provide contextualized learning of recursion
Rho et al. An experiential learning approach to learning manual communication through a virtual reality environment
EP3238011B1 (en) System and method for automatically localizing haptic effects on a body
CN107123321A (zh) 提供真实培训媒体的设备和方法
US20090099983A1 (en) System and method for authoring and learning
US20220223067A1 (en) System and methods for learning and training using cognitive linguistic coding in a virtual reality environment
Park et al. Using a shared tablet workspace for interactive demonstrations during human-robot learning scenarios
US20160303483A1 (en) Artificial intelligence controlled entertainment performance
CN108460494A (zh) 一种机器人轨迹处理的方法、装置及机器人
Henderson et al. Early Prediction of Museum Visitor Engagement with Multimodal Adversarial Domain Adaptation.
Martinez-Garza et al. Advances in assessment of students' intuitive understanding of physics through gameplay data
Kamarianakis et al. Recording and replaying psychomotor user actions in VR
Wood et al. Utilising humanoid robots to assist children with autism learn about Visual Perspective Taking
Gupta et al. Supporting Upper Elementary Students in Learning AI Concepts with Story-Driven Game-Based Learning
KR20220053441A (ko) 신경망을 이용한 강의 영상 평가 방법, 장치 및 컴퓨터 프로그램
Baxter et al. On project-based learning through the vertically-integrated projects program
Zhang et al. Designing immersive virtual reality stories with rich characters and high interactivity to promote learning of complex immunology concepts
KR20190135308A (ko) 완구를 이용한 교육학습에서 학습 단계 및 속도 조절 시스템, 그리고 이의 제어 방법
Cardwell et al. The use of virtual reality in education and learning: A case study for teaching crime scene investigation
Arnold Michael Chekhov’s Inspiration for Actors
CN107170305A (zh) 一种将虚拟演播和现有录播系统结合的方法
Ni et al. Enhancing mobile VR immersion: a multimodal system of neural networks approach to an IMU gesture controller

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170901

WD01 Invention patent application deemed withdrawn after publication