CN106575163B - 反馈提供方法、系统及分析装置 - Google Patents

反馈提供方法、系统及分析装置 Download PDF

Info

Publication number
CN106575163B
CN106575163B CN201580044941.8A CN201580044941A CN106575163B CN 106575163 B CN106575163 B CN 106575163B CN 201580044941 A CN201580044941 A CN 201580044941A CN 106575163 B CN106575163 B CN 106575163B
Authority
CN
China
Prior art keywords
feedback
behavior
sensing data
sensor
offer system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201580044941.8A
Other languages
English (en)
Other versions
CN106575163A (zh
Inventor
松永英行
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN106575163A publication Critical patent/CN106575163A/zh
Application granted granted Critical
Publication of CN106575163B publication Critical patent/CN106575163B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A63B24/0006Computerised comparison for qualitative assessment of motion sequences or the course of a movement
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B60/00Details or accessories of golf clubs, bats, rackets or the like
    • A63B60/46Measurement devices associated with golf clubs, bats, rackets or the like for measuring physical parameters relating to sporting activity, e.g. baseball bats with impact indicators or bracelets for measuring the golf swing
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B69/00Training appliances or apparatus for special sports
    • A63B69/38Training appliances or apparatus for special sports for tennis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/003Repetitive work cycles; Sequence of movements
    • G09B19/0038Sports
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/40Acceleration
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/70Measuring or simulating ambient conditions, e.g. weather, terrain or surface conditions
    • A63B2220/72Temperature
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/70Measuring or simulating ambient conditions, e.g. weather, terrain or surface conditions
    • A63B2220/75Humidity
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/803Motion sensors
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/805Optical or opto-electronic sensors
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/808Microphones
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/83Special sensors, transducers or devices therefor characterised by the position of the sensor
    • A63B2220/833Sensors arranged on the exercise apparatus or sports implement
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/89Field sensors, e.g. radar systems

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

提供了一种反馈提供方法,该方法包括:由处理器基于目标的感测数据来指定目标中产生的行为和行为的产生时间,根据所指定的行为来确定要提供的反馈,以及在与产生时间对应的时间提供反馈。

Description

反馈提供方法、系统及分析装置
相关申请的交叉引用
本申请要求于2014年8月28日提交的日本优先权专利申请JP 2014-173882的权益,其全部内容通过引用并入本文。
技术领域
本公开涉及反馈提供方法、系统及分析装置。
背景技术
到目前为止,已经开发了用于通过使用感测或分析来支持改进用户的运动的多种技术。例如,PTL 1公开了用于基于运动传感器的输出数据来提取挥动(swing)的特征信息的技术。通过使用这样的技术,用户可以客观地回顾运动的动作(play),并且该结果可以用于改进。
引用列表
专利文献
PTL 1:JP 2012-157644A
发明内容
技术问题
顺便提及,在运动中,除了在比赛等中的实际动作之外,常见的是再体验动作或执行虚拟动作。例如,再体验动作包括通过观看其中记录了动作的状态的图片来回顾该动作。例如,虚拟动作包括练习,如被称为练习挥动或影子(shadow)动作的动作。在这样的设置中,在与实际动作的时间轴相同或相似的时间轴上进行用户的体验。然而,PTL 1等仅公开了用于主要回顾作为静态数据的动作的技术,并且没有提供更充分再体验动作或虚拟动作的技术。
因此,本公开的实施例提出了新的且改进的反馈提供方法、系统及分析装置,所述新的且改进的反馈提供方法、系统及分析装置例如通过使用感测数据能够在设置如在再体验运动中的动作或虚拟动作中使用户的体验更充分。
问题的解决方案
根据本公开的实施例,提供了一种反馈提供方法,该方法包括:由处理器基于目标的感测数据来指定目标中产生的行为和行为的产生时间,根据所指定的行为来确定要提供的反馈,以及在与产生时间对应的时间提供反馈。
根据本公开的另一实施例,提供了一种分析装置,该分析装置包括感测数据分析单元、反馈确定单元以及反馈命令生成单元,感测数据分析单元用于基于感测数据来指定目标中产生的行为和行为的产生时间,反馈确定单元用于根据所指定的行为来确定要提供的反馈,反馈命令生成单元用于在与产生时间对应的时间生成用于提供反馈的命令。
根据本公开的另一实施例,提供了一种程序,该程序使计算机实现下述:基于目标的感测数据来指定目标中产生的行为和行为的产生时间的功能,根据所指定的行为来确定要提供的反馈的功能,以及在与产生时间对应的时间提供反馈的功能。
发明的有益效果
根据本公开的如上所述的一个或更多个实施例,例如通过使用感测数据可以在设置如在再体验运动中的动作或虚拟动作中使用户的体验更充分。
应注意,未必限于上述效果,以及连同或替代上述效果,可以展现在本说明书中期望引入的任意效果或者可以根据本说明书期望的其他效果。
附图说明
图1是示出根据本公开的第一实施例的系统的配置示例的图示。
图2是示出根据本公开的第一实施例的传感器装置的配置的示意性框图。
图3是示出本公开的第一实施例中的用于分析处理的功能配置的示意性框图。
图4是用于描述本公开的第一实施例中的感测数据的分析处理的图示。
图5是示出根据本公开的第一实施例的感测数据的分析处理的示例的流程图。
图6是示出根据本公开的第二实施例的系统的配置示例的图示。
图7是示出根据本公开的第二实施例的智能电话的配置的示意性框图。
图8是示出本公开的第二实施例中的用于分析处理的功能配置的示意性框图。
图9是示出本公开的第一实施例中的观测到的感测数据与通过分析获得的信息之间的关系的图示。
图10是用于描述在本公开的第一实施例中基于感测数据的反馈生成处理的图示。
图11是示出本公开的第二实施例中图像的反馈的示例的图示。
图12是示出根据本公开的实施例的信息处理装置的硬件配置示例的框图。
具体实施方式
在下文中,将参照附图详细地描述本公开的优选实施例。应注意,在本说明书和附图中,使用相同的附图标记来表示具有基本上相同功能和结构的结构元件,并且省略对这些结构元件的重复说明。
将以下面的顺序来进行描述。
1.第一实施例
1-1.系统配置
1-2.功能配置和处理流程
1-3.修改示例
2.第二实施例
2-1.系统配置
2-2.功能配置
3.反馈的示例
4.硬件配置
5.补充
(1.第一实施例)
(1-1.系统配置)
图1是示出根据本公开的第一实施例的系统的配置示例的图示。参照图1,系统10包括传感器装置100。系统10可以另外包括智能电话200和/或服务器300。应注意,传感器装置100和智能电话200可以例如通过稍后描述的信息处理装置的硬件配置来实现。服务器300可以通过具有稍后描述的信息处理装置的硬件配置的单个服务器装置来实现或者通过具有这样的配置的多个服务器装置之间的协作来实现。
传感器装置100附接至网球拍R。传感器装置100包括传感器。传感器提供球拍R或使用球拍R的用户的感测数据。在所示的示例中,球拍R或用户被视为感测的目标。此外,传感器装置100包括输出装置。输出装置例如通过图片、音频、振动等向用户提供反馈。另外,传感器装置100可以包括执行对用于基于感测数据提供反馈的分析处理的处理器。或者,传感器装置100可以向智能电话200或服务器300发送感测数据,并且可以请求用于基于感测数据提供反馈的分析处理。在这种情况下,传感器装置100从智能电话200或服务器300接收与反馈相关的信息。
智能电话200通过无线通信如蓝牙(注册商标)接收从传感器装置100发送的感测数据。此外,智能电话200通过无线通信将与通过对感测数据的分析处理而获得的反馈相关的信息发送到传感器装置100。智能电话200可以自身执行分析处理,或者可以向服务器300请求分析处理。在前者的情况下,智能电话200中包括的处理器执行分析处理。在后者的情况下,通过网络通信将感测数据从智能电话200发送到服务器300,并且将与反馈相关的信息从服务器300发送到智能电话200。应注意,智能电话200是用户携带的不同于传感器装置100的终端装置的示例。因此,智能电话200可以例如由另一类型的终端装置如平板电脑或个人计算机来替换。
服务器300通过网络通信接收从传感器装置100或智能电话200发送的感测数据。传感器装置100能够在不经由智能电话200的情况下直接与服务器300进行通信。此外,服务器300通过网络通信将与通过对感测数据的分析处理而获得的反馈相关的信息发送到传感器装置100或智能电话200。在系统10包括服务器300的情况下,包括在实现服务器300的一个或更多个服务器装置中的处理器执行分析处理。
图2是示出根据本公开的第一实施例的传感器装置的配置的示意性框图。参照图2,传感器装置100包括传感器110、处理单元120、存储单元130、发送单元140、输出单元150以及接收单元160。应注意,处理单元120通过使处理器如CPU根据程序进行操作来实现。存储单元130由存储器或存储装置实现。发送单元140和接收单元160由通信装置实现。输出单元150由输出装置实现。在下文中,将另外描述每个组成元件。
例如,传感器110包括加速度传感器、陀螺仪传感器、地磁传感器和/或振动传感器。在本说明书中,这些传感器被统称为运动传感器。此外,传感器110可以包括温度传感器、湿度传感器、音频传感器或照度传感器。传感器110通过将球拍R或使用球拍R的用户设置为目标来提供感测数据。使用球拍R的用户可以是进行运动的用户。此外,球拍R可以是用户使用的工具。
处理单元120对例如由传感器110提供的感测数据进行预处理。预处理包括例如采样、去噪等,并且根据需要来实施。处理单元120可以将感测数据至少暂时地累积在存储单元130中。处理单元120可以执行用于基于感测数据提供反馈的分析处理。在这种情况下,处理单元120实现稍后描述的分析处理的功能配置。或者,处理单元120可以经由发送单元140将感测数据发送到智能电话200或服务器300,并且可以经由接收单元160接收与反馈相关的信息。
另外,处理单元120基于通过自身执行分析处理而获得的信息或者从智能电话200或服务器300接收的信息来对输出单元150进行控制。以此方式,输出单元150向用户提供反馈。例如,输出单元150包括振动器,并且通过向球拍R发送振动来向用户提供反馈。此外,例如,输出单元150包括扬声器,并且通过输出音频来向用户提供反馈。
如上所述,在本实施例中,系统10可以包括智能电话200和/或服务器300。在这种情况下,由上述示例中的传感器装置100的处理单元120执行的分析处理由智能电话200或服务器300的处理器来实现。因此,在这种情况下,智能电话200或服务器300的处理器实现稍后描述的用于分析处理的功能配置。
(1-2.功能配置和处理流程)
图3是示出本公开的第一实施例中的用于分析处理的功能配置的示意性框图。参照图3,功能配置包括感测数据分析单元501、反馈确定单元503以及反馈命令生成单元505。如上所述,这些功能配置由智能电话200、服务器300或传感器装置100的处理器来实现。此外,上述功能配置可以参考模式数据库(DB)507和反馈DB 509。模式DB 507和反馈DB 509由智能电话200、服务器300或者传感器装置100的存储器或存储装置来实现。
(感测数据分析单元)
感测数据分析单元501基于目标的感测数据来指定在目标中产生的行为(action)和行为的产生时间。在本实施例中,感测的目标是球拍R或使用球拍R的用户。感测数据包括例如由加速度传感器、陀螺仪传感器、地磁传感器和/或振动传感器提供的数据。此外,感测数据可以包括由温度传感器、湿度传感器、音频传感器、照度传感器等提供的数据。该行为包括例如在使用球拍R打网球时产生的事件,并且更具体地,使用球拍R击球(shot)。
在本实施例中,感测数据分析单元501通过识别与击球(行为)对应的感测数据的模式来指定所产生的击球。在使用球拍R击球时,例如,针对每种类型的击球如正手球、后手球、发球和扣球来观察特定感测数据的模式。例如,在由运动传感器提供感测数据的情况下,如果传感器装置100在球拍R中的附接位置是已知的,则可以根据所提供的感测数据来指定击球的类型。例如当执行实际击球时从观察到的感测数据的波形中统计地提取感测数据的模式,并且将其存储在模式DB 507中。感测数据分析单元501通过对存储在模式DB 507中的模式与所获取的感测数据进行匹配来指定击球。
这里,在本实施例中,感测数据分析单元501通过在感测数据与模式之间进行部分匹配来在击球(行为)的产生时间之前指定击球。感测数据分析单元501实时分析所获取的感测数据D。将参照图4和图5另外描述这一点。图4中示出了沿着时间序列t获取的感测数据D。图5是示出由感测数据分析单元501针对这样的感测数据D执行的模式匹配的示例的流程图。
参照图4和图5,在已经输入长度为tL的时间窗W部分的感测数据的情况下,感测数据分析单元501开始分析处理(S101)。感测数据分析单元501对时间窗W内的感测数据D执行模式匹配(S103)。在时间窗W内的感测数据D与模式匹配的概率超过阈值的情况下(S105的“是”),感测数据分析单元501检测到在此时产生与该模式对应的击球(S107)。在S105中感测数据D与模式匹配的概率未超过阈值的情况下,感测数据分析单元501推进时间窗W(例如,直到最新位置)(S109),并且再次执行模式匹配(S103)。
在所示的示例中,获取直到时间t1的感测数据D,并且执行从时间t1-tL直到时间t1的时间窗W内的感测数据D的模式匹配。在感测数据D与模式匹配的概率超过阈值的情况下,指定在此时(在时间t1时)产生与该模式对应的击球。在这种情况下,感测数据分析单元501可以通过假设从时间t1以后的感测数据DE符合指定模式来指定击球的产生时间ts。击球的产生时间可以与感测数据的模式相关联地被限定,例如,作为球对球拍产生撞击的时间。以此方式,在本实施例中,可以在球拍R实际产生击球之前指定要产生的击球和该击球的产生时间。
在本实施例中,不论是否在球拍R中实际产生击球,通过如上所述的感测数据分析单元501的配置可以在产生之前的阶段指定击球和击球的产生时间。因此,例如,球拍R用于练习挥动或影子动作,即使在实际上没有产生球的撞击的情况下,也可以指定与球拍R的挥动对应的击球,并且可以提供与这个击球对应的反馈。应注意,为了继续,假设在球拍实际上没有产生球的撞击的情况下提供反馈来描述反馈确定单元503和反馈命令生成单元505的处理。
(反馈确定单元)
再次参照图3,反馈确定单元503根据由感测数据分析单元501指定的行为来确定要提供的反馈。如上所述,本实施例中的行为是在打网球时产生的击球。例如,感测数据分析单元501可以通过分析感测数据来指定击球的类别。在这种情况下,将示出与指定击球的类别对应的反馈的数据存储在反馈DB 509中。反馈确定单元503从所存储的数据中选择适当反馈的数据。或者,可以对行为(击球)不进行分类,以及反馈确定单元503可以确定为要产生的击球提供通用反馈。
文中,可以根据击球的类型来限定本实施例中的击球(行为)的类别。击球的类型包括例如正手球、后手球、发球、扣球等。此外,可以根据击球的技能程度来限定击球的类别。例如,可以针对上述每种类型的击球,在模式DB 507中存储与高水平玩家的击球对应的模式、与中等水平玩家的击球对应的模式和与低水平玩家的击球对应的模式,以及感测数据分析单元501可以确定击球的技能程度。
在本实施例中,可以通过振动或音频来提供反馈。更具体地,例如,在由感测数据分析单元501指定一些击球的产生的情况下,可以在击球的产生时间输出用于示出击球的振动和/或声音效果。该振动和/或音频可以是通用的,不管击球的类别如何,或者可以是针对每个类别的击球而不同的。例如,在根据击球的类型和技能程度来限定如上所述的击球的类别的情况下,可以提供针对击球的类型和技能程度的每个组合不同的反馈,或者可以在不管击球的类型的情况下,提供根据击球的技能程度不同的反馈。
在上述示例中,可以例如基于球拍R的用户在过去实际执行击球时(在已经产生球撞击球拍时)观察到的振动或音频的感测数据来生成作为反馈提供的振动或音频。也就是说,可以基于过去获取的第一用户的感测数据来生成反馈,并且可以将反馈提供给第一用户他或她自己。在这种情况下,通过再现用户他或她自己的过去的击球,可以再体验过去的动作。
或者,可以基于与球拍R的用户不同的用户在过去实际执行击球时观察到的振动或音频的感测数据来生成作为反馈提供的振动或音频。也就是说,可以基于过去获取的第一用户的感测数据来生成反馈,并且可以将反馈提供给不同于第一用户的第二用户。在这种情况下,例如,通过将基于高水平玩家(第一用户)的感测数据生成的反馈提供给初学水平玩家(第二用户),可以虚拟地经历正确击球的时刻和准确捕捉球时的感觉,并且可以作为改进的指标。
此外,作为反馈提供的振动或音频可以与实际击球时的振动或音频的感测数据分开地生成,使得用户容易理解(虚拟)击球的产生。
(反馈命令生成单元)
反馈命令生成单元505在由感测数据分析单元501指定的行为的产生时间生成用于提供由反馈确定单元503所确定的反馈的命令。例如,在通过振动提供反馈的情况下,命令可以包括振动器的控制信号。此外,在通过音频提供反馈的情况下,命令可以包括输入到扬声器的音频信号。如上所述,在本实施例中,在产生行为(击球)之前的阶段通过感测数据分析单元501指定产生时间。因此,反馈命令生成单元505对命令的输出时刻进行控制,以使得在指定产生时间输出反馈。例如,在反馈命令生成单元505由智能电话200或服务器300的处理器实现的情况下,在对命令的输出时刻进行控制时可以考虑通信的延时。
应注意,在通过如上所述的处理来产生行为(击球)、指定与其对应的反馈和击球的产生时刻之后,感测数据分析单元501、反馈确定单元503和反馈命令生成单元505可以连续地执行类似的处理。也就是说,在产生击球和指定击球产生时间之后,感测数据分析单元501可以在连续地推进时间窗W的情况下执行感测数据D的模式匹配。
例如,在感测数据D与模式匹配的概率降到阈值以下的情况下,作为推进时间窗W的结果,感测数据分析单元501可以取消击球的产生估计,并且可以停止由反馈命令生成单元505进行的命令的生成和输出。或者,在感测数据D与另一模式匹配的概率超过阈值的情况下,作为推进时间窗W的结果,感测数据分析单元501可以校正击球的产生估计,并且反馈确定单元503可以选择另一反馈。此外,在击球的估计产生时间已经改变的情况下,作为推进时间窗W的结果,感测数据分析单元501可以校正对击球的产生时间的估计,并且可以改变反馈命令生成单元505输出命令的时刻。
(1-3.修改示例)
至此,描述了本公开的第一实施例。应注意,在本实施例中,各种修改示例是可行的,并且不限于上述示例。例如,在上述示例中,附接至球拍R的传感器装置100除了包括传感器110之外还包括输出单元150。在另一示例中,包括传感器110的装置和包括提供反馈的输出单元150的装置可以不同。例如,可以设置不包括输出单元150和接收单元160的传感器装置100,以及包括输出单元150和接收单元160的另一装置。该另一装置可以另外包括用于根据由接收单元160接收的信息来控制输出单元150的处理器。或者,输出单元150可以包括在传感器装置100和另一装置两者中。
在上述修改示例中的另一装置可以是例如附接至球拍R的振动器单元。用于通过传感器110检测球拍R的运动的适当位置以及用于通过包括在输出单元150中的振动器在球拍R中产生振动的适当位置可以不同。因此,振动器单元可以独立于传感器装置100附接在球拍R上的适当位置处。此外,例如,另一装置可以是终端装置如智能电话200。在这种情况下,由用户携带的终端装置如智能电话200输出在击球时生成的反馈的振动或音频。在这种情况下,通过使用已处于智能电话200中的扬声器或振动器,可以在不需要将输出装置结合到传感器装置100中或准备用于输出的新装置的情况下方便地提供反馈。
或者,提供反馈的另一装置可以是由球拍R的用户穿戴的可穿戴式装置。例如,可穿戴式装置例如是眼镜型终端装置或手表型终端装置,并且能够在用户进行运动时被穿戴。例如,在手表型可穿戴式装置的情况下,类似于上述智能电话200的示例,可以通过音频或振动来提供反馈。此外,例如,在眼镜型可穿戴式装置的情况下,除了能够通过音频或振动提供反馈之外,还可以通过图像来提供反馈。
应注意,在除了眼镜型可穿戴式装置之外的情况下,例如,可以通过使用LED(发光二极管)来提供视觉反馈。这样的反馈不限于握持和挥动球拍R的用户,并且可以被提供给正在观看这个的例如朋友、教练等。此外,可以组合且提供上述的视觉、听觉和/或触觉反馈。在这种情况下,例如,通过使用在多个装置中的每个装置中的输出单元,可以提供多种各种类型的反馈,如来自传感器装置100的振动和来自智能电话200的音频。此外,通过使用在多个装置中的每个装置中的输出单元,可以提供相同类型的反馈。例如,可以存在下述情况:通过对多个装置中的作为输出单元的振动器进行同步,用户可以感觉到有效的振动。此外,可以存在下述情况:通过对多个装置中的作为输出单元的扬声器进行同步,可以提供具有立体声效果的音频的反馈。
虽然在上述示例中传感器装置100附接至球拍R,但是在另一示例中传感器装置100可以由用户独立地握持。在这种情况下,传感器装置100用作类似于虚拟球拍的握持部。如上所述,假设本实施例在实际上没有产生球的撞击的情况下通过用户挥动的球拍R来提供反馈。因此,用户的挥动不限于可以击打球的球拍R(击打工具),并且如果可以执行通过握持来挥动的运动,则可以是任何类型的物体。
此外,尽管在上述示例中描述了目标的行为是击打网球的情况,但是在另一示例中,除了网球之外的运动或者除了运动的行为之外的行为可以成为目标。例如,在除了网球之外的运动中,可以根据传感器数据检测到事件如使用击打工具(球棒、球杆、球拍等)或用户他或她自己的身体的击球、跳跃、着陆等。此外,除了运动之外,可以通过由制造商或建设者进行的训练等来预先估计行为的产生,并且可以用于提供与在虚拟产生时间时产生的行为对应的反馈。
(2.第二实施例)
(2-1.系统配置)
图6是示出根据本公开的第二实施例的系统的配置示例的图示。参照图6,系统20包括传感器装置600和智能电话700。系统20可以另外包括服务器800。应注意,传感器装置600和智能电话700可以例如通过稍后描述的信息处理装置的硬件配置来实现。服务器800可以通过具有稍后描述的信息处理装置的硬件配置的单个服务器装置来实现或者通过具有这样的配置的多个服务器装置之间的协作来实现。
传感器装置600附接至网球拍R。传感器装置600与上述第一实施例中的传感器装置100相同之处在于包括用于提供球拍R或使用球拍R的用户的感测数据的传感器。然而,在本实施例中,传感器装置600可以不具有输出装置。传感器装置600向智能电话200或服务器300发送感测数据。此时,感测数据可以是由传感器装置600的处理器预处理的。
智能电话700通过无线通信如蓝牙(注册商标)接收从传感器装置100发送的感测数据。智能电话700可以包括执行用于基于感测数据提供反馈的分析处理的处理器。或者,智能电话700可以通过网络通信将感测数据发送到服务器800,并且可以请求用于基于感测数据提供反馈的分析处理。此外,智能电话700包括成像单元如摄像头,并且捕获球拍R的用户在打网球的状态作为图片。
在本实施例中,除了如上所述的分析处理或数据的发送处理之外,智能电话700还用于回顾用户的动作。更具体地,智能电话700再现由成像单元捕获的用户的动作的图片,并将再现的图片投影到显示器上。以此方式,用户可以在完成动作之后回顾动作。此外,此时,智能电话700通过图像、音频、振动等提供与被再现为图片的动作对应的反馈。智能电话700包括用于提供这样的反馈的输出装置。通过由智能电话700本身执行的分析处理来获得与反馈相关的信息,或者从已经向其请求分析处理的服务器800接收与反馈相关的信息。
应注意,在所示的示例中,虽然为了方便起见,执行感测数据的分析处理或发送处理的功能、捕获用户的动作作为图片的功能、再现所捕获的图片的功能以及提供与被再现为图片的动作对应的反馈的功能合并在智能电话700中,但是本实施例不限于这样的示例。上述功能的部分或全部可以由单独的装置实现。例如,为了捕获用户的动作作为图片,可以单独准备数码相机。此外,为了再现所捕获的图片,可以单独准备电视。另外,提供反馈的功能可以通过包括输出装置的传感器装置600来实现。此外,与上述第一实施例类似,智能电话700可以例如由另一类型的终端装置如平板电脑或个人计算机来替换。
服务器800通过网络通信接收从传感器装置600或智能电话700发送的感测数据。传感器装置600能够在不经由智能电话700的情况下直接与服务器800进行通信。此外,服务器800通过网络通信将与通过对感测数据的分析处理而获得的反馈相关的信息发送到传感器装置600或智能电话700。在系统20包括服务器800的情况下,包括在实现服务器800的一个或更多个服务器装置中的处理器执行分析处理。
图7是示出根据本公开的第二实施例的智能电话的配置的示意性框图。参照图7,智能电话700包括接收单元710、处理单元720、存储单元730、发送单元740、输出单元750以及成像单元760。输出单元750包括显示器751、扬声器752和/或振动器753。应注意,处理单元720通过使处理器如CPU根据程序进行操作来实现。存储单元730由存储器或存储装置实现。接收单元710和发送单元740由通信装置实现。输出单元750由输出装置实现。成像单元760由成像装置实现。在下文中,将另外描述每个组成元件。
应注意,如上所述,智能电话700的功能可以通过分发到多个装置来实现。在这种情况下,图7中所示的框图被解释为示出由这些装置实现的功能组。
接收单元710从传感器装置600接收例如由加速度传感器、陀螺仪传感器、地磁传感器和/或振动传感器提供的感测数据。此外,接收单元710可以从传感器装置600接收由温度传感器、湿度传感器、声音传感器、照度传感器等提供的感测数据。类似于上述第一实施例,包括在传感器装置600中的传感器通过将球拍R或使用球拍R的用户设置为目标来提供感测数据。此外,接收单元710可以从服务器300接收与通过分析处理获得的反馈相关的信息。
处理单元720例如基于从传感器装置600接收的感测数据执行提供反馈的分析处理。在这种情况下,处理单元720实现稍后描述的用于分析处理的功能配置。与第一实施例不同,可以在事实之后实施分析处理。因此,处理单元720可以在将接收到的感测数据累积在存储单元730中的情况下执行读取以用于分析处理。或者,处理单元720可以在根据需要将接收到的感测数据暂时累积在存储单元730中时经由发送单元740执行至服务器800的发送以用于分析处理。
此外,处理单元720通过成像单元760对动作图片的成像进行控制。与获取感测数据并行地捕获动作图片。所捕获的动作图片被存储在存储单元730中。在本实施例中,在再现动作图片时,基于感测数据的分析结果来提供反馈。因此,希望动作图片和感测数据同步。处理单元720提供例如从传感器装置600接收的感测数据和由成像单元760捕获的动作图片共有的时间戳。或者,通过对感测数据和动作图片的时间戳中的一者或两者进行校正来同步处理单元720。
此外,处理单元720对通过显示器751和扬声器752再现动作图像、以及通过显示器751、扬声器752和/或振动器753提供反馈进行控制。更具体地,处理单元720例如根据用户操作通过使用显示器751和扬声器752来再现被存储在存储单元730中的动作图片。此时,处理单元720基于通过由处理单元720自身执行的分析处理而获得的信息或者从传感器装置600或服务器800接收的信息来控制显示器751、扬声器752和/或振动器753。以此方式,向用户提供反馈。
例如,通过使振动器753将振动发送至智能电话700的壳体来提供反馈。或者,通过使扬声器752输出音频或者通过使显示器751显示图像来提供反馈。在与被再现的动作图片中产生的行为的产生时间对应的时间提供反馈。因此,在本实施例中,用于提供反馈的信息与动作图像相关联。
如上所述,在本实施例中,可以通过传感器装置600或服务器800的处理器而不是智能电话700的处理单元720来执行用于基于感测数据提供反馈的分析处理。在这种情况下,传感器装置600或服务器800的处理器实现稍后描述的用于分析处理的功能配置。
(2-2.功能配置)
图8是示出本公开的第二实施例中的用于分析处理的功能配置的示意性框图。参照图8,功能配置包括感测数据分析单元531、反馈确定单元533以及反馈命令生成单元535。如上所述,这些功能配置由智能电话700、传感器装置600或服务器800的处理器来实现。此外,上述功能配置可以参考感测数据DB 537、模式DB 539以及反馈DB 541。另外,由反馈命令生成单元535生成的反馈命令可以被存储在反馈命令DB 543中。感测数据DB 537、模式DB539、反馈DB 541以及反馈命令DB 543由智能电话700、传感器装置600或服务器800的存储器或存储装置来实现。
(感测数据分析单元)
类似于第一实施例,感测数据分析单元531通过识别与击球(行为)对应的感测数据的模式来指定所生成的击球。例如,从当执行实际击球时观察到的感测数据的波形中统计地提取感测数据的模式,并且将其存储在模式DB 539中。感测数据分析单元501通过对存储在模式DB 507中的模式与所获取感测数据进行匹配来指定击球。要被分析的感测数据可以预先存储在感测数据DB 537中。
文中,作为与第一实施例的不同之处,在本实施例中,感测数据分析单元531针对预先存储在感测数据DB 537中的感测数据可以在事实之后执行感测数据的模式匹配。在这种情况下,感测数据分析单元531通过对感测数据与整个模式进行匹配来确定在感测目标中是否已生成与模式对应的击球(行为)。由于通过使用整个模式来执行匹配,所以可以在击球的产生时间基于感测数据的实际波形来执行准确的指定。
应注意,感测数据分析单元531执行分析的时间是任意的。类似于第一实施例,感测数据分析单元531可以在与接收到感测数据的实际时间接近的时刻执行分析,或者可以在接收到感测数据之后(在完成动作之后)立即执行分析。此外,感测数据分析单元531可以在再现动作图片时或在再现期间执行分析。或者,感测数据分析单元531可以通过对累积在感测数据DB 537中的感测数据执行周期性批处理来执行分析。
(反馈确定单元)
类似于第一实施例,反馈确定单元533根据由感测数据分析单元531指定的行为来确定要提供的反馈。例如,示出与由感测数据分析单元531指定的击球的类别对应的反馈的数据被存储在反馈DB 541中。反馈确定单元533从所存储的数据中选择适当反馈的数据。
文中,在本实施例中,由于在再现动作图片期间提供反馈,所以可以提供反馈作为图像如与动作图片一起显示的图标。因此,在本实施例中,可以通过振动、音频或图像来提供反馈。更具体地,例如,在由感测数据分析单元531指定一些击球的产生的情况下,可以在击球的产生时间输出用于示出击球的振动和/或声音效果,并且可以显示用于示出击球的图标。这种振动、音频和/或声音效果可以是通用的,不管击球的类别如何,或者对于每个类别的击球可以是不同的。类似于第一实施例,击球的类别可以包括击球的类型或技能程度。
在上述示例中,可以例如基于球拍R的用户或不同用户实际进行击球时观察到的振动或音频的感测数据来生成作为反馈提供的振动或音频。此外,作为反馈提供的振动或音频可以与实际击球时的振动或音频的感测数据分开地生成,使得用户容易理解(虚拟)击球的产生。在图像被作为反馈提供的情况下,图像如图标可以基本上与实际击球时的感测数据分开地生成。
(反馈命令生成单元)
类似于第一实施例,反馈命令生成单元535在由感测数据分析单元531指定的行为的产生时间生成用于提供由反馈确定单元533所确定的反馈的命令。也就是说,反馈命令生成单元535生成命令,使得在图片中已经生成行为(击球)时、在再现与感测数据一起获取的动作图片时提供反馈。例如,在通过振动提供反馈的情况下,命令可以包括智能电话700的振动器753的控制信号。此外,在通过音频提供反馈的情况下,命令可以包括输入到扬声器752的音频信号。在通过图像提供反馈的情况下,命令可以包括图像数据如由显示器751显示的与动作图片一起的图标。反馈命令生成单元535例如可以将所生成的命令与动作图像的时间戳相关联地存储在反馈命令DB 543中。
如上所述,在本实施例中,在再现动作图片时提供反馈。因此,在反馈命令生成单元535生成命令时,动作的时间序列是固定的。因此,在本实施例中,例如,可以不需要如上所述第一实施例中的对命令的输出时刻的控制以及实时连续的模式匹配,以及例如可以通过动作图片的时间戳来指定行为(击球)的产生时间,并且生成用于反馈的命令,以使得到与该产生时间对应的时间戳时执行用于反馈的命令。因此,可以在提供反馈时不实时执行反馈命令生成单元535的处理,以及例如可以预先生成命令,并将所生成的命令存储在反馈命令DB 543中。
在如上所述的本公开的第二实施例中,在事实之后参考动作图片时,提供了基于动作时的感测数据来产生反馈。以此方式,可以用更逼真的感觉再体验过去的动作。应注意,在本实施例中,类似于第一实施例,可以从多个装置中输出反馈。此外,目标的行为不限于击打网球,并且除了打网球以外的运动的行为或者除了运动的行为以外的其他行为可以变为目标。
(3.反馈的示例)
接下来,将描述在包括上述两个实施例的本公开的实施例中提供的反馈的示例。如上所述,例如,基于球拍R的用户或另一用户在过去实际执行击球时获取的感测数据,产生作为反馈提供的振动、音频或图像。在下文中,首先,将描述产生这样的反馈的示例。
(反馈的产生)
图9是用于描述感测数据的分析处理的示例的图示。参照图9,通过感测获得初级数据(感测数据),以及通过利用规定的算法对初级数据进行分析来获得次级数据。也可以说,次级数据是从初级数据中提取的抽象信息。
例如,初级数据是传感器的原始数据,或者是通过对原始数据进行预处理(采样,去噪等)而获得的数据。更具体地,初级数据可以包括检测值如时间、加速度或角速度、振动的检测值等。对于这样的原始数据,例如,使用模式识别或球拍R的振动特性如频率响应函数(FRF)执行分析。该分析处理不同于由上述实施例中的传感器数据分析单元501和传感器数据分析单元531执行的分析处理,并且可以是提取感测数据的特征用于产生反馈的处理。通过分析获得的次级数据可以包括例如球拍R上的已经产生球的撞击的位置、撞击的强度、击球(或挥动)的类型、挥动速度等。
应注意,例如,在WO 2013/136712等中公开了在击球时使用传感器数据的模式识别的技术。此外,例如,在WO 2013/069447等中公开了通过使用FRF指定撞击的位置的技术。
图10是用于描述使用感测数据的分析结果的反馈生成处理的示例的图示。参照图10,基于动作数据和设置值来执行反馈的生成处理,动作数据包括上述的初级数据和次级数据(在用户使用球拍R打网球时产生的数据)。设置值包括例如反馈的强度、持续时间、扩展水平等。
在上述示例中,例如可以通过扩展初级数据来生成反馈。例如,在由振动传感器提供的振动波形包括在初级数据中的情况下,可以通过将该振动波形均衡化来产生振动的反馈。在均衡化中,例如,针对每个频带来调整振动波形的振幅,使得用户能够容易地感知从作为输出装置的振动器传递到球拍R的振动。在这种情况下,可以在不经过均衡化的情况下通过简单地放大振动波形来生成振动的反馈。
此外,在上述示例中,可以基于次级数据生成反馈。例如,次级数据可以包括示出球拍R上的已经产生球的撞击的位置的数据。在这种情况下,可以根据撞击的位置来限定行为(使得击打工具(球拍R)产生撞击)的类别,并且可以针对每个位置准备不同音频或不同振动的反馈。在接近肠线的中心部产生撞击的情况下,或者在接近肠线的边缘或接近框架产生撞击的情况下,在实际击球时产生的声音或用户感觉到的振动将不同。因此,通过产生与每个音频或振动对应的反馈,用户可以识别挥动的状态。
可以示意性地再现这里产生的音频或振动的反馈,例如在实际击球时的音频或振动。或者,要生成的反馈可以是表示被提取作为次级数据的抽象信息的符号音频或振动。例如,在接近肠线的中心部产生撞击的情况下,可以作为反馈输出语音消息如“完美!”,或者在接近肠线的边缘或接近框架产生撞击的情况下,可以作为反馈输出语音消息如“不太好!”。类似地,可以根据由次级数据所示的挥动(击球)类型、挥动(击球)技能程度、挥动速度等来限定行为的类别,并且准备针对这些类别中的每个类别不同的反馈。
在上述示例中,在基于初级数据生成反馈的情况下,或者在基于次级数据生成反馈的情况下,确定基于感测数据提供的反馈是相同的。文中,如上所述,可以基于提供反馈的用户他或她自己的感测数据例如,在先前动作时获取的感测数据来生成反馈,或者可以基于不同用户的感测数据生成反馈。
(反馈的输出)
在本公开的实施例中,例如通过扬声器输出音频的反馈。此外,通过振动器输出振动的反馈。振动器可以使用例如偏心电机、线性电机和/或压电元件。例如,可以选择振动器的类型,使得用户可以在考虑球拍R的振动特性的情况下感测更真实的振动。或者,为了实现有效的振动反馈,可以对附接在球拍R上的多个位置处的振动器进行同步。
此外,在使用第一实施例中的可穿戴式装置的情况下,在第二实施例中,可以提供图像的反馈。例如,可以将图像的反馈显示为如图11所示的图标。在图11所示的示例中,在第二实施例中,在接近肠线的中心部产生撞击的情况下,作为反馈在再现动作图片的屏幕1000上显示包括文本如“完美”的图标1001,或者在接近肠线的边缘或接近框架产生撞击的情况下,作为反馈在再现动作图片的屏幕1000上显示包括文本如“不太好”的图标1001。此外,图像的反馈可以包括示出撞击的位置或者挥动类型的图标,或者示出挥动速度等的数值。以此方式,在上述实施例中生成的图像的反馈可以包括表示被提取作为次级数据的抽象信息的符号文本或图标。
(4.硬件配置)
接下来,参照图12,描述根据本公开的实施例的信息处理装置的硬件配置。图12是示出根据本公开的实施例的信息处理装置的硬件配置示例的框图。例如,所示的信息处理装置900可以实现上述实施例中的传感器装置、智能电话或服务器。
信息处理装置900包括中央处理单元(CPU)901、只读存储器(ROM)903以及随机存取存储器(RAM)905。此外,信息处理装置900可以包括主机总线907、桥接器909、外部总线911、接口913、输入装置915、输出装置917、存储装置919、驱动器921、连接端口923以及通信装置925。信息处理装置900还可以根据需要包括成像装置933和传感器935。信息处理装置900可以替代CPU901包括或者除了CPU 901以外还包括:被称为数字信号处理器(DSP)、专用集成电路(ASIC)或现场可编程门阵列(FPGA)的处理电路。
CPU 901用作算术处理装置和控制装置,并且根据记录在ROM 903、RAM 905、存储装置919或可移除记录介质927中的各种程序对信息处理装置900中的操作的全部或部分进行控制。ROM 903存储由CPU 901使用的程序、算术参数等。RAM 905主要存储在CPU 901的执行中使用的程序和在程序的执行中适当改变的参数等。CPU 901、ROM 903以及RAM 905通过主机总线907彼此连接,主机总线907包括内部总线如CPU总线。此外,主机总线907经由桥接器909连接到外部总线911如外围部件互连/接口(PCI)总线。
输入装置915是例如由用户操纵的操作单元,如鼠标、键盘、触摸面板、按钮、开关和杆。此外,输入装置915可以是例如使用红外线或其他无线电波的遥控装置,或者可以是例如与信息处理装置的操纵对应的外部连接装置929如移动电话。此外,输入装置915包括例如输入控制电路,输入控制电路基于用户输入的信息生成输入信号并将该信号输出到CPU 901。用户将各种数据输入到信息处理装置900或指令信息处理装置900通过操纵输入装置915来执行处理操作。
输出装置917包括能够视觉地、听觉地或触觉地向用户通知所获取的信息的装置。输出装置917的示例包括显示装置如液晶显示器(LCD)或有机电致发光(EL)显示器、音频输出装置如扬声器和耳机、以及振动器。输出装置917将通过信息处理装置900的处理获得的结果输出为图片如文本或图像、输出为音频如语音或声音、或者输出为振动。
存储装置919是被配置为信息处理装置900的存储单元的示例的数据存储装置。存储装置919包括例如磁存储装置如硬盘装置(HDD)、半导体存储装置、光学存储装置或磁光存储装置。存储装置919存储由CPU 901执行的程序或各种数据以及从外部获取的各种数据。
驱动器921是用于可移除记录介质927如磁盘、光盘、磁光盘或半导体存储器的读取器/写入器,并且被内置在信息处理装置900中或附接在信息处理装置900外部。驱动器921读取被记录在安装的可移除记录介质927上的信息,并将该信息输出到RAM 905。此外,驱动器921在安装的可移除记录介质927上写入记录。
连接端口923是被配置成将装置连接到信息处理装置900的端口。连接端口923的示例包括通用串行总线(USB)端口、IEEE 1394端口以及小型计算机系统接口(SCSI)端口。连接端口923的其他示例包括RS-232C端口、光学音频端子以及高清晰度多媒体接口(HDMI)(注册商标)端口。当外部连接装置929连接到连接端口923时,可以在信息处理装置900与外部连接装置929之间交换各种数据。
通信装置925例如是包括连接到通信网络931的通信装置的通信接口。通信装置925的示例包括用于局域网(LAN)、蓝牙(注册商标)、Wi-Fi以及无线USB(WUSB)的通信卡。此外,通信装置925可以是用于光通信的路由器、用于非对称数字用户线路(ADSL)的路由器或者用于各种通信的调制解调器。例如,通信装置925根据预定协议如TCP/IP向因特网或另一通信装置发送信号等以及从因特网或另一通信装置接收信号等。此外,连接到通信装置925的通信网络931包括以有线或无线方式连接的网络,并且包括例如因特网、家用LAN、红外线通信、无线电波通信或卫星通信。
成像装置933的示例包括图像传感器如电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)以及使用各种构件如对在图像传感器中形成对象的图像进行控制的透镜来对实际空间进行成像并生成所捕获图像的装置。成像装置933可以是用于捕获静止图像的装置,或者可以是用于捕获运动图像的装置。
传感器935的示例包括各种传感器如加速度传感器、角速度传感器、地磁传感器、照度传感器、温度传感器、气压传感器或音频传感器(麦克风)。传感器935获取例如关于信息处理装置900的姿势状态的信息,如信息处理装置900的外壳的姿势或关于信息处理装置900的周围环境的信息,如信息处理装置900的周围的亮度或噪声。此外,传感器935可以包括用于接收全球定位系统(GPS)信号并测量装置的纬度、经度和海拔的GPS接收机。
上面描述了信息处理装置900的硬件配置的示例。上述组成元件中的每个元件可以使用通用构件来配置,或者可以由专用于每个构成元件的功能的硬件来配置。可以根据实现实施例时的技术水平来适当地修改配置。
(5.补充)
本技术的实施例可以包括例如上述的信息处理装置(传感器装置、智能电话、服务器等)、系统、信息处理装置、由信息处理装置或系统执行的信息处理方法、使信息处理装置起作用的程序以及其中存储有程序的非暂态介质。
已经参照附图详细描述了本公开的优选实施例,但是本公开的技术范围不限于这些示例。本领域技术人员应当理解,只要在所附权利要求或其等同的范围内,则可以根据设计要求和其他因素进行各种修改、组合、子组合和替换。
本说明书中描述的有益效果仅是描述性和示例性的,并且因此不是限制性的。也就是说,根据与本公开相关的技术的实施例,连同前述有益效果或替代来自本说明书的描述的前述有益效果,可以获得对于本领域技术人员而言明显的其他有益效果。
另外,本技术还可以如下配置。
(1)一种反馈提供方法,包括:
由处理器基于目标的感测数据来指定所述目标中产生的行为和所述行为的产生时间;
根据所指定的行为来确定要提供的反馈;以及
在与所述产生时间对应的时间提供所述反馈。
(2)根据(1)所述的反馈提供方法,
其中,指定所述行为包括识别与所述行为对应的感测数据的模式。
(3)根据(2)所述的反馈提供方法,
其中,指定所述行为和所述产生时间包括:
通过在所述感测数据与所述模式之间进行部分匹配来在所述产生时间之前的第一时间指定所述行为,以及
通过假设从所述第一时间之后的所述感测数据符合所述模式来指定所述产生时间。
(4)根据(1)至(3)中任一项所述的反馈提供方法,
其中,指定所述行为包括指定所述行为的类别,以及
其中,确定所述反馈包括从为所述行为的每个类别准备的反馈中选择要提供的反馈。
(5)根据(4)所述的反馈提供方法,
其中,所述行为的类别根据所述行为的类型或所述行为的技能程度来限定。
(6)根据(4)或(5)所述的反馈提供方法,
其中所述行为包括用于对击打工具产生撞击的行为,以及
其中,所述行为的类别根据所述击打工具上的发生所述撞击的位置来限定。
(7)根据(1)至(6)中任一项所述的反馈提供方法,
其中,所述感测数据由包括在第一装置中的传感器提供,以及
其中,提供所述反馈包括通过使用包括在所述第一装置中的输出设备来提供反馈。
(8)根据(1)至(6)中任一项所述的反馈提供方法,
其中,所述感测数据由包括在第一装置中的传感器提供,以及
其中,提供所述反馈包括通过使用包括在第二装置中的输出设备来提供反馈,所述第二装置不同于所述第一装置。
(9)根据(1)至(8)中任一项所述的反馈提供方法,
其中,在再现与所述感测数据一起获取的图片时,提供所述反馈包括在所述图片中产生所述行为时提供所述反馈。
(10)根据(1)至(9)中任一项所述的反馈提供方法,
其中,所述反馈基于过去获取的感测数据生成。
(11)根据(10)所述的反馈提供方法,
其中,所述反馈基于过去获取的第一用户的感测数据生成,并且所述反馈被提供给所述第一用户他或她自己。
(12)根据(10)所述的反馈提供方法,
其中,所述反馈基于过去获取的第一用户的感测数据生成,并且所述反馈被提供给第二用户,所述第二用户不同于所述第一用户。
(13)根据(10)至(12)中任一项所述的反馈提供方法,
其中,所述反馈通过对过去获取的所述感测数据进行扩展来生成。
(14)根据(13)所述的反馈提供方法,
其中,所述反馈通过对振动波形进行均衡或放大来生成,所述振动波形包括在过去获取的所述感测数据中。
(15)根据(10)至(12)中任一项所述的反馈提供方法,
其中,所述反馈基于从过去获取的所述感测数据中提取的抽象信息生成。
(16)根据(15)所述的反馈提供方法,
其中,所述反馈包括用于表示所述抽象信息的符号信息。
(17)一种系统,包括:
传感器装置,所述传感器装置用于获取目标的感测数据;
分析装置,所述分析装置包括:感测数据分析单元,所述感测数据分析单元用于基于所述感测数据来指定所述目标中产生的行为和所述行为的产生时间;反馈确定单元,所述反馈确定单元用于根据所指定的行为来确定要提供的反馈;以及反馈命令生成单元,所述反馈命令生成单元用于在与所述产生时间对应的时间生成用于提供所述反馈的命令;以及
输出装置,所述输出装置用于根据所述命令输出所述反馈。
(18)一种分析装置,包括:
感测数据分析单元,所述感测数据分析单元用于基于目标的感测数据来指定所述目标中产生的行为和所述行为的产生时间;
反馈确定单元,所述反馈确定单元用于根据所指定的行为来确定要提供的反馈;以及
反馈命令生成单元,所述反馈命令生成单元用于在与所述产生时间对应的时间生成用于提供所述反馈的命令。
(19)一种系统,包括:
电路,所述电路被配置成:
基于与目标对应的传感器数据来识别在所述目标处产生的行为和所述行为的产生时间;
根据所识别的行为来确定要提供的反馈;以及
基于所述产生时间来提供所述反馈。
(20)根据(19)所述的系统,其中,
所述电路被配置成通过识别与所述行为对应的传感器数据的模式来识别所述行为。
(21)根据(20)所述的系统,其中,所述电路被配置成:
通过在所述传感器数据与所述模式之间进行部分匹配来在所述产生时间之前的第一时间识别所述行为,以及
通过假设继所述第一时间之后的所述传感器数据符合所述模式来识别所述产生时间。
(22)根据(19)所述的系统,其中,所述电路被配置成:
识别所述行为的类别,以及
通过从为所述行为的每个类别准备的反馈中选择反馈来确定所述反馈。
(23)根据(22)所述的系统,其中,
所述行为的类别根据所述行为的类型或所述行为的技能程度中至少一个来限定。
(24)根据(22)所述的系统,其中,
所述行为包括引起对击打工具的撞击的行为,以及
所述行为的类别根据所述击打工具上的发生所述撞击的位置来限定。
(25)根据(19)所述的系统,其中,
所述传感器数据由传感器提供,所述传感器包括在第一装置中或附接至第一装置,以及
所述电路被配置成通过使用输出装置来提供所述反馈,所述输出装置包括在所述第一装置中或附接至所述第一装置。
(26)根据(19)所述的系统,其中,
所述传感器数据由传感器提供,所述传感器包括在第一装置中或附接至第一装置,以及
所述电路被配置成通过使用输出装置来提供所述反馈,所述输出装置包括在第二装置中或附接至第二装置,所述第二装置不同于所述第一装置。
(27)根据(19)所述的系统,其中,
在再现与所述传感器数据一起获取的图片时,所述电路被配置成在与所述图片中的行为对应的时间提供所述反馈。
(28)根据(19)所述的系统,其中,
所述反馈基于过去获取的传感器数据生成。
(29)根据(28)所述的系统,其中,
所述反馈基于过去获取的第一用户的传感器数据生成,并且所述反馈被提供给所述第一用户。
(30)根据(28)所述的系统,其中,
所述反馈基于过去获取的第一用户的传感器数据生成,并且所述反馈被提供给第二用户。
(31)根据(28)所述的系统,其中,
所述反馈通过对过去获取的所述传感器数据进行扩展来生成。
(32)根据(31)所述的系统,其中,
所述反馈通过对振动波形进行均衡或放大来生成,所述振动波形包括在过去获取的所述传感器数据中。
(33)根据(28)所述的系统,其中,
所述反馈基于从过去获取的所述传感器数据中提取的抽象信息生成。
(34)根据(33)所述的系统,其中,
所述反馈包括用于表示所述抽象信息的符号信息。
(35)根据(19)所述的系统,其中,
所述系统是电子装置。
(36)根据(19)所述的系统,还包括:
传感器,所述传感器被配置成生成并输出所述传感器数据;以及
电子装置,所述电子装置包括被配置成识别所述行为、确定所述反馈并提供所述反馈的所述电路。
(37)一种系统,包括:
传感器装置,所述传感器装置被配置成生成与目标对应的传感器数据;以及
计算机可读指令,所述计算机可读指令当由电子装置执行时使所述电子装置用于:
基于从所述传感器装置获取的与目标对应的所述传感器数据来识别在所述目标处产生的行为和所述行为的产生时间;
根据所识别的行为来确定要提供的要提供的反馈;以及
基于所述产生时间来输出所述反馈。
(38)一种包括计算机程序指令的非暂态计算机可读介质,所述计算机程序指令当由系统执行时使所述系统用于:
基于与目标对应的传感器数据来识别在所述目标处产生的行为和所述行为的产生时间;
根据所识别的行为来确定要提供的反馈;以及
基于所述产生时间来提供所述反馈。
附图标记列表
10 系统
100,600 传感器装置
110 传感器
120 处理单元
130 存储单元
140 发送单元
150 输出单元
160 接收单元
200,700 智能电话
710 接收单元
720 处理单元
730 存储单元
740 发送单元
750 输出单元
760 接收单元
770 成像单元
300,800 服务器
501,531 传感器数据分析单元
503,533 反馈确定单元
505,535 反馈命令生成单元

Claims (18)

1.一种反馈提供系统,包括:
电路,所述电路被配置成:
基于与目标对应的传感器数据来识别在所述目标处产生的行为和所述行为的产生时间;
根据所识别的行为来确定要提供的反馈;以及
基于所述产生时间来提供所述反馈;
其中,所述电路进一步被配置成:
通过识别与所述行为对应的传感器数据的模式来识别所述行为;
通过在所述传感器数据与所述模式之间的部分匹配来在所述产生时间之前的第一时间识别所述行为;以及
通过假设继所述第一时间之后的所述传感器数据符合所述模式来识别所述产生时间。
2.根据权利要求1所述的反馈提供系统,其中,所述电路被配置成:
识别所述行为的类别,以及
通过从针对行为的每个类别准备的反馈中选择反馈来确定所述反馈。
3.根据权利要求2所述的反馈提供系统,其中,
所述行为的类别根据所述行为的类型或所述行为的技能程度中的至少一个来限定。
4.根据权利要求2所述的反馈提供系统,其中,
所述行为包括引起对击打工具的撞击的行为,以及
所述行为的类别根据所述击打工具上的发生撞击的位置来限定。
5.根据权利要求1所述的反馈提供系统,其中,
所述传感器数据由传感器提供,所述传感器包括在第一装置中或附接至第一装置,以及
所述电路被配置成:通过使用输出装置来提供所述反馈,所述输出装置包括在所述第一装置中或附接至所述第一装置。
6.根据权利要求1所述的反馈提供系统,其中,
所述传感器数据由传感器提供,所述传感器包括在第一装置中或附接至第一装置,以及
所述电路被配置成:通过使用输出装置来提供所述反馈,所述输出装置包括在第二装置中或附接至第二装置,所述第二装置不同于所述第一装置。
7.根据权利要求1所述的反馈提供系统,其中,
在再现与所述传感器数据一起获取的图片时,所述电路被配置成:在与所述图片中的行为对应的时间提供所述反馈。
8.根据权利要求1所述的反馈提供系统,其中,
所述反馈基于过去获取的传感器数据生成。
9.根据权利要求8所述的反馈提供系统,其中,
所述反馈基于过去获取的第一用户的传感器数据生成,并且所述反馈被提供给所述第一用户。
10.根据权利要求8所述的反馈提供系统,其中,
所述反馈基于过去获取的第一用户的传感器数据生成,并且所述反馈被提供给第二用户。
11.根据权利要求8所述的反馈提供系统,其中,
所述反馈通过对过去获取的所述传感器数据进行扩展来生成。
12.根据权利要求11所述的反馈提供系统,其中,
所述反馈通过对包括在过去获取的传感器数据中的振动波形进行均衡或放大来生成。
13.根据权利要求8所述的反馈提供系统,其中,
所述反馈基于从过去获取的传感器数据中提取的抽象信息生成。
14.根据权利要求13所述的反馈提供系统,其中,
所述反馈包括用于表示所述抽象信息的符号信息。
15.根据权利要求1所述的反馈提供系统,其中,
所述反馈提供系统是电子装置。
16.一种反馈提供系统,包括:
传感器,所述传感器被配置成生成并输出传感器数据;以及
电子装置,所述电子装置包括电路;
其中,所述电路被配置成:
基于与目标对应的所述传感器数据来识别在所述目标处产生的行为和所述行为的产生时间;
根据所识别的行为来确定要提供的反馈;以及
基于所述产生时间来提供所述反馈;
其中,所述电路进一步被配置成:
通过识别与所述行为对应的传感器数据的模式来识别所述行为;
通过在所述传感器数据与所述模式之间的部分匹配来在所述产生时间之前的第一时间识别所述行为;以及
通过假设继所述第一时间之后的所述传感器数据符合所述模式来识别所述产生时间。
17.一种反馈提供系统,包括:
传感器装置,所述传感器装置被配置成生成与目标对应的传感器数据;以及
计算机可读指令,所述计算机可读指令当由电子装置执行时使所述电子装置用于:
基于从所述传感器装置获取的与目标对应的所述传感器数据来识别在所述目标处产生的行为和所述行为的产生时间;
根据所识别的行为来确定要提供的反馈;以及
基于所述产生时间来输出所述反馈;
其中,通过识别与所述行为对应的传感器数据的模式来识别所述行为;
通过在所述传感器数据与所述模式之间的部分匹配来在所述产生时间之前的第一时间识别所述行为;以及
通过假设继所述第一时间之后的所述传感器数据符合所述模式来识别所述产生时间。
18.一种包括计算机程序指令的非暂态计算机可读介质,所述计算机程序指令当由系统执行时使所述系统用于:
基于与目标对应的传感器数据来识别在所述目标处产生的行为和所述行为的产生时间;
根据所识别的行为来确定要提供的反馈;以及
基于所述产生时间来提供所述反馈;
其中,通过识别与所述行为对应的传感器数据的模式来识别所述行为;
通过在所述传感器数据与所述模式之间的部分匹配来在所述产生时间之前的第一时间识别所述行为;以及
通过假设继所述第一时间之后的所述传感器数据符合所述模式来识别所述产生时间。
CN201580044941.8A 2014-08-28 2015-06-16 反馈提供方法、系统及分析装置 Active CN106575163B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014-173882 2014-08-28
JP2014173882A JP6354461B2 (ja) 2014-08-28 2014-08-28 フィードバック提供方法、システム、および解析装置
PCT/JP2015/003013 WO2016031107A1 (en) 2014-08-28 2015-06-16 Feedback provision method, system, and analysis device

Publications (2)

Publication Number Publication Date
CN106575163A CN106575163A (zh) 2017-04-19
CN106575163B true CN106575163B (zh) 2019-11-26

Family

ID=53541869

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580044941.8A Active CN106575163B (zh) 2014-08-28 2015-06-16 反馈提供方法、系统及分析装置

Country Status (5)

Country Link
US (1) US10497277B2 (zh)
EP (1) EP3186599B1 (zh)
JP (1) JP6354461B2 (zh)
CN (1) CN106575163B (zh)
WO (1) WO2016031107A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3454815A4 (en) * 2016-05-09 2020-01-08 Subpac, Inc. TACTILE SOUND DEVICE WITH ACTIVE FEEDBACK SYSTEM
US20190347956A1 (en) * 2016-09-22 2019-11-14 Str8bat Sport Tech Solutions Private Limited A system and method to analyze and improve sports performance using monitoring devices
JP2018093979A (ja) * 2016-12-09 2018-06-21 セイコーエプソン株式会社 運動診断装置、運動診断システム、プログラム、記録媒体及び運動診断方法
CN110099727B (zh) 2016-12-27 2021-10-29 索尼公司 输出控制装置、输出控制方法以及程序
US10627909B2 (en) * 2017-01-10 2020-04-21 Disney Enterprises, Inc. Simulation experience with physical objects
CN109420292A (zh) * 2017-08-29 2019-03-05 深圳市掌网科技股份有限公司 基于虚拟现实的高空训练方法及系统
JP6927394B2 (ja) * 2017-09-27 2021-08-25 カシオ計算機株式会社 水上スポーツに使用する装置、情報提供方法及びプログラム
CN113196210A (zh) * 2018-12-13 2021-07-30 索尼集团公司 信息处理装置、信息处理系统、信息处理方法和程序

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6266623B1 (en) * 1994-11-21 2001-07-24 Phatrat Technology, Inc. Sport monitoring apparatus for determining loft time, speed, power absorbed and other factors such as height
JP4605039B2 (ja) * 2006-02-13 2011-01-05 日本電気株式会社 自動撮影方法及び自動撮影装置並びに自動撮影プログラム
JP2013188426A (ja) * 2012-03-15 2013-09-26 Sony Corp 情報処理装置、情報処理システムおよびプログラム

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9623284B2 (en) 2008-02-20 2017-04-18 Karsten Manufacturing Corporation Systems and methods for storing and analyzing golf data, including community and individual golf data collection and storage at a central hub
US9076041B2 (en) * 2010-08-26 2015-07-07 Blast Motion Inc. Motion event recognition and video synchronization system and method
US8702516B2 (en) * 2010-08-26 2014-04-22 Blast Motion Inc. Motion event recognition system and method
JP5704317B2 (ja) 2011-02-02 2015-04-22 セイコーエプソン株式会社 スイング解析装置、スイング解析システム、プログラム及びスイング解析方法
JP6248635B2 (ja) 2011-11-08 2017-12-20 ソニー株式会社 センサ装置、解析装置および記憶媒体
US20140018181A1 (en) * 2012-07-05 2014-01-16 Zeroline Golf, LLC Golf swing analysis method and apparatus

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6266623B1 (en) * 1994-11-21 2001-07-24 Phatrat Technology, Inc. Sport monitoring apparatus for determining loft time, speed, power absorbed and other factors such as height
JP4605039B2 (ja) * 2006-02-13 2011-01-05 日本電気株式会社 自動撮影方法及び自動撮影装置並びに自動撮影プログラム
JP2013188426A (ja) * 2012-03-15 2013-09-26 Sony Corp 情報処理装置、情報処理システムおよびプログラム

Also Published As

Publication number Publication date
CN106575163A (zh) 2017-04-19
JP2016047207A (ja) 2016-04-07
JP6354461B2 (ja) 2018-07-11
WO2016031107A1 (en) 2016-03-03
US20170186335A1 (en) 2017-06-29
EP3186599A1 (en) 2017-07-05
US10497277B2 (en) 2019-12-03
EP3186599B1 (en) 2019-05-22

Similar Documents

Publication Publication Date Title
CN106575163B (zh) 反馈提供方法、系统及分析装置
CN112753228B (zh) 用于生成媒体内容的技术
US11247114B2 (en) Information processing device, storage medium, and information processing method
EP3060317B1 (en) Information processing device, recording medium, and information processing method
JP5994306B2 (ja) 情報処理装置、情報処理システムおよびプログラム
US10176680B2 (en) Customizing haptic feedback in live events
JP6836582B2 (ja) パフォーマンスセンサユニットから得られるユーザパフォーマンス属性に基づいてメディアデータの自動化された分類及び/又は検索を可能にするように構成されたフレームワーク、デバイス及び方法論
WO2014073454A1 (ja) 情報処理装置、情報処理方法及び記録媒体
KR20170129716A (ko) 성능 센서 데이터에 기초한 적응 훈련 프로그램의 공급을 포함하는 쌍방향 기능 훈련내용을 제공할 수 있도록 하는 구조, 장치 및 방법
KR20150131695A (ko) 디스플레이 장치 및 그의 동작 방법
WO2016187673A1 (en) Frameworks, devices and methodologies configured to enable gamification via sensor-based monitoring of physically performed skills, including location-specific gamification
US9710612B2 (en) Combining signal information from shoes and sports racket
TW200931297A (en) Control apparatus and method
JP6999543B2 (ja) インタラクティブスキルトレーニングコンテンツの配信への応用を含む、身体的に実行されるスキルの分析を可能にするように構成されるフレームワークおよび方法
US9526964B2 (en) Using pressure signal from racket to advise player
US20160180059A1 (en) Method and system for generating a report for a physical activity
US20240028123A1 (en) Information processing device, information processing method, program, and information processing system
CN109731278A (zh) 数据处理方法及装置、笔体、电子设备和可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant