CN105931627B - 基于人工智能的动作识别的乐器模拟方法和装置 - Google Patents

基于人工智能的动作识别的乐器模拟方法和装置 Download PDF

Info

Publication number
CN105931627B
CN105931627B CN201610214470.7A CN201610214470A CN105931627B CN 105931627 B CN105931627 B CN 105931627B CN 201610214470 A CN201610214470 A CN 201610214470A CN 105931627 B CN105931627 B CN 105931627B
Authority
CN
China
Prior art keywords
hammer
information
motion
exercise data
motion state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610214470.7A
Other languages
English (en)
Other versions
CN105931627A (zh
Inventor
黄永祥
徐倩
刘尧
李静
周超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN201610214470.7A priority Critical patent/CN105931627B/zh
Publication of CN105931627A publication Critical patent/CN105931627A/zh
Application granted granted Critical
Publication of CN105931627B publication Critical patent/CN105931627B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H3/00—Instruments in which the tones are generated by electromechanical means
    • G10H3/12—Instruments in which the tones are generated by electromechanical means using mechanical resonant generators, e.g. strings or percussive instruments, the tones of which are picked up by electromechanical transducers, the electrical signals being further manipulated or amplified and subsequently converted to sound by a loudspeaker or equivalent instrument
    • G10H3/14—Instruments in which the tones are generated by electromechanical means using mechanical resonant generators, e.g. strings or percussive instruments, the tones of which are picked up by electromechanical transducers, the electrical signals being further manipulated or amplified and subsequently converted to sound by a loudspeaker or equivalent instrument using mechanically actuated vibrators with pick-up means
    • G10H3/143—Instruments in which the tones are generated by electromechanical means using mechanical resonant generators, e.g. strings or percussive instruments, the tones of which are picked up by electromechanical transducers, the electrical signals being further manipulated or amplified and subsequently converted to sound by a loudspeaker or equivalent instrument using mechanically actuated vibrators with pick-up means characterised by the use of a piezoelectric or magneto-strictive transducer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H3/00—Instruments in which the tones are generated by electromechanical means
    • G10H3/12—Instruments in which the tones are generated by electromechanical means using mechanical resonant generators, e.g. strings or percussive instruments, the tones of which are picked up by electromechanical transducers, the electrical signals being further manipulated or amplified and subsequently converted to sound by a loudspeaker or equivalent instrument
    • G10H3/14—Instruments in which the tones are generated by electromechanical means using mechanical resonant generators, e.g. strings or percussive instruments, the tones of which are picked up by electromechanical transducers, the electrical signals being further manipulated or amplified and subsequently converted to sound by a loudspeaker or equivalent instrument using mechanically actuated vibrators with pick-up means
    • G10H3/146—Instruments in which the tones are generated by electromechanical means using mechanical resonant generators, e.g. strings or percussive instruments, the tones of which are picked up by electromechanical transducers, the electrical signals being further manipulated or amplified and subsequently converted to sound by a loudspeaker or equivalent instrument using mechanically actuated vibrators with pick-up means using a membrane, e.g. a drum; Pick-up means for vibrating surfaces, e.g. housing of an instrument

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

本发明公开了一种基于人工智能的动作识别的乐器模拟方法和装置，其中，基于人工智能的动作识别的乐器模拟方法包括以下步骤：接收音槌发送的运动数据，运动数据包括加速度信息和运动方向信息；根据运动数据确定音槌的运动状态，运动状态包括碰撞状态；当运动状态为碰撞状态时，获取音槌敲击的位置信息和敲击的强度信息；以及根据位置信息和强度信息播放模拟乐器的音效。本发明实施例的基于人工智能的动作识别的乐器模拟方法和装置，通过接收音槌发送的运动数据，并根据运动数据确定音槌的运动状态，当运动状态为碰撞状态时，获取音槌敲击的位置信息和敲击的强度信息，以及根据位置信息和强度信息播放模拟乐器的音效，能够有效地提高娱乐性。

Description

基于人工智能的动作识别的乐器模拟方法和装置
技术领域
本发明涉及人机交互技术领域，尤其涉及一种基于人工智能的动作识别的乐器模拟方法和装置。
背景技术
人工智能(Artificial Intelligence)，英文缩写为AI。它是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门新的技术科学。人工智能是计算机科学的一个分支，它企图了解智能的实质，并生产出一种新的能以人类智能相似的方式做出反应的智能机器，该领域的研究包括机器人、语言识别、图像识别、自然语言处理和专家系统等。
随着科技的不断进步，动作识别已经广泛地应用于人机交互、游戏、医疗仿真等领域。例如在手表或手环上设置各种传感器，用户在进行运动时，可将传感器采集到的运动数据发送到手机、平板电脑等智能终端中，通过对运动数据进行计算分析后，能够获取到用户运动时的位置和姿态信息等。
发明内容
本发明旨在至少在一定程度上解决相关技术中的技术问题之一。为此，本发明的一个目的在于提出一种基于人工智能的动作识别的乐器模拟方法，能够有效地提高娱乐性。
本发明的第二个目的在于提出一种基于人工智能的动作识别的乐器模拟装置。
为了实现上述目的，本发明第一方面实施例提出了一种基于人工智能的动作识别的乐器模拟方法，包括：接收音槌发送的运动数据，所述运动数据包括加速度信息和运动方向信息；根据所述运动数据确定所述音槌的运动状态，所述运动状态包括碰撞状态；当所述运动状态为碰撞状态时，获取所述音槌敲击的位置信息和敲击的强度信息；以及根据所述位置信息和所述强度信息播放模拟乐器的音效。
本发明实施例的基于人工智能的动作识别的乐器模拟方法，通过接收音槌发送的运动数据，并根据运动数据确定音槌的运动状态，当运动状态为碰撞状态时，获取音槌敲击的位置信息和敲击的强度信息，以及根据位置信息和强度信息播放模拟乐器的音效，能够有效地提高娱乐性。
本发明第二方面实施例提出了一种基于人工智能的动作识别的乐器模拟装置，包括：接收模块，用于接收音槌发送的运动数据，所述运动数据包括加速度信息和运动方向信息；确定模块，用于根据所述运动数据确定所述音槌的运动状态，所述运动状态包括碰撞状态；获取模块，用于当所述运动状态为碰撞状态时，获取所述音槌敲击的位置信息和敲击的强度信息；以及播放模块，用于根据所述位置信息和所述强度信息播放模拟乐器的音效。
本发明实施例的基于人工智能的动作识别的乐器模拟装置，通过接收音槌发送的运动数据，并根据运动数据确定音槌的运动状态，当运动状态为碰撞状态时，获取音槌敲击的位置信息和敲击的强度信息，以及根据位置信息和强度信息播放模拟乐器的音效，能够有效地提高娱乐性。
附图说明
图1是根据本发明一个实施例的基于人工智能的动作识别的乐器模拟方法的流程图；
图2是根据本发明一个实施例的基于人工智能的动作识别的乐器模拟装置的结构示意图。
具体实施方式
下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本发明，而不能理解为对本发明的限制。
下面参考附图描述本发明实施例的基于人工智能的动作识别的乐器模拟方法和装置。
图1是根据本发明一个实施例的基于人工智能的动作识别的乐器模拟方法的流程图。
如图1所示，基于人工智能的动作识别的乐器模拟方法可包括：
S1、接收音槌发送的运动数据。
其中，运动数据可包括加速度信息和运动方向信息。音槌可以是内置传感器的槌形物品，例如智能筷子。
具体地，在音槌中可设置有加速度传感器和微机械陀螺仪。加速度传感器可实时获取述音槌的加速度信息，微机械陀螺仪可实时获取音槌的运动方向信息。在音槌采集到加速度信息和运动方向信息后，可通过蓝牙、WIFI等无线传输方式将上述采集到的信息发送至移动终端。
S2、根据运动数据确定音槌的运动状态。
举例来说，音槌完成一个完整的敲击过程可包括开始状态、加速状态、下落状态、碰撞状态、上举状态。当加速度等于零，且无运动方向近似于静止时，可确定音槌处于开始状态；当加速度增大，且运动方向为向下运动时，可确定音槌处于加速状态。当然本例中的向下运动不仅限于垂直向下，还可以是斜向下，如右前方向的向下等等。运动方向主要通过微机械陀螺仪确定。当速度近似匀速运动时，运动方向继续向下运动，可确定音槌处于下落状态。当速度降低近似为零，即加速度反方向增加，且无运动方向时，可确定音槌处于碰撞状态。当速度变为反向增加，且运动方向向上时，可确定音槌处于上举状态。
由于上述几个状态为连贯的变化状态，因此移动终端可通过预先训练的分类器对音槌的运动状态进行预测。具体地，将音槌上一时刻的运动状态、当前时刻的加速度信息和当前时刻的运动方向信息作为输入，输入至分类器，通过分类器预测出音槌当前时刻的运动状态。通过分类器对音槌的运动状态进行预测，能够有效避免其他动作的干扰。例如：虽然当前状态满足加速度反方向增加，且无运动方向的条件，即满足了碰撞状态的条件，但是如果前一时刻的运动状态不是下落状态，则并不能判断其为碰撞状态，有可能是音槌在下落过程中的抖动。
S3、当运动状态为碰撞状态时，获取音槌敲击的位置信息和敲击的强度信息。
具体地，移动终端可获取音槌的初始位置信息，然后根据运动方向信息计算音槌敲击的位置信息。在本实施例中，可获取蓝牙信号强度，并根据蓝牙信号强度获取音槌的初始位置信息。例如，假设蓝牙信号强度为80dBm，换算出移动终端距离音槌为2米，再根据音槌的运动方向如向右前下方下落了1米停止，可计算出音槌敲击的位置与移动终端距离1.5米。当然，还可通过蓝牙信号强度，增加确定音槌敲击位置的精准度。
然后移动终端可根据加速度信息计算音槌在敲击前一时刻的速度信息，并根据速度信息计算音槌的动能信息，以及根据动能信息确定敲击的强度信息。例如：通过加速度传感器获得加速度a(t)，对时间t积分，得到速度v(t)。前一时刻的速度用v(t-1)表示，则t时刻音槌的动能信息为0.5*m*(v(t-1))^2。其中，m为音槌的质量。假设动能信息在第一预设范围如10-20之间，则可确定敲击的强度信息为一级；如果动能信息在第二预设范围如20-50之间，则可确定敲击的强度信息为二级；如果动能信息在第三预设范围如50-100之间，则可确定敲击的强度信息为三级。
S4、根据位置信息和强度信息播放模拟乐器的音效。
具体地，在获取音槌敲击的位置信息和敲击的强度信息之后，移动终端可根据位置信息确定模拟乐器对应的音色，再根据强度信息确定模拟乐器对应的音量，最后根据音色和音量播放模拟乐器的音效。举例来说，可预先设置模拟乐器的音色，例如敲击的位置距离移动终端1米远为鼓声，敲击的位置距离移动终端1.5米远为小号声等等。此后，当检测到敲击的位置距离移动终端为1米，且敲击的强度信息为三级时，可播放音量为三级强度的鼓声。
此外，音槌可以是多个。可通过音槌内置的蓝牙模块的物理地址对音槌进行区分。例如左手握持一号音槌，右手握持二号音槌。从而能够确定播放的音效属于几号音槌。
本发明实施例的基于人工智能的动作识别的乐器模拟方法，通过接收音槌发送的运动数据，并根据运动数据确定音槌的运动状态，当运动状态为碰撞状态时，获取音槌敲击的位置信息和敲击的强度信息，以及根据位置信息和强度信息播放模拟乐器的音效，能够有效地提高娱乐性。
为实现上述目的，本发明还提出一种基于人工智能的动作识别的乐器模拟装置。
图2是根据本发明一个实施例的基于人工智能的动作识别的乐器模拟装置的结构示意图。
如图2所示，基于人工智能的动作识别的乐器模拟装置可包括：接收模块110、确定模块120、获取模块130和播放模块140。
接收模块110用于接收音槌发送的运动数据。其中，运动数据可包括加速度信息和运动方向信息。音槌可以是内置传感器的槌形物品，例如智能筷子。具体地，在音槌中可设置有加速度传感器和微机械陀螺仪。加速度传感器可实时获取述音槌的加速度信息，微机械陀螺仪可实时获取音槌的运动方向信息。在音槌采集到加速度信息和运动方向信息后，接收模块110可通过蓝牙、WIFI等无线传输方式接收采集到的上述信息。
确定模块120用于根据运动数据确定音槌的运动状态，运动状态包括碰撞状态。举例来说，音槌完成一个完整的敲击过程可包括开始状态、加速状态、下落状态、碰撞状态、上举状态。当加速度等于零，且无运动方向近似于静止时，可确定音槌处于开始状态；当加速度增大，且运动方向为向下运动时，可确定音槌处于加速状态。当然本例中的向下运动不仅限于垂直向下，还可以是斜向下，如右前方向的向下等等。运动方向主要通过微机械陀螺仪确定。当速度近似匀速运动时，运动方向继续向下运动，可确定音槌处于下落状态。当速度降低近似为零，即加速度反方向增加，且无运动方向时，可确定音槌处于碰撞状态。当速度变为反向增加，且运动方向向上时，可确定音槌处于上举状态。
由于上述几个状态为连贯的变化状态，因此确定模块120可通过预先训练的分类器对音槌的运动状态进行预测。具体地，将音槌上一时刻的运动状态、当前时刻的加速度信息和当前时刻的运动方向信息作为输入，输入至分类器，通过分类器预测出音槌当前时刻的运动状态。通过分类器对音槌的运动状态进行预测，能够有效避免其他动作的干扰。例如：虽然当前状态满足加速度反方向增加，且无运动方向的条件，即满足了碰撞状态的条件，但是如果前一时刻的运动状态不是下落状态，则并不能判断其为碰撞状态，有可能是音槌在下落过程中的抖动。
获取模块130用于当运动状态为碰撞状态时，获取音槌敲击的位置信息和敲击的强度信息。其中，获取模块130可包括获取单元131和确定单元132。
具体地，获取单元131可获取音槌的初始位置信息，然后根据运动方向信息计算音槌敲击的位置信息。在本实施例中，可获取蓝牙信号强度，并根据蓝牙信号强度获取音槌的初始位置信息。例如，假设蓝牙信号强度为80dBm，换算出移动终端距离音槌为2米，再根据音槌的运动方向如向右前下方下落了1米停止，可计算出音槌敲击的位置与移动终端距离1.5米。当然，还可通过蓝牙信号强度，增加确定音槌敲击位置的精准度。
然后确定单元132可根据加速度信息计算音槌在敲击前一时刻的速度信息，并根据速度信息计算音槌的动能信息，以及根据动能信息确定敲击的强度信息。例如：通过加速度传感器获得加速度a(t)，对时间t积分，得到速度v(t)。前一时刻的速度用v(t-1)表示，则t时刻音槌的动能信息为0.5*m*(v(t-1))^2。其中，m为音槌的质量。假设动能信息在第一预设范围如10-20之间，则可确定敲击的强度信息为一级；如果动能信息在第二预设范围如20-50之间，则可确定敲击的强度信息为二级；如果动能信息在第三预设范围如50-100之间，则可确定敲击的强度信息为三级。
播放模块140用于根据位置信息和强度信息播放模拟乐器的音效。具体地，在获取音槌敲击的位置信息和敲击的强度信息之后，播放模块140可根据位置信息确定模拟乐器对应的音色，再根据强度信息确定模拟乐器对应的音量，最后根据音色和音量播放模拟乐器的音效。举例来说，可预先设置模拟乐器的音色，例如敲击的位置距离移动终端1米远为鼓声，敲击的位置距离移动终端1.5米远为小号声等等。此后，当检测到敲击的位置距离移动终端为1米，且敲击的强度信息为三级时，可播放音量为三级强度的鼓声。
此外，音槌可以是多个。可通过音槌内置的蓝牙模块的物理地址对音槌进行区分。例如左手握持一号音槌，右手握持二号音槌。从而能够确定播放的音效属于几号音槌。
本发明实施例的基于人工智能的动作识别的乐器模拟装置，通过接收音槌发送的运动数据，并根据运动数据确定音槌的运动状态，当运动状态为碰撞状态时，获取音槌敲击的位置信息和敲击的强度信息，以及根据位置信息和强度信息播放模拟乐器的音效，能够有效地提高娱乐性。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (12)

1.一种基于人工智能的动作识别的乐器模拟方法，其特征在于，包括以下步骤：
接收音槌发送的运动数据，所述运动数据包括加速度信息和运动方向信息；
根据所述运动数据确定所述音槌的运动状态，所述运动状态包括碰撞状态，将所述音槌上一时刻的运动状态、当前时刻的加速度信息和当前时刻的运动方向信息输入至预先训练的分类器，通过所述分类器预测出所述音槌当前时刻的运动状态；
当所述运动状态为碰撞状态时，获取所述音槌敲击的位置信息和敲击的强度信息；以及
根据所述位置信息和所述强度信息播放模拟乐器的音效。
2.如权利要求1所述的方法，其特征在于，所述加速度信息通过所述音槌的加速度传感器获得，所述运动方向信息通过所述音槌的微机械陀螺仪获得。
3.如权利要求1所述的方法，其特征在于，接收音槌发送的运动数据，包括：
通过无线传输方式接收音槌发送的运动数据，所述无线传输方式包括蓝牙和WIFI。
4.如权利要求1所述的方法，其特征在于，获取所述音槌敲击的位置信息和敲击的强度信息，包括：
获取所述音槌的初始位置信息，并根据所述运动方向信息计算所述音槌敲击的位置信息；
根据所述加速度信息计算所述音槌在敲击前一时刻的速度信息，并根据所述速度信息计算所述音槌的动能信息，以及根据所述动能信息确定敲击的强度信息。
5.如权利要求4所述的方法，其特征在于，获取所述音槌的初始位置信息，包括：
获取蓝牙信号强度，并根据所述蓝牙信号强度获取所述音槌的初始位置信息。
6.如权利要求1所述的方法，其特征在于，根据所述位置信息和所述强度信息播放模拟乐器的音效，包括：
根据所述位置信息确定模拟乐器对应的音色；
根据所述强度信息确定模拟乐器对应的音量；
根据所述音色和音量播放模拟乐器的音效。
7.一种基于人工智能的动作识别的乐器模拟装置，其特征在于，包括：
接收模块，用于接收音槌发送的运动数据，所述运动数据包括加速度信息和运动方向信息；
确定模块，用于根据所述运动数据确定所述音槌的运动状态，所述运动状态包括碰撞状态，将所述音槌上一时刻的运动状态、当前时刻的加速度信息和当前时刻的运动方向信息输入至预先训练的分类器，通过所述分类器预测出所述音槌当前时刻的运动状态；
获取模块，用于当所述运动状态为碰撞状态时，获取所述音槌敲击的位置信息和敲击的强度信息；以及
播放模块，用于根据所述位置信息和所述强度信息播放模拟乐器的音效。
8.如权利要求7所述的装置，其特征在于，所述加速度信息通过所述音槌的加速度传感器获得，所述运动方向信息通过所述音槌的微机械陀螺仪获得。
9.如权利要求7所述的装置，其特征在于，所述接收模块，用于：
通过无线传输方式接收音槌发送的运动数据，所述无线传输方式包括蓝牙和WIFI。
10.如权利要求7所述的装置，其特征在于，所述获取模块，包括：
获取单元，用于获取所述音槌的初始位置信息，并根据所述运动方向信息计算所述音槌敲击的位置信息；
确定单元，用于根据所述加速度信息计算所述音槌在敲击前一时刻的速度信息，并根据所述速度信息计算所述音槌的动能信息，以及根据所述动能信息确定敲击的强度信息。
11.如权利要求10所述的装置，其特征在于，所述获取单元，用于：
获取蓝牙信号强度，并根据所述蓝牙信号强度获取所述音槌的初始位置信息。
12.如权利要求7所述的装置，其特征在于，所述播放模块，用于：
根据所述位置信息确定模拟乐器对应的音色；
根据所述强度信息确定模拟乐器对应的音量；
根据所述音色和音量播放模拟乐器的音效。
CN201610214470.7A 2016-04-07 2016-04-07 基于人工智能的动作识别的乐器模拟方法和装置 Active CN105931627B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610214470.7A CN105931627B (zh) 2016-04-07 2016-04-07 基于人工智能的动作识别的乐器模拟方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610214470.7A CN105931627B (zh) 2016-04-07 2016-04-07 基于人工智能的动作识别的乐器模拟方法和装置

Publications (2)

Publication Number Publication Date
CN105931627A CN105931627A (zh) 2016-09-07
CN105931627B true CN105931627B (zh) 2019-07-05

Family

ID=56840251

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610214470.7A Active CN105931627B (zh) 2016-04-07 2016-04-07 基于人工智能的动作识别的乐器模拟方法和装置

Country Status (1)

Country Link
CN (1) CN105931627B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107404581B (zh) * 2017-07-25 2020-03-31 Oppo广东移动通信有限公司 移动终端的乐器模拟方法、装置及存储介质和移动终端
CN108986777A (zh) * 2018-06-14 2018-12-11 森兰信息科技（上海）有限公司 通过体感进行音乐模拟的方法、体感设备及乐器终端
CN109147742A (zh) * 2018-10-31 2019-01-04 北京戴乐科技有限公司 一种音乐控制系统和方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102614669A (zh) * 2012-01-04 2012-08-01 杭州合力电子有限公司 一种手持挥动发声玩具
CN203444749U (zh) * 2013-08-14 2014-02-19 冯晓晗 虚拟架子鼓
CN103928018A (zh) * 2014-04-18 2014-07-16 山西四和创想科技有限公司 一种练习用无线智能电子鼓槌

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8198526B2 (en) * 2009-04-13 2012-06-12 745 Llc Methods and apparatus for input devices for instruments and/or game controllers

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102614669A (zh) * 2012-01-04 2012-08-01 杭州合力电子有限公司 一种手持挥动发声玩具
CN203444749U (zh) * 2013-08-14 2014-02-19 冯晓晗 虚拟架子鼓
CN103928018A (zh) * 2014-04-18 2014-07-16 山西四和创想科技有限公司 一种练习用无线智能电子鼓槌

Also Published As

Publication number Publication date
CN105931627A (zh) 2016-09-07

Similar Documents

Publication Publication Date Title
US20210034163A1 (en) Gesture-controlled virtual reality systems and methods of controlling the same
US10803762B2 (en) Body-motion assessment device, dance assessment device, karaoke device, and game device
CN104769522B (zh) 具有3d 指向和手势识别功能的远程控制器
US7519537B2 (en) Method and apparatus for a verbo-manual gesture interface
JP4679431B2 (ja) 音出力制御プログラムおよび音出力制御装置
CN102580314B (zh) 获得用于控制游戏程序的运行的输入
US20160310847A1 (en) Audio, video, simulation, and user interface paradigms
CN105931627B (zh) 基于人工智能的动作识别的乐器模拟方法和装置
JP5812663B2 (ja) 音楽演奏用プログラム、音楽演奏装置、音楽演奏システムおよび音楽演奏方法
CN105229666A (zh) 3d图像中的运动分析
CN109799903A (zh) 基于虚拟现实的打击乐方法、终端设备及系统
JP2012093603A (ja) 入力装置およびプログラム
Cho et al. Motion recognition with smart phone embedded 3-axis accelerometer sensor
JP7140447B2 (ja) 感知ユニットの動きからの少なくとも１つの検出される力を聴覚信号に変換するための装置及び方法
CN114255511A (zh) 用于手势识别的控制器和方法以及手势识别设备
WO2024025759A1 (en) Determining tap locations on a handheld electronic device based on inertial measurements
JP2010175754A (ja) 姿勢評価装置、姿勢評価システム、プログラム
CN111050266B (zh) 一种基于耳机检测动作进行功能控制的方法及系统
CN106325513A (zh) 信息处理方法及信息处理装置
CN108089710A (zh) 一种电子设备控制方法、装置及电子设备
WO2019235338A1 (ja) 情報処理装置、情報処理方法、及びプログラム
JP2009535172A (ja) 多入力ゲーム制御ミクサ
CN214344200U (zh) 一种人体肢体运动和器械运动模拟声音增强运动能力装置
CN108833671A (zh) 电子装置的跌落检测方法及相关产品
Fabiani et al. Interactive sonification of emotionally expressive gestures by means of music performance

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant