WO2011079657A1 - 按照音频数据执行相应动作的机器人及其控制系统 - Google Patents
按照音频数据执行相应动作的机器人及其控制系统 Download PDFInfo
- Publication number
- WO2011079657A1 WO2011079657A1 PCT/CN2010/078765 CN2010078765W WO2011079657A1 WO 2011079657 A1 WO2011079657 A1 WO 2011079657A1 CN 2010078765 W CN2010078765 W CN 2010078765W WO 2011079657 A1 WO2011079657 A1 WO 2011079657A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- data
- robot
- drive
- control system
- audio data
- Prior art date
Links
- 230000000875 corresponding effect Effects 0.000 title claims abstract description 45
- 238000013500 data storage Methods 0.000 claims description 28
- 230000009471 action Effects 0.000 claims description 27
- 230000033001 locomotion Effects 0.000 claims description 11
- 238000004140 cleaning Methods 0.000 claims description 7
- 230000005236 sound signal Effects 0.000 claims description 7
- 239000000428 dust Substances 0.000 claims description 6
- 238000000034 method Methods 0.000 claims description 6
- 230000001276 controlling effect Effects 0.000 claims description 5
- 230000004048 modification Effects 0.000 claims description 5
- 238000012986 modification Methods 0.000 claims description 5
- 238000012790 confirmation Methods 0.000 claims description 4
- 238000004018 waxing Methods 0.000 claims description 4
- 238000006243 chemical reaction Methods 0.000 claims description 2
- 230000006870 function Effects 0.000 description 15
- 238000010586 diagram Methods 0.000 description 6
- 238000004458 analytical method Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 230000033764 rhythmic process Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 230000003993 interaction Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000003860 storage Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000004913 activation Effects 0.000 description 1
- 230000000981 bystander Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000002715 modification method Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63H—TOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
- A63H11/00—Self-movable toy figures
-
- A—HUMAN NECESSITIES
- A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
- A47L—DOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
- A47L2201/00—Robotic cleaning machines, i.e. with automatic control of the travelling movement or the cleaning operation
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63H—TOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
- A63H2200/00—Computerized interactive toys, e.g. dolls
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Definitions
- Robot and its control system that perform corresponding actions according to audio data
- the present invention relates to a robot system, and more particularly to a robot and a control system thereof that perform corresponding actions in accordance with audio data. Background technique
- the "Dancing Machine Dog” designed by the artist does not need to be pre-programmed, and is completely controlled by the rhythm of the music. The mode of the action will change depending on the rhythm of the music.
- the "Dancing Machine Dog” extracts the beat information of the music and maps it to the corresponding action through the understanding of the music, that is, the analysis of the music, and then as the music is played, the robot dog will dance with the rhythm of the music.
- the "Dancing Machine Dog” researched and developed by the Shenzhen Institute of Advanced Technology of the Chinese Academy of Sciences solves the shortcomings of the most common dance robots on the market, such as relatively single music, relatively single movements, and improvisation, making the dancing robots calm.
- Dances of music of different rhythms and styles show the intelligent technology of dancing robots.
- this type of dance robot has higher technology added value and is more expensive.
- the most important thing is that the robots perform their own dances through the understanding of music, and all the user can do is to select music for them, but not to intervene in the arrangement of robot dance movements.
- the technical problem to be solved by the present invention is to provide a robot and a control system for performing corresponding actions according to audio data, so that the user can select audio data by itself, so that the robot can perform the selected audio data.
- the corresponding action is to provide a robot and a control system for performing corresponding actions according to audio data, so that the user can select audio data by itself, so that the robot can perform the selected audio data. The corresponding action.
- the present invention provides a control system for causing a robot to perform a corresponding action according to audio data, including: a control unit, a driving unit, and a human-machine interface located on the robot body, and further including a separation from the robot body.
- a data storage unit storing drive data matching an audio data, the data storage unit being connected to the control unit through a data interface, wherein the control unit is connected to the human-machine interface and accepts from a human-machine interface And the instruction to read the drive data from the data storage unit, and send a drive command to the drive unit according to the drive data; the drive unit accepts the drive command to drive an operable component of the robot, The operable component operates in accordance with the requirements of the drive command.
- the robot provided by the present invention can perform corresponding actions according to the audio data, that is, the dance function is commonly known. Specifically:
- the data storage unit involved in the present invention may be various types of memory cards in the prior art, and the internal data may be directly stored from the outside of the robot through a plurality of household equipment tools such as mobile phones, computers, and the like, or downloaded through the Internet.
- the device tool copies or downloads various music/action information, and the music/action sources are extensive and diverse.
- the robot is stored by downloading its external memory card with tools commonly used in homes such as mobile phones and computers, or downloading it via the Internet. Specifically, the user only needs to remove the external memory card from the robot, connect the memory card to the corresponding position of the mobile phone or the computer for file transfer, and the storage or download function can be easily realized, and the operation is portable, thereby eliminating the mobile robot body.
- the driving data for causing the robot to perform corresponding actions according to the audio data can be edited by the user, and the user can edit in a format similar to excel, and then store it in the memory card after editing, and the threshold for use is greatly reduced.
- the operation is very simple; in addition, it can also be edited instantly, that is, through the robot itself
- the man-machine interface modifies the drive data to make the user's interaction with the robot stronger, so that the action of the robot fully reflects the user's wishes, and the modification method is more flexible.
- FIG. 1 is a schematic structural diagram of a robot for performing a corresponding action according to audio data according to the present invention
- FIG. 2 is a schematic block diagram of a first embodiment of a control system of a robot for performing a corresponding action according to audio data according to the present invention
- FIG. 3 is a schematic block diagram of a second embodiment of a control system for a robot that performs a corresponding action according to audio data according to the present invention
- FIG. 4 is a schematic block diagram of a third embodiment of a control system for a robot that performs a corresponding action according to audio data according to the present invention
- FIG. 5 is a comparison diagram of music information and driving information of a method for manufacturing driving data according to the present invention. detailed description
- Figure 1 is a schematic structural view
- Figure 2 is a schematic block diagram.
- the robot 1 in this embodiment includes a control system 2, a sensor system 10, and some operable components 11.
- the control system 2 includes a control unit 22, a driving unit 23, and a human-machine interface 21 located in the body of the robot 1, and data separated from the body of the robot 1 and stored with driving data matched with an audio data.
- the storage unit 24, the data storage unit 24 can be embodied as a memory card, and a card slot 15 is disposed on the body of the robot 1. The memory card is inserted into the card slot 15 through a data interface, such as a USB interface and the control unit 22 connection.
- the control unit 22 is connected to the human machine interface 21, receives an instruction from the human machine interface 21, reads the drive data from the data storage unit 24, and sends a drive to the drive unit 23 according to the drive data. instruction.
- the drive unit 23 accepts the drive command to drive the operable member 11 of the robot, and the operable member 11 operates in accordance with the request of the drive command.
- the operable component is the two drive wheels 110 and 111 at the bottom of the robot.
- Drive The unit 23 is two drive motors corresponding to the left and right drive wheels, and the drive motor controls the operation of the drive wheels.
- the sensor system 10 is configured to detect an operating state of the robot 1 and transmit the detected status information to the control system 2.
- only the driving data is stored in the data storage unit 24, and the robot can control the operation of the two driving wheels according to the driving data.
- the robot in addition to other functions, such as cleaning, vacuuming, waxing, etc., the robot can perform corresponding actions according to the audio data, which is commonly known as the dancing function.
- the robot 1 in this embodiment can change a plurality of actions by controlling the speed, amplitude, and order of the several kinds of motions when the dance function is activated, along with a certain music or forward or backward or a circle. .
- the robot itself cannot play music, and it is also necessary to additionally provide a music playing device.
- the data storage unit 24 further stores audio data.
- the control system 2 in this embodiment further includes an audio signal processor 25, and the robot 1 body A speaker 12 is also included. While the control unit 22 sends a driving instruction to the driving unit 23, the audio signal processor 25 receives the audio data in the data storage unit 24 and performs digital-to-analog conversion, and converts the analog audio. A signal is sent to the speaker 12 of the robot for playback by the speaker 12.
- the audio data may be sent to the audio signal processor 25 by the control unit 22, or may be directly read by the audio signal processor 25 to the data storage unit 24, as indicated by the broken line in FIG.
- the robot can perform an action that matches the music, such as advancing, rewinding, or turning, while playing music.
- the audio data stored in the data storage unit 24 is acquired from the outside of the robot 1, such as a mobile phone, a computer, a CD, an MP3, the Internet, etc., and the source of the audio data is very wide.
- the user can select music data according to his or her preference, and even the user can make music himself.
- the drive data should include data that controls the direction of the drive wheel, either forward or backward, or stopped in place. It should also include data on the speed of the operation and the time at which the action was performed. Since multiple actions are to be performed on the drive wheel, it should also include the data defined by the sequence of actions.
- This drive data can usually be obtained as follows:
- the frequency analysis processing is performed on the music data of the robot 1, and the music information M1 indicating the playback time axis XI along the music data is obtained.
- the drive information M2 is generated as shown in FIG.
- the drive information M2, that is, the drive data includes left drive wheel control values and right drive wheel control values for controlling the rotational direction of the left and right drive wheels 110 and the right drive wheel 111 along the playback time axis XI, respectively, and the duration time.
- control unit 22 analyzes the drive data to obtain an accurate control value, and according to the control value, sends a corresponding drive command to the drive motor, and the drive motor drives the drive wheel to perform the corresponding action.
- the drive data can be generated in real time by dedicated software when transmitting audio data to the data storage unit 24, or generated and stored when there is no transmission request, and stored in the data storage unit 24 when transmission is required.
- the driving data When the driving data is generated, it can be automatically generated by special software, such as performing automatic frequency analysis processing on the music data transmitted to the robot 1, or manually adjusting, setting, or arranging to increase the personal characteristics performed by the robot.
- special software such as performing automatic frequency analysis processing on the music data transmitted to the robot 1, or manually adjusting, setting, or arranging to increase the personal characteristics performed by the robot.
- the drive information M2 obtained by the two methods has advantages. For the driving data obtained by the former method, since the frequency analysis processing is performed on the music data, the robot dance motion obtained by the driving data is relatively standardized; for the driving data obtained by the latter method, since the user is The music data execution frequency analysis is artificially set, so the obtained driving data has personal creativity and characteristics.
- the user can arrange in the form of a form file, on a mobile phone or a computer.
- An embodiment of the form format is as follows:
- the serial number represents the order of each action, which is arranged in an incremental manner, and its work sequence number includes a three-digit decimal number.
- the left and right wheel directions are represented by a decimal number, which is 0, 1, 2, and 3, respectively. 0 and 3 represent stop; 1 means advance; 2 means backward.
- the left wheel speed and the right wheel speed are represented by two decimal digits, which are converted by multiplication, such as multiplication by a coefficient, such as a transmission coefficient, which can be obtained by the relevant parameters of the transmission gear, and the speed in units of m/s is obtained. . For example: Enter 15 under the digit corresponding to the speed of the left wheel and multiply the value by 15.
- the present invention also provides a time counter for counting the time of each specific action performed by the operable component.
- the driving data includes a plurality of sets of motion driving data, and each motion data includes at least an action number bit, a left wheel direction data bit, a right wheel direction data bit, a left wheel speed data bit, a right wheel speed data bit, and time data. Bit. By setting these bits, you can get a specific action.
- the data in the table is stored in txt format.
- the specific content is:
- driver file there is a driver file corresponding to an audio file, and the driver file includes specific driver data.
- the file can be saved on the phone or computer, or saved directly on the data storage unit 20.
- the human machine interface 13 sends a work instruction to the data control unit 21, the data control unit 21 reads the information inserted in the data storage unit 20 on the robot 1, and controls the left drive motor based on the drive data in the read drive file. And right drive motor.
- the software for the user to edit the driver data by itself may be any format of software, and the final stored driver file may also be a file of any format.
- the production of Table 1 can be edited in the excel format, and the resulting drive file is in the txt format, but is not limited thereto.
- the audio file may be in various formats such as MP3, WAV, WMA, MP2, OGG, APE, AAC, MIDI or VQF.
- the present invention also provides a very friendly human-machine interface 21, which includes a display screen and a keyboard, wherein the keyboard includes a drive file selection button and a confirmation button, and the user selects the robot by driving the file selection button.
- a very friendly human-machine interface 21 which includes a display screen and a keyboard, wherein the keyboard includes a drive file selection button and a confirmation button, and the user selects the robot by driving the file selection button.
- the usual practice is to directly select the audio file, because the audio file matches the driver file, and when the audio file is selected, the driver is selected. file.
- the human machine interface 21 sends the confirmation command to the control unit 22, and the control unit 22 reads the drive data in the selected drive file, and controls the robot to perform the corresponding action.
- the keyboard can also include other keys, such as a delete key, and some delete files can be deleted by the delete key.
- the keyboard may further include a data modification key and a numeric keypad.
- the data modification key may modify the driving data in the driving file. After selecting a driving file, the file is opened, and a certain group of data is modified. When the numeric keypad is entered, the corresponding number is entered.
- the robot provided in this embodiment can not only dance according to the already existing driving file, but also temporarily modify the driving data in real time, so that the action of the robot is more in line with the user's preference.
- the driving wheel of the robot can be used as a robot dance action unit, and the robot can also be provided with a lifting mechanism, or/and an acoustic transmitter, a light emitter, etc., as shown in FIG. 4 . .
- the driving data includes control data for controlling the light emitter and the sound emitter, and some data may be added after each line shown in Table 1. Bits, respectively, represent control data for the acoustic transmitter and the optical transmitter. Such as the time, time period, color, etc. of the light emitter activation. The time, time period, frequency, etc. from which the sound is emitted.
- control unit 22 in the control system 2 may be a single control subunit or a central controller of the robot itself. That is, in a specific implementation, the control unit for the dancing function in the robot can be a single controller, which is convenient to implement at this time, and is also easy to modify the existing robot, so that the dancing can be added to the existing robot.
- this function can also be implemented by a central processor for coordinating the control of the robot, by adding a dance subroutine to its program to enable the robot's central processor to implement the dance function.
- the machine 1 of the present invention may be a robot having only a dancing function, or some commonly used cleaning robots, such as: a dust removing robot having a dust removing member, an automatic sweeping machine having a cleaning member, or an automatic mopping device. Machine, waxing robot with waxing parts, etc.
- the sensor system 10 includes an infrared sensor and/or a piezoelectric sensor.
- the sensor system 10 also includes a working environment for detecting when the robot is working.
- the robot in the present invention can be implemented as a robot of various types and various functions.
- Small home robots such as home security and vacuum cleaners can also be industrial robots.
- these robots can also have the dancing function as described in the present invention, and provide entertainment tools for the user in addition to work, thereby improving the affinity of the robot to communicate with people, thereby increasing the affinity.
- the added value of these robots Moreover, the dance function completed by the present invention does not require excessive cost.
- the robot can enable the user to select music by using a common device tool such as a mobile phone or a computer, and the user can automatically generate a dance action that matches the music beat, or the user can edit the dance action of the robot by itself;
- the "information source" of dance movements has a wide range of sources, which are not limited by the robot's own equipment, so that users can make, modify or replace them according to their preferences during the use of the robot, thus making the use of the robot more affinitive and interesting. Sex.
Landscapes
- Toys (AREA)
- Manipulator (AREA)
Description
按照音频数据执行相应动作的机器人及其控制系统
技术领域
本发明涉及一种机器人系统， 尤其涉及一种按照音频数据执行相应动作的机器人 及其控制系统。 背景技术
随着社会的进步和科技水平的飞跃发展， 各种不同类型的机器人纷纷面市， 由此 开拓了人们的视野， 丰富了人们的生活， 满足了各种人群的不同需求。 作为人类情感 的强烈表达， 舞蹈艺术形式一直深受人们喜爱。 跳舞机器人， 通过其肢体语言与音乐 节奏的完美合拍， 实现了机器人跟随音乐的节拍翩翩起舞的效果， 从而成为人们喜爱 的机器人之一。
目前， 大多数能跳舞的机器人所采用的音乐或者动作， 都是由生产厂家事先设置 好的。 用户使用该类机器人时， 只能从机器人上选取其中的某一音乐， 通过音乐的播 放来欣赏对应该音乐的舞蹈动作。 该类机器人音乐曲目相对来说比较单一， 这对于有 着不同喜好的人群来说， 或是需要借助机器人应景进行即兴表演时， 而显得无可奈何、 力不从心。
中国科学院深圳先进技术研究院在现有跳舞机器人的基础之上， 对跳舞机器人进 行了技术改良。 其设计的 "跳舞机器狗"， 动作不需要预先编排， 完全由音乐的节奏控 制， 随着音乐节奏的不同， 动作的模式也会有所改变。 "跳舞机器狗 "通过对音乐的理 解， 即对音乐的分析， 提取音乐的节拍信息并映射到相应的动作， 然后随着音乐的播 放， 机器狗就会跟随音乐的节奏舞动起来。
中国科学院深圳先进技术研究院所研究开发出的 "跳舞机器狗"， 其解决了目前市 面上绝大多数跳舞机器人音乐曲目相对单一、 动作相对单一以及不能应景即兴表演的 缺点， 使得跳舞机器人能够从容应对各种不同节奏、 曲风的音乐进行舞蹈， 显现出了 跳舞机器人的智能技术。 然而， 该类跳舞机器人由于其内置的音乐解析器和特殊的软 件控制算法等， 使得该类机器人的技术附加值较高， 其价格也较为昂贵。 再者， 最为 重要的是， 该类机器人通过对音乐的理解自行演绎舞蹈， 而用户所能做的也只是为其 选取音乐， 而无法介入机器人舞蹈动作的编排。 对于用户而言， 仅能作为 "旁观者"， 无法实现在机器人舞蹈动作的编排上渗入 "个人元素" 等的个人创意。 该类机器人无
法做到与用户的充分互动， 并且无法显现出用户的个人特质。 发明内容
本发明所要解决的技术问题在于， 针对现有技术的不足， 提供一种按照音频数据 执行相应动作的机器人及其控制系统， 使得用户可以自行选择音频数据， 使机器人能 按选定的音频数据执行相应的动作。
为了解决上述的技术问题， 本发明提供了一种使机器人按照音频数据执行相应动 作的控制系统， 包括： 位于所述机器人本体的控制单元、 驱动单元和人机界面， 还包 括与机器人本体分离的、 存储有与一音频数据相匹配的驱动数据的数据存储单元， 所 述数据存储单元通过数据接口与所述控制单元连接， 其中， 所述控制单元与人机界面 连接， 接受来自于人机界面的指令， 从所述数据存储单元中读出所述驱动数据， 按照 所述驱动数据向所述驱动单元发送驱动指令； 所述驱动单元接受所述驱动指令驱动所 述机器人的可操作部件， 所述可操作部件按照所述驱动指令的要求动作。
本发明提供的机器人可以按照音频数据执行相应动作， 即俗称的具有跳舞功能。 具体来说：
1、本发明中涉及到的数据存储单元可以为现有技术中的各种存储卡， 其内部的数 据可以从机器人外部通过手机、 电脑等诸多家庭常用设备工具直接存储或者通过互联 网下载， 通过所述设备工具进行复制或下载各种音乐 /动作信息， 音乐 /动作来源广泛、 多样化。
2、 由于机器人是通过将其外置的存储卡与手机、 电脑等家庭常用设备工具相连接 进行存储或通过互联网下载。 具体来说， 用户只需要从机器人上取下外置存储卡， 将 存储卡与手机或电脑相应位置连接进行文件传送， 就可轻松实现存储或下载的功能， 操作便携， 从而免除了移动机器人本体， 将其本体直接与手机、 电脑等家庭常用设备 连接的 "劳作之苦"。
3、 只需要通过手机按键选取或是电脑鼠标操作， 直接存储或通过第三方下载， 将 相关文件传送到机器人的数据存储单元， 即可实现在 "包罗万象" 的 "信息库" 中搜 寻、 修改或变更文件， 十分方便、 简单。
4、 本发明中使机器人按照音频数据执行相应动作的驱动数据可以由用户自行编 辑， 用户可以在类似于 excel格式下进行编辑， 在编辑完后再存储到存储卡中， 使用 的门槛大为降低， 操作十分简便； 另外， 也可以进行即时编辑， 即通过机器人本身的
人机界面对该驱动数据进行修改， 使得用户与机器人的互动性更强， 可以使机器人的 动作充分体现用户的意愿， 并且修改方式更加灵活。
5、 通过采用存储或下载数据的方式进行音乐 /动作的输入， 充分体现了产品自身 和用户之间的友好互动， 提升了产品的亲和度， 使得通过本发明制成的产品不仅仅作 为一种 "舞随音动" 的机器人， 而且更能在产品中融入用户的个人创意， 体现出用户 个人特质并以此增添了家庭生活情趣。 附图说明
图 1为本发明按照音频数据执行相应动作的机器人的结构示意图；
图 2为本发明按照音频数据执行相应动作的机器人的控制系统实施例一的原理框 图；
图 3为本发明按照音频数据执行相应动作的机器人的控制系统实施例二的原理框 图；
图 4为本发明按照音频数据执行相应动作的机器人的控制系统实施例三的原理框 图；
图 5为本发明中一种制作驱动数据方法的音乐信息和驱动信息的对照图表。 具体实施方式
参见图 1和图 2， 为本发明所提供的按照音频数据执行相应动作的机器人的实施 例一。 图 1为结构示意图， 图 2为原理框图。
本实施例中的机器人 1包括控制系统 2、传感器系统 10和一些可操作部件 11。其 中， 所述的控制系统 2包括位于所述机器人 1本体的控制单元 22、 驱动单元 23和人 机界面 21， 和与机器人 1本体分离的、 存储有与一音频数据相匹配的驱动数据的数据 存储单元 24， 该数据存储单元 24可具体实施为一存储卡， 在机器人 1本体上设有卡 槽 15， 存储卡插入该卡槽 15中， 通过数据接口， 如 USB接口与所述控制单元 22连 接。 所述控制单元 22与人机界面 21连接， 接受来自于人机界面 21的指令， 从所述数 据存储单元 24中读出所述驱动数据， 按照所述驱动数据向所述驱动单元 23发送驱动 指令。 所述驱动单元 23接受所述驱动指令驱动所述机器人的可操作部件 11， 所述可 操作部件 11按照所述驱动指令的要求动作。
在本实施例中， 所述的可操作部件为机器人底部的两个驱动轮 110和 111。 驱动
单元 23为两个对应于左右两个驱动轮的驱动电机， 由驱动电机控制驱动轮的运行。 所述传感器系统 10用于检测所述机器人 1的工作状态，并将检测到的状态信息发 送给控制系统 2。
在本实施例中， 所述的数据存储单元 24中仅存储有驱动数据， 机器人可按驱动数 据控制两个驱动轮的运行。
在本发明中， 机器人除了具有其他功能外， 如清扫、 吸尘、 打蜡等功能， 还能按 照音频数据执行相应动作， 也就是俗称跳舞功能。 本实施例中的机器人 1在启动该跳 舞功能时， 可随着某一音乐或向前或向后间或转圈， 通过对这几种动作的速度、 幅度、 顺序的控制， 可以变换出多种动作。 在本实施例中， 机器人自身不能播放音乐， 还需 要另外提供音乐播放装置。
更好地， 如实施例二， 如图 3所示， 在数据存储单元 24还存储有音频数据， 对应 地， 本实施例中的控制系统 2还包括音频信号处理器 25， 所述机器人 1本体上还包括 扬声器 12。 在所述控制单元 22向所述驱动单元 23发送驱动指令的同时， 所述音频信 号处理器 25接收所述数据存储单元 24中的所述音频数据并进行数模转换， 将转换后 的模拟音频信号发送给所述机器人的扬声器 12， 由所述扬声器 12播放。 其中， 音频 数据可由控制单元 22发给所述的音频信号处理器 25， 也可以由音频信号处理器 25直 接到数据存储单元 24中读取， 如图 3中虚线所述。
在本实施例中， 所述机器人可以一边播放音乐， 一边执行与该音乐相匹配的动作， 如前进、 后退或转圈等。
在上述实施例中，数据存储单元 24中存储的音频数据是从机器人 1的外部获取的， 如， 手机、 电脑、 CD光盘、 MP3、 互联网等， 音频数据的来源非常广泛。 因而， 用户 可以按其喜好选择音乐数据， 甚至用户可以自己制作音乐。
为了使机器人 1能按照音频数据翩翩起舞， 也就是根据音频数据控制其可操作部 件执行特定的动作， 需要根据音频数据得到控制其可操作部件的驱动数据， 以图 1中 的机器人 1为例， 为了驱动其左驱动轮， 所述的驱动数据应包括控制该驱动轮方向的 数据， 即是向前还是向后， 还是停在原地不动。 另外还应包括运行速度的数据、 该动 作执行的时间的数据。 由于对该驱动轮要执行多次动作， 还应该包括动作的顺序限定 的数据。
该驱动数据通常可通过如下方式获得：
由专门的软件生成， 即通过专门的软件基于音乐数据分析音乐元素， 通过对传输
给机器人 1 的音乐数据执行频率分析处理， 获得表示沿着音乐数据的回放时间轴 XI 的音乐信息 Ml。 基于音乐数据分析过的音乐信息 Ml , 产生驱动信息 M2， 如图 5所 示。该驱动信息 M2，即驱动数据，包括沿着回放时间轴 XI用于分别控制左驱动轮 110 和右驱动轮 111 的旋转方向、 旋转速度的左驱动轮控制值和右驱动轮控制值以及所持 续的时间。
由此， 控制单元 22解析该驱动数据， 获得精确的控制值， 按照该控制值， 向驱动 电机发送相应的驱动指令， 由驱动电机带动驱动轮执行相应的动作。
该驱动数据可以在传输音频数据到数据存储单元 24时通过专用软件实时生成，也 可以在没有传输要求时， 生成并存储起来， 在需要传输时， 再存到数据存储单元 24 中。 在生成该驱动数据时， 可以由专用软件自动生成， 如对传输给机器人 1 的音乐数 据执行频率分析处理自动生成， 也可以人为进行调整、 设置、 编排， 以增加进个人特 色在机器人所执行的动作里面。 通过该两种方法获得的驱动信息 M2， 各有优点。 对 于前一种方式所获得的驱动数据， 由于是对音乐数据执行频率分析处理而成， 由该驱 动数据获得的机器人舞蹈动作较为规范； 对于后一种方式所获得的驱动数据， 由于是 用户对音乐数据执行频率分析人为地加以设定， 因此所获得的驱动数据， 具有个人创 意和特色。
驱动数据的另一种生成方式： 用户可以在某一表格文件的形式、 在手机或者电脑 中进行编排， 该表格格式的一个实施例具体如下：
表 1 :
以上可以看出， 该驱动数据包括了多组动作驱动数据， 每一个动作数据至少包括 动作序号位、 左轮方向数据位、 右轮方向数据位、 左轮速度数据位、 右轮速度数据位 和时间数据位。 通过对这些位的设置， 便可以得出一个特定的动作。
编辑完成动作后， 将表格内的数据以 txt格式存储， 具体内容为：
00101050614205；
00202030812066； 从而， 对应于一个音频文件有一个驱动文件， 该驱动文件中包括了具体的驱动数 据。 该文件可保存在手机或电脑上， 或是直接保存在数据存储单元 20 上。 人机界面 13—旦向数据控制单元 21发出工作指令， 数据控制单元 21读取插入在机器人 1上的 数据存储单元 20内的信息，并且基于读出的驱动文件中的驱动数据控制左驱动电机和 右驱动电机。
需要说明的是， 用户自行编辑驱动数据的软件可以是任何格式的软件， 最终存储 的驱动文件也可以是任何格式的文件。 如在上面一实施例中， 表 1 的制作可在 excel 格式下编辑， 最终形成的驱动文件为 txt格式， 但并不局限于此。
在数据存储单元 24中，对应于机器人 1可以存有单个或者多个音频文件和与其对 应的驱动文件。 所述音频文件可以为 MP3、 WAV、 WMA、 MP2、 OGG、 APE、 AAC、 MIDI或 VQF等各种格式。
另外， 本发明还提供了非常友好的人机界面 21， 该人机界面 21包括显示屏和键 盘， 其中， 所述键盘包括驱动文件选择键和确认键， 用户通过驱动文件选择键来选择 让机器人执行哪一个驱动文件， 如果在数据存储单元 24中包括音频文件， 通常的做法 是直接选择音频文件， 因为音频文件与驱动文件是相匹配的， 当选择了音频文件， 也 就相当于选择了驱动文件。 选择好驱动文件后， 通过确认键来确认。 则人机界面 21 将该确认指令发送给控制单元 22， 控制单元 22读取选中的驱动文件中的驱动数据， 控制机器人执行相应的动作。 另外， 该键盘还可以包括其他一些按键， 如删除键， 通 过删除键可以将某些不喜欢的文件删除。
该键盘还可以包括数据修改键和数字小键盘， 所述数据修改键可以修改驱动文件 中的驱动数据， 如选择某一驱动文件后， 将该文件打开， 对其中某一组数据进行修改， 此时， 通过所述数字小键盘输入相应的数字。 通过该项功能， 本实施例提供的机器人 不但可以按照已经存好的驱动文件跳舞， 也可以实时对驱动数据做临时修改， 使得机 器人的动作更符合用户的喜好。
除了本实施例所提及的， 可以将机器人的驱动轮作为机器人舞蹈动作单元， 机器 人还可以设有升降机构， 或者 /并且设有声发射器、 光发射器等， 具体实施例参考图 4 所示。此时， 为了驱动声发射器 14、光发射器 13，驱动数据中包括控制所述光发射器、 声发射器的控制数据， 如在表 1所示的每一行的后面可以再加上一些数据位， 分别代 表对声发射器、 光发射器的控制数据。 如光发射器启动的时刻、 时间段、 颜色等。 声 音发出的时刻、 时间段、 频率等。
机器人在做动作时， 再在合适的时机配上声与光， 将使得此机器人的舞蹈生机盎 然， 充满了趣味。
在本发明中， 控制系统 2中的控制单元 22可以是单独的一个控制子单元， 也可以 是机器人自身的中央控制器。 即， 在具体实施时， 机器人中用于跳舞功能的控制单元 可以为一个单独的控制器， 此时实施时比较方便， 而且也容易对现有机器人的改造， 即可在现有机器人上增加跳舞功能。 另外， 该功能也可以由用于统筹控制机器人的中 央处理器完成， 通过在其程序中增加一段跳舞子程序， 使机器人的中央处理器来实施 跳舞功能。
再参见图 1， 本发明所述的机器 1可以是仅具备跳舞功能的机器人， 或是一些常 用的清洁机器人， 诸如： 具有除尘部件的除尘机器人， 具有清扫部件的自动扫地机或 是自动拖地机， 具有打蜡部件的打蜡机器人等。 根据机器人的不同功能， 需对图 1中 所述的机器人的各处组成部件进行相应的改变， 例如， 当为除尘机器人时， 对应地， 所述传感器系统 10包括红外传感器和 /或压电传感器， 用于检测工作环境、 用于检测 工作状态的传感器和与传感器相对应的信号处理电路； 还包括用于驱动清洁单元工作 的工作电动机和用于驱动机器人行走的轮子及其驱动电动机 （即图 1 中驱动轮 110、 111和图 2中控制系统 2中的驱动单元 23 ) ; 所述控制单元 22也可以为该机器人总的 中央处理器，控制机器人完成除尘工作；所述人机界面 21为所述机器人操作使用界面。 所述传感器系统 10还包括， 用于探测机器人工作时的工作环境。
对于除尘机器人的上述结构可以为现有技术， 如在公开号为 KR20040087185、
WO07065033A2 WO0038026AK WO0036969A1 的专利文献中均有体现， 在本申请 中不再重复。
本发明中的机器人可以实施为各种类型、 各种功能的机器人。 如家庭保安、 吸尘 器等小型家用机器人， 也可以是一些工业机器人。 这些机器人在完成其各自主要的功 能外， 还可以具有如本发明所述的跳舞功能， 在工作之余， 为用户提供了娱乐工具， 提高了机器人与人沟通的亲和性， 由此增加了这些机器人的附加值。 而且， 通过本发 明完成的舞蹈功能， 不需增加过多成本。
总体来说， 该机器人可以使得用户借助手机、 电脑等家庭常用设备工具， 用户自 行选择音乐， 使用软件自动生成合着音乐节拍的舞蹈动作， 或是由用户自行编辑机器 人的舞蹈动作； 该音乐和舞蹈动作的 "信息源" 来源广泛， 不受机器人本身设备的限 制， 使得用户在对机器人的使用过程中可以按其喜好进行制作、 修改或更换， 从而对 机器人的使用更具有亲和性、 趣味性。
最后所应说明的是： 以上实施例仅用以说明本发明而非限制， 尽管参照较佳实施 例对本发明进行了详细说明， 本领域的普通技术人员应当理解， 在不脱离本发明的精 神和范围的前提下对本发明进行的修改或者等同替换， 均应涵盖在本发明的权利要求 范围当中。
Claims
1. 一种使机器人按照音频数据执行相应动作的控制系统， 包括： 位于所述机器人 本体的控制单元、 驱动单元和人机界面， 其特征在于， 还包括与机器人本体分离的、 存储有与一音频数据相匹配的驱动数据的数据存储单元， 所述数据存储单元通过数据 接口与所述控制单元连接， 其中，
所述控制单元与所述人机界面连接， 接受来自于所述人机界面的指令， 从所述数 据存储单元中读出所述驱动数据， 按照所述驱动数据向所述驱动单元发送驱动指令； 所述驱动单元接受所述驱动指令驱动所述机器人的可操作部件， 所述可操作部件 按照所述驱动指令的要求动作。
2. 如权利要求 1所述的使机器人按照音频数据执行相应动作的控制系统， 其特征 在于， 所述音频数据还存储在所述数据存储单元中， 所述控制系统还包括音频信号处 理器， 其中， 在所述控制单元向所述驱动单元发送驱动指令的同时， 所述音频信号处 理器接收所述数据存储单元中的所述音频数据并进行数模转换， 将转换后的模拟音频 信号发送给所述机器人的扬声器。
3. 如权利要求 1所述的使机器人按照音频数据执行相应动作的控制系统， 其特征 在于， 还包括时间计数器， 用于对所述可操作部件所执行的每一个特定动作的时间进 行计时。
4. 如权利要求 1所述的使机器人按照音频数据执行相应动作的控制系统， 其特征 在于， 所述驱动数据以驱动文件的方式存储在所述数据存储单元中， 所述数据存储单 元存储有一个或多个驱动文件。
5. 如权利要求 4所述的使机器人按照音频数据执行相应动作的控制系统， 其特征 在于， 所述人机界面包括显示屏和键盘， 其中， 所述键盘包括驱动文件选择键和确认 键。
6. 如权利要求 5所述的使机器人按照音频数据执行相应动作的控制系统， 其特征 在于， 所述键盘还包括数据修改键和数字小键盘， 所述数据修改键用于修改驱动文件 中的驱动数据， 所述数字小键盘用于输入相应的数字。
7. 如权利要求 1所述的使机器人按照音频数据执行相应动作的控制系统， 其特征 在于， 所述数据存储单元包括各种类型的存储卡， 相应地， 在所述机器人本体中设有 用于容纳所述存储卡的卡槽。
8. 如权利要求 1-7任一所述的使机器人按照音频数据执行相应动作的控制系统， 其特征在于， 所述驱动数据包括多组动作驱动数据， 每一组动作驱动数据至少包括动 作序号位、 左轮方向数据位、 右轮方向数据位、 左轮速度数据位、 右轮速度数据位和 时间数据位。
9. 如权利要求 8所述的使机器人按照音频数据执行相应动作的控制系统， 其特征 在于， 所述动作序号位包括三位十进制数， 所述左轮方向数据位和 /或右轮方向数据位 包括一位十进制数， 所述左轮速度数据位和 /或右轮速度数据位包括二位十进制数， 所 述时间数据位包括五位十进制数。
10. 一种按照音频数据执行相应动作的机器人， 包括机器人本体、 可操作部件， 其特征在于， 包括如权利要求 1-9任一所述的控制系统， 所述可操作部件受所述控制 系统中驱动单元的驱动， 执行与所述控制系统中数据存储单元所存储的驱动数据相应 的动作。
11. 如权利要求 10所述的按照音频数据执行相应动作的机器人， 其特征在于， 所 述可操作部件包括两个驱动轮。
12. 如权利要求 10或 11任一项所述的按照音频数据执行相应动作的机器人， 其 特征在于， 所述可操作部件还包括一个或多个光发射器和 /或声发射器， 所述数据存储 单元中存储的驱动数据中包括控制所述光发射器和 /或声发射器的控制数据。
13. 如权利要求 10或 11任一项所述的按照音频数据执行相应动作的机器人， 其 特征在于， 还包括清洁单元， 所述清洁单元包括除尘部件， 或清扫部件， 或打蜡部件。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2009202987332U CN201693556U (zh) | 2009-12-31 | 2009-12-31 | 按照音频数据执行相应动作的机器人及其控制系统 |
| CN200920298733.2 | 2009-12-31 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2011079657A1 true WO2011079657A1 (zh) | 2011-07-07 |
Family
ID=43394801
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/CN2010/078765 WO2011079657A1 (zh) | 2009-12-31 | 2010-11-16 | 按照音频数据执行相应动作的机器人及其控制系统 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN201693556U (zh) |
| WO (1) | WO2011079657A1 (zh) |
Families Citing this family (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104392729B (zh) * | 2013-11-04 | 2018-10-12 | 贵阳朗玛信息技术股份有限公司 | 一种动画内容的提供方法及装置 |
| CN105938482A (zh) * | 2016-04-12 | 2016-09-14 | 王怡科 | 电子产品系统调试方法及系统 |
| CN106075854A (zh) * | 2016-07-13 | 2016-11-09 | 牡丹江师范学院 | 一种舞蹈训练系统 |
| CN109820456B (zh) * | 2019-04-01 | 2023-11-21 | 东莞芯速科技有限公司 | 一种具有故事音乐播放功能的清洁机器人系统及控制方法 |
| CN111037557B (zh) * | 2019-12-20 | 2022-07-22 | 扬州哈工科创机器人研究院有限公司 | 用于机械臂led显示演绎的系统和控制系统 |
| CN112959319A (zh) * | 2021-01-19 | 2021-06-15 | 穆特科技（武汉）股份有限公司 | 一种快速编辑多自由度机器人动作数据的装置及方法 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002331175A (ja) * | 2001-05-10 | 2002-11-19 | Sente Creations:Kk | ダンス人形 |
| US20030069669A1 (en) * | 2001-10-04 | 2003-04-10 | Atsushi Yamaura | Robot performing dance along music |
| CN1683122A (zh) * | 2004-04-16 | 2005-10-19 | 上海科技馆 | 使机器人随音乐节奏跳舞的互动装置 |
| CN100431808C (zh) * | 2005-06-07 | 2008-11-12 | Lg电子株式会社 | 用于告知自移动机器人的状态的装置和方法 |
| CN101411948A (zh) * | 2007-10-19 | 2009-04-22 | 鸿富锦精密工业（深圳）有限公司 | 电子玩具 |
| CN201346776Y (zh) * | 2009-01-24 | 2009-11-18 | 泰怡凯电器(苏州)有限公司 | 一种用于机器人的语音系统及带有该语音系统的机器人 |
-
2009
- 2009-12-31 CN CN2009202987332U patent/CN201693556U/zh not_active Expired - Lifetime
-
2010
- 2010-11-16 WO PCT/CN2010/078765 patent/WO2011079657A1/zh active Application Filing
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002331175A (ja) * | 2001-05-10 | 2002-11-19 | Sente Creations:Kk | ダンス人形 |
| US20030069669A1 (en) * | 2001-10-04 | 2003-04-10 | Atsushi Yamaura | Robot performing dance along music |
| CN1683122A (zh) * | 2004-04-16 | 2005-10-19 | 上海科技馆 | 使机器人随音乐节奏跳舞的互动装置 |
| CN100431808C (zh) * | 2005-06-07 | 2008-11-12 | Lg电子株式会社 | 用于告知自移动机器人的状态的装置和方法 |
| CN101411948A (zh) * | 2007-10-19 | 2009-04-22 | 鸿富锦精密工业（深圳）有限公司 | 电子玩具 |
| CN201346776Y (zh) * | 2009-01-24 | 2009-11-18 | 泰怡凯电器(苏州)有限公司 | 一种用于机器人的语音系统及带有该语音系统的机器人 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN201693556U (zh) | 2011-01-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2011079657A1 (zh) | 按照音频数据执行相应动作的机器人及其控制系统 | |
| CN100350992C (zh) | 使用触觉反馈的声音数据输出和处理方法和设备 | |
| US8288641B2 (en) | Portable hand-held music synthesizer and networking method and apparatus | |
| TWI598871B (zh) | 可根據音樂節拍跳舞的機器人 | |
| JP4247626B2 (ja) | 再生装置および再生方法 | |
| WO2014079186A1 (zh) | 音频文件制作方法及终端设备 | |
| JPH08331663A (ja) | ホーム・オーディオ・システム用遠隔制御装置 | |
| WO2002076686A1 (fr) | Appareil d'apprentissage d'actions et procede d'apprentissage d'actions pour systeme robotique, et support de memoire | |
| WO2010027033A1 (ja) | コンテンツ推薦システム、コンテンツ推薦方法、コンテンツ推薦装置、プログラム及び情報記憶媒体 | |
| JP2002177656A (ja) | 電子玩具 | |
| CN201346776Y (zh) | 一种用于机器人的语音系统及带有该语音系统的机器人 | |
| US20140249673A1 (en) | Robot for generating body motion corresponding to sound signal | |
| JP2008090633A (ja) | 動きデータ生成装置、動きデータ生成方法及び動きデータ生成プログラム | |
| JP2007066104A (ja) | 入力装置及び入力方法 | |
| JP2010134908A (ja) | 端末装置、画像表示方法、およびプログラム | |
| US20110271018A1 (en) | Method for producing a mapping tool, a game program having the mapping tool and operation method thereof | |
| US9720509B2 (en) | Gesture detection system, gesture detection apparatus, and mobile communication terminal | |
| CN109147741A (zh) | 一种音乐演奏方法和装置 | |
| WO2010083768A1 (zh) | 用于机器人的语音系统及带有该语音系统的机器人 | |
| JP5187563B2 (ja) | 音響再生ロボット | |
| CN207153090U (zh) | 一种智能音乐摇摇马 | |
| US20200164522A1 (en) | Mobile terminal and music play-back system comprising mobile terminal | |
| TWI426414B (zh) | 整合式遙控裝置及其無線操控方法 | |
| JP2009050471A (ja) | 動き特徴提示装置、動き特徴提示方法及び動き特徴提示プログラム | |
| WO2011052424A1 (ja) | コンテンツ選択システム、コンテンツ選択装置、コンテンツ選択方法及びプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 10840446 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 10840446 Country of ref document: EP Kind code of ref document: A1 |