CN108182927A - 基于移动终端实现与植物的远程互动的系统及其实现方法 - Google Patents
基于移动终端实现与植物的远程互动的系统及其实现方法 Download PDFInfo
- Publication number
- CN108182927A CN108182927A CN201711478443.1A CN201711478443A CN108182927A CN 108182927 A CN108182927 A CN 108182927A CN 201711478443 A CN201711478443 A CN 201711478443A CN 108182927 A CN108182927 A CN 108182927A
- Authority
- CN
- China
- Prior art keywords
- note
- signal
- information
- interactive
- playing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/0008—Associated control or indicating means
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
- G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/0033—Recording/reproducing or transmission of music for electrophonic musical instruments
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/0033—Recording/reproducing or transmission of music for electrophonic musical instruments
- G10H1/0083—Recording/reproducing or transmission of music for electrophonic musical instruments using wireless transmission, e.g. radio, light, infrared
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/32—Constructional details
- G10H1/34—Switch arrangements, e.g. keyboards or mechanical switches specially adapted for electrophonic musical instruments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/22—Parsing or analysis of headers
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
- G10H2220/091—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Security & Cryptography (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Toys (AREA)
- Selective Calling Equipment (AREA)
Abstract
本发明公开了一种基于移动终端实现与植物的远程互动的系统,包括移动终端和用于盛放植物的互动装置,移动终端与互动装置能够双向无线通信,其中,移动终端中配置有用于实现与互动装置中盛放的植物进行交互的终端系统,互动装置中配置有控制模块和互动响应模块,终端系统用于根据外部请求获取弹奏曲目信息生成弹奏界面输出和根据弹奏界面接收到的弹奏信号生成控制信号输出至控制模块;控制模块用于根据控制信号控制互动响应模块进行动作。本发明实现了通过移动终端对互动装置中的植物响应方式进行控制,提高了人与植物的互动体验,让植物更富有生命力和趣味性。
Description
技术领域
本发明涉及人与植物互动领域,特别是一种基于移动终端实现与植物的远程互动的系统及其实现方法。
背景技术
随着人们生活水平的提高以及科学技术的发展,能够实现人与植物互动的植物互动装置越来越多地出现在人们的生活中,给人们的日常生活增添乐趣。公告号为CN204759418U的中国实用新型专利文件公开了一种基于分布式电容感应技术的生态植物互动装置,该装置可以在人体触碰植物时,实现了通过声和/或光的形式对人体的触碰进行响应,但是这种互动方式的趣味性和实用性较低。
发明内容
本发明的目的是提供一种用于实现与植物的互动的终端系统,以解决上述技术问题中的至少一个。
根据本发明的一个方面,提供了一种基于移动终端实现与植物的远程互动的系统,包括移动终端和用于盛放植物的互动装置,移动终端与互动装置能够双向无线通信,其中,移动终端中配置有用于实现与互动装置中盛放的植物进行交互的终端系统,互动装置中配置有控制模块和互动响应模块,终端系统用于根据外部请求获取弹奏曲目信息生成弹奏界面输出和根据弹奏界面接收到的弹奏信号生成控制信号输出至控制模块;控制模块用于根据控制信号控制互动响应模块进行动作。由此,可以实现互动装置与移动终端的连接,用户可以在移动终端中弹奏曲目的同时,盛放植物的互动装置会发出对应声音,不同于现有技术盛放植物的互动装置通过声和/或光的形式对人体的触碰进行响应,本发明可以使盛放植物的互动装置通过远程互动系统对人在终端系统作出的动作进行响应,这一互动方式更加有趣味性。
在一些实施方式中,弹奏曲目信息包括音符顺序、音符和音符间隔以及音符对应的琴键编号,弹奏界面包括有琴键标识和音符标识。由此,通过音符顺序、音符和音符间隔可以保存并传送一首完整的乐曲,不影响用户的创造作品的完整性,而且对应的琴键编号使获取的音符更准确,且传输的数据内容简单,匹配方便,传输过程中的准确性更高。
在一些实施方式中,终端系统包括演奏模块,演奏模块包括信号获取单元和信号封装单元,信号获取单元用于通过琴键标识获取琴键编号和输入琴键信号的时间,并根据输入的琴键编号、时间与弹奏曲目的音符间隔以及音符对应的琴键编号进行匹配,获取当前弹奏的音符;信号封装单元用于根据当前弹奏的音符和选用的数据传输协议进行数据内容的封装,生成控制信号。通过琴键标识获取到的琴键编号和输入琴键信号的时间,即可以获取用户在弹奏时发出的不同弹奏信息,将弹奏信息与预存的播放曲目的音符信息进行比较、匹配,即可获取到当前弹奏的为哪个音符,而将当前弹奏的音符进行封装,即可生成符合数据传输协议的控制信号发送给装置,这样传输的数据就是弹奏的音符,植物互动装置在获取到音符时就可以进行响应,传输的数据内容和格式简单,提高传输速率,实现简单方便,能够提高互动响应速度,进而提高用户远程控制互动装置的体验。
在一些实施方式中,其中,控制模块包括信号解析单元和音频获取单元,信号解析单元用于根据选用的数据传输协议对接收到的控制信号进行解析,控制信号包括功能标识字段、数据内容字段和校验字段,功能标识字段用于标识当前的互动操作的类型,数据内容字段用于标识互动操作的控制信息,校验字段用于校验控制信号数据包的格式是否正确。信号解析单元解析后获取功能标识字段和数据内容字段的信息,并根据功能标识字段的内容,对数据内容字段的信息进行解析,获取当前弹奏音符;音频获取单元用于根据当前弹奏音符和预存的音频信息获取与当前弹奏音符匹配的音频信号,并将获取的音频信号输出至相应的互动响应模块。用户按下琴键时,有一琴键标识时间,将该时间与音符间隔进行匹配,获取到该时间对应的音符,即可得到此时落下的音符具体信息,根据传输协议生成控制信号,发送至盛放植物的互动装置。互动装置获取到控制信号后,根据传输协议进行解析,并播放解析出的音符,由此,可以实现通过互动系统控制盛放植物的互动装置播放乐曲的功能,实现基于远程虚拟弹奏控制相应互动装置进行响应。
在一些实施方式中,还包括配置模块,用于获取设置的互动响应配置信息生成调节信号输出至控制模块;控制模块用于根据调节信号控制互动响应模块进行动作。用户可以在移动终端设定配置信息,移动终端生成调节信号输出至盛放植物的互动装置,其中,生成的调节信号可以如控制信号一样,包括功能标识字段和数据内容字段,功能标识字段标识为要进行的设置的类型,数据内容字段则标识要进行的设置的具体参数值。由此,用户可以根据自己的喜好进行盛放植物的互动装置的灯光、色彩声音等设置,实现对互动装置的远程操作和配置,非常方便智能化,且通过对盛放植物的互动装置的灯光、色彩声音等进行设置,可以使盛放植物的装置更具有观赏性。
根据本发明的另一个方面,还提供了一种通过前述的系统实现与植物的远程互动的方法,包括:自动获取互动装置的广播地址,根据对广播地址的选择,建立与选定互动装置的无线连接;接收乐曲的选择,根据选择获取弹奏曲目信息输出至弹奏界面;通过弹奏界面接收弹奏信号的输入,根据输入的弹奏信号生成控制信号输出至已连接互动装置的控制模块;已连接互动装置的控制模块对接收到的控制信号进行解析,并根据解析结果进行响应。由此用户进去终端系统后,要使用这一互动系统时,选择设备搜索页面后,无线模块会将终端系统与盛放植物的互动装置通过无线连接的方式进行连接,在盛放植物的互动设置与终端系统连接后,用户就可以自由选择乐曲进行弹奏,同时,互动装置也会做出响应,从而实现对互动装置的远程控制,实现远程虚拟弹奏。而通过获取广播地址进行连接的方式,使得移动终端系统可以与任何互动装置进行连接,而不用进行绑定,操作方便。
在一些实施方式中,根据输入的弹奏信号生成控制信号输出至已连接互动装置的控制模块包括:获取输入的琴键编号和输入琴键编号的时间;根据输入的琴键编号和时间从已存储的弹奏曲目信息中获取当前弹奏的音符;根据当前弹奏的音符和选用的数据传输协议进行数据内容的封装,生成控制信号。由此,可以实现将记录的乐曲信息转换为具体的琴键编号信息和输入琴键编号的时间,使得可以基于弹奏的琴键和弹奏时间匹配到具体弹奏的音符,而通过将音符封装后发送给互动装置,使得传输的数据格式和内容简单,提高传输效率,进而缩短响应实现。
在一些实施方式中,控制模块对接收到的控制信号进行解析,并根据解析结果进行响应包括:控制模块根据选用的数据传输协议对接收到的控制信号进行解析,获取功能标识字段和数据内容字段的信息;控制模块根据功能标识字段的内容,对数据内容字段的信息进行解析,获取互动操作信息;控制模块根据互动操作信息生成相应的处理信号输出至相应的互动响应模块。由此,盛放植物的互动装置通过数据传输协议实现信号解析,随后在互动装置就可以根据解析后出的功能标识字段和数据内容字段的内容进行响应控制,从而实现基于移动终端对互动装置的远程控制,其中,通过在数据包中设置功能标识字段和数据内容字段可以将控制的操作类型和具体的操作信息分隔开,数据格式简单,可扩展性好,可以根据需求实现对互动装置的多种控制。
在一些实施方式中,当互动操作的类型为虚拟弹奏时,控制模块根据功能标识字段的内容,对数据内容字段的信息进行解析,获取互动操作信息包括:根据功能标识字段的内容判断互动操作的类型,当为虚拟弹奏时,解析数据内容字段的信息,获取音符;控制模块根据互动操作信息生成相应的处理信号输出至相应的互动响应模块包括:根据获取的音符,从预存的信息中获取当前音符对应的音频信号,并将获取的音频信号输出至音频播放模块进行播放。用户在通过终端系统弹奏乐曲时,移动终端系统识别音符信息,并将音符信息传输至互动装置,由此可以实现一边弹奏,盛放植物的互动装置一边发声,实现人与盛放植物的互动装置的远程互动,进而实现了人与植物的远程互动,提高与互动装置的趣味性,且数据传输和数据解析实现简单,提高互动装置的响应速率。
附图说明
图1为本发明一实施方式的用于实现与植物互动的终端系统的框架结构图;
图2为本发明另一实施方式的用于实现与植物互动的终端系统的框架结构图;
图3为本发明再一实施方式的用于实现与植物互动的终端系统的框架结构图;
图4为本发明一实施方式的植物互动系统的框架结构图;
图5为本发明一实施方式的通过用于实现与植物互动的终端系统对植物互动装置进行虚拟弹奏的操作方法流程图;
图6为本发明一实施方式的通过用于实现与植物互动的终端系统向植物互动装置下发自由弹奏乐曲的操作方法流程图;
图7为本发明一种实施方式的通过终端系统实现虚拟弹奏的方法流程图。
具体实施方式
下面结合附图对本发明作进一步详细的说明。
图1示意性的显示了根据本发明的一种实施方式的用于实现与植物互动的终端系统的框架结构。如图1所示,用于实现与植物互动的终端系统1,包括无线模块3、乐曲下发模块8、存储模块7和自由弹奏模块4,可以实现自由弹奏,录制乐曲的功能。其中,终端系统1通过无线模块3与盛放植物的装置2连接,自由弹奏模块4获取用户输入的弹奏信息生成第一音符信息,并将第一音符信息存储至存储模块7,之后用户就可以根据需求获取已经存储的第一音符信息,并根据需求将自由录制的第一音符信息通过乐曲下发模块8发送至与该系统相连的盛放植物的装置2。其中,无线模块3和存储模块7均可以是通过现有技术实现的,例如无线模块3可以实现为蓝牙模块等,而存储模块7可以通过文件存储或数据库存储或硬盘存储等方式实现。而自由弹奏模块4和乐曲下发模块8则可以通过编程实现,例如自由弹奏模块4实现为通过自由弹奏页面获取用户的弹奏信息,并根据弹奏信息生成第一音符信息,弹奏页面可以是加载有虚拟钢琴琴键的页面,获取的弹奏信息可以是包括按下的琴键信号和按下琴键信号的时间,其中,琴键信号可以通过标识符例如数字标识符或字母标识符进行标识(如将琴键进行编号预存),而按下琴键信号的时间可以是相对时间,即以开始弹奏为零点进行计时的时间,这样在获取到琴键信号和时间后,就可以将琴键信号对应为音符,将时间对应为音符间隔,并为音符的先后设定音符顺序,从而生成包括有音符顺序、音符和音符间隔的第一音符信息存储。其中,音符与琴键信号的对应关系通过音符和音符间隔进行标识,例如以弹奏页面中的虚拟钢琴琴键的数目为十二个为例,对于虚拟琴键有十二个的实现例,基于每个琴键弹奏出的音调都包括三个音调,即升调、降调和基准调,那么十二个虚拟琴键就可以产生三十六个音符,此时,将琴键按1~12的数字标识进行编号,而把三十六个音符按1~36进行编号,并将音符与琴键编号进行对应,例如1号琴键弹出的音符标记为:基准调为1号音符、升调为13号音符、降调为25号音符,那么在进行自由弹奏时,就可以根据按下的琴键信号生成音符,并记录音符弹出的时间和顺序,从而得到第一音符信息存储。之后,乐曲下发模块8就可以根据用户的请求,将选择的曲目(例如通过页面选项选择要下发到装置2的曲目,各曲目的音符信息对应存储在终端系统的存储模块中)对应的第一音符信息通过无线模块3发送给盛放植物的装置,其中,乐曲下发模块8获取到的选择请求里至少包括选择的曲目的标识,该标识与第一音符信息的存储位置相对应,从而使得乐曲下发模块8能够根据用户的选择请求获取到相应的第一音符信息下发。在具体使用中,用户进去终端系统1后,选择设备搜索页面后,无线模块3会将终端系统1与盛放植物的装置2通过蓝牙进行连接,这些可以参照蓝牙连接的现有技术进行实现,例如可以是盛放植物的装置2通过其蓝牙模块将其地址(例如MAC地址或SSID)进行广播,终端系统1在启动后通过选择设备搜索页面就可以获取到所有的已发送广播的装置2的广播地址,用户根据需求选择相应的装置2进行蓝牙连接,从而实现终端系统1与盛放植物的装置2的蓝牙连接。而当用户选择自由弹奏模块4对应的选项时,终端系统1进入自由弹奏页面开始录制乐曲,弹奏页面下方设有虚拟琴键,琴键左部可以设有两个用于调节音调的上下方向键,用户按对应的虚拟琴键,自由弹奏模块4就获取用户输入的弹奏信息生成第一音符信息,并将第一音符信息存储到存储模块7。存储后的第一音符信息可以通过乐曲下发模块8传输至盛放植物的装置2。在优选实施例中,为了节约流量和减少资源浪费,可以对用户录制的乐曲的总时长进行限制,例如设定第一音符信息总时长不超过三分钟(此时在自由弹奏模块4可以设定计时器,在计时为三分钟时自动结束录制)。
图2示意性的显示了本发明另一实施方式的用于实现与植物互动的终端系统的框架结构图。如图2所示,用于实现与植物互动的终端系统1,还可以包括演奏模块6,演奏模块6包括信号获取单元和信号封装单元,信号获取单元用于根据选择请求获取音符信息输出至弹奏界面,信号封装单元用于根据通过弹奏界面接收到的琴键信号生成控制信号输出至盛放植物的装置2。在具体实现中,信号获取单元主要实现为通过琴键标识获取琴键编号和输入琴键信号的时间,并根据输入的琴键编号、时间与弹奏曲目的音符间隔以及音符对应的琴键编号进行匹配,获取当前弹奏的音符;而信号封装单元则实现为根据当前弹奏的音符和选用的数据传输协议进行数据内容的封装,生成控制信号输出。用户选择演奏模块6后,先进入信号获取单元,信号获取单元根据用户的选择请求从存储模块7获取弹奏曲目(包括获取其音符顺序、音符和音符间隔信息输出),之后进入弹奏界面,弹奏界面可以配置为下方设有一列虚拟琴键标识(即虚拟的琴键,例如包括12个琴键标识),琴键标识上方设有一判别线,页面右上角设有分数板,左上角设有暂停键,开始游戏后弹奏界面上方不同位置向下滚动音符标识(即与音符对应的标识图形,如为圆形气泡或为方形滑块),用户配合所选乐曲的音符标识下落的节奏和位置在虚拟琴键标识上作出相应的弹奏动作。当用户弹奏相应的音符时,信号封装单元即获取按下的琴键标识的编号和按下琴键标识的时间,根据琴键标识的编号获取该琴键对应的音符,例如按下1号琴键,则获取到该琴键对应的音符标识为1或13或25。之后根据按下琴键标识的时间,将该时间与音符间隔进行匹配,获取到该时间对应的音符,即可得到此时落下的音符具体为几号音符(该实现方式是在前文的第一音符信息的生成方式的基础上进行对虚拟弹奏信息的获取和音符匹配,因此,可以结合前文的描述进行参照实现),此时就获取具体的音符,根据传输协议生成控制信号,发送至盛放植物的装置2。而装置2获取到控制信号后,根据传输协议进行解析,并播放解析出的音符。其中,根据传输协议生成控制信号的方式可以根据采用的传输协议进行确定,可以参照现有技术,例如当无线模块为蓝牙时,就根据蓝牙传输协议将音符封装成符合蓝牙传输协议的控制信号。其中,优选地,在进行封装时,还可以为控制信号配置功能标识字段、数据内容字段和校验字段,其中功能标识字段用于表示当前的交互操作的类型,例如对于传输音符至装置2进行播放的功能,可以将交互操作的类型定义为虚拟弹奏,而将数据内容字段的内容配置为待弹奏的音符,而校验字段则可以根据蓝牙传输协议的校验方式进行配置。在具体实施例中,用户通过信号获取单元可以选择的音符信息可以是自由弹奏模块4生成的第一音符信息,也可以是通过在终端系统中设置用于根据外部请求从网络上获取的第二音符信息,还可以是通过在终端系统的存储模块7中预先存储的第三音符信息,其中,第二音符信息和第三音符信息的数据存储格式与第一音符信息相同,也是包括音符、音符间隔和音符顺序。
在优选实施例中,终端系统还可以对用户在弹奏界面进行虚拟弹奏的质量进行反馈,例如在虚拟弹奏界面音符会自上而下滑落到相应的琴键上(通过音符与琴键编号的对应关系,将相应的音符标识对应滑落到与之对应的琴键编号对应的琴键标识上),当经过判定线时,用户通过点击琴键进行弹奏,终端系统根据点击的准确率给用户反馈弹奏准确等级,例如分为perfect、great、good、bad、miss等,具体实现方式可以参照现有技术进行判别和输出反馈结果。而且,终端系统还可以配置为根据反馈结果进行计分,如将不同的反馈结果分别对应一个弹奏得分,从而通过统计反馈结果得到弹奏得分。
图3示意性的显示了根据本发明一实施方式的用于实现与植物互动的终端系统的框架结构。如图3所示,实现与植物互动终端系统1,还可以包括配置模块9,用于根据用户设定的配置信息生成调节信号输出至装置2,其中,生成的调节信号可以如上文的控制信号一样,包括功能标识字段和数据内容字段,其中,功能标识字段标识要进行的设置的类型,而数据内容字段则标识要进行的设置的具体参数值。在具体实现中,可以进行设定的配置信息可以包括装置2上的灯光信息(如灯光颜色、灯光显示模式等)、音乐音量大小、是否启用触摸互动功能、播放的曲目等。在具体使用中,用户可以通过终端系统1进入设置页面,设置页面设有灯光颜色色盘、触摸开关、音量和灯光模式的选项,用户可以根据自身喜好对各个选项进行设置,以通过终端系统设置连接的盛放植物的装置2的灯光、音量等信息,配置模块9就会将用户的设置信息生成调节信号通过蓝牙输出至植物互动装置2。其中,通过对灯光颜色色盘和显示规律的设置,还可以实现七彩灯模式,具体为,当盛放植物的装置2上的LED常亮时,在终端系统1的设置页面中颜色色盘最外圈取值,并按照顺时针旋转、旋转一圈周期为10s的配置信息进行变色设定,将该信息生成调节信号发送至装置2后,装置2对接收到的调节信号进行解析,获取设置信息的内容进行响应,这样盛放植物的装置2就会亮起七彩循环灯,极具观赏性。另外,还可以设置将乐曲传输至盛放植物的装置2进行播放,而盛放植物的装置2上的LED会随着音乐进行律动的音乐跳动模式,具体例如可以将配置信息设置为LED灯光亮度以音乐200Hz以下的音频电平为准,-6db为最亮,-50db为最暗,进行变化,终端系统1根据该设置生成调节信号控制盛放植物的装置2的LED灯随播放的音乐进行律动;另外,用户可以在终端系统1中设置不同LED颜色,此模式可在终端系统1中关闭LED。其中对调节信号的封装和解析的方法参照控制信号的封装和解析方法进行实现。
需要说明的时,图1至3所示的终端系统实施例的各个模块可以单独设置也可以根据用户需求随意组合得到不同的实施例,本发明实施例不视为对设置的模块的组合方式的限制。
图4示意性的显示了根据本发明一实施方式的通过移动终端对互动装置进行远程控制的系统的框架结构。如图4所示,用于构建植物社区的系统包括移动终端、盛放植物的互动装置2和云端服务器10,移动终端中配置有终端系统1,终端系统可以是图1至图3的实施例中示出的终端系统,其与盛放植物的互动装置2通过无线模块进行连接,装置2中配置有控制模块11和互动响应模块13,控制模块11包括信号解析单元和音频获取单元,信号解析单元用于根据选用的数据传输协议对接收到的控制信号进行解析,获取功能标识字段和数据内容字段的信息,并根据功能标识字段的内容,对数据内容字段的信息进行解析,获取当前弹奏音符;音频获取单元用于根据当前弹奏音符和预存的音频信息获取与当前弹奏音符匹配的音频信号,并将获取的音频信号输出至相应的互动响应模块。控制模块11接收到控制信号后,根据传输协议对控制信号进行解析,并对解析出的功能标识字段进行判断,根据判断结果获取数据内容字段的信息,根据数据内容字段的信息控制互动响应模块进行相应的响应。例如,当判断功能标识字段对应的互动操作类型为虚拟弹奏时,从数据内容字段获取音符,并根据预存的音符与音频信号的对应关系,获取与音符对应的音频信号,通过互动响应模块13进行播放(此时互动响应模块可以是音频播放器),从而实现通过终端系统进行虚拟弹奏,从而控制盛放植物的装置进行音乐播放。
此外,在该优选实施例中,移动终端1还与云端服务器10通过网络进行连接,并能够双向通信,而终端系统还包括共享模块14,共享模块14设置为接收用户请求,以将用户选择的自由弹奏生成的且已存储的第一音符信息上传到云端服务器10,这样其他用户就可以通过云端服务器10下载每个用户分享的自由弹奏曲目。在该实现例中,终端系统的演奏模块6还设置为包括游戏计分单元,用于在游戏结束时获取用户信息和根据弹奏界面接收到的琴键信号生成计分结果,将用户信息和计分结果传输至云端服务器。云端服务器包括有数据判别模块,用于根据用户信息和计分结果生成排行榜信息反馈至终端系统。具体使用时,用户可以在演奏模块6中的信号封装单元结束后进入游戏结算页面,游戏结算页面上设有数据上传、重新开始和退出按键,用户选择数据上传,终端系统1中的游戏计分单元将分数信息、用户信息无线传输至云端服务器10,通过云端服务器10内部的数据库累计的数据判别用户的实时排名,保存至数据库并反馈至用户使用的终端系统1的游戏结算页面,用户可以根据排名查看自己的游戏完成情况,还可以查看排行榜上植物社区的其他用户的游戏情况。在该实施例中,乐曲获取模块12可以配置为通过云端服务器10获取第二音符信息存储在存储模块7。
图5示意性的显示了根据本发明一实施方式的终端系统与植物互动装置的演奏模式互动操作流程图。如图5所示,终端系统与植物互动装置的演奏模式互动操作流程包括如下步骤:
S501:用户在手机上点击终端系统1,播放欢迎页面后进入首页,设有:设置选项、连接选项、乐曲选择选项和自由演奏选项;用户先选择连接选项,将终端系统1与盛放植物的装置2配对连接。用户如果不知道如何操作,首页左上端还设有咨询选项;
S502:用户选择乐曲选择选项进入乐曲选择页面,乐曲选择页面还设有三个菜单栏,从左至右依次是推荐歌单(即包括终端系统本地预存的音符信息)、本地歌单(即包括通过自由弹奏生成的音符信息)和网络歌单(即包括从服务器下载的音符信息)。用户可以根据喜好选择不同的歌曲,用户选择后终端系统1自动下载,进入弹奏乐曲页面;
S503:进入弹奏乐曲页面后,自动播放用户选中的歌曲,页面上方不同位置向下滚动滑块(即音符标识),用户选择滑块下方对应位置的琴键,计分规则包括:当用户选择琴键的时间与乐曲在系统内的时间相同时(通过音符、音符间隔以及音符与琴键编号进行匹配判断),上方对应滑块正中心经过判别线,判定为perfect;当用户选择琴键的时间有1s~2s偏差时,滑块偏离正中心1/2左右处时,判定为great;当用户选择琴键的时间有2s~3s的偏差时,滑块偏离中心3/4左右处时,判定为bad;当用户选择琴键的时间有3s以上的偏差时,滑块无一落在判别线上,判定为miss;用户有连续判定表现加倍计分;
S504:用户弹奏完成后,系统自动计算分数,将具体得分和表现数据等显示在游戏结算页面。
图6示意性的显示了本发明一实施方式的终端系统与植物互动装置的自由弹奏模式互动操作流程图。如图6所示,终端系统与植物互动装置的自由弹奏模式互动操作流程包括如下步骤:
S601:用户在手机上点击终端系统1,播放欢迎页面后进入首页,设有:设置选项、连接选项、乐曲选择选项和自由演奏选项;用户先选择连接选项,将终端系统1与盛放植物的装置2配对连接。用户如果不知道如何操作,首页左上端还设有咨询选项;
S602:用户选择首页的自由演奏选项进入自由弹奏页面,自由弹奏页面下方设有虚拟琴键,琴键左部设有两个用于调节音调的上下方向键,一共提供给用户36阶音符进行弹奏创作,自由弹奏页面还设有设置选项和节拍器选项,设置选项包括曲速设置和节拍器设置。用户在通过虚拟琴键进行自由弹奏后,终端系统获取琴键编号和音调生成音符,并获取按下虚拟琴键的时间,生成音符对应的音符间隔(即在一首曲目里每个音符的发生时间,该时间为相对时间,以开始弹奏为0点开始计时),并根据每个音符生成的时间顺序生成音符顺序。
S603:用户弹奏结束后,获取的自由弹奏的歌曲信息即第一音符信息自动保存在乐曲选择页面的本地歌曲菜单栏下,用户可以选择上传至云端服务器,供植物社区其他用户热评或下载欣赏等。
S604:用户还可以选择将第一音符信息下载至盛放植物的装置,使用盛放植物的装置的蓝牙音箱模式欣赏自己创造的乐曲。
图7为本发明一种实施方式的利用前述的终端系统实现与植物的远程互动的方法,其中,终端系统可以配置在移动终端上,通过对前述终端系统的相应操作,实现对盛放植物的装置的远程控制。如图7所示,该方法包括:
步骤S701:建立与盛放植物的互动装置之间的无线连接。终端系统实现为自动获取互动装置的广播地址,例如通过蓝牙进行广播的装置MAC地址,根据用户对搜索到的广播地址的选择,建立与选定互动装置的无线连接,例如蓝牙连接。该实现过程可以参照现有技术,例如参照蓝牙连接的实现方式。
步骤S702:选取弹奏乐曲,进入虚拟弹奏界面。终端系统通过提供的用户页面接收用户对要弹奏的乐曲的选择,之后根据用户的选择请求获取待弹奏的乐曲的弹奏曲目信息即音符信息,包括音符顺序、音符间隔、音符以及音符对应的琴键编号。之后,根据音符信息生成弹奏界面输出,其中,输出的弹奏界面中包括位于下部的虚拟琴键、判定线和音符标识,各个音符标识从与之对应的琴键的上方落下。其中,音符与琴键编号的对应关系可以通过预存的信息获取到,音符按照音符顺序落下,音符落下的速度可以根据音符间隔和整个弹奏曲目的总时长计算出,也可以预存在数据存储模块中。
步骤S703:接收用户的弹奏输入,根据弹奏输入生成控制信号输出至盛放植物的装置。通过弹奏界面接收弹奏信号的输入,获取输入的琴键编号和输入琴键编号的时间,根据输入的琴键编号和时间从已存储的弹奏曲目信息(即音符信息)中获取当前弹奏的音符,根据当前弹奏的音符和选用的数据传输协议(例如蓝牙协议)进行数据内容的封装,生成控制信号输出至已连接互动装置的控制模块11。其中,控制信号包括功能标识字段、数据内容字段和校验字段,功能标识字段用于标识当前的互动操作的类型,数据内容字段用于标识互动操作的控制信息,校验字段用于校验控制信号数据包的格式是否正确。
步骤S704:盛放植物的装置接收控制信号进行解析,根据解析结果进行互动响应。已连接互动装置的控制模块11对接收到的控制信号进行解析,并根据解析结果进行响应,包括:控制模块11根据选用的数据传输协议对接收到的控制信号进行解析,获取功能标识字段和数据内容字段的信息;控制模块11根据功能标识字段的内容,对数据内容字段的信息进行解析,获取互动操作信息;控制模块11根据互动操作信息生成相应的处理信号输出至相应的互动响应模块13。例如,当根据解析出的功能标识字段的内容判断出互动操作的类型为虚拟弹奏时,控制模块11解析数据内容字段的信息,获取音符,并根据获取的音符,从预存的信息中获取当前音符对应的音频信号(例如1号音符对应一个特定的音频信号,而音符与音频信号的对应关系已经预先存储在了与控制模块连接的存储模块中),并将获取的音频信号输出至音频播放模块例如扬声器或蓝牙播放器进行播放。
在其他优选实施例中,控制信号也可以是用于对装置的灯光信息(例如灯光颜色等)、音乐播放信息(例如播放的曲目、播放的音量等)等进行设置的调节信号,其封装的数据格式和进行解析的方式相同,不同仅在于功能标识字段和数据内容字段的具体信息,该信息可以根据需求灵活定义,只要能够使得控制模块识别出互动类型,并根据互动类型获取响应的数据信息进行响应即可。
以上所述的仅是本发明的一些实施方式。对于本领域的普通技术人员来说,在不脱离本发明创造构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。
Claims (10)
1.基于移动终端实现与植物的远程互动的系统,其特征在于,包括移动终端和用于盛放植物的互动装置,所述移动终端与所述互动装置能够双向无线通信,其中,
所述移动终端中配置有用于实现与互动装置中盛放的植物进行交互的终端系统,所述互动装置中配置有控制模块和互动响应模块,
所述终端系统用于根据外部请求获取弹奏曲目信息生成弹奏界面输出和根据弹奏界面接收到的弹奏信号生成控制信号输出至所述控制模块;
所述控制模块用于根据控制信号控制所述互动响应模块进行动作。
2.根据权利要求1所述的系统,其特征在于,所述弹奏曲目信息包括音符顺序、音符和音符间隔以及音符对应的琴键编号,所述弹奏界面包括有琴键标识和音符标识。
3.根据权利要求2所述的系统,其特征在于,所述终端系统包括演奏模块,所述演奏模块包括信号获取单元和信号封装单元,
所述信号获取单元用于通过所述琴键标识获取琴键编号和输入琴键信号的时间,并根据输入的琴键编号、时间与弹奏曲目的音符间隔以及音符对应的琴键编号进行匹配,获取当前弹奏的音符;
所述信号封装单元用于根据当前弹奏的音符和选用的数据传输协议进行数据内容的封装,生成控制信号。
4.根据权利要求3所述的系统,其中,所述控制模块包括信号解析单元和音频获取单元,
所述信号解析单元用于根据选用的数据传输协议对接收到的控制信号进行解析,获取功能标识字段和数据内容字段的信息,并根据所述功能标识字段的内容,对所述数据内容字段的信息进行解析,获取当前弹奏音符;
所述音频获取单元用于根据所述当前弹奏音符和预存的音频信息获取与当前弹奏音符匹配的音频信号,并将获取的音频信号输出至相应的互动响应模块。
5.根据权利要求1至4任一项所述的系统,其特征在于,还包括配置模块,用于获取设置的互动响应配置信息生成调节信号输出至所述控制模块;
所述控制模块用于根据调节信号控制所述互动响应模块进行动作。
6.通过权利要求1至5任一项所述的系统实现与植物的远程互动的方法,其特征在于,包括:
自动获取互动装置的广播地址,根据对广播地址的选择,建立与选定互动装置的无线连接;
接收乐曲的选择,根据选择获取弹奏曲目信息输出至弹奏界面;
通过弹奏界面接收弹奏信号的输入,根据输入的弹奏信号生成控制信号输出至已连接互动装置的控制模块;
已连接互动装置的控制模块对接收到的控制信号进行解析,并根据解析结果进行响应。
7.根据权利要求6所述的方法,其中,所述控制信号包括功能标识字段、数据内容字段和校验字段,所述功能标识字段用于标识当前的互动操作的类型,所述数据内容字段用于标识互动操作的控制信息,所述校验字段用于校验控制信号数据包的格式是否正确。
8.根据权利要求7所述的方法,其特征在于,所述根据输入的弹奏信号生成控制信号输出至已连接互动装置的控制模块包括:
获取输入的琴键编号和输入琴键编号的时间;
根据输入的琴键编号和时间从已存储的弹奏曲目信息中获取当前弹奏的音符;
根据当前弹奏的音符和选用的数据传输协议进行数据内容的封装,生成控制信号。
9.根据权利要求8所述的方法,其中,所述控制模块对接收到的控制信号进行解析,并根据解析结果进行响应包括:
所述控制模块根据选用的数据传输协议对接收到的控制信号进行解析,获取功能标识字段和数据内容字段的信息;
所述控制模块根据所述功能标识字段的内容,对所述数据内容字段的信息进行解析,获取互动操作信息;
所述控制模块根据所述互动操作信息生成相应的处理信号输出至相应的互动响应模块。
10.根据权利要求9所述的方法,其特征在于,当所述互动操作的类型为虚拟弹奏时,所述控制模块根据所述功能标识字段的内容,对所述数据内容字段的信息进行解析,获取互动操作信息包括:
根据功能标识字段的内容判断互动操作的类型,当为虚拟弹奏时,解析数据内容字段的信息,获取音符;
所述控制模块根据所述互动操作信息生成相应的处理信号输出至相应的互动响应模块包括:
根据获取的音符,从预存的信息中获取当前音符对应的音频信号,并将获取的音频信号输出至音频播放模块进行播放。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711478443.1A CN108182927A (zh) | 2017-12-29 | 2017-12-29 | 基于移动终端实现与植物的远程互动的系统及其实现方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711478443.1A CN108182927A (zh) | 2017-12-29 | 2017-12-29 | 基于移动终端实现与植物的远程互动的系统及其实现方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108182927A true CN108182927A (zh) | 2018-06-19 |
Family
ID=62548977
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711478443.1A Pending CN108182927A (zh) | 2017-12-29 | 2017-12-29 | 基于移动终端实现与植物的远程互动的系统及其实现方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108182927A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110585705A (zh) * | 2019-09-23 | 2019-12-20 | 腾讯科技(深圳)有限公司 | 一种网络游戏控制方法、装置和存储介质 |
CN111198613A (zh) * | 2020-01-20 | 2020-05-26 | 江南大学 | 一种利用生物电流的音乐控制装置及控制方法 |
CN113442943A (zh) * | 2021-03-23 | 2021-09-28 | 中科创达软件股份有限公司 | 实现车辆虚拟驾驶的方法、装置、系统、车辆及存储介质 |
Citations (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1482594A (zh) * | 2002-10-24 | 2004-03-17 | 杜和平 | 弹奏琴 |
CN1841483A (zh) * | 2005-03-30 | 2006-10-04 | 奇景光电股份有限公司 | 液晶显示器的控制信号传输方法 |
GB0618298D0 (en) * | 2006-09-16 | 2006-10-25 | Crosbie Danny A | Plant growth enhancer |
US20080271372A1 (en) * | 2007-01-05 | 2008-11-06 | Chien-Jen Wang | Plant potting having a sounding effect |
US20120272418P1 (en) * | 2011-04-25 | 2012-10-25 | Floricultura | Phalaenopsis orchid plant named 'Prima Piano' |
US20140053712A1 (en) * | 2011-10-10 | 2014-02-27 | Mixermuse, Llp | Channel-mapped midi learn mode |
CN204759418U (zh) * | 2015-04-27 | 2015-11-11 | 广州市趣智智能科技有限公司 | 一种基于分布式电容感应技术的生态植物互动装置 |
CN205442229U (zh) * | 2016-03-18 | 2016-08-10 | 东莞理工学院 | 一种全自动多功能可调式绕线装置 |
CN106230935A (zh) * | 2016-07-29 | 2016-12-14 | 深圳前海弘稼科技有限公司 | 种植箱及其控制方法、装置、系统以及控制终端 |
CN205827904U (zh) * | 2016-03-06 | 2016-12-21 | 广州市贝斯曼乐器有限公司 | 一种智能ZigBee无线电子钢琴 |
CN106601219A (zh) * | 2016-03-25 | 2017-04-26 | 浙江大学 | 一种用植物奏乐的乐器及其控制方法 |
CN106712907A (zh) * | 2017-02-16 | 2017-05-24 | 北京中航通用科技有限公司 | 数据传输方法及设备 |
CN106782459A (zh) * | 2016-12-22 | 2017-05-31 | 湖南乐和云服网络科技有限公司 | 基于移动终端应用程序的钢琴自动演奏控制系统及方法 |
CN107016983A (zh) * | 2016-01-28 | 2017-08-04 | 易弹信息科技(上海)有限公司 | 一种钢琴操控方法、系统以及一种电子设备 |
CN107146497A (zh) * | 2016-08-02 | 2017-09-08 | 浙江大学 | 一种钢琴考级评分系统 |
CN107329660A (zh) * | 2017-07-03 | 2017-11-07 | 武汉理工大学 | 一种钢琴类网络虚拟乐器 |
CN107358943A (zh) * | 2017-07-03 | 2017-11-17 | 武汉理工大学 | 一种网络虚拟木管乐器 |
-
2017
- 2017-12-29 CN CN201711478443.1A patent/CN108182927A/zh active Pending
Patent Citations (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1482594A (zh) * | 2002-10-24 | 2004-03-17 | 杜和平 | 弹奏琴 |
CN1841483A (zh) * | 2005-03-30 | 2006-10-04 | 奇景光电股份有限公司 | 液晶显示器的控制信号传输方法 |
GB0618298D0 (en) * | 2006-09-16 | 2006-10-25 | Crosbie Danny A | Plant growth enhancer |
US20080271372A1 (en) * | 2007-01-05 | 2008-11-06 | Chien-Jen Wang | Plant potting having a sounding effect |
US20120272418P1 (en) * | 2011-04-25 | 2012-10-25 | Floricultura | Phalaenopsis orchid plant named 'Prima Piano' |
US20140053712A1 (en) * | 2011-10-10 | 2014-02-27 | Mixermuse, Llp | Channel-mapped midi learn mode |
CN204759418U (zh) * | 2015-04-27 | 2015-11-11 | 广州市趣智智能科技有限公司 | 一种基于分布式电容感应技术的生态植物互动装置 |
CN107016983A (zh) * | 2016-01-28 | 2017-08-04 | 易弹信息科技(上海)有限公司 | 一种钢琴操控方法、系统以及一种电子设备 |
CN205827904U (zh) * | 2016-03-06 | 2016-12-21 | 广州市贝斯曼乐器有限公司 | 一种智能ZigBee无线电子钢琴 |
CN205442229U (zh) * | 2016-03-18 | 2016-08-10 | 东莞理工学院 | 一种全自动多功能可调式绕线装置 |
CN106601219A (zh) * | 2016-03-25 | 2017-04-26 | 浙江大学 | 一种用植物奏乐的乐器及其控制方法 |
CN106230935A (zh) * | 2016-07-29 | 2016-12-14 | 深圳前海弘稼科技有限公司 | 种植箱及其控制方法、装置、系统以及控制终端 |
CN107146497A (zh) * | 2016-08-02 | 2017-09-08 | 浙江大学 | 一种钢琴考级评分系统 |
CN106782459A (zh) * | 2016-12-22 | 2017-05-31 | 湖南乐和云服网络科技有限公司 | 基于移动终端应用程序的钢琴自动演奏控制系统及方法 |
CN106712907A (zh) * | 2017-02-16 | 2017-05-24 | 北京中航通用科技有限公司 | 数据传输方法及设备 |
CN107329660A (zh) * | 2017-07-03 | 2017-11-07 | 武汉理工大学 | 一种钢琴类网络虚拟乐器 |
CN107358943A (zh) * | 2017-07-03 | 2017-11-17 | 武汉理工大学 | 一种网络虚拟木管乐器 |
Non-Patent Citations (2)
Title |
---|
TEIN-YAW CHUNG,ET AL.: "Study of plant emotion using music and motion detection in Internet of Things", 《2017 NINTH INTERNATIONAL CONFERENCE ON UBIQUITOUS AND FUTURE NETWORKS (ICUFN)》 * |
姜洪发等: "智能植物补光和音频刺激生长系统的设计", 《工业控制计算机》 * |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110585705A (zh) * | 2019-09-23 | 2019-12-20 | 腾讯科技(深圳)有限公司 | 一种网络游戏控制方法、装置和存储介质 |
CN111198613A (zh) * | 2020-01-20 | 2020-05-26 | 江南大学 | 一种利用生物电流的音乐控制装置及控制方法 |
CN111198613B (zh) * | 2020-01-20 | 2021-09-07 | 江南大学 | 一种利用生物电流的音乐控制装置及控制方法 |
CN113442943A (zh) * | 2021-03-23 | 2021-09-28 | 中科创达软件股份有限公司 | 实现车辆虚拟驾驶的方法、装置、系统、车辆及存储介质 |
CN113442943B (zh) * | 2021-03-23 | 2024-03-19 | 中科创达软件股份有限公司 | 实现车辆虚拟驾驶的方法、装置、系统、车辆及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102599891B (zh) | 改进的移动通信终端和方法 | |
CN108182927A (zh) | 基于移动终端实现与植物的远程互动的系统及其实现方法 | |
CN103780670B (zh) | 在远程服务器上存储和访问音乐表演的系统及方法 | |
CN107396137A (zh) | 在线互动的方法、装置及系统 | |
TWI574256B (zh) | 互動節拍特效系統及互動節拍特效處理方法 | |
CN103258529B (zh) | 一种电子乐器、音乐演奏方法 | |
CN107079193A (zh) | 视频流同步 | |
CN103947220B (zh) | 显示装置和使用显示装置提供内容的方法 | |
CN107079252A (zh) | 用于在电子装置之间建立无线连接的方法 | |
CN110599985B (zh) | 一种音频内容生成方法、服务端设备和客户端设备 | |
CN105137813B (zh) | 呈现可感知内容的电子装置 | |
CN206698386U (zh) | 一种智能终端无线麦克风系统 | |
CN104811829A (zh) | 卡拉ok互动多功能特效系统 | |
CN106571145A (zh) | 一种语音模仿方法和装置 | |
CN206042326U (zh) | 带app功能的智能wifi音响 | |
CN103028257A (zh) | 远程互动不倒翁 | |
CN108173945A (zh) | 用于实现与植物的互动的终端系统、用于构建植物社区的系统及终端系统与植物的交互方法 | |
TW201627987A (zh) | 演唱視覺特效系統及演唱視覺特效處理方法 | |
CN105282917B (zh) | 一种智能灯具的通讯控制方法 | |
CN103973898A (zh) | 一种手机ktv系统 | |
CN106782459A (zh) | 基于移动终端应用程序的钢琴自动演奏控制系统及方法 | |
JP7095597B2 (ja) | 再生装置、再生方法、プログラム、及び再生システム | |
CN203812192U (zh) | 具乐器演奏功能的空中飞鼠 | |
JP2009169795A (ja) | 情報処理装置および方法、並びにプログラム | |
CN203165248U (zh) | 带有点读功能的故事机 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
AD01 | Patent right deemed abandoned | ||
AD01 | Patent right deemed abandoned |
Effective date of abandoning: 20220715 |