CN110166631A - 一种马达振动方法、装置、系统及可读介质 - Google Patents
一种马达振动方法、装置、系统及可读介质 Download PDFInfo
- Publication number
- CN110166631A CN110166631A CN201910591570.5A CN201910591570A CN110166631A CN 110166631 A CN110166631 A CN 110166631A CN 201910591570 A CN201910591570 A CN 201910591570A CN 110166631 A CN110166631 A CN 110166631A
- Authority
- CN
- China
- Prior art keywords
- vibration
- vibration signal
- signal
- frequency
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 57
- 230000007613 environmental effect Effects 0.000 claims abstract description 28
- 230000001133 acceleration Effects 0.000 claims abstract description 17
- 238000012937 correction Methods 0.000 claims description 21
- 238000004590 computer program Methods 0.000 claims description 12
- 238000013507 mapping Methods 0.000 claims description 11
- 238000001228 spectrum Methods 0.000 claims description 9
- 238000013145 classification model Methods 0.000 claims description 6
- 238000012935 Averaging Methods 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 13
- 230000007547 defect Effects 0.000 abstract description 3
- 230000000875 corresponding effect Effects 0.000 description 25
- 230000008569 process Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 4
- 230000014509 gene expression Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000001276 controlling effect Effects 0.000 description 2
- 230000002596 correlated effect Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000004913 activation Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 230000002618 waking effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
- H02P—CONTROL OR REGULATION OF ELECTRIC MOTORS, ELECTRIC GENERATORS OR DYNAMO-ELECTRIC CONVERTERS; CONTROLLING TRANSFORMERS, REACTORS OR CHOKE COILS
- H02P25/00—Arrangements or methods for the control of AC motors characterised by the kind of AC motor or by structural details
- H02P25/02—Arrangements or methods for the control of AC motors characterised by the kind of AC motor or by structural details characterised by the kind of motor
- H02P25/032—Reciprocating, oscillating or vibrating motors
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
- G10L25/18—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being spectral information of each sub-band
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
- H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72484—User interfaces specially adapted for cordless or mobile telephones wherein functions are triggered by incoming communication events
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
- G10L25/21—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being power information
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01H—ELECTRIC SWITCHES; RELAYS; SELECTORS; EMERGENCY PROTECTIVE DEVICES
- H01H3/00—Mechanisms for operating contacts
- H01H2003/008—Mechanisms for operating contacts with a haptic or a tactile feedback controlled by electrical means, e.g. a motor or magnetofriction
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Multimedia (AREA)
- Power Engineering (AREA)
- Computer Networks & Wireless Communication (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Environmental & Geological Engineering (AREA)
- Telephone Function (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明实施例提供了一种马达振动方法、装置、系统及可读介质，其中，所述方法包括接收振动指令，通过预设传感器获取目标环境数据，所述目标环境数据包括环境噪声数据、加速度数据和/或压力数据中的一个或多个，根据所述目标环境数据确定第一振动信号，根据第一振动信号与预设的第二振动信号生成目标振动信号，所述第一振动信号的第一频率大于第二振动信号的第二频率，控制马达装置以目标振动信号进行振动。因此本发明在现有马达的低频振动中增加中高频振动信号，通过该中高频信号振动产生的声音，实现震感与声音同时提醒的作用，避免了在一部分应用场景中无法接触到设备感受到振动从而马达振动提醒效果不佳的缺陷，提高了马达振动提醒的效率。
Description
【技术领域】
本发明涉及本发明涉及电子设备技术领域，具体指一种马达振动方法、装置、系统及计算机可读介质。
【背景技术】
随着移动通讯与电子技术的不断发展，智能手机等便携式电子设备得到了广泛普及和应用。在使用各类便携式电子设备比如手机时，需要进行对应的消息的发送和提醒。但是，经常会遇到由于用户身处某些特定的场景或者环境中，如在图书馆或在会议中等，需要以无铃声的方式来针对手机上的新消息对用户进行通知和提醒，而现有技术中通常采取的是将设备调至振动模式，通过设备中预设马达装置振动产生的震感来提醒用户有新消息的方式。
这样的做法的缺陷在于，在智能手机等设备被置于桌面或者用户口袋中时，由于智能手机与用户的身体没有直接接触，现有的振动方式的提醒效果会因为用户无法感知到设备的振动而大幅降低，由此会导致用户错过上述新消息，从而造成一系列用户相关活动的延误和损失。
【发明内容】
基于此，有必要针对上述问题，本发明提出了一种马达振动方法、装置、计算机设备及可读介质。
一种马达振动方法，所述方法包括：
接收振动指令，通过预设传感器获取目标环境数据，所述目标环境数据包括环境噪声数据、加速度数据和/或压力数据中的一个或多个；
根据所述目标环境数据确定第一振动信号；
根据所述第一振动信号与预设的第二振动信号生成目标振动信号，所述第一振动信号的第一频率大于所述第二振动信号的第二频率；
控制马达装置以所述目标振动信号进行振动。
一种马达振动装置，所述装置包括：
获取单元，用于接收振动指令，通过预设传感器获取目标环境数据，所述目标环境数据包括环境噪声数据、加速度数据和/或压力数据中的一个或多个；
确定单元，用于根据所述目标环境数据确定第一振动信号；
生成单元，用于根据所述第一振动信号与预设的第二振动信号生成目标振动信号，所述第一振动信号的第一频率大于所述第二振动信号的第二频率；
振动单元，用于控制马达装置以所述目标振动信号进行振动。
一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行以下步骤：
接收振动指令，通过预设传感器获取目标环境数据，所述目标环境数据包括环境噪声数据、加速度数据和/或压力数据中的一个或多个；
根据所述目标环境数据确定第一振动信号；
根据所述第一振动信号与预设的第二振动信号生成目标振动信号，所述第一振动信号的第一频率大于所述第二振动信号的第二频率；
控制马达装置以所述目标振动信号进行振动。
一种计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行以下步骤：
接收振动指令，通过预设传感器获取目标环境数据，所述目标环境数据包括环境噪声数据、加速度数据和/或压力数据中的一个或多个；根据所述目标环境数据确定第一振动信号；
根据所述第一振动信号与预设的第二振动信号生成目标振动信号，所述第一振动信号的第一频率大于所述第二振动信号的第二频率；
控制马达装置以所述目标振动信号进行振动。
本发明的有益效果在于：本发明实现了在智能手机等便携式终端设备接收到振动指令需要进行提醒的情况下，通过终端上设置的传感器获取的环境数据来确定一个与当前设备状态和使用场景对应的合适的中高频的振动信号，并与预设的马达振动常用低频信号叠加来驱动马达装置进行振动，从而在马达上同时产生震感和声音。相较于相关技术方案中的马达振动中的只依靠人耳不敏感的单一低频振动信号驱动马达、单纯依靠产生的震感进行提醒的方法不同，本发明融合了传统马达振动存在震感的效果和通过以中高频信号振动产生声音的提示效果，解决了在一些应用场景中存在设备使用者无法接收到马达产生的震感的问题，提高了通过马达振动对设备使用者进行提醒的效率以及信息通知送达的成功率。
【附图说明】
图1为一个实施例中马达振动方法的应用环境图；
图2为一个实施例中马达振动方法的流程图；
图3为一个实施例中马达振动方法中根据所述环境噪声数据确定第一振动信号的第一频率的流程图；
图4为另一个实施例中马达振动方法中根据所述环境噪声数据确定第一振动信号的第一幅值的流程图；
图5为另一个实施例中马达振动方法中对第一振动信号进行修正的流程图；
图6为一个实施例中马达振动方法中生成目标振动信号的流程图；
图7为一个实施例中马达振动方法在“通过马达振动提醒用户其手机收到了新消息”的应用场景下的具体流程图；
图8为一个实施例中马达振动装置的结构框图；
图9为一个实施例中计算机设备的结构框图。
【具体实施方式】
下面结合图1至图9对本发明作进一步说明。
为了解决现有技术方案中的马达振动只能产生人耳不敏感的单一低频振动信号驱动马达、单纯依靠产生的震感进行提醒从而在一些应用场景中存在设备使用者无法接收到马达产生的震感的问题，本发明实施例提出了一种马达振动方法，在原有的马达振动信号中加入一个根据用户所处的环境数据确定出的能产生人耳敏感频率的声音的中高频信号，以此同时提供声音和震感来进行提醒。该方法的执行可以是基于一终端设备，该设备包括含有马达装置的手机、平板等便携式智能电子设备。在需要振动时，通过处理器生成一个振动信号，然后控制马达的振动以实现提醒和通知的效果。
上述马达振动方法的实现可以是基于图1所示出的终端设备，该终端设备包含处理器和马达。同时为了进一步的提高马达振动提醒的有效性和准确性，本实施例中还需要考虑终端设备所在的环境，因此，在本实施例中，终端设备还包括用于采集环境数据的传感器设备。
考虑到在实际应用中，马达振动所产生的震感和声音一般是用于向使用包含该马达的预设设备的用户提示特定类型的新消息或突发事件，并且上述预设设备一般为具有处理及内存能力的智能便携式电子设备如智能手机、平板电脑等，这些智能电子设备本身就可以在特定类型的事件产生或预设活动被触发时向设备内置的马达装置发出对应的振动指令。因此本发明将实施在智能手机等便携式终端上，其实施过程如图2所示。
如图2所示，图2为一个实施例中马达振动方法的流程图。
本发明提出的马达振动方法的实施流程至少可以包括图2示出的步骤S1022-S1028，下面结合图2对上述各步骤进行具体说明。
在步骤S1022中，接收振动指令，通过预设传感器获取目标环境数据，所述目标环境数据包括环境噪声数据、加速度数据和/或压力数据中的一个或多个。
具体的，可以通过终端包含的麦克风装置采集上述环境噪声数据，包含的加速度传感器采集加速度数据，包含的压力传感器采集压力数据。
其中，加速度数据和压力数据可以对应反映出当前设备被使用的状态比如手机在被用户从握在手中转移到平放在桌面上，或者改为放置于口袋中时，传感器所传回的加速度和压力都会随之动态变化。
在步骤S1024中，根据所述目标环境数据确定第一振动信号。
具体的，根据目标环境数据确定第一振动信号包括根据所述目标环境数据确定第一振动信号的第一频率，其具体过程至少包括如图3示出的步骤S1032-S1036，下面具体说明。
图3为一个实施例中马达振动方法中根据所述环境噪声数据确定第一振动信号的第一频率的流程图。
在步骤S1032中，提取所述环境噪声数据中的环境噪声频谱特征。
具体的，在通过麦克风采集到环境噪声的声压值后(即反映人耳感知到的声音的大小的参数)，可以通过预设的变换(如傅里叶变换)处理提取出对应的环境噪声的频谱特征。
在步骤S1034中，根据所述环境噪声频谱特征确定与所述环境噪声数据对应的环境噪声中心频率。
根据环境噪声频谱特征所反映出的环境噪声频率的分布情况可以确定出环境噪声的频率范围并取其中位数，从而确定出环境噪声的中心频率。
这里对环境噪声的中心频率进行确定的原因和好处在于：在确定了环境噪声的中心频率，即可确定用户所处的背景噪声情况作为马达振动发声提醒的基准参考。即在设计用于振动发声的中高频的第一振动信号的振动频率，将其区别于环境噪声的中心频率，就可以使得在存在各种噪声的环境中，马达振动发出的声音由于其频率明显不同于长时间作为背景存在的环境噪声频率从而能够更容易被用户所辨识和注意到，以此达到提醒的效果。
在步骤S1036中，根据预设的环境噪声中心频率与振动频率之间的映射关系，确定与所述环境噪声中心频率对应的振动频率作为所述第一振动信号的第一频率。
具体的，可以根据预设的噪声频谱特征与振动频率之间频率区间映射关系确定出上述第一振动信号的第一频率。例如，在手机处于平放在桌面状态时，采用空间(即频率区间)映射的方式，根据获取到的环境噪声频谱特征将环境噪声的频率分为(0Hz，2500Hz]，(2500Hz,+∞)这两个区间，而在确定出的环境噪声中心频率处于(0Hz，2500Hz]时，则可以将用于振动发声的中高频电信号频率取高于2500Hz的3000Hz作为前述第一振动信号的第一频率，同样的，当环境噪声中心频率处于(2500Hz,+∞)时，可以将前述第一振动信号的第一频率确定为2000Hz。
另外，在可选的实施例中，还可以根据预设的函数关系式，映射出与环境噪声中心频率所对应的振动频率，即本发明不对上述噪声频谱特征与振动频率之间的映射方式进行限制。
在确定了第一频率后，还可以进一步确定第一目标信号的第一振幅，其过程至少可以包括如图4示出的步骤S1042-S1046,下面具体说明。
图4为另一个实施例中马达振动方法中根据所述环境噪声数据确定第一振动信号的第一幅值的流程图。
在步骤S1042中，获取所述环境噪声数据中的环境噪声声压值。
在具体的实施例中，环境噪声声压值可以由前述终端包含的麦克风装置进行实时采集。环境噪声声压值可以直接反映出人耳感知到的声音的音量大小。
在步骤S1044中，确定与所述环境噪声声压值对应的环境噪声声压级。
具体的，在环境噪声声压值为Pe，而预设的参考声压值为Pref时，此时其对应的环境噪声声压级(以分贝为单位)SPL确定为：
SPL＝20lg(Pe/Pref)。
在步骤S1046中，根据预设的环境噪声声压级与信号幅值的映射关系确定与所述环境噪声声压级对应的信号幅值作为所述第一振动信号的第一幅值。
具体的，通过声压级大小来计算出用于振动发声的中高频电信号的幅值的方式包括但不限于区间映射、函数表达式等。在一个可选的实施例中，继续结合手机处于平放在桌面状态时进行说明，如果采用空间映射的方式：将环境噪声的声压级分为(0dB，30dB]、(30dB,50dB]、(50dB,80dB]、(80dB,+∞)这四个区间(在实际应用中，这四个区间可以分别对应安静环境、正常谈话环境、厨房电视等噪音环境、繁华街道及更嘈杂的环境这四种手机被使用的环境场景)，对于上述各声压级区间，映射到的信号幅值可以分别设置为2、4、6、8。
比如，在确定出环境噪声的声压级处于(30dB,50dB]时，即可判定当前用户正在一个相对安静的可能是少数几个人以正常音量谈话的环境中使用手机，因此根据预设的空间映射关系，此时的振动信号的信号幅值就为4。
同样的，在一个具体的实施例中，需要说明的是，除了映射关系还可以根据预设函数关系式等两个关联参数的映射方式来确定与声压级对应的第一振动信号所需的信号幅值。
更进一步的，考虑到实际应用中，在设备如智能手机处于不同的使用状态(如握持状态、平放状态、放置于口袋中等)和用户身处不同的场景(如安静环境中、正常的谈话场景中、繁华嘈杂的街道环境中等)中时，其通过设备内置的马达振动实现对用户提醒所需要的声音以及震感也不同，如在手机处于安静环境中被用户握持在手中时所需要的震感以及声音强度可以小于在繁华嘈杂的街道环境中被用户置于口袋时达到同等提醒效果所需要的震感以及声音强度。因此对振动信号的频率和幅值等与振动信号产生的震感以及声音强度相关的参数数值需要根据具体应用场景和方式的不同进行一定程度的修正(如一定比例地放大或缩小)以使得能产生最适合当前设备状态和环境场景的振动信号。因此在本发明的一个可选的实施例中，还可以进一步根据目标环境数据确定出环境噪声对应的设备状态和场景种类对第一振动信号的第一频率和第一振幅进行进一步地修正，以使得马达振动的提醒效果更好。
具体的，上述对第一振动信号进行修正的过程可以包括如图5示出的步骤S1052-S1056。
图5为另一个实施例中马达振动方法中对第一振动信号进行修正的流程图。
在步骤S1052中，将所述目标环境数据输入预设的环境分类模型，获取所述环境分类模型输出的目标设备状态、目标场景种类。
在一个可选的实施例中，上述预设的环境分类模型可以先通过如下步骤进行训练，以提高模型输出分类的准确度：
确定一个样本集合，所述样本集合包含多个环境数据样本以及与该环境数据样本对应的样本参考结果，所述样本参考结果包括设备状态、场景种类；
以上述环境数据样本为输入，以上述样本参考结果为输出，对所述预设的环境分类模型的进行训练。
考虑到实际应用中，用户能否接收到马达振动产生的声音很大程度上会受环境噪声的影响，同样的，在设备处于不同的使用状态如被用户握持在手中或者被用户放置在口袋或包袋中时，由于空间距离的影响，马达振动的震感传递给用户所能起到的提醒作用也有很大差异。因此，本发明的一个实施例中利用机器学习模型来智能识别用户使用的场景类型(根据环境噪声数据确定环境是否存在较大噪声干扰)和设备状态(根据压力数据和加速度数据确定设备与用户的物理距离)，从而提高了马达振动提醒的准确率和消息提醒的送达率，同时上述环境分类模型训练完成后可以根据输入的传感数据自动输出对应的设备状态、场景种类，由此提高了马达振动提醒的效率。
在一个具体的实施例中，可选的，设备状态可以分别包括握持状态、平放状态、被置于口袋中等，而同样的，此处的场景种类可以分为安静环境、正常的谈话场景、厨房电视等机械噪声环境、繁华嘈杂的街道环境等。
需要说明的是，在本发明中由于场景种类主要是根据环境噪声的相关特征来划分的，因而在一个可选的实施例中，每种设备状态下可能对应的备选的场景种类可以是相同的，即在手机平放、被握持在手中或者置于口袋中时的场景种类根据环境噪声程度的不同都可以是安静环境或者嘈杂街道等。
在步骤S1054中，根据所述目标设备状态、目标场景种类确定第一修正值、第二修正值。
具体的，在一个可选的实施例中，第一修正值对应的可以是第一振动信号的第一频率，第二修正值对应的可以是第一振动信号的第一振幅。
基于环境噪声对于人耳对特定声音的听力的影响，在具体的实施例中，如用户在设备状态为平放状态，场景种类为安静环境时，考虑到这种环境中实际不需要很大的声音音量以及震感就可以引起用户的注意，所以其对应的第一修正值、第二修正值可以分别是0.8、0.8，即将标准确定出的第一振动信号的频率和幅值都相对地缩小，从而对应地减小在相对安静环境中，提醒用振动信号所产生的震感和声音。
相对的，在用户在设备状态为放置于口袋中状态，场景种类为嘈杂的街道时，其对应的第一修正值、第二修正值可以分别设定为1.6、1.3，即将标准确定出的第一振动信号的频率和幅值都相对地增大，从而对应地增大马达振动所发出的以增强在外界环境干扰较大情况下仍能够明显引起用户的注意以此确保用户能够接收到新消息的提醒与通知。
在步骤S1056中，根据所述第一修正值、第二修正值分别对所述第一振动信号的第一振动频率和第一振动幅值进行修正。
具体的，可以将前述第一频率、第二幅值分别乘以上述第一修正值、第二修正值以第一振动信号对进行修正。
结合上一步骤中的举例进行说明，在用户在设备状态为放置于口袋中状态，场景种类为嘈杂的街道时，其对应的第一修正值、第二修正值可以分别设定为1.6、1.4，则修正前的第一振动信号F1可以是：
F1＝3×sin(2π×2000×t)。
(其对应的第一振幅为3，第一频率为2000)，而修正后的第一振动信号则对应变为：
F2＝4.8×sin(2π×2800×t)。
(即其对应的修正后的第一振幅为4.8，对应的修正后的第一频率为2800)。
在步骤S1026中，根据所述第一振动信号与预设的第二振动信号生成目标振动信号，所述第一振动信号的第一频率大于所述第二振动信号的第二频率。
需要说明的是，此处的第一振动信号的第一频率大于所述第二振动信号的第二频率的内容及作用在于：不同于现有技术的马达振动方法只存在单一一般为低频的振动信号(即上述预设的第二振动信号)，本发明在普通的马达振动工作方式的基础之上，通过在马达的原始驱动电压(用以产生低频信号)中加入中高频的电压分量，以使得马达在原有的振动中增加中高频的振动，而这样做的好处在于：由于马达对中高频的振动响应较低，所以引入中高频分量并不会对振动触感有较为明显的影响(既不会影响之前的震感提醒功能)，但是对于该中高频信号(即根据前述方法确定出的第一振动信号)振动产生的声音，人耳较为敏感，故能够实现振动与声音同时提醒的作用，避免了单一依靠低频信号驱动马达产生震感在一部分应用场景中无法接触到设备感受到振动从而马达振动提醒效果不佳的缺陷。
具体包括如图6示出的步骤S1062-S1064。
图6为一个实施例中马达振动方法中生成目标振动信号的流程图。
在步骤S1062中，获取预设的第二频率与第二幅值下的振动信号作为所述第二振动信号，所述第二振动信号的第二频率小于所述第一振动信号的第一频率。
需要说明的是，上述第二振动信号的确定方式不仅限于根据预设的第二频率与第二幅值，还可以根据具体的应用场景下需求的不同，按照前述确定的第一振动信号的第一频率与第一幅值，根据预设的数值映射关系来确定。
在步骤S1064中，将所述第一振动信号与所述第二振动信号进行信号叠加，生成所述目标振动信号。
在一个具体的的实施例中，可选的，在通过前述步骤确定出的第一振动信号A可以为A＝4.8×sin(2π×2800t)(此表达式中的t为振动时间，下同)，而预设的第二振动信号B为B＝2×sin(2π×500×t)时，最终生成的目标振动信号C即可以为第一振动信号与第二振动信号叠加的和即为：
C＝4.8×sin(2π×2800×t)+2×sin(2π×500×t)。
在步骤S1028中，控制马达装置以所述目标振动信号进行振动。
下面进一步结合图7对本发明的一个实施例在“通过马达振动提醒用户其手机收到了新消息”应用场景中进行说明。在此应用场景中，用于接收振动指令和根据目标振动信号实现振动的马达装置内置于上述智能手机中，此应用场景将智能手机作为本方法的实施终端。
如图7所示，图7为一个实施例中马达振动方法在“通过马达振动提醒用户其手机收到了新消息”的应用场景下的具体流程图，在上述应用场景下的具体流程可以包括步骤S1072-S1078,详细说明如下：
在步骤S1072中，接收到手机发送的马达振动指令，获取目标环境数据。
具体的可以是手机的控制模块检测到该手机上预先安装的某实时聊天应用接收到一条新的未读消息需要对用户进行提醒，由此向马达装置发送马达振动指令。
同时通过手机内置的压力、环境噪声、加速度传感器获取到设备周围的压力数据、环境噪声数据、加速度数据作为目标环境数据。
在步骤S1074中，根据目标环境数据确定第一振动信号的第一频率和第一幅值。
具体的，此应用场景中确定第一频率的过程可以是：根据上一步骤中的环境噪声数据确定出此时的环境噪声的中心频率处于(0Hz，2500Hz]这一区间，为了使得第一振动信号能够从环境噪声背景中跳脱出来被用户注意到，需要将第一频率设置为远高于环境噪声中心频率的3000Hz。
同样的，确定第一幅值的过程可以是：首先确定出采集到的环境噪声的声压值对应的声压级，再预先将环境噪声的声压级分为(0dB，30dB]、(30dB,50dB]、(50dB,80dB]、(80dB,+∞)这四个区间(分别对应安静环境、正常谈话环境、厨房电视等噪音环境、繁华街道及更嘈杂的环境这些场景种类)，在此应用场景中，确定出的环境噪声的声压级处于(30dB,50dB]此区间，则其按照预设的空间映射关系映射到的幅值为4，故将第一幅值确定为4。
在步骤S1076中，根据目标环境数据确定此时手机对应的设备状态和场景种类，根据该设备状态和该场景种类对第一振动信号的第一频率和第一幅值进行修正。
将目标环境数据输入预先训练完成的环境分类模型，获取该模型输出的设备状态和场景种类，在此应用场景中可以分别是“置于口袋中”、“正常谈话环境”，因此其对应的针对第一振动信号的第一频率的第一修正值和针对第一幅值的第二修正值可以分别是1.2与1.3。
在步骤S1078中，将修正后的第一振动信号和预设的第二振动信号叠加生成目标振动信号，其中，第一振动信号的第一频率大于所述第二振动信号的第二频率。
根据步骤S1074与S1076确定出的第一频率与第一振幅得到的修正前的第一振动信号为S1＝4×sin(2π×3000×t)，而根据第一修正值(即1.2)和第二修正值(即1.3)分别对第一振动信号的第一频率和第一振幅进行加权修正，由此得到修正后的第一振动信号为S2＝4.8×sin(2π×3900×t)。
同时，预先调制好的第二振动信号可以表达为S3＝2×sin(2π×500xt)，因此根据第一振动信号和预设的第二振动信号叠加生成目标振动信号就为：S4＝S2+S3＝4.8×sin(2π×3900×t)+2×sin(2π×500×t)。
在步骤S10710中，控制马达装置按照上述目标振动信号进行振动。
具体的可以是按照上述目标振动信号以电流驱动的形式传输到预设的马达装置上，使其按照目标振动信号的各项参数进行振动，以发出声音和振动来起到提醒和通知的效果。
图8为一个实施例中马达振动装置的结构框图。
如图8所示，根据本发明的一个实施例的马达振动装置1080可以包括：获取单元1082、确定单元1084、生成单元1086和振动单元1088。
其中，获取单元1082用于接收振动指令，通过预设传感器获取目标环境数据，所述目标环境数据包括环境噪声数据、加速度数据和/或压力数据中的一个或多个；
确定单元1084用于根据所述目标环境数据确定第一振动信号；
生成单元1086用于根据所述第一振动信号与预设的第二振动信号生成目标振动信号，所述第一振动信号的第一频率大于所述第二振动信号的第二频率；
振动单元1088用于控制马达装置以所述目标振动信号进行振动。
图9为一个实施例中计算机设备的内部结构图。该计算机设备具体可以是终端，也可以是服务器。如图9所示，该计算机设备包括通过系统总线连接的处理器、存储器和通信接口、传感装置、控制模块。其中，存储器包括非易失性存储介质和内存储器。该计算机设备的非易失性存储介质存储有操作系统，还可存储有计算机程序，该计算机程序被处理器执行时，可使得处理器实现年龄识别方法。该内存储器中也可储存有计算机程序，该计算机程序被处理器执行时，可使得处理器执行年龄识别方法。本领域技术人员可以理解，图9中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在一个实施例中，提出了一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行以下步骤：
接收振动指令，通过预设传感器获取目标环境数据，所述目标环境数据包括环境噪声数据、加速度数据和/或压力数据中的一个或多个；
根据所述目标环境数据确定第一振动信号；
根据所述第一振动信号与预设的第二振动信号生成目标振动信号，所述第一振动信号的第一频率大于所述第二振动信号的第二频率；
控制马达装置以所述目标振动信号进行振动。
在一个实施例中，提出了一种计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行以下步骤：
接收振动指令，通过预设传感器获取目标环境数据，所述目标环境数据包括环境噪声数据、加速度数据和/或压力数据中的一个或多个；
根据所述目标环境数据确定第一振动信号；
根据所述第一振动信号与预设的第二振动信号生成目标振动信号，所述第一振动信号的第一频率大于所述第二振动信号的第二频率；
控制马达装置以所述目标振动信号进行振动。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一非易失性计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。以上所述的仅是本发明的实施方式，在此应当指出，对于本领域的普通技术人员来说，在不脱离本发明创造构思的前提下，还可以做出改进，但这些均属于本发明的保护范围。
Claims (10)
1.一种马达振动方法，其特征在于，所述方法包括：
接收振动指令，通过预设传感器获取目标环境数据，所述目标环境数据包括环境噪声数据、加速度数据和/或压力数据中的一个或多个；
根据所述目标环境数据确定第一振动信号；
根据所述第一振动信号与预设的第二振动信号生成目标振动信号，所述第一振动信号的第一频率大于所述第二振动信号的第二频率；
控制马达装置以所述目标振动信号进行振动。
2.根据权利要求1所述的方法，其特征在于，所述根据所述目标环境数据确定第一振动信号，包括：
提取所述环境噪声数据中的环境噪声频谱特征；
根据所述环境噪声频谱特征确定与所述环境噪声数据对应的环境噪声中心频率；
根据预设的噪声频率与振动频率之间的映射关系，确定与所述环境噪声中心频率对应的振动频率作为所述第一振动信号的第一频率。
3.根据权利要求1或2所述的方法，其特征在于，所述根据所述目标环境数据确定第一振动信号，包括：
获取所述环境噪声数据中的环境噪声声压值；
确定与所述环境噪声声压值对应的环境噪声声压级；
根据预设的噪声声压级与信号幅值的映射关系确定与所述环境噪声声压级对应的信号幅值作为所述第一振动信号的第一幅值。
4.根据权利要求1所述的方法，其特征在于，所述根据所述目标环境数据确定第一振动信号，包括：
将所述目标环境数据输入预设的环境分类模型，获取所述环境分类模型输出的目标设备状态、目标场景种类；
根据所述目标设备状态、目标场景种类对所述第一振动信号进行修正。
5.根据权利要求4所述的方法，其特征在于，所述根据所述目标设备状态、目标场景种类对所述第一振动信号进行修正，包括：
根据所述设备状态、所述场景种类确定第一修正值、第二修正值；
根据所述第一修正值、第二修正值分别对所述第一振动信号的第一振动频率和第一振动幅值进行修正。
6.根据权利要求1所述的方法，其特征在于，所述根据所述第一振动信号与预设的第二振动信号确定目标振动信号，包括：
获取预设的第二频率与第二幅值下的振动信号作为所述第二振动信号；
将所述第一振动信号与所述第二振动信号进行信号叠加，生成所述目标振动信号。
7.根据权利要求1所述的方法，其特征在于，所述方法还包括：
确定样本集合，所述样本集合包含多个环境数据样本以及与该环境数据样本对应的样本参考结果，所述样本参考结果包括设备状态和/或场景种类；
以所述环境数据样本为输入，以所述样本参考结果为输出，对所述预设的环境分类模型的进行训练。
8.一种马达振动装置，其特征在于，所述装置包括：
获取单元，用于接收振动指令，通过预设传感器获取目标环境数据，所述目标环境数据包括环境噪声数据、加速度数据和/或压力数据中的一个或多个；
确定单元，用于根据所述目标环境数据确定第一振动信号；
生成单元，用于根据所述第一振动信号与预设的第二振动信号生成目标振动信号，所述第一振动信号的第一频率大于所述第二振动信号的第二频率；
振动单元，用于控制马达装置以所述目标振动信号进行振动。
9.一种计算机可读介质，存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行如权利要求1至7中任一项所述方法的步骤。
10.一种计算机终端，包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如权利要求1至7中任一项所述方法的步骤。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CNPCT/CN2019/093913 | 2019-06-28 | ||
| PCT/CN2019/093913 WO2020258328A1 (zh) | 2019-06-28 | 2019-06-28 | 一种马达振动方法、装置、系统及可读介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110166631A true CN110166631A (zh) | 2019-08-23 |
| CN110166631B CN110166631B (zh) | 2021-09-24 |
Family
ID=67637603
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910591570.5A Active CN110166631B (zh) | 2019-06-28 | 2019-07-02 | 一种马达振动方法、装置、系统及可读介质 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US11909340B2 (zh) |
| CN (1) | CN110166631B (zh) |
| WO (1) | WO2020258328A1 (zh) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110787042A (zh) * | 2019-09-30 | 2020-02-14 | 深圳市倍轻松科技股份有限公司 | 按摩设备的控制方法、装置、计算机设备和存储介质 |
| CN111030412A (zh) * | 2019-12-04 | 2020-04-17 | 瑞声科技(新加坡)有限公司 | 一种振动波形的设计方法及振动马达 |
| CN111079705A (zh) * | 2019-12-31 | 2020-04-28 | 北京理工大学 | 一种振动信号分类方法 |
| CN111314551A (zh) * | 2020-02-13 | 2020-06-19 | 捷开通讯(深圳)有限公司 | 一种震动调节方法、装置、存储介质及移动终端 |
| CN111443815A (zh) * | 2020-04-22 | 2020-07-24 | 维沃移动通信有限公司 | 一种振动提醒方法及电子设备 |
| CN114125095A (zh) * | 2020-08-31 | 2022-03-01 | 北京小米移动软件有限公司 | 一种终端设备、振动噪音的控制方法、装置及介质 |
| CN114870395A (zh) * | 2021-02-05 | 2022-08-09 | 腾讯科技（深圳）有限公司 | 游戏场景的终端震动检测方法、装置、介质及设备 |
| CN117421563A (zh) * | 2023-12-18 | 2024-01-19 | 深圳火眼智能有限公司 | 基于多传感器数据融合分析噪声的方法、装置以及设备 |
| CN117713633A (zh) * | 2024-02-02 | 2024-03-15 | 深圳市艾普希隆科技有限公司 | 用于伺服电机的变频控制调节方法及系统 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150277612A1 (en) * | 2012-12-21 | 2015-10-01 | Panasonic Intellectual Property Corporation Of America | Vibration control device, touch panel input apparatus, and vibration control method |
| CN105812567A (zh) * | 2016-03-29 | 2016-07-27 | 努比亚技术有限公司 | 移动终端控制装置及方法 |
| CN107180245A (zh) * | 2016-03-10 | 2017-09-19 | 滴滴（中国）科技有限公司 | 一种室内外场景识别方法及装置 |
| CN107734130A (zh) * | 2016-08-10 | 2018-02-23 | 中国电信股份有限公司 | 一种自动调整终端铃音方法、装置与终端 |
| CN108810198A (zh) * | 2018-05-17 | 2018-11-13 | Oppo广东移动通信有限公司 | 发声控制方法、装置、电子装置及计算机可读介质 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8487759B2 (en) * | 2009-09-30 | 2013-07-16 | Apple Inc. | Self adapting haptic device |
| KR20130020467A (ko) * | 2011-08-19 | 2013-02-27 | 엘지전자 주식회사 | 이동 단말기 및 그것의 진동 방법 |
| US9294612B2 (en) * | 2011-09-27 | 2016-03-22 | Microsoft Technology Licensing, Llc | Adjustable mobile phone settings based on environmental conditions |
| CN106461727B (zh) * | 2016-10-31 | 2019-11-15 | 北京小米移动软件有限公司 | 控制马达振动的方法及装置、电子设备 |
| CN107172270B (zh) * | 2017-03-30 | 2021-06-15 | 联想(北京)有限公司 | 一种控制马达震动的方法及电子设备 |
| CN107370899B (zh) * | 2017-06-29 | 2021-03-16 | 北京小米移动软件有限公司 | 一种发出震动信号的方法和装置 |
| CN107395887A (zh) * | 2017-07-26 | 2017-11-24 | 北京小米移动软件有限公司 | 一种用于进行语音播放和振动的装置及方法 |
-
2019
- 2019-06-28 WO PCT/CN2019/093913 patent/WO2020258328A1/zh active Application Filing
- 2019-07-02 CN CN201910591570.5A patent/CN110166631B/zh active Active
-
2020
- 2020-08-17 US US16/994,707 patent/US11909340B2/en active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150277612A1 (en) * | 2012-12-21 | 2015-10-01 | Panasonic Intellectual Property Corporation Of America | Vibration control device, touch panel input apparatus, and vibration control method |
| CN107180245A (zh) * | 2016-03-10 | 2017-09-19 | 滴滴（中国）科技有限公司 | 一种室内外场景识别方法及装置 |
| CN105812567A (zh) * | 2016-03-29 | 2016-07-27 | 努比亚技术有限公司 | 移动终端控制装置及方法 |
| CN107734130A (zh) * | 2016-08-10 | 2018-02-23 | 中国电信股份有限公司 | 一种自动调整终端铃音方法、装置与终端 |
| CN108810198A (zh) * | 2018-05-17 | 2018-11-13 | Oppo广东移动通信有限公司 | 发声控制方法、装置、电子装置及计算机可读介质 |
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110787042B (zh) * | 2019-09-30 | 2022-03-11 | 深圳市倍轻松科技股份有限公司 | 按摩设备的控制方法、装置、计算机设备和存储介质 |
| CN110787042A (zh) * | 2019-09-30 | 2020-02-14 | 深圳市倍轻松科技股份有限公司 | 按摩设备的控制方法、装置、计算机设备和存储介质 |
| CN111030412A (zh) * | 2019-12-04 | 2020-04-17 | 瑞声科技(新加坡)有限公司 | 一种振动波形的设计方法及振动马达 |
| CN111079705A (zh) * | 2019-12-31 | 2020-04-28 | 北京理工大学 | 一种振动信号分类方法 |
| CN111079705B (zh) * | 2019-12-31 | 2023-07-25 | 北京理工大学 | 一种振动信号分类方法 |
| CN111314551A (zh) * | 2020-02-13 | 2020-06-19 | 捷开通讯(深圳)有限公司 | 一种震动调节方法、装置、存储介质及移动终端 |
| CN111443815A (zh) * | 2020-04-22 | 2020-07-24 | 维沃移动通信有限公司 | 一种振动提醒方法及电子设备 |
| CN114125095A (zh) * | 2020-08-31 | 2022-03-01 | 北京小米移动软件有限公司 | 一种终端设备、振动噪音的控制方法、装置及介质 |
| CN114870395A (zh) * | 2021-02-05 | 2022-08-09 | 腾讯科技（深圳）有限公司 | 游戏场景的终端震动检测方法、装置、介质及设备 |
| CN114870395B (zh) * | 2021-02-05 | 2023-09-15 | 腾讯科技（深圳）有限公司 | 游戏场景的终端振动检测方法、装置、介质及设备 |
| CN117421563A (zh) * | 2023-12-18 | 2024-01-19 | 深圳火眼智能有限公司 | 基于多传感器数据融合分析噪声的方法、装置以及设备 |
| CN117421563B (zh) * | 2023-12-18 | 2024-03-15 | 深圳火眼智能有限公司 | 基于多传感器数据融合分析噪声的方法、装置以及设备 |
| CN117713633A (zh) * | 2024-02-02 | 2024-03-15 | 深圳市艾普希隆科技有限公司 | 用于伺服电机的变频控制调节方法及系统 |
| CN117713633B (zh) * | 2024-02-02 | 2024-04-19 | 深圳市艾普希隆科技有限公司 | 用于伺服电机的变频控制调节方法及系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| US20210036644A1 (en) | 2021-02-04 |
| WO2020258328A1 (zh) | 2020-12-30 |
| US11909340B2 (en) | 2024-02-20 |
| CN110166631B (zh) | 2021-09-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110166631A (zh) | 一种马达振动方法、装置、系统及可读介质 | |
| CN102597914B (zh) | 用于语音到文本转换的触觉增加的系统和方法 | |
| US11251763B2 (en) | Audio signal adjustment method, storage medium, and terminal | |
| KR101726945B1 (ko) | 수동 시작/종료 포인팅 및 트리거 구문들에 대한 필요성의 저감 | |
| CN108521621B (zh) | 信号处理方法、装置、终端、耳机及可读存储介质 | |
| CN107580113B (zh) | 提示方法、装置、存储介质及终端 | |
| CN108763901B (zh) | 耳纹信息获取方法和装置、终端、耳机及可读存储介质 | |
| US20180152163A1 (en) | Noise control method and device | |
| CN106664473A (zh) | 信息处理装置、信息处理方法和程序 | |
| CN105812567A (zh) | 移动终端控制装置及方法 | |
| CN113949956B (zh) | 降噪处理方法、装置、电子设备、耳机及存储介质 | |
| KR102447381B1 (ko) | 통화 중 인공지능 서비스를 제공하기 위한 방법 및 그 전자 장치 | |
| KR20200143255A (ko) | 바람 검출을 위한 마이크로폰의 스피커 에뮬레이션 | |
| US11749298B2 (en) | Health-related information generation and storage | |
| US11776555B2 (en) | Audio modification using interconnected electronic devices | |
| WO2021008458A1 (en) | Method for voice recognition via earphone and earphone | |
| CN109410973A (zh) | 变声处理方法、装置和计算机可读存储介质 | |
| CN108540660A (zh) | 语音信号处理方法和装置、可读存储介质、终端 | |
| CN105706427B (zh) | 提供环境声处理的音频信息的方法和装置 | |
| CN110111795B (zh) | 一种语音处理方法及终端设备 | |
| US20240071372A1 (en) | Method and system for enhancing the intelligibility of information for a user | |
| CN107295193A (zh) | 响铃控制方法、装置、存储介质及电子设备 | |
| CN112162721A (zh) | 音乐播放方法、装置、电子设备以及存储介质 | |
| WO2020102943A1 (zh) | 手势识别模型的生成方法、装置、存储介质及电子设备 | |
| US20240276158A1 (en) | Method for operating a hearing instrument and hearing system with such a hearing instrument |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |