CN112418308A - 睡眠音乐播放控制方法、装置、电子设备及存储介质 - Google Patents
睡眠音乐播放控制方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN112418308A CN112418308A CN202011311519.3A CN202011311519A CN112418308A CN 112418308 A CN112418308 A CN 112418308A CN 202011311519 A CN202011311519 A CN 202011311519A CN 112418308 A CN112418308 A CN 112418308A
- Authority
- CN
- China
- Prior art keywords
- information
- sleep
- playing
- user
- music
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 66
- 238000012544 monitoring process Methods 0.000 claims abstract description 33
- 238000004891 communication Methods 0.000 claims description 23
- 238000004458 analytical method Methods 0.000 claims description 20
- 238000013473 artificial intelligence Methods 0.000 claims description 14
- 238000004590 computer program Methods 0.000 claims description 10
- 208000024891 symptom Diseases 0.000 claims description 5
- 238000009434 installation Methods 0.000 claims 1
- 230000008569 process Effects 0.000 description 10
- 238000012806 monitoring device Methods 0.000 description 7
- 230000005281 excited state Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 208000019116 sleep disease Diseases 0.000 description 3
- 238000012549 training Methods 0.000 description 3
- 230000007704 transition Effects 0.000 description 3
- 208000013738 Sleep Initiation and Maintenance disease Diseases 0.000 description 2
- 230000005284 excitation Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 206010022437 insomnia Diseases 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000003860 sleep quality Effects 0.000 description 2
- 206010029412 Nightmare Diseases 0.000 description 1
- 208000037656 Respiratory Sounds Diseases 0.000 description 1
- 206010041235 Snoring Diseases 0.000 description 1
- 238000004378 air conditioning Methods 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000033764 rhythmic process Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000002618 waking effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
- A61M21/02—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis for inducing sleep or relaxation, e.g. by direct nerve stimulation, hypnosis, analgesia
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
- G06F16/63—Querying
- G06F16/635—Filtering based on additional data, e.g. user or group profiles
- G06F16/636—Filtering based on additional data, e.g. user or group profiles by using biological or physiological data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
- H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
- A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
- A61M2021/0027—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the hearing sense
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M2230/00—Measuring parameters of the user
- A61M2230/04—Heartbeat characteristics, e.g. ECG, blood pressure modulation
- A61M2230/06—Heartbeat rate only
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Life Sciences & Earth Sciences (AREA)
- Data Mining & Analysis (AREA)
- Biomedical Technology (AREA)
- Anesthesiology (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Veterinary Medicine (AREA)
- Pain & Pain Management (AREA)
- Evolutionary Biology (AREA)
- Psychology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Heart & Thoracic Surgery (AREA)
- Hematology (AREA)
- Animal Behavior & Ethology (AREA)
- Bioinformatics & Computational Biology (AREA)
- Public Health (AREA)
- Evolutionary Computation (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Physiology (AREA)
- Multimedia (AREA)
- Databases & Information Systems (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Artificial Intelligence (AREA)
- Computing Systems (AREA)
- Medical Informatics (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
本申请涉及一种睡眠音乐播放控制方法、装置、电子设备及存储介质,应用于家电设备的方法包括:在睡眠模式下,监测获得用户的第一体征信息,并将所述第一体征信息上传云端服务器;接收所述云端服务器发送的第一播放指令,其中,所述第一播放指令中携带与所述第一体征信息相匹配的第一睡眠音乐;根据所述第一播放指令,播放所述第一睡眠音乐。本申请用以家电设备通过睡眠音乐辅助用户入睡。
Description
技术领域
本申请涉及家电设备技术领域,尤其涉及一种睡眠音乐播放控制方法、装置、电子设备及存储介质。
背景技术
随着社会的快速发展,人们的生活节奏逐渐变快,面对的生活和工作压力也越来越大,进而睡眠质量受到严重影响。我国大部分人群均存在睡眠问题,其中,成年人睡眠问题尤为严重,失眠发生率更是居高不下,睡个好觉已然成为奢侈品,睡眠问题也越来越受到人们的关注。
目前,传统的空调睡眠模式仅调节房间环境温度或湿度等参数,无法满足用户的需求。
发明内容
本申请提供了一种睡眠音乐播放控制方法、装置、电子设备及存储介质,用以家电设备能够辅助用户入睡。
第一方面,本申请实施例提供了一种睡眠音乐播放控制方法,应用于家电设备,所述方法包括:
在睡眠模式下,监测获得用户的第一体征信息,并将所述第一体征信息上传云端服务器;
接收所述云端服务器发送的第一播放指令,其中,所述第一播放指令中携带与所述第一体征信息相匹配的第一睡眠音乐;
根据所述第一播放指令,播放所述第一睡眠音乐。
可选地,所述监测获得用户的第一体征信息,并将所述第一体征信息上传云端服务器,包括:
监测获得毫米波雷达的回波信号,其中,所述回波信号中包括所述用户的心率信息;
将包括所述回波信号的所述第一体征信息,上传至所述云端服务器。
可选地,所述将所述第一体征信息上传云端服务器之后,所述方法还包括:
监测获得所述用户的第二体征信息,并将所述第二体征信息上传所述云端服务器,其中,所述第一体征信息和所述第二体征信息对应的时间段不同;
所述接收所述云端服务器发送的第一播放指令之后,所述方法还包括:
接收所述云端服务器发送的第二播放指令,其中,所述第二播放指令中携带与所述第二体征信息相匹配的第二睡眠音乐;
根据所述第二播放指令,停止播放所述第一睡眠音乐,并开始播放所述第二睡眠音乐。
可选地,所述根据所述第一播放指令,播放所述第一睡眠音乐之后,所述方法还包括:
接收所述云端服务器发送的停止播放指令;
根据所述停止播放指令,停止播放所述第一睡眠音乐。
可选地,接收所述云端服务器发送的停止播放指令之前,所述方法还包括:
监测获得所述用户的入睡声音信息,其中,所述入睡声音信息中包括所述用户的入睡声音特征;
监测获得用户的第三体征信息,其中,所述第三体征信息与所述第一体征信息所对应的时间段不同;
将所述入睡声音信息和所述第三体征信息上传所述云端服务器,由所述云端服务器根据所述入睡声音信息和所述第三体征信息生成所述停止播放指令。
第二方面,本申请实施例提供了一种睡眠音乐播放控制方法,应用于云端服务器,所述方法包括:
接收家电设备发送的第一体征信息;
获取与所述第一体征信息相匹配的第一睡眠音乐;
生成第一播放指令,所述第一播放指令中携带所述第一睡眠音乐;
向所述家电设备发送所述第一播放指令。
可选地,所述第一体征信息包括:毫米波雷达所监测的回波信号,其中,所述回波信号中包括用户的心率信息;
所述获取与所述第一体征信息相匹配的第一睡眠音乐,包括:
解析所述毫米波雷达所监测的回波信号,获得用户的心率信息;
获取与所述心率信息相匹配的第一睡眠音乐。
可选地,所述获取与所述心率信息相匹配的第一睡眠音乐,包括:
将所述心率信息输入到人工智能分析模型,获得所述人工智能分析模型输出的所述第一睡眠音乐;
其中,所述人工智能分析模型根据所述用户的心率信息从曲库中选取与所述心率信息相匹配的第一睡眠音乐,输出所述第一睡眠音乐。
可选地,接收所述家电设备发送的第一体征信息之后,所述方法还包括:
接收家电设备发送的第二体征信息;
获取与所述第二体征信息相匹配的第二睡眠音乐;
生成第二播放指令,所述第二播放指令中携带第二睡眠音乐;
向所述家电设备发送所述第二播放指令。
可选地,所述向家电设备发送所述第一播放指令之后,所述方法还包括:
接收所述家电设备所监测的用户的入睡声音信息,其中,所述入睡声音信息中包括入睡声音特征;
接收所述家电设备所监测的第三体征信息,其中,所述第三体征信息与所述第一体征信息所对应的时间段不同;
解析所述入睡声音信息,获得所述入睡声音特征,确定所述入睡声音特征与预设声音特征的相似度,其中,所述预设声音特征是入睡状态下的声音特征;
解析所述第三体征信息,获得所述第三体征信息所包括的心率信息,判断所述第三体征信息所包括的心率信息是否属于预设用户正常睡眠心率范围,获得判断结果,其中,所述用户正常睡眠心率范围是入睡状态下的心率信息;
若所述判断结果为是,且所述相似度大于预设值,则生成停止播放指令,并向所述家电设备发送所述停止播放指令。
第三方面,本申请实施例提供了一种睡眠音乐播放控制装置,应用于家电设备,包括:
监测模块,用于在睡眠模式下,监测获得用户的第一体征信息,并将所述第一体征信息上传云端服务器;
接收模块,用于接收所述云端服务器发送的第一播放指令,其中,所述第一播放指令中携带与所述第一体征信息相匹配的第一睡眠音乐;
控制模块,用于根据所述第一播放指令,播放所述第一睡眠音乐。
第四方面,本申请实施例提供了一种睡眠音乐播放控制装置,应用于云端服务器,包括:
接收模块,用于接收家电设备发送的第一体征信息;
音乐分析模块,用于获取与所述第一体征信息相匹配的第一睡眠音乐;
指令生成模块,用于生成第一播放指令,所述第一播放指令中携带所述第一睡眠音乐;
发送模块,用于向所述家电设备发送所述第一播放指令。
第五方面,本申请实施例中提供了一种电子设备,包括:处理器、通信接口、存储器和通信总线,其中,处理器、通信接口和存储器通过通信总线完成相互间的通信;
所述存储器,用于存储计算机程序;
所述处理器,用于执行所述存储器中所存储的程序,实现第一方面所描述的睡眠音乐播放控制方法,或者,实现第二方面所描述的睡眠音乐播放控制方法。
第六方面,本申请实施例中提供了一种计算机可读存储介质,存储有计算机程序,所述计算机程序被处理器执行时实现第一方面或者第二方面所述的睡眠音乐播放控制方法。
本申请实施例提供的上述技术方案与现有技术相比具有如下优点:本申请实施例提供的该方法,在家电设备进入睡眠模式后,监测获得用户的第一体征信息,并将监测到的第一体征信息上传云端服务器,接收云端服务器发送的携带与该第一体征信息相匹配的第一睡眠音乐的第一播放指令,使得该家电设备能够播放符合当前用户入睡状态的第一睡眠音乐,通过第一睡眠音乐间接调整用户状态,辅助用户入睡。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例中家电设备与云端服务器的交互示意图;
图2为本申请实施例中家电设备的睡眠音乐播放控制方法流程示意图;
图3为本申请实施例中家电设备的睡眠音乐切换的方法流程示意图;
图4为本申请实施例中云端服务器端的睡眠音乐停止接收播放指令的流程示意图;
图5为本申请实施例中睡眠音乐播放控制具体流程示意图;
图6为本申请实施例中家电设备的睡眠音乐播放控制装置结构示意图;
图7为本申请实施例中云端服务器端的睡眠音乐播放控制装置结构示意图;
图8为本申请实施例中电子设备的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请的一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请提供了一种睡眠音乐播放控制的系统,主要包括:家电设备11和云端服务器12。如图1所示,图1为家电设备11与云端服务器12的交互示意图。
家电设备11可以是空调、智能空气加湿器或智能床头灯等。需要说明的是,这里仅是举例,并不用于限制本申请的保护范围,在家电设备具有睡眠模式的设置时,即可应用于本申请实施例中。
以下实施例中,在具体说明是,仅以空调为例,对于其他形式的家电设备,也可以采用类似的处理过程。
家电设备11为空调11,该空调11包括通信单元1101、监测单元1102、主控单元1103和音频单元1104。
其中,通信单元1101用于与云端服务器12建立通信连接,该通信连接可以是无线连接(例如蓝牙、WIFI),也可以是有线连接。这里并不限制具体的连接方式。
一个具体实施例中,监测单元1102包括毫米波雷达1,通过该毫米波雷达1监测获得用户的第一体征信息。
在一些实施例中,监测单元1102还包括睡眠监测装置2,该睡眠监测装置2用于监测获得用户的入睡声音信息。具体地,睡眠监测装置2包括:通信子模块21和麦克风子模块22。其中,麦克风子模块22用于获取用户的入睡声音信息,并将该入睡声音信息通过该通信子模块21传输给空调11的主控单元1103。
一个具体实施例中,主控单元1103通过通信单元1101将监测单元1102所监测的第一体征信息和入睡声音信息上传至云端服务器。
其中,睡眠监测装置可以安装在空调内,通过主控单元1103控制开启,也可以安装在空调外侧,此处本发明不对睡眠监测装置2的安装位置做具体限定,必要时可以根据实际情况选择合适的安装位置。
一个具体实施例中,音频单元1104可以采用扬声器模块,在此不对音频单元1104所采用的元件做具体限定。
本申请实施例提供了一种睡眠音乐播放控制方法,该方法可以应用于家电设备中,下面将以空调为例,介绍睡眠音乐播放控制方法在家电设备端的具体流程。
如图2所示,本申请实施例中睡眠音乐播放控制方法流程如下:
步骤201,在睡眠模式下,家电设备监测获得用户的第一体征信息,并将第一体征信息上传云端服务器。
其中,家电设备在检测到用户开启睡眠模式的操作后,确定进入睡眠模式。或者,家电设备在接收到切换至睡眠模式的控制指令后,确定进入睡眠模式。
其中,用户的第一体征信息包括心率信息,除此之外还可以包括脑电波信息或脉搏信息等可以体现用户入睡状态的信息,可根据具体情况来选取能够反映用户入睡状态的体征信息。
其中,第一体征信息的获得方式有多种途径,可以是采用可穿戴式设备监测获得用户的第一体征信息,也可以是采用无接触监测的方式获得用户的第一体征信息。一个具体实施例中,监测获得毫米波雷达的回波信号,其中,回波信号中包括用户的心率信息。
例如,空调配置毫米波雷达,空调毫米波雷达发射出调频连续波(FMCW)信号并对所处区域进行扫描,接收回波信号,将接收的回波信号上传至云端服务器。如果该所处区域内存在用户,则该回波信号中会携带该用户的第一体征信息。
通过毫米波雷达对用户进行扫描,可以使用户摆脱佩戴可穿戴式设备的苦恼,提升用户的舒适感,实现无接触的获取用户的心率信息,提升用户的使用体验。
步骤202,家电设备接收云端服务器发送的第一播放指令,其中,第一播放指令中携带与第一体征信息相匹配的第一睡眠音乐。
其中,第一体征信息中包含的心率信息可以用于体现用户的入睡状态,第一睡眠音乐属于曲库中的某一音乐集合,该集合是以用户的入睡状态分类的。
例如,如果第一体征信息中包含的心率信息属于第一心率范围,第一睡眠音乐属于与第一心率范围相匹配的第一音乐集合;第一心率范围代表用户处于兴奋状态。如果第一体征信息中包含的心率信息属于第二心率范围,第一睡眠音乐属于与第二心率范围相匹配的第二音乐集合;第二心率范围代表用户处于睡眠过渡状态。
步骤203,家电设备根据第一播放指令,播放第一睡眠音乐。
该实施例中,家电设备通过播放与该第一体征信息相匹配的第一睡眠音乐,使得该家电设备能够播放符合当前用户入睡状态的第一睡眠音乐,通过第一睡眠音乐间接调整用户状态,辅助用户入睡播放与用户第一体征信息相匹配的第一睡眠音乐,播放符合用户当前体征信息的睡眠音乐,辅助用户快速入睡。
一个具体实施例中,家电设备接收第一播放指令之后,在播放第一睡眠音乐的过程中,可以持续监测获得用户的第二体征信息,以持续监测用户体征变化情况,根据用户体征信息变化更换音乐。
一个具体实施例中,为了能够及时获知用户体征信息的变化,家电设备在监测并上传第一体征信息之后,监测获得用户的第二体征信息,并将第二体征信息上传云端服务器,其中,第一体征信息和第二体征信息对应的时间段不同。家电设备在向云端服务器上报第二体征信息之后,接收云端服务器发送的第二播放指令,其中,第二播放指令中携带与第二体征信息相匹配的第二睡眠音乐。家电设备根据第二播放指令,停止播放第一睡眠音乐,并开始播放第二睡眠音乐。
例如,家电设备以预设时长为周期,向云端服务器周期性上报用户的体征信息,第一体征信息和第二体征信息为不同周期内监测到的体征信息。在此并不限制监测周期的长短,可以根据实际情况需要选择合适的间隔时长,如可以选择3~5分钟,而当预设间隔时长在3~5分钟内时,可以降低空调的监测功耗,节约能源,又可以减少云端服务器的计算量。
当第一体征信息与第二体征信息中用户的心率信息均处于相同心率范围时,家电设备可以实现音乐的切换功能,例如,监测用户到处于兴奋状态,则第二睡眠音乐对应曲库中可以降低用户兴奋程度的睡眠音乐,防止一直播放同一音乐使用户产生厌烦感,提升用户的使用体验。
若第一体征信息与第二体征信息中用户的心率信息处于不同的心率范围时,例如,监测用户到从兴奋状态进入睡眠过渡状态,家电设备停止播放第一睡眠音乐,开始播放第二睡眠音乐,通过切换到符合用户当前心率信息的第二睡眠音乐,来对用户的心率进行间接调整,缓解压力避免失眠发生,使得用户在舒适的睡眠模式下入睡。
一个具体实施例中,空调在播放睡眠音乐的过程中,接收云端服务器发送的停止播放指令;根据停止播放指令,停止播放第一睡眠音乐。其中,该睡眠音乐可以是空调根据任意一次接收到的音乐播放指令进行播放的音乐,例如第一睡眠音乐或第二睡眠音乐。
一个具体实施例中,停止播放指令在生成时,空调可基于用户的体征信息和入睡声音信息,该入睡声音信息可以是由空调监测获得后上报给服务器。如图3所示,空调获得停止播放指令的具体过程,包括以下步骤:
步骤301,家电设备监测获得用户的入睡声音信息,其中,入睡声音信息中包括用户的入睡声音特征。
例如,通过麦克风收录用户的呼吸声与鼾声等入睡声音信息。
步骤302,家电设备监测获得用户的第三体征信息,其中,第三体征信息与第一体征信息所对应的时间段不同。
具体地,第三体征信息所指的为当前用户所对应的体征信息。
步骤303,家电设备将入睡声音信息和第三体征信息上传云端服务器,由云端服务器根据入睡声音信息和第三体征信息生成停止播放指令。
家电设备通过将用户的第三体征信息与入睡声音信息上传云端服务器,根据对用户的心率信息和入睡声音信息两个方面对用户是否入睡进行判断,提高判断的准确性,防止误判,在用户还未入睡时便错误的关闭睡眠音乐,提升用户使用体验,更好的辅助用户入睡。
基于同一构思,本申请实施例提供了一种睡眠音乐播放控制方法,该方法可以应用于云端服务器中。
如图4所示,云端服务器与家电设备相对应的方法流程具体如下所示:
步骤401,接收家电设备发送的第一体征信息。
步骤402,获取与第一体征信息相匹配的第一睡眠音乐。
一个具体实施例中,第一体征信息中包括用户的心率信息。
具体地,第一体征信息为毫米波雷达所监测的回波信号,云端服务器解析该回波信息,获得用户的心率信息;获取与该心率信息相匹配的第一睡眠音乐。
具体地,云端服务器对回波信号相关相位的变化进行计算,获得用户的心率信息,将对回波信号的解析放置在云端服务器侧进行,能够降低家电设备侧的数据处理压力,以降低对家电设备的处理性能的要求。
例如,如果第一体征信息中包含的心率信息属于第一心率范围,第一睡眠音乐属于与第一心率范围相匹配的第一音乐集合;第一心率范围代表用户处于兴奋状态。如果第一体征信息中包含的心率信息属于第二心率范围,第一睡眠音乐属于与第二心率范围相匹配的第二音乐集合;第二心率范围代表用户处于睡眠过渡状态。
一个具体实施例中,云端服务器将获取的用户心率信息输入至人工智能分析模型,获得人工智能分析模型输出的第一睡眠音乐。其中,人工智能分析模型根据用户的心率信息从曲库中选取与心率信息相匹配的第一睡眠音乐,输出第一睡眠音乐。
人工智能分析模型在训练时所采用的样本数据包括用户所在区域人群的入睡状态下的心率、入睡前的心率和兴奋状态下的心率,该样本数据可以通过大数据分析获得。对样本数据进行分析,得到入睡状态的心率范围,入睡前的心率范围以及兴奋状态的心率范围。该人工智能分析模型将训练得到的各心率范围,对应到曲库中不同的音乐集合。并将持续监测到的用户在不同状态下的心率,增加到该样本数据中,每间隔一段时间采用更新后的样本数据对该人工智能分析模型进行重新训练,以体现用户的个性化信息。
考虑到不同区域的人群(比如,高原地区、盆地地区和平原区域或者是炎热的赤道区域和冰冷的北极区域)正常睡眠心率范围存在差异,并且人与人之间的心率也存在差异,因此通过上述训练,可以使人工智能分析模型的判断准确性更高,更具有针对性。
步骤403,云端服务器生成第一播放指令,第一播放指令中携带第一睡眠音乐。
步骤404,云端服务器向家电设备发送第一播放指令。
一个具体实施例中,云端服务器接收家电设备发送的第一体征信息之后,接收家电设备发送的第二体征信息;获取与第二体征信息相匹配的第二睡眠音乐;生成第二播放指令,第二播放指令中携带第二睡眠音乐;向家电设备发送第二播放指令。以使得家电设备播放的睡眠音乐能够符合用户当前的心率,或者,避免用户长时间收听同一音乐而导致厌烦。
一个具体实施例中,停止播放指令的生成方式有多种,以下列举其中几种生成方式:
方式一,云端服务器以用户的心率信息为依据生成停止播放指令。若用户心率信息属于正常睡眠心率范围,云端服务器向空调发送停止播放指令。
方式二,云端服务器根据预设时长生成停止播放指令。
云端服务器在向家电设备首次发送音乐播放指令之后,等待预设时长,生成停止播放指令,并发送停止播放指令,比如,用户预设时间为两个小时,云端服务器在首次发送音乐播放指令后开始计时,在计时结束后向空调发送停止播放指令。
方式三,云端服务器接收家电设备所监测的用户的入睡声音信息,其中,入睡声音信息中包括入睡声音特征。接收家电设备所监测的第三体征信息,其中,第三体征信息与第一体征信息所对应的时间段不同。解析入睡声音信息,获得入睡声音特征,确定入睡声音特征与预设声音特征的相似度,其中,预设声音特征是入睡状态下的声音特征。解析第三体征信息,获得第三体征信息所包括的心率信息,判断第三体征信息所包括的心率信息是否属于预设用户正常睡眠心率范围,获得判断结果,其中,用户正常睡眠心率范围是入睡状态下的心率信息。
若云端服务器判断结果为是,且相似度大于预设值,则生成停止播放指令,并向空调发送停止播放指令。通过监测用户入睡状态,停止播放睡眠音乐,防止音乐将入睡的用户吵醒。
通过入睡声音信息进一步判断用户入睡状态,防止仅依靠用户心率信息出现的误判情况,在用户还未入睡时关闭睡眠音乐,或用户入睡后睡眠音乐仍在播放,影响用户的使用体验。
在一个具体实施例中,如图5所示,空调播放睡眠音乐的过程主要包括:
步骤501,用户睡眠时开启空调睡眠模式。
步骤502,空调开启毫米波雷达和睡眠监测装置。
步骤503,空调持续获取毫米波雷达监测的用户的心率信息,持续获取睡眠监测装置监测的入睡声音信息。
步骤504,空调持续将心率信息和入睡声音信息,上传云端服务器。
步骤505,云端服务器判断当前接收到的心率信息是高于正常入睡心率范围,若是,执行步骤506,否则,执行步骤507。
步骤506,云端服务器通过人工智能分析模型从曲库中选择相匹配的睡眠音乐,下发空调,间接调节用户的心率信息。
步骤507,云端服务器不干预当前睡眠音乐的播放,空调继续播放当前睡眠音乐。
步骤508,直到云端服务器对用户的心率信息和入睡声音信息综合判断符合用户入睡特征,确定用户进入睡眠状态,下达停止播放指令。
若识别心率高用户处于兴奋状态,则通过人工智能分析模型分析从曲库中选择相匹配的睡眠音乐的播放,来间接调节减缓用户的心率,辅助用户入睡,并通过服务器下发携带睡眠音乐的播放指令,空调主控单元收到播放指令控制音频单元播放相应睡眠音乐,或根据指令切换播放睡眠音乐,帮助用户尽快进入睡眠,直到云端服务器对用户的心率信息和入睡声音信息综合判断符合用户入睡特征,判断用户进入睡眠状态,音乐停止播放。
若心率符合用户正常睡眠心率范围,而用户入睡声音信息于预设声音特征的相似度小于预设值,则不干预睡眠音乐的播放,维持播放现有助眠音乐,直到用户的心率信息属于用户正常入睡心率范围和入睡声音信息相似的大于预设值,判断用户入睡,音乐停止播放。
若是用户在入睡后因某些特定情况(如噩梦或噪声等)吵醒,空调毫米波雷达和睡眠监测装置监测用户的体征信息和入睡声音信息,云端服务器根据用户的体征信息下达相匹配的睡眠音乐,直到用户的心率信息属于用户正常入睡心率范围和入睡声音信息相似的大于预设值,判断用户入睡,音乐停止播放。
基于同一构思,本申请实施例中提供了一种睡眠音乐播放控制装置,应用于家电设备中,以空调为例该装置的具体实施可参见方法实施例部分的描述,重复之处不再赘述,如图6所示,该装置主要包括:
监测模块601,用于在睡眠模式下,监测获得用户的第一体征信息,并将第一体征信息上传云端服务器。
接收模块602,用于接收云端服务器发送的第一播放指令,其中,第一播放指令中携带与第一体征信息相匹配的第一睡眠音乐。
控制模块603,用于根据第一播放指令,播放第一睡眠音乐。
基于同一构思,本申请实施例中提供了一种睡眠音乐播放控制装置,应用于云端服务器中,该装置的具体实施可参见方法实施例部分的描述,重复之处不再赘述,如图7所示,该装置主要包括:
接收模块701,用于接收家电设备发送的第一体征信息。
音乐分析模块702,用于获取与第一体征信息相匹配的第一睡眠音乐。
指令生成模块703,用于生成第一播放指令,第一播放指令中携带第一睡眠音乐。
发送模块704,用于向家电设备发送第一播放指令。
基于同一构思,本申请实施例中还提供了一种电子设备,如图8所示,该电子设备主要包括:处理器801、通信接口802、存储器803和通信总线804,其中,处理器801、通信接口802和存储器803通过通信总线804完成相互间的通信。其中,存储器803中存储有可被至处理器801执行的程序,处理器801执行存储器803中存储的程序,应用于家电设备,实现如下步骤:在睡眠模式下,监测获得用户的第一体征信息,并将第一体征信息上传云端服务器;接收云端服务器发送的第一播放指令,其中,第一播放指令中携带与第一体征信息相匹配的第一睡眠音乐;根据第一播放指令,播放第一睡眠音乐。
或者
接收家电设备发送的第一体征信息;获取与第一体征信息相匹配的第一睡眠音乐;生成第一播放指令,第一播放指令中携带第一睡眠音乐;向家电设备发送第一播放指令。
上述电子设备中提到的通信总线804可以是外设部件互连标准(PeripheralComponent Interconnect,简称PCI)总线或扩展工业标准结构(Extended IndustryStandard Architecture,简称EISA)总线等。该通信总线804可以分为地址总线、数据总线、控制总线等。为便于表示,图8中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口802用于上述电子设备与其他设备之间的通信。
存储器803可以包括随机存取存储器(Random Access Memory,简称RAM),也可以包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。可选地,存储器还可以是至少一个位于远离前述处理器801的存储装置。
上述的处理器801可以是通用处理器,包括中央处理器(Central ProcessingUnit,简称CPU)、网络处理器(Network Processor,简称NP)等,还可以是数字信号处理器(Digital Signal Processing,简称DSP)、专用集成电路(Application SpecificIntegrated Circuit,简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本申请的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,当该计算机程序在计算机上运行时,使得计算机执行上述实施例中所描述的家电设备端和云端服务器端睡眠音乐播放控制方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。该计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行该计算机指令时,全部或部分地产生按照本申请实施例所述的流程或功能。该计算机可以时通用计算机、专用计算机、计算机网络或者其他可编程装置。该计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,计算机指令从一个网站站点、计算机、服务器或者数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、微波等)方式向另外一个网站站点、计算机、服务器或数据中心进行传输。该计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。该可用介质可以是磁性介质(例如软盘、硬盘、磁带等)、光介质(例如DVD)或者半导体介质(例如固态硬盘)等。
需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅是本发明的具体实施方式,使本领域技术人员能够理解或实现本发明。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所申请的原理和新颖特点相一致的最宽的范围。
Claims (14)
1.一种睡眠音乐播放控制方法,其特征在于,应用于家电设备,所述方法包括:
在睡眠模式下,监测获得用户的第一体征信息,并将所述第一体征信息上传云端服务器;
接收所述云端服务器发送的第一播放指令,其中,所述第一播放指令中携带与所述第一体征信息相匹配的第一睡眠音乐;
根据所述第一播放指令,播放所述第一睡眠音乐。
2.根据权利要求1所述的方法,其特征在于,所述监测获得用户的第一体征信息,并将所述第一体征信息上传云端服务器,包括:
监测获得毫米波雷达的回波信号,其中,所述回波信号中包括所述用户的心率信息;
将包括所述回波信号的所述第一体征信息,上传至所述云端服务器。
3.根据权利要求1或2所述的方法,其特征在于,所述将所述第一体征信息上传云端服务器之后,所述方法还包括:
监测获得所述用户的第二体征信息,并将所述第二体征信息上传所述云端服务器,其中,所述第一体征信息和所述第二体征信息对应的时间段不同;
所述接收所述云端服务器发送的第一播放指令之后,所述方法还包括:
接收所述云端服务器发送的第二播放指令,其中,所述第二播放指令中携带与所述第二体征信息相匹配的第二睡眠音乐;
根据所述第二播放指令,停止播放所述第一睡眠音乐,并开始播放所述第二睡眠音乐。
4.根据权利要求1或2所述的方法,其特征在于,所述根据所述第一播放指令,播放所述第一睡眠音乐之后,所述方法还包括:
接收所述云端服务器发送的停止播放指令;
根据所述停止播放指令,停止播放所述第一睡眠音乐。
5.根据权利要求4所述的方法,其特征在于,接收所述云端服务器发送的停止播放指令之前,所述方法还包括:
监测获得所述用户的入睡声音信息,其中,所述入睡声音信息中包括所述用户的入睡声音特征;
监测获得用户的第三体征信息,其中,所述第三体征信息与所述第一体征信息所对应的时间段不同;
将所述入睡声音信息和所述第三体征信息上传所述云端服务器,由所述云端服务器根据所述入睡声音信息和所述第三体征信息生成所述停止播放指令。
6.一种睡眠音乐播放控制方法,其特征在于,应用于云端服务器,所述方法包括:
接收家电设备发送的第一体征信息;
获取与所述第一体征信息相匹配的第一睡眠音乐;
生成第一播放指令,所述第一播放指令中携带所述第一睡眠音乐;
向所述家电设备发送所述第一播放指令。
7.根据权利要求6所述的方法,其特征在于,所述第一体征信息包括:毫米波雷达所监测的回波信号,其中,所述回波信号中包括用户的心率信息;
所述获取与所述第一体征信息相匹配的第一睡眠音乐,包括:
解析所述毫米波雷达所监测的回波信号,获得用户的心率信息;
获取与所述心率信息相匹配的第一睡眠音乐。
8.根据权利要求7所述的方法,其特征在于,所述获取与所述心率信息相匹配的第一睡眠音乐,包括:
将所述心率信息输入到人工智能分析模型,获得所述人工智能分析模型输出的所述第一睡眠音乐;
其中,所述人工智能分析模型根据所述用户的心率信息从曲库中选取与所述心率信息相匹配的第一睡眠音乐,输出所述第一睡眠音乐。
9.根据权利要求6-8任一项所述的方法,其特征在于,接收家电设备发送的第一体征信息之后,所述方法还包括:
接收所述家电设备发送的第二体征信息;
获取与所述第二体征信息相匹配的第二睡眠音乐;
生成第二播放指令,所述第二播放指令中携带第二睡眠音乐;
向所述家电设备发送所述第二播放指令。
10.根据权利要求6-8任一项所述的方法,其特征在于,所述向家电设备发送所述第一播放指令之后,所述方法还包括:
接收所述家电设备所监测的用户的入睡声音信息,其中,所述入睡声音信息中包括入睡声音特征;
接收所述家电设备所监测的第三体征信息,其中,所述第三体征信息与所述第一体征信息所对应的时间段不同;
解析所述入睡声音信息,获得所述入睡声音特征,确定所述入睡声音特征与预设声音特征的相似度,其中,所述预设声音特征是入睡状态下的声音特征;
解析所述第三体征信息,获得所述第三体征信息所包括的心率信息,判断所述第三体征信息所包括的心率信息是否属于预设用户正常睡眠心率范围,获得判断结果,其中,所述用户正常睡眠心率范围是入睡状态下的心率信息;
若所述判断结果为是,且所述相似度大于预设值,则生成停止播放指令,并向所述家电设备发送所述停止播放指令。
11.一种睡眠音乐播放控制装置,其特征在于,应用于家电设备,包括:
监测模块,用于在睡眠模式下,监测获得用户的第一体征信息,并将所述第一体征信息上传云端服务器;
接收模块,用于接收所述云端服务器发送的第一播放指令,其中,所述第一播放指令中携带与所述第一体征信息相匹配的第一睡眠音乐;
控制模块,用于根据所述第一播放指令,播放所述第一睡眠音乐。
12.一种睡眠音乐播放控制装置,其特征在于,应用于云端服务器,包括:
接收模块,用于接收家电设备发送的第一体征信息;
音乐分析模块,用于获取与所述第一体征信息相匹配的第一睡眠音乐;
指令生成模块,用于生成第一播放指令,所述第一播放指令中携带所述第一睡眠音乐;
发送模块,用于向所述家电设备发送所述第一播放指令。
13.一种电子设备,其特征在于,包括:处理器、通信接口、存储器和通信总线,其中,处理器、通信接口和存储器通过通信总线完成相互间的通信;
所述存储器,用于存储计算机程序;
所述处理器,用于执行所述存储器中所存储的程序,实现权利要求1至5任一项所述的睡眠音乐播放控制方法,或者,实现权利要求6至10任一项所述的睡眠音乐播放控制方法。
14.一种计算机可读存储介质,存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至5任一项所述的睡眠音乐播放控制方法,或者,实现权利要求6至10任一项所述的睡眠音乐播放控制方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011311519.3A CN112418308A (zh) | 2020-11-20 | 2020-11-20 | 睡眠音乐播放控制方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011311519.3A CN112418308A (zh) | 2020-11-20 | 2020-11-20 | 睡眠音乐播放控制方法、装置、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112418308A true CN112418308A (zh) | 2021-02-26 |
Family
ID=74778618
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011311519.3A Pending CN112418308A (zh) | 2020-11-20 | 2020-11-20 | 睡眠音乐播放控制方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112418308A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113375317A (zh) * | 2021-06-04 | 2021-09-10 | 青岛海尔空调器有限总公司 | 用于控制香氛装置的方法、系统、装置及服务器 |
CN114738966A (zh) * | 2022-03-28 | 2022-07-12 | 青岛海尔空调器有限总公司 | 空调器与智能音箱的互联控制方法与装置 |
CN116020037A (zh) * | 2023-03-30 | 2023-04-28 | 森思泰克河北科技有限公司 | 基于雷达的助眠音乐控制方法、雷达及存储介质 |
CN117097775A (zh) * | 2023-09-06 | 2023-11-21 | 深圳市芯隆科技有限公司 | 一种基于人工智能的蓝牙播放控制系统及方法 |
-
2020
- 2020-11-20 CN CN202011311519.3A patent/CN112418308A/zh active Pending
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113375317A (zh) * | 2021-06-04 | 2021-09-10 | 青岛海尔空调器有限总公司 | 用于控制香氛装置的方法、系统、装置及服务器 |
WO2022252706A1 (zh) * | 2021-06-04 | 2022-12-08 | 青岛海尔空调器有限总公司 | 用于控制香氛装置的方法、系统、装置及服务器 |
CN114738966A (zh) * | 2022-03-28 | 2022-07-12 | 青岛海尔空调器有限总公司 | 空调器与智能音箱的互联控制方法与装置 |
CN116020037A (zh) * | 2023-03-30 | 2023-04-28 | 森思泰克河北科技有限公司 | 基于雷达的助眠音乐控制方法、雷达及存储介质 |
CN117097775A (zh) * | 2023-09-06 | 2023-11-21 | 深圳市芯隆科技有限公司 | 一种基于人工智能的蓝牙播放控制系统及方法 |
CN117097775B (zh) * | 2023-09-06 | 2024-04-30 | 深圳市芯隆科技有限公司 | 一种基于人工智能的蓝牙播放控制系统及方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112418308A (zh) | 睡眠音乐播放控制方法、装置、电子设备及存储介质 | |
CN107743289B (zh) | 一种智能家居场景中的智能音箱控制方法 | |
US10186140B2 (en) | Systems and methods for detecting gesture events in a smart home system | |
CN105700389B (zh) | 一种智能家庭自然语言控制方法 | |
EP3512410A1 (en) | Sleep system | |
CN107085511B (zh) | 控制方法、控制装置以及设备 | |
CN107477793A (zh) | 一种空气净化器、空气净化器控制系统及方法 | |
CN105318503A (zh) | 风扇及空调器的控制系统和风扇及空调器的控制方法 | |
TW201524466A (zh) | 睡眠輔助系統及其作業方法 | |
CN109497945B (zh) | 一种睡眠状态控制方法及装置 | |
CN110332674B (zh) | 一种空调控制方法、空调及计算机可读介质 | |
CN110946745A (zh) | 智能按摩设备控制方法、装置、服务器及存储介质 | |
WO2015196995A1 (zh) | 家用设备控制方法及系统、控制设备、终端设备 | |
CN105099386A (zh) | 家用电器的控制系统和控制方法 | |
CN111077785A (zh) | 一种唤醒方法、装置、终端及存储介质 | |
CN105716195A (zh) | 空调器的控制系统及空调器的控制方法 | |
WO2021082131A1 (zh) | 空气调节设备、温度控制方法和装置 | |
CN106885332B (zh) | 室内环境的调控方法、装置以及音箱 | |
CN208283794U (zh) | 智能家居语音交互智能终端 | |
CN111025919B (zh) | 智能温控设备控制方法、装置、服务器及存储介质 | |
CN113465143B (zh) | 空调制热时防高频传递音的控制方法、装置及空调 | |
CN112164398B (zh) | 语音设备及其唤醒方法、装置以及存储介质 | |
KR20120051122A (ko) | 유비쿼터스 센서 네트워크에서 수면환경 제공 시스템 및 그 방법 | |
CN111105790B (zh) | 一种智能外部设备、智能音箱系统及分布式收音方法 | |
CN113883669A (zh) | 空调器的助眠控制方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |