CN110634488B - 信息处理方法、装置和系统以及存储介质 - Google Patents

信息处理方法、装置和系统以及存储介质 Download PDF

Info

Publication number
CN110634488B
CN110634488B CN201910951093.9A CN201910951093A CN110634488B CN 110634488 B CN110634488 B CN 110634488B CN 201910951093 A CN201910951093 A CN 201910951093A CN 110634488 B CN110634488 B CN 110634488B
Authority
CN
China
Prior art keywords
wake
server
response
instruction
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910951093.9A
Other languages
English (en)
Other versions
CN110634488A (zh
Inventor
周岭松
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xiaomi Technology Wuhan Co Ltd
Original Assignee
Beijing Xiaomi Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Intelligent Technology Co Ltd filed Critical Beijing Xiaomi Intelligent Technology Co Ltd
Priority to CN201910951093.9A priority Critical patent/CN110634488B/zh
Publication of CN110634488A publication Critical patent/CN110634488A/zh
Application granted granted Critical
Publication of CN110634488B publication Critical patent/CN110634488B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/28Constructional details of speech recognition systems
    • G10L15/30Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00Speaker identification or verification
    • G10L17/22Interactive procedures; Man-machine interfaces
    • G10L17/24Interactive procedures; Man-machine interfaces the user being prompted to utter a password or a predefined phrase
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2816Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home

Abstract

本公开是关于一种信息处理方法、装置和系统,应用于电子设备。所述信息处理方法包括:接收唤醒指令,并向服务器发送唤醒应答请求;从所述服务器接收并解析唤醒应答指令;在所述唤醒应答指令包括所述服务器分发的同步应答数据和与所述同步应答数据相关联的分发时间信息时,基于时间同步算法,获取所述电子设备与所述服务器之间的当前时钟误差;基于所述分发时间信息和所述当前时钟误差,确定同步应答时刻;在确定的所述同步应答时刻,播放包含所述同步应答数据的语音。该信息处理方法能够实现多个设备的同步唤醒应答,对设备的性能要求低,并且使多个设备的唤醒应答不受环境噪声的影响,避免了出现多个设备争相唤醒应答的情况,提升了用户体验。

Description

信息处理方法、装置和系统以及存储介质
技术领域
本公开涉及信息处理领域,尤其涉及一种信息处理方法、装置和系统以及存储介质。
背景技术
随着智能家居技术的发展和AIot战略被各大公司作为长期规划,越来越多的智能设备落地到家居环境中,家居环境中拥有多台智能设备的场景已经十分普遍。另一方面,语音交互已经成为许多智能设备的重要功能,因此语音唤醒是智能交互的入口。然而,多个智能设备可能面临非同时的多个唤醒应答的问题。当智能家居环境中的所有智能设备都能够应答同一唤醒词时,所有设备先后回答“我在”,这会给用户造成非常糟糕的用户体验。
目前为解决这种争相唤醒应答最常用的方法是在所有接收到唤醒词的设备中决策出一个设备来进行应答。这个决策可以是基于语音能量、信噪比(SNR)或者两者的结合。另外,关于语音能量、信噪比的决策,可能需要设备侧具有较强的计算能力和较快的计算速度。
不管是基于能量还是基于信噪比,准确性都受背景噪声影响很大,鲁棒性低。并且当网络抖动导致某个设备将信息传到云端的时间晚于其他设备时,仍然存在多个设备争相唤醒的情况,造成不好的用户体验。
发明内容
为了解决现有技术中存在的上述问题,本公开提供一种信息处理方法、装置和系统以及记录介质。
按照本公开实施例的第一方面,提供一种信息处理方法,该信息处理方法包括:接收唤醒指令,并向服务器发送唤醒应答请求;从所述服务器接收唤醒应答指令并解析所述唤醒应答指令;在所述唤醒应答指令包括所述服务器分发的同步应答数据和与所述同步应答数据相关联的分发时间信息时:基于时间同步算法,获取所述电子设备与所述服务器之间的当前时钟误差;基于所述分发时间信息和所述当前时钟误差,确定同步应答时刻;在确定的所述同步应答时刻,播放包含所述同步应答数据的语音
在可选实施例中,可以在所述唤醒应答请求携带所述唤醒指令的接收时间信息,所述接收时间信息由所述服务器用于确定是否对所述唤醒指令进行应答。
在可选实施例中,所述信息处理方法还包括:在所述唤醒应答指令指示不对所述唤醒指令进行应答时,所述电子设备不应答所述唤醒指令。
在可选实施例中,可以在媒体访问控制MAC层中执行所述时间同步算法。
在可选实施例中,周期性执行所述时间同步算法,并采用一阶递归公式来优化通过执行所述时间同步算法得到的所述时钟误差。
按照本公开实施例的第二方面,提供一种信息处理方法,应用于服务器,其特征在于,包括:接收所述电子设备根据唤醒指令发送的唤醒应答请求;向所述电子设备发送唤醒应答指令;在所述唤醒应答指令包括分发的同步应答数据和与所述同步应答数据相关联的分发时间信息时:基于时间同步算法,获取所述电子设备与所述服务器之间的当前时钟误差;基于所述分发时间信息和所述当前时钟误差,确定所述电子设备人同步应答时刻;在确定的所述同步应答时刻,通过所述电子设备播放包含所述同步应答数据的语音。
按照本公开实施例的第三方面,提供一种信息处理装置,该装置包括:收发单元,用于接收唤醒指令,并向服务器发送唤醒应答请求;解析单元,从所述服务器接收唤醒应答指令并解析所述唤醒应答指令;获取单元,用于在所述唤醒应答指令包括所述服务器分发的同步应答数据和与所述同步应答数据相关联的分发时间信息时:基于时间同步算法,获取所述信息处理装置与所述服务器之间的当前时钟误差;确定单元,用于基于所述分发时间信息和所述当前时钟误差,确定同步应答时刻;播放单元,用于在确定的所述同步应答时刻,播放包含所述同步应答数据的语音。
在可选实施例中,所述装置还包括:信息携带单元,用于在所述唤醒应答请求中携带所述唤醒指令的接收时间信息,所述接收时间信息由所述服务器用于确定是否对所述唤醒指令进行应答。
在可选实施例中,在所述解析单元接收的所述唤醒应答指令指示不对所述唤醒指令进行应答时,所述电子设备不应答所述唤醒指令。
在可选实施例中,所述获取单元在媒体访问控制层MAC中执行所述时间同步算法。
在可选实施例中,所述获取单元周期性执行所述时间同步算法,并采用一阶递归公式来优化通过执行所述时间同步算法得到的所述时钟误差。
按照本公开实施例的第四方面,提供一种信息处理方法,应用于电子设备,其特征在于,包括:通过多个电子设备接收唤醒指令,并分别向服务器发送唤醒应答请求;从所述服务器接收唤醒应答指令并解析所述唤醒应答指令;在所述唤醒应答指令中包括所述服务器分发的同步应答数据和与所述同步应答数据相关联的分发时间信息时:基于时间同步算法,获取所述多个电子设备与所述服务器之间的当前时钟误差;对于每个电子设备,基于所述分发时间信息和所述当前时钟误差,确定同步应答时刻;在确定的所述同步应答时刻,所述多个电子设备同步地播放包含所述同步应答数据语音。
按照本公开实施例的第四方面,提供一种信息处理系统,该系统包括前述涉及的信息处理装置。
本公开的实施例提供的技术方案可以包括以下有益效果:通过本公开实施例提供的电子设备的信息处理方法、装置和系统,能够实现多个设备对于同一唤醒词的同步唤醒应答,算法复杂度低,对设备的性能要求低,不需要设备侧具有较强的计算能力和较快的计算速度,而是通过精准的时间同步算法实现了各个电子设备的同步唤醒应答,并且使多个设备的唤醒应答不受环境噪声的影响,避免了出现多个设备先后争相唤醒应答的情况,提升了用户体验。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本发明。
附图说明
通过参考附图阅读下文的详细描述,本公开实施方式的上述以及其他目的、特征和优点将变得易于理解。此处的附图被并入说明书中并构成本说明书的一部分,以示例性而非限制性的方式示出了本公开的若干实施方式,并与说明书一起用于解释本发明的原理,其中:
图1示出了根据本公开的示例性实施例的一种信息处理方法的流程图;
图2示出了根据本公开的示例性实施例的一种信息处理方法的流程图;
图3示出了根据本公开的示例性实施例的一种信息处理装置的示意性方框图;
图4示出了根据本公开的示例性实施例的一种信息处理方法的流程图;
图5示出了根据本公开的示例性实施例的一种信息处理装置的示意性方框图;
图6示出了根据本公开的示例性实施例的一种信息处理装置的示意性方框图。
在附图中,相同或对应的标号表示相同或对应的部分。
具体实施方式
下面将参考若干示例性实施方式来描述本公开的原理和精神。应当理解,给出这些实施方式仅仅是为了使本领域技术人员能够更好地理解进而实现本公开,而并非以任何方式限制本公开的范围。
需要注意,虽然本文中使用“第一”、“第二”等表述来描述本公开的实施方式的不同模块、步骤和数据等,但是“第一”、“第二”等表述仅是为了在不同的模块、步骤和数据等之间进行区分,而并不表示特定的顺序或者重要程度。实际上,“第一”、“第二”等表述完全可以互换使用。
本公开实施例适用于多个电子设备对于用户发出的语音命令进行应答的场景。用户发出的语音命令可以包含能够唤醒电子设备的特定唤醒词。例如,在智能家居的场景下,存在多个电子设备具有语音交互功能。假设,这些电子设备都处于语音接收空间范围内,并且所有电子设备的唤醒词都相同,当用户喊出唤醒词时,该空间范围内的多个设备都接收到了唤醒指令,并均向服务器请求唤醒应答声音数据用于在扬声器中播放。示例性地,这个场景下的任一电子设备可以执行如图1所示的信息处理方法。
图1示出了根据本公开的示例性实施例的一种信息处理方法的流程图。如图1所示,该信息处理方法100执行以下工作过程:
在步骤S101中,接收唤醒指令,向服务器发送唤醒应答请求。
在步骤S102中,从服务器接收唤醒应答指令并解析唤醒应答指令。
在步骤S103中,在唤醒应答指令包括服务器分发的同步应答数据和与同步应答数据相关联的分发时间信息时:基于时间同步算法,获取电子设备与服务器之间的当前时钟误差。
在步骤S104中,基于分发时间信息和当前时时钟误差,确定同步应答时刻;
在步骤S105中,在确定的同步应答时刻,播放包含同步应答数据的语音。
应当注意到,本公开实施例的服务器可以是本地服务器、边缘服务器、云端服务器或本领域中任何其他方式的服务器。关于本地服务器,例如多个电子设备中计算或处理能力较强的一个“中央”电子设备可以充当本地服务器。关于边缘服务器,即将业务功能部署在最接近用户的具有一定计算能力的边缘计算设备上,比如家庭网关。关于云端服务器,例如可以是通过因特网连接的远端服务器。
在上述场景下,服务器向各个电子设备分发应答数据,并标记上分发时间T0,亦即,上述分发时间信息T0。各个电子设备接收到唤醒词数据和分发时间T0并按照约定好的在T0+A(A为常数,实验中为500ms)播放出唤醒语音。然而对于各个电子设备来说,它们与其他设备之间的分发时间T0相差很大,因而需要保证所有设备的分发时间T0对等。通过时钟同步算法,各个电子设备能够计算出自己的时钟与服务器时钟之间的误差,从而所有的设备对标一个统一的分发时间T0。
采用该实施例中提供的信息处理方法,在存在多个电子设备的情况下,通过执行时间同步算法,计算电子设备与服务器之间的时钟误差,从而能够实现多个电子设备的同步唤醒应答,并且使多个电子设备的唤醒应答不受环境噪声的影响,避免了出现多个电子设备争相唤醒应答的情况,提升了用户体验。
应当注意到,时间同步算法可以在电子设备端各自计算自己与服务器的时钟误差,也可以由服务器端进行计算之后发送给电子设备。
在示例性实施例中,在接收唤醒指令,向服务器发送唤醒应答请求时,可以在唤醒应答请求中携带唤醒指令的时间信息T’。
在示例性实施例中,可以通过执行时间同步算法,根据电子设备和服务器的网络传输延迟、向服务器发送唤醒应答请求的时间、服务器收到唤醒应答请求的时间、服务器分发唤醒应答数据和唤醒应答数据携带的分发时间信息的时间、以及获取唤醒应答数据和分发时间信息的时间,计算时钟误差。例如,通过下列公式执行时间同步算法并计算时钟误差:
Δ=[(T2-T1)-(T4-T3)+(τ21)]/2
其中Δ表示电子设备与服务器之间的时钟误差,τ1和τ2分别表示电子设备和服务器的网络传输延迟,T1表示电子设备向服务器发送用于同步时间的时间信息的时刻,T2表示服务器收到该用于时间同步的时间信息的时刻,T3表示服务器向电子设备发送用于同步的时间信息的时刻,T4表示电子设备接收该用于同步的时间信息的时刻。时间信息包含时间数据,例如,年月日分秒等这样的时间数据。在本公开的实施例中,基于时间同步算法,可以使电子设备与服务器的时间数据对齐,以实现同步。
在示例性实施例中,可以在媒体访问控制层MAC中执行时间同步算法,使电子设备和服务器的网络传输延迟尽可能接近相同。例如,在媒体访问控制层MAC中执行时间同步算法时,可以通过下列公式表示计算电子设备与服务器之间的时钟误差:
Δ≈[(T2-T1)-(T4-T3)]/2。
在示例性实施例中,可以周期性执行时间同步算法,或者基于事件触发来执行时间同步事件。另外,可以采用一阶递归方式来优化通过执行时间同步算法得到的时钟误差。例如,采用下列一阶递归公式来优化所得到的误差:
Δ(l)=αΔ(l-1)+(1-α)Δ′(l)
其中Δ′(l)为按照前述公式计算出来的Δ,Δ(l)为实际用于同步计算时本次同步后时钟误差,Δ(l-1)是前一次同步后的时间差,α为平滑因子,一般取值0.95-0.999之间,例如在一个示例中,α可以取常数0.985。
示例性地,服务器接收到电子设备发送的唤醒指令之后,可能需要生成唤醒应答指令。根据服务器端进行的判断和决策,唤醒应答指令可能指令电子设备进行应答或者不指令电子设备应答。这个判断过程是基于电子设备发送的接收时间信息和电子设备的时钟误差进行的。
在示例性实施例中,如果第一设备收到唤醒指令的时间信息为第一信息T’1,第二设备收到唤醒指令的时间信息为第二信息T’2,则通过计算第一信息与第一设备的时钟误差之和,以及第二信息与第二设备的时钟误差之和,并对计算得到的两个和数进行比较,在它们大约相等的情况下,服务器确定已经应答了唤醒请求,不再重复进行应答。例如,通过计算下列公式:
T’11≈T’22
由于概率性存在抖动等网络传输问题,对于用户的同一次唤醒指令,各个电子设备的唤醒应答请求前后不同时间到达服务器,导致服务器误以为用户发起了多次唤醒指令从而产生多次应答的问题。为了解决这一问题,各个电子设备在向服务器发起应答数据请求时,均需告知服务器其当前采集到用户唤醒指令的时间。对于同一次唤醒,设备1在T’1时刻收到唤醒指令,设备2在T’2时刻收到唤醒指令,由于网络原因导致服务器在应答了设备1的请求后接收到了来自设备2的请求,通过计算T’11≈T’22,服务器确定该次唤醒请求已经应答过了,不再次重复进行应答。这样,借助于时间同步算法,彻底解决了因为网络问题引起的多次争相唤醒应答。
图2示出了根据本公开的示例性实施例的一种信息处理方法的流程图。该信息处理方法可以应用于服务器。示例性地,服务器可以是云端服务器、本地服务器、边缘服务器或任何本领域的其他形式的服务器。如图2所示,该信息处理方法200可以包括以下工作过程:
在步骤S201中,接收电子设备根据唤醒指令发送的唤醒应答请求;
在步骤S202中,向电子设备发送唤醒应答指令;
的步骤S203中,在唤醒应答指令包括分发的同步应答数据和与同步应答数据相关联的分发时间信息时,基于时间同步算法,获取与电子设备之间的当前时钟误差;
在步骤S204中,基于分发时间信息和当前时钟误差,确定电子设备的同步应答时刻;
在步骤S205中,在确定的同步应答时刻,通过电子设备播放包含同步应答数据的语音。
示例性地,在所有设备对同一唤醒词进行同步应答之后,在一种可能的情况下,用户会发出包含执行相应任务的语音的控制命令。此时,可以由服务器来决策是由一个设备还是由多个电子设备来共同执行相应任务。在服务器能够明确地决策出由哪一个或哪一些设备执行相应任务之前,用户和系统之间还可能存在多轮对话。在这种情况下,这个多轮对话可以由所有设备进行应答,也可以由服务器指定一个设备来进行应答。在用户和设备进行的多轮对话结束之后,即,在服务器明确了应当具体由哪一个或哪一些设备来执行任务之后,设备即进入任务执行阶段。例如,由智能灯具自己关灯,或者由多个小爱音箱同步播放音乐。
因此,在一个示例性实施例中,根据本公开实施例的信息处理方法的工作过程可以包含两个阶段,即,唤醒阶段和执行阶段。在唤醒阶段所有设备同步工作。在执行阶段,由一个设备或多个电子设备执行相应任务。
在另一个示例性实施例中,根据本公开实施例的信息处理方法的工作过程可以包含三个阶段:唤醒阶段、对话阶段、和执行阶段。在唤醒阶段所有设备同步工作。在对话阶段,用户和设备之间进行多轮对话,以明确是由一个设备还是多个电子设备执行后续任务和/或需要执行何种具体任务。在执行阶段,由确定的一个设备或多个电子设备执行相应任务。
图3示出了根据本公开的示例性实施例的一种信息处理装置的示意性方框图。
如图3所示,该用于信息处理装置300可以包括:收发单元302,它接收唤醒指令,向服务器发送唤醒应答请求。解析单元304,用于从服务器接收唤醒应答指令并解析唤醒应答指令。获取单元306,用于在唤醒应答指令包括服务器分发的同步应答数据和与同步应答数据相关联的分发时间信息时:基于时间同步算法,获取信息处理装置与服务器之间的当前时钟误差。确定单元308,用于基于分发时间信息和当前时钟误差,确定同步应答时刻。播放单元310,用于在确定的同步应答时刻,播放包含同步应答数据的语音。
在示例性实施例中,获取单元306通过下列公式执行时间同步算法并计算时钟误差:
Δ=[(T2-T1)-(T4-T3)+(τ21)]/2
其中Δ表示电子设备与服务器之间的时钟误差,τ1和τ2分别表示电子设备和服务器的网络传输延迟,T1表示向服务器发送唤醒应答请求的时刻,T2表示服务器收到唤醒应答请求的时刻,T3表示服务器分发唤醒应答数据和唤醒应答数据携带的分发时间信息的时刻,T4表示接收唤醒应答数据和分发时间信息的时刻。
在示例性实施例中,获取单元306在媒体访问控制层MAC中执行时间同步算法,并通过下列公式计算电子设备与服务器之间的时钟误差:
Δ≈[(T2-T1)-(T4-T3)]/2。
在示例性实施例中,获取单元306采用下列一阶递归公式来优化所得到的时钟误差:
Δ(l)=αΔ(l-1)+(1-α)Δ′(l)
其中Δ′(l)为按照前述公式计算出来的时钟误差Δ,Δ(l)为实际用于同步计算时本次同步后时钟误差,Δ(l-1)是前一次同步后的时间差,α为平滑因子,取常数0.985。
在示例性实施例中,可选择地,收发单元302还可以包括:信息携带单元303,用于在唤醒应答请求中携带唤醒指令的接收时间信息,接收时间信息由服务器用于确定是否对唤醒指令进行应答。
在示例性实施例中,在解析单元304接收的唤醒应答指令指示不对唤醒指令进行应答时,电子设备不应答唤醒指令。
在示例性实施例中,获取单元306在媒体访问控制层MAC中执行时间同步算法。
在示例性实施例中,获取单元306周期性执行时间同步算法,并采用一阶递归公式来优化通过执行时间同步算法得到的时钟误差。
在示例性实施例中,例如,如果第一设备收到唤醒指令的时间信息为第一信息T’1,第二设备收到唤醒指令的时间信息为第二信息T’2,则服务器通过计算下列公式:T’11≈T’22,确定已经应答了唤醒请求,则不再重复进行应答。
图4示出了根据本公开的示例性实施例的另一种信息处理方法的流程图。该信息处理方法可以应用于多个电子设备。
如图4所示,该信息处理方法400执行以下处理过程:
在步骤S401中,通过多个电子设备接收唤醒指令,并分别向服务器发送唤醒应答请求。
在步骤S402中,从服务器接收唤醒应答指令并解析唤醒应答指令。
在步骤S403中,在唤醒应答指令中包括服务器分发的同步应答数据和与同步应答数据相关联的分发时间信息时:基于时间同步算法,获取多个电子设备与服务器之间的当前时钟误差。
在步骤S404中,对于每个电子设备,基于分发时间信息和当前时钟误差,确定同步应答时刻。
在步骤S405中,在确定的同步应答时刻,多个电子设备同步地播放唤醒语音。
在本公开的一个示例性实施例中,提供了一种信息处理系统,该信息处理系统可以包括多个如前的信息处理装置。
通过该信息处理系统能够实现多个电子设备的同步唤醒应答,算法复杂度低,对设备的性能要求低,通过精准的时间同步算法实现了各个电子设备的同步唤醒应答,并且使多个电子设备的唤醒应答不受环境噪声的影响,避免了出现多个电子设备争相唤醒应答的情况。
在示例性实施例中,在唤醒应答请求中可以携带唤醒指令的时间信息。例如,在唤醒应答请求中携带唤醒指令的时间信息T’,从而借助时间同步算法,彻底解决了因为网络问题引起的多次争相唤醒应答。
在示例性实施例中,如果多个电子设备中的第一设备收到唤醒指令的时间信息为第一信息T’1,第二设备收到唤醒指令的时间信息为第二信息T’2,则服务器通过计算下列公式:T’11≈T’22,确定已经应答了唤醒请求,不再重复进行应答。
如前,由于概率性存在抖动等网络传输问题,对于用户的同一次唤醒指令,各个电子设备的唤醒应答请求前后不同时间到达服务器,导致服务器误以为用户发起了多次唤醒指令从而产生多次应答的问题。为了解决这一问题,各个电子设备在向服务器发起应答数据请求时,均需告知服务器其当前采集到用户唤醒指令的时间。对于同一次唤醒,设备1在T’1时刻收到唤醒指令,设备2在T’2时刻收到唤醒指令,由于网络原因导致服务器在应答了设备1的请求后接收到了来自设备2的请求,通过计算T’11≈T’22,服务器确定该次唤醒请求已经应答过了,不会再次重复应答。
本公开的实施例从心理声学角度出发,提出了一种同步唤醒的方法、装置和系统,将时间同步算法用于解决多设备争相应答的问题。心理声学哈斯效应显示两个声音前后到达耳朵的时间小于30ms则人耳感知为一个声源。当用户喊出唤醒词时,接收到指令的设备都会应答“我在”。通过时间同步算法,保证各个智能设备回答“我在”的时间差控制在微妙级别,而人耳无法区分出这些误差,主观感知当前空间内只有一个智能设备应答了,从而提升多设备智能家居环境下的用户体验。
按照本公开的实施例,一方面,服务器分发的应答数据可以携带时间信息,借助时间同步算法计算得到的各个电子设备的时钟误差,实现唤醒的同步应答。另一方面,设备向服务器发送的应答请求可以携带当前唤醒指令的时间信息,借助时间同步算法,彻底解决了因为网络问题引起的多次(争相)唤醒应答。通过本公开实施例提供的信息处理方法、装置和系统,不仅能够通过精准的时间同步算法实现各个电子设备的同步唤醒应答,而且该时间同步算法的复杂度低,对设备的性能要求低,使得多个电子设备的唤醒应答不受环境噪声的影响,避免了出现多个电子设备争相唤醒应答的情况,提升了用户体验。
图5示出了根据本公开的示例性实施例的一种信息处理装置的示意性方框图。
如图5所示,例如,装置500可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图5,装置500可以包括以下一个或多个组件:处理组件502,存储器504,电力组件506,多媒体组件504,音频组件510,输入/输出(I/O)的接口512,传感器组件514,以及通信组件516。
处理组件502通常控制装置500的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件502可以包括一个或多个处理器520来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件502可以包括一个或多个模块,便于处理组件502和其他组件之间的交互。例如,处理组件502可以包括多媒体模块,以方便多媒体组件504和处理组件502之间的交互。
存储器504被配置为存储各种类型的数据以支持在设备500的操作。这些数据的示例包括用于在装置500上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器504可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电力组件506为装置500的各种组件提供电力。电力组件506可以包括电源管理方法,一个或多个电源,及其他与为装置500生成、管理和分配电力相关联的组件。
多媒体组件504包括在装置500和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件504包括一个前置摄像头和/或后置摄像头。当设备500处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜方法或具有焦距和光学变焦能力。
音频组件510被配置为输出和/或输入音频信号。例如,音频组件510包括一个麦克风(MIC),当装置500处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器504或经由通信组件516发送。在一些实施例中,音频组件510还包括一个扬声器,用于输出音频信号。
I/O接口512为处理组件502和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件514包括一个或多个传感器,用于为装置500提供各个方面的状态评估。例如,传感器组件514可以检测到设备500的打开/关闭状态,组件的相对定位,例如组件为装置500的显示器和小键盘,传感器组件514还可以检测装置500或装置500一个组件的位置改变,用户与装置500接触的存在或不存在,装置500方位或加速/减速和装置500的温度变化。传感器组件514可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件514还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件514还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件516被配置为便于装置500和其他设备之间有线或无线方式的通信。装置500可以接入基于通信标准的无线网络,如WiFi,2G,3G,4G或5G,或它们的组合。在一个示例性实施例中,通信组件516经由广播信道接收来自外部广播管理方法的广播信号或广播相关信息。在一个示例性实施例中,通信组件516还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置500可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器504,上述指令可由装置500的处理器420执行以完成上述方法。例如,非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
一种非临时性计算机可读存储介质,当存储介质中的指令由移动终端的处理器执行时,使得移动终端能够执行如图1所示出的并在说明书的相应部分中所描述的信息处理方法。
图6示出了根据本公开的示例性实施例的一种信息处理装置的示意性方框图。
如图6所示,例如,装置600可以被提供为一服务器。参照图6,装置600包括处理组件622,其进一步包括一个或多个处理器,以及由存储器632所代表的存储器资源,用于存储可由处理组件622的执行的指令,例如应用程序。存储器632中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外,处理组件622被配置为执行指令,以执行如图1所示出的并在说明书的相应部分中所描述的信息处理方法。
装置600还可以包括一个电源组件626被配置为执行装置600的电源管理,一个有线或无线网络接口650被配置为将装置600连接到网络,和一个输入输出(I/O)接口658。装置600可以操作基于存储在存储器632的操作方法,例如Windows ServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM或类似。
尽管在附图中以特定的顺序描述操作,但是不应将其理解为要求按照所示的特定顺序或是串行顺序来执行这些操作,或是要求执行全部所示的操作以得到期望的结果。在特定环境中,多任务和并行处理可能是有利的。
本公开的方法、装置和系统能够利用标准编程技术来完成,利用基于规则的逻辑或者其他逻辑来实现各种方法步骤。还应当注意的是,此处以及权利要求书中使用的词语“装置”和“模块”意在包括使用一行或者多行软件代码的实现和/或硬件实现和/或用于接收输入的设备。
此处描述的任何步骤、操作或程序可以使用单独的或与其他设备组合的一个或多个硬件或软件模块来执行或实现。在一个实施方式中,软件模块使用包括包含计算机程序代码的计算机可读介质的计算机程序产品实现,其能够由计算机处理器执行用于执行任何或全部的所描述的步骤、操作或程序。
在本公开实施例提供的信息处理方法、装置和系统以及存储介质中,所采用时间同步算法的复杂度低,对设备的性能要求低,并且通过精准的时间同步算法实现了各个电子设备的同步唤醒应答,使多个电子设备的唤醒应答不受环境噪声的影响,避免了出现多个电子设备争相唤醒应答的情况,提升了用户体验。
出于示例和描述的目的,已经给出了本公开实施的前述说明。前述说明并非是穷举性的也并非要将本公开限制到所公开的确切形式,根据上述教导还可能存在各种变形和修改,或者是可能从本公开的实践中得到各种变形和修改。选择和描述这些实施例是为了说明本公开的原理及其实际应用,以使得本领域的技术人员能够以适合于构思的特定用途来以各种实施方式和各种修改而利用本公开。
本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (9)

1.一种信息处理方法,应用于多个电子设备,其特征在于,该信息处理方法包括:
接收唤醒指令,并向服务器发送唤醒应答请求,所述唤醒应答请求携带所述多个电子设备各自接收到所述唤醒指令的时间信息;
从所述服务器接收唤醒应答指令并解析所述唤醒应答指令,所述唤醒应答指令用于指示所述多个电子设备应答或不应答所述唤醒指令;
所述多个电子设备应答或不应答所述唤醒指令由所述服务器采用如下方式确定:
对于同一次唤醒,若所述服务器在应答了第一电子设备的请求后接收到了来自第二电子设备的请求,通过计算
Figure DEST_PATH_IMAGE001
,确定该次唤醒请求已经应答过了,不再次重复进行应答;
其中,所述
Figure 31286DEST_PATH_IMAGE002
为所述第一电子设备接收到唤醒指令的时刻,所述
Figure DEST_PATH_IMAGE003
为所述第二电子设备接收到唤醒指令的时刻,所述
Figure 501582DEST_PATH_IMAGE004
为基于时间同步算法确定的所述第一电子设备与所述服务器之间的时钟误差,所述
Figure DEST_PATH_IMAGE005
为基于时间同步算法确定的所述第二电子设备与所述服务器之间的时钟误差。
2.如权利要求1所述的信息处理方法,其特征在于,所述方法还包括:在媒体访问控制MAC层中执行所述时间同步算法。
3.如权利要求2所述的信息处理方法,其特征在于,所述方法还包括:周期性执行所述时间同步算法,并采用一阶递归方式来优化通过执行所述时间同步算法得到的所述时钟误差。
4.一种信息处理装置,其特征在于,包括:
收发单元,用于接收唤醒指令,并向服务器发送唤醒应答请求,所述唤醒应答请求携带多个电子设备各自接收到所述唤醒指令的时间信息;
解析单元,用于从所述服务器接收唤醒应答指令并解析所述唤醒应答指令,所述唤醒应答指令用于指示所述多个电子设备应答或不应答所述唤醒指令;
所述多个电子设备应答或不应答所述唤醒指令由所述服务器采用如下方式确定:
对于同一次唤醒,若所述服务器在应答了第一电子设备的请求后接收到了来自第二电子设备的请求,通过计算
Figure 903744DEST_PATH_IMAGE001
,确定该次唤醒请求已经应答过了,不再次重复进行应答;
其中,所述
Figure 307044DEST_PATH_IMAGE002
为所述第一电子设备接收到唤醒指令的时刻,所述
Figure 769249DEST_PATH_IMAGE003
为所述第二电子设备接收到唤醒指令的时刻,所述
Figure 257999DEST_PATH_IMAGE004
为所述第一电子设备与所述服务器之间的时钟误差,所述
Figure 729432DEST_PATH_IMAGE005
为所述第二电子设备与所述服务器之间的时钟误差。
5.如权利要求4所述的信息处理装置,其特征在于,在媒体访问控制层MAC中执行所述时间同步算法。
6.如权利要求5所述的信息处理装置,其特征在于,周期性执行所述时间同步算法,并采用一阶递归公式来优化通过执行所述时间同步算法得到的所述时钟误差。
7.一种信息处理装置,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:执行如权利要求1-3中任一项所述的信息处理方法。
8.一种非临时性计算机可读存储介质,当所述存储介质中的指令由电子设备的处理器执行时,使得电子设备能够执行如权利要求1-3中任一项所述的信息处理方法。
9.一种信息处理系统,包括如权利要求4所述的多个信息处理装置,以及服务器。
CN201910951093.9A 2019-10-08 2019-10-08 信息处理方法、装置和系统以及存储介质 Active CN110634488B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910951093.9A CN110634488B (zh) 2019-10-08 2019-10-08 信息处理方法、装置和系统以及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910951093.9A CN110634488B (zh) 2019-10-08 2019-10-08 信息处理方法、装置和系统以及存储介质

Publications (2)

Publication Number Publication Date
CN110634488A CN110634488A (zh) 2019-12-31
CN110634488B true CN110634488B (zh) 2022-04-15

Family

ID=68975713

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910951093.9A Active CN110634488B (zh) 2019-10-08 2019-10-08 信息处理方法、装置和系统以及存储介质

Country Status (1)

Country Link
CN (1) CN110634488B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112331197A (zh) * 2020-08-03 2021-02-05 北京京东尚科信息技术有限公司 电子设备的响应方法、响应装置、计算机系统及存储介质
CN112017640B (zh) * 2020-09-17 2024-03-26 北京小米松果电子有限公司 唤醒决策方法、装置、电子设备及存储介质
CN113920619B (zh) * 2021-09-29 2024-03-29 南京金盾公共安全技术研究院有限公司 一种出租屋管理系统
CN115148204A (zh) * 2022-06-20 2022-10-04 青岛海尔科技有限公司 语音唤醒的处理方法及装置、存储介质及电子装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1176493A2 (en) * 2000-07-28 2002-01-30 Jan Pathuel Method and system of securing data and systems
CN101426223A (zh) * 2007-11-02 2009-05-06 大唐移动通信设备有限公司 一种测量传输时延的方法、系统和设备
CN103262481A (zh) * 2010-12-17 2013-08-21 思科技术公司 有向无环图(dag)中的动态重路由调度
CN105680969A (zh) * 2015-12-31 2016-06-15 浙江中控技术股份有限公司 一种时钟同步方法及装置
CN105897530A (zh) * 2016-06-15 2016-08-24 北京云知声信息技术有限公司 基于语音的智能家居设备整体控制方法、系统及装置
CN108880722A (zh) * 2017-05-10 2018-11-23 深圳市中兴软件有限责任公司 时钟同步的方法、系统和光传输设备
CN109378000A (zh) * 2018-12-19 2019-02-22 科大讯飞股份有限公司 语音唤醒方法、装置、系统、设备、服务器及存储介质

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9778957B2 (en) * 2015-03-31 2017-10-03 Stitch Fix, Inc. Systems and methods for intelligently distributing tasks received from clients among a plurality of worker resources
US10595274B2 (en) * 2017-06-29 2020-03-17 Itron Global Sarl Time synchronization in resource constrained networks

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1176493A2 (en) * 2000-07-28 2002-01-30 Jan Pathuel Method and system of securing data and systems
CN101426223A (zh) * 2007-11-02 2009-05-06 大唐移动通信设备有限公司 一种测量传输时延的方法、系统和设备
CN103262481A (zh) * 2010-12-17 2013-08-21 思科技术公司 有向无环图(dag)中的动态重路由调度
CN105680969A (zh) * 2015-12-31 2016-06-15 浙江中控技术股份有限公司 一种时钟同步方法及装置
CN105897530A (zh) * 2016-06-15 2016-08-24 北京云知声信息技术有限公司 基于语音的智能家居设备整体控制方法、系统及装置
CN108880722A (zh) * 2017-05-10 2018-11-23 深圳市中兴软件有限责任公司 时钟同步的方法、系统和光传输设备
CN109378000A (zh) * 2018-12-19 2019-02-22 科大讯飞股份有限公司 语音唤醒方法、装置、系统、设备、服务器及存储介质

Also Published As

Publication number Publication date
CN110634488A (zh) 2019-12-31

Similar Documents

Publication Publication Date Title
CN110634488B (zh) 信息处理方法、装置和系统以及存储介质
WO2019183854A1 (zh) 寻呼同步指示方法及装置、寻呼同步方法及装置和基站
EP3107086A1 (en) Method and device for playing a multimedia file
KR102300257B1 (ko) 오디오 처리 방법, 장치 및 저장 매체
CN111651263A (zh) 移动终端的资源处理方法、装置、计算机设备及存储介质
US20220124646A1 (en) Method and apparatus for sending synchronization signal
US20200374939A1 (en) Method and apparatus for configuring random access occasion, method and apparatus for random access
CN110970046A (zh) 一种音频数据处理的方法及装置、电子设备、存储介质
EP3863344A1 (en) Terminal positioning method, apparatus, electronic device and storage medium
CN111540350B (zh) 一种智能语音控制设备的控制方法、装置及存储介质
CN112185388B (zh) 语音识别方法、装置、设备及计算机可读存储介质
CN112133302A (zh) 预唤醒终端的方法、装置及存储介质
US11388459B2 (en) Method and apparatus for determining bandwidth, and electronic device and storage medium
US11856538B2 (en) Method and apparatus for broadcasting configuration information of synchronizing signal block, and method and apparatus for receiving configuration information of synchronizing signal block
US11737022B2 (en) Delay adjustment method and device, electronic device and storage medium
WO2020142997A1 (zh) 随机接入方法及装置
US20210352600A1 (en) Vehicle-to-everything synchronization method and device
CN111966412A (zh) 唤醒终端的方法、装置及存储介质
CN111857849A (zh) 唤醒处理方法、装置、电子设备及存储介质
US11956755B2 (en) Method and apparatus for transmitting paging signaling
CN110428828B (zh) 一种语音识别方法、装置和用于语音识别的装置
CN112230982A (zh) 素材处理方法、装置、电子设备及存储介质
CN112489653B (zh) 语音识别的方法、装置及存储介质
CN112201236B (zh) 终端唤醒方法、装置及计算机可读存储介质
US20230171780A1 (en) METHOD AND DEVICE FOR TRANSMITTING UPLINK CONTROL INFORMATION, AND COMPUTER-READABLE STORAGE MEDIUM (as amended)

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20221223

Address after: 430000 No. 006, floor 1, No. 66, Jiufeng 1st Road, Donghu New Technology Development Zone, Wuhan, Hubei Province (Wuhan area of free trade zone)

Patentee after: Xiaomi Technology (Wuhan) Co.,Ltd.

Address before: Room 101-103, 1 / F, unit 2, building F, lin66, Zhufang Road, Haidian District, Beijing 100085

Patentee before: BEIJING XIAOMI INTELLIGENT TECHNOLOGY Co.,Ltd.