CN110555321A - 智能家居系统中的数据处理方法、装置及存储介质 - Google Patents

Abstract

本发明提供了一种智能家居系统中的数据处理方法、装置及存储介质；方法包括：接收智能家居系统中目标设备发送的请求消息，所述请求消息中携带语音数据，所述语音数据；基于所述请求消息，获取与所述目标设备相关联的配置信息；确定所述配置信息指示所述语音数据存在相应的有效期时，存储所述语音数据至数据缓存区；监控到对应所述有效期的时间到达时，清除所述数据缓存区中存储的所述语音数据。通过本发明，能够保证用户的语音数据的安全防护。

Description

智能家居系统中的数据处理方法、装置及存储介质

技术领域

本发明涉及智能家居及区块链技术领域，尤其涉及一种智能家居系统中的数据处理方法、装置及存储介质。

背景技术

智能家居系统由智能音箱、智能语音服务平台、技能服务器、智能家居网关等部分组成，智能语音服务平台是智能家居系统中核心的组成部分，相关技术中的智能语音服务平台在对智能音箱上传的用户语音数据处理后，会将语音记录存储在智能语音服务平台的云存储上，用户通过登录智能语音服务平台的管理页面，手工确认才能删除这些记录。

然而，在这些语音记录存储在云存储上期间，存在被滥用或泄露的风险，尤其是，当智能家居系统运用于酒店等设备被多人共享使用场景时，住客不方便访问智能语音服务平台的管理页面，很容易忘记将住店期间和智能家居系统互动产生的语音记录进行删除，住客的个人隐私数据随时都会受到侵害。

发明内容

本发明实施例提供一种智能家居系统中的数据处理方法、装置及存储介质，能够保证用户的语音数据的安全防护。

本发明实施例提供一种智能家居系统中的数据处理方法，包括：

接收智能家居系统中目标设备发送的请求消息，所述请求消息中携带语音数据，所述语音数据用于与所述智能家居系统中的电子设备进行交互；

基于所述请求消息，获取与所述目标设备相关联的配置信息；

确定所述配置信息指示所述语音数据存在相应的有效期时，存储所述语音数据至数据缓存区；

监控到对应所述有效期的时间到达时，清除所述数据缓存区中存储的所述语音数据。

本发明实施例还提供一种智能家居系统中的数据处理装置，包括：

接收模块，用于接收智能家居系统中目标设备发送的请求消息，所述请求消息中携带语音数据，所述语音数据用于与所述智能家居系统中的电子设备进行交互；

获取模块，用于基于所述请求消息，获取与所述目标设备相关联的配置信息；

存储模块，用于确定所述配置信息指示所述语音数据存在相应的有效期时，存储所述语音数据至数据缓存区；

清除模块，用于监控到对应所述有效期的时间到达时，清除所述数据缓存区中存储的所述语音数据。

上述方案中，所述装置还包括处理模块，

所述处理模块，用于对所述语音数据进行语音识别，得到对应的文本信息；

对所述文本信息进行语言理解，生成对应所述文本信息的目标指令，所述目标指令用于获取对应所述语音数据的交互响应。

上述方案中，所述处理模块，还用于当所述语音数据用于与所述目标设备进行语音交互时，发送所述目标指令，以基于所述目标指令，确定对应所述语音数据的文本响应信息；

接收返回的所述文本响应信息；

对所述文本响应信息进行语音合成，得到对应的语音数据流；

发送所述语音数据流至所述目标设备，以通过所述目标设备进行播放。

上述方案中，所述处理模块，还用于当所述语音数据用于控制所述电子设备执行相应的操作时，发送所述目标指令至所述智能家居系统中的网关，以通过所述网关控制所述电子设备执行所述操作。

上述方案中，所述获取模块，还用于解析所述请求消息，得到所述请求消息中携带的所述目标设备的设备标识；

基于所述设备标识，获取与所述目标设备相关联的配置信息，所述配置信息为当客户端页面中的隐私功能项被启用时所输入。

上述方案中，所述获取模块，还用于获取到基于所述客户端页面输入的所述配置信息；

响应于针对所述配置信息的设定指令，存储所述配置信息。

上述方案中，所述存储模块，还用于确定所述配置信息指示所述语音数据不存在相应的有效期时，存储所述语音数据至物理内存。

上述方案中，所述存储模块，还用于对所述语音数据进行哈希变换，得到对应所述语音数据的摘要信息；

存储所述摘要信息至区块链网络。

本发明实施例还提供一种智能家居系统中的数据处理装置，包括：

存储器，用于存储可执行指令；

处理器，用于执行所述存储器中存储的可执行指令时，实现本发明实施例提供的智能家居系统中的数据处理方法。

本发明实施例还提供一种存储介质，其特征在于，存储有可执行指令，用于引起处理器执行时，实现本发明实施例提供的智能家居系统中的数据处理方法。

本发明实施例具有以下有益效果：

通过获取与目标设备相关联的配置信息，当配置信息指示用于与智能家居系统中的电子设备进行交互的语音数据存在有效期时，将语音数据存储语音数据至数据缓存区；并监控到对应有效期的时间到达时，清除数据缓存区中存储的语音数据；如此，通过将存在有效期的语音数据存储至临时数据缓存区，并定时删除相应的语音数据，使智能语音服务平台与用户交互的语音在系统中不做永久存储并定时删除，保证了用户语音数据不会泄露，提升了智能语音服务平台在智能家具系统中使用时对用户隐私数据的安全防护。

附图说明

图1为相关技术中的智能家居系统的架构示意图；

图2为本发明实施例提供的相关技术的智能家具系统的语音数据泄露的场景示意图；

图3为本发明实施例提供的智能家居系统的数据处理系统的一个可选的架构示意图；

图4为本发明实施例提供的智能语音服务平台的结构示意图；

图5为本发明实施例提供的智能家居系统中的数据处理方法的流程示意图；

图6为本发明实施例提供的语音识别的流程示意图；

图7为本发明实施例提供的隐私保护的界面示意图；

图8为本发明实施例提供的区块链网络的应用架构示意图；

图9为本发明实施例提供的区块链网络中区块链的结构示意图；

图10为本发明实施例提供的区块链网络的功能架构示意图；

图11为本发明实施例提供的智能家居系统中的数据处理方法流程示意图；

图12为本发明实施例提供的智能家居系统中的数据处理方法流程示意图；

图13为本发明实施例提供的智能家居系统中的数据处理方法流程示意图。

具体实施方式

为了使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步地详细描述，所描述的实施例不应视为对本发明的限制，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

在以下的描述中，涉及到“一些实施例”，其描述了所有可能实施例的子集，但是可以理解，“一些实施例”可以是所有可能实施例的相同子集或不同子集，并且可以在不冲突的情况下相互结合。

除非另有定义，本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本发明实施例的目的，不是旨在限制本发明。

对本发明实施例进行进一步详细说明之前，对本发明实施例中涉及的名词和术语进行说明，本发明实施例中涉及的名词和术语适用于如下的解释。

1)语音识别(ASR，Automatic Speech Recognition)，用于将语音中的文字信息转换为计算机可读的输入信息，例如按键、二进制编码或者字符序列，实现人机交互。

2)语言处理(NLP，Natural Language Processing)，一种人机交互方式，对自然语言进行词法分析和句法分析，从而让计算机理解自然语言。

3)语音合成(TTS，Text-to-speech)，用于将文本转换为语音，让应用或设备具备开口说话的能力，提升人机交互体验。

4)交易(Transaction)，等同于计算机术语“事务”，交易包括了需要提交到区块链网络执行的操作，并非单指商业语境中的交易，鉴于在区块链技术中约定俗成地使用了“交易”这一术语，本发明实施例遵循了这一习惯。

例如，部署(Deploy)交易用于向区块链网络中的节点安装指定的智能合约并准备好被调用；调用(Invoke)交易用于通过调用智能合约在区块链中追加交易的记录，并对区块链的状态数据库进行操作，包括更新操作(包括增加、删除和修改状态数据库中的键值对)和查询操作(即查询状态数据库中的键值对)。

5)区块链(Blockchain)，是由区块(Block)形成的加密的、链式的交易的存储结构。

6)区块链网络(Blockchain Network)，通过共识的方式将新区块纳入区块链的一系列的节点的集合。

7)账本(Ledger)，是区块链(也称为账本数据)和与区块链同步的状态数据库的统称。其中，区块链是以文件系统中的文件的形式来记录交易；状态数据库是以不同类型的键(Key)值(Value)对的形式来记录区块链中的交易，用于支持对区块链中交易的快速查询。

8)智能合约(Smart Contracts)，也称为链码(Chaincode)或应用代码，部署在区块链网络的节点中的程序，节点执行接收的交易中所调用的智能合约，来对状态数据库的键值对数据进行更新或查询的操作。

9)共识(Consensus)，是区块链网络中的一个过程，用于在涉及的多个节点之间对区块中的交易达成一致，达成一致的区块将被追加到区块链的尾部，实现共识的机制包括工作量证明(PoW，Proof of Work)、权益证明(PoS，Proof of Stake)、股份授权证明(DPoS，Delegated Proof-of-Stake)、消逝时间量证明(PoET，Proof of Elapsed Time)等。

参见图1，图1为相关技术中的智能家居系统的架构示意图，如图1所示，智能家居系统一般由以下几部分组成：

1)智能音响，为用户提供基于语音的界面，用户发布口头命令或咨询问题，设备用语音回应，当它检测到唤醒词(例如“小微，小微”)时才会向智能语音服务平台发送后续音频(用户的指令或问题)；

2)智能语音服务平台，智能音箱接收用户语音并上传到智能语音服务平台，由智能语音服务平台对语音进行处理；

3)技能服务器，是智能家居系统可以为用户执行任务的控制服务器，服务器和用户本地的智能家居网关连接，提供各类智能场景，例如打开/关闭窗帘，空调和点灯等；

4)智能家具网关，部署在本地，负责和用户房间内各个智能设备的对接和控制，并保持和技能服务器之间的连接，当收到技能服务器发送的命令指令时，对指定的智能设备进行控制；

5)云存储，用户和智能音箱互动过程中的语音和指令，在经过智能语音服务平台处理时被平台保存在云存储中；

6)管理页面，用户通过登录智能语音服务平台的管理页面，查看过去和智能家居系统的互动记录，并反馈这些互动的质量。

如图1所示，相关技术中的智能家居系统中的智能语音服务平台，在对智能音箱上传的用户语音命令进行处理后，普遍会将语音记录存储在智能语音服务平台的云存储上，用户通过登录平台的管理页面，手工确认才能删除这些记录。然而，在这些语音记录在云存储期间，存在被滥用或泄露的风险，参见图2，图2为本发明实施例提供的相关技术的智能家具系统的语音数据泄露的场景示意图，如图2所示，当智能家居系统运用于酒店等设备被多人共享使用场景时，住客不方便访问智能语音服务平台的管理页面，很容易忘记将住店期间和智能家居系统互动产生的语音记录进行删除，住客的个人隐私数据随时都会受到侵害。

为此，本发明通过获取与目标设备相关联的配置信息，当配置信息指示用于与智能家居系统中的电子设备进行交互的语音数据存在有效期时，将语音数据存储语音数据至数据缓存区；并监控到对应有效期的时间到达时，清除数据缓存区中存储的语音数据；如此，通过将存在有效期的语音数据存储至临时数据缓存区，并定时删除相应的语音数据，使智能语音服务平台与用户交互的语音在系统中不做永久存储并定时删除，保证了用户语音数据不会泄露，提升了智能语音服务平台在智能家具系统中使用时对用户隐私数据的安全防护。

下面说明实现本发明实施例的装置的示例性应用，参见图3，图3为本发明实施例提供的智能家居系统的数据处理系统100的一个可选的架构示意图，由目标设备(即智能音响200)、智能语音服务平台300、控制智能语音服务平台300的管理页面400、技能服务器500及智能家居网关600等组成，用户基于智能音响200的语音界面发布语音，智能音响200将用户发布的语音发送至智能语音服务平台300；

一方面，智能语音服务平台300，接收目标设备发送的请求消息，其中，请求消息中携带语音数据，语音数据用于与智能家居系统中的电子设备进行交互；用户可通过终端400登录智能语音平台的管理页面输入配置信息，配置信息指示对语音数据的存储方式，智能语音服务平台300基于请求消息，获取与目标设备相关联的配置信息，确定配置信息指示所述语音数据存在相应的有效期时，存储语音数据至数据缓存区；监控到对应有效期的时间到达时，清除数据缓存区中存储的所述语音数据；

另一方面，智能语音服务平台300对目标设备发送的语音数据，进行语音识别、语言理解等处理，得到对应所述语音数据的目标指令，目标指令用于获取对应语音数据的交互响应；当语音数据用于与目标设备进行语音交互时，发送目标指令至技能服务器500，以使技能服务器500基于所述目标指令，确定对应语音数据的文本响应信息，并发送文本响应信息至智能语音服务平台300，智能语音服务平台300接收返回的文本响应信息，对文本响应信息进行语音合成，得到对应的语音数据流，发送语音数据流至目标设备(即智能音响200)，以通过智能音响200对进行播放；当语音数据用于控制电子设备(如控制窗帘、空调、灯光等，)执行相应的操作时，智能语音服务平台300发送目标指令至智能家居系统中的智能家居网关600，以通过智能家居网关600控制电子设备执行相应操作。

下面说明本发明实施例提供的智能语音服务平台的示例性结构，参见图4，图4为本发明实施例提供的智能语音服务平台300结构示意图，图4所示的智能语音服务平台300包括：至少一个处理器310、存储器350和至少一个网络接口320和用户接口330。智能语音服务平台300中的各个组件通过总线系统340耦合在一起。可理解，总线系统340用于实现这些组件之间的连接通信。总线系统340除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图3中将各种总线都标为总线系统340。

处理器310可以是一种集成电路芯片，具有信号的处理能力，例如通用处理器、数字信号处理器(DSP，Digital Signal Processor)，或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等，其中，通用处理器可以是微处理器或者任何常规的处理器等。

存储器350可以是可移除的，不可移除的或其组合。示例性的硬件设备包括固态存储器，硬盘驱动器，光盘驱动器等。存储器350可选地包括在物理位置上远离处理器310的一个或多个存储设备。

存储器350包括易失性存储器或非易失性存储器，也可包括易失性和非易失性存储器两者。非易失性存储器可以是只读存储器(ROM，Read Only Memory)，易失性存储器可以是随机存取存储器(RAM，Random Access Memory)。本发明实施例描述的存储器350旨在包括任意适合类型的存储器。

在一些实施例中，存储器350能够存储数据以支持各种操作，这些数据的示例包括程序、模块和数据结构或者其子集或超集，下面示例性说明。

操作系统351，包括用于处理各种基本系统服务和执行硬件相关任务的系统程序，例如框架层、核心库层、驱动层等，用于实现各种基础业务以及处理基于硬件的任务；

网络通信模块352，用于经由一个或多个(有线或无线)网络接口420到达其他计算设备，示例性的网络接口420包括：蓝牙、无线相容性认证(WiFi)、和通用串行总线(USB，Universal Serial Bus)等；

呈现模块353，用于经由一个或多个与用户接口330相关联的输出装置331(例如，显示屏、扬声器等)使得能够呈现信息(例如，用于操作外围设备和显示内容和信息的用户接口)；

输入处理模块354，用于对一个或多个来自一个或多个输入装置332之一的一个或多个用户输入或互动进行检测以及翻译所检测的输入或互动。

在一些实施例中，本发明实施例提供的智能家居系统中的数据处理装置可以采用软件方式实现，图4示出了存储在存储器350中的智能家居系统中的数据处理装置355，其可以是程序和插件等形式的软件，包括以下软件模块：接收模块3551、获取模块3552、存储模块3553和清除模块3554，这些模块是逻辑上的，因此根据所实现的功能可以进行任意的组合或进一步拆分。将在下文中说明各个模块的功能。

在另一些实施例中，本发明实施例提供的智能家居系统中的数据处理装置可以采用硬件方式实现，作为示例，本发明实施例提供的智能家居系统中的数据处理装置可以是采用硬件译码处理器形式的处理器，其被编程以执行本发明实施例提供的智能家居系统中的数据处理方法，例如，硬件译码处理器形式的处理器可以采用一个或多个应用专用集成电路(ASIC，Application Specific Integrated Circuit)、DSP、可编程逻辑器件(PLD，Programmable Logic Device)、复杂可编程逻辑器件(CPLD，Complex Programmable LogicDevice)、现场可编程门阵列(FPGA，Field-Programmable Gate Array)或其他电子元件。

下面将结合附图对本发明实施例的实施方法作进一步地详细描述。参见图5，图5为本发明实施例提供的智能家居系统中的数据处理方法的流程示意图，将结合图5示出的步骤进行说明。

步骤501：智能语音服务平台接收智能家居系统中目标设备发送的请求消息，请求消息中携带语音数据，语音数据用于与智能家居系统中的电子设备进行交互。

在实际应用中,目标设备可具体为智能音箱,目标设备为用户提供基于语音的界面，用户发布口头命令或咨询问题时，目标设备用相应的语音回应。需要说明的是，只有当目标设备检测到唤醒词(例如“小微，小微”)时，才会向智能语音服务平台发送请求消息，请求消息中携带了用户的口头命令或咨询问题的语音数据。

在一些实施例中，智能语音服务平台可通过如下方式对接收到的语音数据进行处理：

对语音数据进行语音识别，得到对应的文本信息；对文本信息进行语言理解，生成对应文本信息的目标指令，其中，目标指令用于获取对应语音数据的交互响应。

这里，语音数据是一个连续的音频流，它由大部分的稳定态和部分动态改变的状态混合构成，一个单词的发声(波形)取决于音素、音素上下文、说话者、语音风格等多种因素，通过语音识别和理解过程把语音数据转变为相应的文本信息，参见图6，图6为本发明实施例提供的语音识别的流程示意图，如图6所示，未知语音经过目标设备(如智能音箱)变换成语音数据(电信号)后作为语音输入，首先经过预处理，然后根据语音特征建立语音模型，对输入的语音数据进行分析，并提取所需的特征，在此基础上建立语音识别所需的模板，而智能语音服务平台在识别过程中根据语音识别模型，将平台中存放的语音模板与输入的语音数据的特征进行比较，根据一定的搜索和匹配策略，找出一系列最优的与输入语音数据匹配的模，最后根据此模板的定义，通过查表就可以给出计算机的识别结果，即得到文本信息。

接下来，将得到的文本信息通过NLP处理得到对应文本信息的目标指令，NLP处理主要包括：分词-词法分析-语法分析-语义分析等过程，可基于NLP处理在文本分类和聚类的应用，将文本信息按照关键字词做出统计，建造一个索引库，当有关键字词查询时，可以根据索引库快速地找到需要的内容，即通过此种方式可得到对应文本信息的目标指令，以获取对应语音数据的交互响应。

在一些实施例中，当语音数据用于与目标设备进行语音交互时，如用户向目标设备咨询问题以期得到目标设备对应语音数据的响应信息时，智能语音服务平台可通过如下方式通过目标设备进行响应信息的播放：

发送目标指令，以基于所述目标指令，确定对应语音数据的文本响应信息；接收返回的文本响应信息；对文本响应信息进行语音合成，得到对应的语音数据流；发送语音数据流至目标设备，以通过目标设备进行播放。

在实际实施时，智能语音服务平台发送对应语音数据的目标指令至智能家居系统中的技能服务器，以使技能服务器基于目标指令，确定对应语音数据的文本响应信息，并发送确定的文本响应信息至智能语音服务平台，智能语音服务平台接收技能服务器返回的文本响应信息，对文本响应信息进行语音合成，得到对应的语音数据流，并将得到的语音数据流发送至目标设备，目标设备对语音数据流进行播放。

这里，语音合成首先通过语言处理，模拟人对自然语言的理解过程，包括：文本规整、词的切分、语法分析和语义分析，使计算机对输入的文本信息能完全理解，并给出发音提示；然后经韵律处理为合成语音规划出音段特征，如音高、音长和音强等，是合成语音能正确表达语意，听起来更加自然；最后基于语言处理和韵律处理得到的处理结果要求输出合成语音，即语音数据流。

在一些实施例中，当语音数据用于控制电子设备执行相应的操作时，如控制空调的开关时，智能语音服务平台可通过如下方式控制电子设备执行相应操作：

发送目标指令至智能家居系统中的网关，以通过网关控制电子设备执行所述操作。

在实际实施时，智能语音服务平台将对应语音数据的目标指令发送给智能家居系统中的技能服务器，技能服务器将接收到的目标指令发送至智能家居系统中的智能家居网关，智能家居网关基于接收到的目标指令对智能家居系统中的用户房间内的各个智能电子设备进行控制，以使电子设备执行目标指令指示的操作，比如，智能家居网关基于接收到的目标指令，控制用户房间内的空调的开关、温度的调节，或控制用户房间内的窗帘打开或关闭等。

步骤502：基于请求消息，获取与目标设备相关联的配置信息。

在一些实施例中，智能语音服务平台可通过如下方式获取与目标设备相关联的配置信息：

解析请求消息，得到请求消息中携带的目标设备的设备标识；基于设备标识，获取与目标设备相关联的配置信息，其中，配置信息为当客户端页面中的隐私功能项被启用时所输入。

这里，在实际应用中，用户可通过登录语音服务平台的管理页面，在管理页面选择启用隐私功能项，参见图7，图7为本发明实施例提供的隐私保护的界面示意图，如开启“隐私保护”功能，选择“语音定时删除”选项，设置删除时间，比如24小时，也可自定义设置删除时间。

在实际实施时，第三方系统也可通过智能语音服务平台提供的应用程序接口(API，Application Programming Interface)进行设置语音数据的定时删除和失效时间，比如，智能语音服务平台的管理模块提供了设置删除时间的API，第三方系统通过API以目标设备的设备标识和定时时间间隔为输入参数，起到和管理页面进行手工设置一样的功能。

在一些实施例中，智能语音服务平台还可在启用智能家居系统的应用之前，通过如下方式存储与目标设备相关联的配置信息：

获取到基于客户端页面输入的配置信息；响应于针对配置信息的设定指令，存储配置信息。

这里，在实际应用中，用户可通过终端上设置的控制智能家居系统的客户端上的管理页面输入相应的配置信息，比如，目标设备标识、语音数据删除时间及失效时间等，当用户对配置信息进行设定时，即可实现将相应的配置信息进行存储。

通过上述方式，当在启动智能家居系统之前，用户可先决定是否针对与智能家居系统中的电子设备进行交互的语音数据进行隐私保护而进行相应的设置，这样，智能语音服务平台接收到的通过目标设备发送的语音数据，携带有目标设备的设备标识以及是否对应语音数据的进行隐私保护等信息，而不需要用户每次向目标设备发布命令或咨询问题时再进行相应的设置。

步骤503：确定配置信息指示语音数据存在相应的有效期时，存储语音数据至数据缓存区。

这里，当智能语音服务平台获取的对应语音数据的配置信息指示对语音数据进行隐私保护，即用户启动了隐私功能项而对语音数据设置了定时删除时，智能语音服务平台将接收到的语音数据保存在数据缓存区，以进行临时保存。

步骤504：监控到对应所有效期的时间到达时，清除数据缓存区中存储的语音数据。

在一些实施例中，当智能语音服务平台确定配置信息指示语音数据存在相应的有效期时，启动对应有效期的定时器，当监控到定时器的时间到达时，清除数据缓存中存储的语音数据，实现对用户隐私数据进行保护。

在实际应用中，智能语音服务平台在存储语音数据至数据缓存区时，还可在存储的语音数据上添加时间戳，并设置缓存的语音数据的失效时间，当当前时间与时间戳之差到达失效时间时，清除数据缓存中存储的语音数据，如此，也能实现对语音数据的定时删除，达到不被滥用或泄露的目的。

在一些实施例中，当智能语音服务平台确定配置信息指示语音数据不存在相应的有效期时，存储相应的语音数据至物理内存；即，用户针对智能家居系统中的电子设备之间进行交互的语音数据并未启动隐私功能项时，智能语音服务平台将对应的语音数据存储至物理内存中以实现永久保存。

在一些实施例中，智能语音服务平台还可通过如下方式将与智能家居系统中的电子设备进行交互的语音数据保存至区块链网络：

对语音数据进行哈希变换，得到对应语音数据的摘要信息；存储摘要信息至区块链网络。

这里，本发明实施例还可结合区块链技术，在得到语音数据对应的响应信息之后，生成用于存储用户发布的语音数据及对应的响应信息的交易，提交生成的所述交易至区块链网络的节点，以使所述节点对交易共识后存储语音数据及对应语音数据的响应信息至区块链网络；在存储至区块链网络之前，智能语音服务平台还可分别对语音数据及对应语音数据的响应信息进行哈希变换，得到对应语音数据的摘要信息，及对应响应信息的摘要信息；将得到的语音数据的摘要信息及对应响应信息的摘要信息存储至区块链网络。

参见图8，图8为本发明实施例提供的区块链网络的应用架构示意图，包括业务主体300、认证中心700，区块链网800(示例性示出了共识节点810-1至共识节点810-3)，下面分别说明。

区块链网络800的类型是灵活多样的，例如可以为公有链、私有链或联盟链中的任意一种。以公有链为例，任何业务主体的电子设备例如用户终端和服务器，都可以在不需要授权的情况下接入区块链网络800；以联盟链为例，业务主体在获得授权后其下辖的电子设备(例如终端/服务器)可以接入区块链网络800，此时，如成为区块链网络800中的客户端节点，这里客户端指示智能语音服务平台。

在一些实施例中，客户端节点可以只作为区块链网络800的观察者，即提供支持业务主体发起交易(例如，用于上链存储数据或查询链上数据)功能，对于区块链网络800的共识节点810的功能，例如排序功能、共识服务和账本功能等，客户端节点可以缺省或者有选择性(例如，取决于业务主体的具体业务需求)地实施。从而，可以将业务主体的数据和业务处理逻辑最大程度迁移到区块链网络800中，通过区块链网络800实现数据和业务处理过程的可信和可追溯。

区块链网络800中的共识节点接收来自不同业务主体(例如图8中示出的业务主体300)的客户端节点(例如，图8中示出的归属于业务主体300的客户端节点310提交的交易，执行交易以存储语音数据和对应语音数据的响应信息，执行交易的各种中间结果或最终结果可以返回业务主体的客户端节点中显示。

例如，客户端节点310可以订阅区块链网络800中感兴趣的事件，例如区块链网络800中特定的组织/通道中发生的交易，由共识节点810推送相应的交易通知到客户端节点310，从而触发客户端节点310中相应的业务逻辑。

业务主体接入区块链网络以实现智能家居系统中的数据处理为例说明区块链的示例性应用。

参见图8，业务主体300为智能语音服务平台，从认证中心700进行登记注册获得数字证书，数字证书中包括业务主体的公钥、以及认证中心700对业务主体的公钥和身份信息签署的数字签名，用来与业务主体针对交易的数字签名一起附加到交易中，并被发送到区块链网络，以供区块链网络从交易中取出数字证书和签名，验证消息的可靠性(即是否未经篡改)和发送消息的业务主体的身份信息，区块链网络会根据身份进行验证，例如是否具有发起交易的权限。业务主体下辖的电子设备(例如终端或者服务器)运行的客户端都可以向区块链网络800请求接入而成为客户端节点。

业务主体300的客户端节点310用于接收智能家居系统中目标设备发送的请求消息，其中，请求消息中携带语音数据，语音数据用于与智能家居系统中的电子设备进行交互；并基于请求消息，获取对应语音数据的交互响应信息，并将语音数据及对应的交互响应信息发送至区块链网络。

其中，将语音数据及对应的交互响应信息发送至区块链网络800的操作，可以预先在客户端节点310设置业务逻辑，当有语音数据及对应的交互响应信息时，客户端节点310将语音数据及对应的交互响应信息自动发送至区块链网络800，也可以由业务主体300的业务人员在客户端节点310中登录，手动打包语音数据及对应的交互响应信息，并将其发送至区块链网络800。在发送时，客户端节点310根据语音数据及对应的交互响应信息生成对应存储操作的交易，在交易中指定了实现存储操作需要调用的智能合约、以及向智能合约传递的参数，交易还携带了客户端节点310的数字证书、签署的数字签名(例如，使用客户端节点310的数字证书中的私钥，对交易的摘要进行加密得到)，并将交易广播到区块链网络800中的共识节点810。

区块链网络800中的共识节点810中接收到交易时，对交易携带的数字证书和数字签名进行验证，验证成功后，根据交易中携带的业务主体300的身份，确认业务主体300是否是具有交易权限，数字签名和权限验证中的任何一个验证判断都将导致交易失败。验证成功后签署节点810自己的数字签名(例如，使用节点810-1的私钥对交易的摘要进行加密得到)，并继续在区块链网络800中广播。

区块链网络800中的共识节点810接收到验证成功的交易后，将交易填充到新的区块中，并进行广播。区块链网络800中的共识节点810广播的新区块时，会对新区块进行共识过程，如果共识成功，则将新区块追加到自身所存储的区块链的尾部，并根据交易的结果更新状态数据库，执行新区块中的交易：对于提交存储语音数据及对应的响应信息的交易，在状态数据库中添加包括存储语音数据及对应的响应信息的键值对。

作为区块链的示例，参见图9，图9为本发明实施例提供的区块链网络800中区块链的结构示意图，每个区块的头部既可以包括区块中所有交易的哈希值，同时也包含前一个区块中所有交易的哈希值，新产生的交易的记录被填充到区块并经过区块链网络中节点的共识后，会被追加到区块链的尾部从而形成链式的增长，区块之间基于哈希值的链式结构保证了区块中交易的防篡改和防伪造。

参见图10，图10为本发明实施例提供的区块链网络800的功能架构示意图，包括应用层801、共识层802、网络层803、数据层804和资源层805，下面分别进行说明。

资源层805封装了实现区块链网路800中的各个节点810的计算资源、存储资源和通信资源。

数据层804封装了实现账本的各种数据结构，包括以文件系统中的文件实现的区块链，键值型的状态数据库和存在性证明(例如区块中交易的哈希树)。

网络层803封装了点对点(P2P，Point to Point)网络协议、数据传播机制和数据验证机制、接入认证机制和业务主体身份管理的功能。

其中，P2P网络协议实现区块链网络800中节点810之间的通信，数据传播机制保证了交易在区块链网络800中的传播，数据验证机制用于基于加密学方法(例如数字证书、数字签名、公/私钥对)实现节点810之间传输数据的可靠性；接入认证机制用于根据实际的业务场景对加入区块链网络800的业务主体的身份进行认证，并在认证通过时赋予业务主体接入区块链网络800的权限；业务主体身份管理用于存储允许接入区块链网络800的业务主体的身份、以及权限(例如能够发起的交易的类型)。

共识层802封装了区块链网络800中的节点810对区块达成一致性的机制(即共识机制)、交易管理和账本管理的功能。共识机制包括POS、POW和DPOS等共识算法，支持共识算法的可插拔。

交易管理用于验证节点810接收到的交易中携带的数字签名，验证业务主体的身份信息，并根据身份信息判断确认其是否具有权限进行交易(从业务主体身份管理读取相关信息)；对于获得接入区块链网络800的授权的业务主体而言，均拥有认证中心颁发的数字证书，业务主体利用自己的数字证书中的私钥对提交的交易进行签名，从而声明自己的合法身份。

账本管理用于维护区块链和状态数据库。对于取得共识的区块，追加到区块链的尾部；执行取得共识的区块中的交易，当交易包括更新操作时更新状态数据库中的键值对，当交易包括查询操作时查询状态数据库中的键值对并向业务主体的客户端节点返回查询结果。支持对状态数据库的多种维度的查询操作，包括：根据区块序列号(例如交易的哈希值)查询区块；根据区块哈希值查询区块；根据交易序列号查询区块；根据交易序列号查询交易；根据业务主体的账号(序列号)查询业务主体的账号数据；根据通道名称查询通道中的区块链。

应用层801封装了区块链网络能够实现的各种业务，包括交易的溯源、存证和验证等。

通过获取与目标设备相关联的配置信息，当配置信息指示用于与智能家居系统中的电子设备进行交互的语音数据存在有效期时，将语音数据存储语音数据至数据缓存区；并监控到对应有效期的时间到达时，清除数据缓存区中存储的语音数据；如此，通过将存在有效期的语音数据存储至临时数据缓存区，并定时删除相应的语音数据，使智能语音服务平台与用户交互的语音在系统中不做永久存储并定时删除，保证了用户语音数据不会泄露，提升了智能语音服务平台在智能家具系统中使用时对用户隐私数据的安全防护。

同时，将用户与智能家居系统中的其他智能电子设备进行交互的语音数据及对应的响应信息上链存储，实现记录的备份，当用户再次使用智能家居系统时，可直接、快速地从区块链上获取相应的语音数据及对应的响应信息，无需通过智能语音服务平台对用户输入的语音数据进行一些列处理，从而提高用户体验。

接下来继续对本发明实施例提供的智能家居系统中的数据处理方法进行说明，参见图11，图11为本发明实施例提供的智能家居系统中的数据处理方法流程示意图，由客户端上的管理页面、目标设备、智能语音服务平台及技能服务器协同执行。

步骤1101：智能语音服务平台获取到基于管理页面输入的配置信息。

这里，在实际应用中，用户可通过终端上设置的控制智能家居系统的客户端上的管理页面输入相应的配置信息，比如，目标设备标识、语音数据删除时间及失效时间等。

步骤1102：智能语音服务平台响应于针对配置信息的设定指令，存储配置信息。

这里，当用户对配置信息进行设定时，智能语音服务平台即可实现将相应的配置信息进行存储。

步骤1103：目标设备接收用户发布的语音数据。

这里，目标设备可具体为智能音箱,目标设备为用户提供基于语音的界面，用户发布口头命令或咨询问题时，目标设备用相应的语音回应。

步骤1104：目标设备发送请求消息至智能语音服务平台。

这里，请求消息中携带语音数据，语音数据用于与目标设备进行语音交互，在实际应用中，只有当目标设备检测到唤醒词(例如“小微，小微”)时，才会向智能语音服务平台发送请求消息，请求消息中携带了用户的口头命令或咨询问题的语音数据。

步骤1105：智能语音服务平台基于请求消息，得到语音数据。

步骤1106：智能语音服务平台对语音数据进行语音识别，得到对应的文本信息。

步骤1107：智能语音服务平台对文本信息进行语言理解，生成对应文本信息的目标指令。

这里，目标指令用于获取目标设备与语音数据的交互响应。

步骤1108：智能语音服务平台发送目标指令至技能服务器。

步骤1109：技能服务器基于目标指令，确定对应语音数据的文本响应信息。

步骤1110：技能服务器发送文本响应信息至智能语音服务平台。

步骤1111：智能语音服务平台对文本响应信息进行语音合成，得到对应的语音数据流。

步骤1112：智能语音服务平台发送语音数据流发送至目标设备。

步骤1113：目标设备播放语音数据流。

通过上述步骤，实现了语音数据与目标设备的语音交互，比如，用户向目标设备(智能音箱)发布“请播放《青花瓷》”的语音命令，通过智能语音服务平台及技能服务器的相应处理，得到《青花瓷》的语音数据流，并通过目标设备(智能音箱)进行播放。

步骤1114：智能语音服务平台基于请求消息，获取与目标设备相关联的配置信息。

这里，智能语音服务平台解析请求消息，得到请求消息中携带的目标设备的设备标识，基于设备标识，获取与目标设备相关联的配置信息，其中，配置信息为当客户端页面中的隐私功能项被启用时所输入。

步骤1115：智能语音服务平台确定配置信息指示语音数据存在相应的有效期时，存储语音数据至数据缓存区。

步骤1116：智能语音服务平台监控到对应所有效期的时间到达时，清除数据缓存区中存储的语音数据。

通过上述步骤，将设置有有效期的语音数据存储至临时数据缓存区，并定时删除相应的语音数据，使智能语音服务平台与用户交互的语音在系统中不做永久存储并定时删除，保证了用户语音数据不会泄露，提升了智能语音服务平台在智能家具系统中使用时对用户隐私数据的安全防护。

接下来继续对本发明实施例提供的智能家居系统中的数据处理方法进行说明，参见图12，图12为本发明实施例提供的智能家居系统中的数据处理方法流程示意图，由客户端上的管理页面、目标设备、智能语音服务平台、技能服务器及智能家居网关协同执行。

步骤1201：智能语音服务平台获取到基于管理页面输入的配置信息。

这里，在实际应用中，用户可通过终端上设置的控制智能家居系统的客户端上的管理页面输入相应的配置信息，比如，目标设备标识、语音数据删除时间及失效时间等。

步骤1202：智能语音服务平台响应于针对配置信息的设定指令，存储配置信息。

这里，当用户对配置信息进行设定时，智能语音服务平台即可实现将相应的配置信息进行存储。

步骤1203：目标设备接收用户发布的语音数据。

这里，目标设备可具体为智能音箱,目标设备为用户提供基于语音的界面，用户发布口头命令或咨询问题时，目标设备用相应的语音回应。

步骤1204：目标设备发送请求消息至智能语音服务平台。

这里，请求消息中携带语音数据，语音数据用于与目标设备进行语音交互，在实际应用中，只有当目标设备检测到唤醒词(例如“小微，小微”)时，才会向智能语音服务平台发送请求消息，请求消息中携带了用户的口头命令或咨询问题的语音数据。

步骤1205：智能语音服务平台基于请求消息，得到语音数据。

步骤1206：智能语音服务平台对语音数据进行语音识别，得到对应的文本信息。

步骤1207：智能语音服务平台对文本信息进行语言理解，生成对应文本信息的目标指令。

这里，目标指令用于获取目标设备与语音数据的交互响应。

步骤1208：智能语音服务平台发送目标指令至技能服务器。

步骤1209：技能服务器发送目标指令至智能家居网关。

步骤1210：智能家居网关基于目标指令，控制电子设备执行目标指令指示的操作。

示例性地，当目标指令指示开启空调，并将温度设置为26℃时，智能家居系统中的智能家居网关基于接收到的目标指令，打开空调，并将温度设置为26℃。

步骤1211：智能语音服务平台基于请求消息，获取与目标设备相关联的配置信息。

这里，智能语音服务平台解析请求消息，得到请求消息中携带的目标设备的设备标识，基于设备标识，获取与目标设备相关联的配置信息，其中，配置信息为当客户端页面中的隐私功能项被启用时所输入。

步骤1212：智能语音服务平台确定配置信息指示语音数据存在相应的有效期时，存储语音数据至数据缓存区。

步骤1213：智能语音服务平台监控到对应所有效期的时间到达时，清除数据缓存区中存储的语音数据。

下面，将说明本发明实施例在一个实际的应用场景中的示例性应用。

如图3所示，本发明实施例提供的智能家居系统中的智能语音服务平台上设置有接收存储模块，销毁模块和管理模块，用户通过登录智能语音服务平台的管理页面，在设置页面选择开启“隐私保护->语音定时删除”选项；然后在“隐私保护->语音定时删除时间”选项设置删除时间，例如默认设置为24小时。

在实际实施时，第三方系统也可通过智能语音服务平台提供的API进行设置语音数据的定时删除和失效时间，比如，智能语音服务平台的管理模块提供了设置删除时间的API，第三方系统通过API以目标设备的设备标识和定时时间间隔为输入参数，起到和管理页面进行手工设置一样的功能。

参见图13，图13为本发明实施例提供的智能家居系统中的数据处理方法流程示意图，包括：

步骤1301：智能音箱采集用户语音数据；

步骤1302：智能音箱上传语音数据至智能语音服务平台；

步骤1303：智能语音服务平台上的接收存储模块接收上传的语音数据；

步骤1304：接收存储模块判断智能音箱是否设置了语音记录定时删除功能；

这里，智能语音服务平台上的接收存储模块查询智能音箱是否设置了语音记录定时删除功能，当查询结果表征设置了语音记录定时删除功能时，执行步骤1305；当查询结果表征未设置语音记录定时删除功能时，执行步骤1306。

步骤1305：将语音数据保存在数据缓存区，并设置缓存数据的默认失效时间；

步骤1306：将语音数据保存在接收存储模块的物理内存。

步骤1307：接收存储模块调用销毁模块，启动一个新的定时删除语音记录定时器。

步骤1308：销毁模块中的定时器到预定设置的失效时间时，调用接收存储模块的删除语音记录功能，删除指定设备的历史语音记录。

通过上述方式，智能语音服务平台可以提供设置选项，保证智能语音服务平台与使用者交互产生的语音在系统中不做永久存储并定时删除，从而保证了用户语音数据不会泄露，提升了智能语音服务平台在智能家居系统中使用时对用户隐私数据的安全防护。

并且，智能语音服务平台可以采取其它入口使用本发明实施例提供的智能家居系统中的数据处理方法，比如，通过对设备进行归类，使供多人使用的设备自动启用本发明实施例提供的智能家居系统中的数据处理方法，或者，通过API接口直接对指定设置启用本发明实施例提供的智能家居系统中的数据处理方法。

下面继续结合图4说明本发明实施例提供的智能家居系统中的数据处理装置355的实施为软件模块的示例性结构，在一些实施例中，如图4所示，存储在存储器350中的智能家居系统中的数据处理装置355，其可以是程序和插件等形式的软件，包括以下软件模块：接收模块3551、获取模块3552、存储模块3553和清除模块3554。

接收模块3551，用于接收智能家居系统中目标设备发送的请求消息，所述请求消息中携带语音数据，所述语音数据用于与所述智能家居系统中的电子设备进行交互；

获取模块3552，用于基于所述请求消息，获取与所述目标设备相关联的配置信息；

存储模块3553，用于确定所述配置信息指示所述语音数据存在相应的有效期时，存储所述语音数据至数据缓存区；

清除模块3554，用于监控到对应所述有效期的时间到达时，清除所述数据缓存区中存储的所述语音数据。

在一些实施例中，所述装置还包括处理模块，

所述处理模块，用于对所述语音数据进行语音识别，得到对应的文本信息；

对所述文本信息进行语言理解，生成对应所述文本信息的目标指令，所述目标指令用于获取对应所述语音数据的交互响应。

在一些实施例中，所述处理模块，还用于当所述语音数据用于与所述目标设备进行语音交互时，发送所述目标指令，以基于所述目标指令，确定对应所述语音数据的文本响应信息；

接收返回的所述文本响应信息；

对所述文本响应信息进行语音合成，得到对应的语音数据流；

发送所述语音数据流至所述目标设备，以通过所述目标设备进行播放。

在一些实施例中，所述处理模块，还用于当所述语音数据用于控制所述电子设备执行相应的操作时，发送所述目标指令至所述智能家居系统中的网关，以通过所述网关控制所述电子设备执行所述操作。

在一些实施例中，所述获取模块，还用于解析所述请求消息，得到所述请求消息中携带的所述目标设备的设备标识；

基于所述设备标识，获取与所述目标设备相关联的配置信息，所述配置信息为当客户端页面中的隐私功能项被启用时所输入。

在一些实施例中，所述获取模块，还用于获取到基于所述客户端页面输入的所述配置信息；

响应于针对所述配置信息的设定指令，存储所述配置信息。

在一些实施例中，所述存储模块，还用于确定所述配置信息指示所述语音数据不存在相应的有效期时，存储所述语音数据至物理内存。

在一些实施例中，所述存储模块，还用于对所述语音数据进行哈希变换，得到对应所述语音数据的摘要信息；

存储所述摘要信息至区块链网络。

本发明实施例还提供一种智能家居系统中的数据处理装置，包括：

存储器，用于存储可执行指令；

处理器，用于执行所述存储器中存储的可执行指令时，实现本发明实施例提供的智能家居系统中的数据处理方法。

本发明实施例还提供一种存储介质，其特征在于，存储有可执行指令，用于引起处理器执行时，实现本发明实施例提供的智能家居系统中的数据处理方法。

实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：移动存储设备、随机存取存储器(RAM，Random Access Memory)、只读存储器(ROM，Read-Only Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

或者，本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实施例的技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括：移动存储设备、RAM、ROM、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，仅为本发明的实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和范围之内所作的任何修改、等同替换和改进等，均包含在本发明的保护范围之内。

Claims (10)

1.一种智能家居系统中的数据处理方法，其特征在于，所述方法包括：

接收智能家居系统中目标设备发送的请求消息，所述请求消息中携带语音数据，所述语音数据用于与所述智能家居系统中的电子设备进行交互；

基于所述请求消息，获取与所述目标设备相关联的配置信息；

确定所述配置信息指示所述语音数据存在相应的有效期时，存储所述语音数据至数据缓存区；

监控到对应所述有效期的时间到达时，清除所述数据缓存区中存储的所述语音数据。

2.如权利要求1所述的方法，其特征在于，所述方法还包括：

对所述语音数据进行语音识别，得到对应的文本信息；

对所述文本信息进行语言理解，生成对应所述文本信息的目标指令，所述目标指令用于获取对应所述语音数据的交互响应。

3.如权利要求2所述的方法，其特征在于，所述方法还包括：

当所述语音数据用于与所述目标设备进行语音交互时，发送所述目标指令，以基于所述目标指令，确定对应所述语音数据的文本响应信息；

接收返回的所述文本响应信息；

对所述文本响应信息进行语音合成，得到对应的语音数据流；

发送所述语音数据流至所述目标设备，以通过所述目标设备进行播放。

4.如权利要求2所述的方法，其特征在于，所述方法还包括：

当所述语音数据用于控制所述电子设备执行相应的操作时，发送所述目标指令至所述智能家居系统中的网关，以通过所述网关控制所述电子设备执行所述操作。

5.如权利要求1所述的方法，其特征在于，所述基于所述请求消息，获取与所述目标设备相关联的配置信息，包括：

解析所述请求消息，得到所述请求消息中携带的所述目标设备的设备标识；

基于所述设备标识，获取与所述目标设备相关联的配置信息，所述配置信息为当客户端页面中的隐私功能项被启用时所输入。

6.如权利要求5所述的方法，其特征在于，所述方法还包括：

获取到基于所述客户端页面输入的所述配置信息；

响应于针对所述配置信息的设定指令，存储所述配置信息。

7.如权利要求1所述的方法，其特征在于，所述方法还包括：

确定所述配置信息指示所述语音数据不存在相应的有效期时，存储所述语音数据至物理内存。

8.如权利要求1至7任一项所述的方法，其特征在于，所述方法还包括：

对所述语音数据进行哈希变换，得到对应所述语音数据的摘要信息；

存储所述摘要信息至区块链网络。

9.一种智能家居系统中的数据处理装置，其特征在于，所述装置包括：

接收模块，用于接收智能家居系统中目标设备发送的请求消息，所述请求消息中携带语音数据，所述语音数据用于与所述智能家居系统中的电子设备进行交互；

获取模块，用于基于所述请求消息，获取与所述目标设备相关联的配置信息；

存储模块，用于确定所述配置信息指示所述语音数据存在相应的有效期时，存储所述语音数据至数据缓存区；

清除模块，用于监控到对应所述有效期的时间到达时，清除所述数据缓存区中存储的所述语音数据。

10.一种存储介质，其特征在于，存储有可执行指令，用于引起处理器执行时，实现权利要求1至8任一项所述的智能家居系统中的数据处理方法。