CN110012103A - 智能设备的控制方法、装置以及控制器和介质 - Google Patents

智能设备的控制方法、装置以及控制器和介质 Download PDF

Info

Publication number
CN110012103A
CN110012103A CN201910290535.XA CN201910290535A CN110012103A CN 110012103 A CN110012103 A CN 110012103A CN 201910290535 A CN201910290535 A CN 201910290535A CN 110012103 A CN110012103 A CN 110012103A
Authority
CN
China
Prior art keywords
equipment
smart machine
information
session
instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910290535.XA
Other languages
English (en)
Other versions
CN110012103B (zh
Inventor
鲍杭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yutou Technology Hangzhou Co Ltd
Original Assignee
Yutou Technology Hangzhou Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yutou Technology Hangzhou Co Ltd filed Critical Yutou Technology Hangzhou Co Ltd
Priority to CN201910290535.XA priority Critical patent/CN110012103B/zh
Publication of CN110012103A publication Critical patent/CN110012103A/zh
Application granted granted Critical
Publication of CN110012103B publication Critical patent/CN110012103B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/04Programme control other than numerical control, i.e. in sequence controllers or logic controllers
    • G05B19/042Programme control other than numerical control, i.e. in sequence controllers or logic controllers using digital processors
    • G05B19/0423Input/output
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/14Session management
    • H04L67/142Managing session states for stateless protocols; Signalling session states; State transitions; Keeping-state mechanisms
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/20Pc systems
    • G05B2219/25Pc structure of the system
    • G05B2219/25257Microcontroller

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明涉及一种智能设备的控制方法、装置以及控制器和介质,所述方法包括实时同步获取多个智能设备的状态信息,所述状态信息包括属性信息、上下文会话信息和执行状态信息中的一种或多种;对所述多个智能设备进行分组,每个智能设备组中包括至少两个智能设备;将智能设备组内各个智能设备的状态信息在该智能设备组内共享;基于设备组内共享的各个智能设备的状态信息对所述设备组内的智能设备进行控制。本发明将智能设备进行分组,每个组内的智能设备共享组内各个智能设备的状态信息,从而控制整个设备组中的所有智能设备,提升了用户体验。

Description

智能设备的控制方法、装置以及控制器和介质
技术领域
本发明涉及智能设备技术领域,尤其涉及一种智能设备的控制方法、装置以及控制器和介质。
背景技术
随着人工智能(AI)技术的发展以及智能设备的普及,一个用户会拥有多个智能终端设备,且遍及多个场景,如家庭场景、办公场景和车载场景等。现有的单一的智能设备交互可以暂时满足一部分用户的使用习惯,但是无论是语音,还是其他视觉乃至按键触屏的交互,对指令的响应要求不再局限于单一的设备。例如当用户对家里的智能音箱询问“今天杭州天气怎么样”,设备可以作为精准的应答响应,但是当用户出门开车,在车里对车载语音音箱询问“上海呢”,在现有的技术场景下,车载的设备无法进行正确有效的响应,因为车载设备并不知道用户在其他设备上进行过的历史会话场景。类似的场景,当用户在家里用智能音箱设备听音乐时,无法在公司里让公司里面的其他设备继续执行在家里执行中断的指令。此外,当用户拥有多个不同品质的智能音箱,如A音箱的播放效果极佳,但是内容有欠缺,B音箱内容丰富,但是音质不佳时,如果用户想采用A音箱播放B音箱的内容时,只能将A音箱作为一款普通的蓝牙音箱让B音箱连接上来或者通过局域网的通讯将内容共享才可达到播放效果。
由此可知,现有的基于物理终端的信息存储或者以单一设备维度进行信息存储以及指令处理无法满足用户使用需求,用户体验差。
发明内容
本发明目的在于,提供一种智能设备的控制方法、装置以及控制器和介质,将智能设备进行分组,每个组内的智能设备共享组内各个智能设备的状态信息,从而控制整个设备组中的所有智能设备,提升了用户体验。
为了解决上述技术问题,根据本发明第一实施例,提供了一种智能设备的控制方法,包括:
实时同步获取多个智能设备的状态信息,所述状态信息包括属性信息、上下文会话信息和执行状态信息中的一种或多种;
对所述多个智能设备进行分组,每个智能设备组中包括至少两个智能设备;
将智能设备组内各个智能设备的状态信息在该智能设备组内共享;
基于设备组内共享的各个智能设备的状态信息对所述设备组内的智能设备进行控制。
进一步的,所述状态信息包括上下文会话信息,所述智能设备组包括第一设备和第二设备,所述基于设备组内共享的各个智能设备的状态信息对所述设备组内的智能设备进行控制,包括:
接收第一设备的第一会话指令,并同步存储所述第一会话指令对应的第一会话信息;
接收第二设备的第二会话指令,并获取所述第一会话信息;
根据所述第一会话信息和第二会话指令向所述第二设备发送应答信息。
进一步的,所述状态信息包括上下文会话信息和执行状态信息,所述智能设备组包括第一设备和第二设备,所述基于设备组内共享的各个智能设备的状态信息对所述设备组内的智能设备进行控制,包括:
接收第一设备的第一会话指令,并同步存储所述第一会话指令对应的第一会话信息;
根据所述第一会话指令向所述第一设备下发第一执行内容;
接收所述第一设备根据所述第一执行内容上报的第一执行状态信息;
接收第二设备的第二会话指令,并获取所述第一会话信息和第一执行状态信息;
根据所述第二会话指令、第一会话信息以及第一执行状态信息向所述第二设备发送第二执行内容。
进一步的,所述状态信息包括上下文会话信息和执行状态信息,所述设备组包括第一设备和第二设备,所述基于设备组内共享的各个智能设备的状态信息对所述设备组内的智能设备进行控制,包括:
接收用户的第一位置信息和第一设备的第一会话指令,同步存储所述第一会话指令对应的第一会话信息;
根据所述第一会话指令向第一设备下发第一执行内容;
接收所述第一设备根据所述第一执行内容上报的第一执行状态信息,所述第一执行状态信息包括当前执行进度和当前执行内容;
接收用户的第二位置信息,根据所述第一位置信息和第二位置信息判断用户与所述第一设备之间的距离是否超过第一预设距离;
若超过,则向当前距离用户第二位置在第一预设距离之内的第二设备下发执行指令,根据所述第一执行状态信息向第二设备发送第二执行内容;并向第一设备下发暂停指令。
进一步的,所述状态信息包括属性信息,所述智能设备组包括多个智能设备,所述基于设备组内共享的各个智能设备的状态信息对所述设备组内的智能设备进行控制,包括:
接收用户请求指令;
根据用户请求指令、所述智能设备组内每个智能设备的属性信息以及预设选择规则选取对应的智能设备,并向对应的智能设备下发执行指令。
进一步的,所述属性信息包括设备名称、音频播报功能、显示功能、底层系统类型、播放器支持的媒体格式、播放器音质、显示分辨率、外接显示器功能、按钮功能、触摸功能中的一种或多种。
根据本发明第二实施例,提供了一种智能设备的控制装置,包括:
信息同步模块,配置为实时同步获取多个智能设备的状态信息,所述状态信息包括属性信息、上下文会话信息和执行状态信息中的一种或多种;
设备分组模块,配置为对所述多个智能设备进行分组,每个智能设备组中包括至少两个智能设备;
信息共享模块,配置为将智能设备组内各个智能设备的状态信息在该智能设备组内共享;
设备控制模块,配置为基于设备组内共享的各个智能设备的状态信息对所述设备组内的智能设备进行控制。
进一步的,所述状态信息包括上下文会话信息,所述智能设备组包括第一设备和第二设备,所述设备控制模块具体配置为:
接收第一设备的第一会话指令,并同步存储所述第一会话指令对应的第一会话信息;
接收第二设备的第二会话指令,并获取所述第一会话信息;
根据所述第一会话信息和第二会话指令向所述第二设备发送应答信息。
进一步的,所述状态信息包括上下文会话信息和执行状态信息,所述智能设备组包括第一设备和第二设备,所述设备控制模块具体配置为:
接收第一设备的第一会话指令,并同步存储所述第一会话指令对应的第一会话信息;
根据所述第一会话指令向所述第一设备下发第一执行内容;
接收所述第一设备根据所述第一执行内容上报的第一执行状态信息;
接收第二设备的第二会话指令,并获取所述第一会话信息和第一执行状态信息;
根据所述第二会话指令、第一会话信息以及第一执行状态信息向所述第二设备发送第二执行内容。
进一步的,所述状态信息包括上下文会话信息和执行状态信息,所述设备组包括第一设备和第二设备,所述设备控制模块具体配置为:
接收用户的第一位置信息和第一设备的第一会话指令,同步存储所述第一会话指令对应的第一会话信息;
根据所述第一会话指令向第一设备下发第一执行内容;
接收所述第一设备根据所述第一执行内容上报的第一执行状态信息,所述第一执行状态信息包括当前执行进度和当前执行内容;
接收用户的第二位置信息,根据所述第一位置信息和第二位置信息判断用户与所述第一设备之间的距离是否超过第一预设距离;
若超过,则向当前距离用户第二位置在第一预设距离之内的第二设备下发执行指令,根据所述第一执行状态信息向第二设备发送第二执行内容;并向第一设备下发暂停指令。
进一步的,所述状态信息包括属性信息,所述智能设备组包括多个智能设备,所述设备控制模块具体配置为:
接收用户请求指令;
根据用户请求指令、所述智能设备组内每个智能设备的属性信息以及预设选择规则选取对应的智能设备,并向对应的智能设备下发执行指令。
进一步的,所述属性信息包括设备名称、音频播报功能、显示功能、底层系统类型、播放器支持的媒体格式、播放器音质、显示分辨率、外接显示器功能、按钮功能、触摸功能中的一种或多种。
根据本发明第三实施例,提供了一种控制器,其包括存储器与处理器,所述存储器存储有计算机程序,所述程序在被所述处理器执行时能够实现所述方法的步骤。
根据本发明第四实施例,提供了一种计算机可读存储介质,用于存储计算机程序,所述程序在由一计算机或处理器执行时实现所述方法的步骤。
本发明与现有技术相比具有明显的优点和有益效果。借由上述技术方案,本发明一种智能设备的控制方法、装置以及控制器和介质可达到相当的技术进步性及实用性,并具有产业上的广泛利用价值,其至少具有下列优点:
本发明将智能设备进行分组,每个组内的智能设备共享组内各个智能设备的状态信息,控制整个设备组中的所有智能设备,进而实现多设备的上下文会话状态共享,使用户对话可以跨设备迁移;多设备的执行状态共享,使用户当前执行的任务可以跨设备迁移;根据当前用户的所有智能设备的属性信息和预设选择规则,进行决策,投递给最合适的设备;根据所有智能设备的属性信息和预设选择规则,将一个连续的指令按照不同的场景,分发给多个合适的设备,实现多设备协同工作等等,满足用户的个性化需求,从而提升了用户体验。此外,本发明将智能设备的所有功能全部指令化,由服务器进行下发,设备端只需要进行指令的执行以及状态的同步即可,不需要进行任何的业务行为处理,极大降低了设备端的硬件性能要求,从而降低了每台设备的硬件成本,以及不同设备类型的人工研发成本。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其他目的、特征和优点能够更明显易懂,以下特举较佳实施例,并配合附图,详细说明如下。
附图说明
图1为本发明一实施例提供智能设备的控制方法流程图;
图2为本发明一实施例提供的智能设备的会话共享信息交互示意图;
图3为本发明一实施例提供的智能设备的状态共享信息交互示意图;
图4为本发明一实施例提供的智能设备的状态共享动态调度信息交互示意图;
图5为本发明一实施例提供的智能设备的用户规则决策调度信息交互示意图;
图6为本发明一实施例提供的智能设备的软件分层设置示意图;
图7为本发明一实施例提供的智能设备的控制装置示意图。
【符号说明】
1:信息同步模块 2:设备分组模块
3:信息共享模块 4:设备控制模块
具体实施方式
为更进一步阐述本发明为达成预定发明目的所采取的技术手段及功效,以下结合附图及较佳实施例,对依据本发明提出的一种智能设备的控制方法、装置以及控制器和介质的具体实施方式及其功效,详细说明如后。
本发明实施例,提供了一种智能设备的控制方法,如图1所示,包括:
步骤S1、实时同步获取多个智能设备的状态信息,所述状态信息包括属性信息、上下文会话信息和执行状态信息中的一种或多种。
作为示例,可将多个智能设备的状态信息实时同步至云端服务器,云端服务器与所述多个智能设备通信连接,由云端服务器收发指令实现对多个智能设备的控制。也可指定局域网中的一个设备作为服务器,实现与上述云端服务器等同的功能,该服务器连接多个所述智能设备,由该服务器收发指令,实现对多个云端设备的控制,本发明以下实施例中,以云端服务器为例进行说明。
智能设备可包括智能音箱、智能电视、智能机顶盒、智能手机、智能家居设备、智能可穿戴设备等,智能设备具有语音交互、触屏交互等功能。
作为示例,可预先配置智能设备的属性信息,所述属性信息可包括设备名称、音频播报功能、显示功能、底层系统类型(如Linux系统、Android系统)、播放器支持的媒体格式、播放器音质、显示分辨率、外接显示器功能、按钮功能、触摸功能中的一种或多种。云端服务器可根据智能设备的属性信息为其分配唯一的编码以及生成验证认证使用的秘钥信息。还可为智能设备配置默认组合方式,如多个语音输入设备对应一个执行设备(可以多个设备输入语音指令,但是只在一台设备执行)、单一设备输入和执行(每一个设备作为独立的输入设备和执行设备存在,不可跨设备调度指令)、动态智能选择方式(云端服务器根据智能设备的属性以及用户的位置信息进行动态决策如选择音质最好的设备来播放音乐)等,从而为后续智能设备分组以及组内的控制策略提供基础。此外,还可为智能设备配置其他动态属性,如提供云端接口,用户可以通过手机app等其他设备来设置设备的动态属性标签,如所处位置标签信息,设备的别名等。
步骤S2、对所述多个智能设备进行分组,每个智能设备组中包括至少两个智能设备。
多个智能设备可分布在多个场景中,如家庭场景、办公场景和车载场景等,通过步骤S2的分组操作,可使得不同场景中的智能设备处于同一智能设备组中。
步骤S3、将智能设备组内各个智能设备的状态信息在该智能设备组内共享。
作为示例,通过步骤S3可将在家庭场景中的上下文会话信息以及执行状态等共享给车载设备中的智能设备,从而可以实现当用户从家里离开,驾驶车辆时可以让车载智能设备继续执行家庭场景中的对话或者断点继播音频内容。
步骤S4、基于设备组内共享的各个智能设备的状态信息对所述设备组内的智能设备进行控制。
作为一种示例,所述状态信息包括上下文会话信息,所述智能设备组包括第一设备和第二设备,所述步骤S4包括:
步骤S401、接收第一设备的第一会话指令,并同步存储所述第一会话指令对应的第一会话信息;
步骤S402、接收第二设备的第二会话指令,并获取所述第一会话信息;
步骤S403、根据所述第一会话信息和第二会话指令向所述第二设备发送应答信息。
通过步骤S401-步骤S403,用户可配置该用户的不同智能设备组成智能设备组,将智能设备的上下文会话信息共享给组内的其他智能设备,在用户再次会话时可以使用共享的会话信息进行上下文会话,从而使用户实现跨设备多轮对话。
以下通过一具体实施例对步骤S401-步骤S403进行进一步说明,如图2所示,用户拥有两台智能设备,且两台智能设备构成了智能设备组,第一台设备询问北京天气,云端服务器会将会话状态存储起来,第二台设备请求询问北京明天的天气,拉取上第一台智能设备的会话状态,然后进行语义的合并拿到准确的下行指令。
作为一种示例,所述状态信息包括上下文会话信息和执行状态信息,所述智能设备组包括第一设备和第二设备,所述步骤S4包括:
步骤S411、接收第一设备的第一会话指令,并同步存储所述第一会话指令对应的第一会话信息;
步骤S412、根据所述第一会话指令向所述第一设备下发第一执行内容;
步骤S413、接收所述第一设备根据所述第一执行内容上报的第一执行状态信息;
步骤S414、接收第二设备的第二会话指令,并获取所述第一会话信息和第一执行状态信息;
步骤S415、根据所述第二会话指令、第一会话信息以及第一执行状态信息向所述第二设备发送第二执行内容,若第一设备仍在继续执行操作,还可向第一设备发送暂停指令,暂停第一设备执行。
通过步骤S411-步骤S415,用户可配置该用户的不同设备组成智能设备组,当智能设备执行云端服务器下发的指令时和云端服务器保持实时的执行状态同步,当执行发生中断后云端服务器会记录最后的执行状态以及执行的详细内容,如音乐的播放地址以及播放进度,当用户换另一个智能设备时,云端服务器可以将最后一次的执行状态共享给另一个智能设备,让其具备自动恢复断点续播的能力,从而实现多设备的状态共享,使用户当前执行的任务可以跨设备迁移。
以下通过一具体实施例对步骤S411-步骤S415进行进一步说明,如图3所示,智能设备组中的第一台智能设备发起音乐请求,云端服务器进入本次的会话状态信息,并且向第一台智能设备下发播放内容,第一台设备端接受到播放内容时,会和云端服务器进行播放状态的同步,用户对第二台智能设备发起继续播放指令,则云端服务器会拉取第一台智能设备的播放状态,然后给第二台智能设备发送音乐内容以及播放的进度,如果第一台智能设备还在播放,则还可给第一台智能设备下发暂停指令。
作为一种示例,所述状态信息包括上下文会话信息和执行状态信息,所述设备组包括第一设备和第二设备,所述步骤S4包括:
步骤S421、接收用户的第一位置信息和第一设备的第一会话指令,同步存储所述第一会话指令对应的第一会话信息;
步骤S422、根据所述第一会话指令向第一设备下发第一执行内容;
步骤S423、接收所述第一设备根据所述第一执行内容上报的第一执行状态信息,所述第一执行状态信息包括当前执行进度和当前执行内容;
步骤S424、接收用户的第二位置信息,根据所述第一位置信息和第二位置信息判断用户与所述第一设备之间的距离是否超过第一预设距离,所述第一预设距离为用户可获取智能设备语音、图像等信息的距离;
步骤S425、若超过,则向当前距离用户第二位置在第一预设距离之内的第二设备下发执行指令,根据所述第一执行状态信息向第二设备发送第二执行内容,并向第一设备下发暂停指令。
通过步骤S421-步骤S425,用户可配置该用户的不同设备组成智能设备组,组内智能设备分布在不同的位置,例如分布在客厅和卧室,当用户发起请求时,如“给我放首歌”,云端服务器会根据当前用户所处的位置信息,如当前在客厅,则选择客厅内的音箱进行播放,当用户空间位置发生变化时,例如用户从客厅走进卧室时,当云端服务器接收到上报的位置变化事件,云端服务器会中断客厅的音箱,并且让卧室的音箱继续执行播放音乐的指令,且从客厅音箱中断的时间点进行断点续播,由卧室的音箱接管整体的播放状态以及指令执行。用户位置信息可以通过位置传感器获得,位置传感器可以为位置已知的摄像头、接收到用户语音指令的设备、携带在用户身上的定位装置等。如图4所示示例,根据当前用户的所有设备情况、位置信息进行多设备的指令投递决策,投递给最合适的设备。
作为一种示例,所述状态信息包括属性信息,所述智能设备组包括多个智能设备,所述步骤S4包括:
步骤S431、接收用户请求指令;
步骤S432、根据用户请求指令、所述智能设备组内每个智能设备的属性信息以及预设选择规则选取对应的智能设备,并向对应的智能设备下发执行指令。
其中,预设选择规则根据具体应用场景以及用户需求来设定,例如同一空间的智能设备组中存在多个智能音箱,智能音箱的播放品质不同,用户对智能音箱的播放品质有较高要求,则可将预设规则设定为选择最高播放品质智能设备,则通过步骤S432可为用户自动选择当前空间内播放品质最高的智能音箱执行播放指令,如图5所示示例,当用户发起音乐播放指令时,云端会根据用户的规则或者自动化决策,选择品质高或者指定的设备来进行指令的响应,播放对应的音乐。此外,还可根据播放需求设定预设规则,例如,预设规则设定为,选择一个语音交互设备播放语音信息,同时,选择一个显示设备播放对应的图片或视频信息,通过用户配置使该用户下面的不同智能设备组成智能设备组,当用户发起请求时,如“今天天气怎么样”,云端可以获取到两个指令内容,一个为通过语音播放天气的信息情况,一个为通过UI显示天气的动态,云端可以根据当前的组合情况,如选择音箱播报天气信息,通过电视弹框显示天气的详细信息或者直接在选择带屏音箱上面通过语音天气信息以及通过UI进行天气的详情展示,从而实现多设备协同工作。
作为示例,对于智能设备指令执行以及状态信息上报服务的实现,可将智能设备端软件服务进行三层架构的拆分,如图6所示,分别为第一层:设置智能交互软件开发工具包(Software Development Kit,缩写:SDK),例如语音SDK以及状态上报SDK,状态上报SDK用于将智能设备的状态信息同步至云端服务器。第二层:设置应用程序(Application,简称App)引擎分发器,用于分发云端通用指令或者本地应用,其中,云端通用指令包括播报语音合成(TTS)内容,播放指定统一资源定位符(Url)的媒体内容,按照指定的模板渲染UI显示信息;本地应用包括视频应用、音乐应用、闹钟应用等系统端自带或者后期安装的本地应用。第三层:设置指令处理服务层,用于处理云端通用指令,如Media播放器播放音乐,TTS将文本通过语音合成服务进行播放,显示器(Display)显示服务进行UI渲染,或者系统API进行系统硬件操作(打开蓝牙等)。
对应的,可为云端服务器配置状态管理服务,用于和状态上报SDk对接,用于接收智能设备端的状态变更事件、存储智能设备的运行状态信息,并且需要将该状态同步给云端指令管理服务;同样在云端服务器也需部署对应的设备调度管理服务用于和各个智能设备建立连接并且获取智能设备的分组方式、智能设备的基本属性信息以及进行指令的调度判断,选择合适的智能设备来执行云端服务器下发的指令;由此可在云端服务器配置指令管理服务、语音接入网关(负责和设备端语音SDK连接连接以及内容指令响应)、设备信息管理服务等配套的基本服务。
作为示例,对于云端指令集管理服务,需要进行指令定义以及指令业务处理,当智能设备发起语音请求时,激活语音处理云端业务系统,语音处理云端业务系统进行语义理解分析以后将解析内容投递给指令处理服务,指令处理服务将语音请求进行二次分析,投递给具体的业务功能服务如:天气、音乐等,由具体业务服务响应指令列表集合,如音乐服务响应回来两个指令:一、“好的为你播放音乐”的文本转语音合成指令,二、“具体音乐的播放地址”的媒体播放地址,且业务要求该指令为有序执行指令,即先执行文本播报再播放音乐;此时指令处理服务会将指令集合缓存在云端状态服务中,只给智能设备端下发第一个文本转语音的指令,当智能设备端接收到第一个指令以后会进行状态的上报,在接受到智能设备端上报的内容播报结束状态时,指令处理服务会将下一个指令直接投递给智能设备。智能设备端发起请求以后,云端服务器会根据状态变更请求或者语音请求进行请求分发,如果是语音请求则会进行语义理解处理,处理完毕以后判断是否需要入会话栈,且进行意图完整性判断,在意图不完整的时候会主动向用户发起反馈要求用户补充完整意图的指令,该指令会直接通过设备调度服务进行返回的设备选择,设备调度服务用于管理所有的设备、设备信息和用户,设备的组信息以及和所有的设备建立了长连接的服务,该服务可以通过逻辑判断如选择音质最高的设备来执行指令的服务。在意图完整时会进行意图处理,获取执行指令集合,并将指令集合存储在会话机中进行指令精简以及后续的指令队列管理,选择合适的指令给设备调度服务选择合适的设备进行指令执行。如果用户的请求时是一个状态变更请求,则云端服务器会从会话机中获取接下来的指令,在会话机中有后续指令时直接分发给设备调度服务进行设备调度,选择合适的设备进行执行,在会话机中没有可执行指令时会询问该状态变化指向的指令生成服务获取新的指令集,如果没有返回新指令则会话进行出栈处理,如果返回新的指令则给设备调度服务进行调度执行。
本发明实施例所述方法中,云端服务器根据当前智能设备的运营情况以及用户的请求,接管所有的指令业务,使得智能设备仅执行指令的上传和接收以及状态信息的上报,所有指令的具体执行逻辑处理过程均在云端服务器上进行,将智能设备的所有功能全部指令化,由云端服务器进行下发,智能设备端只需要进行指令的执行以及状态的同步即可,不需要进行任何的业务行为处理,从而可以极大降低设备端的硬件性能要求从而节约每台设备的硬件成本,以及不同设备类型的人工研发成本。
本发明实施例还提供了一种智能设备的控制装置,如图7所示,包括信息同步模块1、设备分组模块2、信息共享模块3和设备控制模块4,其中,信息同步模块1配置为实时同步获取多个智能设备的状态信息,所述状态信息包括属性信息、上下文会话信息和执行状态信息中的一种或多种。设备分组模块2配置为对所述多个智能设备进行分组,每个智能设备组中包括至少两个智能设备。信息共享模块3配置为将智能设备组内各个智能设备的状态信息在该智能设备组内共享。设备控制模块4配置为基于设备组内共享的各个智能设备的状态信息对所述设备组内的智能设备进行控制。
作为示例,信息同步模块1可将多个智能设备的状态信息实时同步至云端服务器,云端服务器与所述多个智能设备通信连接,由云端服务器收发指令实现对多个智能设备的控制。也可指定局域网中的一个设备作为服务器,实现与上述云端服务器等同的功能,该服务器连接多个所述智能设备,由该服务器收发指令,实现对多个云端设备的控制,本发明以下实施例中,以云端服务器为例进行说明。
智能设备可包括智能音箱、智能电视、智能机顶盒、智能手机、智能家居设备、智能可穿戴设备等,智能设备具有语音交互、触屏交互等功能。多个智能设备可分布在多个场景中,如家庭场景、办公场景和车载场景等,通过设备分组模块2的分组操作,可使得不同场景中的智能设备处于同一智能设备组中。
作为示例,所述属性信息包括设备名称、音频播报功能、显示功能、底层系统类型、播放器支持的媒体格式、播放器音质、显示分辨率、外接显示器功能、按钮功能、触摸功能中的一种或多种。
作为一种示例,所述状态信息包括上下文会话信息,所述智能设备组包括第一设备和第二设备,所述设备控制模块4具体配置为:接收第一设备的第一会话指令,并同步存储所述第一会话指令对应的第一会话信息;接收第二设备的第二会话指令,并获取所述第一会话信息;根据所述第一会话信息和第二会话指令向所述第二设备发送应答信息。通过设备控制模块4执行上述操作,用户可配置该用户的不同智能设备组成智能设备组,将智能设备的上下文会话信息共享给组内的其他智能设备,在用户再次会话时可以使用共享的会话信息进行上下文会话,从而使用户实现跨设备多轮对话。
作为一种示例,所述状态信息包括上下文会话信息和执行状态信息,所述智能设备组包括第一设备和第二设备,所述设备控制模块4具体配置为:接收第一设备的第一会话指令,并同步存储所述第一会话指令对应的第一会话信息;根据所述第一会话指令向所述第一设备下发第一执行内容;接收所述第一设备根据所述第一执行内容上报的第一执行状态信息;接收第二设备的第二会话指令,并获取所述第一会话信息和第一执行状态信息;根据所述第二会话指令、第一会话信息以及第一执行状态信息向所述第二设备发送第二执行内容。通过设备控制模块4执行上述操作,用户可配置该用户的不同设备组成智能设备组,当智能设备执行云端服务器下发的指令时和云端服务器保持实时的执行状态同步,当执行发生中断后云端服务器会记录最后的执行状态以及执行的详细内容,如音乐的播放地址以及播放进度,当用户换另一个智能设备时,云端服务器可以将最后一次的执行状态共享给另一个智能设备,让其具备自动恢复断点续播的能力,从而实现多设备的状态共享,使用户当前执行的任务可以跨设备迁移。
作为一种示例,所述状态信息包括上下文会话信息和执行状态信息,所述设备组包括第一设备和第二设备,所述设备控制模块4具体配置为:接收用户的第一位置信息和第一设备的第一会话指令,同步存储所述第一会话指令对应的第一会话信息;根据所述第一会话指令向第一设备下发第一执行内容;接收所述第一设备根据所述第一执行内容上报的第一执行状态信息,所述第一执行状态信息包括当前执行进度和当前执行内容;接收用户的第二位置信息,根据所述第一位置信息和第二位置信息判断用户与所述第一设备之间的距离是否超过第一预设距离;若超过,则向当前距离用户第二位置在第一预设距离之内的第二设备下发执行指令,根据所述第一执行状态信息向第二设备发送第二执行内容;并向第一设备下发暂停指令。通过设备控制模块4执行上述操作,用户可配置该用户的不同设备组成智能设备组,组内智能设备分布在不同的位置,例如分布在客厅和卧室,当用户发起请求时,如“给我放首歌”,云端服务器会根据当前用户所处的位置信息,如当前在客厅,则选择客厅内的音箱进行播放,当用户空间位置发生变化时,例如用户从客厅走进卧室时,云端服务器会中断客厅的音箱,并且让卧室的音箱继续执行播放音乐的指令,且从客厅音箱中断的时间点进行断点续播,由卧室的音箱接管整体的播放状态以及指令执行。根据当前用户的所有设备情况、位置信息进行多设备的指令投递决策,投递给最合适的设备。
作为一种示例,所述状态信息包括属性信息,所述智能设备组包括多个智能设备,所述设备控制模块4具体配置为:接收用户请求指令;根据用户请求指令、所述智能设备组内每个智能设备的属性信息以及预设选择规则选取对应的智能设备,并向对应的智能设备下发执行指令。其中,预设选择规则根据具体应用场景以及用户需求来设定,例如同一空间的智能设备组中存在多个智能音箱,智能音箱的播放品质不同,用户对智能音箱的播放品质有较高要求,则可将预设规则设定为选择最高播放品质智能设备,则通过设备控制模块4可为用户自动选择当前空间内播放品质最高的智能音箱执行播放指令,当用户发起音乐播放指令时,云端会根据用户的规则或者自动化决策,选择品质高或者指定的设备来进行指令的响应,播放对应的音乐。此外,还可根据播放需求设定预设规则,例如,预设规则设定为,选择一个语音交互设备播放语音信息,同时,选择一个显示设备播放对应的图片或视频信息,通过用户配置使该用户下面的不同智能设备组成智能设备组,当用户发起请求时,如“今天天气怎么样”,云端可以获取到两个指令内容,一个为通过语音播放天气的信息情况,一个为通过UI显示天气的动态,云端可以根据当前的组合情况,如选择音箱播报天气信息,通过电视弹框显示天气的详细信息或者直接在选择带屏音箱上面通过语音天气信息以及通过UI进行天气的详情展示,从而实现多设备协同工作。
本发明实施例还提供一种控制器,其包括存储器与处理器,所述存储器存储有计算机程序,所述程序在被所述处理器执行时能够实现所述智能设备的控制方法的步骤。
本发明实施例还提供一种计算机可读存储介质,用于存储计算机程序,所述程序在由一计算机或处理器执行时实现所述智能设备的控制方法的步骤。
本发明实施例将智能设备进行分组,每个组内的智能设备共享组内各个智能设备的状态信息,控制整个设备组中的所有智能设备,进而实现多设备的上下文会话状态共享,使用户对话可以跨设备迁移;多设备的执行状态共享,使用户当前执行的任务可以跨设备迁移;根据当前用户的所有智能设备的属性信息和预设选择规则,进行决策,投递给最合适的设备;根据所有智能设备的属性信息和预设选择规则,将一个连续的指令按照不同的场景,分发给多个合适的设备,实现多设备协同工作等等,满足用户的个性化需求,从而提升了用户体验。此外,本发明实施例将智能设备的所有功能全部指令化,由服务器进行下发,设备端只需要进行指令的执行以及状态的同步即可,不需要进行任何的业务行为处理,极大降低了设备端的硬件性能要求,从而降低了每台设备的硬件成本,以及不同设备类型的人工研发成本。
以上所述,仅是本发明的较佳实施例而已,并非对本发明作任何形式上的限制,虽然本发明已以较佳实施例揭露如上,然而并非用以限定本发明,任何熟悉本专业的技术人员,在不脱离本发明技术方案范围内,当可利用上述揭示的技术内容作出些许更动或修饰为等同变化的等效实施例,但凡是未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与修饰,均仍属于本发明技术方案的范围内。

Claims (14)

1.一种智能设备的控制方法,其特征在于,包括:
实时同步获取多个智能设备的状态信息,所述状态信息包括属性信息、上下文会话信息和执行状态信息中的一种或多种;
对所述多个智能设备进行分组,每个智能设备组中包括至少两个智能设备;
将智能设备组内各个智能设备的状态信息在该智能设备组内共享;
基于设备组内共享的各个智能设备的状态信息对所述设备组内的智能设备进行控制。
2.根据权利要求1所述的智能设备的控制方法,其特征在于,
所述状态信息包括上下文会话信息,所述智能设备组包括第一设备和第二设备,所述基于设备组内共享的各个智能设备的状态信息对所述设备组内的智能设备进行控制,包括:
接收第一设备的第一会话指令,并同步存储所述第一会话指令对应的第一会话信息;
接收第二设备的第二会话指令,并获取所述第一会话信息;
根据所述第一会话信息和第二会话指令向所述第二设备发送应答信息。
3.根据权利要求1所述的智能设备的控制方法,其特征在于,
所述状态信息包括上下文会话信息和执行状态信息,所述智能设备组包括第一设备和第二设备,所述基于设备组内共享的各个智能设备的状态信息对所述设备组内的智能设备进行控制,包括:
接收第一设备的第一会话指令,并同步存储所述第一会话指令对应的第一会话信息;
根据所述第一会话指令向所述第一设备下发第一执行内容;
接收所述第一设备根据所述第一执行内容上报的第一执行状态信息;
接收第二设备的第二会话指令,并获取所述第一会话信息和第一执行状态信息;
根据所述第二会话指令、第一会话信息以及第一执行状态信息向所述第二设备发送第二执行内容。
4.根据权利要求1所述的智能设备的控制方法,其特征在于,
所述状态信息包括上下文会话信息和执行状态信息,所述设备组包括第一设备和第二设备,所述基于设备组内共享的各个智能设备的状态信息对所述设备组内的智能设备进行控制,包括:
接收用户的第一位置信息和第一设备的第一会话指令,同步存储所述第一会话指令对应的第一会话信息;
根据所述第一会话指令向第一设备下发第一执行内容;
接收所述第一设备根据所述第一执行内容上报的第一执行状态信息,所述第一执行状态信息包括当前执行进度和当前执行内容;
接收用户的第二位置信息,根据所述第一位置信息和第二位置信息判断用户与所述第一设备之间的距离是否超过第一预设距离;
若超过,则向当前距离用户第二位置在第一预设距离之内的第二设备下发执行指令,根据所述第一执行状态信息向第二设备发送第二执行内容;并向第一设备下发暂停指令。
5.根据权利要求1所述的智能设备的控制方法,其特征在于,
所述状态信息包括属性信息,所述智能设备组包括多个智能设备,所述基于设备组内共享的各个智能设备的状态信息对所述设备组内的智能设备进行控制,包括:
接收用户请求指令;
根据用户请求指令、所述智能设备组内每个智能设备的属性信息以及预设选择规则选取对应的智能设备,并向对应的智能设备下发执行指令。
6.根据权利要求1-5中任意一项所述的智能设备的控制方法,其特征在于,
所述属性信息包括设备名称、音频播报功能、显示功能、底层系统类型、播放器支持的媒体格式、播放器音质、显示分辨率、外接显示器功能、按钮功能、触摸功能中的一种或多种。
7.一种智能设备的控制装置,其特征在于,包括:
信息同步模块,配置为实时同步获取多个智能设备的状态信息,所述状态信息包括属性信息、上下文会话信息和执行状态信息中的一种或多种;
设备分组模块,配置为对所述多个智能设备进行分组,每个智能设备组中包括至少两个智能设备;
信息共享模块,配置为将智能设备组内各个智能设备的状态信息在该智能设备组内共享;
设备控制模块,配置为基于设备组内共享的各个智能设备的状态信息对所述设备组内的智能设备进行控制。
8.根据权利要求7所述的智能设备的控制装置,其特征在于,
所述状态信息包括上下文会话信息,所述智能设备组包括第一设备和第二设备,所述设备控制模块具体配置为:
接收第一设备的第一会话指令,并同步存储所述第一会话指令对应的第一会话信息;
接收第二设备的第二会话指令,并获取所述第一会话信息;
根据所述第一会话信息和第二会话指令向所述第二设备发送应答信息。
9.根据权利要求7所述的智能设备的控制装置,其特征在于,
所述状态信息包括上下文会话信息和执行状态信息,所述智能设备组包括第一设备和第二设备,所述设备控制模块具体配置为:
接收第一设备的第一会话指令,并同步存储所述第一会话指令对应的第一会话信息;
根据所述第一会话指令向所述第一设备下发第一执行内容;
接收所述第一设备根据所述第一执行内容上报的第一执行状态信息;
接收第二设备的第二会话指令,并获取所述第一会话信息和第一执行状态信息;
根据所述第二会话指令、第一会话信息以及第一执行状态信息向所述第二设备发送第二执行内容。
10.根据权利要求7所述的智能设备的控制装置,其特征在于,
所述状态信息包括上下文会话信息和执行状态信息,所述设备组包括第一设备和第二设备,所述设备控制模块具体配置为:
接收用户的第一位置信息和第一设备的第一会话指令,同步存储所述第一会话指令对应的第一会话信息;
根据所述第一会话指令向第一设备下发第一执行内容;
接收所述第一设备根据所述第一执行内容上报的第一执行状态信息,所述第一执行状态信息包括当前执行进度和当前执行内容;
接收用户的第二位置信息,根据所述第一位置信息和第二位置信息判断用户与所述第一设备之间的距离是否超过第一预设距离;
若超过,则向当前距离用户第二位置在第一预设距离之内的第二设备下发执行指令,根据所述第一执行状态信息向第二设备发送第二执行内容;并向第一设备下发暂停指令。
11.根据权利要求7所述的智能设备的控制装置,其特征在于,
所述状态信息包括属性信息,所述智能设备组包括多个智能设备,所述设备控制模块具体配置为:
接收用户请求指令;
根据用户请求指令、所述智能设备组内每个智能设备的属性信息以及预设选择规则选取对应的智能设备,并向对应的智能设备下发执行指令。
12.根据权利要求7-11中任意一项所述的智能设备的控制装置,其特征在于,
所述属性信息包括设备名称、音频播报功能、显示功能、底层系统类型、播放器支持的媒体格式、播放器音质、显示分辨率、外接显示器功能、按钮功能、触摸功能中的一种或多种。
13.一种控制器,其包括存储器与处理器,其特征在于,所述存储器存储有计算机程序,所述程序在被所述处理器执行时能够实现权利要求1至6中任意一项权利要求所述的方法的步骤。
14.一种计算机可读存储介质,用于存储计算机程序,其特征在于,所述程序在由一计算机或处理器执行时实现如权利要求1至6中任意一项权利要求所述的方法的步骤。
CN201910290535.XA 2019-04-11 2019-04-11 智能设备的控制方法、装置以及控制器和介质 Active CN110012103B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910290535.XA CN110012103B (zh) 2019-04-11 2019-04-11 智能设备的控制方法、装置以及控制器和介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910290535.XA CN110012103B (zh) 2019-04-11 2019-04-11 智能设备的控制方法、装置以及控制器和介质

Publications (2)

Publication Number Publication Date
CN110012103A true CN110012103A (zh) 2019-07-12
CN110012103B CN110012103B (zh) 2021-11-02

Family

ID=67171285

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910290535.XA Active CN110012103B (zh) 2019-04-11 2019-04-11 智能设备的控制方法、装置以及控制器和介质

Country Status (1)

Country Link
CN (1) CN110012103B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110688974A (zh) * 2019-09-30 2020-01-14 支付宝(杭州)信息技术有限公司 一种身份识别方法及装置
CN111143061A (zh) * 2019-12-18 2020-05-12 海尔优家智能科技(北京)有限公司 多设备的联动控制方法、装置及存储介质
CN112312240A (zh) * 2019-07-23 2021-02-02 北京声智科技有限公司 一种音箱集群控制方法、服务器、控制装置及控制系统
CN112817248A (zh) * 2020-12-24 2021-05-18 青岛海尔科技有限公司 一种共享设备管理方法、装置、存储介质及电子装置
WO2022188551A1 (zh) * 2021-03-10 2022-09-15 Oppo广东移动通信有限公司 信息处理方法与装置、主控设备和受控设备
CN115379043A (zh) * 2021-05-18 2022-11-22 华为技术有限公司 一种跨设备的文本接续的方法和电子设备
WO2024046156A1 (zh) * 2022-08-29 2024-03-07 华为技术有限公司 一种智能设备控制方法及电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160359970A1 (en) * 2011-03-08 2016-12-08 Rackspace Us, Inc. Virtual multi-cluster clouds
CN106990717A (zh) * 2016-02-02 2017-07-28 中国科学院上海高等研究院 一种无线多重自组网、组网方法及其通信方法
CN106993181A (zh) * 2016-11-02 2017-07-28 大辅科技(北京)有限公司 多vr/ar设备协同系统及协同方法
US20180097877A1 (en) * 2016-09-30 2018-04-05 Dropbox, Inc. Linking content items and collaboration content items
CN109302464A (zh) * 2018-09-18 2019-02-01 爱普(福建)科技有限公司 基于控制站的智能家居设备的app统一控制方法和系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160359970A1 (en) * 2011-03-08 2016-12-08 Rackspace Us, Inc. Virtual multi-cluster clouds
CN106990717A (zh) * 2016-02-02 2017-07-28 中国科学院上海高等研究院 一种无线多重自组网、组网方法及其通信方法
US20180097877A1 (en) * 2016-09-30 2018-04-05 Dropbox, Inc. Linking content items and collaboration content items
CN106993181A (zh) * 2016-11-02 2017-07-28 大辅科技(北京)有限公司 多vr/ar设备协同系统及协同方法
CN109302464A (zh) * 2018-09-18 2019-02-01 爱普(福建)科技有限公司 基于控制站的智能家居设备的app统一控制方法和系统

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112312240A (zh) * 2019-07-23 2021-02-02 北京声智科技有限公司 一种音箱集群控制方法、服务器、控制装置及控制系统
CN110688974A (zh) * 2019-09-30 2020-01-14 支付宝(杭州)信息技术有限公司 一种身份识别方法及装置
CN110688974B (zh) * 2019-09-30 2022-10-25 支付宝(杭州)信息技术有限公司 一种身份识别方法及装置
CN111143061A (zh) * 2019-12-18 2020-05-12 海尔优家智能科技(北京)有限公司 多设备的联动控制方法、装置及存储介质
CN111143061B (zh) * 2019-12-18 2024-02-23 海尔优家智能科技(北京)有限公司 多设备的联动控制方法、装置及存储介质
CN112817248A (zh) * 2020-12-24 2021-05-18 青岛海尔科技有限公司 一种共享设备管理方法、装置、存储介质及电子装置
CN112817248B (zh) * 2020-12-24 2023-06-09 青岛海尔科技有限公司 一种共享设备管理方法、装置、存储介质及电子装置
WO2022188551A1 (zh) * 2021-03-10 2022-09-15 Oppo广东移动通信有限公司 信息处理方法与装置、主控设备和受控设备
CN115379043A (zh) * 2021-05-18 2022-11-22 华为技术有限公司 一种跨设备的文本接续的方法和电子设备
CN115379043B (zh) * 2021-05-18 2024-06-04 华为技术有限公司 一种跨设备的文本接续的方法和电子设备
WO2024046156A1 (zh) * 2022-08-29 2024-03-07 华为技术有限公司 一种智能设备控制方法及电子设备

Also Published As

Publication number Publication date
CN110012103B (zh) 2021-11-02

Similar Documents

Publication Publication Date Title
CN110012103A (zh) 智能设备的控制方法、装置以及控制器和介质
US11991312B2 (en) System and method for queuing a communication session
CN104092971B (zh) 存在信息共享装置、方法、程序及系统
US7085842B2 (en) Line navigation conferencing system
CN110347979A (zh) 分屏跨应用的信息分享方法、装置与触控终端、存储介质
CN105828213B (zh) 用于减少呈现等待时间的分配器、输出设备和方法
JP5120851B2 (ja) ウェブ・ベース統合通信システム及び方法、及びウェブ通信マネージャ
CN110233945A (zh) 基于互联网音视频技术的人工服务请求处理方法和装置
CN108881779A (zh) 智能设备之间的视频通话接听转移方法、系统及服务器
CN101340494B (zh) 一种呼叫中心的通告方法及系统
CN108664229A (zh) 传屏方法、装置、电子设备及计算机可读存储介质
CN110427428A (zh) 分布式服务调用方法及系统
CN109672857A (zh) 监控资源的处理方法和装置
CN109728994A (zh) 通话方法、装置及计算机可读存储介质
CN102739880A (zh) 基于移动互联网的可视化电话导航方法
CN116319790A (zh) 全真场景的渲染方法、装置、设备和存储介质
CN104756447B (zh) 一种录制会话信息的方法和录制服务器
US20130042017A1 (en) System and Method for Generating Flash-Based Media Stream
JPH07264284A (ja) マルチメディア通信制御方式
CN110149620A (zh) 一种智能耳机的控制方法、装置,智能耳机及存储介质
CN101651759B (zh) 媒体播放的控制方法、系统和设备
CN102035950A (zh) 坐席业务处理方法及ip坐席终端
JP2023082098A (ja) 情報処理装置および情報処理方法
CN105791922B (zh) 一种媒体播放控制方法及其装置
CN110335610A (zh) 多媒体翻译的控制方法及显示器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant