CN113448251A - 位置提示方法及系统 - Google Patents

位置提示方法及系统 Download PDF

Info

Publication number
CN113448251A
CN113448251A CN202010211174.8A CN202010211174A CN113448251A CN 113448251 A CN113448251 A CN 113448251A CN 202010211174 A CN202010211174 A CN 202010211174A CN 113448251 A CN113448251 A CN 113448251A
Authority
CN
China
Prior art keywords
information
information interaction
interaction component
controller
target object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010211174.8A
Other languages
English (en)
Inventor
蒋鹏民
孟卫明
王月岭
王彦芳
唐至威
张淯易
刘帅帅
高雪松
陈维强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Group Co Ltd
Hisense Co Ltd
Original Assignee
Hisense Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hisense Co Ltd filed Critical Hisense Co Ltd
Priority to CN202010211174.8A priority Critical patent/CN113448251A/zh
Publication of CN113448251A publication Critical patent/CN113448251A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B15/00Systems controlled by a computer
    • G05B15/02Systems controlled by a computer electric
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/418Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/20Pc systems
    • G05B2219/26Pc applications
    • G05B2219/2642Domotique, domestic, home control, automation, smart house
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Manufacturing & Machinery (AREA)
  • Quality & Reliability (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请公开了一种位置提示方法及系统,属于电子技术领域。所述位置提示系统包括:控制器和多个信息交互组件,控制器与多个信息交互组件相连接;信息交互组件被配置为采集信息和输出信息;控制器被配置为:在确定多个信息交互组件中的第一信息交互组件采集到目标对象的信息时,触发位置提示系统中的至少一个信息交互组件将第一信息交互组件的位置作为目标对象的位置输出。本申请解决了智能家居中的控制器功能较少,智能家居的智能化较弱的问题。本申请用于获取提示对象的位置。

Description

位置提示方法及系统
技术领域
本申请涉及电子技术领域,特别涉及一种位置提示方法及系统。
背景技术
随着电子技术的发展,智能家居的应用越来越广泛。
智能家居是以住宅为平台,将住宅中的电子设备与控制器连接在一起,以实现控制器对电子设备的智能化控制的一种居住环境。示例地,控制器可以在获取到与其连接的某电子设备相关的信息时,自动控制该电子设备执行相应的操作。
但是,目前智能家居中控制器的功能较少,智能家居的智能化还有待提升。
发明内容
本申请提供了一种位置提示方法及系统,可以解决智能家居中控制器的功能较少的问题。本申请提供的技术方案包括:
一方面,提供了一种位置提示系统,所述位置提示系统,包括:包括控制器和多个信息交互组件,所述控制器与所述多个信息交互组件相连接;
所述信息交互组件被配置为采集信息和输出信息;
所述控制器被配置为:在确定所述多个信息交互组件中的第一信息交互组件采集到目标对象的信息时,触发所述位置提示系统中的至少一个信息交互组件将所述第一信息交互组件的位置作为所述目标对象的位置输出。
另一方面,提供了一种位置提示方法,所述方法包括:
根据第二信息交互组件采集的辅助语音,确定声源对象和所述辅助语音指示的待查找的目标对象;
确定采集到所述目标对象的信息的第一信息交互组件,将所述第一信息交互组件的位置确定为所述目标对象的位置;
触发所述第二信息交互组件输出所述目标对象的位置。
本申请提供的技术方案带来的有益效果至少包括:
本申请提供的位置提示系统中控制器可以确定目标对象的位置,并控制信息交互组件输出该目标对象的位置。如此一来,用户可以通过便捷地获知目标对象的位置,降低了由于住宅较大使得用户找寻某对象的难度,丰富了控制器的功能。
附图说明
图1是本申请实施例提供的一种位置提示系统的结构示意图;
图2是本申请实施例提供的一种位置提示方法的流程图;
图3是本申请实施例提供的一种对象知识图谱的示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
智能家居是以住宅为平台,利用综合布线、网络通信以及安全防范等技术,将住宅中的电子设备与控制器连接在一起,构建的能高效执行用户命令以及对用户的日程事物进行管理的系统。随着智能家居的快速发展,各种各样的智能家居设备进入千家万户。比如,智能家居设备可以包括智能照明设备、智能电视、智能冰箱、智能音箱以及智能空调等等。在智能家居设备越来越多的情况下,人们对智能家居所能实现的功能的要求越来越多,对智能家居的智能化的要求越来越高。本申请实施例提供的位置提示系统,可以提示住宅中对象的位置,以便于用户及时便捷的某对象的位置,可以增加智能家居所能实现的功能,进一步提升智能家居的智能化。
图1是本申请实施例提供的一种位置提示系统。如图1所示,该位置提示系统10可以包括控制器(图1未示出控制器)和多个信息交互组件101,控制器与多个信息交互组件101相连接。示例地,控制器与信息交互组件101可以直接电连接也可以通信连接,本申请实施例不作限定。需要说明的是,图1以该位置提示系统10包括五个信息交互组件101为例进行示意,可选地,该信息交互组件101的个数也可以为四个、三个或其他个数,本申请实施例对此不作限定。该位置提示系统可以为一种智能家居系统。
其中,信息交互组件101被配置为采集信息和输出信息。控制器被配置为:在确定多个信息交互组件101中的第一信息交互组件采集到目标对象的信息时,触发位置提示系统10中的至少一个信息交互组件101将第一信息交互组件的位置作为目标对象的位置输出。
综上所述,本申请实施例中控制器可以确定目标对象的位置,并控制信息交互组件输出该目标对象的位置。如此一来,用户可以通过便捷地获知目标对象的位置,降低了由于住宅较大使得用户找寻某对象的难度,丰富了控制器的功能。
本申请实施例中,该信息交互组件101为一种智能家居设备,该信息交互组件101也可以称为智感器。该信息交互组件101可以包括摄像头、麦克风和扬声器。该摄像头可以用于采集图像,该麦克风可以用于采集语音,该扬声器可以用于输出语音。此时该信息交互组件101采集的信息可以包括:图像和语音中的至少一种信息,该信息交互组件101输出的信息可以包括语音。
可选地,该信息交互组件101还可以包括显示屏,该显示屏可以用于显示图像或者文字,此时信息交互组件101输出的信息还可以包括图像或者文字,故信息交互组件输出的信息可以包括:图像、文字和语音中的至少一种信息。该显示屏可以为触控显示屏,用户可以通过该触控显示屏输入文字,此时信息交互组件101采集的信息还可以包括文字,故信息交互组件采集的信息可以包括:图像、文字和语音中的至少一种信息。
可选地,信息交互组件还可以包括其他部件,进而使得信息交互组件采集或者输出的信息可以包括其他信息,本申请实施例不作限定。如信息交互组件还可以包括指纹采集部件,进而信息交互组件采集的信息还可以包括指纹。
请继续参考图1,该多个信息交互组件101可以分别安装在智能家居住宅的多个区域,每个区域可以安装有至少一个信息交互组件101。示例地,该多个区域可以包括住宅中的卧室、客厅、厨房、书房和玄关等,图1以每个区域中安装有一个信息交互组件为例进行示意。可选地,也可以存在至少部分区域中安装有两个或三个信息交互组件。可选地,本申请实施例中信息交互组件中摄像头的视野应尽量覆盖其所在区域中的大部分空间,或者摄像头的视野覆盖其所在区域中对象所在的概率较大的空间。可选地,每个信息交互组件可以具有对应的标识,如信息交互组件的标识可以为该信息交互组件的网际互联协议(Internet Protocol,IP)地址。每个信息交互组件的标识可以与该信息交互组件所在的区域的标识相对应,根据信息交互组件的标识可以确定该信息交互组件所在的区域。可选地,位置提示系统10还可以包括与控制器连接的存储器,信息交互组件的标识和对应的区域的标识可以存储在该存储器中。
可选地,本申请实施例中的信息交互组件可以按照固定的采集方式自行采集信息,如该采集方式可以由控制器下发给信息交互组件,或者该采集方式也可以在信息交互组件出厂时便被设定好。示例地,信息交互组件可以周期性地采集信息,当该周期可以较短时,此时信息交互组件可以实时采集图像;或者信息交互组件也可以在特定的时刻采集信息,或者信息交互组件也可以采用其他采集方式采集信息,本申请实施例不作限定。可选地,信息交互组件也可以在控制器的控制下采集信息。
本申请实施例中所述的对象可以包括人,本申请实施例中所述的信息交互组件的位置可以指该信息交互组件所在的区域,目标对象的位置也可以指目标对象所在的区域。
示例地,目标对象为张三,当控制器确定位置提示系统中的第一信息交互组件采集到张三的信息(如张三的图像或语音)时,控制器可以确定张三位于该第一信息交互组件所在的区域中。故控制器可以将第一信息交互组件所在的区域确定为张三所在的区域,也即是将第一信息交互组件的位置作为张三的位置,进而触发位置提示系统中的至少一个信息交互组件输出张三所在的区域的提示信息。如张三所在的区域为客厅,则该至少一个信息交互组件可以输出“张三在客厅”的提示信息。
可选地,本申请实施例中的控制器可以包括中央处理器(central processingunit,CPU),图形处理器(graphics processing unit,GPU)或者CPU和GPU的组合。处理器还可以进一步包括硬件芯片。上述硬件芯片可以是专用集成电路(application-specificintegrated circuit,ASIC),可编程逻辑器件(programmable logic device,PLD)或其组合。上述PLD可以是复杂可编程逻辑器件(complex programmable logic device,CPLD),现场可编程逻辑门阵列(field-programmable gate array,FPGA),通用阵列逻辑(genericarray logic,GAL)或其任意组合。
位置提示系统中的存储器可以通过总线或其它方式与控制器相连,存储器中存储有至少一条指令、至少一段程序、代码集或指令集,上述至少一条指令、至少一段程序、代码集或指令集由控制器加载并执行,以实现本申请实施例提供的位置提示方法。存储器可以为易失性存储器(英文:volatile memory),非易失性存储器(non-volatile memory)或者它们的组合。易失性存储器可以为随机存取存储器(random-access memory,RAM),例如静态随机存取存储器(static random access memory,SRAM),动态随机存取存储器(dynamicrandom access memory,DRAM)。非易失性存储器可以为只读存储器(read only memoryimage,ROM),例如可编程只读存储器(programmable read only memory,PROM),可擦除可编程只读存储器(erasable programmable read only memory,EPROM),电可擦除可编程只读存储器(electrically erasable programmable read-only memory,EEPROM)。非易失性存储器也可以为快闪存储器(英文:flash memory),磁存储器,例如磁带(英文:magnetictape),软盘(英文:floppy disk),硬盘。非易失性存储器也可以为光盘。
图2是本申请实施例提供的一种位置提示方法的流程图。本申请实施例中控制器可以执行图2所示的位置提示方法,以实现对目标对象的位置的提示。如图2所示,该方法可以包括:
步骤201、在位置提示系统中的第二信息交互组件采集到触发信息时,获取第二信息交互组件在采集到触发信息之后采集的辅助语音。
其中,第二信息交互组件可以为位置提示系统中的任一信息交互组件。可选地,该触发信息可以为某固定的语音,或者包含某固定手势或动作的图像,该触发信息可以由用户自行设定或者也可以为位置提示系统出厂时便设定好。需要说明的是,本申请实施例以触发信息为固定的语音为例进行解释说明,对于触发信息为图像的情况可以参考触发信息为语音的相关介绍,本申请实施例不作赘述。
控制器在确定第二信息交互组件采集到触发信息后,可以获取第二信息交互组件之后采集的辅助信息,该辅助信息可以为:第二信息交互组件采集到触发信息之后目标时长内采集的信息。该辅助信息可以为辅助语音或辅助图像。需要说明的是,本申请实施例以辅助信息也为辅助语音为例进行解释说明,对于辅助信息为辅助图像的情况可以参考辅助信息为辅助语音的相关介绍,本申请实施例不作赘述。
示例地,在第二信息交互组件采集到语音后,控制器可以将第二信息交互组件采集的语音进行语音识别以将该语音转换为辅助文本,进而确定该辅助文本与该固定的语音对应的文本是否相同。在确定辅助文本与该固定的语音对应的文本相同时,控制器可以确定第二信息交互组件采集到的该语音为触发信息。进而控制器可以将第二信息交互组件在采集到该触发信息后目标时长内采集的语音确定为辅助语音,并获取该辅助语音。例如,该固定的语音可以为“你好,哈利”,或者该固定的语音也可以为其他语音,本申请实施例不作限定。
可选地,本申请实施例中控制器在确定第二信息交互组件采集到触发信息后,可以控制该第二信息交互组件在之后的目标时长内仅采集语音,进而控制器可以直接获取第二信息交互组件采集的信息;或者控制器也可以不对第二信息交互组件原本的信息采集方式进行更改,如第二信息交互组件在目标时长内可以既采集图像又采集语音,控制器仅获取第二信息交互组件采集的信息中的语音即可。
需要说明的是,控制器在获取到触发信息后,便可以确定用户需要位置提示系统执行某操作,且用户将要下发指示用户的需求的命令,进而控制器可以根据用户下发的命令确定用户的需求,并使位置提示系统中的各个部件执行相应的操作以实现用户的需求。例如,本申请实施例中用户可以通过说出辅助语音的方式下发命令,进而控制器可以获取该辅助语音,并执行下述步骤202至步骤204以根据该辅助语音确定用户的需求。接着执行下述步骤205至步骤207以使位置提示系统中的部件执行相应的操作以实现用户的需求。
步骤202、对辅助语音进行声纹识别,确定辅助语音的声源对象。
控制器在获取到辅助语音时,可以先对该辅助语音进行声纹识别,确定辅助语音的声源对象,也即是说出该辅助语音的对象。
示例地,控制器可以将第二信息交互组件采集的辅助语音输入声纹识别模型,进而得到该辅助语音的声源对象。声纹识别模型用于根据输入的语音输出该语音的声源对象。可选地,控制器可以基于多个对象的语音进行机器学习,得到声纹识别模型。该多个对象的语音可以由用户自行录入,如该多个对象可以包括位置提示系统所在的住宅中的各个家庭成员,该用户可以为任一家庭成员,用户可以通过任一信息交互组件录入对象的语音,进而控制器可以根据信息交互组件采集的对象的语音对声纹识别模型进行训练。示例地,用户可以对任一信息交互组件发出录入对象的语音的命令,该命令可以携带有对象的指示信息或者对象的标识。之后,该对象说出语音,信息交互组件可以采集该对象的语音,进而控制器可以将该对象的语音作为一条训练数据对声纹识别模型进行训练。可选地,也可以直接向控制器输入包括多个对象的语音的文件,进而使控制器根据该文件中对象的语音对声纹识别模型进行训练。
可选地,控制器还可以通过以下方式进行声纹识别,如控制器可以根据辅助语音提取对应的辅助声纹,进而将声纹库中的多个对象的声纹与该辅助声纹进行比对,确定与该辅助声纹相匹配的声纹以及该声纹对应的对象,且将该声纹对应的对象确定为辅助语音的声源对象。其中,声纹库可以包括多个对象对应的声纹,每个对象可以用该对象的标识来表示。在声纹库中的某声纹与辅助声纹的相似度高于第一阈值,且该声纹为声纹库中与辅助声纹相似度最高的声纹时,控制器可以确定辅助声纹与该声纹相匹配。可选地,声纹库中多个对象对应的声纹可以在上述获取到多个对象的语音之后对该语音进行声纹检测得到。
示例地,对象的标识可以唯一标识该对象,或者在该多个对象中唯一标识该对象;对于对象的指示信息,根据说出命令的用户的不同,该指示信息可以指示不同的对象。如张三的标识可以为其姓名“张三”,张三的爸爸张四的标识可以为其姓名“张四”,张三的儿子张五的标识可以为其姓名“张五”;当张五说出“录入爸爸的声纹”的命令时,其中的“爸爸”可以为张三的指示信息,该指示信息可以指示的对象为张三;当张三说出“录入爸爸的声纹”的命令时,其中的“爸爸”可以为张四的指示信息,该指示信息可以指示的对象为张四。需要说明的是,本申请实施例中以该对象的标识为对象的姓名为例;可选地,对象的标识也可以为该对象在该多个对象中的家庭身份,如张三、张四和张五的标识可以依次为爸爸、爷爷和儿子。
步骤203、确定辅助语音用于指示查找对象以及用于指示目标称呼。
其中,该目标称呼包括辅助语音的声源对象对待查找的对象的称呼。控制器在获取到辅助语音后,可以确定辅助语音指示的信息。例如可以确定该辅助语音指示的功能,如确定该辅助语音是否用于指示查找对象;在确定该辅助语音用于指示查找对象时,可以确定该辅助语音所指示的声源对象对待查找的对象的称呼。
需要说明的是,本申请实施例中控制器直接确定辅助语音用于指示查找对象以及辅助语音指示的目标称呼为例进行解释说明。可选地,当控制器确定辅助语音指示其他功能时,控制器后续可以执行与该其他功能对应的操作;或者在确定辅助语音并未指示查找对象时,控制器也可以不执行其他操作,本申请实施例不作限定。
控制器在确定辅助语音指示的信息时,可以先对辅助语音进行语音识别以将辅助语音转化为文本,进而对该文本进行语义识别。如可以将该文本输入语义识别模型,进而得到该文本指示的功能与称呼。示例地,在进行语义识别时可以将该文本与目标模板库中的模板进行比对,确定该文本所采用的模板。目标模板库可以包括多个模板,且每个模板具有对应的功能,且对应找人功能的模板可以包括目标字符,该目标字符在模板中的位置与声源对象对待查找的对象的称呼在文本中的位置相同。接着,控制器便可以根据该模板确定辅助语音指示的功能以及目标称呼,如将该模板对应的功能确定为辅助语音指示的功能,将该文本中与目标字符相对应的位置的信息确定为目标称呼。可选地,每个模板库中的模板可以对应相同的功能,如目标模板库中的多个模板对应的功能均可以为找人功能,如该多个模板可以包括“*去哪了”,“*在哪里”以及“找下*”等模板,这些模板中的“*”可以为目标字符。
示例地,张三在客厅时说出辅助语音“爸爸去哪了”,客厅中的信息交互组件可以采集到该辅助语音,进而控制器可以将辅助语音转换为文本“爸爸去哪了”。之后,控制器可以确定该文本采用了目标模板库中的模板“*去哪了”,该模板对应的功能为找人,该文本中的“爸爸”为张三对待查找的对象的称呼。进而控制器可以确定该辅助语音指示的功能为找人功能,该辅助语音指示的目标称呼为“爸爸”。
需要说明的是,本申请实施例中控制器可以自行将辅助语音转换为文本并对该文本进行语义识别;或者控制器也可以与服务器相连接,进而将辅助语音发送至服务器,以使得由服务器将辅助语音转换为文本,并对该文本进行语义识别;或者控制器也可以将辅助语音转换为文本后,将文本发送至服务器,以使得服务器对该文本进行语义识别;以实现确定辅助语音用于指示查找对象,以及辅助语音所指示的目标称呼,本申请实施例不作限定。示例地,该服务器可以被称为语义云(semantic cloud)服务器。
可选地,模板库中的模板可以基于人工智能标记语言(Artificial IntelligenceMarkup Language,AIML)构建,模板库中的模板可以通过固定的格式书写存储。其中,每个模板可以包括至少一个元素,且每个元素都是闭合的,如一个元素的开头为<aiml>,则该元素的结尾需要有</aiml>相对应的与<aiml>闭合。一个元素中该开头与该结尾之间的内容为该元素的属性,一个元素可以有多个属性。元素和元素之间可以相互嵌套,但每个元素必须闭合。
如模板“*去哪了”的书写格式可以为:
<category>
<pattern>*去哪了</pattern>
<template>1%Find_person%找人%1%0%<star index='1'/>%
</template>
</category>
其中,category表示一个目录,<category>与</category>之间的内容表示该目录的属性;pattern表示匹配模式,<pattern>与</pattern>之间的内容表示该匹配模式的属性,也即是该内容为根据输入的信息需进行比对的文本;template表示应答方式,<template>与</template>之间的内容表示该应答方式的属性,也即是该内容为输入的信息为“*去哪了”格式的信息时所需反馈的信息。
可选地,语义云服务器可以执行下述命令语句,以确定辅助语音用于指示查找对象,以及辅助语音所指示的目标称呼:
Find_person=aiml.Kernel()
Find_person.learn('semantic_cloud/Find_person.aiml')
Find_person.respond(”.join(re_str))
其中,aiml表示模板匹配算法,Find_person=aiml.Kernel()表示调用模板匹配算法执行后续命令,Find_person.aiml表示训练数据库的名称,该训练数据库包括多个用于训练语义识别模型的数据;Find_person.learn()表示对该训练数据库中的训练数据进行机器学习,以得到语义识别模型;re_str表示输入的文本经过处理后的字符串,Find_person.respond()用于表示基于输入的文本输出相应的匹配结果。
语义云服务器基于辅助语音“爸爸去哪了”执行上述命令后,可以确定辅助语音所指示的目标称呼为“爸爸”,之后服务器可以将该目标称呼发送至控制器。
步骤204、确定声源对象以目标称呼来称呼的目标对象。
控制器在确定辅助语音用于指示查找对象,以及辅助语音所指示的目标称呼后,便可以确定待查找的目标对象,进而可以确定辅助语音用于指示查找目标对象,该目标对象为声源对象以目标称呼来称呼的对象。
示例地,控制器在确定声源对象与目标称呼后,可以根据该声源对象与目标称呼在对象知识图谱中进行查找,以确定声源对象以目标称呼来称呼的目标对象。对象知识图谱可以包括:多个对象,以及该多个对象之间的称呼。
可选地,控制器可以获取多个对象的标识,以及该多个对象中每两个对象之间的相互称呼,进而根据获取的对象的标识以及称呼构建对象知识图谱。该对象知识图谱包括多个对象中每个对象与其他对象之间的至少一种称呼。示例地,该多个对象可以包括:张三、张四和张五,对象张三的标识为“张三”,对象张四的标识可以为其姓名“张四”,对象张五的标识可以为其姓名“张五”。用户还可以向控制器输入张三对张四的称呼有“爸爸”、“孩子他爷爷”、“爸”以及“爹”等,张四对张三的称呼有“儿子”以及其他小名(如“小张”)等。进而,控制器根据对象的标识以及对象之间的称呼可以构建对象知识图谱。
图3是本申请实施例提供的一种对象知识图谱的示意图,图3仅示出了对象知识图谱中张三与张四之间的部分。需要说明的是,两个对象之间的称呼是具有指向性的,图3中以带箭头的线段的指向来表示称呼的指向性。如从张三指向张四的线段上方标注的信息指示张三对张四的称呼。可选地,控制器也可以通过互联网查询对象之间可能采用的称呼,进而进一步丰富对象知识图谱中对象之间的称呼。可选地,对象知识图谱还可以包括每个对象的其他信息,如对象的姓名、性别、年龄、爱好、职业以及家庭身份等,图3未对该其他信息进行示意。
控制器在确定声源对象为“张三”且目标称呼为“爸爸”后,可以根据该声源对象的标识与目标称呼在图3所示的对象知识图谱中进行查找,以确定被张三称为爸爸的目标对象为张四。进而控制器可以确定第二信息交互组件采集的辅助语音用于指示查找张四。
可选地,控制器可以执行下述命令语句,来实现在对象知识图谱中对目标对象的查找:
graph=JanusGraphFactory.open('conf/janusgraph-cassandra-es.properties')
m=graph.openManagement()
g=graph.traversal()
g.V().has('name','张三').out('爸爸').values('name')
其中,janusgraph表示图谱数据库,cassandra表示图谱数据库存储后端,es表示基于全图谱数据库进行搜索,name表示对象的标识。graph=JanusGraphFactory.open('conf/janusgraph-cassandra-es.properties')表示在图谱数据库janusgraph中进行查询,m=graph.openManagement()与g=graph.traversal()为两个命令格式,m=graph.openManagement()表示对图谱数据库进行管理,g=graph.traversal()表示对图谱数据库中的数据进行遍历,g.V().has('name','张三').out('爸爸').values('name')表示根据声源对象的标识“张三”输出被声源对象称为“爸爸”的对象的标识。
步骤205、确定位置提示系统中采集到目标对象的信息的第一信息交互组件。
其中,目标对象的信息与目标对象的参考信息的相似度大于相似度阈值。本申请实施例中,对象知识图谱中的多个对象中的每个对象可以具有对应的参考信息,对象的参考信息可以用于表征该对象,如对象的参考信息可以包括对象的特征。示例地,对象的参考信息可以为对象的参考图像,如对象的脸部图像。
可选地,该多个对象的参考信息均可以存储在对象信息库中。对象信息库中多个对象的参考信息可以由用户自行录入,用户可以通过任一信息交互组件采集对象的脸部图像,进而指示控制器将该脸部图像确定为对象的参考信息,以构建对象信息库。需要说明的是,构建对象信息库的过程可以参考步骤202中构建声纹库的相关介绍,本申请实施例不再赘述。
在第一种可选实现方式中,控制器在确定目标对象后,可以直接在对象位置信息库中查询采集到目标对象的信息的第一信息交互组件。该对象位置信息库可以包括:采集到对象的信息的信息交互组件的标识,信息交互组件采集到的信息所属的对象的标识,以及信息交互组件采集到对象的信息的时间。可选地,对象位置信息库中的这些信息可以按照采集到对象的信息的时间进行排列。示例地,本申请实施例提供了如下表1所示的一种对象位置信息库。需要说明的是,本申请实施例中控制器可以直接通过查找对象位置信息库就确定第一信息交互组件,该确定第一信息交互组件的方式较为简便,保证了控制器确定第一信息交互组件的速率。且仅需在采集的信息为对象的信息时才进行存储,对象位置信息库中仅需存储较少的信息,避免了对存储资源的过多占用。
可选地,第一信息交互组件可以为位置提示系统中最近一次采集到目标对象的信息的信息交互组件,也即是位置提示系统的多个信息交互组件中,第一信息交互组件采集到目标对象的信息的时间距离当前时间最近。示例地,目标对象为张四,当前时间为2019年12月2日10点25分10秒,对象位置信息库中显示信息交互组件a在2019年12月2日10点25分09秒采集到张四的信息,信息交互组件b在2019年12月2日10点20分采集到张四的信息,则控制器可以确定信息交互组件a为第一信息交互组件。
可选地,第一信息交互组件采集到目标对象的信息的时间还可以满足该时间位于当前时间之前的辅助时长内。如该辅助时长为1分钟或者30秒或者其他时长。示例地,目标对象为张四,当前时间为2019年12月2日10点25分10秒,对象位置信息库中仅存在信息交互组件b在2019年12月2日10点20分采集到张四的信息,则控制器可以确定不存在第一信息交互组件。
表1
对象的标识 信息交互组件的标识 时间
张三 192.168.4.41 2019-12-02 10:25:09
张四 192.168.4.43 2019-12-02 10:25:09
…… …… ……
位置提示系统中的信息交互组件可以持续地采集信息,如周期性地采集信息,该信息可以包括图像和语音中的至少一种。本申请实施例中以信息交互组件周期性地采集图像为例进行解释说明,如信息交互组件可以每隔固定时长采集一帧或多帧图像。信息交互组件在每次采集到图像后,控制器可以确定该图像是否为哪个对象的信息。若对象的参考图像为人脸图像,该确定该图像是否为哪个对象的信息的过程也可以看做是对信息交互组件采集到的图像进行人脸识别的过程。如控制器可以将该图像输入人脸识别模型,以根据人脸识别模型输出的结果确定该图像是否为某对象的人脸图像。人脸识别模型用于根据输入的图像输出该图像中的人脸所属的对象。当确定该图像为某对象的人脸图像时,控制器可以确定信息交互组件采集到该对象的信息,进而控制器可以将该信息交互组件的标识,该对象的标识,以及该信息交互组件采集到该对象的信息的时间存入对象位置信息库。可选地,该人脸识别模型可以基于对象信息库中各个对象的参考图像进行训练得到。
可选地,控制器也可以确定该图像与每个对象的参考图像的相似度,在该图像与某对象的参考图像的相似度大于相似度阈值时,控制器可以确定该图像为该对象的信息,故确定采集到该图像的信息交互组件采集到该对象的信息。可选地,控制器也可以在对象信息库中该图像与某对象的参考图像的相似度最大且大于相似度阈值时,确定该图像为该对象的信息。
可选地,控制器可以执行下述命令,以实现对第一信息交互组件的查找:
def find_location_db(input_parm,table,db_user)
其中,table表示对象位置信息库的名字;db_user表示位置信息库的访问参数,如访问密码;input_parm表示查找第一信息交互组件时输入的参数;def find_location_db函数用于实现在对象位置信息库中查找输入的参数的相关信息。
例如,输入的参数为目标对象的标识“张四”,控制器执行上述命令在上表1中进行查找,最终输出的结果可以包括第一信息交互组件的标识“192.168.4.43”。
需要说明的是,本申请实施例中以由控制器确定信息交互组件采集到的信息是否为对象的信息,并将相关数据存入对象位置信息库为例。可选地,信息交互组件也可以具有简单的数据处理功能,此时信息交互组件在采集到信息时可以自行确定该信息是否为对象的信息,并将相关数据存入对象位置信息库。
在第二种可选实现方式中,控制器可以通过执行下述步骤S1至步骤S4,以确定第一信息交互组件:
步骤S1、获取目标对象的参考信息。
可选地,该多个对象的参考信息均可以存储在对象信息库中,控制器在确定目标对象后,可以在该对象信息库中查询目标对象的参考信息。
步骤S2、获取每个信息交互组件采集的信息。
如控制器在确定目标对象后,可以获取位置提示系统中每个信息交互组件最近一次采集的信息,进而得到多个信息交互组件采集的信息。也即是,此处所述的多个信息交互组件采集的信息包括该多个信息交互组件最近一次采集的信息。
示例地,信息交互组件在每次采集到信息后,均可以存储该信息。该信息可以包括图像和语音中的至少一种。本申请实施例中以该信息仅包括图像为例进行解释说明。如可以将信息交互组件在每次采集到图像时均将该图像存储至采集的图像库,且还可以将图像交互组件的标识以及采集到该图像的时间也对应地存入图像库。控制器可以直接在该图像库中查找每个信息交互组件最近一次采集的图像,进而得到多个信息交互组件采集的图像。
可选地,该多个信息交互组件采集的信息也可以包括该多个信息交互组件在当前时间之前辅助时长内采集的信息。
步骤S3、在多个信息交互组件采集到的信息中确定目标对象的信息。
目标对象的信息可以为:该多个信息交互组件采集到的信息中,与目标对象的参考信息的相似度大于相似度阈值的信息。可选地,在该多个信息交互组件采集的信息包括该多个信息交互组件最近一次采集的信息时,在该多个信息交互组件采集到的信息中,该目标对象的信息可以与目标对象的参考信息的相似度最高。可选地,该多个信息交互组件在当前时间之前辅助时长内采集的信息中可能存在多个目标对象的信息。需要说明的是,确定某信息是否为目标对象的信息可以参考上述第一种可选实现方式中的相关介绍,本申请实施例不再赘述。
示例地,该多个信息交互组件采集到的信息均为图像。控制器可以将该多个信息交互组件采集到的图像均输入人脸识别模型,确定每幅图像是否为目标对象的人脸图像。当确定某信息采集组件采集的某图像为目标对象的人脸图像时,控制器可以确定该图像为目标对象的信息。
步骤S4、将采集到目标对象的信息的信息交互组件,确定为第一信息交互组件。
控制器在确定该多个信息交互最近一次采集到的信息中的目标对象的信息时,便可以将采集到该目标对象的信息的信息交互组件确定为第一信息交互组件。可选地,当该多个信息交互组件采集的信息包括该多个信息交互组件在当前时间之前辅助时长内采集的信息,且其中存在多个目标对象的信息时,控制器可以将该多个目标对象的信息中采集时间距离当前时间最近的信息对应的信息交互组件,确定为第一信息交互组件。
需要说明的是,在上述第二种可选实现方式中,控制器无需对信息交互组件采集的每个信息均执行确定该信息是否为对象的信息的步骤,而仅需对信息交互组件最近一次或当前时间之前辅助时长内采集的信息是否为目标对象的信息即可。因此,减少了控制器进行数据处理的次数,节约了控制器的数据处理资源。
步骤206、将第一信息交互组件的位置确定为目标对象的位置。
控制器在确定采集到目标对象的信息的第一信息交互组件后,便可以确定目标对象位于第一信息交互组件的信息采集范围内;进而,可以用第一信息交互组件的位置表示目标对象的位置,也即是将第一信息交互组件的位置确定为目标对象的位置。
每个信息交互组件具有对应的区域,信息交互组件对应的区域可以为该信息交互组件的安装位置所在的区域。本申请实施例中用信息交互组件对应的区域来表示该信息交互组件的位置。位置提示系统的存储器中可以存储有信息交互组件的标识与对应的区域的标识,控制器在确定第一信息交互组件之后,可以根据该第一信息交互组件的标识查询对应的区域的标识,进而将该区域的标识指示的区域确定为目标对象的位置。
步骤207、触发第二信息交互组件输出目标对象的位置。
控制器在确定用户想要查找的目标对象的位置时,便可以向用户反馈该目标对象的位置。由于第二信息交互组件采集到用于指示查找目标对象的辅助语音,故想要查找目标对象的用户为该辅助语音的声源对象,且声源对象位于第二信息交互组件所在的区域中;进而,控制器要向该声源对象反馈目标对象的位置,便可以触发第二信息交互组件输出目标对象的位置。
示例地,控制器可以触发第二信息交互组件通过语音的形式输出目标对象的位置的提示信息,可选地,该提示信息可以携带确定的目标称呼,也即是声源对象对目标对象的称呼,如辅助语音为“爸爸去哪了”,目标称呼为“爸爸”,目标对象为张四,且张四的位置为书房,则控制器可以触发第二信息交互组件输出“爸爸在书房”的提示语音。可选地,该提示信息也可以不携带目标称呼,如可以直接触发第二信息交互组件输出“书房”的提示语音。可选地,在步骤206后控制器可以确定“张四在书房”的文本,进而控制器可以过语音合成技术把文本转化为语音并通过第二信息交互组件播报。
可选地,控制器也可以触发第二信息交互组件通过其他方式提醒,如第二信息交互组件包括显示屏时,控制器也可以触发第二信息交互组件显示目标对象的位置的提示信息。
可选地,控制器也可以触发位置提示系统中除第二信息交互组件之外的至少一个信息交互组件也输出目标对象的位置,以保证对目标对象的位置的提示效果。进而可以避免用户在第二信息交互组件所在的区域发出辅助语音后离开该区域,导致无法有效地获知目标对象的位置的情况发生。示例地,该至少一个信息交互组件可以包括:与第二信息交互组件的距离可以小于距离阈值的信息交互组件,或者该至少一个信息交互组件可以包括:与第二信息交互组件的距离最近的信息交互组件。
需要说明的是,本申请实施例中辅助信息可以用于指示查找目标对象的当前所在位置,第一信息交互组件为位置提示系统中最近一次采集到目标对象的信息的信息交互组件,进而控制器输出的目标对象的位置可以为目标对象的当前所在位置,故本申请实施例提供的位置提示方法可以实现对目标对象的当前所在位置的查找。可选地,本申请实施例中对象位置信息库可以存储有信息交互组件在多个不同的时间采集的信息所属的对象的标识,且图像库也可以存储有信息交互组件在多个不同时间采集的信息,进而本申请实施例提供的位置提示系统也可以完成对当前时间之前的目标对象的位置的确定。此时,辅助信息应当携带有目标时间段的指示信息,以指示查找目标对象在该目标时间段内所在的位置。
可选地,本申请实施例中若在当前时间之前的辅助时长内不存在采集到目标对象的信息的第一信息交互组件,则控制器还可以确定在当前时间之前的参考时长范围内采集到目标对象的信息的第三信息交互组件;进而控制至少一个信息交互组件输出第三信息交互组件的位置的提示信息,且该提示信息可以携带第三信息交互组件采集到目标对象的信息的时间。该提示信息可以用于提示目标对象在当前时间之前的参考时长范围内所在的位置。该参考时长范围中的任一时长可以大于辅助时长。如辅助时长为1分钟,则参考时长范围可以为1~5分钟或1~10分钟或其他时长范围。假设,辅助时长为1分钟,目标对象为张三,在当前时间之前1分钟内不存在采集到张三的信息的第一信息交互组件,且在当前时间两分钟前客厅中的第三信息交互组件采集到张三的信息,则控制器可以控制至少一个信息交互组件输出“张三两分钟前在客厅”的提示信息。
综上所述,本申请实施例中控制器可以确定目标对象的位置,并控制信息交互组件输出该目标对象的位置。如此一来,用户可以通过便捷地获知目标对象的位置,降低了由于住宅较大使得用户找寻某对象的难度,丰富了智能家居中控制器的功能,提升了智能家居的智能化。
应当理解,本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,例如能够根据本申请实施例图示或描述中给出那些以外的顺序实施。
此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的那些组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
本申请实施例还提供了一种包含指令的计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行本申请实施例提供的位置提示方法。以上所述仅为本申请的可选实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (10)

1.一种位置提示系统,其特征在于,
所述位置提示系统包括控制器和多个信息交互组件,所述控制器与所述多个信息交互组件相连接;
所述信息交互组件被配置为采集信息和输出信息;
所述控制器被配置为:在确定所述多个信息交互组件中的第一信息交互组件采集到目标对象的信息时,触发所述位置提示系统中的至少一个信息交互组件将所述第一信息交互组件的位置作为所述目标对象的位置输出。
2.根据权利要求1所述的位置提示系统,其特征在于,所述控制器还被配置为:
在所述位置提示系统中的任一信息交互组件采集到用于指示查找目标对象的信息时,确定所述多个信息交互组件的所述第一信息交互组件。
3.根据权利要求1所述的位置提示系统,其特征在于,所述至少一个信息交互组件包括:采集到用于指示查找所述目标对象的信息的信息交互组件。
4.根据权利要求2或3所述的位置提示系统,其特征在于,所述控制器还被配置为:
在所述信息交互组件采集到触发信息时,确定所述信息交互组件在采集到所述触发信息后是否采集到所述用于指示查找目标对象的信息。
5.根据权利要求1至3任一所述的位置提示系统,其特征在于,所述信息交互组件采集的信息包括:图像和语音中的至少一种信息,和/或,所述信息交互组件输出的信息包括:图像和语音中的至少一种信息。
6.根据权利要求2或3所述的位置提示系统,其特征在于,所述用于指示查找目标对象的信息包括:用于指示查找对象以及用于指示目标称呼的语音,所述目标称呼包括所述语音的声源对象对所述目标对象的称呼。
7.根据权利要求6所述的位置提示系统,其特征在于,所述目标对象为:根据所述声源对象与所述目标称呼在对象知识图谱中确定的对象,所述对象知识图谱包括:多个对象,以及所述多个对象之间的称呼。
8.一种位置提示方法,其特征在于,所述方法包括:
根据第二信息交互组件采集的辅助语音,确定声源对象和所述辅助语音指示的待查找的目标对象;
确定采集到所述目标对象的信息的第一信息交互组件,将所述第一信息交互组件的位置确定为所述目标对象的位置;
触发所述第二信息交互组件输出所述目标对象的位置。
9.根据权利要求8所述的位置提示方法,其特征在于,所述根据第二信息交互组件采集的辅助语音,确定声源对象和所述辅助语音指示的待查找的目标对象,包括:
对所述辅助语音进行声纹识别,确定所述声源对象;
确定所述辅助语音用于指示查找对象以及用于指示目标称呼;
确定所述声源对象以所述目标称呼来称呼的所述目标对象。
10.根据权利要求9所述的位置提示方法,其特征在于,
所述目标对象为:根据所述声源对象与所述目标称呼在对象知识图谱中确定的对象,所述对象知识图谱包括:多个对象,以及所述多个对象之间的称呼。
CN202010211174.8A 2020-03-24 2020-03-24 位置提示方法及系统 Pending CN113448251A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010211174.8A CN113448251A (zh) 2020-03-24 2020-03-24 位置提示方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010211174.8A CN113448251A (zh) 2020-03-24 2020-03-24 位置提示方法及系统

Publications (1)

Publication Number Publication Date
CN113448251A true CN113448251A (zh) 2021-09-28

Family

ID=77806351

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010211174.8A Pending CN113448251A (zh) 2020-03-24 2020-03-24 位置提示方法及系统

Country Status (1)

Country Link
CN (1) CN113448251A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107026943A (zh) * 2017-03-30 2017-08-08 联想(北京)有限公司 语音交互方法及系统
CN107065586A (zh) * 2017-05-23 2017-08-18 中国科学院自动化研究所 交互式智能家庭服务系统及方法
CN109036421A (zh) * 2018-08-10 2018-12-18 珠海格力电器股份有限公司 信息推送方法及家电设备
CN109819400A (zh) * 2019-03-20 2019-05-28 百度在线网络技术(北京)有限公司 用户位置的查找方法、装置、设备及介质
CN110265004A (zh) * 2019-06-27 2019-09-20 青岛海尔科技有限公司 智能家居操作系统中目标终端的控制方法及装置
CN110719576A (zh) * 2018-07-12 2020-01-21 星锐科技股份有限公司 应用对讲机实现智能呼叫的方法、智能呼叫装置与系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107026943A (zh) * 2017-03-30 2017-08-08 联想(北京)有限公司 语音交互方法及系统
CN107065586A (zh) * 2017-05-23 2017-08-18 中国科学院自动化研究所 交互式智能家庭服务系统及方法
CN110719576A (zh) * 2018-07-12 2020-01-21 星锐科技股份有限公司 应用对讲机实现智能呼叫的方法、智能呼叫装置与系统
CN109036421A (zh) * 2018-08-10 2018-12-18 珠海格力电器股份有限公司 信息推送方法及家电设备
CN109819400A (zh) * 2019-03-20 2019-05-28 百度在线网络技术(北京)有限公司 用户位置的查找方法、装置、设备及介质
CN110265004A (zh) * 2019-06-27 2019-09-20 青岛海尔科技有限公司 智能家居操作系统中目标终端的控制方法及装置

Similar Documents

Publication Publication Date Title
CN110741433B (zh) 使用多个计算设备的对讲式通信
US20220317641A1 (en) Device control method, conflict processing method, corresponding apparatus and electronic device
CN107015781B (zh) 语音识别方法和系统
US10599390B1 (en) Methods and systems for providing multi-user recommendations
US10504513B1 (en) Natural language understanding with affiliated devices
US11989219B2 (en) Profile disambiguation
CN106294774A (zh) 基于对话服务的用户个性化数据处理方法及装置
WO2017084185A1 (zh) 基于语义分析的智能终端控制方法、系统及智能终端
CN111192574A (zh) 智能语音交互方法、移动终端和计算机可读存储介质
CN107729433B (zh) 一种音频处理方法及设备
CN112820291A (zh) 智能家居控制方法、系统和存储介质
US20210233556A1 (en) Voice processing device, voice processing method, and recording medium
CN112420043A (zh) 基于语音的智能唤醒方法、装置、电子设备及存储介质
CN113448251A (zh) 位置提示方法及系统
CN112180774A (zh) 一种智能设备的交互方法、装置、设备和介质
CN117198285A (zh) 设备唤醒方法、装置、设备、介质及车辆
CN116415590A (zh) 基于多轮次问询的意图识别方法及装置
CN113436625A (zh) 一种人机交互方法及其相关设备
CN116391225A (zh) 为电子设备分配独特语音的方法和系统
CN110635976B (zh) 一种陪护设备控制方法、陪护设备控制系统及存储介质
CN113990312A (zh) 一种设备控制方法及装置、电子设备及存储介质
US20210295836A1 (en) Information processing apparatus, information processing method, and program
CN113468368A (zh) 一种语音记事方法、装置、设备及介质
KR20210054157A (ko) 회의록 작성 장치 및 방법
JP2005534065A (ja) マンマシンインタフェースユニットの動作及び/又は制御方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210928