CN111415659A - 链接到运输车辆的家用智能监听装置 - Google Patents

链接到运输车辆的家用智能监听装置 Download PDF

Info

Publication number
CN111415659A
CN111415659A CN202010004586.4A CN202010004586A CN111415659A CN 111415659 A CN111415659 A CN 111415659A CN 202010004586 A CN202010004586 A CN 202010004586A CN 111415659 A CN111415659 A CN 111415659A
Authority
CN
China
Prior art keywords
vehicle
responsive action
responsive
user
response
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010004586.4A
Other languages
English (en)
Inventor
罗伯特·B·克莱夫
埃里克·L·里德
约翰·R·范维梅尔施
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ford Global Technologies LLC
Original Assignee
Ford Global Technologies LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ford Global Technologies LLC filed Critical Ford Global Technologies LLC
Publication of CN111415659A publication Critical patent/CN111415659A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B27/00—Alarm systems in which the alarm condition is signalled from a central station to a plurality of substations
    • G08B27/005—Alarm systems in which the alarm condition is signalled from a central station to a plurality of substations with transmission via computer network
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B1/00—Systems for signalling characterised solely by the form of transmission of the signal
    • G08B1/08—Systems for signalling characterised solely by the form of transmission of the signal using electric transmission ; transformation of alarm signals to electrical signals from a different medium, e.g. transmission of an electric alarm signal upon detection of an audible alarm signal
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/10—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles actuating a signalling device
    • B60R25/1004—Alarm systems characterised by the type of sensor, e.g. current sensing means
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/16—Actuation by interference with mechanical vibrations in air or other fluid
    • G08B13/1654—Actuation by interference with mechanical vibrations in air or other fluid using passive vibration detection systems
    • G08B13/1672—Actuation by interference with mechanical vibrations in air or other fluid using passive vibration detection systems using sonic detecting means, e.g. a microphone operating in the audio frequency range
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B19/00—Alarms responsive to two or more different undesired or abnormal conditions, e.g. burglary and fire, abnormal temperature and abnormal rate of flow
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/012—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using recorded signals, e.g. speech
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/10—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using wireless transmission systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G10L17/22—Interactive procedures; Man-machine interfaces
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Human Computer Interaction (AREA)
  • Computational Linguistics (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Mechanical Engineering (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Alarm Systems (AREA)

Abstract

本公开提供了“链接到运输车辆的家用智能监听装置”。一种智能监听装置，其包括响应于语音和环境声音以提供数字音频信号的音频检测器。分布式控制器耦合到所述音频检测器以响应于所述数字音频信号而执行响应动作。通信电路与后端建立第一通信链路。车辆数据库识别至少一个用户运输车辆和对应于所述用户车辆的至少一个响应动作。所述分布式控制器具有监控模式，以用于检测预配置的警报事件，并且具有警报/响应模式，以用于执行与所述检测到的警报事件相关联的响应动作。当已执行的响应动作与对应于所述用户车辆的检测到的警报事件相关联时，所述通信电路与所述用户车辆建立第二通信链路，以便发起所述响应动作。

Description

链接到运输车辆的家用智能监听装置
技术领域
本发明总体上涉及家庭和车辆的安全与保障，并且更具体地，涉及当受监控事件发生时与运输车辆对接的家庭自动化/智能助手。
背景技术
随着物联网(IoT)的不断扩展，越来越多的装置连接到互联网，包括智能烟雾报警器、房屋安全报警器、CO检测器、门铃、排水泵/洪水报警器等。这通常需要将房屋中较旧的警报单元更换为装置的智能版本，所述装置具有一定的直接与互联网或与连接到互联网的另一台装置进行通信的能力，以提醒房主或权力机构警报装置已触发。与它们要取代的未连接的或非智能版本相比，这些智能警报装置通常会增加成本。房主或企业主对这些新装置的投资可能是一笔巨大的费用。
现在，许多住宅、办公室和其他固定位置可能已安装了智能监听装置(SLD)，所述装置以声控无线扬声器的形式充当“虚拟助手”，具有与云服务和本地外围设备的电子接口。示例性装置包括Amazon Echo和Sonos One(均使用亚马逊的Alexa语音服务)和GoogleHome(使用谷歌助手)。这些装置被用于连接各种智能家用装置，包括支持Wi-Fi的智能警报装置。虽然智能警报装置通常可以在检测到受监控事件(例如，烟雾、一氧化碳或入侵者)时与用户或应急服务提供商进行远程通信，但是与SLD的接口可以集中并协调响应，同时提高检测和响应能力。
SLD的监听功能还可以实现对缺少Wi-Fi或其他远程功能的警报装置进行集中/协调响应。例如，可以训练SLD识别非联网警报装置(诸如烟雾警报器)产生的警报声音，并在检测到警报声音时执行所需的通知或其他响应。对于训练，用户可以经由按下按钮或语音命令来发起SLD编程模式。利用SLD监听，用户可以手动触发警报装置(例如，门铃或烟雾/一氧化碳报警器)来发出正常的警报声音。SLD根据用户提供的“符号”或标签名称将声学标记存储在存储器中。任何具有足够明显的声学标记的事件都可以被记录、标示并分配给响应动作。示例性事件触发包括安全警报、烟雾检测器、门铃、CO警报、敲打外门、婴儿哭闹、排水泵关闭或洪水/高水位听觉警报、未经授权进入或试图进入、车库门或入口门打开、窗户玻璃破碎、狗叫、地板吱吱声、未被识别的语音(基于先前的语音训练)、流水的声音(例如，管道破裂)或运行的电器(例如，微波炉、洗碗机、洗衣机或烘干机)。房屋中的多个SLD可通过各种三角测量技术协调使用，以识别房屋内声音的位置。
在监控模式下，SLD可以连续监听声音，并且将收集的音频样本与存储在存储器中的标记进行比较。例如，监控模式可以由用户通过语音命令、通过设置时间表、或者通过指示用户不在家的条件(诸如一段时间内没有声音)来发起。一旦检测到与存储标记的特定匹配，就可以自动采取相应的警报措施或其他响应。这些可以包括使用也是预先配置的联系方法(例如，网络推送通知)发送给用户或预先确定的其他联系人的通知。其他操作可以包括使用SLD生成声音(例如，吠叫狗)或激活支持Wi-Fi的灯来吓跑可能的入侵者。
发明内容
本发明以新颖的方式扩展了SLD的警报/响应能力，这种方式具有成本效率，并且在安全性和方便性方面提供了显著的改进。
在本发明的一个方面，智能监听装置包括响应于语音和环境声音以提供数字音频信号的音频检测器。分布式控制器耦合到所述音频检测器以响应于所述数字音频信号执行响应动作。通信电路与后端建立第一通信链路。车辆数据库识别至少一个用户运输车辆和对应于所述用户车辆的至少一个响应动作。所述分布式控制器具有监控模式，以用于检测预配置的警报事件，并且具有警报/响应模式，以用于执行与所述检测到的警报事件相关联的响应动作。当已执行的响应动作与检测到的对应于所述用户车辆的警报事件相关联时，所述通信电路与所述用户车辆建立第二通信链路，以便发起所述响应动作。
附图说明
图1是示出传统智能监听装置的框图。
图2是示出SLD和运输车辆之间的交互以执行警报/响应动作的框图。
图3是示出被配置用于本发明的附加特征的SLD的框图。
图4是示出本发明的一种优选方法的流程图。
图5是示出跟踪用于自动激活和停用监控模式的已登记车辆和家庭住户的图。
图6是示出根据本发明的各个实施例的SLD和运输车辆之间的通信事件的图。
具体实施方式
声控智能助手系统变得越来越流行，所述系统与后端系统通信，以便经由合成的语音信号或预先录制的媒体内容传递相关信息并发起诸如控制外围电子装置等的其他动作。在一些实施例中，智能监听装置检测唤醒词或激活声音，然后对传入的音频进行解释/分析。在语音控制方面，装置不断地监听唤醒词，但在其他方面是不活动的。对于警报检测，可以在不识别唤醒词的情况下对识别出的音频标记起作用。
在图1中，语音激活的智能监听装置(SLD)10包括处理器或处理电路11、存储器/存储单元12、通信电路13、一个或多个传声器14、一个或多个扬声器15和输入/输出接口16。通信电路13可以包括无线网络接口控制器，以用于提供到无线路由器或其他网络访问装置的Wi-Fi连接，所述装置经由互联网向后端系统17(即云系统)提供通信。通信电路13可以替代地或附加地包括其他无线数据平台，诸如蜂窝电话、
Figure BDA0002354763020000041
或者与后端17或与外围装置和附件通信的红外数据信道。输入/输出接口16可以任选地包括电源打开/关开关、指示灯、输入按钮或键盘、图形显示器和/或触摸屏。
处理器11和存储器12被配置成基于存储的唤醒词21或声音简档的列表来控制SLD10的操作和功能，包括诸如语音识别20和唤醒词检测22的功能。如本领域中已知的，语音识别模块20可以包括使用检测到的音频将口语单词转换为适当文本的自动语音识别(ASR)和自然语言理解(NLU)。在分布式控制方法中，可以将转换后的文本发送到后端系统17进行处理。包含由一个或多个传声器14接收到的语音或其他声音的数字音频数据(例如，MP3数据)可以流传输到后端系统17，以便可以根据用户的信息请求开始分析。因此，后端系统17可以开始分析接收到的数字音频数据的任何部分，以便解释用户请求的含义并最终定义适当的查询。然后，后端系统17检索响应信息或动作，所述信息或动作被传送回SLD 10。语音识别模块20还可以具有文本到语音(TTS)组件，以用于将响应中包含的文本转换为待由一个或多个扬声器15输出的语音。
图2示出了用于部署本发明的典型场景，其中SLD 10用在住宅25内的固定位置，诸如房屋或办公室。Wi-Fi路由器26与SLD 10通信，以与云网络27建立第一通信链路。SLD 10可以包括另外的网络接口，诸如蜂窝电话或陆线电话装置28，以向另一个网络29发送数据并经由另一个网络29接收数据。
在本发明中，SLD 10通过与运输车辆30交互来实现扩展的功能和能力。例如，车辆30可以是居住在住宅25中的同一个人的汽车、SUV或卡车。车辆30具有电气系统，其中各种模块经由通信总线31交互。通过访问总线31上的装置，本发明可以获得对车辆30的各种特征和功能的访问，这可能有助于在响应于各种预编程事件或警报的SLD 10的控制下实现动作和响应。
车辆30可以优选地包括经由网关(未示出)与总线31连接的Wi-Fi模块32，以便经由Wi-Fi在SLD 10和车辆30之间(例如，通过Wi-Fi路由器26)建立第二通信链路。车辆30还可以包括蓝牙节点33和蜂窝收发器34，根据车辆30和SLD 10之间的距离，所述蓝牙节点33和蜂窝收发器34也可以支持与SLD 10的通信链路。经由建立的通信链路，许多有用的动作或响应可以与在如下所述的SLD 10检测到的各种触发事件相联系。
车辆30通常可以包括远程无钥匙进入/安全系统(RKE)模块35，所述模块从远程钥匙扣接收RF信号以控制车辆进入，并且例如可以通过闪烁车辆灯和鸣车喇叭来生成紧急警报和入侵警报。当在住宅25中检测到受监控事件时(无论是直接由SLD 10还是与SLD 10通信的其他智能装置检测到)，可以通过利用车辆30的RKE系统35生成另外的警告信号和声音来大大增加可能听到或注意到警报的受影响区域。由于在车辆30和SLD 10内进行必要设置以允许它们之间的通信链路和适当认证(例如，经由Wi-Fi路由器26或蓝牙节点33)，SLD 10可以执行响应动作，所述响应动作包括当SLD 10检测到已经设置为包括该动作的预配置的警报事件时触发听觉和视觉车辆警报。
SLD 10可以与各种附件36互连，这些附件可以包括各种智能传感器或智能警报系统，以用于检测各种状况，诸如烟雾或一氧化碳，并且可以生成它们自己的警告或可以与SLD 10交互以生成警报和其他响应。附件36还可以包括其他无线接口，这些无线接口被配置成与车辆中的RF控制系统(诸如RKE系统35)交互。换句话说，车辆钥匙扣中使用的类型的发射器可以结合到附件单元36中或内置在SLD 10中，所述SLD 10发送车辆30使用的正常RF命令信号(例如，通过向RKE模块35发出紧急警报命令)。另外，附件36可以用于识别车辆中发生的警报情况并将警报情况中继到SLD，以在车辆警报的听觉识别受损的情况下进一步扩展SLD对车辆状况做出响应的有效性。
通过与其他车辆系统(诸如，车身控制模块(BCM)37、音频系统38和扬声器39或图形显示器40)进行交互，由车辆30执行的响应动作可以采用许多其他形式。例如，BCM 37(或另一个模块)可以触发经由蜂窝收发器34到远程协助中心或应急响应提供者的自动蜂窝电话呼叫。车辆的自动电话呼叫可以结合听觉警报(由SLD 10和/或车辆30生成)或在没有听觉警报(例如，可能已经由SLD 10在识别到住宅中面临诸如住宅入侵的突发情况的人所说的“不安全”字眼时生成的无声警报)的情况下发起。在另一个实施例中，响应动作包括通知用户已经检测到(例如，通过在显示器40上显示消息和/或经由音频系统38合成语音消息)报警事件。作为通知的一部分，可以利用通信链路在车辆30和SLD 10之间发起双向通信信道(例如，音频对讲机)，从而允许车辆30中的用户监控由住宅25内的SLD 10检测到的正在发生的情况。
在另一个实施例中，当车辆30停在已检测到受监控事件的住宅35附近时，其可用作收集证据的装置。例如，车辆30包括前置相机41和后置相机42，所述前置相机41和后置相机42可以被触发以收集要记录在存储器43中的视频信号，所述视频信号可以捕获潜在突发情况期间在住宅25附近发生的事件。记录的视频可以稍后在事件重建中访问。记录功能可以与导航GPS系统44交互，以便用地理位置和一天中的时间标记记录的数据。
车辆30还可以履行远程传感器(例如，环境传感器)的作用，以帮助SLD 10评估正在监控的各种状况。例如，可以访问动力传动系统控制模块(PCM)45，以便提供SLD 10用来识别警报条件或选择对检测到的事件的最佳响应的温度数据或湿度数据。其他车辆模块(诸如提供车辆安全警报触发器的车身控制模块)也可以提供对其他重要条件的访问。
图3示出了适于实现本发明的警报系统的修改的SLD 50。传声器51接收语音和环境声音，这些声音在转换器52中被转换为数字音频信号。唤醒检测器53监控数字音频信号以执行常规的语音交互。数字音频信号还耦合到本地处理电路55和控制器54，以便监控存储在存储器中的声学标记，这些声学标记与受监控的事件(诸如，来自烟雾检测器的听觉警报、玻璃破裂的声音、门铃声音等)相关联。控制器54是连接到接口56的分布式控制器，用于根据需要访问后端系统，以分析语音请求以及检测受监控事件的声学标记和/或确定对检测到的事件采取的响应动作。控制器54连接到查询响应块57，所述查询响应块57可以包括扬声器和其他装置，用于为来自用户的语音命令提供语音输出或其他响应动作。控制器54还连接到接口58，以用于与包括经由Wi-Fi与SLD 50进行交互的智能传感器的各种附件装置进行交互。
结合本发明执行与运输车辆相关联的响应动作的能力，SLD 50包括用于配置车辆数据库61的设置模式或块60，以存储用于执行车辆响应动作的标识信息和事件参数。用户访问设置模式60，以将数据库61配置有用于与一个或多个车辆建立通信链路的链路数据，并且将数据库61配置有用于每个车辆的特征数据，所述特征数据能够启用支持用户期望的响应动作的各种车辆交互。例如，将建立协议以用于访问和认证车辆内的各种系统功能，诸如，打开或关闭紧急警报，激活特定时间段的相机记录，或激活流式单向或双向通信信号。车辆特征数据可以包括可用特征的标识和可能可用的可选参数设置，诸如要记录的相机视图等。
SLD 50包括监控块62，所述监控块62连续监听预配置的声学标记，并等待来自关联的智能传感器的警报通知。当检测到监控的事件时，控制器54访问警报响应模式63以生成预配置的响应动作。
图4示出了设置模式的流程图。在步骤65中，基于对应于选定的“警报事件”的声音来训练SLD，所述声音形成可识别且一致的声学标记。训练包括将训练声音记录到存储的标记中，所述标记可以用识别事件并指定一些响应动作的元数据来标记。在步骤66中，SLD任选地被配置成与智能传感器和/或智能报警系统一起工作，以协调响应并扩展监控任何报警事件周围的全部环境的能力。
在步骤67中，用户建立一个或多个车辆链路和车辆特征数据。例如，通信链路可以根据可用的通信信道(例如，Wi-Fi网络、RF发射器频率、蓝牙配对等)、地址信息和认证凭证进行指定。在步骤68中，针对与所识别的车辆相关联的每个潜在的警报事件配置响应动作和警报，使得它们可以被存储在SLD内的车辆数据库中。
单个车辆在数据库61中的登记也可以与激活和停用监控模式结合使用。该功能还可以从数据库的扩展中受益，所述数据库的扩展包括对已授权为房屋住户的人的身份(和通信链路)进行登记。如图5所示，可以评估车辆和房屋住户的接近度，以检测房屋空置的时间。车辆70和72与住宅25和通常在那里的典型的住户(例如，居民)相关联。车辆70和72与住宅25中的SLD 30有通信链路71和73。在住宅25周围建立接近区域74，覆盖将车辆或人视为“在家”或出现在住宅25中的区域。
人75占用车辆70，并且人76、77和78占用车辆72。车辆70和72和人75至78以及相关联的通信链路先前已在SLD 30中的数据库中登记。当所有人75至78都在区域74之外时，则SLD 30可以推断住宅25未被占用，并且住宅25中没有车辆70和72有助于确定没有人占用它们。例如，车辆70和/或72可以将其地理坐标报告给SLD 30，然后SLD 30检测到车辆70和/或72在区域74之外。每个车辆可以识别其乘员(例如，通过各种车载识别方式，诸如电话配对、语音匹配、面部识别或其他生物识别)，并将该信息报告给SLD 30。如果发现所有先前已向SLD 30登记的人(例如，房屋的所有授权居住者)正在占用区域74之外的车辆，则SLD 30检测到住宅25现在是空的并自动发起监控模式。同样，SLD 30在登记人员和/或登记车辆返回后自动关闭监控模式。
了解登记车辆和住宅的授权居住者的位置对于在警报/响应模式期间的响应动作也很有用。例如，当触发警报时，SLD可以选择最近的车辆以将通知发送给用户。
图6示出了根据各个实施例中执行的响应动作/警报，SLD 50和车辆30之间通过通信链路进行交换的几个实施例。在一个实施例中，事务81包括从SLD 50到车辆30的信号，该信号激活车辆30的紧急警报。例如，响应于检测到入侵者或检测到烟雾或一氧化碳，SLD 50致使车辆紧急警报器生成警报声，该警报声不仅在SLD 50所在的住宅中是非常可感知的，而且对于相邻的区域和住宅都是非常可感知的。
事务82包括SLD 50，其请求车辆30激活基于蜂窝电话的应急响应系统。许多车辆都配备了在发生车辆碰撞时自动拨打应急响应电话的系统。通过响应在住宅内检测到的突发情况触发此功能，可以在应急服务到达时节省宝贵的时间。
事务83包括从SLD 50到车辆30的请求，以发起用于证据目的和事件重建的数据记录。数据可以包括来自车载相机的记录的视频流以及音频记录或车辆环境数据的记录。
在事务84中，SLD 50可以从车辆30请求各种数据。在监控模式期间，SLD 50可以请求用于对受监控的事件进行检测和分类的环境数据(例如，捕获的视频、音频、温度、湿度或其他车辆传感器数据)。例如，在警报/响应模式期间，SLD 50可以请求确认响应的触发。在事务85中，车辆30向SLD 50提供包含所请求的数据的答复。
在事务86中，SLD 50通过显示的文本或合成语音向车辆30的乘员发送警报消息。此外，SLD 50可以将音频和/或视频信号实时流传输到车辆30，以允许乘员更密切地监控住宅中的活动。在事务87中，响应动作还可以包括打开双向通信信道，使得车辆乘员可以与住宅中的人通信。
在事务88中，SLD 50可以从车辆30请求车辆配置数据。具体地，这种请求可以在设置模式期间发生，使得用户可以确定哪些响应动作是可用的。因此，只需支付很少的费用或没有额外的费用，就可以使用可能或可能不位于住宅附近的用户运输车辆的功能显着地丰富基于SLD的监控/报警系统的功能。
根据一个实施例，对应于所述用户车辆的所述响应动作包括触发对救援中心的自动蜂窝电话呼叫，而不触发听觉和视觉车辆警报。
根据一个实施例，所述第二通信链路交换车辆配置参数以支持所述特征数据。
根据一个实施例，响应于检测到所述车辆在所述装置周围的接近区域之外，自动发起所述监控模式。
根据一个实施例，对应于所述运输车辆的所述响应动作包括触发对救援中心的自动蜂窝电话呼叫，而不触发听觉和视觉车辆安全警报。
根据一个实施例，对应于所述运输车辆的所述响应动作包括将警报消息传递给所述运输车辆的乘员。
根据一个实施例，响应于检测到所述运输车辆在所述装置周围的接近区域之外，自动发起所述监控模式。

Claims (15)

1.一种智能监听装置，其包括：
音频检测器，所述音频检测器响应于语音和环境声音以提供数字音频信号；
分布式控制器，所述分布式控制器耦合到所述音频检测器以响应于所述数字音频信号而执行响应动作；
通信电路，所述通信电路与后端建立第一通信链路；和
车辆数据库，所述车辆数据库识别至少一个用户运输车辆和对应于所述用户车辆的至少一个响应动作；
其中所述分布式控制器具有监控模式，以用于检测预配置的警报事件，并且具有警报/响应模式，以用于执行与所述检测到的警报事件相关联的响应动作；并且
其中当已执行的响应动作与对应于所述用户车辆的检测到的警报事件相关联时，所述通信电路与所述用户车辆建立第二通信链路，以便发起所述响应动作。
2.如权利要求1所述的装置，其中对应于所述用户车辆的所述响应动作包括触发听觉和视觉车辆警报。
3.如权利要求1所述的装置，其中对应于所述用户车辆的所述响应动作包括触发对救援中心的自动蜂窝电话呼叫。
4.如权利要求1所述的装置，其中对应于所述用户车辆的所述响应动作包括发起存储来自安装在所述用户车辆上的相机的视频数据。
5.如权利要求1所述的装置，其中对应于所述用户车辆的所述响应动作包括向所述用户车辆的乘员传递警报消息。
6.如权利要求5所述的装置，其中所述响应动作还包括将监控信号从所述智能监听装置流传输到所述用户车辆。
7.如权利要求1所述的装置，其中对应于所述用户车辆的所述响应动作包括发起在所述智能监听装置和所述用户车辆之间的双向音频通信。
8.如权利要求1所述的装置，其中对应于所述用户车辆的所述响应动作包括从车辆传感器收集远程数据。
9.如权利要求1所述的装置，其中所述分布式控制器具有设置模式，以将所述车辆数据库配置成包括用于建立所述第二通信链路的链路数据和用于启用支持所述响应动作的车辆交互的特征数据。
10.如权利要求1所述的装置，其中所述第二通信链路包括Wi-Fi连接、蜂窝电话链路、蓝牙连接或经由连接到所述智能监听装置的附件收发器的RF信道。
11.一种警报系统，其包括：
运输车辆，所述运输车辆包括警报附件和无线收发器；和
智能监听装置，所述智能监听装置被定位成远离所述车辆并且包括：
音频检测器，所述音频检测器响应于语音和环境声音以提供数字音频信号；
分布式控制器，所述分布式控制器耦合到所述音频检测器以响应于所述数字音频信号而执行响应动作；
通信电路，所述通信电路与后端建立第一通信链路；和
车辆数据库，所述车辆数据库识别所述运输车辆和对应于所述运输车辆的至少一个响应动作；
其中所述分布式控制器具有监控模式，以用于检测预配置的警报事件，并且具有警报/响应模式，以用于执行与所述检测到的警报事件相关联的响应动作；并且
其中当已执行的响应动作与对应于所述运输车辆的检测到的警报事件相关联时，所述通信电路与所述运输车辆建立第二通信链路，以便发起所述响应动作。
12.如权利要求11所述的警报系统，其中对应于所述运输车辆的所述响应动作包括触发听觉和视觉车辆安全警报。
13.如权利要求11所述的警报系统，其中对应于所述运输车辆的所述响应动作包括触发对救援中心的自动蜂窝电话呼叫。
14.如权利要求11所述的警报系统，其中对应于所述运输车辆的所述响应动作包括发起存储来自安装在所述运输车辆上的相机的视频数据。
15.如权利要求11所述的警报系统，其中所述分布式控制器具有设置模式，以将所述车辆数据库配置成包括用于建立所述第二通信链路的链路数据和用于启用支持所述响应动作的车辆交互的特征数据。
CN202010004586.4A 2019-01-07 2020-01-03 链接到运输车辆的家用智能监听装置 Pending CN111415659A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US16/240,967 2019-01-07
US16/240,967 US10825332B2 (en) 2019-01-07 2019-01-07 Home smart listening device linking to transport vehicle

Publications (1)

Publication Number Publication Date
CN111415659A true CN111415659A (zh) 2020-07-14

Family

ID=71104296

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010004586.4A Pending CN111415659A (zh) 2019-01-07 2020-01-03 链接到运输车辆的家用智能监听装置

Country Status (3)

Country Link
US (1) US10825332B2 (zh)
CN (1) CN111415659A (zh)
DE (1) DE102020100081A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111933145B (zh) * 2020-10-09 2021-01-22 广州宸祺出行科技有限公司 一种基于语音ai的行程安全智能监控的方法及系统
CN113658608B (zh) * 2021-08-27 2022-03-25 中关村科学城城市大脑股份有限公司 路面积水监测方法、装置、存储介质及电子设备

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030030548A1 (en) * 2001-06-15 2003-02-13 Alex Kovacs Vehicle alarm system
US20030193393A1 (en) * 2002-04-11 2003-10-16 Ford Michael Brent Distributed residental alarm system and method therefor
US20050062602A1 (en) * 2002-01-16 2005-03-24 Omron Corporation Security arrangement with in-vehicle mounted terminal
US20050128068A1 (en) * 2003-12-10 2005-06-16 Honeywell International, Inc. Home security system with vehicle interface, and remote vehicle monitor
US20060017561A1 (en) * 2004-07-23 2006-01-26 Albert David E Enhanced fire, safety, security and health monitoring and alarm response method, system and device
JP2007072686A (ja) * 2005-09-06 2007-03-22 Sumitomo Electric Ind Ltd 車両利用型セキュリティシステム
US20130141228A1 (en) * 2011-12-05 2013-06-06 Navman Wireless North America Lp Safety monitoring in systems of mobile assets
US20140300492A1 (en) * 2012-01-10 2014-10-09 Mitsubishi Electric Corporation Home security system and vehicle-mounted system used by same
CN104777797A (zh) * 2014-05-19 2015-07-15 白运福 一种基于车载网络的智能家居监视系统
JP2016139865A (ja) * 2015-01-26 2016-08-04 株式会社デンソー 車両の周辺画像送信装置及びセキュリティシステム
CN106209138A (zh) * 2015-05-29 2016-12-07 福特全球技术公司 谨慎紧急响应
US20170080898A1 (en) * 2015-04-29 2017-03-23 International Business Machines Corporation Vehicle and local area security system communications
CN107438064A (zh) * 2016-05-27 2017-12-05 通用汽车环球科技运作有限责任公司 对车辆安全事件的摄像机启动响应

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002236985A (ja) 2001-02-08 2002-08-23 Casio Comput Co Ltd 音声報知装置、音声報知システム及び音声報知プログラム
GB2413883A (en) 2004-05-04 2005-11-09 Mygard Plc Monitoring system for alarms
US8018337B2 (en) 2007-08-03 2011-09-13 Fireear Inc. Emergency notification device and system
US20130088352A1 (en) 2011-10-06 2013-04-11 David Amis Systems and methods utilizing sensory overload to deter, delay, or disrupt a potential threat
US8594616B2 (en) 2012-03-08 2013-11-26 Ford Global Technologies, Llc Vehicle key fob with emergency assistant service
WO2013178869A1 (en) 2012-06-01 2013-12-05 Biisafe Oy Mobile device, stand, arrangement, and method for alarm provision
US10079021B1 (en) 2015-12-18 2018-09-18 Amazon Technologies, Inc. Low latency audio interface
US10455185B2 (en) * 2016-08-10 2019-10-22 International Business Machines Corporation Detecting anomalous events to trigger the uploading of video to a video storage server
US10412581B2 (en) 2017-02-14 2019-09-10 Ford Global Technologies, Llc Secure session communication between a mobile device and a base station
US11158141B2 (en) * 2018-04-02 2021-10-26 Innova Electronics Corporation System and method for proactive vehicle diagnosis and operational alert

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030030548A1 (en) * 2001-06-15 2003-02-13 Alex Kovacs Vehicle alarm system
US20050062602A1 (en) * 2002-01-16 2005-03-24 Omron Corporation Security arrangement with in-vehicle mounted terminal
US20030193393A1 (en) * 2002-04-11 2003-10-16 Ford Michael Brent Distributed residental alarm system and method therefor
US20050128068A1 (en) * 2003-12-10 2005-06-16 Honeywell International, Inc. Home security system with vehicle interface, and remote vehicle monitor
US20060017561A1 (en) * 2004-07-23 2006-01-26 Albert David E Enhanced fire, safety, security and health monitoring and alarm response method, system and device
JP2007072686A (ja) * 2005-09-06 2007-03-22 Sumitomo Electric Ind Ltd 車両利用型セキュリティシステム
US20130141228A1 (en) * 2011-12-05 2013-06-06 Navman Wireless North America Lp Safety monitoring in systems of mobile assets
US20140300492A1 (en) * 2012-01-10 2014-10-09 Mitsubishi Electric Corporation Home security system and vehicle-mounted system used by same
CN104777797A (zh) * 2014-05-19 2015-07-15 白运福 一种基于车载网络的智能家居监视系统
JP2016139865A (ja) * 2015-01-26 2016-08-04 株式会社デンソー 車両の周辺画像送信装置及びセキュリティシステム
US20170080898A1 (en) * 2015-04-29 2017-03-23 International Business Machines Corporation Vehicle and local area security system communications
CN106209138A (zh) * 2015-05-29 2016-12-07 福特全球技术公司 谨慎紧急响应
CN107438064A (zh) * 2016-05-27 2017-12-05 通用汽车环球科技运作有限责任公司 对车辆安全事件的摄像机启动响应

Also Published As

Publication number Publication date
DE102020100081A1 (de) 2020-07-09
US10825332B2 (en) 2020-11-03
US20200219382A1 (en) 2020-07-09

Similar Documents

Publication Publication Date Title
US10604097B1 (en) Detection and classification of events
CN107025907B (zh) 借助音频输入的建筑自动化系统中的设备登记
MX2007008766A (es) Sistema de administracion y asistencia para sordos.
JP3636113B2 (ja) 携帯型通信装置、監視装置、監視システム、携帯通信装置の制御プログラム、監視装置の制御プログラム、携帯通信装置の制御プログラムを記録した記録媒体、および監視装置の制御プログラムを記録した記録媒体
US7683800B2 (en) Dog bark door bell notification and personal protection system
US8013737B2 (en) Voice recorder based position registration
JP4879573B2 (ja) 盗難通知システム
US11613277B2 (en) Network of home smart listening devices linked to autonomous vehicle
CN202491773U (zh) 一种汽车车内后视镜及一种车内人体安全报警系统
CN204990602U (zh) 一种房车防盗监控系统及使用该系统的房车
US20230199463A1 (en) Smart speakerphone emergency monitoring
US11210929B2 (en) Home smart listening devices linking to multiple transport vehicles
JP2009290789A (ja) 緊急通報システム、緊急通報方法
CN111415659A (zh) 链接到运输车辆的家用智能监听装置
KR101342448B1 (ko) 원격 감시 장치와 그 방법
CN102582522A (zh) 一种汽车车内后视镜及一种车内人体安全报警系统
AU2003201186B2 (en) Mobile telephone device
US10721579B2 (en) Correlated cross-feed of audio and video
KR20160052496A (ko) 비명소리 탐지 비상호출 시스템 및 방법
CN114550432A (zh) 基于语音识别的安全求救方法及装置
EP0813786B1 (en) Personal attack alarms
US11751035B2 (en) Exterior speech recognition calling for emergency services
CN109410981A (zh) 用于网约车的检测车辆安全的方法及装置
JP2020004242A (ja) 置き去り対応制御装置および置き去り対応制御方法
JP2011068347A (ja) 注意喚起装置、注意喚起方法、遠隔操作システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination