CN115915991A - 交互式保护系统 - Google Patents

交互式保护系统 Download PDF

Info

Publication number
CN115915991A
CN115915991A CN202080102047.2A CN202080102047A CN115915991A CN 115915991 A CN115915991 A CN 115915991A CN 202080102047 A CN202080102047 A CN 202080102047A CN 115915991 A CN115915991 A CN 115915991A
Authority
CN
China
Prior art keywords
vehicle
user
audio
information
cluster
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080102047.2A
Other languages
English (en)
Inventor
S·D·楚达萨玛
V·拉马林加姆
A·K·瓦苏
D·R·萨加雷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TVS Motor Co Ltd
Original Assignee
TVS Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by TVS Motor Co Ltd filed Critical TVS Motor Co Ltd
Publication of CN115915991A publication Critical patent/CN115915991A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • AHUMAN NECESSITIES
    • A41WEARING APPAREL
    • A41DOUTERWEAR; PROTECTIVE GARMENTS; ACCESSORIES
    • A41D1/00Garments
    • A41D1/002Garments adapted to accommodate electronic equipment
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00Speech synthesis; Text to speech systems
    • G10L13/02Methods for producing synthetic speech; Speech synthesisers
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L15/18Speech classification or search using natural language modelling
    • G10L15/1815Semantic context, e.g. disambiguation of the recognition hypotheses based on word meaning
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/02Casings; Cabinets ; Supports therefor; Mountings therein
    • H04R1/028Casings; Cabinets ; Supports therefor; Mountings therein associated with devices performing functions other than acoustics, e.g. electric candles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • AHUMAN NECESSITIES
    • A42HEADWEAR
    • A42BHATS; HEAD COVERINGS
    • A42B3/00Helmets; Helmet covers ; Other protective head coverings
    • A42B3/04Parts, details or accessories of helmets
    • A42B3/30Mounting radio sets or communication systems
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00Details of connection covered by H04R, not provided for in its groups
    • H04R2420/07Applications of wireless loudspeakers or wireless microphones

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Textile Engineering (AREA)
  • Artificial Intelligence (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

本申请公开了一种车辆的交互式保护系统(100)。该交互式保护系统(100)包括仪表集群(101),该仪表集群包括用于基于车辆传感器数据生成车辆信息的集群控制器(101a)和用于将生成的车辆信息传送给部分体现在用户设备(104)中的语音助手(111)的至少一个车辆无线收发器(101b)。进一步地,交互式保护系统(100)包括音频系统(103b),其靠近用户头部布置,用于生成用户信息;以及音频无线收发器,其用于接收来自语音助手(111)的车辆信息并通过语音助手(111)将用户信息传输至仪表集群(101),用于后续生成车辆信息。音频系统(103b)由用户直接佩戴或靠近车辆用户佩戴的保护装备(103)的内表面(402a)布置。

Description

交互式保护系统
技术领域
本主题涉及车辆骑手保护系统。更具体地,公开了一种用于车辆的骑手的交互式保护和导航辅助系统。
背景技术
近年来,两轮车和三轮车作为交通工具的使用量大幅增加。此外,由于骑车时分心或在没有保护装备的情况下骑车而导致的事故数量也在激增。需要在乘坐车辆期间减少分心的骑手辅助系统,以改善骑手在舒适性和安全性方面的体验。此外,随着安全功能的增强,头部装备正在使用各种类型的泡沫和硬塑料制造,以减少事故中头部受伤的程度。用于改进的骑手安全性的实施方式包括将智能电子器件嵌入头部装备,同时为头部提供物理保护并为用户提供骑手辅助。
附图说明
参考附图描述详细描述。在整个附图中使用相同的附图标记来指代相似的特征和元件。
图1示例性地图示了示出车辆仪表集群、音频系统和语音助手之间车辆信息和用户信息的无线通信的交互式保护系统的示意图;
图2示例性地图示了示出车辆仪表集群的架构的框图;
图3示例性地图示了示出车辆用户佩戴的头部装备的结构的框图;
图4示例性地图示了头部装备的立体图;
图5示例性地图示了由图1示例性地图示的交互式保护系统执行的车辆与用户之间的无线通信方法的流程图;
图6示例性地图示了示出从车辆接口调用语音助手的流程图;
图7示例性地图示了示出使用语音命令调用语音助手的流程图;
图8示例性地图示了示出从语音助手应用调用语音助手的流程图;以及
图9示例性地图示了示出从车辆接口调用语音助手的流程图。
具体实施方式
目前,制造商将通信功能嵌入到头部装备中。一些变体具有在头部装备和安装在其他地方的底座单元之间运行的绳。在一些变体中,无线通信装置连同天线合并到壳体内部、壳体上、以及头部装备的衬垫上,用于用户、车辆和头部装备之间的通信。通信装置包括无线通信模块、位置跟踪模块、能无线通信的处理器、驱动模块的能量源等。使用头部装备的无线通信装置,用户与车辆关于用户的状态,车辆状态、呼叫提醒、音频形式的导航指南等进行通信。
然而,在这样的变体中,头部装备体积庞大,元件拥挤在头部装备的可用空间中并且用户佩戴起来不舒适。此外,该头部装备不提供足够的冲击吸收并且通信装置会分散用户的注意力。驱动头部装备中模块的能量源将具有较小的容积以将其并入头部装备。这种容量较小的能源可能会导致长时间运行后电力不足,并且可能需要在骑行过程中充电,从而扰乱骑行。在旅行过程期间,无线通信装置可能会持续消耗电力,即使在不使用且仅在所需时才需要调用时也是如此。
此外,将无线通信模块(诸如GSM、Wi-Fi、蓝牙)及其各自的天线放置在靠近用户头部的位置,从长远来看也可能导致用户出现与辐射相关的异常,这是不建议的。此外,头部装备和车辆之间通信的无线信号可能容易受到来自不同频率范围的信号的干扰。此外,头部装备的安全性将是一个问题,因为头部装备及其模块可能被盗,因为通常在停车时头部装备与车辆系在一起。在将无线模块定位在头部装备的衬垫下方的情况下,必须确保衬垫的光滑度不会给用户带来不适,并且不会损害头部装备的撞击吸收能力。
在头部装备和车辆之间的无线通信的一些实施中,模块(诸如GSM、GPS、Wi-Fi和蓝牙及其天线)以及传感器(诸如加速度计、陀螺仪和振动检测器)安装在车辆中。然而,将它们安装在车辆中方便的位置需要用于防水和防尘的封装以及到模块的额外电源布线。如果模块靠近车辆的车把并通过红外线通信与头部装备通信,则车把周围的区域可能会很拥挤,从而分散车辆用户的注意力,并且红外线不是一种安全有效的通信方式。
为了向用户提供导航指南,现有的许多解决方案包括在车辆上安装具有GPS功能的用户设备、在车辆中使用单独的GPS导航器、在车辆中使用无线通信模块以及使用安装在头部装备的通信装置将导航指南无线传输到头部装备。然而,因为需要持续监控显示,在车辆上使用用户设备或单独的GPS导航器设备可能会在骑行时分散注意力。此外,不建议安装用户设备,因为用户设备不兼容汽车级,并且其耐用性不足以承受冲击、振动和热暴露。将无线通信装置安装在头部装备上具有前面讨论的缺点。此外,随着具有无线通信装置的头部装备的复杂性的增加,头部装备的成本增加。因此,头部装备的制造成本也增加。
此外,如果使用触觉反馈将呼叫提醒和关于车辆状态的提醒传送给用户,则触觉反馈可能会最小程度地分散用户的注意力并传达较少的信息。此外,在旅行过程期间,用户可能想要控制某些车辆元件(诸如车辆的指示器、头灯等)的致动和设置。然而,物理操作或用户设备来控制车辆的致动和设置某些车辆元件可能会分散用户的注意力,影响车辆和用户的安全。如果可以从专用显示单元(例如车辆的仪表集群)访问控制信息,从组合仪表中获取信息所需的认知努力非常高,通过这种介质呈现的信息质量受到限制。
在信号的无线音频通信(比如使用头部装备或可无线耳机向用户发送导航指南、呼叫提醒、控制信息)被执行的情况下,查询数量可以被头部装备处理器和车辆的控制器所理解并且对该查询的响应受处理器中的内存限制。此外,处理器缺乏理解查询上下文、与用户进行对话、以及从随着时间的对话中学习的能力。
因此,需要经由具有无线能力的音频系统改进在用户和车辆之间的用户信息、车辆信息和控制信息的无线通信,提供耐久性、舒适性、安全性,并减少对用户的干扰,同时克服上面公开的所有问题以及已知技术的其他问题。
鉴于上述目的,本发明公开了一种车用仪表集群,该仪表集群通过无线传输介质与音频系统或头部装备中的音频系统进行通信。头部装备包括外壳体、内壳体、依附在内壳体中的无线收发器,使得无线收发器监控骑手的骑行能力并经由音频系统向用户提供关于位置的车辆信息、提醒等。这反过来又增加了骑手的安全性和舒适性。在一个实施例中,本发明利用车辆中可用的具有无线能力的现有的仪表集群。具有无线功能的车辆仪表集群显示车辆信息并实施导航指南系统,将音频信号传输到音频系统。
在一个实施例中,公开了一种包括仪表集群、音频系统和音频无线收发器的车辆交互式保护系统。根据本主题的系统由仪表集群组成,该仪表集群包括用于基于车辆传感器数据生成车辆信息的集群控制器,以及至少一个车辆无线收发器,用于将生成的车辆信息传送至部分体现在用户设备中的语音助手。音频系统靠近用户头部布置并产生用户信息,并且音频无线收发器从语音助手接收车辆信息并通过语音助手将用户信息传输至仪表集群以用于后续生成车辆信息。在一个实施例中,语音助手是用户设备上的语音助手应用和语音云平台的结合。语音助手包括语音到文本引擎、域识别和意图匹配引擎,以及用于将用户信息转换为文本和将车辆信息转换为音频形式的文本到语音引擎。在一个实施例中,音频系统靠近布置在车辆用户佩戴的保护装备的内表面。在另一个实施例中,音频系统由用户直接佩戴在用户的头上。
保护装备还包括用于产生第二传感器数据的一个或多个第二传感器,以及为音频系统和音频无线收发器供电的电源。一个或多个第二传感器是睡眠传感器和呼吸分析器中的一个或多个。用户信息包括来自音频系统的音频输入和来自一个或多个第二传感器的第二传感器数据。
用于控制音频系统操作的控制旋钮布置在保护装备的至少一个表面上和车辆中靠近仪表集群的区域。语音助手接收来自音频系统的音频输入,并基于集群控制器对用户信息和车辆传感器数据的处理实时将车辆信息传送至音频系统。使用仪表集群的接口、语音命令和音频系统的控制旋钮中的一者或多者来调用语音助手。语音助手根据来自音频系统的用户信息来控制多个车辆元件的致动器。音频系统包括用于接收来自用户的音频输入的麦克风和至少一个向用户发送车辆信息的扬声器。
车辆传感器数据由安装在车身或仪表集群上的一个或多个速度传感器、一个或多个加速度计、一个或多个水平传感器、一个或多个振动检测器、一个或多个陀螺仪、一个或多个温度传感器、一个或多个位置传感器中的至少一者和一个或多个压力传感器生成。车辆传感器数据包括指示灯状态、车辆速度、车辆能量水平、车辆位置、车辆振动、车辆加速度、车辆倾斜度、环境条件的数据、温度、车轮气压和档位。车辆信息包括车辆能量提醒、车辆速度提醒、指示灯状态提醒、车辆倾斜提醒、车辆位置提醒、导航指南、呼叫提醒、环境天气、行程信息、新闻报道、用户设备掉落提醒、服务历史、团体乘车状态和紧急服务援助。
在另一个实施例中,公开了一种车辆的交互式保护系统,其包括仪表集群和由车辆用户佩戴的保护装备。仪表集群包括用于基于车辆传感器数据生成车辆信息的集群控制器,以及用于将生成的车辆信息传送至用户的保护装备的至少一个车辆无线收发器。保护装备包括靠近保护装备的内表面布置的用于生成用户信息的音频系统,以及音频无线收发器,该音频无线收发器用于通过至少一个车辆无线收发器从仪表集群接收车辆信息并发送用户信息的信息到仪表集群,用于后续生成车辆信息。
保护装备还包括用于生成第二传感器数据的一个或多个第二传感器和为音频系统和音频无线收发器供电的电源。一个或多个第二传感器是睡眠传感器和呼吸分析器中的一个或多个。用户信息包括来自音频系统的音频输入和来自一个或多个第二传感器的第二传感器数据。音频系统包括用于接收来自用户的音频输入的麦克风和向用户传输车辆信息的至少一个扬声器。
在该实施例中,车辆传感器数据包括来自车辆速度、车辆能量水平、车辆位置、车辆振动、车辆加速度、车辆倾斜度、环境条件温度数据、车轮气压和档位中的参数中的至少一者。车辆信息包括来自车辆能量水平提醒、车辆速度提醒、车辆位置提醒、导航指南和呼叫提醒的信息中的至少一者。车辆传感器数据由安装在车辆的车身或仪表集群之一上的一个或多个速度传感器、一个或多个加速度计、一个或多个水平传感器、一个或多个振动检测器、一个或多个陀螺仪、一个或多个温度传感器、一个或多个位置传感器以及一个或多个压力传感器中的至少一者生成。
交互式保护系统的实施例包括用户设备,该用户设备通过仪表集群与音频系统连接,用于接听电话、接收消息和存储媒体。用于控制音频系统操作的控制旋钮布置在保护装备的表面和/或车辆中靠近仪表集群的区域。集群控制器从保护装备无线地接收用户信息,并基于实时处理用户信息和车辆传感器数据来传送车辆信息。保护装备还包括用于以增强现实显示车辆信息的平视显示单元。
公开了包括音频系统和音频无线收发器的由车辆用户佩戴的保护装备的实施例。靠近保护装备的内表面布置的音频系统生成用户信息,并且音频无线收发器从车辆的仪表集群接收车辆信息并将用户信息传送至仪表集群以用于后续生成车辆信息。在本实施例中,保护装备包括一个或多个用于产生第二传感器数据的第二传感器,以及为音频系统和音频无线收发器供电的电源。一个或多个第二传感器包括睡眠传感器和呼吸分析器。在该实施例中,车辆信息包括车辆能量水平提醒、车辆速度提醒、车辆位置提醒、导航指南和基于车辆传感器数据的呼叫提醒中的至少一者。车辆传感器数据包括车辆速度、车辆能量水平、车辆位置、车辆振动、车辆加速度、车辆倾斜度、环境条件温度的数据、车轮的气压和档位中的至少一者。车辆传感器数据由安装在车辆的车身或仪表集群之一上的一个或多个速度传感器、一个或多个加速度计、一个或多个水平传感器、一个或多个振动检测器、一个或多个陀螺仪、一个或多个温度传感器、一个或多个位置传感器,以及一个或多个压力传感器中的至少一者生成。
在一个实施例中,公开了一种由交互式保护系统执行的用于车辆和车辆用户之间的无线通信的方法。交互式保护系统的实施例包括仪表集群,该仪表集群由用于基于车辆传感器数据生成车辆信息的集群控制器和至少一个用于将生成的车辆信息传送至部分体现在用户设备中的语音助手的车辆无线收发器、用于生成用户信息的靠近用户头部布置的音频系统、以及用于从语音助手接收车辆信息并通过语音助手将用户信息传输至仪表集群以用于后续生成车辆信息的音频无线收发器所组成。该方法包括以下步骤:通过仪表集群的接口、来自音频系统的语音命令、音频系统的控制旋钮中的一者来调用语音助手;由语音助手从音频系统接收用户信息;将用户信息转换成集群控制器兼容的格式;基于来自音频系统的所转换的用户信息,由集群控制器控制多个车辆元件的一个或多个致动器;基于所转换的用户信息,由集群控制器从车辆传感器数据生成车辆信息;并且由语音助手将车辆信息传输至音频系统。
音频系统靠近车辆用户佩戴的保护装备的内表面布置。用于控制音频系统操作的控制旋钮布置在保护装备的至少一个表面上和车辆中靠近仪表集群的区域。语音助手是用户设备上的语音助手应用和语音云平台的结合。
图1示例性地图示了交互式保护系统100的示意图,该交互式保护系统100示出车辆信息以及车辆仪表集群101、音频系统103b和语音助手111之间的用户信息的无线通信。音频系统103b和音频无线收发器103a一起可以是用户佩戴的带有麦克风的蓝牙头戴式耳机。蓝牙头戴式耳机可以包括至少一个扬声器。在一个实施例中,音频系统103b和音频无线收发器103a可以附接到由用户佩戴的保护装备103。音频系统103b和音频无线收发器103a将用户信息传输到仪表集群101。在一个实施例中,保护装备103可以是用户佩戴的靠近用户头部的安全装备,诸如在用户的背部的有领外套、颈部支撑件等。在优选实施例中,保护装备103是用户佩戴的头部装备。此后,保护装备103称为头部装备,但是交互式保护系统100的实施不仅限于头部装备。该车辆是两轮车辆、三轮车辆、内燃机车辆、电动车辆、混合动力电动车辆和自主车辆中的一者。车辆中的仪表集群101是车辆的显示单元,其经由音频系统103b、无线收发器103a和用户设备104来访问车辆传感器数据、向用户显示和传输车辆信息。车辆传感器数据由安装在车身或仪表集群101之一上的一个或多个速度传感器、一个或多个加速度计、一个或多个水平传感器、一个或多个振动检测器、一个或多个陀螺仪、一个或多个温度传感器、一个或多个位置传感器以及一个或多个多个压力传感器生成。车辆传感器数据包括指示器状态、车辆速度、车辆能量水平、车辆位置、车辆振动、车辆加速度、车辆倾斜度、环境条件温度的数据、车轮气压和档位中的至少一者。
用户设备104例如是蜂窝电话、智能电话、平板计算设备、超极本
Figure BDA0003997954520000071
膝上型电脑、个人数字助手、触摸中心设备等,或配置为用于无线网络102的任何其他移动设备。在一个实施例中,无线网络102是移动通信网络、因特网、局域网(LAN)、广域网(WAN)或以太网、令牌环,或经由任何适当的通信介质等。在优选实施例中,无线网络102是蓝牙信号股份有限公司(Bluetooth Sig,Inc.)的蓝牙
Figure BDA0003997954520000081
仪表集群101包括车辆无线收发器101b,其能实现向音频系统103b和音频无线收发器103a或者向用户设备104中的语音助手111的车辆信息的无线通信。在一个实施例中,音频无线收发器103a直接从仪表集群101接收车辆信息。在另一个实施例中,车辆无线收发器101b将车辆信息传送到语音助手111。语音助手111部分体现在用户设备104中,并且语音助手111利用用户设备104的无线收发器将车辆信息通过音频无线收发器103a发送到音频系统103b。
在一个实施例中,语音助手111是用户设备104上的语音助手应用105和语音云平台108的组合。语音助手应用105可以是基于Android的应用、iOS应用、基于Windows的应用等。在一个实施例中,语音助手应用105是由车辆、头部装备103和仪表集群101的原始设备制造商(OEM)提供的在用户设备104的应用程序商店中可用的应用程序。在一个实施例中,语音助手应用105充当提供仪表集群101、头部装备103和语音云平台108之间的网关的中央节点。用户设备104具有用于呼叫、信息收发和媒体存储能力的其他应用程序。
语音云平台108是自然语言理解平台,可以由服务提供商作为服务提供。语音云平台108进行语音到文本的转换并发现用户的意图。语音云平台108包括将音频输入转换为文本的语音到文本引擎109和发现音频输入的意图的域识别和意图匹配引擎110。语音助手111通过语音助手应用105接收来自用户的音频输入。语音助手应用105包括从仪表集群101获取车辆信息的车辆接口系统107以及将车辆信息转换成音频输出的文本到语音引擎106。音频输出经由无线网络102传输到音频系统103b。
仪表集群101还包括集群控制器101a,其接收车辆传感器数据并生成待传输的车辆信息。在一个实施例中,头部装备103中的音频系统103b靠近头部装备103的内表面布置。佩戴头部装备103的用户输入的音频通过音频无线收发器103a传输到语音助手111。音频系统103b生成包括音频输入的用户信息。音频系统103b将车辆信息传送给用户。头部装备103还包括多个第二传感器,诸如用于生成第二传感器数据的睡眠传感器和呼吸分析器,以及用于向(如会在图3-4中描述的)音频系统103b和音频无线收发器103a供电的电源。除了音频输入之外,用户信息还包括第二传感器数据。包括第二传感器数据的用户信息由集群控制器101a处理以用于后续生成车辆信息。第二传感器可以电连接到音频系统103b,因此,音频系统103b生成用户信息。
图2示例性地图示了示出车辆的仪表集群101的架构的框图。如示例性所示,仪表集群101包括集群控制器101a、存储单元208、电源205、如图1所示的车辆无线收发器101b、用于无线传输的天线(未示出)、传感器,诸如加速度计和/或陀螺仪203、振动检测器204、位置传感器(未示出?)和控制旋钮201。车辆无线收发器101b迎合不同类型的无线网络102。车辆无线收发器101b可以包括用于任何一种通信媒体的无线通信模块202,其包括蓝牙、无线局域网(Wi-Fi)或红外装置和全球移动通信系统(GSM)模块206以将车辆信息无线地传送到音频系统103b。GSM模块206具有对应的GSM天线209。位置传感器是具有GPS天线210的全球定位系统(GPS)模块207。电源205驱动仪表集群101的元件的操作。
集群控制器101a经由车辆的控制器局域网(CAN)总线从车辆的控制器接收车辆传感器数据并生成车辆信息。集群控制器101a是微处理器、中央处理单元(CPU)设备、有限状态机、微控制器、数字信号处理器、逻辑、逻辑设备、用户电路、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、芯片、数字电路、模拟电路等或它们的任意组合中的一者,能够执行一系列命令、指令或状态转换。诸如GPS模块207、GSM模块206、Wi-Fi/蓝牙(任何无线通信介质)模块202、加速度计和/或陀螺仪203、振动检测器204等的元件适配在内部仪表集群101的盒体。相应的天线209和天线210根据方便和效率放置在仪表集群101的盒体外部或内部,或车身上的任何位置。仪表集群101还包括具有集群接口(未示出)的显示单元,用于显示车辆传感器数据和车辆信息。集群控制器101a处理车辆传感器数据和来自仪表集群101中的传感器203和传感器204的传感器数据并生成车辆信息。车辆传感器数据和车辆信息与云数据库211同步。
在一个实施例中,靠近仪表集群101的区域包括用于控制音频系统103b的操作的控制旋钮201。在另一个实施例中,控制旋钮201可以位于头部装备103的表面上。控制旋钮201控制音频系统103b内的音频电平、呼叫接受/拒绝、打开/关闭音频系统103b,而不会失去对车辆的控制。控制旋钮201放置在靠近车辆指示器开关的车把上。控制旋钮201可以是硬按按钮或操纵杆,与仪表集群101有线连接。在一个实施例中,控制旋钮201可以是仪表集群101的仪表集群接口上的软按按钮。在一个实施例中,使用集群接口和/或控制旋钮201中的选择来调用语音助手111。仅当需要降低用户设备104的功耗时才唤醒语音助手111。
GPS模块207收集卫星数据(实时位置数据)并经由串行通信将其转达到集群控制器101a。卫星数据可以采用由集群控制器101a解析的NMEA(国家海洋电子协会)线(位置数据的全球标准)的形式,并且集群控制器101a分析导航指南并且集群控制器101a以音频的形式经由蓝牙/Wi-Fi(任何无线通信介质)模块202向音频系统103b传输那些导航指南。语音助手111以在音频系统103b中选择的语言向用户读出警告。在一个实施例中,集群控制器101a将实时位置数据转达到GSM模块206以在云数据库211上同步。在一个实施例中,在GSM网络不可用的情况下,实时位置数据也可以存储在闪存208中,并且稍后当GSM网络可用时,通过GSM天线209与云数据库211同步。
加速度计和/或陀螺仪203将车辆的定向和移动相关数据发送到集群控制器101a,其被处理,并且集群控制器101a生成包括对车辆用户的提醒和警告的车辆信息,诸如异常倾斜,异常加速或减速。集群控制器101a进一步经由蓝牙/Wi-Fi模块(任何无线通信介质)202以音频的形式将提醒和警告传输到音频系统103b。语音助手111以在音频系统103b中选择的语言向用户读出警告。
振动检测器204发送传感器数据,该传感器数据通过集群控制器101a进一步分析以检测事故或预测包括车辆信息的车辆中的部件故障。所预测的部件故障作为音频系统103b内的警告指示给用户。语音助手111在音频系统103b中向用户读出警告。在发生事故的情况下,集群控制器101a基于振动检测器204的传感器数据,致动用户设备104以拨通用户的紧急联系人和紧急服务,以尽早援助用户。
车辆传感器数据由集群控制器101a经由CAN总线从车辆的引擎控制单元(ECU)、控制器、电池管理系统(BMS)等中的任一者收集。集群控制器101a分析并生成车辆信息,包括诸如低电池/燃料、过热、部件故障、超速、鲁莽驾驶等的严重警告,并以音频的形式传输到音频系统103b。语音助手111在音频系统103b中以选择的语言(例如英语、印地语等)向用户读出警告。
GSM模块206将所有车辆传感器数据和生成的车辆信息与云数据库211同步。从用户设备104生成的任何呼叫、短讯(SMS)或任何其他通知在仪表集群101中可见并在音频系统103b中读出,并且在控制旋钮201的帮助下,可以根据用户的意愿采取所需的动作。例如,如果用户从他/她的联系人之一接到电话,则构成车辆信息的呼叫提醒被通知给车内的用户头部装备103或在音频系统103b中作为语音通知。他/她可以选择是否接受/拒绝呼叫,并在控制旋钮201的帮助下采取必要的动作。如果用户收到SMS,则可以经由音频向用户发出有关该SMS的指示,并提供他/她是否想听SMS的选项。在一个实施例中,语音助手111向用户读出SMS或来电提醒。用户可以在控制旋钮201的帮助下或通过音频输入来选择听SMS,并且在听到SMS之后,他/她甚至可以选择向发件人发送快速回复。语音助手111使上述所有操作变得容易,并使用语音云平台108与用户进行对话。
图3示例性地图示了示出由车辆的用户佩戴的头部装备103的架构的框图。头部装备103包括驱动器或控制器303、第二传感器301和第二传感器302、麦克风306和至少一个扬声器,例如一对扬声器304、音频无线收发器103a、电源305和控制旋钮201。无线收发器103a是蓝牙/Wi-Fi Tx/Rx(任何无线通信介质)模块,其可以将头部装备103与仪表集群101连接。第二传感器301和第二传感器302检测用户的状态,例如,使用睡眠传感器302和呼吸分析器301的用户的困倦状态、用户的醉酒状态。第二传感器301和第二传感器302安装到头部装备103的内壳体的内表面并连接到控制器303。
麦克风306和一对扬声器304构成音频系统103b。扬声器304在两侧附接到头部装备103的内壳体的内表面。麦克风306附接到头部装备103的前部分。扬声器304和麦克风306线连接到控制器。电源305是为扬声器304、麦克风306、控制器303以及第二传感器301和第二传感器302供电的低容量电池。在一个实施例中,控制旋钮201定位在头部装备103的内壳体的内表面的一侧。麦克风306接收来自用户的音频输入,扬声器304向用户传递车辆信息。音频系统103b接收来自第二传感器301和第二传感器302的音频输入和第二传感器数据,并生成用户信息以通过无线收发器103a发送给语音助手111。在一个实施例中,仪表集群101通过仪表集群101的无线收发器101b和无线收发器103a以及头戴式装置103向扬声器304传输诸如呼叫提醒的车辆信息。在本实施例中,响应于呼叫提醒,来自用户的音频输入通过仪表集群101和头部装备103的无线收发器101b和无线收发器103a传输到仪表集群101。
呼吸分析器301确保用户在骑行时没有醉。用户的醉酒状态被传输到集群控制器101a并且基于对包括醉酒状态的第二传感器数据的分析,集群控制器101a产生警告并且仅在用户佩戴的音频系统103b的扬声器304中播放警告或者在头部装备103的音频系统103b中播放警告。睡眠传感器302持续监测用户的眼球运动并检测眼球运动的模式并将其传输至集群控制器101a。集群控制器101a分析眼睛运动的模式并检测用户是否困倦。集群控制器101a产生警告并在扬声器304中播放警告。语音助手111在头部装备103的扬声器304中向用户读出警告。
这对扬声器304可以播放来自用户设备104的歌曲,给出关于来电和/或正在进行的呼叫的提醒和警告、导航指南等。在一个实施例中,头部装备103上的控制器303将所有上述音频发送到仪表集群101/或从仪表集群101接收所有上述音频。麦克风306将接收来自用户的音频输入以接听正在进行的呼叫并接受来自用户的语音命令。可以使用语音命令(例如,来自用户的唤醒词)来调用语音助手111。
图4示例性地图示了头部装备103的立体图。头部装备103包括外壳体401、内壳体402、护罩403和紧固头部装备103的带子(未示出)。头部装备103包括位于头部装备103的内壳体402的内表面402a的相对两侧的一对扬声器304。麦克风306位于头部装备103的前部分404。麦克风306和扬声器304通过天线405、图3中所示的控制器303和控制旋钮201与无线收发器103a连接。在一个实施例中,无线收发器103a和控制器303容纳在盒体中并且天线405和控制旋钮201布置在该盒体中。此外,呼吸分析器301靠近头部装备103的音频系统103b的麦克风06,并且睡眠传感器302定位在更靠近用户的眼睛的头部装备103的护罩403上。在一个实施例中,摄影器可以安装在车体上并且视频馈送可以被传输到头部装备103的护罩403前面的头部装备103内的平视显示器(未示出)。当后视摄像头安装在车辆后部时,平视显示器会很有帮助。具有音频系统103b的平视显示器可以支持增强现实并且有助于改进车辆的导航。平视显示器还可以以文本格式显示车辆信息,诸如车速、档位、剩余燃料、与车辆相关的提醒等。
图5示例性地图示了示出由图1示例性地图示的交互式保护系统100执行的车辆与用户之间的无线通信的方法的流程图。在步骤501,使用仪表集群101的集群接口的接口、来自音频系统103b的麦克风306的唤醒词、以及音频系统103b的控制旋钮201中的至少一者来调用语音助手111。语音助手111的调用的方法因车辆的高速和低速而异。在高速下,将使用唤醒词或车把上的控制旋钮201来免提调用语音助手111。在车辆的低速和静止状态下,使用集群接口调用语音助手111或者使用头部装备103中的控制旋钮201。语音助手111通过音频系统103b的扬声器304中的开始收听音来指示语音助手111的调用。在一个实施例中,集群控制器101a通过在音频系统103b的扬声器304中播放预定的开始收听音来指示语音助手111的调用。在步骤502,语音助手111从音频系统103b接收用户信息。也就是说,语音助手111接收从音频系统103b的麦克风306输入的音频。在步骤503,语音助手111使用语音到文本引擎109将音频输入转换成集群控制器101a的兼容格式。对应于音频输入的文本被发送到集群控制器101a。音频输入可以是对集群控制器101a的指令以控制车辆元件的致动和设置,诸如车前灯、仪表集群101、前照灯光束、照明标志、座椅锁、燃料锁、车辆模式、转向信号指示器,车辆行驶模式等。
在步骤504,集群控制器101a基于转换后的音频输入控制车辆元件的致动器。基于音频输入中的调整车辆元件的设置或打开/关闭的指令,集群控制器101a控制所指令的车辆元件的致动器。音频输入被识别以识别通过语音到文本引擎109指令的车辆元件。例如,考虑用户想要改变仪表的亮度设置、改变引擎或电动机的行驶模式、控制车灯、用户指示相同于音频系统103b的麦克风306中的音频输入。语音到文本引擎109和域识别和意图匹配引擎110解析音频输入,识别要致动的车辆元件,以及要执行的动作。语音到文本引擎109将要执行的致动传送到集群控制器101a。集群控制器101a可以打开左/右转向信号灯,打开前照灯,切换到远光前照灯,切换到近光前照灯,控制车前灯的方向-向上/向下/向左/向右,打开照明标志灯、打开/关闭危险开关、启用/禁用运动模式、启用/禁用跛行回家模式(limphome mode)、更改仪表集群101的主题、锁定/解锁车辆、启用/禁用停车模式或车辆倒车模式等。
在步骤505,基于音频输入,集群控制器101a从车辆传感器数据生成车辆信息。车辆信息包括车辆电量提醒、车速提醒、指示灯状态提醒、车辆倾斜提醒、车辆位置提醒、导航指南、来电提醒、环境天气、行程信息、新闻报道、用户设备104掉落提醒、服务历史、团体乘车状态和紧急服务援助。基于音频输入,集群控制器101a处理车辆传感器数据并生成对应于音频输入的车辆信息。车辆传感器数据的处理包括将车辆传感器数据与阈值进行比较,并对车辆传感器数据和来自头部装备103的第二传感器数据执行数学计算。在步骤506,语音助手111将生成的车辆信息传输到音频系统103b的扬声器304。
在一个实施例中,当来自用户的音频输入是诸如“你好”之类的问候语时,语音助手111可以向用户打招呼。当用户提问时,语音助手111可以自我介绍。当音频输入是关于轮胎压力的询问时,语音助手111从集群控制器101a获取轮胎压力并以轮胎压力值响应并在所需时要求用户重新充气。当音频输入是关于计划旅行时,与集群控制器101a通信的语音助手111以正在进行的旅行剩余的持续时间和距离作出响应。当音频输入是关于来自联系人或最喜欢的联系人的未接来电通知、SMS或社交媒体通知时,集群控制器101a访问用户设备104的呼叫和SMS提醒并生成车辆信息。语音助手111将在音频系统103b的扬声器304中拼读出呼叫提醒、SMS提醒和社交媒体通知细节,例如联系人姓名、错过的通知数量等。当在旅行过程中输入询问天气条件的音频时,语音助手111与集群控制器101a配合做出相应响应。类似地,音频输入可以是关于提醒项目、空气质量、导航、新闻、服务历史、医疗预约、个人健康等的探询。语音助手111提取与这些中的每一个对应的车辆信息并以音频系统103b的扬声器304响应用户。音频输入可能涉及对设置更改或重置提醒项目、计划、重新计划、重新安排行程、启动紧急援助、团体骑行中其他骑手的位置、支付通行费、账单、订票、订餐、切换打开/关闭家里的电器、预订车辆服务预约等的请求。语音助手111与集群控制器101a通信并执行请求的动作。语音助手111与集群控制器101a协作将所请求活动的状态传输到音频系统103b的扬声器304。音频输入不限于上面提到的列表并且可以在适当的时候由车辆的服务工程师或OEM、头部装备103和仪表集群101远程更新。在一个实施例中,音频输入可以包括多个查询、请求或查询和请求的组合,诸如,合并个人健康信息、车辆健康信息、交通信息、天气信息和空气污染信息的旅行计划请求以向用户提供适当的导航方向。
图6示例性地图示了示出从车辆接口调用语音助手111的流程图,例如,靠近指示器开关的控制旋钮201、仪表集群101上的硬按按钮或集群接口。如示例性所示,在步骤601,车辆点火装置被打开,并且在步骤602,车辆的仪表集群101与用户设备104之间的蓝牙连接被建立。如果建立蓝牙连接不成功,则由车辆用户进行另一次建立连接的尝试。如果在仪表集群101和用户设备104之间建立了蓝牙连接,则在步骤603,建立用户设备104和头部装备103或音频系统103b之间的蓝牙连接。如果成功,在步骤604,语音助手111通过蓝牙头部装置103或蓝牙音频系统103b被启用。如果在步骤603不成功,则在步骤605,语音助手111通过用户设备104的音频I/O被启用。在步骤606,控制旋钮201被致动。靠近指示器开关的车把上的控制旋钮201被触发。在一个实施例中,仪表集群101上的硬按按钮或集群接口被致动。语音助手111被调用。在步骤607,语音助手111提示用户说话,并在音频系统103b的扬声器304中播放开始收听音。在步骤608,语音助手111在音频系统103b的麦克风306中接收来自用户的音频输入。语音助手111执行音频输入的解析和语音到文本的转换,并将指令传输到集群控制器101a。在步骤609,集群控制器101a执行如图5的详细描述中所述的车辆级动作,并将车辆信息传送给语音助手111。语音助手111使用文本到语音引擎106执行文本到语音转换,并且在步骤610通过蓝牙将车辆信息作为音频响应发送到音频系统103b的扬声器304。如果在步骤608没有接收到来自用户的音频输入,则必须再次调用语音助手111。
图7示例性地图示了示出使用语音命令或唤醒词例如“Hi Ntorq”调用语音助手111的流程图。如示例性所示,在步骤701,车辆点火装置被打开,并且在步骤702,车辆的仪表集群101与用户设备104之间的蓝牙连接被建立。如果建立蓝牙连接不成功,则由车辆用户进行另一次建立连接的尝试。如果仪表集群101和用户设备104之间的蓝牙连接建立,则在步骤703,用户设备104和头部装备103或音频系统103b之间的蓝牙连接建立。如果成功,在步骤704,语音助手111通过蓝牙头部装备103或蓝牙音频系统103b被启用。如果在步骤703不成功,则在步骤705,通过用户设备104的音频I/O启用语音助手111。在步骤706,语音助手111开始收听来自音频系统103b的唤醒词。在步骤707,语音助手111停止收听来自音频系统103b的唤醒词。在步骤708,语音助手111提示用户以在音频系统103b的扬声器304中播放的开始收听音说话。在步骤709,语音助手111在音频系统103b的麦克风306中接收来自用户的音频输入。语音助手111执行音频输入的解析和语音到文本的转换,并将指令传输到集群控制器101a。在步骤710,集群控制器101a执行如图5的详细描述中所述的车辆级动作,并将车辆信息传送给语音助手111。在步骤711,语音助手111使用文本到语音引擎106执行文本到语音转换,并且通过蓝牙将车辆信息作为音频响应传输到音频系统103b的扬声器304。
图8示例性地图示了显示从语音助手应用105调用语音助手111的流程图。如示例性图示,在步骤801,车辆点火开启,并且在步骤802,车辆的仪表集群101和用户设备104之间的蓝牙连接被建立。如果建立蓝牙连接不成功,则由车辆用户进行另一次建立连接的尝试。如果仪表集群101与用户设备104之间的蓝牙连接建立,则在步骤803,在用户设备104中的语音助手应用105的接口中的软按被按并调用语音助手111。在步骤804,语音助手111提示用户说话,并在音频系统103b的扬声器304中播放开始收听音。在步骤805,语音助手111在音频系统103b的麦克风306中接收来自用户的音频输入。语音助手111执行音频输入的解析和语音到文本的转换,并将指令传输到集群控制器101a。在步骤806,集群控制器101a执行如图5的详细描述中所述的车辆级动作,并将车辆信息传送给语音助手111。语音助手111使用文本到语音引擎106执行文本到语音转换,并且在步骤807,通过蓝牙将车辆信息作为音频响应传输到音频系统103b的扬声器304。
图9示例性地图示了当语音助手应用105与语音云平台108之间由于无线网络连接丢失而未建立连接时,从车辆接口调用语音助手111的流程图。车辆接口可以是靠近车把上的指示器开关的控制旋钮201、或仪表集群101上的硬按按钮、或仪表集群接口中的一者。如示例性所示,在步骤901,车辆点火开启,在步骤902,建立车辆的仪表集群101与用户设备104之间的蓝牙连接。如果建立蓝牙连接不成功,则由车辆用户进行另一次建立连接的尝试。如果在仪表集群101和用户设备104之间建立了蓝牙连接,则在步骤903,建立用户设备104和头部装备103或音频系统103b之间的蓝牙连接。如果成功,在步骤904,语音助手111通过蓝牙头部装备103或蓝牙音频系统103b被启用。如果在步骤903不成功,则在步骤905,通过用户设备104的音频I/O启用语音助手111。在步骤906,语音助手应用105确定无线网络连接(例如,互联网连接)是否可用。如果互联网连接不可用,则在步骤907启用用户设备104上的语音助手111。在步骤908,靠近指示器开关的控制旋钮201,或仪表集群101上的硬按按钮,或集群接口被致动并且用户设备104上的语音助手111被调用。在步骤909,语音助手111提示用户说话,并在音频系统103b的扬声器304中播放开始收听音。在步骤910,语音助手111在音频系统103b的麦克风306中接收来自用户的音频输入。语音助手111对在用户设备104上输入的音频执行解析和语音到文本的转换,并将指令传输到集群控制器101a。在步骤911,集群控制器101a执行如图5的详细描述中所述的车辆级动作,并将车辆信息传送给语音助手111。语音助手111使用用户设备104本身上的文本到语音引擎106执行文本到语音转换,本地存储车辆信息,并在步骤912将车辆信息作为音频响应通过蓝牙传输到音频系统103b的扬声器304。如果在步骤910没有接收到来自用户的音频输入,必须再次调用语音助手111。
上面讨论的交互式保护系统的实施例在骑手辅助领域提供了技术进步,如下所示:配置具有附加功能(如GPS、GSM、Wi-Fi/蓝牙等,连同它们各自的天线、加速度计和陀螺仪等)的车辆仪表集群的概念,是与用户设备通信的简单、最省电和最紧凑的解决方案。为仪表集群供电所需的电源为所有这些模块供电。在头部装备中,只安装了一个通信模块,因此头部装备的制造并不复杂,并且需要更小的低容量电池。有效的导航相关指南可以转达到音频系统或头部装备,而不会分散用户的注意力。可以避免头部装备中的模块内信号干扰,因为现在所有需要天线的模块都放置在仪表集群内,并且天线放置得足够分开,因此信号不会产生不良干扰。由于GPS、GSM、Wi-Fi/蓝牙(任何无线通信介质)等所有模块及其各自的天线、加速度计和陀螺仪、振动检测器等都有意合并在车辆的仪表集群内,由于仪表集群已经是一个密封模块,因此需要提供额外的防水和防尘密封。由于头部装备/音频系统需要Wi-Fi/蓝牙(任何无线通信介质)并且其他模块(例如GPS、GSM)是车辆仪表集群的一部分,因为头部装备无需单独的微处理器组/微控制器组,并且无需为头部装备/音频系统提供高容量电池,头部装备紧凑且具有成本效益。此外,由于在头部装备中避免了用于GPS/GSM模块的天线,因此可以防止辐射引起的紊乱。
此外,控制扬声器的音频电平、呼叫接受/拒绝按钮被避免地/可选地放在头部装备的外部主体上,因为控制旋钮安装在车把上,靠近指示灯开关,作为骑手使用起来更方便,不需要他/她离开车把来控制音频系统。头部装备中的呼吸分析器和睡眠传感器会警告用户,让他在到达目的地之前保持清醒,以确保旅途安全。使用语音助手查询团体乘车状态的选项允许跟踪一起旅行的伙伴的位置和健康状况(welfare)。
使用音频系统/头部装备,用户在旅途中可以控制车辆设置,如仪表集群的亮度控制、车前灯控制、关于呼叫信息、SMS通知等的查询、导航辅助、交通提醒、POI、更改车辆接口的设置而无需物理停止车辆或将他/她的手从车把上移开。语音助手根据用户的音频输入有效地执行所有这些功能。语音助手每天从音频输入和响应中学习,并根据音频输入中识别的上下文和意图进行对话。在一个实施例中,车辆传感器数据从车辆生成并且可以通过蓝牙转达到用户设备。部分体现在语音云平台上的语音助手避免了在用户设备中本地存储语音到文本、文本到语音数据、由语音助手使用的预定义查询和相应的响应。由于语音助手的智能驻留在云平台中,语音助手可以很容易地按比例放大和更新,增加额外的查询和对查询的响应。调用语音助手的方法很简单,调用指令可以在旅行开始前显示在仪表集群接口上。
在一个实施例中,调用语音助手的方法因车辆的高速和低速而异。在高速下,将使用唤醒词或车把上的控制旋钮免提调用语音助手。在车辆的低速和静止状态下,使用集群接口调用语音助手。语音处理和查询响应集驻留在语音云平台上,从而消除了车载系统(例如仪表集群或用户设备)的内存限制。语音助手可以通过了解查询的上下文与骑手在作为架构的一部分的多个域进行对话。可以远程添加和部署额外的查询响应,而无需在移动应用程序或车辆级别更改硬件或软件。
在不脱离本发明的范围的情况下,可以将改进和修改并入本文。
附图标记说明
101 仪表集群
101a 集群控制器
101b 车辆无线收发器
102 无线网络
103 保护装备/头部装备
103a 音频无线收发器
103b 音频系统
104 用户设备
105 语音助手应用
106 文本到语音引擎
107 车辆接口系统
108 云平台
109 语音到文本引擎
110 域识别和意图匹配引擎
111 语音助手
201 控制旋钮
202 无线通信模块
203加速度计和/或陀螺仪
204 振动检测器
205 电源
206 GSM模块
207 GPS模块
208 闪存
209 GSM天线
210 GPS天线
211 云数据库
301 呼吸分析器
302 睡眠传感器
303 控制器
304 扬声器
305 电池
306 麦克风
401 外壳体
402 内壳体
402a 内壳体的内表面
403 护罩
404 保护装备的前部分
405 天线。

Claims (43)

1.一种车辆的交互式保护系统(100),包括:
仪表集群(101),所述仪表集群(101)包括:
集群控制器(101a),用于基于车辆传感器数据生成车辆信息;和
至少一个车辆无线收发器(101b),用于将生成的所述车辆信息传送给语音助手(111)
音频系统(103b),所述音频系统(103b)靠近用户的头部布置,用于生成用户信息;和
音频无线收发器(103a),所述音频无线收发器(103a)用于接收来自所述语音助手(111)的所述车辆信息,并通过所述语音助手(111)将所述用户信息传输至所述仪表集群(101),用于后续生成所述车辆信息。
2.如权利要求1所述的交互式保护系统(100),
其中所述语音助手(111)部分地体现在用户设备(104)中;
其中所述语音助手(111)是所述用户设备(104)上的语音助手应用(105)和语音云平台(108)的组合。
3.如权利要求1所述的交互保护系统(100),其中,所述语音助手(111)包括用于将所述用户信息转换为用于所述集群控制器(101a)的兼容信号格式的语音到文本引擎(109)、域识别和意图匹配引擎(110)以及用于将所述车辆信息转换为音频形式的文本到语音引擎(106)。
4.如权利要求1所述的交互式保护系统(100),其中靠近所述用户的头部布置的所述音频系统(103b)是所述用户直接佩戴在头部上方和靠近所述车辆的用户佩戴的保护装备(103)的内部表面(402a)布置中的一者。
5.如权利要求4所述的交互式保护系统(100),其中,所述保护装备(103)还包括一个或多个第二传感器(301、302),用于生成第二传感器数据。
6.如权利要求5所述的交互式保护系统(100),其中,所述一个或多个第二传感器(301、302)是睡眠传感器(302)和呼吸分析器(301)中的一个或多个。
7.如权利要求5所述的交互式保护系统(100),其中,所述用户信息包括来自所述音频系统(103b)的音频输入和来自一个或多个所述第二传感器(301、302)的所述第二传感器数据中的至少一者。
8.如权利要求4所述的交互式保护系统(100),其中,所述保护装备(103)还包括电源以向所述音频系统(103b)和所述音频无线收发器(103a)供电。
9.如权利要求4所述的交互式保护系统(100),其中,用于控制所述音频系统(103b)的操作的控制旋钮(201)布置在所述保护装备(103)的表面和所述车辆中靠近所述仪表集群(101)的区域中的至少一者上。
10.如权利要求1所述的交互式保护系统(100),其中,所述语音助手(111)接收来自所述音频系统(103b)的音频输入并且基于对所述用户信息和由所述集群控制器(101a)实时获取的所述车辆传感器数据的处理而将所述车辆信息传送到所述音频系统(103b)。
11.如权利要求1所述的交互式保护系统(100),其中,使用所述仪表集群(101)的接口、语音命令和所述音频系统(103b)的控制旋钮(201)中的一个或多个来调用所述语音助手(111)。
12.如权利要求1所述的交互式保护系统(100),其中,所述语音助手(111)基于来自所述音频系统(103b)的所述用户信息来控制多个车辆元件的致动器。
13.如权利要求1所述的交互式保护系统(100),其中,所述音频系统(103b)包括用于接收来自所述用户的音频输入的麦克风(306)和向所述用户传输所述车辆信息的至少一个扬声器(304)。
14.如权利要求1所述的交互式保护系统(100),其中,所述车辆传感器数据由安装在所述车辆的车身或所述仪表集群(101)之一上的一个或多个速度传感器、一个或多个加速度计、一个或多个水平传感器、一个或多个振动检测器、一个或多个陀螺仪、一个或多个温度传感器、一个或多个位置传感器和一个或多个压力传感器中的至少一者来生成。
15.如权利要求1所述的交互式保护系统(100),其中,所述车辆传感器数据包括指示器状态、车辆速度、车辆能量水平、车辆位置、车辆振动、车辆加速度、车辆倾斜度、环境条件温度的数据、车轮气压和档位中的一者或多者。
16.如权利要求1所述的交互式保护系统(100),其中,所述车辆信息包括车辆能量水平提醒、车辆速度提醒、指示器状态提醒、车辆倾斜提醒,车辆位置提醒、导航指南、呼叫提醒、环境天气、旅行信息、新闻报道、用户设备(104)掉落提醒、服务历史、团体乘车状态和紧急服务援助中的一者或多者。
17.如权利要求1所述的交互式保护系统(100),其中,所述保护装备(103)为用户背部上的有领外套、颈部支撑件、头部装备中的一者。
18.一种车辆的交互式保护系统(100),包括:
仪表集群(101),所述仪表集群(101)包括:
集群控制器(101a),用于基于车辆传感器数据生成车辆信息;和
至少一个车辆无线收发器(101b),用于将生成的所述车辆信息传送到用户的保护装备(103);以及
车辆用户佩戴的保护装备(103),所述保护装备(103)包括:
音频系统(103b),靠近所述保护装备(103)的内表面(402a)布置,用于生成用户信息;和
音频无线收发器(103a),用于通过至少一个所述车辆无线收发器(101b)从所述仪表集群(101)接收所述车辆信息,并将所述用户信息传输至所述仪表集群(101),用于后续生成所述车辆信息。
19.如权利要求18所述的交互式保护系统(100),其中,所述保护装备(103)还包括一个或多个第二传感器(301、302),用于生成第二传感器数据。
20.如权利要求19所述的交互式保护系统(100),其中,所述一个或多个第二传感器(301、302)是睡眠传感器(302)和呼吸分析器(301)中的一者或多者。
21.如权利要求19所述的交互式保护系统(100),其中,所述用户信息包括来自所述音频系统(103b)的音频输入和来自所述一个或多个第二传感器(301、302)的所述第二传感器数据。
22.如权利要求18所述的交互式保护系统(100),其中,所述保护装备(103)还包括电源以向所述音频系统(103b)和所述音频无线收发器(103a)供电。
23.如权利要求18所述的交互式保护系统(100),其中,所述音频系统(103b)包括用于接收来自所述用户的音频输入的麦克风(306)和向所述用户传输所述车辆信息的至少一个扬声器(304)。
24.如权利要求18所述的交互式保护系统(100),其中,所述车辆传感器数据包括车辆速度、车辆能量水平、车辆位置、车辆振动、车辆加速度、车辆倾斜度、环境条件温度的数据、车轮气压和档位中的一者或多者。
25.如权利要求18所述的交互式保护系统(100),其中,所述车辆信息包括车辆能量水平提醒、车辆速度提醒、车辆位置提醒、导航指南和呼叫提醒中的一者或多者。
26.如权利要求18所述的交互式保护系统(100),还包括用户设备(104),所述用户设备(104)通过所述仪表集群(101)与所述音频系统(103b)连接,用于接收呼叫、接收消息和存储媒体。
27.如权利要求18所述的交互式保护系统(100),其中,用于控制所述音频系统(103b)的操作的控制旋钮(201)布置在所述保护装备(103)的表面和所述车辆中靠近所述仪表集群(101)的区域中的至少一者上。
28.如权利要求18所述的交互式保护系统(100),其中,所述车辆传感器数据由安装在所述车辆的车身或所述仪表集群(101)之一上的一个或多个速度传感器、一个或多个加速度计、一个或多个水平传感器、一个或多个振动检测器、一个或多个陀螺仪、一个或多个温度传感器、一个或多个位置传感器和一个或多个压力传感器中的至少一者来生成。
29.如权利要求18所述的交互式保护系统(100),其中,所述集群控制器(101a)从所述保护装备(103)无线接收所述用户信息,并基于对所述用户信息以及实时的所述车辆传感器数据的处理来将所述车辆信息传送到所述音频系统(103b)。
30.如权利要求18所述的交互式保护系统(100),其中,所述保护装备(103)还包括平视显示单元,用于以增强现实显示所述车辆信息。
31.如权利要求18所述的交互式保护系统(100),其中,所述保护装备(103)为用户背部上的有领外套、颈部支撑件和头部装备中的一者。
32.一种车辆用户佩戴的保护装备(103),包括:
音频系统(103b),靠近所述保护装备(103)的内表面(402a)布置,用于生成用户信息;以及
音频无线收发器(103a),用于从车辆的仪表集群(101)接收车辆信息,并将所述用户信息传输到所述仪表集群(101),用于后续生成所述车辆信息。
33.如权利要求32所述的保护装备(103),还包括用于生成第二传感器数据的一个或多个第二传感器(301、302)和用于向所述音频系统(103b)提供电力的电源。
34.如权利要求32所述的保护装备(103),其中,所述一个或多个第二传感器(301、302)是睡眠传感器(302)和呼吸分析器(301)中的一者或多者。
35.如权利要求30所述的保护装备(103),其中,所述车辆信息包括基于车辆传感器数据的车辆能量提醒、车辆速度提醒、车辆位置提醒、导航指南和呼叫提醒中的一者或多者。
36.如权利要求35所述的保护装备(103),其中,所述车辆传感器数据包括车辆速度、车辆能量水平、车辆位置、车辆振动、车辆加速度、车辆倾斜度、环境条件温度的数据、车轮气压和档位中的一者或多者。
37.如权利要求35所述的保护装备(103),其中,所述车辆传感器数据由安装在所述车辆的车身或所述仪表集群(101)之一上的一个或多个速度传感器、一个或多个加速度计、一个或多个水平传感器、一个或多个振动检测器、一个或多个陀螺仪、一个或多个温度传感器、一个或多个位置传感器和一个或多个压力传感器中的至少一者来生成。
38.如权利要求32所述的保护装备(103),其中,所述保护装备(103)为用户背部上的有领外套、颈部支撑件、头部装备中的一种。
39.一种车辆与车辆用户之间无线通信的方法(500),所述方法由交互式保护系统(100)执行,所述交互式保护系统(100)包括:
仪表集群(101),所述仪表集群(101)包括:
集群控制器(101a),用于基于车辆传感器数据生成车辆信息;和
至少一个车辆无线收发器(101b),用于将生成的所述车辆信息传送到部分体现在用户设备(104)中的语音助手(111);
靠近用户的头部布置的音频系统(103b),用于生成用户信息;以及
音频无线收发器(103a),用于接收来自所述语音助手(111)的所述车辆信息,并通过所述语音助手(111)将所述用户信息传送到所述仪表集群(101),用于后续生成所述车辆信息,
所述方法(500)包括以下步骤:
(在步骤501)使用所述仪表集群(101)的接口、来自所述音频系统(103b)的语音命令和所述音频系统(103b)的控制旋钮(201)中一者来调用所述语音助手(111);
(在步骤502)通过所述语音助手(111)从所述音频系统(103b)接收所述用户信息;
(在步骤503)通过所述语音助手(111)将所述用户信息转换为所述集群控制器(101a)的兼容格式;
(在步骤504)基于来自所述音频系统(103b)的转换后的所述用户信息,由所述集群控制器(101a)控制多个车辆元件中的致动器;
(在步骤505)基于转换后的所述用户信息,由所述集群控制器(101a)根据车辆传感器数据生成车辆信息;以及
(在步骤506)通过所述语音助手(111)将车辆信息传输到所述音频系统(103b)。
40.如权利要求39所述的方法(500),其中,靠近所述用户的头部布置的所述音频系统(103b)是所述用户直接佩戴在头部上方和靠近所述车辆用户佩戴的保护装备(103)的内表面(402a)布置中的一者。
41.如权利要求39所述的方法(500),其中,用于控制所述音频系统(103b)的操作的控制旋钮(201)布置在所述保护装备(103)的表面和所述车辆中靠近所述仪表集群(101)的区域中的至少一者上。
42.如权利要求39所述的方法(500),其中,所述语音助手(111)是所述用户设备(104)上的语音助手应用(105)和语音云平台(108)的组合。
43.如权利要求39所述的方法(500),其中,所述保护装备(103)为用户背部上的有领外套、颈部支撑件和头部装备中的一者。
CN202080102047.2A 2020-06-24 2020-10-02 交互式保护系统 Pending CN115915991A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
IN202041026642 2020-06-24
IN202041026642 2020-06-24
PCT/IN2020/050849 WO2021260714A1 (en) 2020-06-24 2020-10-02 Interactive protection system

Publications (1)

Publication Number Publication Date
CN115915991A true CN115915991A (zh) 2023-04-04

Family

ID=73131791

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080102047.2A Pending CN115915991A (zh) 2020-06-24 2020-10-02 交互式保护系统

Country Status (6)

Country Link
US (1) US20230263258A1 (zh)
EP (1) EP4171308A1 (zh)
CN (1) CN115915991A (zh)
BR (1) BR112022026440A2 (zh)
MX (1) MX2022015314A (zh)
WO (1) WO2021260714A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20240029724A1 (en) * 2022-07-19 2024-01-25 Jaguar Land Rover Limited Apparatus and methods for use with a voice assistant
CN115285268B (zh) * 2022-09-01 2024-05-28 重庆三三电器股份有限公司 基于Carlife的智能语音仪表的控制和交互方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6978162B2 (en) * 2001-08-17 2005-12-20 Hewlett-Packard Development Company, L.P. Integrated portable entertainment, information and communication system linked to a wireless helmet
WO2017168465A1 (ja) * 2016-03-30 2017-10-05 川崎重工業株式会社 鞍乗型車両用処理装置
WO2017168467A1 (ja) * 2016-03-30 2017-10-05 川崎重工業株式会社 鞍乗型車両の情報出力装置
CN206822084U (zh) * 2017-04-11 2018-01-02 重庆银钢科技(集团)有限公司 一种头盔

Also Published As

Publication number Publication date
MX2022015314A (es) 2023-01-11
US20230263258A1 (en) 2023-08-24
BR112022026440A2 (pt) 2023-01-31
EP4171308A1 (en) 2023-05-03
WO2021260714A1 (en) 2021-12-30

Similar Documents

Publication Publication Date Title
EP1706815B1 (en) Methods for interaction between a vehicle driver and a plurality of applications
US20180034951A1 (en) Earpiece with vehicle forced settings
KR101711835B1 (ko) 차량, 차량의 동작 방법 및 웨어러블 디바이스의 동작 방법
EP3422946A1 (en) Vehicle with interactions with wearable device to provide health or physical monitoring
EP2197729B1 (en) System and method for providing information in a vehicle
US10464515B2 (en) Method for motorcycle accident detection and notification
EP3416558A1 (en) Vehicle with display system for interacting with wearable device
CN115915991A (zh) 交互式保护系统
JP4659754B2 (ja) 車両運転者および複数のアプリケーション間の対話方法およびシステム
WO2021216412A1 (en) Systems and methods for communicating information
JP2007511414A6 (ja) 車両運転者および複数のアプリケーション間の対話方法およびシステム
KR101828400B1 (ko) 휴대용 v2x 단말기 및 그 동작방법
WO2024046091A1 (zh) 一种驾驶员提醒方法、装置、系统和移动载体
KR20210151089A (ko) 차량 시스템의 음성 제어
US20230041105A1 (en) Method and system for imparting voice commands to a motor vehicle
KR101859043B1 (ko) 이동단말기, 차량과 이동 단말기의 연동 시스템
KR101854338B1 (ko) 차량용 멀티미디어 장치
KR101748258B1 (ko) 차량용 가이드 정보 제공 장치 및 방법
JPH10329627A (ja) 車両搭載コンピュータ装置
EP4339025A1 (en) Manner knock horn device for vehicle
CN216623456U (zh) 可穿戴设备以及驾驶预警系统
JP2018001864A (ja) 車両用情報提供装置
CN117351641A (zh) 一种乘车服务卡片推荐方法及相关装置
JP2023058814A (ja) 情報管理システムのための処理ユニット及び処理方法、情報管理システム
CN115071722A (zh) 车辆控制方法及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination