CN110462341A - 用于交通工具导航辅助的移动应用接口装置 - Google Patents

用于交通工具导航辅助的移动应用接口装置 Download PDF

Info

Publication number
CN110462341A
CN110462341A CN201880021137.1A CN201880021137A CN110462341A CN 110462341 A CN110462341 A CN 110462341A CN 201880021137 A CN201880021137 A CN 201880021137A CN 110462341 A CN110462341 A CN 110462341A
Authority
CN
China
Prior art keywords
mobile application
controller
user
camera
interface arrangement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201880021137.1A
Other languages
English (en)
Other versions
CN110462341B (zh
Inventor
K·J·T·希尔
A·D·霍尔德
J·W·罗特根四世
J·R·科尔曼
S·A·贝拉米
M·C·贾米森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiaming Swiss Co Ltd
Original Assignee
Jiaming Swiss Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiaming Swiss Co Ltd filed Critical Jiaming Swiss Co Ltd
Publication of CN110462341A publication Critical patent/CN110462341A/zh
Application granted granted Critical
Publication of CN110462341B publication Critical patent/CN110462341B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3629Guidance using speech or audio output, e.g. text-to-speech
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80Arrangements for controlling instruments
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/265Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network constructional aspects of navigation devices, e.g. housings, mountings, displays
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3605Destination input or retrieval
    • G01C21/3608Destination input or retrieval using speech input, e.g. using speech recognition
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3605Destination input or retrieval
    • G01C21/362Destination input or retrieval received from an external device or application, e.g. PDA, mobile phone or calendar application
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3632Guidance using simplified or iconic instructions, e.g. using arrows
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3658Lane guidance
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3661Guidance output on an external device, e.g. car radio
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3688Systems comprising multiple parts or multiple output devices (not client-server), e.g. detachable faceplates, key fobs or multiple output screens
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63Querying
    • G06F16/638Presentation of query results
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0968Systems involving transmission of navigation instructions to the vehicle
    • G08G1/096805Systems involving transmission of navigation instructions to the vehicle where the transmitted instructions are used to compute a route
    • G08G1/096811Systems involving transmission of navigation instructions to the vehicle where the transmitted instructions are used to compute a route where the route is computed offboard
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/167Driving aids for lane monitoring, lane changing, e.g. blind spot detection
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/024Guidance services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30Services specially adapted for particular environments, situations or purposes
    • H04W4/40Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H04W4/48Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P] for in-vehicle communication
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/148Instrument input by voice
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/21Optical features of instruments using cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55Remote control arrangements
    • B60K2360/56Remote control arrangements using mobile devices
    • B60K2360/566Mobile devices displaying vehicle information
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55Remote control arrangements
    • B60K2360/56Remote control arrangements using mobile devices
    • B60K2360/573Mobile devices controlling vehicle functions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/02Details of telephonic subscriber devices including a Bluetooth interface

Landscapes

  • Engineering & Computer Science (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Transportation (AREA)
  • General Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Theoretical Computer Science (AREA)
  • Computational Linguistics (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Navigation (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种接口装置连接到在移动装置上运行的移动应用以提供交通工具导航辅助。所述接口装置包括麦克风、地点确定组件、显示器、多个指示灯、短距离通信收发器和控制器。控制器被配置为:经由麦克风从用户接收所讲的指令或查询;经由短距离通信收发器将与所讲的指令或查询相关联的数据发送到在移动装置上运行的移动应用;经由短距离通信收发器从在移动装置上运行的移动应用接收基于所讲的指令或查询的导航数据;基于经由地点确定组件接收的一个或多个信号来确定当前位置;并且基于导航数据和当前位置来经由显示器提供符号输出或文本输出中的至少一个。

Description

用于交通工具导航辅助的移动应用接口装置
背景技术
驾驶者依赖于各种技术来辅助交通工具导航和媒体控制。例如,许多交通工具配备有包括导航系统和/或媒体控制接口的资讯娱乐控制台。驾驶者可以另外地或可替代地依赖于他们的移动装置(例如,智能电话)来访问可以通过交通工具资讯娱乐和/或音频系统流传输的和/或直接经由移动装置显示器和/或扬声器呈现的导航或媒体应用。
当交通工具不包括资讯娱乐控制台时,或者当资讯娱乐控制台不能链接到驾驶者的移动装置时,使用驾驶者的移动装置用于导航或媒体应用可能是繁琐的并且可能是危险的。例如,移动装置可能在导航的同时接到呼叫,从而中断路线引导和/或对驾驶者造成分心。此外,有时,驾驶者的移动装置可能位于交通工具内的难以看到的区域中(例如,杯托内)。这些是当驾驶者在驾驶的同时使用他/她的移动装置用于导航或移动应用时可能遇到的困难的例子。
发明内容
公开了一种用于与在移动装置上运行的移动应用接口以提供交通工具导航辅助的装置。在实施例中,所述装置包括麦克风、地点确定组件、显示器、多个指示灯、短距离通信收发器和控制器。短距离通信收发器被配置为将通信信息发送到移动装置并且从移动装置接收通信信息。控制器与麦克风、地点确定组件、显示器、多个指示灯和短距离通信收发器通信地耦合。控制器被配置为经由麦克风从用户接收所讲的指令或查询,并且被配置为经由短距离通信收发器将与所讲的指令或查询相关联的数据发送到在移动装置上运行的移动应用。控制器被进一步配置为经由短距离通信收发器从在移动装置上运行的移动应用接收基于所讲的指令或查询的导航数据,并且被配置为基于经由地点确定组件接收的一个或多个信号来确定当前位置。控制器被配置为基于导航数据和当前位置来经由显示器提供符号输出或文本输出中的至少一个。控制器还可以被配置为基于导航数据、当前位置、和/或从用户经由麦克风接收的所讲的指令或查询来使所述多个指示灯显示照明图案。
还公开了一种提供交通工具导航辅助的方法。在实现中,所述方法包括:在移动装置上运行用于交通工具导航辅助的移动应用;将移动应用接口装置与移动装置配对,所述移动应用接口装置具有麦克风、地点确定组件、显示器、多个指示灯和短距离通信收发器,所述短距离通信收发器可操作为将通信信息发送到移动装置并且从移动装置接收通信信息;经由移动应用接口装置的麦克风从用户接收所讲的指令或查询;经由移动应用接口装置的短距离通信收发器将与所讲的指令或查询相关联的数据发送到在移动装置上运行的移动应用;经由移动应用接口装置的短距离通信收发器从在移动装置上运行的移动应用接收基于所讲的指令或查询的导航数据;基于经由移动应用接口装置的地点确定组件接收的一个或多个信号来确定当前位置;以及基于导航数据和当前位置来经由移动应用接口装置的显示器提供符号输出或文本输出中的至少一个,其中,符号输出和文本输出中的所述至少一个与用于使用户跟随的下一次调转或到目的地的距离中的至少一个相关联。在一些实现中,所述方法进一步包括基于导航数据、当前位置、和/或经由麦克风从用户接收的所讲的指令或查询来使所述多个指示灯显示照明图案。
提供本发明内容仅仅是作为对于在具体实施方式和附图中充分描述的主题的介绍。发明内容不应被认为是描述必要特征,也不应被用于确定权利要求的范围。而且,要理解,前面的发明内容和以下的具体实施方式仅仅是例子和说明性的,不一定限制要求保护的主题。
附图说明
参照附图描述详细描述。描述和附图中的不同实例中的相同编号的使用可以指示类似的或相同的项。以下详细描述和附图中公开了本公开的各种实施例或例子(“示例”)。附图不一定是按比例的。一般来说,所公开的处理的操作可以按任意次序执行,除非权利要求中另有提供。
图1A是根据本公开的示例实施例的用于交通工具导航辅助的移动应用接口装置的透视前视图。
图1B是根据本公开的示例实施例的用于交通工具导航辅助的移动应用接口装置的透视后视图。
图1C是例示说明根据本公开的示例实施例的移动应用接口装置(诸如图1A和1B的移动应用接口装置)的各种组件的框图。
图2A是例示说明可以采用根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)的系统的框图。
图2B是例示说明可以被配置为与根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)通信的移动装置的框图。
图2C是例示说明可以被配置为与根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)和/或移动装置(诸如图2B的移动装置)通信的交通工具音频系统的框图。
图3示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图4示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图5A示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图5B示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图5C示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图5D示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图5E示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图5F示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图5G示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图5H示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图6示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图7示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图8A示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图8B示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图9A示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图9B示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图9C示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图9D示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图9E示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图10示出用于根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)的音频输出/警告优先级。
图11是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图12A示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图12B示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图13示出用于根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)的音频输出/警告优先级。
图14是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图15A是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图15B是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图15C是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图15D是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图16A是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图16B是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图17A示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图17B示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图18A是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图18B是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图19是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图20A是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图20B是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图21A是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图21B是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图22是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图23是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图24是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图25A是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图25B是示出在利用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的同时用户靠近目的地的地图示图。
图25C是在利用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的同时用户靠近目的地的地图示图。
图26A是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图26B是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图27A是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图27B示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图28A是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图28B示出来自移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例输出。
图29是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图30A是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图30B是示出采用移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例处理的流程图。
图31A示出用于移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例显示输出符号。
图31B示出用于移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例显示输出符号。
图31C示出用于移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例显示输出符号。
图31D示出用于移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例显示输出符号。
图31E示出用于移动应用接口装置(诸如图1A至1C的移动应用接口装置)的示例显示输出符号。
图32是例示说明采用根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)的系统的框图。
图33是例示说明采用根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)的系统的框图。
图34是例示说明用于根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)的系统配置的框图。
图35是例示说明用于根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)的系统配置的框图。
图36是例示说明用于根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)的文本转语音(TTS)引导系统配置的框图。
图37是例示说明用于根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)的系统配置的框图,其中,所述移动应用接口装置促进与网络提供的导航服务的通信。
图38是例示说明用于根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)的系统配置的框图,其中,所述移动应用接口装置促进与网络提供的语音服务的通信。
图39是例示说明用于根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)的系统配置的框图,其中,所述移动应用接口装置促进与网络提供的导航和语音服务的通信。
图40是例示说明用于根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)的系统配置的框图,其中,所述移动应用接口装置促进与网络提供的导航和语音服务的通信。
图41A是例示说明用于根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)的系统配置的框图,其中,所述移动应用接口装置促进与网络提供的导航和语音服务的通信。
图41B是例示说明用于根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)的系统配置的框图,其中,所述移动应用接口装置促进与网络提供的导航和语音服务的通信。
图42A是例示说明用于根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)和家庭应用接口装置的系统配置的框图,其中,所述移动应用接口装置和家庭应用接口装置这二者经由促进与导航和语音服务的通信的网络通信地耦合。
图42B是例示说明用于根据本公开的示例实施例的移动应用接口装置(诸如图1A至1C的移动应用接口装置)和家庭应用接口装置的系统配置的框图,其中,所述移动应用接口装置和家庭应用接口装置这二者经由促进与导航和语音服务的通信的网络通信地耦合。
具体实施方式
驾驶者可以依赖于他们的移动装置(例如,智能电话、平板、媒体播放器等)来访问可以通过交通工具资讯娱乐和/或音频系统流传输的或者直接经由移动装置显示器和/或扬声器呈现的导航或媒体应用。例如,驾驶者可以将移动装置连接到交通工具音频系统以利用移动辅助应用(例如,人工智能应用和/或语音服务),诸如GOOGLE ASSISTANT、SIRI、CORTANA、ALEXA等。然而,当交通工具不包括资讯娱乐控制台时,或者当资讯娱乐控制台不能链接到驾驶者的移动装置时,使用驾驶者的移动装置用于导航或媒体应用可能是繁琐的并且可能是危险的。例如,移动装置可能在导航的同时接到呼叫,从而中断路线引导和/或对驾驶者造成分心。此外,有时,驾驶者的移动装置可能位于交通工具内的难以看到的区域中(例如,杯托内)。这些是当驾驶者在驾驶的同时使用移动装置用于导航或移动应用时可能遇到的困难的例子。
本文中描述了将智能辅助系统(比如SIRI、GOOGLE VOICE、AMAZON VOICESERVICES(AVS或ALEXA)等)从家庭实现移到交通工具环境、从而为驾驶者在路上时提供智能数字助理的移动应用接口装置。移动应用接口装置(在本文中有时被称为“装置”)可以在不需要用户直接与他们的移动装置交互的情况下(例如,在不需要用户将移动电话从用户的口袋取出的情况下)提供许多用户期望的连接的功能。在实施例中,所述装置可以包括壳体、控制器、短距离通信收发器(例如,蓝牙或NFC收发器)、音频输出装置(例如,扬声器或音频输出接口)、显示器、地点确定组件(例如,GPS接收器等)和底座(例如,挡风玻璃或前围底座),短距离通信收发器用于与移动装置通信,并且可能与交通工具音频系统通信,底座用于将装置固定在交通工具内(例如,固定到交通工具的挡风玻璃、仪表板或可以被驾驶者容易地看到的任何其他地点)。在实施例中,所述装置可以被配置为使用地点确定组件来确定其地理位置。在其他实施例中,所述装置可以利用移动装置和/或用户的交通工具提供的定位信息。类似地,在各种实施例中,所述装置可能没有扬声器、按钮、显示器和其他系统元件,而是依赖于移动装置和/或交通工具音频系统提供的免费的元件。
所述装置可以被配置为提供各种功能,包括,但不限于,流传输娱乐(例如,音乐、播客、网络电台、旅行游戏、有声读物、新闻等)、导航和搜索功能(例如,GARMIN搜索功能(标准兴趣点(POI)、地址和/或分类搜索)、AMAZON搜索功能、YELP、音频和/或视觉导航指令(例如,逐个转弯、车道引导、自然引导、路况报导、高级驾驶者意识和安全(ADAS)警告/警报等)、行车记录仪能力/控制(例如,图片和视频记录、时间流逝记录等)、移动装置通知(例如,日历通知、提醒/闹钟、讯息、电子邮件等)、免提呼叫、数字助理(例如,提醒、清单、备注、日历更新、消息发送或检索)、智能家庭自动化或安全控制、辅助订购商品或服务、预订、基于地点的查询(例如,“我在哪里?”、天气、交通、对于当前地点/目的地的速度限制更新)等。
图1A至1C例示说明用于与在移动装置上运行的移动应用(例如,如图2A所示——在移动装置202上运行的移动应用218)交互的装置100的实施例。如图1C所示,装置100包括控制器124,控制器124通信地耦合到一个或多个输入装置138和一个或多个输出装置140。在实施例中,输入装置138可以包括,但不限于,麦克风110、相机122、机电输入装置108(例如,一个或多个按钮、开关或切换键)、和/或触摸敏感输入装置142(例如,触摸板、触控面板等)。在实施例中,输出装置140可以包括,但不限于,扬声器120、显示器104、一个或多个指示灯106和/或音频输出接口144(例如,线路输出音频端口或连接器)。装置100可以进一步包括短距离通信收发器132(例如,蓝牙收发器、近场通信(NFC)收发器、WiFi收发器等)。例如,如本文中进一步描述的,装置100可以被配置为将通信信息发送到移动装置(例如,移动装置202)并且从移动装置接收通信信息。在实施例中,装置100进一步包括地点确定组件134,诸如,但不限于,全球导航卫星系统(GNSS)接收器(例如,GPS接收器、GLONASS接收器、Galileo接收器、Beidou接收器、多协议接收器、软件定义的GNSS接收器或它们的组合等)。在一些实施例中,装置100可以进一步包括磁强计136,磁强计136用于感测装置100(或其中部署有装置100的交通工具)的方向、前进方向或方位。装置100还可以包括附加的传感器(例如,气压计、温度计、速度传感器、接近传感器、惯性传感器(例如,加速度计或陀螺仪)、它们的任何组合等)。
如图1A和1B所示,装置100具有壳体102,壳体102包含或以其他方式提供对于构成该装置的其他组件的支撑结构。在一些实施例中,壳体102是圆柱形的,例如,如图1A和1B所示。壳体可以被构造为矩形棱柱或任何其他形状;然而,圆柱形设计可以帮助减小被壳体阻挡或遮住的挡风玻璃面积,同时仍使得可以与所述装置进行视觉和音频交互。装置100和/或其壳体102的总尺寸可以由装置100的内部组件确定。在一些实施例中,壳体102尽可能地小,同时仍包含或提供对于装置100的所有的其他组件的支撑。在一些实施例中,壳体102被耦合到底座112以用于将装置100固定到交通工具的一部分(例如,挡风玻璃或仪表板)。底座112可以包括第一端部116,第一端部116被构造为将底座112枢转地耦合到壳体102(例如,成球窝构造、铰链式构造等)。底座112还可以包括第二端部114,第二端部114限定具有吸附、粘合或高摩擦表面118的基底,表面118被构造为将第二端部114固定到交通工具的一部分(例如,挡风玻璃或仪表板),在这种情况下,于是使得驾驶者能够在操作交通工具的同时舒适地查看装置100。
在实施例中,显示器104被设置在由壳体102限定的装置100的一端或一面(例如,面向前的表面)。显示器104可以是发光二极管(LED)显示器、有机发光二极管(OLED)显示器、液晶显示器(LCD)等。例如,在实施例中,显示器104是0.84”OLED单色显示器。装置100可以进一步包括邻近显示器104的多个指示灯106(例如,LED)。例如,指示灯106可以被设置在显示器104的至少一部分的周围。在实施例中,指示灯106形成完全地或部分地围绕显示器104的照亮环的多段(或环的一部分)。如本文中进一步描述的,指示灯106可以与显示器104结合用来或者代替显示器104用来提供视觉提示(例如,连接信息、速度警告、距离/接近度指示、交通警告、前向碰撞警报、车道偏离警报、方向指示、它们的组合等)。在实施例中,显示器104可以具有分离的外观,并且可以融入装置100的前面,直到经由显示器104提供信息。例如,显示器104及其周围特征可以显示出黑色,直到显示器104起作用。
在一些实施例中,指示灯106(例如,形成光环的LED段)被配置为呈现调转和方位信息。例如,指示灯可以围绕壳体的表面的周边(例如,围绕显示器104)形成光环,该光环可以用于向用户提供导航信息和指令。控制器124可以被配置为经由指示灯106呈现光图案以将用户指向导航路线中的第一条道路(如果他们在停车场中)以及将用户回指他们的路线(如果他们离开导航路线(例如,如果所述装置不能使用户的位置与起作用的路线匹配或者正在重新计算路线))。在一些实施例中,指示灯106形成光环,当用户靠近转弯调转时,该光环可以被动态地填充(例如,从环的底部朝向环的顶部,从左到右,或者反过来),以指示并且传送从当前地理地点到所述转弯调转的距离。在一些实施例中,控制器124还可以被配置为提供类似的动态的光图案(例如,逐渐填充光环的部分)以指示对于目的地的接近度(例如,当用户靠近目的地时,光环可以从环的底部朝向环的顶部、从左到右、或者反过来填充)。
在图1A中,装置100被示为包括被定位为从驾驶者接收所讲的指令或查询的至少一个麦克风110。例如,麦克风110被设置为邻近显示器104。如图1B所示,扬声器120可以被设置在装置100的与显示器104相对的一端或一面(例如,在装置100的面向后的表面)。在一些实施例中,扬声器120被配置为输出可听的音频信号;然而,装置100可以可替代地或另外地依赖于交通工具音频系统和/或移动装置200来实现音频输出能力。
在图1B中,装置100被进一步示为包括被设置为邻近扬声器120的相机122(例如,行车记录仪)。在一些实施例中,装置100可以包括在壳体102内的加速度计,该加速度计使得装置100能够确定相机122是否被定向为使得它直指前方。控制器124可以被配置为通知驾驶者(例如,经由显示器或音频输出)重新定向(重新瞄准)相机122,所以依赖于从相机122接收的数据(图像)的特征(诸如车道偏离警报和前向碰撞警报)可以适当地工作。在一些实施例中,装置100不包括相机122,而是扬声器120可以占据装置100的面向后的表面的全部。
在图1A和1B所示的实施例中,所述装置还包括一个或多个按钮108(例如,麦克风静音按钮和动作按钮)。前面是所述装置在一些实施例中可以包括的输入装置138和输出装置140的例子,但是装置100可以包括输入装置138和输出装置140的其他组合,诸如图1C所示的那些或它们的任何组合。
控制器124与装置100的一些或所有的组件通信地耦合。例如,控制器124可以与输入装置138、输出装置140、短距离通信收发器132、地点确定组件134和装置100的任何附加的传感器或其他组件通信地耦合。控制器124具有处理器126,处理器126与控制器124包括在一起或者包括在控制器124中以使用软件、固件、硬件(例如,固定的逻辑电路)或它们的组合来控制本文中所描述的装置100的组件和功能。如本文中所使用的术语“控制器”、“功能”、“服务”和“逻辑”一般表示与控制装置100结合的软件、固件、硬件、或者软件、固件或硬件的组合。如图1C所示,控制器124可以包括处理器126、存储器128和通信接口130。
处理器126至少为控制器124提供处理功能,并且可以包括任何数量的处理器、微控制器、电路、现场可编程门阵列(FPGA)或其他处理系统、以及用于存储数据、可执行代码和控制器124访问的或产生的其他信息的驻留存储器或外部存储器。处理器126可以执行包含在非暂时性计算机可读介质中的实现本文中所描述的技术的一个或多个软件程序。处理器126不受形成它的材料或本文中所用的处理机制的限制,就这一点而言,可以经由半导体和/或晶体管(例如,通过使用电子集成电路(IC)组件)等来实现。
存储器128可以是有形的计算机可读存储介质,该存储介质提供存储与控制器124的操作相关联的各种数据和/或程序代码(诸如软件程序和/或代码段、或者指示处理器126、可能还有装置100/控制器124的其他组件执行本文中所描述的功能的其他数据)的存储功能。存储器128可以存储数据,诸如用于操作装置100(包括其组件)的指令的程序等。应注意,虽然描述了单个存储器128,但是各种各样类型和组合的存储器(例如,有形的非暂时性存储器)可以被采用。存储器128可以与处理器126集成,可以包括独立的存储器,或者可以是这二者的组合。存储器128的一些例子可以包括可移动存储器组件和不可移动存储器组件,诸如随机存取存储器(RAM)、只读存储器(ROM)、闪存(例如,安全数字(SD)存储卡、迷你SD存储卡和/或微SD存储卡)、磁性存储器、光学存储器、通用串行总线(USB)存储器装置、硬盘存储器、外部存储器等。在实施例中,装置100和/或存储器128可以包括可移动集成电路卡(ICC)存储器,诸如用户身份模块(SIM)卡、通用用户身份模块(USIM)卡、通用集成电路卡(UICC)等提供的存储器。
通信接口130可以被操作地配置为与装置100的组件进行通信。例如,通信接口130可以被配置为发送用于存储在装置100中的数据、从装置100中的储存器检索数据、等等。通信接口130还可以与处理器126通信地耦合以促进装置100的组件和处理器126之间的数据传送(例如,以用于将从与控制器124通信地耦合的装置接收的输入传送给处理器126,所述输入包括,但不限于,从地点确定组件134、任何输入装置138和/或装置100的任何其他的组件接收的数据)。应注意,虽然通信接口130被描述为控制器124的组件,但是通信接口130的一个或多个组件可以被实现为装置100的组件或经由有线和/或无线连接与装置100通信地耦合的组件。例如,装置100和/或控制器124包括短距离通信收发器132(或者在一些实施例中,发射器和接收器),短距离通信收发器132用于将通信信息发送到移动装置和/或交通工具音频系统并且从移动装置和/或交通工具音频系统接收通信信息。
图2A例示说明采用装置100的用于交通工具导航辅助的系统200的实施例。系统200包括装置100和运行用于交通工具导航辅助的移动应用218的移动装置202,其中,装置100被配置为将数据发送到在移动装置202上运行的移动应用218并且从移动应用218接收数据。移动应用218被配置为促进装置100与用于语音服务处理(例如,AMAZON语音服务等)的第一服务器206和用于导航/地图构建服务(例如,GARMIN导航服务等)的第二服务器208之间的通信。例如,移动应用218可以经由移动装置202的蜂窝收发器222将移动数据通信信息发送到服务器206和208并且从服务器206和208接收移动数据通信信息。在实施例中,服务器206和208还可以被配置为彼此通信。在其他实施例中,移动应用218包括或连接到促进第一服务器206和第二服务器208之间的通信的移动装置202上的导航技能/客户端。例如,移动应用218可以被配置为基于经由装置100接收的所讲的指令/查询来将数据发送到用于语音服务处理的第一服务器206,继而,第一服务器206可以要么将指令(例如,导航命令数据)以第二服务器208可接受的格式传送给第二服务器208,要么第一服务器206可以将指令发送到移动应用218,移动应用218然后将该指令传送给第二服务器208。作为响应,第二服务器208可以将导航数据(例如,路线引导/信息、兴趣点信息等)发送到移动应用218和/或第一服务器206。
装置100和/或移动装置202还可以根据一种或多种配置与交通工具音频系统204通信地耦合。例如,在一种配置中,移动装置202被配置为将音频输出发送到交通工具音频系统204(例如,经由蓝牙连接(例如,A2DP连接)、NFC连接、Wi-Fi连接等)。在另一配置中,移动装置202被配置为将音频输出发送到装置100,装置100然后将音频输出发送到交通工具音频系统204(例如,经由装置100的音频输出接口144或短距离通信收发器132)。在另一配置中(例如,在具有免提呼叫、但是没有A2DP能力的交通工具中),移动装置202被配置为通过与交通工具音频系统204的蓝牙连接来对呼叫进行处理,并且被配置为将其他音频输出(例如,引导/信息)发送到装置100,装置100然后可以经由装置100的音频输出接口144(例如,通过交通工具音频系统204的辅助输入等)将音频输出发送到交通工具音频系统204。在其他配置中,音频可以通过装置100和/或移动装置202扬声器渲染。
图2B中示出了移动装置202的实施例。移动装置202可以是智能电话、媒体播放器、平板、智能手表等。在实施例中,移动装置202包括控制器210,控制器210通信地耦合到一个或多个输入装置226和一个或多个输出装置244。在实施例中,输入装置226可以包括,但不限于,机电输入装置228(例如,一个或多个按钮、键区、开关或切换键)、触摸敏感输入装置230(例如,触摸板、触控面板等)、麦克风240和/或相机242。在实施例中,输出装置244可以包括,但不限于,扬声器246、显示器248、一个或多个指示灯250和/或音频输出接口252(例如,线路输出音频端口或连接器)。移动装置202可以包括短距离通信收发器220(例如,蓝牙收发器、近场通信(NFC)收发器、WiFi收发器等)。例如,如本文中所描述的,移动装置202可以被配置为经由短距离通信收发器220与装置100和/或交通工具音频系统204进行通信。移动装置202还可以包括用于发送和接收移动数据并且处理呼叫的蜂窝收发器222(例如,2G、3G、4G和/或LTE收发器等)。例如,移动装置202可以被配置为经由蜂窝收发器222与用于语音和导航服务的服务器206和208进行通信。在实施例中,移动装置202进一步包括地点确定组件224,诸如,但不限于,全球导航卫星系统(GNSS)接收器(例如,GPS接收器、GLONASS接收器、Galileo接收器、Beidou接收器、多协议接收器、软件定义的GNSS接收器或它们的组合等)。例如,代替装置100或者除了装置100之外,移动装置202被用来确定当前地点(例如,交通工具位置)以用于路线引导和/或信息(例如,兴趣点搜索、地图构建、交通更新等)。
控制器210与移动装置202的一些或所有的组件通信地耦合。例如,控制器210可以与输入装置226、输出装置244、短距离通信收发器220、蜂窝收发器222和移动装置202的任何传感器或其他组件(例如,地点确定组件224)通信地耦合。控制器210具有处理器212,处理器212与控制器210包括在一起或者包括在控制器210中以使用软件、固件、硬件(例如,固定的逻辑电路)或它们的组合来控制本文中所描述的移动装置202的组件和功能。如本文中所使用的术语“控制器”、“功能”、“服务”和“逻辑”一般表示与控制移动装置202结合的软件、固件、硬件、或者软件、固件或硬件的组合。如图1C所示,控制器210可以包括处理器212、存储器214和通信接口216。
处理器212至少为控制器210提供处理功能,并且可以包括任何数量的处理器、微控制器、电路、现场可编程门阵列(FPGA)或其他处理系统、以及用于存储数据、可执行代码和控制器210访问的或产生的其他信息的驻留存储器或外部存储器。处理器212可以执行包含在非暂时性计算机可读介质(例如,存储器214)中的实现本文中所描述的技术的一个或多个软件程序(例如,移动应用218)。处理器212不受形成它的材料或本文中所用的处理机制的限制,就这一点而言,可以经由半导体和/或晶体管(例如,通过使用电子集成电路(IC)组件)等来实现。
存储器214可以是有形的计算机可读存储介质,该存储介质提供存储与控制器210的操作相关联的各种数据和/或程序代码(诸如软件程序(例如,移动应用218或“App”)和/或代码段、或者指示处理器212、可能还有移动装置202/控制器210的其他组件执行本文中所描述的功能的其他数据)的存储功能。存储器214可以存储数据,诸如用于操作移动装置202(包括其组件)的指令的程序等。应注意,虽然描述了单个存储器214,但是各种各样类型和组合的存储器(例如,有形的非暂时性存储器)可以被采用。存储器214可以与处理器212集成,可以包括独立的存储器,或者可以是这二者的组合。存储器214的一些例子可以包括可移动存储器组件和不可移动存储器组件,诸如随机存取存储器(RAM)、只读存储器(ROM)、闪存(例如,安全数字(SD)存储卡、迷你SD存储卡和/或微SD存储卡)、磁性存储器、光学存储器、通用串行总线(USB)存储器装置、硬盘存储器、外部存储器等。在实施例中,移动装置202和/或存储器214可以包括可移动集成电路卡(ICC)存储器,诸如用户身份模块(SIM)卡、通用用户身份模块(USIM)卡、通用集成电路卡(UICC)等提供的存储器。
通信接口216可以被操作地配置为与移动装置202的组件进行通信。例如,通信接口216可以被配置为发送用于存储在移动装置202中的数据、从移动装置202中的储存器检索数据、等等。通信接口216还可以与处理器212通信地耦合以促进移动装置202的组件和处理器212之间的数据传送(例如,以用于将从与控制器210通信地耦合的装置接收的输入传送给处理器212,所述输入包括,但不限于,从地点确定组件224、任何输入装置226和/或移动装置202的任何其他的组件接收的数据)。应注意,虽然通信接口216被描述为控制器210的组件,但是通信接口216的一个或多个组件可以被实现为移动装置202的组件或经由有线和/或无线连接与移动装置202通信地耦合的组件。例如,移动装置202和/或控制器210包括短距离通信收发器220(或者在一些实施例中,发射器和接收器),短距离通信收发器220用于将通信信息发送到装置100和/或交通工具音频系统204并且从装置100和/或交通工具音频系统204接收通信信息。移动装置202和/或控制器210还包括蜂窝收发器222,蜂窝收发器222用于打电话,并且用于将通信信息发送到语音服务和导航/地图构建服务器206和208并且从语音服务和导航/地图构建服务器206和208接收通信信息。
如图2C所示,交通工具音频系统204还可以包括控制器254,控制器254具有处理器256、存储器258和通信接口260。控制器254可以被配置为管理与装置100和/或移动装置202的连接以用于如本文中所描述的音频流传输和/或免提呼叫。例如,控制器254可以被配置为经由交通工具音频系统204的短距离通信收发器262(例如,蓝牙、NFC和/或WiFi收发器)从装置100和/或移动装置202接收音频输出,并且可以被进一步配置为经由扬声器系统266渲染音频输出。在一些实施例中,交通工具音频系统204被配置为经由音频输入接口264(例如,辅助输入、USB输入或其他音频连接器/接收器)从装置100和/或移动装置202接收音频输出。例如,交通工具音频系统204可以被配置为经由音频输入接口264、而不是经由短距离通信收发器262,从装置100和/或音频系统204接收音频以通过扬声器系统266进行流传输。在另一个例子中,交通工具音频系统204既具有有线能力,又具有无线能力,其中,交通工具音频系统204基于用户偏好被配置为有线连接(例如,经由音频输入接口264)和无线连接(例如,经由短距离通信收发器262)。如本文中前面所指出的,存在可以基于用户偏好和/或与装置100结合用来实现系统200的交通工具音频系统204和/或移动装置202的能力实现的各种配置。
装置100和/或系统200可以被配置各种布置的组件、编程等。在一些实施例中,通过从客户端禁用蓝牙服务递送平台(SDP)广告的服务来配置装置100和/或系统200。系统200可以包括装置100、移动应用218(例如,经由移动装置202)和交通工具音频系统204之间的蓝牙连接。在实施例中,根据移动应用218中的用户的配置设置,装置100可能不能向移动应用218通知它的所有能力,以使得移动应用218可以在装置100的控制器124和移动装置202的控制器210和/或交通工具音频系统254的控制器254之间共享处理责任。移动应用218可以被配置为使移动装置202输出指示装置100不广告这些服务的信号。
在一些实施例中,装置100被配置为在交集附近搜索兴趣点(POI)。例如,装置100可以被配置为在用户标识的交集附近搜索POI(例如,“在第151街和Blackbob路附近找到星巴克”)。装置100可以被配置为通过连续地监听唤醒词(例如,“Alexa”、“Siri”、“Cortana”、“OK Google”等)来接收语音输入(例如,所讲的指令和查询),有时没有任何其他的输入方法。例如,装置100可以被配置为提供通过语音控制的基于地点的服务和特征(例如,依赖于地点确定组件134(例如,GPS)确定的位置的服务)。装置100可以包括按钮108(例如,动作按钮和/或麦克风静音按钮等)或其他输入装置,但是这些其他的输入装置可能无需与地点确定功能进行交互。基于地点的服务和特征的所有控制和操作可以通过用户的语音输入来启用。在装置100限于接收语音输入的实施例中,控制器124或导航/地图构建服务208可以被配置为实现通过改善查询和选择处理来使搜索结果可用的技术。例如,用户可以要求装置100辅助导航到目的地,并且控制器124或导航/地图构建服务208可以被配置为一次一个地向用户提供搜索结果——使得用户可以接受结果,继续进行到下一个结果,移回到前一个结果,或者在不挑选结果的情况下停止搜索。
装置100的特征可以在于与智能语音服务(例如,经由与服务器206的通信)完全兼容。例如,装置100可以与AMAZON ALEXA平台或促进语音识别准确度以提供有用的数字助理和多媒体特征的任何其他的语音服务兼容。集成语音服务使得装置100的控制器124能够(经由移动装置202的连接)使用整套特征,诸如虚拟助理、音乐、播客、智能家庭集成和自定义技能。装置100通过添加搜索、导航、行车记录仪和驾驶者意识特征而构建于现有的语音服务平台之上。
装置100可以被配置为从用户接收所讲的指令或查询以通过经由语音服务服务器206使用自动语音识别(ASR)来搜索地点。在实施例中,装置100被配置为经由麦克风110从用户接收所讲的指令或查询,然后经由短距离通信收发器132将与所讲的指令或查询相关联的数据发送到在移动装置202上运行的移动应用218。移动应用218然后可以使移动装置202经由短距离通信收发器220将基于所讲的指令或查询输出的音频发送到交通工具音频系统204或装置100(例如,以用于经由音频输出装置(例如,扬声器120或音频输出接口144)输出)。在一些实施例中,移动应用218被配置为使移动装置202经由蜂窝收发器222将与所讲的指令或查询相关联的数据发送到服务器206以用于语音服务处理,并且被进一步配置为基于所讲的指令或查询从服务器206接收导航命令数据。移动应用218可以被进一步配置为经由蜂窝收发器将导航命令数据和与装置100的当前位置(例如,基于经由地点确定组件134或地点确定组件224接收的信号)相关联的数据发送到服务器208以用于导航服务处理。移动应用218可以被配置为响应于导航命令数据和与装置100的当前位置相关联的数据,从服务器208接收音频输出的信息(其可以经由装置100、交通工具音频系统204和/或移动装置202提供)和/或显示输出(例如,可以经由装置100的显示器104提供的信息)。在其他实施例中,移动应用218可以将与所讲的指令或查询相关联的数据和与装置100的当前位置相关的数据这二者发送到服务器206,服务器206可以基于所讲的指令或查询和装置100的当前位置来执行搜索,然后可以直接地或间接地将服务器208可接受的格式的导航命令数据发送到服务器208,服务器208然后返回用于装置100的导航数据(例如,以产生一个或多个音频输出和/或显示(例如,符号和/或文本)输出)。通过讲话,用户可能能够使用触摸界面、在导航装置上快速地执行否则将需要几个步骤的复杂搜索。例如,用户可以问“我在堪萨斯城哪里可以得到烧烤?”,而不必选择适当的菜单选项来选择用于POI搜索的感兴趣的区域(城市)和类别。
图3示出用户和装置100之间的示例对话300。例如,用户可以问“我在堪萨斯城哪里可以得到烧烤?”,装置100可以用基于装置100的当前地点的第一建议302来对用户查询做出响应。如所示,用户可以提供第二查询304以得到替代建议,装置100可以提供附加建议306(例如,作为挨着的最接近的选项的地方或者基于过去的行为、喜好等优先排列的地方)。当用户提供基于选择的目的地或装置100提供的建议的接受的指令308时,装置100可以开始路线导航。在一些实施例中,服务器206对语音输入(例如,用户的指令/查询)进行处理,服务器208提供路线引导信息和其他地点服务。在功能上可以有所重叠。例如,服务器206可以被配置为对语音输入进行处理、并且还执行搜索功能。此外,一些语音输入可以被直接传送给服务器208以用于导航/地图构建服务(例如,当用户讲出移动应用218知道的查询(例如,“我在哪里?”)时)。
在实现中,装置100允许用户基于名称或类别找到POI。例如,用户可以说“导航到星巴克”、“导航到Bobo Chinese”或“找到最近的加油站”。在实现中,装置100允许用户基于评级找到POI。例如,用户可能能够说“找到附近最好的烧烤店”,服务器206可以被配置为识别并且返回存储在存储器中的高评价的结果(例如,来自Foursquare或TripAdvisor的评级)。服务器206可以被进一步配置为选择并且实现使得用户能够通过规定以下搜索地点中的一个或多个来完成名称、类别或评级POI搜索的技术:城市附近的POI——用户可能能够说“导航到西雅图附近的星巴克”或“找到堪萨斯城附近的烧烤”;交集附近的POI——用户可能能够说“找到第95和Metcalf附近的墨西哥风味快餐店”或“找到第151街和Antioch附近的药房”;沿着路线的POI——用户可能能够说“在前面找到加油站”或“导航到前方的下一个星巴克”;地址——用户可能能够说“导航到第151街东1200号”或“加利福利亚,阿纳海姆,1313港Blvd”;城市搜索——用户可能能够说“导航到洛杉矶”;以及保存的地方——用户可能能够说“导航到家”,而且还可能能够将各种其他的预定义的地点(诸如“工作”和“学校”)存储在存储器中。
装置100可以改进真实的指引和直接访问特征以提供不需要显示装置或与这样的触摸屏进行任何交互的讲出的逐个转弯指令。例如,图4示出除了音频输出402之外、还包括显示(例如,符号和/或文本)输出404的示例装置输出400。控制器中的一个或多个(例如,控制器124和/或控制器210)可以确定显示输出404,显示输出404包括到达目的地的下一次调转的距离和图标。装置控制器124可以被配置为输出可听的语音指令402并且在显示器104上呈现确定的距离和图标404以帮助用户行进到目的地。
在实施例中,显示器104可以小。由于可以呈现在小的显示器上的信息有限,控制器124可以被配置为提供与下一次调转相关联的图标和文本,而不是提供整个引导信息。图5A至5H中例示说明了示例显示输出。例如,图5A例示说明预转弯准备;图5B例示说明简单转弯箭头;图5C和5D例示说明车道辅助引导;图5E例示说明路线引导的结束;图5F和5G例示说明具有街道名称的标识的车道辅助引导;图5H例示说明具有房号的路线引导的结束。
在路线开头,装置100可以被配置为呈现帮助阐明可能被采取的主要道路的信息,以帮助用户理解路线在哪条路上前进。例如,图6示出示例装置输出600,除了音频输出602之外,装置输出600还包括显示(例如,符号和/或文本)输出604。控制器中的一个或多个(例如,控制器124和/或控制器210)可以确定显示输出604,显示输出604包括到达目的地的下一次调转的距离和图标。装置控制器124可以被配置为当路线引导开始或即将开始时为用户输出可听的语音指令602,语音指令602包括关于路线(例如,主要道路)、目的地、估计的到达时间(ETA)的信息和/或其他路线信息。
当用户在停车场中或者在其他道路之外的或无标记的地点中开始到目的地的路线时,控制器124可以被配置为输出提供补充呈现在显示器104上的信息的详细指令的可听指令,以帮助用户开始所确定的路线。例如,图7示出示例装置输出700,除了音频输出702之外,装置输出700还包括显示(例如,符号和/或文本)输出704。控制器中的一个或多个(例如,控制器124和/或控制器210)可以确定显示输出704,显示输出704包括到路线引导开始的道路的距离。装置控制器124还可以被配置为输出指示用户朝路线引导开始的道路走的可听的语音指令702。显示输出704还可以包括指向道路的箭头来帮助用户。在一些实施例中,控制器124被配置为经由指示灯106呈现指向道路的照明图案706(例如,除了显示器104上的指针之外或者代替显示器104上的指针)。
在人口密集的城市(其在地理区域中具有许多道路)中,引导用户通过非常接近其他道路的道路上的路线可能是有挑战的。控制器124可以被配置为控制显示器104和指示灯106以例示说明何时转弯或留在当前道路上。例如,图8A和8B示出装置输出800的例子,除了音频输出802之外,装置输出800还包括显示(例如,符号和/或文本)输出804。控制器中的一个或多个(例如,控制器124和/或控制器210)可以确定包括到转弯的距离的显示输出804。装置控制器124还可以被配置为输出通过到转弯的距离和详细信息来指示用户转弯的可听的语音指令802(例如,“右边第二个转弯”)。当用户靠近转弯时,控制器124可以被配置为产生输出806,输出806提供用户应在哪个转弯拐弯的详细的和/或放大的视图。另外,控制器124可以被配置为经由指示灯来呈现动态照明图案(例如,通过用光或特定颜色填充环)以指示交通工具到转弯的接近度。这可以帮助确保用户不会太早或太晚拐弯(例如,拐到错误的街道上)。
常见的是使用户在驾驶到目的地时(例如,在围绕路线终点附近的停车场行进时)偏离路线。在这些情形下,控制器124可以被配置为显示到目的地的距离并且经由指示灯106提供照明图案以引导用户到目的地。例如,图9A示出朝向路线终点的装置输出的示例。在实施例中,控制器124被配置为在当前位置离目的地小于阈值距离或者当前位置对应于无标记的地点时发起到达模式。如图9A所示,当处于到达模式时,控制器124可以控制指示灯106呈现照明图案900,照明图案900充当帮助将用户指向目的地的方位指针。控制器124还可以被配置为使显示器104显示到目的地的距离和/或将用户指向目的地的箭头。在一些实施例中,控制器124被配置为使显示器104呈现将用户指向目的地的箭头,而不是经由指示灯106呈现照明图案。
在一些实施例中,装置100包括相机122,当装置100被相应地定向时,相机122可以面向交通工具的前面。控制器124可以被配置为利用来自相机122的数据(例如,图像和/或视频片段)来提供若干个特征。例如,装置100可以被配置为连续地、周期性地或按需地记录交通工具前面的区域的视频片段或图像。在实施例中,控制器124被配置为将图像或视频片段保存在存储器(例如,装置100的存储器128、移动装置202的存储器214)中或者保存在远程服务器(例如,服务器206、208或数据存储服务器)中。在一些实施例中,控制器124被配置为当事故被检测到(例如,碰撞、突然停止等)时或者在从用户接收到指示装置100保存图像或视频片段的语音之后将图像或视频片段保存到存储器。在一些实施例中,装置100被进一步配置为保存“时间流逝”条目,所述“时间流逝”条目包括存储的片段、地点和/或时间信息。装置100可以被配置为将时间流逝条目存储到服务器以使得能够与朋友或者在社交媒体上分享用户的行程。
装置100可以控制显示器104、指示灯106和/或扬声器120(或音频输出接口144)以向用户通知用户离用户的交通工具前面的汽车太近、用户驾驶离另一个车道太近、用户未与交通一起移动、等等。
图9B例示说明示例实施例,在该实施例中,控制器124被配置为基于相机122在装置100运动的同时记录的图像和/或视频来检测距离相机122的视场中的物体何时存在小于阈值接近度(例如,小于阈值距离),并且控制器124被进一步配置为响应于检测到距离相机122的视场中的物体小于阈值接近度,使多个指示灯106显示前向碰撞警报照明图案902(例如,使光环或光环的一部分(例如,前面的部分)点亮或闪光)。控制器124还可以被配置为提供前向碰撞警报显示输出904和/或音频输出906以警告用户。图12A中示出了另一个例子,在该例子中,由指示灯106限定的光环的前面部分1200照亮,并且前向碰撞警报显示图标1202经由显示器104呈现。
图9C例示说明另一个示例实施例,在该实施例中,控制器124被配置为基于相机122在装置100运动的同时记录的图像和/或视频来检测何时距离相机122的视场中的车道之间的参考对齐至少存在阈值偏离,并且控制器124被进一步配置为响应于检测到距离相机122的视场中的车道之间的参考对齐至少存在阈值偏离,使多个指示灯106显示车道偏离警报照明图案908(例如,使光环的右侧或左侧点亮或闪光)。控制器124还可以被配置为提供车道偏离警报显示输出910和/或音频输出912以警告用户。图12B中示出了另一个例子,在该例子中,由指示灯106限定的光环的左边部分1204照亮以指示左侧车道偏离,并且左侧车道偏离警报显示图标1206经由显示器104呈现。
如图9D所示,控制器124还可以被配置为提供音频输出914和/或显示输出以警告用户交通已经开始移动。例如,控制器124可以被配置为确定相机122的视场中的物体(例如,其他交通工具)不再看得见或者离相机122至少有阈值距离,并且控制器124可以被配置为响应于确定物体不再看得见或者离相机122至少有阈值距离,提供音频输出914和/或显示输出以警告用户交通已经开始移动。经常,用户在交通灯处停留时可能会分心并且没有认识到用户的交通工具前面的汽车已经开始移动。因此,为用户提供音频警告914可以帮助使用户的注意力重新集中。
在实施例中,装置100可以被配置为接收与装置100的当前地点相关联的速度限制信息(例如,用户的交通工具穿过的当前道路上的速度限制),并且确定速度限制在当前道路上在前面何时降低。例如,装置100可以被配置为从服务器208接收该信息。控制器100可以被配置为经由指示灯106呈现速度降低警报(例如,闪黄光灯等)以警告用户当前道路在前面具有降低的速度限制。如图9E所示,控制器124还可以被配置为提供显示输出916和/或音频输出918以警告用户即将来到的速度降低。在一些实施例中,装置100的存储器128本身可以包括具有速度限制信息的地图或地图数据以在导航期间或者在任何其他的时间提供该警报。当装置100被确定为处于以超过(例如,高于)速度限制的速度行进的交通工具中时,控制器124可以控制显示器104和/或指示灯106警告驾驶者,诸如用精细的指示器(例如,闪光的显示输出和/或指示灯106的颜色变化)。在实施例中,控制器124还可以被配置为经由扬声器120和/或音频输出接口144提供可听的警报。可以基于位置的变化(例如,基于经由地点确定组件134接收的信号)、基于相机122片段、基于从交通工具接收的信息、或者基于装置100中的速度传感器检测的速度来确定交通工具的速度。
装置100可以支持每日驾驶中常用的各种特征。例如,装置100可以被配置为提供对于远程存储在远程服务器(例如,服务器206)上的音乐、播客、有声读物服务、新闻和其他媒体的访问,所述远程服务器诸如AMAZON服务器、GOOGLE服务器、YAHOO服务器等。装置100还可以访问媒体服务,诸如,但不限于,PANDORA、SPOTIFY、SOUNDCLOUD、ITUNES和GOOGLEPLAY。
装置100可以支持各种“智能通知”,“智能通知”可以通过音频或语音提示与视觉指示器一起表现为对于用户的干扰最小化。例如,用户可以要求装置100读取传入的消息,然后口头地指示装置清除或删除消息、回复、读取下一个消息、访问先前存储的消息、等等。在实施例中,不同的通知可以经由移动装置202上的移动应用218基于用户偏好开启/关闭和/或在用户正在驾驶时(例如,在路线引导期间)阻止分心。
装置100可以连接到提供天气信息和服务的远程服务器(例如,服务器206、208或另一个服务器)。在实施例中,控制器124和/或控制器210可以被配置为将装置100的当前地点(例如,由地点确定组件134确定的当前地理位置)和/或路线信息(例如,导航数据)发送到远程服务器,以基于装置100的当前地点和/或路线信息从远程服务器接收天气信息(例如,当前地点处的或当前地点和目的地之间的天气状况)。
装置100还可以被配置为接收交通更新。例如,装置100可以被配置为从远程服务器(例如,服务器206、208或另一个服务器)周期性地接收或请求更新的交通信息。在实施例中,控制器124和/或控制器210可以被配置为将装置100的当前地点和/或路线信息(例如,导航数据)发送到远程服务器,以基于装置100的当前地点和/或路线信息从远程服务器接收更新的交通信息(例如,当前地点处的或当前地点和目的地之间的交通状况)。在一些实施例中,控制器124和/或控制器210可以被配置为如果交通被确定为沿着到目的地的当前路线存在,则自动地从远程服务器接收交通信息。控制器124和/或控制器210可以被配置为基于更新的交通信息来从远程服务器(例如,服务器208)接收导航数据以计算到目的地的路线。例如,路线可以至少部分地基于当前交通状况(例如,针对当前交通状况优化)。在一些实施例中,用户可能能够问“前面交通如何”。装置100可以连接到除了语音服务服务器206之外的交通提供商所关联的服务器(诸如导航/地图构建服务服务器208)以确定当前交通状况,并且控制显示器104、指示灯106和扬声器120提供交通信息。
在实施例中,装置100还被配置为与远程服务器(例如,服务器206和/或208)连接以确定对于问题的回答,比如,对于“我在哪里?”的回答,以获得正在其上驾驶的道路的名称,以及对于“速度限制是什么?”的回答,以获得该道路的当前速度限制(如果存储的地图数据包含该信息)。
如本文中前面所指出的,装置100可以包括以下形式的输出中的一个或多个:指示灯106(例如,LED环)、显示器104(例如,LED/OLED显示器)和扬声器120或音频输出接口144。控制器124被配置为控制输出装置140(例如,指示灯106、显示器104、扬声器120和/或音频输出接口144)中的任何一个以向用户提供信息、警告、对于查询的响应、消息通知、日历通知等。
扬声器120和/或音频输出接口144输出可听的信息并且为装置100提供“语音”。控制器124被配置为采用扬声器120和/或音频输出接口144来对语音查询做出响应,从而提供导航指令、驾驶者辅助警告和具有音乐、有声读物或播客的车内娱乐。所讲的指令或查询可以被发送到服务器206以用于语音服务处理,其中,服务器206被配置为将响应的通信信息返回到装置100,并且还可以被配置为将用户的自然语言指令/查询转化为针对导航/地图构建服务器208或服务器206与其一起工作来回答用户的查询或者实现用户的指令的任何其他服务器格式化的命令数据。在一些实现中,可以通过查询AMAZON的基于云的文本转语音(TTS)引擎来在“ALEXA”语音中给出所讲的信息,并且命令数据可以包括针对导航/地图构建服务器208(例如,GARMIN的基于云的导航/地图构建服务)格式化的指令。扬声器120和/或音频输出接口144输出的信息的优先级可以如图10所示,例如,优先级链1000可以如下:(1)ASR响应1002;(2)导航指令1004;(3)警告和警报(例如,ADAS或其他驾驶者警告)1006;(4)音乐或播客1008,其中,1是最高优先级,4是最低优先级。
控制器124可以被配置为经由指示灯106(例如,LED光环)来呈现各种照明图案以增强ASR对话中提供的信息并使ASR对话中提供的信息可视化。可以实现不同的照明图案来提供信息,诸如当装置100正在讲话、监听和思考时使用的不同状态。控制器124和控制器210可以与语音处理服务器206紧密工作以在装置100和兼容的产品(例如,智能家庭助理,诸如AMAZON ECHO等)之间提供一致的体验。在实施例中,指示灯106限定包括多个(例如,8个、10个、12个、14个、16个等)单独可选/可控的光段的LED光环。
图11示出用于与装置100交互的示例处理1100,装置100采用指示灯106来向用户指示装置状态。装置100监听用户讲出唤醒词(方框1102)。在用户这样做之前,指示灯106可以被完全关闭或者被设置为待机/停用照明图案(方框1104)。当用户讲出唤醒词(例如,“装置”、“Alexa”、“Siri”、“Cortana”、“OK Google”等)时,所述装置可以呈现照明图案来指示所述装置正在监听(方框1106)。如果所讲的指令/查询太安静,则装置100可以继续监听(方框1106)。如果所讲的指令/查询至少是阈值音量,则所述装置将音频传送给语音服务服务器206(方框1108)。例如,装置100可以被配置为将所讲的指令/查询发送到在移动装置202上运行的移动应用218,其中,移动应用218使移动装置202将所讲的指令/查询传送给服务器206。装置100可以提供照明图案(例如,使光环旋转/闪光)来指示服务器206对所讲的指令/查询的处理(方框1110)。当服务器206发送响应时,装置100可以在经由指示灯106显示另一照明图案(例如,纯蓝光环)的同时将响应传送给用户(方框1112)。装置100然后可以监听来自用户的任何后续的指令/查询(方框1114)。当所述装置完成与用户通信时(例如,在没有来自用户的所讲的指令/查询的情况下阈值时间已经过去之后),所述装置返回到待机/停用状态,其中,控制器124关闭指示灯106或者呈现待机/停用照明图案(方框1116)。
除了指示装置100状态之外,控制器124还可以被配置为经由指示灯呈现照明图案来提供ADAS警告/警报(例如,如图12A所示的前向碰撞警报、如图12B所示的车道偏离警报、速度限制警报、交通警报等)。在实施例中,控制器124被配置为经由指示灯106呈现照明图案来指示当前方位、沿着到目的地的路线的推荐的方向或指南针(指向北)。
控制器124还被配置为经由显示器104来提供显示输出(例如,符号和/或文本)以补充经由扬声器120和/或音频输出接口144提供的音频输出和/或经由指示灯106呈现的照明图案。例如,显示器104可以用于提供路线引导信息、ADAS警告、通知、媒体信息等。经由显示器104呈现的信息的优先级可以如图13所示,例如,优先级链1300可以如下:(1)ASR响应和/或请求的信息1302;(2)智能通知(例如,传入的呼叫、消息通知等)1304;(3)用于当前的或即将来到的调转的导航/引导数据(例如,转弯附近的导航等)1306;(4)警告和警报(例如,ADAS或其他驾驶者警告或警报)1308;(5)调转前的导航/引导(例如,关于离当前位置距离长(例如,1英里或更大)的转弯的信息)1310,其中,1是最高优先级,5是最低优先级。
图14至36B示出了例示说明装置100配置的各种示例处理和使用场景。除非另有陈述,否则所述装置可以被配置为按任何任意的次序执行图14至36B所示的操作方框。此外,不同处理的操作方框可以组合,并且在本文中提供是为了展示装置100的各种配置,而不是意图作为限制。本文中所描述的实施例/实现可以完全地或部分地组合来实现除了在本文中作为单个实施例/实现明确提供的和/或在图14至30B中的单个附图或一系列附图中例示说明的那些实施例/实现之外的实施例/实现。操作方框可以通过硬件、软件或固件的任何组合来执行,例如,通过装置100的动作完成的操作可以至少部分由控制器124执行,在一些实施例中,可以由移动装置控制器210和/或服务器(例如,服务器206和/或服务器208)执行。
图14示出用于与装置100交互的示例处理1400。装置100监听用户讲出唤醒词或者按下动作按钮108(方框1402)。在用户这样做之前,指示灯106可以被完全关闭或者被设置为待机/停用照明图案(方框1404)。当用户讲出唤醒词(例如,“装置”、“Alexa”、“Siri”、“Cortana”、“OK Google”等)或者按下动作按钮108时,所述装置可以呈现照明图案来指示所述装置正在监听并且还可以经由扬声器120输出监听音调(方框1406)。如果所讲的指令/查询太安静,则装置100可以继续监听(方框1406)。如果所讲的指令/查询至少是阈值音量,则所述装置将音频传送给语音服务服务器206(方框1408)。例如,装置100可以被配置为将所讲的指令/查询发送到在移动装置202上运行的移动应用218,其中,移动应用218使移动装置202将所讲的指令/查询传送给服务器206。装置100可以提供照明图案(例如,使光环旋转/闪光)来指示服务器206对所讲的指令/查询的处理(方框1410)。当服务器206发送响应时,装置100可以在经由指示灯106显示另一照明图案(例如,纯蓝光环)的同时将响应传送给用户(方框1412)。装置100然后可以监听来自用户的任何后续的指令/查询(方框1414)。如果用户再次按下动作按钮或者讲出唤醒词,则所述装置开始新的ASR会话(方框1418),并且返回到方框1406以监听来自用户的新的指令/查询。当所述装置完成与用户通信时(例如,在没有来自用户的所讲的指令/查询的情况下阈值时间已经过去之后),所述装置返回到待机/停用状态,其中,控制器124关闭指示灯106或者呈现待机/停用照明图案(方框1116)。麦克风110可以被静音(例如,装置100忽略所有所讲的指令/查询),直到唤醒词被再次讲出或者动作按钮被再次按下(方框1420)。
图15A至15D示出用于与装置100交互以搜索目的地和/或发起路线引导的示例处理1500。用户可以采用装置100来找到地点(方框1502)。装置100被插上电源,被上电,并且等待用户讲出唤醒短语或者按下动作按钮108(方框1504)。当用户讲出唤醒词(例如,“装置”、“Alexa”、“Siri”、“Cortana”、“OK Google”等)或者按下动作按钮108时,所述装置可以呈现照明图案来指示所述装置正在监听并且还可以经由扬声器120输出监听音调(方框1506)。装置100可以从用户接收所讲的指令或查询(例如,搜索查询),并且将所讲的指令或查询发送到服务器206以用于语音服务处理(方框1508)。控制器124或移动应用218确定路线引导是否已经起作用(方框1510)。当路线引导不起作用时,服务器206可以基于装置100的当前地点(例如,基于与当前地点的贴近度排序的地点)、或者基于指定的搜索地点(例如,在特别的城市中、在交集附近、邮政编码等)来找出结果(方框1512)。当路线引导起作用时,服务器206可以基于装置100正在跟随的路线来找出结果(例如,服务器206可以搜索沿着起作用的路线定位的地方)(方框1514)。
当服务器206完成搜索(方框1516/1518)时,装置100可以确定装置100的方位是否是已知的(例如,基于装置100的移动)(方框1520)。如果方位不是已知的,则装置100可以经由音频和/或显示输出来提供地点的描述,并且还可以提供到达该地点的方向(方框1522)。如果方位是已知的,则装置100可以经由音频和/或显示输出来提供地点的描述,并且还可以提供相对于当前行进方向到达该地点的方向(例如,通过显示相对于装置100的方位指向该地点的箭头或照明图案)(方框1524)。如果用户提供停止或中断搜索的语音输入,则装置100可以结束ASR会话并且重新开始操作(例如,通过返回到待机/停用状态或者重新开始起作用的路线引导)(方框1530)。如果用户提供接受建议的地点和/或指示装置100导航到该地点的语音输入,则装置100可以确定路线引导是否已经起作用(方框1526)。如果路线引导还没有起作用,则装置100可以将导航命令数据(例如,基于用户的语音输入从服务器206接收的数据)发送到服务器208以用于导航服务处理,并且可以作为响应从服务器208接收导航数据(例如,路线引导信息)(方框1540)。如果路线引导已经起作用,则装置100可以问用户是开始新的路线、还是将搜索地点添加到当前路线(方框1532)。用户可以指示装置100开始新的路线,在这种情况下,装置100于是停止当前路线,并且基于搜索地点开始新的路线(方框1534)。用户可以指示装置100接着导航到搜索地点,在这种情况下,装置100于是将搜索地点作为下一个停止地点添加,并且相应地更新当前路线(方框1536)。用户可以指示装置100最后导航到搜索地点,在这种情况下,装置100于是将搜索地点作为最后一个停止地点添加,并且相应地更新当前路线(方框1538)。在接收到用户指令并且更新当前路线或开始新的路线之后,装置100可以将导航命令数据(例如,基于用户的语音输入从服务器206接收的数据)发送到服务器208以用于导航服务处理,并且可以作为响应从服务器208接收导航数据(例如,路线引导信息)(方框1540)。
装置100可以提供音频和/或显示输出来让用户知道装置100正在从服务器208得到方向(方框1540),并且在一些实现中,装置100在路线计算正在进行中的同时经由指示灯106提供照明图案(例如,使蓝色环旋转)(方框1542)。装置100可以评定是否存在卫星接收(例如,GPS接收)(方框1544)。如果没有接收,则装置100可以在路线引导可以开始之前向用户通知它等待改进的接收(方框1552)。在一些情况下,在装置100等待接收的同时,装置100的位置可以改变(例如,因为用户继续驾驶)。如果位置改变太多,则装置100可能需要重新计算路线(方框1554)。当装置100具有足够的卫星接收时,装置100确定是否可以基于从服务器208接收的导航数据(例如,路线引导指令)计算到目的地的路线(方框1546)。如果存在错误(例如,如果装置100不能计算路线),则装置100可以被配置为提供用于向用户通知路线不能被计算的显示和/或音频输出(方框1556)。当计算出路线时,装置100被配置为开始导航指令(方框1550)。除了向用户提供导航指令之外,装置100还可以提供交通更新和/或ADAS警告(方框1548)。
图16A和16B示出用于与装置100交互以经由移动装置202(例如,经由移动应用218)搜索目的地和/或发起路线引导的示例处理1600。可以将地点(例如,手动录入的目的地或搜索地点)在装置开启时从移动装置202发送到装置100(例如,经由移动应用218和/或另一个链接的移动应用)(方框1602),或者在装置100关闭时,当装置100被开启并且被连接到移动装置202时,传送到装置1604(方框1604)。装置100可以提供音频和/或显示输出来让用户知道装置100正在从服务器208得到方向(方框1606),并且在一些实现中,装置100在路线计算正在进行中的同时经由指示灯106提供照明图案(例如,使蓝色环旋转)(方框1608)。装置100可以评定是否存在卫星接收(例如,GPS接收)(方框1610)。如果没有接收,则装置100可以在路线引导可以开始之前向用户通知它等待改进的接收(方框1614)。在一些情况下,在装置100等待接收的同时,装置100的位置可以改变(例如,因为用户继续驾驶)。如果位置改变太多,则装置100可能需要重新计算路线(方框1616)。当装置100具有足够的卫星接收时,装置100确定是否可以基于从服务器208接收的导航数据(例如,路线引导指令)计算到目的地的路线(方框1612)。如果存在错误(例如,如果装置100不能计算路线),则装置100可以被配置为提供用于向用户通知路线不能被计算的显示和/或音频输出(方框1618)。当计算出路线时,装置100被配置为开始导航指令(方框1622)。除了向用户提供导航指令之外,装置100还可以提供交通更新和/或ADAS警告(方框1620)。
图17A和17B示出可以被服务器206处理以用于地点搜索的语音输入的例子。例如,用户可以请求语音服务(例如,服务206)要求导航服务(例如,服务器208)找到地址、POI、地方的名称等。在图17A所示的例子中,用户要求装置100找到咖啡店。装置100可以将从用户接收的所讲的指令/查询发送到服务器206以用于语音服务处理,服务器206可以与服务器208通信以用于导航/地图构建服务处理,从而通过直接地或间接地(例如,通过经由移动应用218将导航命令数据送回到服务器208)传送导航命令数据(例如,基于用户的语音输入的ASR处理的指令)来找出附近的咖啡店。装置100然后可以经由音频和/或显示输出对用户一次一个地提供搜索结果,并且可以监听用户响应(例如,接受或拒绝搜索结果、要求替代等)。如图17B所示,装置100可以处理更特定的请求。例如,用户可以要求装置找出城市中的或地点/地标附近的POI。例如,在图17B所示的例子中,用户要求装置100找到特定城市附近的咖啡店。提供图17A和17B是为了例示说明用户装置交互的例子。在实现中,装置100可以接受来自用户的附加的/替代的语音输入。例如,用户可以按名称、地址、城市、状态、邻域、地标、距离、类别等来搜索地点。装置100充当用于ASR服务和导航/地图构建服务的服务器206和208与用户之间的网关。
图18A和18B示出用于与装置100交互以搜索地点并且通过多个搜索结果导航的示例处理1800。在唤醒词被讲出或者动作按钮被按下之后,装置100可以监听来自用户的所讲的指令或查询(方框1802)。例如,用户可以要求装置100搜索附近的咖啡店。装置100然后可以将所讲的指令或查询发送到服务器206以用于语音处理,并且在一些实现中,服务器206被配置为返回结果和/或与导航/地图构建服务器208通信以完成搜索。装置100可以被配置为将它的当前地点发送到服务器206和/或服务器208以使得搜索结果至少部分地基于装置100的当前地点(例如,服务器206/208返回基于与装置100的地点的贴近度的对于咖啡店的搜索结果)。装置100可以一个接一个地或者一次几个地输出结果(方框1804)。装置100可以被配置为如果用户拒绝装置100作为音频和/或显示输出呈现的搜索结果,则移到下一个结果(方框1806)。每次用户拒绝结果或者要求更多结果时,装置100可以继续呈现结果(方框1808、1814、1816和1818)。装置100可以在装置100已经提供了从服务器206接收的所有的结果之后和/或在呈现多于阈值数量的结果之后(例如,在呈现二十个(20个)结果之后),提供用于向用户通知没有更多结果的音频和/或显示输出(方框1820)。装置100然后可以结束ASR会话(方框1822)。如果用户想要听到或看到先前呈现的结果,则当用户要求装置100生成先前的结果时,装置100可以再次呈现结果。用户可能能够通过说“下一个”和“前一个”来循环结果。例如,在方框1806处呈现结果之后,用户可以通过向装置100请求前一个结果来查看先前呈现的结果(方框1812)。如果用户说前一个太多次,则装置100可以被配置为提供用于向用户通知没有更多的先前呈现的结果的音频和/或视频输出(方框1810)。
图19示出用于与装置100交互以搜索先前保存的地点的示例处理1900。在唤醒词被讲出或者动作按钮被按下之后,装置100可以监听来自用户的所讲的指令或查询(方框1902)。例如,用户可以要求装置100导航到“家”。装置100可以与移动应用218、服务器206和/或服务器208一起检查以确定地点先前是否已经被保存(方框1904)。例如,用户先前可能已经经由装置100和/或移动应用218保存了家庭地址。如果地点尚未被保存,则用户可以可选地使用移动应用218来保存地点(方框1910)。可以被保存的地点的例子包括,但不限于,用户的“家”、“工作”、“学校”、联系人、喜爱的人的地址等。如果用户请求的地点对应于先前保存的地点,则装置100可以提供用于向用户通知装置100将开始到请求的地点的路线引导的音频和/或显示输出(方框1906)。装置100然后可以开始路线引导(方框1908)。
图20A和20B示出用于经由装置100(例如,经由显示器104、扬声器120/音频输出接口144和/或指示灯106)呈现路线引导信息的示例处理2000。装置100上的路线引导可以是起作用的(方框2002)。装置100可以经由显示器104呈现符号和/或文本输出(例如,调转图标和到调转(例如,转弯)的距离)(方框2004)。装置100还可以提供向驾驶者通过即将来到的调转的一个或多个音频输出(方框2006)。在一些实现中,当装置100第一次向用户显示即将来到的调转时,装置100向用户提供音频输出(例如,预转弯准备输出),并且当用户离调转小于阈值距离时,再次向用户提供音频输出(方框2008)。如果到调转的距离短,则装置100可以跳过预转弯准备音频输出。当用户在离调转阈值距离内时,装置100可以经由指示灯106来呈现动态照明图案(例如,逐渐地填充光环的部分)(方框2010)。例如,当用户在离调转阈值距离内时,装置100可以开始照亮由指示灯106限定的光环的底部部分(方框2012)。装置100还可以提供让用户知道离调转的距离的音频输出。当用户靠近调转时,装置100可以继续填充光环的部分(方框2014),并且当用户在离调转查看范围内(例如,小于X英尺)时,可以提供附加的音频输出(方框2016)。装置100可以继续填充光环,直到它被完全填充(例如,当用户到达调转时)(方框2018和2020)。装置100然后可以继续呈现针对下一次调转输出的显示、音频和/或照明图案(方框2022)。
图21A和21B示出用于当装置100偏离路线(例如,在停车场中、在偏离道路的地点、或者在无标记的/没有构建地图的位置处)时经由装置100(例如,经由显示器104、扬声器120/音频输出接口144和/或指示灯106)呈现路线引导信息的示例处理2100。装置100可以计算和/或(例如,从服务器208)接收用于路线引导的导航数据/指令(方框2102)。装置100可以确定装置100离路线是否小于预定义的最大距离(例如,小于X米)(方框2104)。如果装置100离路线小于预定义的最大距离,则装置100可以开始/继续路线导航(方框2106)。当装置100开始沿着路线行进时,装置100可以显示附加的调转(例如,下一次转弯等)(方框2106)。如果装置100离路线大于预定义的最大距离,则装置100可以将用户导航到路线。例如,装置100可以提供将用户导航到路线的音频和/或显示输出(方框2110)。装置100可以经由显示器104提供方位指针来帮助用户(方框2112)。例如,装置100可以提供指向路线的箭头,并且还可以显示到路线的距离(方框2114)。地图视图2120示出相对于路线的装置100地点的例子。如果用户驾驶到离装置100指示的路线起始点较远的新的位置(例如,如地图视图2122中所示),则装置100可以经由显示器104提供将用户导航到沿着路线的、基于装置100的新的位置的不同的(较近的)起始点的方位指针(方框2116)。例如,装置100可以提供指向沿着路线的新的起始点的箭头,并且还可以显示到新的起始点的距离(方框2118)。
图22示出用于当装置100处于具有成群的(例如,紧挨着的)转弯的环境中(例如,在人口密集的城市(其在地理区域中具有许多道路)中)时经由装置100呈现路线引导信息的示例处理2200。在即将来到的转弯要求用户转到许多紧挨着的道路中的一个上的情形下,用户可以采用装置100来进行路线引导(方框2202)。装置100可以提供用详细的指令引导用户转到正确的道路上的音频和/或显示输出。例如,装置100可以提供向用户通知正确的转弯的音频输出(例如,方框2204——“右边的第二个转弯”或方框2206——“右边的第一个转弯”)。当用户靠近转弯时,装置100还可以提供显示输出,该显示输出提供用户应在哪个转弯拐弯的详细的和/或放大的视图。例如,装置100可以提供右边的第二个转弯的突出显示的视图(方框2208)或右边的第一个转弯的突出显示的视图(方框2210)。另外,装置100可以被配置为经由指示灯106呈现动态的照明图案(例如,通过用光或特定颜色填充环)来指示交通工具到转弯的接近度。这可以帮助确保用户不会太早或太晚拐弯(例如,拐到错误的街道上)。
用户可以向装置100查询关于装置100的地点和/或当前路线的信息。例如,图23示出用于与装置100交互以询问沿着路线的当前地点处的速度限制的示例处理2300。在唤醒词被讲出或者动作按钮被按下之后,装置100可以监听来自用户的关于装置100的当前位置处的速度限制的所讲的指令或查询(方框1802)。控制器124或移动应用218可以首先确定路线是否起作用(例如,装置100正在移动吗?)(方框2304)。如果装置100在起作用的路线上,则控制器124或移动应用218可以向服务器208查询装置100的当前位置处的速度限制(方框2306)。如果服务器208不能返回响应或者指示当前位置处的速度限制是未知的,则装置100可以提供向用户通知装置100的当前位置处的速度限制不能被确定的音频和/或显示输出(方框2308)。如果服务器208用速度限制对装置100做出响应,则装置100可以被配置为提供向用户通知装置100的当前位置处的速度限制的音频和/或显示输出(方框2310)。装置100可以在一时段(例如,X秒)内显示速度限制(方框2310),并且在该时段过去之后,可以返回到其先前的显示或者关闭显示(方框2314)。
图24示出用于当装置100偏离路线(例如,在停车场中、在偏离道路的地点、或者在无标记的/没有构建地图的位置处)并且接近目的地(例如,离目的地小于X英里)时经由装置100(例如,经由显示器104、扬声器120/音频输出接口144和/或指示灯106)呈现路线引导信息的示例处理2400。当用户靠近目的地时,装置100可以呈现起作用的路线引导(方框2402)。装置100可以提供向用户通知目的地的详细位置的音频和/或显示输出(例如,“目的地在右边正前方”)。当用户靠近目的地时,控制器124或移动应用218可以跟踪用户离目的地的距离以确定用户何时在离目的地的阈值接近度内(例如,离目的地小于M米)(方框2404)。控制器124或移动应用218然后可以确定用户已经有效地到达目的地并且可以结束路线引导(方框2406)。如果用户在靠近目的地的同时偏离路线驾驶,则控制器124或移动应用218可以重新计算路线(方框2408)。在重新计算路线之后,控制器124或移动应用218可以确定用户是否接近目的地(例如,离目的地小于X英里)以及用户是否在标记的/无标记的地点处(例如,用户是否在可识别的街道或无名的地点(诸如停车场、偏离道路的地点等)处)(方框2410)。如果用户在标记的地点(例如,可识别的街道)处和/或离目的地大于阈值距离,则装置100可以继续路线引导(方框2412)。在一些实现中,装置100可以向用户提供帮助将用户引导到路线的音频和/或显示输出(例如,如参照图21A和21B所描述的)。如果用户在无标记的地点处,则控制器124或移动应用218可以发起到达模式2414。在到达模式下,装置100可以显示到目的地的距离和/或将用户指向目的地的箭头2417(方框2416)。装置100还可以提供音频输出和/或经由指示灯106呈现充当方位指针的照明图案(例如,代替箭头2417,或者除了箭头2417之外)以帮助将用户指向目的地。
图25A示出用于当装置100靠近目的地时经由装置100(例如,经由显示器104、扬声器120/音频输出接口144和/或指示灯106)呈现路线引导信息的另一个示例处理2500。当用户靠近目的地时,装置100可以呈现起作用的路线引导,其中,最终的导航指令使装置100偏离路线(例如,进入停车场中)并且进入到达模式(方框2502)。例如,装置100可以提供向用户通知使装置100偏离路线的调转的音频和/或显示输出(方框2504)。在跟随调转之后,控制器124或移动应用218可能检测到装置的当前位置在无标记的地点(例如,停车场)处并且装置100在目的地的附近(例如,离目的地小于X米),并且控制器124或移动应用218然后可以发起到达模式(方框2506)。在到达模式下,装置100可以显示到目的地的距离和/或将用户指向目的地的箭头2505(方框2508)。装置100还可以提供音频输出和/或经由指示灯106呈现充当方位指针的照明图案(例如,代替箭头2505,或者除了箭头2505之外)以帮助将用户指向目的地。例如,图25B和25C示出当装置100处于到达模式时在调转之前(在方框2504处)和调转之后(在方框2506和2508处)的交通工具地点2510的地图视图。
图26A和26B示出用于经由装置100(例如,经由显示器104、扬声器120/音频输出接口144和/或指示灯106)呈现智能通知(例如,消息通知、电子邮件、警告/警报、日历警告/更新等)的示例处理2600。智能通知可以在移动装置202处被接收,并且经由移动应用218被传送给装置100(方框2602)。例如,移动装置202可以接收文本消息、电子邮件、警告/警报、日历警告、日历更新、警告通知等。装置100可以确定ASR会话是否起作用和/或装置100是否在路线引导调转处或附近(方框2604)。装置100可以等待ASR会话结束或者等待装置100清除路线引导调转,以避免中断起作用的ASR或干扰调转附近的路线引导(方框2606)。当装置100确定没有起作用的ASR会话并且装置100不在路线引导调转处或附近时,装置100可以提供向用户呈现通知标题的音频和/或显示输出(方框2608)。如果用户没有对装置100提供任何指令或查询,则装置100可以显示消息达一定时间(方框2610),然后从显示器104清除消息(方框2612)。如果用户指示装置100播放来自服务器206/208的消息(或者按下动作按钮以使装置100播放消息),则装置100可以在显示让用户知道装置100正在处理用户的请求的照明图案(例如,使蓝色光旋转)的同时将指令传送给服务器206/208(方框2614)。当消息已经被装置100从服务器206/208接收到时,装置100可以提供包括用于使用户看到或听到的消息的音频和/或显示输出(方框2616)。如果用户指示装置100清除来自服务器206/208的消息,则装置100可以在显示让用户知道装置100正在处理用户的请求的照明图案(例如,使蓝色光旋转)的同时将指令传送给服务器206/208(方框2620)。当消息已经被清除(例如,被删除/存档)时,装置100可以提供向用户通知清除消息的请求已经被成功处理的音频(例如,成功音调)和/或显示输出(方框2622)。
图27A和27B示出用于经由装置100(例如,经由显示器104、扬声器120/音频输出接口144和/或指示灯106)呈现ADAS警告/警报(例如,前向碰撞警报)的示例处理2700。在装置100运动时,可能检测到前向碰撞警报事件(方框2702)。例如,装置100可以基于相机122在装置100运动的同时记录的图像和/或视频来检测距离相机122的视场中的物体的接近度何时小于阈值接近度(例如,小于阈值距离)。装置100可以确定车道偏离警报是否起作用(方框2704)。如果没有车道偏离警报,则装置100可以提供向用户呈现前向碰撞警报的显示输出、音频输出和/或照明图案(例如,照亮光环的前面部分)(方框2708)。如果存在车道偏离警报,则装置100除了提供向用户呈现车道偏离警报的显示输出、音频输出和/或照明图案(例如,照亮光环的侧面部分)之外,还可以提供向用户呈现前向碰撞警报的显示输出、音频输出和/或照明图案(例如,照亮光环的前面部分)(方框2706)。如图27B所示,如果当路线引导起作用并且装置100在调转处或附近时、前向碰撞警报被检测到,则装置100可以提供向用户呈现调转的显示输出,并且可以提供向用户呈现前向碰撞警报的音频输出和/或照明图案(例如,照亮光环的前面部分)(方框2710)。
图28A和28B示出用于经由装置100(例如,经由显示器104、扬声器120/音频输出接口144和/或指示灯106)呈现ADAS警告/警报(例如,车道偏离警报)的示例处理2800。在装置100运动时,可能检测到车道偏离警报事件(方框2802)。例如,装置100可以基于相机122在装置100运动的同时记录的图像和/或视频来检测何时距离相机122的视场中的车道之间的参考对齐至少存在阈值偏离(例如,装置100检测到交通工具已经越过实线)。装置100可以确定车道偏离的方向(例如,交通工具越过了右边或左边的实线?)(方框2804)。装置100可以确定前向碰撞警报是否起作用(方框2806/2812)。如果没有前向碰撞警报,则装置100可以提供向用户呈现车道偏离警报的显示输出、音频输出和/或照明图案(例如,照亮光环的左侧或右侧部分)(方框2808/2816)。如果存在起作用的前向碰撞警报,则装置100除了提供向用户呈现车道偏离警报的音频输出和/或照明图案(例如,照亮光环的左侧或右侧部分)之外,还可以提供向用户呈现前向碰撞警报的显示输出、音频输出和/或照明图案(例如,照亮光环的前面部分)(方框2810/2814)。前向碰撞警报较于车道偏离警报可以优先处理;因此,装置100可以被配置为即使车道偏离警报在装置100上可能同时起作用,也显示前向碰撞警报和/或提供向用户通知前向碰撞警报的音频。如图28B所示,如果当路线引导起作用并且装置100在调转处或附近时、车道偏离警报被检测到,则装置100可以提供向用户呈现调转的显示输出,并且可以提供向用户呈现车道偏离警报的音频输出和/或照明图案(例如,照亮光环的侧面部分)(方框2818)。
图29示出用于经由装置100(例如,经由显示器104、扬声器120/音频输出接口144和/或指示灯106)呈现ADAS警告/警报(例如,速度限制警报)的示例处理2900。装置100可以从服务器208获取速度限制信息,并且检测装置100何时超过速度限制(方框2902)。例如,装置100可以基于地点跟踪数据(例如,GPS跟踪数据)和/或速度传感器数据来检测装置100何时以高于速度限制至少阈值速度(例如,高于速度限制至少X mph)的速度移动。装置100可以确定ASR会话是否起作用和/或装置100是否在路线引导调转处或附近(方框2904)。装置100可以等待ASR会话结束或者等待装置100清除路线引导调转,以避免中断起作用的ASR或干扰调转附近的路线引导(方框2906)。当装置100确定没有起作用的ASR会话并且装置100不在路线引导调转处或附近时,装置100可以确定自从最后一次速度限制警报被提供给用户以后用户是否低于速度限制行进(方框2910)。如果装置100确定在最后一次速度限制警报被提供给用户之后用户低于速度限制行进,则装置100可以通过提供使用户警觉他或她正在加速的音频输出、显示输出(例如,呈现速度限制)和/或照明图案(例如,经由指示灯106呈现红色光环)来提供新的速度限制(方框2912)。装置100可以中断显示输出(并且返回到前一个显示,例如,路线引导),并且还可以在一时段之后(例如,在t秒之后)中断和/或降低照明图案的强度(例如,通过关闭光环的段或者降低亮度)(方框2914)。当装置100低于速度限制行进或者不再高于速度限制阈值速度行进时,装置100可以完全中断速度限制警报(方框2916)。
图30A和30B示出用于与装置100交互以经由相机122记录内容(例如,图像和/或视频片段)的示例处理300。例如,装置100可以以“时间流逝”格式记录可以与联系人共享和/或在社交媒体应用/网站上共享的图像和/或视频片段。在唤醒词被讲出或者动作按钮被按下之后,装置100可以监听来自用户的所讲的指令或查询。用户可以对装置100提供语音输入(例如,所讲的指令/查询)以记录时间流逝(方框3002)。在一些实现中,用户查询服务器206和/或服务器208以将用于记录时间流逝的指令提供给装置100。装置100可以确定相机122是否已经被用于记录时间流逝或任何其他的形式的内容(方框3004)。如果相机122已经在记录时间流逝内容,则装置100可以向用户提供让用户知道相机122已经在记录内容的音频输出(例如,通知“嘟嘟声”)(方框3006)。如果相机122还没有记录时间流逝内容,则装置100可以访问存储器(例如,内置的或安装的存储器)以确定存储器是否是可操作的以及在存储器中是否存在足以存储时间流逝内容的自由空间(方框3008)。如果存储器不可操作,或者如果在存储器中不存在足以存储时间流逝内容的自由空间(例如,小于X GB的存储器),则装置100可以提供向用户通知存储器错误(例如,向用户通知存储器不可操作/不足)的音频、显示和/或照明图案(方框3012)。如果存储器可操作并且具有足以记录时间流逝内容的自由空间(例如,至少X GB的存储器),则装置100可以开始经由相机122记录图像和/或视频内容,并且可以提供向用户通知相机122已经开始记录内容的音频输出(例如,成功“嘟嘟声”)(方框3010)。
如图30B所示,用户可以通过对装置100提供语音输入/命令来停止记录时间流逝内容。在唤醒词被讲出或者动作按钮被按下之后,装置100可以监听来自用户的所讲的指令或查询。用户可以对装置100提供语音输入(例如,所讲的指令/查询)以停止时间流逝记录(方框3014)。装置100可以确定相机122是否已经被用于记录时间流逝或任何其他的形式的内容(方框3016)。如果装置100正在经由相机122记录内容,则装置100可以停止记录内容,并且还可以提供向用户通知装置100已经停止经由相机122记录内容的音频和/或显示输出(方框3018)。如果装置没有经由相机122记录内容,则装置100仍可以提供向用户通知装置100已经停止经由相机122记录内容的音频和/或显示输出(方框3020)。
装置100可以经由显示器104提供各种符号和/或文本输出以在路线引导期间向用户警告调转。例如,图31A至31E例示说明可以经由显示器104提供以指示调转(例如,转弯)、交通信息和其他引导通知的符号的例子。在实现中,装置100可以被配置为经由显示器104提供使得来自装置100的信息可以用小的查看区域(例如,在一些实施例中,可以小于一英寸宽的显示器)呈现给用户的符号输出。
图32至42B中例示说明了系统200的各种配置,系统200包括装置100、在移动装置202上运行的移动应用218和交通工具音频系统204。在图32和33所示的实施例中,示出了包括用于用户3202的两个界面的配置3200。用户3202可以使用装置100和经由移动装置202的显示器248提供的移动应用218的用户界面3206(例如,图形用户界面(GUI))与移动应用218接口。移动应用218还可以包括装置接口3204,装置接口3204促进移动应用218和装置100之间的连接(例如,经由短距离收发器132和220之间的通信)。移动应用218还可以被配置为经由移动装置202的短距离通信收发器220直接与交通工具音频系统204进行通信、或者通过经由装置100连接到交通工具音频系统204间接地与交通工具音频系统204进行通信。例如,装置100可以在从移动应用218接收到音频之后将音频信号发送到交通工具音频系统204。在实施例中,移动应用218还包括缓存的文本转语音(TTS)数据3212(例如,缓存的导航指令)和用户设置3208。移动应用218包括语音服务客户端3214,语音服务客户端3214用于连接到语音服务(VS)服务器206,VS服务器206可以提供语音识别器3222和讲话合成器3224服务。移动应用218还可以包括音频解码器3216和音乐/媒体播放器3210以用于输出经由VS客户端3214接收的信息(例如,TTS)。在实施例中,装置100可以被配置为经由麦克风110从用户接收所讲的指令或查询,并且被配置为经由短距离通信收发器132将与所讲的指令或查询相关联的数据发送到在移动装置202上运行的移动应用218。移动应用218可以被配置为使移动装置202经由短距离通信收发器220将基于所讲的指令或查询输出的音频发送到交通工具音频系统204或装置100,以使得装置100可以经由扬声器120或音频输出接口144输出音频。在实施例中,移动应用218被配置为使移动装置202经由蜂窝收发器222将与所讲的指令或查询相关联的数据发送到服务器206以用于语音服务处理,并且被进一步配置为使移动装置202接收响应于与所讲的指令或查询相关联的数据从服务器206输出的音频的信息。
移动应用218进一步包括导航控制器3220和导航接口3218,以用于连接到导航/地图构建服务(NAV)服务器208,NAV服务器208可以提供导航服务3228,并且存储用户数据3226(例如,用于路线引导和其他基于地点的服务的用户配置文件)。在实现中,VS服务器206和NAV服务器208可以通过导航技能3822服务连接,导航技能3822服务可以(例如,经由移动应用218)被启用以提供通过VS服务器206对NAV服务器208的访问。例如,当导航技能3822被启用时,移动应用218可以被配置为使移动装置202将与所讲的指令或查询相关联的数据发送到服务器206以用于语音服务处理;基于所讲的指令或查询从服务器206接收导航命令数据;经由蜂窝收发器将导航命令数据和与装置100的当前位置相关联的数据发送到服务器208以用于导航服务处理;并且响应于导航命令数据和与装置100的当前位置相关联的数据从服务器208接收关于音频/显示输出的信息(例如,导航数据/指令)。在另一实现中,移动应用218可以被配置为使移动装置202将与装置100的当前位置相关联的数据和与所讲的指令或查询相关联的数据发送到服务器206以用于语音服务处理;基于与装置100的位置相关联的数据和所讲的指令或查询来从服务器206接收导航命令数据;经由蜂窝收发器将导航命令数据发送到服务器208以用于导航服务处理;并且响应于导航命令数据从服务器208接收关于音频/显示输出的信息(例如,导航数据/指令)。
如图33所示,移动应用218可以进一步包括流传输音频客户端3334,流传输音频客户端3334促进移动应用218和媒体服务3332(例如,PANDORA、SPOTIFY、AUDIBLE等)之间的连接。用户界面3306可以包括显示组件3348,显示组件3348示出与从媒体服务3332和/或媒体控件3350接收的媒体内容(例如,音乐)相关联的信息。装置100还可以被配置为基于从用户接收的语音输入(例如,所讲的指令/查询)来控制通过移动应用218的媒体回放。移动应用218还可以包括附加的组件3352,附加的组件3352可以提供移动应用218的各种客户端/界面和/或提供各种警告(例如,广播警告、移动装置202警告等)的附加的客户端3354之间的互连。在实施例中,移动应用218可以包括音频处理模块3342,音频处理模块3342被配置为对可以经由A2DP 3346(蓝牙流传输)和/或另一音频输出接口输出到交通工具音频系统204、或装置扬声器120或移动装置扬声器246的多个音频流(例如,音频流传输、路线引导、ASR响应等)进行解码,并且在一些情况下,合并这些音频流。
在实施例中,装置100可以被配置为允许系统200配置基于移动装置202和交通工具音频系统204的能力,和/或允许基于用户选择的可选配置。图34示出可选配置3400,在该配置中,音频输出(例如,路线引导、媒体流传输、ASR响应、免提呼叫等)由移动装置202通过交通工具音频系统204发送。例如,移动装置202可以被配置为基于短距离通信(例如,蓝牙)收发器220和262之间建立的通信信道(例如,A2DP信道)来将数据发送到交通工具音频系统204并且从交通工具音频系统204接收数据。图35例示说明另一可选配置3500,在该配置中,音频输出(例如,路线引导、媒体流传输、ASR响应、免提呼叫等)由装置100通过交通工具音频系统204发送。例如,移动装置202可以被配置为基于短距离通信(例如,蓝牙)收发器132和220之间建立的通信信道(例如,A2DP信道)来将数据发送到装置100并且从装置100接收数据。装置100然后可以通过音频输出接口144(例如,音频线路输出连接)将与数据关联的音频输出发送到交通工具音频系统204(例如,通过辅助输入/线路输入连接)。
图36例示说明采用TTS进行路线引导的装置100的示例配置3600。例如,装置100可以被配置为基于缓存的数据3604(例如,缓存的TTS数据)来为用户3602提供路线引导(例如,显示和/或音频)输出。装置100可以被配置为连接到TTS引擎3606以下载然后被存储在缓存的数据3604中的即将来到的路线引导指令的附加TTS数据。
图37例示说明采用来自NAV服务器208的数据和TTS进行路线引导的装置100的示例配置3700。例如,装置100可以被配置为基于缓存的数据3704(例如,缓存的TTS数据)来为用户3702提供路线引导(例如,显示和/或音频)输出。控制器124或移动应用218可以被配置为连接到TTS引擎3706以下载然后被存储在缓存的数据3704中的即将来到的路线引导指令的附加TTS数据。控制器124或移动应用218还可以被配置为连接到导航/地图构建引擎3712和用户数据库3710,导航/地图构建引擎3712和用户数据库3710这二者可以通过服务器208使用,以接收附加的导航数据(例如,路线引导指令)或其他的基于地点的信息。在一些实施例中,装置100被配置为通过反向信道端点3708连接到TTS引擎3706、导航/地图构建引擎3712和/或用户数据库3710。
图38例示说明采用来自VS服务器206的数据用于媒体应用的装置100的示例配置3800。例如,控制器124或移动应用218可以被配置为基于从用户3802接收的语音输入(例如,所讲的指令/查询)来为用户3802提供媒体(例如,流传输音频、新闻等)。控制器124或移动应用218可以被配置为连接到VS服务器206以对语音输入进行处理,并且可以连接到远程媒体源3808(例如,SPOTIFY、PANDORA等)以基于用户的语音输入接收关于用户3802的信息。控制器124或移动应用218还可以被配置为连接到用户数据库3806,用户数据库3806可以通过服务器206或服务器208使用。在一些实施例中,控制器124或移动应用218被配置为通过反向信道端点3804连接到用户数据库3806。
图39例示说明采用来自VS服务器206和NAV服务器208的数据搜索地点和/或计算导航(例如,路线引导)数据的控制器124或移动应用218的示例配置3900。例如,控制器124或移动应用218可以被配置为基于从用户3902接收的语音输入(例如,所讲的指令/查询)来为用户3902提供搜索地点和/或路线引导(例如,显示和/或音频)输出。控制器124或移动应用218可以被配置为连接到VS服务器206以对语音输入进行处理,并且可以连接到导航/地图构建引擎3910和短语发生器3912(这二者可以通过服务器208使用),以接收搜索结果、导航数据(例如,路线引导指令、定时等)或其他的基于地点的信息。导航技能3908可以通过移动应用218被启用以促进VS服务器206和NAV服务器208之间的连接。控制器124或移动应用218还可以被配置为连接到用户数据库3906,用户数据库3906可以通过服务器206或服务器208使用。在一些实施例中,装置100被配置为通过反向信道端点3904连接到用户数据库3906。
图40例示说明采用来自VS服务器206和NAV服务器208的数据搜索一个或多个地点和/或计算导航(例如,路线引导)数据的控制器124或移动应用218的示例配置4000。例如,装置100可以被配置为基于从用户4002接收的语音输入(例如,所讲的指令/查询)来为用户4002提供搜索地点和/或路线引导(例如,显示和/或音频)输出。控制器124或移动应用218可以被配置为连接到VS服务器206以对语音输入进行处理,并且可以连接到导航/地图构建引擎4010和短语发生器4012(这二者可以通过服务器208使用),以接收搜索结果、导航数据(例如,路线引导指令、定时等)或其他的基于地点的信息。导航技能4008可以通过移动应用218被启用以促进VS服务器206和NAV服务器208之间的连接。控制器124或移动应用218还可以被配置为连接到用户数据库4006,用户数据库4006可以通过服务器206或服务器208使用。在一些实施例中,控制器124或移动应用218被配置为通过反向信道端点4004连接到用户数据库4006。如图40所示,控制器124或移动应用218可以提供指示基于用户的查询的多个建议(例如,搜索结果)的音频输出,其中,用户4002可以通过接受或拒绝装置100提供的建议来做出响应。
图41A和41B例示说明采用来自VS服务器206和NAV服务器208的数据来在路线引导期间提供基于地点的信息(例如,交通信息/更新)的装置100的示例配置4100。例如,装置100可以被配置为基于从用户4102接收的语音输入(例如,所讲的指令/查询)来为用户4102提供与交通信息相关联的显示和/或音频输出。控制器124和/或移动应用218可以被配置为连接到TTS引擎4110以下载即将来到的路线引导指令和/或交通信息的附加TTS数据。控制器124和/或移动应用218还可以被配置为连接到VS服务器206以对语音输入进行处理,并且可以连接到导航/地图构建引擎4112、交通提供器4114和短语发生器4118(都可以通过服务器208使用),以接收搜索结果、导航数据(例如,路线引导指令、定时等)或其他的基于地点的信息(例如,交通信息/更新)。导航技能4108可以通过移动应用218被启用以促进VS服务器206和NAV服务器208之间的连接。控制器124和/或移动应用218还可以被配置为连接到用户数据库4106,用户数据库4106可以通过服务器206或服务器208使用。在一些实施例中,装置100被配置为通过反向信道端点4104连接到用户数据库4106、TTS引擎4110、导航/地图构建引擎4112、交通提供器4114和/或短语发生器4118。如图41A所示,装置100可以在为用户4102提供路线引导(例如,导航数据)的同时提供与交通信息相关联的音频输出。控制器124和/或移动应用218还可以被配置为为用户4102提供替代路线并且从用户4102接收语音输入以基于交通信息改变路线。
图42A和42B例示说明采用来自VS服务器206和NAV服务器208的数据搜索一个或多个地点和/或计算导航(例如,路线引导)数据的装置100的示例配置4200,其中,家庭移动应用接口装置4206(例如,AMAZON ECHO装置等)用于从用户4202接收语音输入(例如,所讲的指令/查询)。例如,装置100可以被配置为基于经由家庭移动应用接口装置4206从用户4202接收的语音输入(例如,所讲的指令/查询)来为用户4202提供搜索地点和/或路线引导(例如,显示和/或音频)输出。装置100和家庭移动应用接口装置4206可以被配置为连接到VS服务器206以对语音输入进行处理,并且可以连接到导航/地图构建引擎4218和短语发生器4216(这二者可以通过服务器208使用),以接收搜索结果、导航数据(例如,路线引导指令、定时等)或其他的基于地点的信息。导航技能4214可以通过移动应用218被启用以促进VS服务器206和NAV服务器208之间的连接。装置100和家庭移动应用接口装置4206还可以被配置为连接到用户数据库4210,用户数据库4210可以通过服务器206或服务器208使用。在一些实施例中,装置100和家庭移动应用接口装置4206被配置为通过反向信道端点4208连接到用户数据库4210、TTS引擎4212、导航/地图构建引擎4218和/或短语发生器4216。如图42A所示,装置100可以被关闭,然而用户4202可以与家庭移动应用接口装置4206进行交互,家庭移动应用接口装置4206被配置为提供指示基于用户的查询的多个建议(例如,搜索结果)的音频输出,其中,用户4202可以通过接受或拒绝建议并且指示家庭移动应用接口装置4206保存结果以供装置100提供路线引导来做出响应。当装置100开启时,装置100可以被配置为发起对于保存的搜索结果的路线引导和/或询问用户402是否发起对于保存的搜索结果的路线引导。
尽管已经参照附图中例示说明的实施例描述了本技术,但是在不脱离权利要求中记载的技术的范围的情况下,可以采用等同形式,并且可以在其中做出替换。例如,本文中所描述的组件无需在物理上彼此连接,因为各种所描绘的组件之间的无线通信是准许的,并且意图落在本发明的范围内。本文中例示说明和描述的组件仅仅是可以用于实现本发明的实施例的装置和组件的例子,并且在不脱离本发明的范围的情况下,可以被替换为其他装置和组件。

Claims (14)

1.一种用于与在移动装置上运行的移动应用接口以提供交通工具导航辅助的装置,所述装置包括:
麦克风;
地点确定组件;
显示器;
多个指示灯;
短距离通信收发器,所述短距离通信收发器被配置为将通信信息发送到所述移动装置并且从所述移动装置接收通信信息;以及
控制器,所述控制器与所述麦克风、所述地点确定组件、所述显示器、所述多个指示灯和所述短距离通信收发器通信地耦合,所述控制器被配置为:
经由所述麦克风从用户接收所讲的指令或查询;
经由所述短距离通信收发器将与所讲的指令或查询相关联的数据发送到在所述移动装置上运行的所述移动应用;
经由所述短距离通信收发器从在所述移动装置上运行的所述移动应用接收基于所讲的指令或查询的导航数据;
基于经由所述地点确定组件接收的一个或多个信号来确定当前位置;以及
基于导航数据和当前位置来经由所述显示器提供符号输出或文本输出中的至少一个。
2.根据权利要求1所述的装置,其中,符号输出或文本输出中的所述至少一个与基于导航数据和当前位置使用户跟随的下一次调转相关联,并且其中,所述控制器被进一步配置为使所述多个指示灯基于当前位置和下一次调转之间的距离显示动态照明图案。
3.根据权利要求1所述的装置,其中,符号输出或文本输出中的所述至少一个与基于导航数据和当前位置的到目的地的距离相关联。
4.根据权利要求3所述的装置,其中,所述控制器被配置为在当前位置离目的地小于阈值距离、或者当前位置对应于无标记的地点时,发起到达模式,并且其中,符号输出或文本输出中的所述至少一个包括指向目的地的箭头和到目的地的距离。
5.根据权利要求3所述的装置,其中,所述控制器被配置为使所述多个指示灯基于当前位置和目的地之间的距离显示动态照明图案。
6.根据权利要求1所述的装置,进一步包括:
相机,所述相机通信地耦合到所述控制器,其中,所述控制器被进一步配置为接收所述相机在所述装置运动时记录的至少一个图像或视频,并且被进一步配置为响应于基于所述相机在所述装置运动时记录的所述至少一个图像或视频检测到距离所述相机的视场中的物体小于阈值接近度,使所述多个指示灯显示前向碰撞警报照明图案。
7.根据权利要求1所述的装置,进一步包括:
相机,所述相机通信地耦合到所述控制器,其中,所述控制器被进一步配置为接收所述相机在所述装置运动时记录的至少一个图像或视频,并且被进一步配置为响应于基于所述相机在所述装置运动时记录的所述至少一个图像或视频检测到距离所述相机的视场中的车道之间的参考对齐至少存在阈值偏离,使所述多个指示灯显示车道偏离警报照明图案。
8.一种用于交通工具导航辅助的系统,所述系统包括:
移动装置,所述移动装置包括存储器和处理器,所述处理器被配置为运行来自所述存储器的移动应用;以及
用于与在所述移动装置上运行的所述移动应用接口的装置,所述装置包括:
麦克风;
地点确定组件;
显示器;
多个指示灯;
短距离通信收发器,所述短距离通信收发器被配置为将通信信息发送到所述移动装置并且从所述移动装置接收通信信息;以及
控制器,所述控制器与所述麦克风、所述地点确定组件、所述显示器、所述多个指示灯和所述短距离通信收发器通信地耦合,所述控制器被配置为:
经由所述麦克风从用户接收所讲的指令或查询;
经由所述短距离通信收发器将与所讲的指令或查询相关联的数据发送到在所述移动装置上运行的所述移动应用;
经由所述短距离通信收发器从在所述移动装置上运行的所述移动应用接收基于所讲的指令或查询的导航数据;
基于经由所述地点确定组件接收的一个或多个信号来确定当前位置;以及
基于导航数据和当前位置来经由所述显示器提供符号输出或文本输出中的至少一个。
9.根据权利要求8所述的系统,其中,符号输出或文本输出中的所述至少一个与基于导航数据和当前位置使用户跟随的下一次调转相关联,并且其中,所述控制器被进一步配置为使所述多个指示灯基于当前位置和下一次调转之间的距离显示动态照明图案。
10.根据权利要求8所述的系统,其中,符号输出或文本输出中的所述至少一个与基于导航数据和当前位置的到目的地的距离相关联。
11.根据权利要求10所述的系统,其中,所述控制器被配置为在当前位置离目的地小于阈值距离、或者当前位置对应于无标记的地点时,发起到达模式,并且其中,符号输出或文本输出中的所述至少一个包括指向目的地的箭头和到目的地的距离。
12.根据权利要求10所述的系统,其中,所述控制器被配置为使所述多个指示灯基于当前位置和目的地之间的距离显示动态照明图案。
13.根据权利要求8所述的系统,其中,所述装置进一步包括:
相机,所述相机通信地耦合到所述控制器,其中,所述控制器被进一步配置为接收所述相机在所述装置运动时记录的至少一个图像或视频,并且被进一步配置为响应于基于所述相机在所述装置运动时记录的所述至少一个图像或视频检测到距离所述相机的视场中的物体小于阈值接近度,使所述多个指示灯显示前向碰撞警报照明图案。
14.根据权利要求8所述的系统,其中,所述装置进一步包括:
相机,所述相机通信地耦合到所述控制器,其中,所述控制器被进一步配置为接收所述相机在所述装置运动时记录的至少一个图像或视频,并且被进一步配置为响应于基于所述相机在所述装置运动时记录的所述至少一个图像或视频检测到距离所述相机的视场中的车道之间的参考对齐至少存在阈值偏离,使所述多个指示灯显示车道偏离警报照明图案。
CN201880021137.1A 2017-04-18 2018-03-29 用于交通工具导航辅助的移动应用接口装置 Active CN110462341B (zh)

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
US201762486653P 2017-04-18 2017-04-18
US62/486,653 2017-04-18
US201762563962P 2017-09-27 2017-09-27
US62/563,962 2017-09-27
US201762596990P 2017-12-11 2017-12-11
US62/596,990 2017-12-11
US15/862,385 2018-01-04
US15/862,385 US20180299289A1 (en) 2017-04-18 2018-01-04 Mobile application interface device for vehicle navigation assistance
PCT/US2018/025071 WO2018194811A1 (en) 2017-04-18 2018-03-29 Mobile application interface device for vehicle navigation assistance

Publications (2)

Publication Number Publication Date
CN110462341A true CN110462341A (zh) 2019-11-15
CN110462341B CN110462341B (zh) 2023-07-07

Family

ID=63791804

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880021137.1A Active CN110462341B (zh) 2017-04-18 2018-03-29 用于交通工具导航辅助的移动应用接口装置

Country Status (4)

Country Link
US (2) US10900800B2 (zh)
EP (1) EP3612800A4 (zh)
CN (1) CN110462341B (zh)
WO (1) WO2018194811A1 (zh)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10819943B2 (en) 2015-05-07 2020-10-27 Magna Electronics Inc. Vehicle vision system with incident recording function
US11638869B2 (en) * 2017-04-04 2023-05-02 Sony Corporation Information processing device and information processing method
US11085788B2 (en) * 2017-06-02 2021-08-10 Apple Inc. Lane and smart guidance between navigation maneuvers
US11575732B1 (en) * 2017-06-23 2023-02-07 8X8, Inc. Networked device control using a high-level programming interface
USD860291S1 (en) * 2017-09-27 2019-09-17 Garmin Switzerland Gmbh Camera device with display
US10591309B2 (en) * 2017-10-12 2020-03-17 International Business Machines Corporation Autonomous vehicle-based guided tour rule selection
US10895460B2 (en) * 2017-11-06 2021-01-19 Cybernet Systems Corporation System and method for generating precise road lane map data
US10540970B2 (en) 2017-12-12 2020-01-21 Amazon Technologies, Inc. Architectures and topologies for vehicle-based, voice-controlled devices
US10629199B1 (en) * 2017-12-12 2020-04-21 Amazon Technologies, Inc. Architectures and topologies for vehicle-based, voice-controlled devices
DE102018003190A1 (de) * 2018-04-18 2019-10-24 Paragon Ag Sprachassistenzvorrichtung für Kraftfahrzeuge
JP7149874B2 (ja) * 2019-02-18 2022-10-07 株式会社日立物流 運転支援システム及び運転支援方法
DE102019113064A1 (de) * 2019-05-17 2020-11-19 Man Truck & Bus Se Autonomes Kraftfahrzeug und Verfahren zum Betreiben eines autonomen Kraftfahrzeugs
US11880258B2 (en) * 2019-07-11 2024-01-23 Continental Automotive Systems, Inc. Performance optimization based on HMI priorities
DE102020208654A1 (de) * 2019-07-11 2021-01-14 Continental Automotive Systems, Inc. Leistungsoptimierung basierend auf HMI-Prioritäten
CN110675873B (zh) * 2019-09-29 2023-02-07 百度在线网络技术(北京)有限公司 智能设备的数据处理方法、装置、设备及存储介质
USD933081S1 (en) * 2019-10-11 2021-10-12 Igt Gaming machine computer display screen with changeable award indicator
EP4131212A4 (en) * 2020-03-27 2024-05-01 Pioneer Corp INFORMATION PROVIDING DEVICE, INFORMATION PROVIDING METHOD, AND INFORMATION PROVIDING PROGRAM
US20220155092A1 (en) * 2020-11-17 2022-05-19 Logistics and Supply Chain MultiTech R&D Centre Limited Method of navigating a visually impaired user, a navigation system for the same, and a guiding robot
KR20220090167A (ko) * 2020-12-22 2022-06-29 현대자동차주식회사 모바일 장치 및 차량
US11462021B2 (en) * 2021-01-13 2022-10-04 GM Global Technology Operations LLC Obstacle detection and notification for motorcycles
US20230062489A1 (en) * 2021-08-24 2023-03-02 Google Llc Proactively activating automated assistant driving modes for varying degrees of travel detection confidence

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030014187A1 (en) * 2001-07-02 2003-01-16 Samsung Electronics Co., Ltd. Vehicle navigation network, apparatus and method for use in a mobile telecommunication system
CN101364223A (zh) * 2007-06-25 2009-02-11 法国电信公司 用于提供可导航搜索结果的方法和系统
US20090164110A1 (en) * 2007-12-10 2009-06-25 Basir Otman A Vehicle communication system with destination selection for navigation
CN101641569A (zh) * 2007-01-10 2010-02-03 通腾科技股份有限公司 导航装置、操作包含音频辨识模式的所述导航装置的方法和计算机程序
US20100106406A1 (en) * 2007-04-30 2010-04-29 Peiker Acustic Gmbh & Co. Navigation system and control unit for navigation system
CN101946157A (zh) * 2008-03-14 2011-01-12 通腾科技股份有限公司 改进的导航装置及方法
US20110098918A1 (en) * 2009-10-28 2011-04-28 Google Inc. Navigation Images
US20130325324A1 (en) * 2012-06-05 2013-12-05 Wistron Corporation Navigation device and navigation method capable of presenting prompt information with different light effects
KR20150116693A (ko) * 2014-04-08 2015-10-16 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US20160116298A1 (en) * 2014-10-24 2016-04-28 Leadnav Systems, Llc System and method for using audible waypoints in mobile navigation

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4100803B2 (ja) 1999-02-23 2008-06-11 アルパイン株式会社 ナビゲーション装置の車両誘導方法
US11208129B2 (en) * 2002-06-04 2021-12-28 Transportation Ip Holdings, Llc Vehicle control system and method
US7418276B2 (en) * 2002-06-26 2008-08-26 Motorola, Inc. Activation system and method for establishing a cellular voice communication through a radio system
US6741931B1 (en) * 2002-09-05 2004-05-25 Daimlerchrysler Corporation Vehicle navigation system with off-board server
US6768450B1 (en) * 2002-11-07 2004-07-27 Garmin Ltd. System and method for wirelessly linking a GPS device and a portable electronic device
US7116216B2 (en) * 2004-07-22 2006-10-03 Keith Andreasen Serial data gauge
JP2007292713A (ja) 2006-03-30 2007-11-08 Denso Corp ナビゲーション装置
US20090271200A1 (en) * 2008-04-23 2009-10-29 Volkswagen Group Of America, Inc. Speech recognition assembly for acoustically controlling a function of a motor vehicle
US8407057B2 (en) * 2009-01-21 2013-03-26 Nuance Communications, Inc. Machine, system and method for user-guided teaching and modifying of voice commands and actions executed by a conversational learning system
US10046716B2 (en) 2011-02-10 2018-08-14 Denso Corporation In-vehicle camera and vehicle control system
JP5234160B2 (ja) 2011-03-23 2013-07-10 株式会社デンソー 車両用装置および情報表示システム
US9285944B1 (en) * 2011-04-22 2016-03-15 Angel A. Penilla Methods and systems for defining custom vehicle user interface configurations and cloud services for managing applications for the user interface and learned setting functions
US9116563B2 (en) * 2011-10-28 2015-08-25 Honda Motor Co., Ltd. Connecting touch screen phones in a vehicle
US20140116085A1 (en) * 2012-10-30 2014-05-01 Bin Lam Methods, systems, and apparatuses for incorporating wireless headsets, terminals, and communication devices into fashion accessories and jewelry
JP5928320B2 (ja) * 2012-12-07 2016-06-01 株式会社日立製作所 電気自動車向けナビゲーションシステム
WO2014087200A1 (en) * 2012-12-07 2014-06-12 Nokia Corporation An apparatus and method to provide a user with an indication of a direction to a particular destination.
KR102011457B1 (ko) 2013-04-17 2019-08-19 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
TWI535585B (zh) 2013-06-03 2016-06-01 鴻海精密工業股份有限公司 汽車、應用於汽車上之車載輔助系統及車載輔助裝置
US20140357248A1 (en) * 2013-06-03 2014-12-04 Ford Global Technologies, Llc Apparatus and System for Interacting with a Vehicle and a Device in a Vehicle
US20140379338A1 (en) * 2013-06-20 2014-12-25 Qnx Software Systems Limited Conditional multipass automatic speech recognition
US9997160B2 (en) * 2013-07-01 2018-06-12 Toyota Motor Engineering & Manufacturing North America, Inc. Systems and methods for dynamic download of embedded voice components
US9953471B2 (en) * 2013-12-30 2018-04-24 Craig Arnold Tieman Connected vehicle system with infotainment interface for mobile devices
US20150193093A1 (en) * 2014-01-06 2015-07-09 Ford Global Technologies, Llc Method and system for a head unit application host
EP3132432B1 (en) * 2014-04-18 2020-01-01 Gentex Corporation Trainable transceiver
GB201507851D0 (en) * 2015-05-07 2015-06-17 Putnam Thomas D M And Jenner Mark J A city navigation device, primarily for use on bicycles (the "Invention")
CN106218501B (zh) * 2015-06-02 2019-05-21 奥迪股份公司 操作机动车辆的方法和控制系统
US9605970B1 (en) * 2015-09-03 2017-03-28 Harman International Industries, Incorporated Methods and systems for driver assistance
KR101824982B1 (ko) 2015-10-07 2018-02-02 엘지전자 주식회사 차량 및 그 제어방법
US20170308689A1 (en) * 2016-04-26 2017-10-26 Bragi GmbH Gesture-based Wireless Toggle Control System and Method
AU2017285019B2 (en) * 2016-06-15 2022-11-10 Irobot Corporation Systems and methods to control an autonomous mobile robot
US20180012197A1 (en) * 2016-07-07 2018-01-11 NextEv USA, Inc. Battery exchange licensing program based on state of charge of battery pack
US10231273B2 (en) * 2017-06-02 2019-03-12 GM Global Technology Operations LLC Vehicle wireless device connection management with switchover of primary connected device
US10848719B2 (en) * 2017-09-13 2020-11-24 Alarm.Com Incorporated System and method for gate monitoring during departure or arrival of an autonomous vehicle
US20190082378A1 (en) * 2017-09-14 2019-03-14 GM Global Technology Operations LLC Location-based vehicle and mobile device integration system

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030014187A1 (en) * 2001-07-02 2003-01-16 Samsung Electronics Co., Ltd. Vehicle navigation network, apparatus and method for use in a mobile telecommunication system
CN101641569A (zh) * 2007-01-10 2010-02-03 通腾科技股份有限公司 导航装置、操作包含音频辨识模式的所述导航装置的方法和计算机程序
US20100106406A1 (en) * 2007-04-30 2010-04-29 Peiker Acustic Gmbh & Co. Navigation system and control unit for navigation system
CN101364223A (zh) * 2007-06-25 2009-02-11 法国电信公司 用于提供可导航搜索结果的方法和系统
US20090164110A1 (en) * 2007-12-10 2009-06-25 Basir Otman A Vehicle communication system with destination selection for navigation
CN101946157A (zh) * 2008-03-14 2011-01-12 通腾科技股份有限公司 改进的导航装置及方法
US20110098918A1 (en) * 2009-10-28 2011-04-28 Google Inc. Navigation Images
CN102804181A (zh) * 2009-10-28 2012-11-28 谷歌公司 导航查询
US20130325324A1 (en) * 2012-06-05 2013-12-05 Wistron Corporation Navigation device and navigation method capable of presenting prompt information with different light effects
KR20150116693A (ko) * 2014-04-08 2015-10-16 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US20160116298A1 (en) * 2014-10-24 2016-04-28 Leadnav Systems, Llc System and method for using audible waypoints in mobile navigation

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
PHILIP BARKER: ""How to use HERE WeGo on your Samsung Gear S3"", pages 1 - 6 *

Also Published As

Publication number Publication date
EP3612800A4 (en) 2021-04-21
US20180299288A1 (en) 2018-10-18
US20180299289A1 (en) 2018-10-18
CN110462341B (zh) 2023-07-07
WO2018194811A1 (en) 2018-10-25
EP3612800A1 (en) 2020-02-26
US10900800B2 (en) 2021-01-26

Similar Documents

Publication Publication Date Title
CN110462341A (zh) 用于交通工具导航辅助的移动应用接口装置
KR101766036B1 (ko) 내비게이션 시스템에서 관심 집적점을 위한 장치, 시스템 및 방법
CN105229417B (zh) 具有动态更新机制的导航系统及其操作的方法
KR102087920B1 (ko) 루트 제안들의 제공
KR102000267B1 (ko) 컨텍스트에 기초한 입력 명확화
US9807601B2 (en) Geo-fencing based functions
KR101545302B1 (ko) 파라미터리스 검색 쿼리에 대한 결과 제공 방법
JP2020038710A (ja) 所定の位置データ点の決定およびサービス提供者への供給
CN102132589A (zh) 用于显示所监视位置的用户定义名称
JP2007147439A (ja) ナビゲーション装置
CN102037328A (zh) 导航设备、服务器设备以及提供关注点数据的方法
US9651397B2 (en) Navigation route scheduler
WO2021129703A1 (zh) 到站提醒的方法、装置、终端及存储介质
JP2015148582A (ja) 案内装置
CN106470240A (zh) 用于车辆的数据传输系统
CN110536240A (zh) 使适应性地理围栏结合车辆工作的方法和设备
JPWO2019009039A1 (ja) リスト作成プログラム、リスト作成方法、リスト作成装置、リスト作成システム、および記憶媒体
JP2007192839A (ja) ナビゲーションシステム、情報送信装置、ナビゲーション装置
JP2017075968A (ja) 表示装置
JP2021103903A (ja) 電子機器、制御方法、およびプログラム
JP2004133548A (ja) 情報提供サービス方法および情報提供サービスシステム
CN112749349A (zh) 一种交互方法和耳机设备
US20120209508A1 (en) Route Determination Arrangement and Method
JP2015114877A (ja) 検索支援装置、通信システム、検索支援方法及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant