CN107580104B - 移动终端以及包括该移动终端的控制系统 - Google Patents

移动终端以及包括该移动终端的控制系统 Download PDF

Info

Publication number
CN107580104B
CN107580104B CN201710533722.7A CN201710533722A CN107580104B CN 107580104 B CN107580104 B CN 107580104B CN 201710533722 A CN201710533722 A CN 201710533722A CN 107580104 B CN107580104 B CN 107580104B
Authority
CN
China
Prior art keywords
vehicle
display
mobile terminal
terminal
driving state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710533722.7A
Other languages
English (en)
Other versions
CN107580104A (zh
Inventor
诸葛灿
金仁植
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN107580104A publication Critical patent/CN107580104A/zh
Application granted granted Critical
Publication of CN107580104B publication Critical patent/CN107580104B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W8/00Network data management
    • H04W8/22Processing or transfer of terminal data, e.g. status or physical capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Arrangement of adaptations of instruments
    • B60K35/10
    • B60K35/212
    • B60K35/85
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841Registering performance data
    • G07C5/085Registering performance data using electronic data carriers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72463User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions to restrict the functionality of the device
    • B60K2360/589
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/0088Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2201/00Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/34Microprocessors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2201/00Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/38Displays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/06Details of telephonic subscriber devices including a wireless LAN interface

Abstract

移动终端以及包括该移动终端的控制系统。提供了具有显示器的移动终端以及包括该移动终端的系统,具体地,提供了能够向车辆发送数据和从车辆接收数据的移动终端以及包括该移动终端的系统。所述移动终端包括与具有车辆显示器的车辆通信的通信单元和使用通信单元从车辆接收驾驶信息的控制器,其中,控制器响应于事件的发生而执行特定功能,基于驾驶信息在与所执行的功能对应的多个执行画面当中选择任一个执行画面,并且通过通信单元将所述任一个执行画面发送到车辆,使得在车辆显示器上输出所述任一个执行画面。

Description

移动终端以及包括该移动终端的控制系统
技术领域
本公开涉及具有显示器的移动终端,并且具体地,涉及能够向车辆发送数据和从车辆接收数据的移动终端以及包括该移动终端的系统。
背景技术
终端通常可根据其移动性而被分成移动/便携式终端或固定终端。移动终端还可根据用户是否能够直接携带终端而被分成手持终端或车载终端。
移动终端已经变得越来越多功能化。这些功能的示例包括数据和语音通信、经由相机拍摄图像和视频、记录音频、经由扬声器系统播放音乐文件以及在显示器上显示图像和视频。一些移动终端包括支持玩游戏的附加功能,而其它终端被配置成多媒体播放器。最近,移动终端已经被配置为接收允许观看诸如视频和电视节目的内容的广播和多播信号。
随着这些功能变得更多样化,移动终端可支持更复杂的功能,例如拍摄图像或视频、再现音乐或视频文件、玩游戏、接收广播信号等。通过全面地和集总地实现这些功能,移动终端可按照多媒体播放器或装置的形式来具体实现。
终端被认为是现代人的必需品,但在一些情况下法律上禁止使用终端。例如,当驾驶员驾驶车辆时,除了需要紧急情况的例外情况以外,禁止驾驶员操作和使用移动终端。这是为了防止由于使用移动终端分散驾驶员的注意力而可能发生的事故。
然而,尽管有法律限制,但是频繁发生由于使用移动终端而造成的交通事故,并且用户在驾驶期间使用移动终端的需要也在增加。
为了满足用户的需要,近来已经开发了允许驾驶员经由车辆使用终端的功能的终端和所连接的车辆以及包括它们的系统。根据最近开发的系统,当执行安装在移动终端中的诸如呼叫、消息、地图等应用时,可以经由设置在车辆中的电/电子部件来输出执行画面或其语音信息。
然而,为了使得能够按照规定来执行终端的功能,存在对在车辆中执行的功能的各种限制。例如,仅可以允许执行安装在终端中的各种应用中的一些预设应用,或者显示在车辆显示器上的执行画面中所包括的字母数量可能被限制在规定的最大值内。
驾驶期间限制使用终端是为了预先防止可能妨碍驾驶的因素,并且这里,引入了甚至在没有驾驶员干预的情况下通过程序执行自动驾驶,移动终端可能不再是驾驶的障碍。
因此,在车辆通过驾驶员的干预而行驶的手动驾驶状态和车辆通过程序而行驶的自动驾驶状态下,需要按照不同的方式操作终端。
发明内容
因此,详细描述的一个方面是为了解决上述问题和任何其它问题。
本公开的另一方面提供了一种移动终端及其控制方法,该移动终端能够提高驾驶员便利并且防止可用于自动驾驶的车辆的交通事故。
本公开的另一方面提供了一种移动终端及其控制方法,该移动终端能够在自动驾驶期间警告使用移动终端的用户关于驾驶情况的变化。
本公开的另一方面提供了一种移动终端及其控制方法,该移动终端能够将执行自动驾驶的情况划分为多个阶段并且提供针对每个阶段优化的用户界面。
为了实现这些和其它优点,并且根据本说明书的目的,如本文所具体实现和广泛描述的,一种移动终端可以包括:与具有车辆显示器的车辆通信的通信单元;以及使用所述通信单元从所述车辆接收驾驶信息的控制器,其中,所述控制器响应于事件的发生而执行特定功能,基于所述驾驶信息在与所执行的功能对应的多个执行画面当中选择任一个执行画面,并且通过所述通信单元将所述任一个执行画面发送到所述车辆,使得在所述车辆显示器上输出所述任一个执行画面。
为了实现这些和其它优点,并且根据本说明书的目的,如本文具体实现和广泛描述的,一种包括如上所述的至少一个移动终端的系统。该系统可以包括:车辆控制装置,所述车辆控制装置安装在具有车辆显示器的车辆中,收集所述车辆的驾驶信息,并且控制所述车辆显示器;以及移动终端,所述移动终端从所述车辆控制装置接收所述驾驶信息,其中,所述移动终端响应于事件的发生而执行特定功能,基于所述驾驶信息在与所执行的功能对应的多个执行画面当中选择任一个执行画面,并且通过所述通信单元将所述任一个执行画面发送到所述车辆,使得在所述车辆显示器上输出所述任一个执行画面,并且当接收到所述任一个执行画面时,所述车辆控制装置向所述车辆显示器输出所述任一个执行画面。
根据本公开的移动终端具有以下优点。
由于在根据车辆的驾驶状态提高安全性的同时执行控制以优化驾驶员的便利性,因此可以提高驾驶员的便利性,并且可以防止可用于自动驾驶的车辆的交通事故。
由于向在自动驾驶期间使用移动终端的驾驶员警告驾驶状况的变化,因此驾驶员可以在紧急情况下立即切换到手动驾驶。
从下面给出的详细描述中,本申请的进一步适用范围将变得更加明显。然而,应当理解的是,详细描述和具体示例在指示本发明的优选实施方式的同时仅以例示的方式给出,因为对于本领域技术人员来说,在本发明的范围内的各种改变和修改从详细的说明将变得显而易见。
附图说明
根据下文给出的详细描述和附图,本发明将被更加全面地理解,这些附图仅是例示进而不是对本发明的限制,并且,在附图中:
图1A是根据本公开的移动终端的框图。
图1B和图1C是从不同方向看时移动终端的一个示例的概念图。
图2是示出根据本公开的实施方式的系统的框图。
图3A至图3C是示出手动驾驶状态下的移动终端和车辆的操作的图。
图4是示出自动驾驶状态下的移动终端和车辆的操作的流程图。
图5是示出根据图4的控制方法输出主屏幕页面的实施方式的图。
图6是示出根据图4的控制方法输出音乐播放应用的执行画面的实施方式的图。
图7A至图7C是示出根据图4的控制方法输出道路指引应用的执行画面的实施方式的图。
图8A和图8B是示出手动驾驶状态下的移动终端的操作的图。
图9A至图9E是示出自动驾驶状态下的移动终端的操作的图。
图10是示出在自动驾驶状态下添加到移动终端的用户界面的概念图。
图11是示出将自动驾驶状态划分为多种模式并且根据各模式执行不同操作的移动终端的概念图。
具体实施方式
参考附图,现在将根据在此公开的示例性实施方式详细地给出描述。为了参考附图简要描述,相同的或者等效的组件可以被设有相同或者相似的附图标记,并且其描述将不会被重复。通常,诸如“模块”和“单元”的后缀可以被用于指代元件或者组件。这样的后缀的使用在此旨在仅有助于说明书的描述,并且后缀本身旨在没有给予任何特定的意义或者功能。在本公开中,为了简要,通常已经省略了在相关领域中对于普通技术人员来说公知的那些。附图被用于帮助容易地理解各种技术特征并且应理解附图没有限制在此提出的实施方式。正因如此,本公开应被解释为延伸到除了在附图中特别陈述的之外的任何改变、等同物以及替代。
将要理解的是,尽管在此可以使用术语第一、第二等等以描述各种元件,但是这些元件不应被这些术语限制。这些术语通常仅被用于区分一个元件与另一个元件。
将要理解的是,当元件被称为“连接”另一元件时,元件能够与另一元件连接或者也可以存在中间元件。相反地,当元件被称为“直接地连接”另一元件时,不存在中间元件。
单数表示可以包括复数表示,除非根据上下文其表示明确不同的意义。在此使用诸如“包括”或者“具有”的术语并且应理解它们旨在指示在本说明书中公开的数个组件、功能或者步骤的存在,并且也理解可以同样地利用更多或者更少的组件、功能或者步骤。
可以使用各种不同类型的终端实现在此提出的移动终端。这样的终端的示例包括蜂窝电话、智能电话、用户装置、膝上型计算机、数字广播终端、个人数字助手(PDA)、便携式多媒体播放器(PMP)、导航仪、便携式计算机(PC)、板式PC、平板PC、超级本、可佩戴装置(例如,智能手表、智能眼镜、头戴式显示器(HMD))等等。
仅通过非限制性示例,将会参考特定类型的移动终端进行进一步的描述。然而,这样的教导同等地应用于其它类型的终端,诸如在上面注明的那些类型。另外,这样的教导也可以被应用于诸如数字TV、桌上型计算机等等的固定终端。
现在参考图1A-1C,其中图1A是根据本公开的移动终端的框图,并且图1B和图1C是从不同的方向看到的移动终端的一个示例的概念图。
示出移动终端100,其具有诸如无线通信单元110、输入单元120、感测单元140、输出单元150、接口单元160、存储器170、控制器180、以及电源单元190的各种组件。理解的是,不要求实现所有图示的组件,并且可以替换地实现更多或者更少的组件。
现在参考图1A,示出移动终端100,该移动终端100具有被配置有数个被共同实现的组件的无线通信单元110。例如,无线通信单元100通常包括允许在移动终端100与无线通信系统或者移动终端位于的网络之间的无线通信的一个或多个组件。
无线通信单元110通常包括一个或者多个模块,其允许诸如在移动终端100和无线通信系统之间的无线通信的通信、在移动终端100和另一移动终端之间的通信、在移动终端100与外部服务器之间通信。此外,无线通信单元110通常包括将移动终端100连接到一个或者多个网络的一个或者多个模块。为了有助于这样的通信,无线通信单元110包括一个或者多个广播接收模块111、移动通信模块112、无线互联网模块113、短程通信模块114、以及位置信息模块115中的一个或者多个。
输入单元120包括:用于获得图像或者视频的相机121;麦克风122,该麦克风122是一种用于输入音频信号的音频输入装置;以及用于允许用户输入信息的用户输入单元123(例如,触摸键、推动键、机械键、软键等等)。数据(例如,音频、视频、图像等等)通过输入单元120被获得并且可以根据装置参数、用户命令、以及其组合通过控制器180分析和处理。
通常使用被配置成感测移动终端的内部信息、移动终端的周围环境、用户信息等等的一个或者多个传感器实现感测单元140。例如,在图1A中,示出具有接近传感器141和照度传感器142的感测单元140。
必要时,感测单元140可以可替选地或者附加地包括其它类型的传感器或者装置,诸如触摸传感器、加速度传感器、磁传感器、G传感器、陀螺仪传感器、运动传感器、RGB传感器、红外(IR)传感器、手指扫描传感器、超声传感器、光学传感器(例如,相机121)、麦克风122、电池量表、环境传感器(例如,气压计、湿度计、温度计、辐射监测传感器、热传感器、以及气体传感器等)、以及化学传感器(例如,电子鼻、医疗传感器、生物传感器等等),举了一些例子。移动终端100可以被配置成利用从感测单元140获得的信息,并且特别地,从感测单元140的一个或者多个传感器及其组合获得的信息。
输出单元150通常被配置成输出诸如音频、视频、触觉输出等等的各种类型的信息。示出具有显示器151、音频输出模块152、触觉模块153、以及光学输出模块154的输出单元150。
显示器151可以具有与触摸传感器的层间结构或者集成结构以便于促成触摸屏幕。触摸屏幕可以在移动终端100和用户之间提供输出接口,并且用作在移动终端100和用户之间提供输入接口的用户输入单元123。
接口单元160用作对接能够被耦合到移动终端100的各种类型的外部装置。例如,接口单元160可以包括任何有线或者无线端口、外部电源端口、有线或者无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。在一些情况下,响应于被连接到接口单元160的外部装置,移动终端100可以执行与被连接的外部装置关联的各种控制功能。
存储器170通常被实现为存储数据以支持移动终端100的各种功能或者特征。例如,存储器170可以被配置成存储在移动终端100中执行的应用、用于移动终端100的操作的数据或者指令等等。经由无线通信可以从外部服务器下载这些应用中的一些。在制造或者装运时其它的应用可以被安装在移动终端100内,其通常是用于移动终端100的基本功能(例如,接收呼叫、拨打电话、接收消息、发送消息等等)的情况。通常,应用被存储在存储器170中、安装在移动终端100中,并且通过控制器180执行以执行用于移动终端100的操作(或者功能)。
除了与应用关联的操作之外,控制器180通常用作控制移动终端100的整体操作。控制器180能够通过处理通过在图1A中描述的各种组件输入或者输出的信号、数据、信息等等,或者激活被存储在存储器170中的应用来提供或者处理适合于用户的信息或者功能。作为一个示例,控制器180根据已经被存储在存储器170中的应用的执行控制在图1A-1C中图示的一些组件或者所有组件。
电源单元190能够被配置成接收外部电力或者提供内部电力以便于供应对于操作被包括在移动终端100中的元件和组件所要求的适当的电力。电源单元190可以包括电池,并且电池可以被配置成被嵌入在终端主体中,或者被配置成从终端主体可拆卸。
在下文中,在描述通过移动终端100实现的各种实施方式之前,将会更加详细地给出参考图1的前述组件的描述。关于无线通信单元110,广播接收模块111通常被配置成经由广播信道从外部广播管理实体接收广播信号和/或广播相关信息。广播信道可以包括卫星信道、陆地信道、或者两者。在一些实施方式中,可以利用两个或者更多个广播接收模块111以有助于同时接收两个或者更多个广播信道,或者支持广播信道当中的切换
移动通信模块112能够将无线信号发送到一个或者多个网络实体并且/或者从一个或者多个网络实体接收无线信号。网络实体的典型示例包括基站、外部移动终端、服务器等等。这样的网络实体形成移动通信网络的一部分,其根据用于移动通信(例如,全球移动通信系统(GSM)、码分多址(CDMA)、CDMA 2000(码分多址2000)、EV-DO(增强的语音数据优化或者仅增强的语音数据)、宽带CDMA(WCDMA)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、长期演进(LTE)、高级长期演进(LTE-A)等等)的技术标准或者通信方法构造。
经由移动通信模块112发送和/或接收的无线信号的示例包括音频呼叫信号、视频(电话)呼叫信号、或者各种格式的数据以支持文本和多媒体消息的通信。
无线互联网模块113被配置成有助于无线互联网接入。此模块可以被内部地或者外部地耦合到移动终端100。无线互联网模块113可以根据无线互联网技术经由通信网络发送和/或接收无线信号。
这样的无线互联网接入的示例包括无线LAN(WLAN)、无线保真(Wi-Fi)、Wi-Fi直连、数字生活网络联盟(DLNA)、无线宽带(Wibro)、全球微波接入互操作(Wimax)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、长期演进(LTE)、高级LTE(LTE-A)等等。无线互联网模块113可以根据一个或者多个这样的无线互联网技术,或者其它的互联网技术发送/接收数据。
在一些实施方式中,当根据作为移动通信网络的一部分的例如WiBro、HSDPA、HSUPA、GSM、CDMA、WCDMA、LTE、LTE-A等等实现无线互联网接入时,无线互联网模块113执行这样的无线互联网接入。这样,无线互联网模块113可以与移动通信模块112协作,或者用作移动通信模块112.
短程通信模块114被配置成有助于短程通信。适合于实现这样的短程通信的技术包括:蓝牙(BLUETOOTHTM)、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂(ZigBee)、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直连、无线USB(无线通用串行总线)等等。经由无线局域网,短程通信模块114通常支持在移动终端100和无线通信系统之间的无线通信,在移动终端100和另一移动终端100之间的通信、或者在移动终端和另一移动终端100(或者外部服务器)位于的网络之间的通信。无线局域网的一个示例是无线个人域网。
在一些实施方式中,另一移动终端(可以类似于移动终端100配置)可以是可佩戴设备,例如,智能手表、智能眼镜或者头戴式显示器(HMD),其能够与移动终端100交换数据(或者以其它方式与移动终端100协作)。短程通信模块114可以感测或者识别可佩戴设备,并且允许在可佩戴设备和移动终端100之间的通信。另外,当感测到的可佩戴设备是被授权与移动终端100通信的设备时,例如,控制器180可以使在移动终端100中处理的数据的至少一部分经由短程通信模块114传输到可佩戴设备。因此,可佩戴设备的用户可以在可佩戴设备上使用在移动终端100中处理的数据。例如,当在移动终端100中接收到呼叫时,用户可以使用可佩戴设备应答呼叫。而且,当在移动终端100中接收到消息时,用户能够使用可佩戴设备检查接收到的消息。
位置信息模块115通常被配置成检测、计算、导出或者以其它方式识别移动终端的位置。作为示例,位置信息模块115包括全球定位系统(GPS)模块、Wi-Fi模块、或者两者。如有必要,位置信息模块115可以替换地或附加地与无线通信单元110的任何其它模块起作用以获得与移动终端的位置有关的数据。
作为一个示例,当移动终端使用GPS模块时,可以使用从GPS卫星发送的信号获取移动终端的位置。作为另一示例,当移动终端使用Wi-Fi模块时,能够基于将无线信号发送到Wi-Fi模块或者从Wi-Fi模块接收无线信号的无线接入点(AP)有关的信息获取移动终端的位置。
输入单元120可以被配置成允许对移动终端100的各种类型的输入。这样的输入的示例包括音频、图像、视频、数据、以及用户输入。使用一个或者多个相机121经常获得图像和视频输入。这样的相机121可以处理在视频或者图像捕获模式下通过图像传感器获得的静止图片或者视频的图像帧。被处理的图像帧能够被显示在显示器151上或者被存储在存储器170中。同时,相机121可以以矩阵配置排列以允许具有多个角度或者焦点的多个图像被输入到移动终端100。而且,相机121可以位于立体排列以获取用于实现立体图像的左图像和右图像。
麦克风122一般被实现为准许将音频输入到移动终端100。根据在移动终端100中执行的功能能够以各种方式能够处理音频输入。如有必要,麦克风122可以包括各种噪声去除算法以去除在接收外部音频信号的过程中产生的不想要的噪声。
用户输入单元123是允许用户输入的组件。这样的用户输入可以使控制器180能够控制移动终端100的操作。用户输入单元123可以包括机械输入元件中的一个或者多个(例如,机械键、位于移动终端100的前和/或后表面或者侧表面上的按钮、薄膜开关、滚动轮、滚动开关等等)、或者触摸灵敏的输入元件等等。作为一个示例,触摸灵敏的输入元件可以是通过软件处理被显示在触摸屏上的虚拟键或者软键或者视觉键、或者位于在除了触摸屏之外的位置处的移动终端上的触摸键。另一方面,虚拟键或者视觉键可以以例如,图形、文本、图标、视频、或者其组合的各种形状显示在触摸屏上。
感测单元140通常被配置成感测移动终端的内部信息、移动终端的周围环境信息、用户信息等等中的一个或者多个。控制器180通常与感测单元140协作以基于感测信号控制移动终端100的操作或执行与被安装在移动终端中的应用关联的数据处理、功能或者操作。使用任何种类的传感器可以实现感测单元140,现在将会更加详细地描述其中的一些。
接近传感器141指的是在没有机械接触的情况下通过使用磁场、红外线等等感测接近表面的对象、或者位于表面附近的对象的存在或者不存在的传感器。接近传感器141可以被布置在通过触摸屏覆盖的移动终端的内部区域处,或者触摸屏附近。
例如,接近传感器141可以包括任何透射型光电传感器、直接反射型光电传感器、镜反射型光电传感器、高频振荡接近传感器、电容型接近传感器、磁型接近传感器、红外线接近传感器等等。当触摸屏被实现为电容型时,接近传感器141能够通过电磁场响应于具有导电性的对象的接近的变化来感测指示器相对于触摸屏的接近。在这样的情况下,触摸屏(触摸传感器)也可以被归类成接近传感器。
术语“接近触摸”将会在此被经常引用以表示其中指示器被定位为接近触摸屏而没有接触触摸屏的场景。术语“接触触摸”将会在此被经常引用以表示其中指示器物理接触触摸屏的场景。对于与指示器相对于触摸屏的接近触摸相对应的位置,这样的位置将会对应于其中指示器垂直于触摸屏的位置。接近传感器141可以感测接近触摸,和接近触摸模式(例如,距离、方向、速度、时间、位置、移动状态等等)。
通常,控制器180处理与通过接近传感器141感测到的接近触摸和接近触摸模式相对应的数据,并且使在触摸屏上能够输出视觉信息。另外,根据是否相对于触摸屏上的点的触摸是接近触摸或者接触触摸,控制器180能够控制移动终端100执行不同的操作或者处理不同的数据。
使用任何各种触摸方法,触摸传感器能够感测被施加到诸如显示器151的触摸屏的触摸。这样的触摸方法的示例包括电阻型、电容型、红外型、以及磁场型等等。
作为一个示例,触摸传感器可以被配置成将被施加到显示器151的特定部分的压力的变化转换成电输入信号,或者将在显示器151的特定部分处出现的电容转换成电输入信号。触摸传感器也可以被配置成不仅感测被触摸的位置和被触摸的区域,而且感测触摸压力和/或触摸电容。触摸对象通常被用于将触摸输入施加到触摸传感器。典型的触摸对象的示例包括手指、触摸笔、触笔、指示器等等。
当通过触摸传感器感测触摸输入时,相应的信号可以被传送到触摸控制器。触摸控制器可以处理接收到的信号,并且然后将相应的数据传送到控制器180。因此,控制器180可以感测已经触摸显示器151的哪一个区域。在此,触摸控制器可以是与控制器180分离的组件、控制器180、或者其组合。
在一些实施方式中,控制器180可以根据触摸了触摸屏或者除了触摸屏之外被设置的触摸键的触摸对象的类型执行相同或者不同的控制。例如,基于移动终端100的当前操作状态或者当前执行的应用,可以决定根据提供触摸输入的对象是否执行相同或者不同的控制。
触摸传感器和接近传感器可以被单独地或者组合实现,以感测各种类型的触摸。这样的触摸包括短(或者轻敲)触摸、长触摸、多点触摸、拖动触摸、轻击触摸、捏缩触摸、捏放触摸、滑动触摸、悬停触摸等等。
如有必要,超声传感器可以被实现以使用超声波识别与触摸对象有关的位置信息。例如,控制器180可以基于通过照度传感器和多个超声传感器感测到的信息计算波生成源的位置。因为光比超声波快得多,所以光到达光学传感器的时间远远比超声波到达超声传感器的时间短。使用此事实可以计算波生成源的位置。例如,可以基于光作为参考信号使用与超声波到达传感器的时间的时间差计算波生成源的位置。
相机121通常包括至少一个相机传感器(CCD、CMOS等等)、光传感器(或者图像传感器)、以及激光传感器。
实现具有激光传感器的相机121可以允许相对于3D立体图像的物理对象的触摸的检测。光传感器可以被层压在显示设备上,或者与显示设备重叠。光传感器可以被配置成扫描接近触摸屏的物理对象的移动。更加详细地,光传感器可以包括在行和列处的光电二极管和晶体管以使用根据被施加的光的量改变的电信号扫描在光传感器处接收到的内容。即,光传感器可以根据光的变化计算物理对象的坐标从而获得物理对象的位置信息。
显示器151通常被配置成输出在移动终端100中处理的信息。例如,显示器151可以显示在移动终端100处执行的应用的执行画面信息或者响应于执行画面信息的用户界面(UI)和图形用户界面(GUI)信息。
在一些实施方式中,显示器151可以被实现为用于显示立体图像的立体显示单元。典型的立体显示单元可以采用诸如立体方案(眼镜方案)、自动立体方案(无眼镜方案)、投影方案(全息方案)等等的立体显示方案。
音频输出模块152通常被配置成输出音频数据。可以从任何数量的不同的来源获得这样的音频数据,使得可以从无线通信单元110接收音频数据或者可以已经将其存储在存储器170中。可以在诸如信号接收模式、呼叫模式、记录模式、语音识别模式、广播接收模式等等的模式期间输出音频数据。音频输出模块152能够提供与由移动终端100执行的特定功能(例如,呼叫信号接收声音、消息接收声音等等)有关的音频输出。音频输出模块152也可以被实现为接收器、扬声器、蜂鸣器等等。
触觉模块153能够被配置成产生用户能够感觉、感知、或者以其它方式体验的各种触觉效果。通过触觉模块153产生的触觉效果的典型示例是振动。能够通过用户选择或者通过控制器进行设置来控制通过触觉模块155产生的振动的强度、模式等等。例如,触觉模块153可以以组合的方式或者顺序的方式输出不同的振动。
除了振动之外,触觉模块153还能够生成各种其它的触觉效果,包括通过诸如垂直移动以接触皮肤的针排列的刺激的效果、通过喷孔或者吸入口的空气的喷射力或者吸力、对皮肤的触摸、电极的接触、静电力、通过使用能够吸收或者产生热的元件再现冷和暖的感觉的效果等等。
触觉模块153也能够被实现为允许用户通过诸如用户的手指或者手臂的肌肉感觉来感觉触觉效果,以及通过直接接触传递触觉效果。根据移动终端100的特定配置也可以设置两个或者更多个触觉模块153。
光学输出模块154能够使用光源的光输出用于指示事件产生的信号。在移动终端100中产生的事件的示例可以包括消息接收、呼叫信号接收、未接来电、报警、日程表通知、电子邮件接收、通过应用的信息接收等等。
也可以以移动终端发射单色光或者具有多种颜色的光的方式实现通过光学输出模块154输出的信号。例如,当移动终端感测用户已经检查了产生的事件时信号输出可以被结束。
接口单元160用作用于要连接到移动终端100的外部设备的接口。例如,接口单元160能够接收从外部设备发送的数据,接收电力以传送到移动终端100内的元件和组件,或者将移动终端100的内部数据发送到这样的外部设备。接口单元160可以包括有线或者无线头戴式受话器端口、外部电源端口、有线或者无线数据端口、存储卡端口、用于连接具有标识模块的设备的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。
识别模块可以是存储用于认证使用移动终端100的权限的各种信息的芯片并且可以包括用户识别模块(UIM)、订户识别模块(SIM)、通用订户识别模块(USIM)等等。另外,具有识别模块的设备(在此也被称为“识别设备”)可以采用智能卡的形式。因此,识别设备经由接口单元160能够与终端100相连接。
当移动终端100与外部托架相连接时,接口单元160能够用作允许电力从托架供应到移动终端100的通道或者可以用作允许用户从托架输入的各种命令信号传递到移动终端的通道。从托架输入的各种命令信号或者电力可以作为用于识别移动终端被正确地安装在托架上的信号操作。
存储器170能够存储程序以支持移动终端100的操作并且存储输入/输出数据(例如,电话簿、消息、静止图像、视频等等)。存储器170可以存储与响应于触摸屏上的触摸输入输出的各种模式的振动和音频有关的数据。
存储器170可以包括一种或者多种类型的存储介质,包括闪存型、硬盘型、固态盘(SSD)型、硅盘型、多媒体卡式、卡型存储器(例如,SD或DX存储器等)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘、光盘等等。也可以关于在诸如互联网的网络上执行存储器170的存储功能的网络存储设备操作移动终端100。
控制器180可以典型地控制移动终端100的一般操作。例如,当移动终端的状态满足预设条件时,控制器180可以设置或者释放用于限制用户输入与应用有关的控制命令的锁定状态。
控制器180也能够执行与语音呼叫、数据通信、视频呼叫等等关联的控制和处理,或者执行模式识别处理以将在触摸屏上执行的手写输入或者绘图输入分别识别为字符或者图像。另外,控制器180能够控制这些组件中的一个或者组合以便于实现在此公开的各种示例性实施方式。
电源单元190接收外部电力或者提供内部电力并且供应对于操作被包括在移动终端100中的各自的元件和组件所需的适当的电力。电源单元190可以包括电池,该电池通常是可充电的或者可拆卸地耦合到终端主体,用于充电。
电源单元190可以包括连接端口。连接端口可以被配置为接口单元160的一个示例,用于供应电力以对电池再充电的外部充电器被电气地连接到该接口单元160。
作为另一示例,电源单元190可以被配置成在没有使用连接端口的情况下以无线的方式对电池再充电。在本示例中,使用以磁感应为基础的感应耦合方法或者以电磁谐振为基础的电磁谐振耦合方法,电源单元190能够接收从外部无线电力发射器传递的电力。
可以使用例如软件、硬件、或者其任何组合,以计算机可读介质、机器可读介质、或者类似介质实现在此描述的各种实施方式。
参考图1B和图1C,参考直板式终端主体,描述移动终端100。然而,移动终端100可以替选地已各种不同的配置中的任意一种来实现。这样的配置的示例包括手表式、夹式、眼镜型、或者折叠式、翻盖式、滑盖式、摇摆式、旋转式等的各种结构,其中两个或者更多个主体以相对可移动的方式被相互组合。在此的讨论将常常涉及特定型的移动终端(例如,直板式、手表式、眼睛型等等)。然而关于特定型移动终端的这种教导也将通常应用到其它型移动终端。
移动终端100将通常包括形成终端的外观的壳体(例如,外壳、外罩、盖等)。在本实施方式中,壳体可以被划分成前壳体101和后壳体102。各种电子组件可以被合并在前壳体101和后壳体102之间形成的空间中。至少一个中间壳体可以被附加地布置在前壳体和后壳体101和102之间。
显示器151能够被布置在终端主体的前表面上以输出信息。如所图示的,显示器151的窗口151a能够被安装到前壳体101使得与前壳体101一起形成终端主体的前表面。
在一些实施方式中,电子组件也可以被安装到后壳体102。这样的电子组件的示例可以包括可拆卸的电池、标识模块、存储卡等。用于覆盖电子组件的后盖103可以被可拆卸地耦合到后壳体102。因此,当从后壳体102拆卸后盖103时,被安装到后壳体102的电子组件可以被外部地暴露。
如所图示的,当后盖103被耦合到后壳体102时,后壳体102的侧表面可以被部分地暴露。在一些情况下,在耦合时,后壳体102也可以被后盖103完全地遮盖。在一些实施方式中,后盖103可以包括用于外部地暴露相机121b或者音频输出模块152b的开口。
壳体101、102、103可以通过注入成型合成树脂形成或者可以由例如不锈钢(STS)、铝(Al)、钛(Ti)等的金属形成。
作为多个壳体形成用于容纳组件的内部空间的示例的替选,移动终端100可以被配置使得一个壳体形成内部空间。在本实例中,以合成树脂或者金属从侧表面延伸到后表面的方式来形成具有连体的移动终端100。
如有必要,移动终端100可以包括防水单元(未示出),用于防止水引入到终端主体。例如,防水单元可以包括防水构件,其位于窗口151a和前壳体101之间、在壳体101和后壳体102之间、或者后壳体102和后盖103之间,当这些壳体被耦合时密闭地密封内部空间。
移动终端可以包括显示器151、第一和第二音频输出模块151a/151b、接近传感器141、照度传感器142、光学输出模块154、第一和第二相机121a/121b,、第一和第二操纵单元123a/123b、麦克风122、接口单元160等。
将会针对图1B和图1C示出的的移动终端100进行描述。显示器151、第一音频输出模块151a、接近传感器141、照度传感器142、光学输出模块154、第一相机121a以及第一操纵单元123a被布置在终端主体的前表面上,第二操纵单元123b、麦克风122以及接口单元160被布置在终端主体的侧表面上,并且第二音频输出模块151b和第二相机121b被布置在终端主体的后表面上。
然而,应当理解,可替选的布置是可能的,并且在本公开的教导内。一些组件可以省略或者重新布置。例如,第一操纵单元123a可以不被布置在终端主体的另一表面上,并且第二音频输出模块152b可以被布置在终端主体的侧表面上。
显示器151输出在移动终端100中处理的信息。显示器151能够使用一个或多个合适的显示装置。例如,这样合适的显示装置的示例包括液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT-LCD)、有机发光二极管(OLED)、柔性显示器、3维(3D)显示器、以及电子墨显示器,以及其组合。
可以使用能够实现相同或者不同显示技术的两个显示装置来实现显示器151。例如,多个显示器151可以被布置在一个侧面上以相互分开,或者这些装置可以被集成,或者这些装置可以被布置在不同的表面上。
显示器151也能够包括触摸传感器,该触摸传感器感测在显示单元处接收到的触摸输入。当触摸被输入到显示器151时,触摸传感器可以被配置成感测此触摸,并且控制器180(例如)能够生成与触摸相对应的控制命令或者其它信号。以触摸方式输入的内容可以是文本或者数值,或者能够以各种模式指示或者指定的菜单项目。
触摸传感器可以以被布置在窗口151a和窗口151a的后表面上的显示器之间的具有触摸图案的膜的形式,或者被直接地构图在窗口151a的后表面上的金属线来配置。或者,触摸传感器可以与显示器集成地形成。例如,触摸传感器可以被布置在显示器的基板上或者显示器内。
显示器151也能够与触摸传感器一起形成触摸屏。在此,触摸屏可以用作用户输入单元123(参见图1A)。因此,触摸屏可以替换第一操纵单元123a的功能中的至少一些。
可以以用于输出语音音频、报警声音或者多媒体音频再现的扬声器的形式实现第一音频输出模块152a。
显示器151的窗口151a将典型地包括用于允许从第一音频输出模块152a产生的音频穿过的孔径。一个备选是允许音频沿着结构主体之间的组装间隙(例如,在窗口151a和前壳体101之间的间隙)释放。在本实例中,被独立地形成以输出音频声音的孔可以不被看到或者在外观上以其它方式被隐藏,从而进一步简化移动终端100的外观的制造。
光学输出模块154可以输出用于指示事件产生的光。在移动终端100中产生的事件的示例包括消息接收、呼叫信号接收、未接来电、报警、日程表通知、电子邮件接收、通过应用的信息接收等。当感测到用户的事件查看时,控制器可以控制光学输出模块154以停止光的输出。
第一相机121a可以处理在视频呼叫模式或者捕获模式下通过图像传感器获得的静止或者运动图像的图像帧。因此,处理的图像帧可以被显示在显示器151上或者被存储在存储器170中。
第一和第二操纵单元123a和123b是用户输入单元123的示例,通过用户可以对其进行操纵以将输入提供给移动终端100。通常,第一和第二操纵单元123a和123b也可以被称为操纵部分,并且可以采用允许用户执行诸如触摸、推动、滚动等等的操纵的任何触觉方法。第一和第二操纵单元123a和123b也可以采用允许用户执行诸如接近触摸、悬停等等的操纵的任何非触觉的方法。
图1B图示作为触摸键的第一操纵单元123a,但是可能的替选包括机械键、推动键、触摸键以及其组合。
可以以各种方式使用在第一和第二操纵单元123a和123b处接收到的输入。例如,第一操纵单元123a可以由用户使用以将输入提供给菜单、主屏键、取消、搜索等等,并且第二操纵单元123b可以由用户使用以提供输入以控制从第一或者第二音频输出模块152a或者152b输出的音量级,切换到显示器151的触摸识别模式等等。
作为用户输入单元123的另一示例,后输入单元(未示出)可以位于终端主体的后表面上。后输入单元能够由用户操纵以将输入提供给移动终端100。可以以各种不同的方式使用输入。例如,用户可以使用后输入单元以提供用于从第一或者第二音频输出模块152a或者152b输出的电源开/关、开始、结束、滚动、控制音量级的输入,切换到显示器151的触摸识别模式等等。后输入单元可以被配置成允许触摸输入、推动输入或者其组合。
后输入单元可以被设置成在终端主体的厚度方向中重叠前表面的显示器151。作为一个示例,后输入单元可以被设置在终端主体的后表面的上端部分上,使得当用户使用一只手抓住终端主体时用户能够使用食指容易地操纵它。可替选地,后输入单元能够被定位在终端主体的后侧的至多任何位置处。
包括后输入单元的实施方式可以实现后输入单元中的第一操纵单元123a的功能的一些或者全部。这样,在其中从前侧省略第一操纵单元123a的情形下,显示器151能够具有更大的屏幕。
作为又一个替选,移动终端100可以包括手指扫描传感器,该手指扫描传感器扫描用户的指纹。因此,控制器180可以使用通过手指扫描传感器感测的指纹信息作为认证过程的一部分。手指扫描传感器可以被安装在显示器151或者用户输入单元123中。
麦克风122被示出为位于移动终端100的末端处,但是其他位置是可能的。如有必要,多个麦克风可以被实现,利用这样的布置允许接收立体声音。
接口单元160可以用作允许移动终端100与外部设备对接的路径。例如,接口单元160可以包括用于连接到另一设备(例如,耳机、外部扬声器等)的连接终端、用于近场通信的端口(例如,红外数据协会(IrDA)端口、蓝牙端口、无线LAN端口等)、或者用于将电力供应到移动终端100的电源终端中的一个或多个。接口单元160可以以用于容纳诸如订户标识模块(SIM)、用户标识模块(UIM)、或者用于信息存储的存储器卡的外部卡的插槽的形式来实现。
第二相机121b被示出为位于终端主体的后侧处,并且包括与第一相机单元121a的图像捕获方向大体上相反的图像捕获方向。如有必要,第二相机121b可以可替选地位于其他位置,或者使其可移动,以便于具有与被示出的图像捕获方向不同的图像捕获方向。
第二相机121b可以包括沿着至少一条线布置的多个透镜。多个透镜也可以以矩阵配置来布置。相机可以被称为“阵列相机”。当第二相机121b被实现为阵列相机时,可以使用多个透镜以各种方式捕获图像以及图像具有更好的质量。
如在图1C中所示,闪光灯124被示出为与第二相机121b相邻。当通过相机121b捕获主题的图像时,闪光灯124可以照明主题。
如在图1B中所示,第二音频输出模块152b能够位于终端主体上。第二音频输出模块152b可以结合第一音频输出模块152a来实现立体声功能,并且也可以被用于实现用于呼叫通信的扬声器电话模式。
用于无线通信的至少一个天线可以位于终端主体上。天线可以被安装在终端主体中或者通过壳体形成。例如,配置广播接收模块111的一部分的天线可以缩回到终端主体中。可替选地,使用被附接到后盖103的内表面的膜、或者包括导电材料的壳体,可以形成天线。
用于将电力供应到移动终端100的电源单元190可以包括电池191,该电池191被安装在终端主体中或者可拆卸地耦合到终端主体的外部。电池191可以经由连接到接口单元160的电源线缆来接收电力。此外,使用无线充电器以无线方式能够对电池191充电。通过电磁感应或者电磁谐振可以实现无线充电。
后盖103被示出为耦合到用于屏蔽电池191的后壳体102,以防止电池191的分离,并且保护电池191免受外部冲击或者外来物质的影响。当从终端主体可拆卸电池191时,后壳体103可以被可拆卸地耦合到后壳体102。
用于保护外观或者协助或者扩展移动终端100的功能的附件也可以被提供在移动终端100上。作为附件的一个示例,可以提供用于覆盖或者容纳移动终端100的至少一个表面的盖或者袋。盖或者袋可以与显示器151协作以扩展移动终端100的功能。附件的另一示例是用于协助或者扩展对触摸屏的触摸输入的触摸笔。
将会参考附加的附图更加详细地描述更多的优选实施方式。本领域的技术人员将会理解,在没有脱离其特性的情况下能够以数种形式实施本特征。
在下文中,将针对在左上侧提供的图,按顺时针方向或按向下的顺序参照附图进行描述。
图2是示出根据本公开的实施方式的系统的框图。
根据本公开的系统包括上文参照图1A至图1C描述的移动终端(或终端100)和车辆200。
终端100包括显示器,在下文中,被包括在移动终端100中的显示器将被称为“终端显示器”,以便与下面要描述的车辆显示器251区分开。
车辆200是指能够使用动能移动人或行李的交通工具。车辆的典型示例可以是汽车。
下面要描述的车辆200的操作可以由车辆的控制装置的操作来代替。这里,车辆的控制装置可以是用于电子地控制车辆200中设置的至少一个部件的装置,并且可以是例如电子控制单元(ECU)。
车辆200包括车辆显示器251。车辆显示器251可以具有屏幕,但是根据规定对输出信息存在限制。例如,当车辆正在行驶的同时,应当不能显示存储在存储器中或从服务器实时接收的视频的播放画面,并且可以将可以被显示的字符的数量限制为预定数量或更少。然而,当车辆停止行驶或者以低于预定速度的速度行驶的同时,这些限制被解除,并且可以利用车辆显示器251向驾驶员提供各种类型的信息。
车辆显示器251可以包括仪表板显示器、平视显示器(HUD)和中心信息显示器(CID)中的至少一种。
虽然没有示出,但是车辆200还包括通信单元(未示出)。
车辆200可以通过通信单元以有线/无线方式连接到终端100,并且执行数据通信。
当在车辆200和终端100之间建立连接时,车辆200可以将与车辆显示器251有关的信息发送到终端100。例如,针对终端100使用车辆显示器251基本上所需的信息(诸如车辆显示器251的尺寸、分辨率和屏幕宽高比)可以从车辆200发送到终端100。
终端100可以执行安装在其中的多个应用中的至少一个并将相关信息发送到车辆200,使得可以在车辆显示器251上输出所执行的应用的执行画面。
应用可以是包括微件、桌面启动器(home launcher)等的概念,并且是指能够在终端100中被驱动的任何类型的程序。因此,应用可以是显示主屏幕页面、最近执行的应用列表、导航、天气、收音机、网络浏览器、音频播放、视频播放、消息发送和接收、进度管理、更新程序的功能。
由于终端显示器151和车辆显示器251具有不同的分辨率和宽高比,因此在终端显示器151上输出的终端执行画面和在车辆显示器251上输出的车辆执行画面可能不同。
此外,与终端执行画面不同,车辆执行画面受规定管理,因此输出信息受规定限制。例如,包含在单个画面中的全部字符的数量被限制为最大值或更小的值,或者可以禁止车辆执行画面上的视频。这是为了防止驾驶员在驾驶的同时被车辆执行画面分心而可能发生的事故。
此外,车辆执行画面还可以包括新的图形对象,该新的图形对象没有被包括在终端执行画面。新的图形对象与执行安装在车辆200而不是终端100中的应用的功能对应。例如,该功能可以与调节安装在车辆中的音频输出单元的音量的功能相关联,与输出内部存储在车辆中的车辆主画面的功能相关联,或者可以与操作车辆的电/电子部件的功能相关联。
在具体应用中,终端100可以具有存储在其中的被调度为在终端显示器151上输出的终端执行画面和被调度为在车辆显示器251上输出的车辆执行画面。
在这种情况下,当终端100在终端显示器151上输出特定应用的执行画面时,终端100选择终端执行画面,并且当终端100将具体应用的执行画面发送到车辆以便在车辆显示器251上输出时,终端100可以选择车辆执行画面。
此外,终端100可以使用从车辆200接收到的信息(即,与车辆显示器251相关的信息)来重新创建车辆执行画面。例如,终端100可以基于与车辆显示器251相关的信息来编辑被调度为在终端显示器151上输出的终端执行画面。
车辆200基于从终端100接收到的信息来输出车辆显示器251上的画面信息。车辆显示器251上输出的内容与安装在终端100中的应用的执行画面对应。为了使得能够在车辆显示器251上输出执行画面,终端100可以将执行画面本身发送到车辆200,或者可以发送源代码、图像、视频、RGB等,从而使得能够输出执行画面。
另外,车辆200还包括感测单元(未示出)。
感测单元可以包括至少一个传感器,所述至少一个传感器用于感测车辆内的信息、车辆附近的周围环境信息以及车辆中存在的驾驶员或乘客的驾驶员或乘客信息中的至少一种。
例如,感测单元可以包括接近传感器、照度传感器、触摸传感器、加速度传感器、磁传感器、G传感器、陀螺仪传感器、运动传感器、RGB传感器、红外线传感器、指纹识别传感器、超声传感器、光学传感器、麦克风、电池计、环境传感器(例如,气压计、湿度计、温度计、辐射检测传感器、热传感器和气体传感器等)和化学传感器(例如,电子鼻、医疗保健传感器、生物传感器等)中的至少一种。
车辆200可以组合由车辆200中设置的至少两个或更多个传感器感测的信息,以生成驾驶信息。这里,驾驶信息是指与通过感测单元感测到的车辆相关的任何类型的信息。
驾驶信息可以是指与由车辆本身感测到的行驶和/或车辆的周围环境相关的信息,例如车辆是否停止、行驶速度、行驶方向、与特定物体碰撞的可能性、车辆正在行驶的道路的特征(诸如非公路、高速公路的道路类型、十字路口、弯曲部分的曲率、道路中设置的限速等)。
驾驶信息可以包括诸如GPS的位置信息、从由图像传感器捕获的图像分析的各种类型的信息、由雷达或激光雷达感测的物体和车辆碰撞的可能性、诸如起始点、通行停止或目的地的导航信息。
此外,驾驶信息可以包括关于驾驶员或乘客的信息,即驾驶员或乘客的数量、驾驶员或乘客的性别、驾驶员或乘客的重量、与驾驶员或乘客有关的个人信息。
此外,驾驶信息可以包括指示车辆的驾驶模式(或驾驶状态)的驾驶模式信息。
驾驶模式包括自动驾驶模式和手动驾驶模式。
自动驾驶模式是指在车辆的驾驶员座位中的驾驶员不操纵的情况下,车辆200的加速度和移动方向中的至少一个通过设置在车辆200和/或终端100中的程序而被改变或者可改变的状态。
这里定义的自动驾驶模式与本公开的实施方式对应,并且根据实施方式可以对其定义进行各种修改。例如,通过远程控制来驾驶车辆的情况也可以被定义为自动驾驶模式。
手动驾驶模式被定义为不在自动驾驶模式下的状态,并且可以根据自动驾驶模式的定义而改变。例如,如果自动驾驶模式被定义为通过程序改变加速度和行驶方向两者的状态,则手动驾驶模式可以被定义为车辆200的加速度和行驶方向中的至少一个通过驾驶员的输入而改变的状态。
终端100使用其通信单元与包括车辆显示器251的车辆200进行通信,并且可以接收由车辆200生成的驾驶信息。
终端100可以基于从车辆200接收到的驾驶信息来执行不同的控制。
根据本公开的实施方式的终端100可以根据车辆的驾驶模式来执行不同的控制。如上所述,车辆的驾驶模式可以划分为自动驾驶模式和手动驾驶模式。
首先,将描述终端100和车辆200在手动驾驶状态下相互作用的方法,并且将详细地描述终端100在自动驾驶状态下执行的操作。
当车辆200处于手动驾驶状态下时,终端100根据车辆200是正在行驶还是停止来执行不同的控制。
例如,当车辆100正在行驶时,用户使用终端100受到限制,但是当车辆100停止时,用户使用终端100不受限制。
例如,在限制使用终端100的情况下,终端100可以根据在显示器151上的用户输入(如锁定屏幕)来输出限制执行功能的预设图像。当正在输出预设图像的同时,即使施加了用户输入,也可以不执行与用户输入对应的功能。
图3A至图3C是示出在手动驾驶状态下的移动终端和车辆的操作的图。
当终端100连接到车辆200时,终端100可以向车辆200发送与车辆主屏幕页面相关的信息,使得可以在车辆显示器251上输出车辆主屏幕页面。车辆200使用从终端100接收的与车辆主屏幕页面相关的信息来输出车辆主屏幕页面。
车辆主屏幕页面与终端主屏幕页面不同。
终端主屏幕页面在终端显示器151上输出,并且包括由终端用户安装在终端100中的应用或微件的执行图标。相反,车辆主屏幕页面包括安装在终端100中的应用当中的至少一个应用和可以在车辆200上输出其执行画面的微件的执行图标。
终端主屏幕页面和车辆主屏幕页面共同包括安装在终端100中的应用和/或微件的图标。
至于终端主屏幕页面和车辆主屏幕页面之间的区别,在终端主屏幕页面中包括包含受规则限制的功能的应用的图标,而在车辆主屏幕页面中不包含该图标。当在车辆主屏幕页面中包括被禁止的应用的图标时,即使对该图标施加了触摸,也可以使对应的图标禁用,使得对应的应用不被执行。例如,被禁止的应用可以是包括视频播放功能的视频播放应用。
与包括在车辆主屏幕页面中的执行图标对应的应用(以下称为“车辆应用”)可以由终端和/或车辆制造商预先设置。此外,可以从车辆主屏幕页面删除现有车辆应用的执行图标,可以将针对新车辆的应用的执行图标添加到车辆主屏幕页面,或者可以由终端的用户或车辆的驾驶员改变执行图标在车辆的主屏幕页面中的显示位置。
另外,车辆显示器251被配置为包括触摸传感器和显示器的触摸屏。当正在基于从终端100接收到的信息在车辆显示器251上输出画面的同时感测到施加到车辆显示器251的触摸时,车辆200可将感测到的触摸的坐标发送到终端100。
例如,如图3A所示,当感测到施加到显示地图应用的执行图标的区域的触摸时,可以将感测到的触摸的触摸坐标发送到终端100。基于触摸坐标,终端100确定触摸已经被施加到地图应用的执行图标,并且将相关信息发送到车辆200,使得在车辆显示器251上输出地图应用的执行画面。
换句话说,响应于施加到车辆显示器251的触摸,终端100可以在车辆主屏幕页面中所包括的图标当中选择被施加了触摸的图标,并且执行所选择的应用。此外,终端100将所选择的应用的车辆执行画面发送到车辆200。
基于从车辆200接收到的驾驶信息,终端100可以确定车辆200是否停止,并且可以根据车辆200是停止还是行驶来执行不同的控制。
这里,停止可以被限定为车辆200停止或者以低于预定速度的速度移动的状态。行驶被限定为车辆200以高于预定速度的速度移动的状态。预定速度可以根据每个国家的规定而改变,并且包括0km/h。
如图3B所示,当车辆200停止时,终端100可以响应于施加至终端显示器151上的车辆显示器251的触摸而输出所选择的应用的终端执行画面。因此,用户可以通过终端显示器151以及通过车辆显示器251来使用所选择的应用。
相反,如图3C所示,当车辆200正在行驶时,终端100可以在终端显示器151上输出预设的图像,或者可以关闭终端显示器151。在触摸被施加到车辆显示器251时终端显示器151处于关闭状态的情况下,终端100可以照原样保持关闭状态。
预设的图像可以包括指示在驾驶期间禁止使用终端的通知信息。
如上所述,安装在终端100中的应用的执行画面可以在车辆显示器251上输出,并且驾驶员可以通过向车辆显示器251施加触摸来经由车辆200使用能够在终端100中使用的功能。
与终端执行画面不同,车辆执行画面遵循交通规则,驾驶员可以在提高安全性的同时使用终端100的功能。
此外,由于根据车辆是否正在行驶来禁止终端100的使用,因此预先阻止了驾驶员的交通违章。
图4是示出自动驾驶状态下的移动终端和车辆的操作的流程图。
首先,在终端100和车辆200之间建立连接(S410)。
该连接可以以有线或无线(诸如,蓝牙)方式完成。为了防止黑客入侵或者由第三方造成的错误连接,终端100和车辆200中的至少一个可以在建立连接之前请求输入密码。例如,可以在终端显示器151和/或车辆显示器251上输出被形成为在终端100和车辆200连接之前接收密码的锁定图像。
当终端100和车辆200连接时,可以在车辆显示器251上输出从终端100发送的画面。也就是说,当终端100和车辆200连接时,在车辆显示器251上输出的画面可以根据从终端100发送的画面而改变。
另外,终端100根据驾驶状态向车辆200发送不同的画面。例如,在车辆200正在手动驾驶状态下行驶的情况下,将要输出受规则限制的车辆显示器251的画面,并且在车辆200正在自动驾驶状态下行驶的情况下,可以在车辆显示器251上不受限制地输出各种画面。为了使适当的画面在车辆显示器251上输出,终端基于驾驶状态选择要发送到车辆200的任何一个画面。
在下文中,将详细地描述终端100和车辆200根据车辆200的驾驶状态的操作。
当建立连接时,车辆200可以向终端100发送驾驶信息(S420)。
车辆200将由车辆200感测或生成的驾驶信息定期地或不定期地发送到终端100。每当生成驾驶信息时,车辆200可以将驾驶信息实时地发送到终端100。这里,驾驶信息是指与车辆和/或车辆的周围环境相关的任何类型的信息,并且可以包括由设置在车辆中的感测单元感测到的信息、由车辆基于感测单元所感测到的信息而生成的信息以及通过服务器提供给车辆的信息。
在下文中,终端100可以响应于事件的发生而执行任何一个功能(S430)。
事件的发生可以是将用户输入应用于终端100的情况、存在未接来电的情况、存在要更新的应用的情况、接收到消息的情况、显示激活键(LCD唤醒键或本位键)被按下的情况、报警、来电、未接电话通知等。
在另一示例中,当通过终端的无线通信单元接收到特定信息时,这意指在与特定信息相关的应用中发生了事件,并且控制器感测到该事件。
当按压显示激活键时,可以执行显示最近执行的画面的功能或者显示主屏幕页面的功能。当对主屏幕页面的图标施加触摸时,可以执行与图标对应的应用。以这种方式,根据事件的类型执行不同的功能,并且在终端显示器151上显示不同的画面。
此后,基于驾驶信息在与所执行的功能对应的多个执行画面当中选择任一个执行画面(S440),并且向车辆200发送所述任一个执行画面(S450)。车辆200将从终端100发送的执行画面输出到车辆显示器251(S460)。
虽然根据事件的发生来执行相同的功能,但是可以根据车辆200的驾驶信息来选择不同的执行画面。
具体地,当驾驶信息满足第一条件时,终端100可以在与所执行的功能对应的多个执行画面当中选择与第一条件对应的第一执行画面,并且当驾驶信息满足第二条件时,终端100从多个执行画面当中选择与第一执行画面不同的第二执行画面。在车辆显示器251上选择性地输出第一执行画面和第二执行画面中的任一个。
这里,第一条件可以是指车辆200正在根据用户的操作而行驶的手动驾驶状态,第二状态可以是指车辆200正在根据车辆200和/或终端100中所设置的程序而行驶的自动驾驶状态。
详细地,自动驾驶状态是指车辆200的加速度和移动方向中的至少一个即使在没有驾驶员的操作的情况下也通过设置在车辆200和/或终端100中的程序而改变或可改变的状态。
手动驾驶状态是指不是自动驾驶状态的状态。因此,可以根据如何限定自动驾驶状态来改变手动驾驶状态的定义。
车辆200可以将其驾驶状态直接传送到终端100。或者,车辆200可以仅发送其驾驶状态,并且终端100可以基于所发送的驾驶信息来确定车辆200的行驶状态。
在驾驶信息满足第一条件的状态下,当驾驶信息被改变为满足第二条件时,发送到车辆200的执行画面从第一执行画面改变为第二执行画面。也就是说,在将第一执行画面发送到车辆200的状态下,当驾驶信息被改变为满足第二条件时,将第二执行画面而不是第一执行画面发送到车辆200。
另外,关于同一功能的不同执行画面可以存储在终端100的存储器中或者存储在预设服务器中。或者,可以将参考执行画面存储在存储器或服务器中,并且终端100可以根据驾驶信息来编辑参考执行画面以生成不同的执行画面。
在关于特定功能的执行画面当中,在终端显示器151上输出的执行画面将被称为“终端执行画面”。将在手动驾驶状态下在车辆显示器251上输出的执行画面称为“用于手动驾驶的车辆执行画面”,并且将在自动驾驶状态下在车辆显示器251上输出的执行画面称为“用于自动驾驶的车辆执行画面”。上文参照图2所描述的“车辆执行画面”包括用于手动驾驶的车辆执行画面和用于自动驾驶的车辆执行画面。
这里,用于手动驾驶的车辆执行画面是被配置为在手动驾驶期间满足规定下的限制的车辆执行画面,并且用于自动驾驶的车辆执行画面是包括用户在自动驾驶情况下接收的与自动驾驶相关的信息的车辆执行画面。
用于手动驾驶的车辆执行画面被配置为使得防止驾驶员被车辆200中的车辆显示器251分心,并且在车辆显示器251上输出的画面满足由规则所规定的限制。例如,可以从用于自动驾驶的车辆执行画面将视频排除在外,或者尽管在用于手动驾驶的车辆执行画面中包括连接至视频的链接,但是也可以限制视频的播放。
用于自动驾驶的车辆执行画面被配置为使得驾驶员在自动驾驶期间自由地使用在车辆200中的车辆显示器251上输出的画面,并且检查与车辆200相关的信息。
例如,目的地、行驶速度、行驶方向、剩余燃料量以及车辆200在自动驾驶状态下的碰撞的可能性、留给手动驾驶的时间和针对手动驾驶行进的距离中的至少一个可以被包括在车辆执行画面中以用于自动驾驶。
此外,用于自动驾驶的车辆执行画面可以包括与车辆200关联的图形对象和/或设置在车辆200中的电/电子部件的控制功能。例如,可以在用于自动驾驶的车辆执行画面中包括诸如调节与特定座位对应的窗口的高度、空调的目标温度和空调的风量的调节、音量的调节、目的地的设置或车辆200的停止、停车场的设置等这样的图形对象。这样,驾驶员可以在使用终端100的同时通过使用移动终端100来控制车辆200。
将参照图5至图9E更详细地描述用于手动驾驶的车辆执行画面和用于自动驾驶的车辆执行画面。
另外,当正在车辆显示器251上输出任一个执行画面的同时,可以对终端显示器151或车辆显示器251施加触摸。在这种情况下,终端100可以搜索与任一个执行画面中的坐标对应的图形对象。当搜索图形对象时,终端100执行与所搜索的图形对象对应的功能,并且这里执行步骤S430至S460。
图5是示出根据图4的控制方法输出主屏幕页面的实施方式的图。
当车辆200和终端100连接时,终端100可以向车辆200发送车辆主屏幕页面,使得驾驶员可以通过车辆显示器251使用安装在终端100中的应用。车辆200在车辆显示器251上输出接收到的车辆主屏幕页面。
这里,终端100可以根据车辆200的驾驶状态向车辆200选择性地发送用于手动驾驶的主屏幕页面或用于自动驾驶的主屏幕页面。换句话说,在手动驾驶的情况下,可以在车辆显示器251上显示用于手动驾驶的主屏幕页面,并且在自动驾驶的情况下,可以在车辆显示器251上显示用于自动驾驶的主屏幕页面。
包括在用于手动驾驶的主屏幕页面中的执行图标的类型和数量是有限的。详细地,包括在用于手动驾驶的主屏幕页面中的执行图标与安装在终端100中的应用当中的可以在手动驾驶期间被限制地执行的一个或更多个应用匹配。例如,可以在用于手动驾驶的主屏幕页面中包括诸如呼叫、消息、地图或音乐播放这样的预设应用的执行图标。
在手动驾驶状态下,驾驶员可以使用的执行图标本身受到限制,因此阻止了驾驶员在驾驶期间分心。相反,在自动驾驶状态下,驾驶员可以通过具有屏幕的车辆显示器251使用包括在终端100中的所有应用。
图6是示出根据图4的控制方法输出音乐播放应用的执行画面的实施方式的图。
可以通过音乐播放应用来播放音频和/或视频。这里,通过执行音乐播放应用来播放音频和/或视频的主要代理是终端100,并且通过设置在车辆200中的输出单元来输出根据播放的执行画面和声音。
当在音乐播放应用中播放特定音频(例如,幸运)时,可以根据车辆200的驾驶状态改变在车辆显示器251上输出的执行画面。换句话说,在车辆显示器251上输出的用户界面可以根据驾驶状态而改变。
例如,在用于手动驾驶的执行画面上,输出字符的总数目受到限制,并且可以不显示视频或者视频的播放可以被限制。相反,在用于自动驾驶的执行画面上,可以显示与播放的音频对应的视频,或者可以包括与视频相链接的图形对象。
由于可用内容的类型根据驾驶状态而改变,因此可以提高驾驶员的便利性并且可以降低事故的风险。
图7A至图7C是示出根据图4的控制方法输出道路指引应用的执行画面的实施方式的图。
当执行道路指引应用时,可以在执行画面中包括地图图像和在地图图像上引导车辆200的当前位置的图形对象。驾驶员可以通过使用包括在执行画面中的用户界面来设置目的地或停止。当设置目的地时,执行画面可以包括引导到达目的地的路线的引导信息。
如图7B所示,用于自动驾驶的车辆执行画面包括链接到能够被播放的视频的图形对象,并且如图7A所示,用于手动驾驶的车辆执行画面不包括链接到能够被播放的视频的图形对象。
该视频可以是引导在位于地图图像的点处的建筑物中提供的服务的广告视频和/或广告图像。此外,图形对象可以包括在对应位置中提供的物品和/或服务类型、访问者的评价、折扣信息等。
为了使驾驶员不分心,图形对象在手动驾驶状态下不显示,而是在自动驾驶状态下显示。
另外,与图7A所示的显示地图图像的用于手动驾驶的车辆执行画面相比,可以在如图7C所示的用于自动驾驶的车辆执行画面上显示由车辆200中设置的相机拍摄的图像。
在手动驾驶状态下,驾驶员可能期望在当前位置处和不干扰驾驶的范围内的路线上被引导。相比之下,在自动驾驶状态下,驾驶员可能具有被提供关于位于驾驶方向上的物体的增强现实的用户需求。
为了解决这个问题,相机被安装为面向车辆200的前侧,并且终端100从车辆接收由相机拍摄的图像并且利用所接收的图像来实现增强现实。
在车辆200处于自动驾驶状态下的情况中,终端100通过交叠虚拟图形对象来生成虚拟图像。详细地,终端100搜索包括在接收到的图像中的对象,并且在接收到的图像上构成与所搜索的对象对应的图形对象。例如,当接收到的图像中包括面包店时,包括与面包店相关的信息的图形对象720被构成为接收到的图像。
图形对象720可以链接到视频。当对图形对象720施加触摸时,终端可以播放与其链接的视频并且将播放画面发送到车辆200。播放画面722可以在虚拟图像的区域中显示。因此,在自动驾驶状态下,驾驶员可以通过车辆显示器251检查驾驶方向的前侧,并且检查关于相机所拍摄的区域的详细信息。
已经参照图5至图7C描述了用于根据车辆200的驾驶状态来在车辆显示器251上输出不同的执行画面的方法。在下文中,将描述用于在终端显示器151上输出不同的执行画面的方法。
图8A和图8B是示出手动驾驶状态下的移动终端的操作的图。
在手动驾驶状态下,如图8A所示,终端100关闭终端显示器151。这是因为禁止在驾驶期间使用终端100。
即使通过用户输入开启终端显示器151,在终端显示器151上也显示预设图像。详细地,终端100包括包含触摸传感器和显示器的触摸屏,并且当车辆正在手动驾驶状态下行驶的同时开启终端显示器151时,终端100进行触摸控制以使得在终端显示器151上输出预设图像。
此外,当正在终端显示器151上输出预设图像的同时施加用户输入时,终端100限制与用户输入对应的功能的执行。例如,当按压主按钮时,将输出主屏幕页面,但是当车辆200正在手动驾驶状态下行驶的同时按压主按钮时,主屏幕页面的输出被限制,并且在终端显示器151上输出预设图像。
另外,在手动驾驶状态下满足预设条件的情况下,终端100可以向车辆200发送驾驶模式改变命令,使得手动驾驶状态被切换到自动驾驶状态。
预设条件可以被限定为感测到驾驶员打算使用终端100的情况或者驾驶员正在使用终端100的情况。
例如,在满足预设条件的情况下(诸如在驾驶员注视终端100达预定时间段的情况下、在向终端100施加用户输入的情况下、在终端显示器151被启动的情况下等),终端可以向车辆200发送驾驶模式改变命令。
终端100可以使用设置在终端100和/或车辆200中的传感器来确定是否满足预设条件。
另外,终端100可以基于从车辆200接收到的驾驶信息来确定车辆200的驾驶状态是否可以从手动驾驶状态切换到自动驾驶状态。
当确定驾驶状态可切换时,终端100可以立即向车辆200发送驾驶模式改变命令,或者可以在终端显示器151上输出用于获得驾驶员对于驾驶模式的改变的批准的用户界面。
例如,如图8B所示,在正在终端显示器151上输出预设图像的状态下,当按压主按钮时,终端100可以确定驾驶状态是否可切换。当驾驶状态可切换时,终端100输出用于接收用于切换到自动驾驶的批准的用户界面。在这种情况下,只有当驾驶员批准切换时,终端100才将驾驶模式改变命令发送到车辆200。
当无法切换时,终端100可以基于驾驶信息来输出引导在终端显示器151上可获得切换的时机的引导信息。
允许自动驾驶的道路和不允许自动驾驶的道路可以按照规定进行分类。这样的分类可以基于包括在地图中的GPS信息来完成。
在车辆200位于不允许自动驾驶的道路中的时机t的情况下,不能进行这种模式切换,但是在时机x之后车辆200被调度(schedule)进入允许自动驾驶的道路,终端可以引导驾驶员在时机x之后允许自动驾驶。引导信息可以包括关于时机x的信息、关于车辆200在时机x进入的道路的信息、以及关于在时机t不能自动驾驶的原因的信息中的至少一个。
图9A至图9E是示出自动驾驶状态下的移动终端的操作的图。
在自动驾驶状态下,终端显示器151可以与车辆显示器251相互作用。详细地,关于相同的功能,终端执行画面可以被显示在终端显示器151上,并且用于自动驾驶的车辆执行画面可以被显示在车辆显示器251。
例如,在手动驾驶状态下在终端显示器151上输出预设图像的状态下,当手动驾驶状态切换到自动驾驶状态时,可以在终端显示器151上输出与在终端显示器151上输出的车辆执行画面的功能对应的终端执行画面,而不是预设图像。
在终端执行画面被显示在终端显示器151上并且用于自动驾驶的车辆执行画面被显示在车辆显示器251上的自动驾驶状态切换成手动驾驶状态的情况下,终端显示器151可以关闭或者可以在终端显示器151上显示预设图像而不是终端执行画面。在车辆显示器251上,用于自动驾驶的车辆执行画面切换到用于手动驾驶的车辆执行画面。
另外,当在自动驾驶状态下在终端显示器151上显示终端执行画面的状态下施加用户输入时,终端100可以执行与用户输入对应的功能,并且在终端显示器151上显示新的终端执行画面。另外,可以在车辆显示器251上输出与新的终端执行画面对应的用于自动驾驶的新的车辆执行画面。
例如,如图9B所示,在自动驾驶状态下在终端显示器151上显示地图画面的状态下,当按压主按钮时,可以在终端显示器151上显示最近执行的画面。如图9C所示,当触摸被施加到最近执行的音乐播放执行画面时,可以在车辆显示器251上输出用于播放视频的用于自动驾驶的车辆执行画面。
另外,当在自动驾驶状态下开启终端显示器151或者终端显示器151处于开启状态时,终端100停止输出预设图像。换句话说,仅在手动驾驶状态下在终端显示器151上输出预设图像。
此外,终端100控制终端显示器151在终端显示器151的至少一个区域上显示与自动驾驶状态下的车辆200的行驶相关的信息。可以基于从车辆200发送的驾驶信息来生成与行驶相关的信息。
与行驶相关的信息可以包括诸如可能与车辆碰撞的物体、碰撞的可能性和驾驶员需要干预的水平的与自动驾驶相关的信息以及诸如车辆速度、行驶方向或目的地这样的一般信息。
此外,当调度将自动驾驶切换到手动驾驶时,用于切换的剩余时间和行进的距离中的至少一个可以被包括在与行驶相关的信息中。例如,如图9C所示,在车辆200正在允许自动驾驶的道路上行驶但是车辆200被调度进入车辆200将在16分钟内执行手动驾驶的道路的情况下,可以在终端显示器151上显示用于在手动驾驶状态下切换的剩余时间和行进的距离中的至少一个。
另外,如图9D所示,在驾驶员干预驾驶的情况下,自动驾驶状态被切换为手动驾驶状态。这里,可以在终端显示器151和车辆显示器251中的至少一个上显示指示切换到手动驾驶状态的通知信息。
当在自动驾驶状态下使用终端100的驾驶员检查终端显示器151上所显示的通知信息时,驾驶员可以立即干预驾驶以防止事故。
在输出通知信息达预定时间段之后,如图9E所示,可以在车辆显示器251上显示用于手动驾驶的车辆执行画面,并且可以关闭终端显示器151或者可以在开启状态下的终端显示器151上显示预设图像。因此,驾驶员可以再次集中于驾驶。
图10是示出在自动驾驶状态下添加到移动终端的用户界面的概念图。
终端100可以在自动驾驶状态下在终端显示器151上输出与车辆200的控制功能关联的图形对象。
例如,在从终端显示器151的一端向其另一端施加拖曳输入的情况下,可以沿着终端显示器151上的拖曳输入输出在多个阶段出现的窗帘窗口(curtain window)。可以在窗帘窗口的第一区域1010中显示与终端100的控制功能关联的图形对象,并且可以在第二区域1020中显示与车辆200的控制功能关联的图形对象。驾驶员可以使用终端100来操作车辆200以及操作终端100。
图11是示出将自动驾驶状态划分为多种模式并且根据相应模式执行不同操作的移动终端的概念图。
自动驾驶状态被划分成多个阶段,并且在每个阶段可以在车辆显示器251上输出不同的执行画面。例如,当自动驾驶状态与第一阶段对应时,可以选择与第一阶段对应的第一阶段执行画面,并且当自动驾驶状态与第二阶段对应时,可以选择与第二阶段对应的第二阶段执行画面。
此外,可以根据自动驾驶状态的相应阶段来改变使用终端100的权限。可以在终端100中执行的功能的列表可以根据每个阶段而改变,并且可以改变显示在终端显示器151上的内容的类型(或用户界面的类型)。
在描述每个阶段之前定义术语。
用手(Hands-on)是指驾驶员的手不应远离方向盘达比第一基准时间长的时间的情况(即,驾驶员应该握住方向盘并操作车辆200的行驶方向的情况)。不用手(Hands-off)是指虽然驾驶员不操作方向盘,但是通过程序来调整车辆的行驶方向的情况。
用脚(Feet-on)是指驾驶员的脚不应远离加速踏板达比第二基准时间长的时间的情况(即,驾驶员应该踩踏加速踏板以加速车辆的情况)。不用脚(Feet-off)是指虽然驾驶员不踩踏加速踏板,但是通过程序来调整车辆的加速度的情况。
用眼(Eye-on)是指驾驶员的眼睛应该看向挡风玻璃外的情况,不用眼(Eye-off)是指驾驶员可以闭上眼睛达比第三基准时间长时间的情况。也就是说,在不用眼的情况下,通过程序来调整车辆的加速度和行驶方向两者。
在第一阶段中,禁止使用终端100。因此,当用户输入被施加到终端100时,在终端显示器151上输出预设图像。可以在车辆显示器251上显示与第一阶段对应的第一阶段执行画面。
在第二阶段中,关于终端100的权限被设置为第一级。在终端100中,只可以限制性地执行被设置为第一级的功能。可以在车辆显示器251上显示与第二阶段对应的第二阶段执行画面。
在第三阶段中,关于终端100的权限被设置为第二级。可以执行被设置为第一级的功能和被设置为第二级的功能。
最后,在第四阶段中,驾驶员可以使用终端100的所有功能。
自动驾驶状态可以划分为多个阶段,并且由于终端100和车辆200的操作根据相应的阶段而不同,因此可以给驾驶员提供针对驾驶状态优化的用户界面。由于在保持安全性的范围内提供优化的用户界面,因此驾驶员可以方便地使用终端100和车辆200。
在前面的描述中提及的本发明可以使用其上存储有用于由执行在此陈述的各种方法的处理器执行的指令的机器可读介质实现。可能的机器可读介质的示例包括HDD(硬盘驱动)、SSD(固态盘)、SDD(硅盘驱动)、ROM、RAM、CD-ROM、磁带、软盘、光数据存储设备等等。根据需要,计算机可读介质也可以被实现为载波的形式(例如,经由互联网的传送)。处理器可以包括终端的控制器180。
前述实施方式仅是示例性的并且不被视为对本公开的限制。此描述旨在是说明性的,并且没有限制权利要求的范围。许多替代、修改以及变形对于本领域的技术人员来说将会是显然的。可以以各种方式组合在此描述的示例性实施方式的特征、结构、方法以及其它特性以获得附加的和/或替代的示例性实施方式。
由于在没有脱离其特性的情况下可以以多种形式实现本特征,所以也应理解的是,上述实施方式不受前面描述的任何细节的限制,除非另有规定,否则应在所附的权利要求中限定的范围内被广泛地解释,并且因此旨在由所附的权利要求涵盖落入权利要求的范围和界限或者该范围和界限的等同物内的所有变化和修改。

Claims (19)

1.一种移动终端,该移动终端包括:
通信单元,所述通信单元被配置为与包括车辆显示器的车辆系统通信;以及
控制器,所述控制器被配置为:
通过所述通信单元从所述车辆系统接收描述车辆的状态或者所述车辆的周围环境的驾驶信息,
识别针对所述移动终端已经发生的事件,
响应于识别针对所述移动终端已经发生的事件,确定所述移动终端的第一功能并执行所述第一功能,所述第一功能与所述事件关联,
获得与所执行的第一功能对应的多个执行画面,
基于所述驾驶信息从所述多个执行画面中选择一个执行画面,其中,当所述驾驶信息满足第一条件时,与所执行的第一功能对应的第一执行画面被选择,并且当所述驾驶信息满足第二条件时,与所执行的第一功能对应的不同于所述第一执行画面的第二执行画面被选择,并且
通过所述通信单元向所述车辆系统提供用于在所述车辆显示器上显示的所选择的执行画面,
其中,所述控制器被配置为:
确定在所述车辆在手动驾驶状态下操作的同时是否开启所述移动终端的触摸屏的显示器,并且
基于确定在所述车辆在所述手动驾驶状态下操作的同时开启所述触摸屏的所述显示器,关闭所述触摸屏的所述显示器。
2.根据权利要求1所述的移动终端,其中,所述控制器被配置为:
确定所述驾驶信息是满足与所述多个执行画面中的第一执行画面关联的第一条件还是满足与所述多个执行画面中的第二执行画面关联的第二条件,并且
基于确定所述驾驶信息满足所述第一条件还是所述第二条件,确定在所述车辆显示器上显示在所述第一执行画面与所述第二执行画面之间的第三执行画面。
3.根据权利要求2所述的移动终端,其中,所述第一条件指示所述车辆在由驾驶员驾驶所述车辆的手动驾驶状态下操作,并且其中,所述第二条件指示所述车辆在由所述车辆系统的一个或更多个计算机驾驶所述车辆的自动驾驶状态下操作。
4.根据权利要求3所述的移动终端,其中,所述自动驾驶状态指示所述车辆系统的所述一个或更多个计算机被配置为确定所述车辆的加速度或所述车辆的移动方向的状态。
5.根据权利要求1所述的移动终端,其中,所述驾驶信息包括所述车辆的当前速度、所述车辆的行驶方向、与物体碰撞的可能性、所述车辆所行驶的道路的特性、所述车辆的位置信息、所述车辆的周围环境的一个或更多个图像、所述车辆的导航信息、驾驶员信息、乘客信息或驾驶状态信息。
6.根据权利要求2所述的移动终端,其中,所述移动终端的所述第一功能包括使用一个或更多个地图图像的导航功能,并且
其中,所述第二执行画面包括链接到用于在所述车辆显示器上显示的视频的图形对象,并且所述第一执行画面不包括图形对象。
7.根据权利要求2所述的移动终端,其中,所述第一执行画面包括一个或更多个地图图像,并且所述第二执行画面包括由所述车辆系统的相机拍摄的图像。
8.根据权利要求3所述的移动终端,该移动终端还包括:
触摸屏,所述触摸屏包括触摸传感器和显示器,
其中,所述控制器被配置为:
确定在所述车辆在所述手动驾驶状态下操作的同时是否开启所述触摸屏的所述显示器,并且
基于确定在所述车辆在所述手动驾驶状态下操作的同时开启所述触摸屏的所述显示器,向所述触摸屏的所述显示器提供预设图像。
9.根据权利要求8所述的移动终端,其中,所述控制器被配置为:
确定在所述触摸屏的所述显示器上显示所述预设图像的同时所述触摸传感器是否接收用户输入,
基于确定在所述触摸屏的所述显示器上显示所述预设图像的同时所述触摸传感器接收用户输入,识别与所述用户输入关联的第二功能,并且
执行与所述用户输入关联的所述第二功能。
10.根据权利要求8所述的移动终端,其中,所述控制器被配置为:
确定在所述车辆在所述手动驾驶状态下操作的同时所述显示器是否开启或者所述触摸传感器是否接收到用户输入,并且
基于确定在所述车辆在所述手动驾驶状态下操作的同时所述显示器开启或者所述触摸传感器接收用户输入,则通过所述通信单元向所述车辆系统发送信号以改变所述车辆的驾驶状态。
11.根据权利要求8所述的移动终端,其中,所述控制器被配置为:
确定是否允许所述自动驾驶状态,并且
基于确定允许所述自动驾驶状态,提供显示何时能够允许所述自动驾驶状态以在所述触摸屏的所述显示器上进行显示的引导信息。
12.根据权利要求8所述的移动终端,其中,所述控制器被配置为:
确定所述车辆的当前驾驶状态是所述手动驾驶状态还是所述自动驾驶状态,并且
基于确定所述车辆的当前驾驶状态是所述手动驾驶状态还是所述自动驾驶状态,确定在所述触摸屏的所述显示器上显示在所述预设图像和与所述第一功能关联的所述多个执行画面中的第五执行画面之间的第四执行画面。
13.根据权利要求8所述的移动终端,其中,所述控制器被配置为:
当在所述触摸屏的所述显示器上显示所述第三执行画面的同时接收触摸输入,
基于所述触摸输入,确定与所述第一功能不同的第三功能,
提供与所述第三功能关联的第四执行画面以在所述触摸屏的所述显示器上进行显示,并且
通过所述通信单元,提供与所述第三功能关联的第五执行画面以在所述车辆显示器上进行显示。
14.根据权利要求8所述的移动终端,其中,所述控制器被配置为:
确定在所述自动驾驶状态下所述显示器是否开启,并且
基于确定在所述自动驾驶状态下所述显示器开启,提供所述预设图像或者与所述车辆的行驶相关的信息以在所述触摸屏的所述显示器上进行显示。
15.根据权利要求8所述的移动终端,其中,所述控制器被配置为:
确定在所述触摸屏的所述显示器开启的同时所述车辆的驾驶状态是否被调度为在所述自动驾驶状态和所述手动驾驶状态之间切换,并且
基于确定在所述触摸屏的所述显示器开启的同时所述车辆的驾驶状态被调度为在所述自动驾驶状态和所述手动驾驶状态之间切换,提供用于所述切换所剩的时间或者所述车辆在用于所述切换所剩的时间期间要移动的距离以在所述触摸屏的所述显示器上进行显示。
16.根据权利要求8所述的移动终端,其中,所述控制器被配置为:
确定所述车辆是否处于所述自动驾驶状态下,并且
基于确定所述车辆处于所述自动驾驶状态下,向所述触摸屏的所述显示器提供与所述车辆系统的控制功能关联的图形对象。
17.根据权利要求16所述的移动终端,其中,所述控制器被配置为:
确定是否向所述图形对象施加触摸输入,并且
通过所述通信单元向所述车辆系统发送用于在所述车辆系统中执行所述车辆的所述控制功能的控制命令。
18.根据权利要求1所述的移动终端,其中,所选择的执行画面包括从多个主屏幕页面中选择的主屏幕页面,
其中,所述移动终端的所述第一功能包括输出所选择的主屏幕页面,并且
其中,所述控制器被配置为基于所述驾驶信息来改变所选择的主屏幕页面中的图形对象。
19.一种控制系统,该控制系统包括根据权利要求1所述的移动终端,其中,所述控制系统还包括:
车辆控制装置,其中,所述车辆控制装置包括所述车辆显示器,收集描述车辆的状态或者所述车辆的周围环境的驾驶信息,并且控制所述车辆显示器,
其中,响应于提供所选择的执行画面,所述车辆控制装置被配置为接收所选择的执行画面并且在所述车辆显示器上输出所选择的执行画面。
CN201710533722.7A 2016-07-05 2017-07-03 移动终端以及包括该移动终端的控制系统 Active CN107580104B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2016-0085025 2016-07-05
KR1020160085025A KR101822945B1 (ko) 2016-07-05 2016-07-05 이동 단말기

Publications (2)

Publication Number Publication Date
CN107580104A CN107580104A (zh) 2018-01-12
CN107580104B true CN107580104B (zh) 2021-02-26

Family

ID=59315363

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710533722.7A Active CN107580104B (zh) 2016-07-05 2017-07-03 移动终端以及包括该移动终端的控制系统

Country Status (4)

Country Link
US (2) US10616755B2 (zh)
EP (1) EP3267659B1 (zh)
KR (1) KR101822945B1 (zh)
CN (1) CN107580104B (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016113178A1 (de) * 2016-07-18 2018-01-18 Visteon Global Technologies Inc. Elektronische Kontrolleinheit und Verfahren zur Wiedergabe von Audio- und/oder Video- oder holografischen Daten
US10665155B1 (en) * 2017-03-22 2020-05-26 Accelerate Labs, Llc Autonomous vehicle interaction system
GB2563287B (en) * 2017-06-09 2021-05-12 Ford Global Tech Llc A vehicle display system and method
DE102017215542A1 (de) * 2017-09-05 2019-03-07 Audi Ag Verfahren zum Betrieb eines Fahrerassistenzsystems eines Kraftfahrzeugs und Kraftfahrzeug
JP7043853B2 (ja) * 2018-01-29 2022-03-30 トヨタ自動車株式会社 表示制御システムおよび表示制御方法
CN110231817A (zh) * 2018-04-13 2019-09-13 蔚来汽车有限公司 车辆驾驶提示方法、装置、控制系统和计算机存储介质
DE102018215265A1 (de) * 2018-09-07 2020-03-12 Audi Ag Verfahren und Steuereinrichtung zum Betreiben einer am Kopf tragbaren Anzeigeeinrichtung in einem Kraftfahrzeug
FR3086625A1 (fr) * 2018-09-28 2020-04-03 Psa Automobiles Sa Dispositif d’affichage a ecran tactile affichant dans des zones independantes des pages d’imagettes associees a des fonctionnalites d’un vehicule
KR20200045033A (ko) * 2018-10-12 2020-05-04 현대자동차주식회사 자동차 및 그의 위한 정보 출력 방법
KR20200042660A (ko) * 2018-10-16 2020-04-24 현대자동차주식회사 차량 디스플레이 제어 장치, 그를 포함한 시스템 및 그 방법
DE102019105546A1 (de) * 2019-03-05 2020-09-10 Bayerische Motoren Werke Aktiengesellschaft Verfahren, mobiles Anwendergerät, Computerprogramm zum Ansteuern einer Steuereinheit eines Fahrzeugs
US11403669B2 (en) * 2019-07-04 2022-08-02 Lg Electronics Inc. Vehicular advertisement providing device and vehicular advertisement providing method
JP7409877B2 (ja) * 2020-01-09 2024-01-09 本田技研工業株式会社 車両制御装置
CN113370788A (zh) * 2020-03-09 2021-09-10 北京新能源汽车股份有限公司 一种车辆状态信息的显示方法、装置及终端
JP7363746B2 (ja) * 2020-11-10 2023-10-18 トヨタ自動車株式会社 制御装置、制御システム、車両、及び制御方法
CN113815637A (zh) * 2021-08-28 2021-12-21 济南臻真技术研究所 基于驾驶辅助功能调度通知的方法,设备及存储介质

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5581301B2 (ja) * 2011-11-30 2014-08-27 株式会社ホンダアクセス 車載装置と携帯情報端末が連携するシステム
US8874162B2 (en) * 2011-12-23 2014-10-28 Microsoft Corporation Mobile device safe driving
US9008961B2 (en) * 2012-11-30 2015-04-14 Google Inc. Determining and displaying auto drive lanes in an autonomous vehicle
US8825258B2 (en) * 2012-11-30 2014-09-02 Google Inc. Engaging and disengaging for autonomous driving
US20140188970A1 (en) * 2012-12-29 2014-07-03 Cloudcar, Inc. System and method enabling service and application roaming
JP2014204242A (ja) * 2013-04-03 2014-10-27 本田技研工業株式会社 車両制御システム
DE102013012777A1 (de) * 2013-07-31 2015-02-05 Valeo Schalter Und Sensoren Gmbh Verfahren zum Nutzen eines Kommunikationsendgeräts in einm Kraftfahrzeug beim aktivierten Autopiloten und Kraftfahrzeug
US9272708B2 (en) * 2013-09-30 2016-03-01 Ford Global Technologies, Llc Autonomous vehicle entertainment system
DE102013018966A1 (de) * 2013-11-12 2015-05-13 Valeo Schalter Und Sensoren Gmbh Verfahren zum Betreiben eines Displays beim Umschalten eines Kraftfahrzeugs von einem automatischen in einen manuellen Fahrmodus, Fahrerassistenzeinrichtung und Kraftfahrzeug
KR102155091B1 (ko) * 2014-01-22 2020-09-11 엘지전자 주식회사 이동단말기 및 그 제어방법
KR20150137799A (ko) * 2014-05-30 2015-12-09 엘지전자 주식회사 이동 단말기 및 그 제어 방법
DE102015103773A1 (de) * 2015-03-16 2016-09-22 Valeo Schalter Und Sensoren Gmbh Verfahren zum Betreiben einer Kommunikationsvorrichtung für ein Kraftfahrzeug während eines autonomen Fahrmodus, Kommunikationsvorrichtung sowie Kraftfahrzeug
US9884631B2 (en) * 2015-06-04 2018-02-06 Toyota Motor Engineering & Manufacturing North America, Inc. Transitioning between operational modes of an autonomous vehicle
US9946890B2 (en) * 2016-03-18 2018-04-17 Uber Technologies, Inc. Secure start system for an autonomous vehicle
JP6964271B2 (ja) * 2016-03-31 2021-11-10 パナソニックIpマネジメント株式会社 運転支援方法およびそれを利用した運転支援装置、自動運転制御装置、車両、プログラム
EP3266640B1 (en) * 2016-07-06 2019-06-19 Volvo Car Corporation Multi mode screen device for a vehicle and a method for providing a multi mode screen device in a vehicle

Also Published As

Publication number Publication date
EP3267659A1 (en) 2018-01-10
CN107580104A (zh) 2018-01-12
EP3267659B1 (en) 2021-03-24
KR101822945B1 (ko) 2018-01-29
US20180014182A1 (en) 2018-01-11
US10616755B2 (en) 2020-04-07
US20200213835A1 (en) 2020-07-02
US10932124B2 (en) 2021-02-23
KR20180005067A (ko) 2018-01-15

Similar Documents

Publication Publication Date Title
CN107580104B (zh) 移动终端以及包括该移动终端的控制系统
US10149132B2 (en) Pedestrial crash prevention system and operation method thereof
EP3072710B1 (en) Vehicle, mobile terminal and method for controlling the same
CN105898089B (zh) 移动终端、移动终端的控制方法、车辆的控制系统及车辆
US9909892B2 (en) Terminal and method for controlling the same
US9800717B2 (en) Mobile terminal and method for controlling the same
US10747861B2 (en) Mobile terminal and method for controlling same
US10327119B2 (en) Mobile device and control method therefor
US20160061613A1 (en) Mobile Terminal And Control Method Therefor
US10387192B2 (en) Mobile terminal operating system conversion device and method, vehicle, and operating system transmission device and method for vehicle
CN105393521B (zh) 移动终端及其控制方法
CN106034173B (zh) 移动终端及其控制方法
KR102017802B1 (ko) 이동 단말기 및 그 제어방법
KR20160121017A (ko) 이동단말기, 차량과 이동 단말기의 연동 시스템
US10416778B2 (en) Mobile terminal and control method therefor
KR20220025788A (ko) 이동 단말기 및 그 제어방법
KR20170007980A (ko) 이동 단말기 및 그 제어방법
KR101746503B1 (ko) 이동단말기 및 그 제어방법
KR101700765B1 (ko) 이동 단말기 및 이의 제어방법
KR101892498B1 (ko) 차량용 사용자 인터페이스 장치, 차량과 이동 단말기의 연동 시스템
KR20160120104A (ko) 차량용 표시장치 및 그것의 제어방법
KR101698104B1 (ko) 차로 안내 장치 및 그 방법
KR20170041038A (ko) 차량용 표시장치 및 그것의 제어방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant