CN103765913B - 移动终端、安装在车辆上的图像显示设备及使用其的数据处理方法 - Google Patents

移动终端、安装在车辆上的图像显示设备及使用其的数据处理方法 Download PDF

Info

Publication number
CN103765913B
CN103765913B CN201280041451.9A CN201280041451A CN103765913B CN 103765913 B CN103765913 B CN 103765913B CN 201280041451 A CN201280041451 A CN 201280041451A CN 103765913 B CN103765913 B CN 103765913B
Authority
CN
China
Prior art keywords
information
mobile terminal
screen
image display
screen message
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201280041451.9A
Other languages
English (en)
Other versions
CN103765913A (zh
Inventor
金廷禹
崔盛夏
朴志桓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN103765913A publication Critical patent/CN103765913A/zh
Application granted granted Critical
Publication of CN103765913B publication Critical patent/CN103765913B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/08—Protocols specially adapted for terminal emulation, e.g. Telnet
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/02—Handling of images in compressed format, e.g. JPEG, MPEG
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2350/00—Solving problems of bandwidth in display systems
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/18—Use of a frame buffer in a display terminal, inclusive of the display panel
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications

Abstract

公开一种移动终端、被安装在车辆上的图像显示设备及使用其的数据处理方法。本发明包括显示单元，该显示单元输出图像；通信单元，该通信单元通过外部移动终端收发数据；以及控制器，该控制器控制通信单元以从移动终端接收移动终端的屏幕信息和屏幕信息的第一控制信息，并且将屏幕信息的第二控制信息发送到移动终端，控制器控制显示单元以变换屏幕信息的第一控制信息并且将被变换的屏幕信息输出给用户。第一控制信息包括屏幕信息的图像大小变换信息和屏幕信息的图像压缩格式信息。第二控制信息包括可支持的压缩格式信息。因此，能够以调节压缩方案和传输方案的损耗率等等的方式以适合于在移动终端和图像显示设备之间发送屏幕数据的屏幕情形的方式提高屏幕数据的传输率。

Description

移动终端、安装在车辆上的图像显示设备及使用其的数据处 理方法
技术领域
本发明涉及一种移动终端、被安装在车辆上的图像显示设备及使用其的数据处理方法。尽管本发明适合于广范围的应用，但是其特别地适合于相互共享屏幕的移动终端和图像显示设备。
背景技术
通常，图像显示设备是使用屏幕显示图像信息的设备。特别地，被安装在车辆上的图像显示设备给用户提供诸如车辆信息显示功能、导航系统功能、TV输出功能等等的功能。技术的最近发展使被安装在车辆上的图像显示设备能够通过使用有线/无线网络与移动终端相连接来执行与用户携带的移动终端的数据通信。
通过在被安装在车辆上的图像显示设备和移动终端之间的数据通信，一个设备的屏幕数据被发送到另一设备以便在两个设备之间共享屏幕。然而，为了在图像显示设备和移动终端之间共享屏幕，对于用于在设备之间有效地发送屏幕数据的数据处理方法的需求日益增长。
发明内容
技术问题
因此，本发明针对一种移动终端、被安装在车辆上的图像显示设备及使用其的数据处理方法，其可以实质地避免由于相关技术的限制和缺点造成的一个或者多个问题。
本发明的目的是为了提供一种移动终端、被安装在车辆上的图像显示设备及使用其的数据处理方法，通过其，能够以调节用于传输屏幕的压缩方案、传输屏幕的损耗率等等以适合于在将移动终端的屏幕数据发送到图像显示设备以使图像显示设备和移动终端能够相互共享屏幕的方式提高屏幕数据的传输率。
从本发明可获得的技术任务不受以上提及的任务限制。并且，其它未提及的技术任务能够由本发明所属技术领域的普通技术人员从以下的描述中清楚地理解。
问题的解决方案
在下面的描述中将阐述本发明的附加特征和优点，并且根据描述，附加特征和优点部分地将显而易见，或者可以通过本发明的实践来获悉。通过所撰写的说明书和权利要求书以及附图中具体指出的结构，将实现并获得本发明的目的和其他优点。
为了实现这些和其它的优点和根据本发明的目的，如在此具体化和广泛地描述的，根据本发明的一个实施例的被安装在车辆上的图像显示设备，可以包括，显示单元，该显示单元被配置成输出图像；通信单元，该通信单元被配置成通过外部移动终端收发数据；以及控制器，该控制器被配置成控制通信单元以从移动终端接收移动终端的屏幕信息和屏幕信息的第一控制信息，该控制器被配置成控制通信单元以将屏幕信息的第二控制信息发送到移动终端，控制器被配置成控制显示单元以变换屏幕信息的第一控制信息，控制器被配置成控制显示单元以将被变换的屏幕信息输出给用户，其中第一控制信息包括屏幕信息的图像大小变换信息和屏幕信息的图像压缩格式信息，并且其中第二控制信息包括可支持的压缩格式信息。
优选地，第二控制信息可以进一步包括指示屏幕信息是否是被变换的屏幕的信息。
优选地，第二控制信息可以进一步包括可支持的编码类型信息。
优选地，第二控制信息可以进一步包括在被安装在车辆上的图像显示设备中包括的第一帧缓冲器的信息。
优选地，图像大小变换信息可以包括屏幕信息的图像大小的多个信息。
优选地，通信单元可以使用VNC(虚拟联网计算)接收屏幕信息。
更加具体地，控制器可以接收从在移动终端中包括的第二帧缓冲器生成的屏幕信息。
在这样的情况下，第二控制信息可以包括用于请求第二帧缓冲器更新屏幕信息的信息。
并且，第一控制信息可以包括用于向第二帧缓冲器通知已经更新屏幕信息的信息和被更新的第二帧缓冲器的信息。
为了实现这些和其它的优点和根据本发明的目的，如在此具体化和广泛地描述的，根据本发明的另一实施例的移动终端可以包括；通信单元，该通信单元被配置成通过外部图像显示设备收发数据；和控制器，该控制器被配置成控制通信单元以将移动终端的屏幕信息和屏幕信息的第一控制信息发送到图像显示设备，该控制器被配置成控制通信单元以从图像显示设备接收屏幕信息的第二控制信息，控制器被配置成根据第一控制信息生成屏幕信息，其中第一控制信息包括屏幕信息的图像大小变换信息和屏幕信息的图像压缩格式信息，并且其中第二控制信息包括图像显示设备可支持的可支持压缩格式信息。
优选地，第二控制信息可以进一步包括指示屏幕信息是否是被变换的屏幕的信息。
优选地，第二控制信息可以进一步包括通过图像显示设备可支持的编码类型信息。
优选地，第二控制信息可以进一步包括在被安装在车辆上的图像显示设备中包括的第一帧缓冲器的信息。
优选地，图像大小变换信息可以包括屏幕信息的图像大小的多个信息。
优选地，通信单元可以使用VNC(虚拟联网计算)发送屏幕信息。
更加优选地，控制器可以从在移动终端中包括的第二帧缓冲器生成屏幕信息。
更加优选地，第二控制信息可以包括用于请求第二帧缓冲器更新屏幕信息的信息。
更加优选地，第一控制信息可以包括用于向第二帧缓冲器通知已经更新屏幕信息的信息和被更新的第二帧缓冲器的信息。
要理解的是，前述的总体描述和下面的详细描述是示例性和解释性的并且旨在提供如要求保护的本发明的进一步解释。
发明的有益效果
因此，本发明可以以调节用于传输屏幕的压缩方案、传输屏幕的损耗率等等以使其适合于在移动终端和图像显示设备之间发送屏幕数据中的屏幕情形的方式提高屏幕数据的传输率。
从本发明可获得的效果不受以上提及的效果限制。并且，其它的未提及的效果可以由本发明涉及的技术领域的普通技术人员从以下的描述中清楚地理解。
附图说明
附图被包括以提供本发明的进一步理解并且被并入到本申请中且组成本申请的一部分，附图图示了本发明的实施例并且连同描述一起用以解释本发明的原理。
在附图中：
图1是根据本发明的实施例的包括图像显示设备和移动终端的数据处理系统的示意图；
图2是根据本发明的实施例的移动终端的框图；
图3是根据本发明的实施例的图像显示设备的框图；
图4是用于根据本发明的实施例的图像显示设备和移动终端中的应用启动的序列的流程图；
图5是根据本发明的实施例的客户端简档的表；
图6是根据本发明的实施例的应用列表的表；
图7是根据本发明的实施例的图像显示设备和移动终端的屏幕发送系统的示意图；
图8是根据本发明的实施例的VNC服务的流程图；
图9是根据本发明的实施例的VNC服务的消息的表；
图10是根据本发明的实施例的VNC服务的扩展消息的表；
图11是用于根据本发明的实施例的在图像显示设备和移动终端之间发送屏幕的方法的图；
图12是根据本发明的实施例的调整大小级别的表；
图13是根据本发明的实施例的像素格式的表；
图14是根据本发明的实施例的客户端显示配置的表；
图15是根据本发明的实施例的帧缓冲器更新的表；以及
图16是用于根据本发明的实施例的帧缓冲器更新消息的一个示例的图。
具体实施方式
现在将会参考本发明的优选实施例，在附图中图示其示例。如有可能，贯穿整个附图将会使用相同的附图标记以指代相同或者相似的部件。
在下文中，将会参考附图更加详细地解释根据本发明的被安装到车辆的图像显示设备中的图像处理。被附接到组件的后缀，诸如“模块”和“单元或者部分”被用于有助于本发明的详细描述。因此，后缀不具有彼此不同的意义。
图1是示意性地图示根据本发明的第一实施例的包括移动终端和图像显示设备的数据处理系统的视图。
如在图1中所示，根据本发明的第一实施例的数据处理系统包括移动终端100和图像显示装置200。
移动终端100可以以有线或者无线方式被连接到图像显示装置200，并且将视频信号和音频信号中的至少一个发送到图像显示装置200。
图像显示装置200以固定的方式被安装到车辆，并且可以以有线或者无线的方式被连接到移动终端100以从移动终端100接收视频信号和音频信号中的至少一个。并且，图像显示装置200可以输出从移动终端100接收到的视频信号和音频信号中的至少一个。
图像显示装置200可以从用户接收输入，并且将接收到的输入发送到移动终端100。例如，一旦用户通过图像显示装置200的触摸屏执行触摸输入，图像显示装置200可以识别对屏幕图像已经执行触摸输入的位置，并且可以将关于被识别的位置的信息发送到移动终端100。
移动终端100可以在已经执行触摸输入的位置处确定触摸事件的发生，并且可以执行与被生成的触摸事件相对应的操作。即，用户可以通过使用图像显示装置200的触摸屏、硬键等等控制移动终端100的操作。
作为数据处理系统的一个示例，用户执行被安装在移动终端100处的道路引导应用(或者拨号、电话簿、电子邮件、移动图像播放应用等等)。然后，移动终端100将道路引导应用的执行图像发送到图像显示装置200使得道路引导应用的执行图像能够被显示在图像显示装置200上。
用户可以查看图像显示装置200的大屏幕上，而不是在移动终端100的小屏幕上的道路引导应用的执行图像。并且，用户可以通过车辆的扬声器，而不是通过移动终端100的扬声器听到道路引导声音。
一旦用户通过使用图像显示装置200的触摸屏或者硬键选择道路引导有关的菜单，移动终端100可以执行与菜单相对应的操作。然后，移动终端100可以将与对应于菜单的操作有关的执行结果输出到图像显示装置200。
通过诸如蓝牙的短距离通信标准、诸如Wi-Fi的无线因特网标准、诸如通用串行总线(USB)的外部设备接口标准等等，移动终端100和图像显示装置200可以被相互连接。
用于通过客户端的请求提供服务的服务器应用可以被安装在移动终端100处，并且用于访问从服务器提供的服务的客户端应用可以被安装在图像显示装置200处。
移动终端100的服务器应用被配置成捕获移动终端100的屏幕，不论移动终端的应用类型如何，并且将捕获到的屏幕发送到图像显示装置200的客户端应用。并且，服务器应用基于从客户端应用接收到的信息、关于从图像显示装置200已经发生的事件的信息，控制移动终端100的操作。
例如，图像显示装置200可以使用提供相对于图形用户界面的远程访问的远程帧缓冲器(RFB)协议以虚拟网络计算(VNC)方式远程地控制移动终端100。根据VNC方法，移动终端100通过网络将屏幕更新发送到图像显示装置200，并且将从图像显示装置200已经发生的事件发送到移动终端100。
并且，根据限定通过蓝牙连接从第一设备流送到第二设备的音频信号(立体声或者单声道)的音质的高级音频分发简档(A2DP)，特别地，与蓝牙头戴式受话器有关的头戴式受话器简档(HSP)、以及被应用于车辆的免提的免提简档(HFP)等等，移动终端100可以将音频信号发送到图像显示装置200或者头戴式受话器或者免提等等。
移动终端100和图像显示装置200可以基于附加的协议相互交换附加的信息。例如，图像显示装置200可以将诸如行驶信息、速度信息以及燃料信息的关于车辆状态的信息提供给移动终端100。
可以通过使用附加的协议基于从图像显示装置200接收到的关于车辆状态的信息执行被安装在移动终端100处的应用。这些应用可以将关于应用类型(例如，道路引导、多媒体、游戏等等)、图形用户界面(GUI)类型(例如，地图、视频、菜单等等)、应用状态(例如，前景或者背景中的执行状态)的信息提供给图像显示装置200。
图2是图示根据本发明的移动终端100的配置的框图。移动终端100可以以各种方式配置。例如，移动终端100可以被实现为便携式电话、智能电话、笔记本计算机、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)等等。
如在图2中所图示，移动终端100可以包括无线通信单元110、A/V(音频/视频)输入单元120、用户输入单元130、感测单元140、输出单元150、存储器160、接口单元170、控制器180、以及电源单元190。图2图示具有各种组件的移动终端100，但是应理解，不要求实现所有的图示的组件。可以通过较多的或者较少的组件实现移动终端100。
无线通信单元110包括允许移动终端100和无线通信系统或者移动终端所位于的网络之间进行无线电通信的一个或者多个组件。例如，无线通信单元110可以包括广播接收模块111、移动通信模块112、无线因特网模块113、短程通信模块114以及位置信息模块115中的至少一个。
广播接收模块111经由广播信道从外部广播管理服务器(或其它网络实体)接收广播信号和/或广播关联信息。广播信道可以包括卫星信道和/或陆地信道。广播管理服务器可以是生成和发送广播信号和/或广播关联信息的服务器，或者是接收先前生成的广播信号和/或广播关联信息并且将其发送到终端的服务器。广播关联信息可以指的是与广播信道、广播节目或者广播服务提供商相关联的信息。广播信号可以包括TV广播信号、无线电广播信号、数据广播信号等。而且，广播信号还可以进一步包括与TV组合的广播信号或无线电广播信号。
还可以经由移动通信网络来提供广播关联信息，并且在该情况下，可以通过移动通信模块112来接收广播关联信息。
广播信号可以以各种形式存在。例如，可以以数字多媒体广播(DMB)的电子节目指南(EPG)、手持式数字视频广播(DVB-H)系统的电子服务指南(ESG)等的形式存在。
广播接收模块111可以被配置成通过使用各种类型的广播系统来接收广播信号。特别地，广播接收模块111可以通过使用数字广播系统来接收数字广播，数字广播系统诸如地面多媒体广播(DMB-T)系统、卫星数字多媒体广播(DMB-S)系统、手持式数字视频广播(DVB-H)、被称为仅媒体前向链路的数据广播系统、地面综合业务数字广播(ISDB-T)等。广播接收模块111可以被配置成适用于提供广播信号的各个广播系统以及上述数字广播系统。经由广播接收模块111接收到的广播信号和/或广播关联信息可以被存储在存储器160(或者其它类型的存储介质)中。
移动通信模块112将无线电信号发送到基站、外部终端以及服务器中的至少一个和/或从基站、外部终端以及服务器中的至少一个接收无线电信号。这样的无线电信号可以包括语音呼叫信号、视频呼叫信号或根据文本和/或多媒体消息传输和/或接收的各种类型的数据。
无线因特网模块113支持移动通信终端的无线因特网访问。此模块可以内部地或外部地耦合到移动终端100。在此，作为无线因特网技术，无线局域网(WLAN)(Wi-Fi)、无线宽带(Wibro)、全球微波互联接入(Wimax)、高速下行链路分组接入(HSDPA)等可以被使用。
短程通信模块114是用于支持短程通信的模块。短程通信技术的一些示例包括蓝牙TM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂TM等。
位置信息模块115是用于检查或获取移动通信终端的位置(或定位)的模块。例如，位置信息模块115可以包括GPS(全球定位系统)模块，该GPS模块从多个卫星接收位置信息。在此，位置信息可以包括由纬度值和经度值表示的坐标信息。例如，GPS模块可以从三个或者更多个卫星测量精确的时间和距离，并且基于测量的时间和距离根据三角法精确地测量移动终端的当前位置。可以使用从三个卫星获取距离和时间信息并且以单个卫星执行错误校正的方法。特别地，GPS模块可以从卫星接收到的位置信息获取精确的时间与三维速度信息，以及纬度、经度以及高度值的位置。Wi-Fi定位系统和/或混合定位系统可以被用作位置信息模块115。
A/V输入单元120被配置为接收音频或视频信号。A/V输入单元120可以包括相机121和麦克风122。相机121处理由图像捕捉设备在视频捕捉模式或图像捕捉模式下获取的静止图片或视频的图像数据。所处理的图像帧可以被显示在显示单元151上。
由相机121处理的图像帧可以被存储在存储器160中或者经由无线通信单元110来发送。可以根据移动通信终端的配置来提供两个或两个以上的相机121。
麦克风122可以在电话呼叫模式、记录模式、语音识别模式等中经由麦克风来接收声音(可听数据)，并且能够将这样的声音处理成音频数据。在电话呼叫模式的情况下，处理的音频(语音)数据可以被变换为经由移动通信模块112可发送到移动通信基站的格式以用于输出。麦克风122可以实现各种类型的噪声消除(或抑制)算法，以消除(或抑制)在接收和发送音频信号的过程中所生成的噪声或干扰。
用户输入单元130可以根据由用户输入的命令来生成键输入数据以控制移动终端的各种操作。用户输入单元130允许用户输入各种类型的信息，并且可以包括键盘、薄膜开关、触摸板(例如，检测由于被接触而引起电阻、压力、电容等等方面的变化的触摸灵敏构件)、滚轮(jog wheel)、拨动开关(jog switch)等。特别地，当触摸板以分层的方式重叠在显示单元151上时，其可以形成触摸屏。
感测单元140检测移动通信终端100的当前状况(或者状态)，诸如移动通信终端100的打开或关闭状态、移动终端100的位置、用户与移动终端100的接触(例如，触摸输入)的存在或不存在、移动终端100的定向、移动终端100的加速或减速移动以及方向等，并且生成用于控制移动终端100的操作的命令或信号。例如，当移动终端100被实现为滑盖型移动电话时，感测单元140可以感测滑盖电话是打开还是关闭。另外，感测单元140能够检测电源单元190是否提供电力、或者接口单元170是否与外部设备耦合。
输出单元150被配置成以视觉、听觉和/或触觉方式(例如，音频信号、视频信号、报警信号、振动信号等)提供输出。输出单元150可以包括显示单元151、音频输出模块152、报警单元153等。
显示单元151可以显示在移动终端100中处理的信息。例如，当移动终端100处于电话呼叫模式中时，显示单元151可以显示与呼叫或其它通信(诸如文本消息收发、多媒体文件下载等)相关联的用户界面(UI)或图形用户界面(GUI)。当移动终端100处于视频呼叫模式或图像捕捉模式中时，显示单元151可以显示捕捉的图像和/或接收到的图像、示出与其相关的视频或图像以及功能的UI或GUI等。
显示单元151可以包括液晶显示器(LCD)、薄膜晶体管LCD(TFT-LCD)、有机发光二极管(OLED)显示器、柔性显示器和三维(3D)显示器等等中的至少一个。移动终端100可以包括两个或更多个显示单元151。例如，移动通信终端可以包括外部显示单元和内部显示单元(未示出)。
当以分层的方式重叠显示单元151和用于感测触摸操作的传感器(在下文中，将会被称为“触摸传感器”)以形成触摸屏时，显示单元151可以用作输入设备和输出设备。例如，触摸传感器可以是触摸膜、触摸片、触摸板等。
触摸传感器可以被配置成将施加到显示单元151的特定部分的压力，或者从显示单元151的特定部分出现的电容的变化转换为电输入信号。而且，触摸传感器可以被配置成不仅感测被触摸的位置和被触摸的区域，而且还感测触摸压力。当通过触摸传感器感测触摸输入时，对应的信号被发送到触摸控制器(未示出)。触摸控制器处理接收到的信号，并且然后将对应的数据发送到控制器180。因此，控制器180可以感测已经触摸了显示器151的哪个区域。
接近传感器141可以被布置在移动终端100的由触摸屏覆盖的或者在触摸屏附近的内部区域处。接近传感器141指示如下的传感器，其在没有机械接触的情况下，通过使用电磁场或者红外线，感测靠近要感测表面的对象或者布置在所感测表面附近的对象的存在与否。接近传感器141具有比接触传感器更长的寿命和更强的实用性。
接近传感器141可以包括透射型光电传感器、直接反射型光电传感器、镜反射型光电传感器、高频振荡接近传感器、电容型接近传感器、磁型接近传感器、红外线接近传感器等。当触摸屏被实现为电容型时，通过电磁场的变化来感测指针向触摸屏的靠近。在这样情况下，触摸屏(触摸传感器)也可以被分类为接近传感器。
因此，如果指示器在没有接触触摸屏的情况下接近触摸屏，则在指示器和触摸屏之间的距离和指示器的位置可以被检测。在下文中，为了简要解释起见，指针被定位以接近触摸屏而没有接触的状态将会被称为“接近触摸”，而指针实际上接触触摸屏的状态将会被称为“接触触摸”。关于与指针在触摸屏上的接近触摸对应的位置，这样的位置对应于在指针接近触摸时指针垂直面对触摸屏的位置。
接近传感器141感测接近触摸和接近触摸模式(例如，距离、方向、速度、时间、位置、移动状态等)。与感测的接近触摸和感测的接近触摸模式有关的信息可以被输出到触摸屏。
音频输出模块152可以在呼叫信号接收模式、呼叫拨打模式、记录模式、语音识别模式、广播接收模式等中输出从无线通信单元110接收到的或者存储在存储器160中的音频数据。音频输出模块152可以输出与在移动终端100中执行的功能有关的音频信号，例如，报警接收到呼叫或者接收到消息的声音等)。音频输出模块152可以包括接收器、扬声器、蜂鸣器等。
警报153输出通知来自于移动终端100的事件的发生的信号。从移动终端100发生的事件可以包括接收到的呼叫、接收到的消息、按键信号输入、触摸输入等。警报153不仅可以输出视频或者音频信号，而且可以以以振动的方式输出诸如通知事件的发生的信号的其它类型的信号。例如，警报153可以被配置成响应于移动终端接收到呼叫或消息而振动。又例如，当按键信号已经被输入时，警报153可以输出振动作为按键信号输入的反馈。通过此振动输出，用户可以识别事件的发生。为了以振动的方式输出信号，移动终端可以被安装有振动器。在此，通过显示单元151或者音频输出模块152可以输出视频信号或者音频信号。
触觉模块154生成用户能够感觉的各种触觉效果。通过触觉模块154生成的触觉效果的代表性示例包括振动。通过触觉模块154生成的振动可以具有可控制的强度、可控制的模式等。例如，可以以合成的方式或者以顺序的方式输出不同的振动。
触觉模块154可以生成各种触觉效果，不仅包括振动，而且包括相对于被触摸(接触)的皮肤垂直移动的针的布置、通过注入孔或者吸入孔的空气注入力或者空气吸入力、通过皮肤表面的触摸、与电极接触的存在与否、通过诸如静电力的刺激的效果、使用吸热设备或者发热设备再现冷感或热感等。
触觉模块154可以被配置成通过用户的直接接触，或者使用手指或手的用户肌觉来传输触觉效果(信号)。根据移动终端100的配置可以在数目上实现两个或更多个触觉模块154。例如，触觉模块154可以被提供给方向盘、变速档位、保险杠、座位等等。
存储器160可以存储用于处理和控制控制器180的程序。可替选地，存储器160可以暂时地存储输入/输出数据(例如，电话簿数据、消息、静止图像、视频等)。
可以使用包括闪存型、硬盘型、多媒体卡微型、存储卡型(例如，SD或者DX存储器)、随机存取存储器(RAM)、静态随机存储器(SRAM)、只读存储器(ROM)、电可擦可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘、光盘等的任何类型的适合的存储介质来实现存储器160。而且，移动终端100可以操作在互联网上执行存储器160的存储功能的网络存储。
接口单元170用作接口，通过其至少一个外部设备可以与移动终端100连接。例如，外部设备可以包括有线或者无线头戴式受话器端口、外部电源(或者电池充电器)端口、有线或者无线数据端口、存储器卡端口、用于连接具有识别模块的设备的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。在此，识别模块可以是存储用于认证使用移动终端100的用户的权限的各种信息的存储器芯片，并且可以包括用户身份模块(UIM)、订户身份模块(SIM)、通用订户身份模块(USIM)等。另外，具有识别模块的设备(在下文中，被称为“识别设备”)可以采用智能卡的形式。因此，识别设备可以经由端口或者其它的连接机制与终端100相连接。接口单元170可以被用于从外部设备接收输入(例如，数据、信息、电力等等)并且将接收到的输入传输到移动终端100内的一个或者多个元件或者可以被用于在移动终端和外部设备之间传输数据。
而且，当移动终端100被连接到外部托架时，接口单元170可以用作将电力从外部托架供应到移动终端100的路径或者用于将用户从托架输入的各种命令信号传输到移动终端100的路径。从托架输入的这样的各种命令信号或者电力可以作为用于识别移动终端100已经被精确地安装到托架的信号操作。
控制器180通常控制移动终端100的整体操作。例如，控制器180执行与电话呼叫、数据通信、视频呼叫等相关联的控制和处理。控制器180可以包括多媒体模块181，该多媒体模块181提供多媒体回放。多媒体模块181可以被配置为控制器180的一部分或者被配置为单独的组件。
控制器180能够执行模式识别处理以便将触摸屏上的书写或者绘画识别为文本或者图像。
电源单元190用于在控制器180的控制下通过接收外部电力或者内部电力将电力供应到每个组件。
可以使用例如软件、硬件或者其任何组合在计算机可读或者其类型的介质中实现在此描述的各种实施例。
对于硬件实现，可以通过使用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理器件(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、以及被设计以执行在此描述的功能的电子单元中的至少一个实现处理。在一些情况下，通过控制器180实现这样的处理。
对于软件执行，可以与执行功能或者操作中的至少一个的单独的软件模块一起来实现诸如过程和功能的处理。能够通过以任何适当的编程语言编写的软件应用来实现软件代码。软件代码可以被存储在存储器160中并且通过控制器180执行。
音频识别模块182被配置成识别从用户生成的音频信号，并且根据被识别的音频信号执行相对应的功能。
被应用于移动终端100的导航会话300显示关于地图数据的行驶路径。
图3是图示根据本发明的图像显示装置200的配置的框图。
如在图3中所示，图像显示装置200包括主板210，该主板210包括控制器212，该控制器212被配置成控制图像显示装置200(例如，中央处理单元：CPU)的整体操作；存储器213，该存储器213被配置成在其中存储用于处理控制器212的程序和输入/输出数据；键控制器211，该键控制器211被配置成控制每种键信号；以及LCD控制器214，该LCD控制器214被配置成控制液晶显示器(LCD)。
存储器213可以在其中存储用于在数字地图上显示道路引导信息的地图信息(地图数据)。而且，存储器213可以在其中存储用于根据其中车辆当前行驶的道路情况输入交通信息的交通信息收集控制算法，和用于控制该算法的信息。
被设置有唯一的设备编号并且被安装在车辆中的CDMA(码分多址)模块206、被配置成接收用于引导车辆的位置并且跟踪从起始点到目的地点的行驶路径的GPS信号或者以全球定位系统(GPS)信号的形式发送用户收集的交通信息；CD机(CD deck)208，该CD机208被配置成播放被记录在光盘(CD)中的信号；陀螺仪传感器209等等可以被连接到主板210。CDMA模块206和GPS模块207可以通过天线204和205发送和接收信号。
广播接收模块222可以与主板210相连接，并且通过天线223接收广播信号。通过接口板203、由LCD控制器214控制的显示单元(即，LCD)201、键控制器211控制的前板202、以及被配置成捕获车辆的内部和/或外部的相机227可以被连接到主板210。显示单元201被配置成显示各种视频信号和文本信号。前板202被设置有用于输入每种键信号的按钮，并且将与用户选择的按钮相对应的键信号提供给主板210。并且，显示单元201包括图2的接近传感器和触摸传感器(触摸屏)。
前板202可以被设置有用于直接地输入交通信息的菜单键，该菜单键可以被配置成通过键控制器211控制。
音频板217被连接到主板210，并且处理每种音频信号。音频板217包括被配置成控制音频板217的微计算机219、被配置成接收无线电信号的调谐器218、被配置成将电力供应到微计算机219的电源单元216、以及被配置成处理每种语音信号的信号处理器215。
音频板217包括被配置成接收无线电信号的无线电天线220，和被配置成播放音频磁带的磁带机(tape deck)221。音频板217可以进一步包括被配置成输出通过音频板217处理的音频信号的音频输出单元(例如，放大器)226。
音频输出单元(放大器)226被连接到车辆接口224。即，音频板217和主板210被连接到车辆接口224。用于输入音频信号的免提单元225a、用于乘客的安全的安全气囊225b、用于检测车辆速度的速度传感器225c等等可以被连接到车辆接口224。速度传感器225c被配置成计算车辆速度并且将关于被计算的车辆速度的信息提供给中央处理单元212被应用于图像显示装置200的导航会话300被配置成基于地图数据和关于车辆的当前位置的信息生成道路引导信息，并且将被生成的道路引导信息提供给用户。
显示单元201被配置成通过接近传感器检测在显示窗口中的接近触摸。例如，当指示器(例如，手指或者触摸笔)执行接近触摸时，显示单元201检测接近触摸已经发生的位置，并且将与检测到的位置相对应的位置信息输出到控制器212。
语音识别设备(或者语音识别模块)301被配置成识别从用户生成的音频信号(语音)，并且根据被识别的音频信号执行相对应的功能。
被应用于图像显示装置200的导航会话300在地图数据上显示行驶路线。当移动终端100在离被包括在行驶路线中的盲点(blind spot)的预设距离内时，导航会话300通过无线电通信(例如，短程无线通信网络)与被安装到外围车辆(例如，车辆导航系统)的终端或者行人持有的移动终端自动地形成无线网络。这可以允许导航会话300从被安装到外围车辆的终端接收外围车辆的位置信息，并且从行人持有的移动终端接收行人的位置信息。
主板210可以被连接到接口单元230，并且接口单元230可以包括外部设备接口单元231和网络接口单元232。
外部设备接口单元231可以将外部设备连接到图像显示装置200。为此，外部设备接口单元231可以包括A/V输入/输出单元(未示出)或者无线通信单元(未示出)。
外部设备接口单元231可以以有线或者无线方式被连接到外部设备，外部设备诸如DVD(数字多功能盘)、蓝光、游戏机、相机、可携式摄像机以及笔记本计算机。外部设备接口单元231将通过被连接到外部设备从外部输入的视频信号或者音频信号或者数据信号发送到控制器212。并且，通过控制器212处理的视频信号或者音频信号或者数据信号可以被输出到被连接到外部设备。
A/V输入/输出单元可以包括USB端子、CVBS(复合视频消隐同步)端子、组件端子、S视频端子(模拟)、DVI(数字视频接口)端子、HDMI(高清晰多媒体接口)端子、RGB端子、以及D-SUB端子，使得将外部设备的音频和视频信号输入到图像显示装置200。
无线电通信单元可以执行与其它电子设备的短程无线通信。根据诸如，蓝牙、RFID(射频识别)、IrDA(红外数据协会)、UWB(超带宽)、ZigBee以及DLNA(数字生活网络联盟)的通信标准，图像显示装置200可以通过网络被连接到其它电子设备。
外部设备接口单元231可以通过前述端子中的一个被连接到各种机顶盒，从而执行与机顶盒的输入/输出。
外部设备接口单元231可以接收在相邻的外部设备内部的应用或者应用的列表，并且将接收到的应用或者列表发送到控制器212或者存储器213。
网络接口单元232提供用于将图像显示装置100连接到包括因特网网络的有线/无线网络的接口。网络接口单元232可以被提供有用于与有线网络的连接的以太网端子，并且为了与无线网络的连接可以利用诸如WLAN(无线LAN(Wi-Fi)、Wibro(无线宽带)、Wimax(全球微波接入互操作性)、以及HSDPA(高速下行链路分组接入)的各种电信标准。
网络接口单元232提供用于将图像显示装置200连接到包括因特网网络的有线或者无线网络的接口。网络接口单元232可以被提供有用于访问有线网络的因特网端子，并且为了访问无线网络可以利用诸如WLAN(无线LAN(Wi-Fi)、Wibro(无线宽带)、Wimax(全球微波接入互操作性)、以及HSDPA(高速下行链路分组接入)的各种电信标准。
通过被访问的网络或者被链接到被访问的网络的其它网络，网络接口单元232可以将数据发送到其它的用户或者其它的电子设备，从其它的用户或者其它的电子设备接收数据。特别地，网络接口单元232可以将被存储在图像显示装置200中的一些内容数据发送到从被预先注册在图像显示装置200中的多个用户或者多个电子设备中选择的用户或者电子设备。
网络接口单元232可以通过被访问的网络或者被链接到被访问的网络的其它网络访问预定的网页。更加具体地，网络接口单元232可以通过网络访问预定的网页，从而执行与相对应的服务器的数据传输或者数据接收。而且，网络接口单元232可以接收从内容提供商或者网络运营商提供的内容或者数据。更加具体地，网络接口单元232可以接收通过网络从内容提供商或者网络提供商提供的电影、广告、游戏、VOD、广播信号等等的内容、和与该内容有关的信息。网络接口单元232可以接收从网络运营商提供的更新信息和固件的更新文件。网络接口单元232可以将数据发送到因特网或者内容提供商或者网络运营商。
并且，网络接口单元232可以通过从对于公众开放的应用进行选择通过网络接收所期待的应用。
图4是根据本发明的实施例的用于在图像显示设备200和移动终端100中的应用启动的序列的流程图。
参考图4，例如，如下面解释通过UPnP(通用即插即用)连接前述的图像显示设备200和前述的移动终端100的情况。
首先，UPnP是设置在位于相同的子网络中的设备之间的连接的技术。当设备被添加到本地网络时，UPnP使被添加的设备能够被自动地连接到支持UPnP的另一设备并且与支持UPnP的另一设备相互操作。UPnP的主要功能包括自动地搜索用于特定资源的本地网络的设备广告功能、远程地激活特定设备的特定功能或者请求关于特定设备的信息的服务行为调用功能、交换设备之间的事件的数据订阅功能等等。
用于在附图中示出的应用启动的序列是前述的服务行为调用的一个示例并且是用于图像显示设备200启动被安装在移动终端100处的应用的序列。在这样的情况下，图像显示设备200包括UPnP客户端201作为负责UPnP功能的模块。并且，移动终端100包括UPnP服务器101作为负责UPnP功能的模块。
UPnP客户端201将命令“SetClientProfile”发送到UPnP服务器101[S101]。在这样的情况下，SetClientProfile将UPnP客户端201的客户端简档注册到UPnP服务器101。在这样的情况下，客户端简档是关于UPnP客户端201的一般信息并且可以包括网络地址信息、可收发的数据大小信息、图标信息等等。将会参考图5描述客户端简档的细节。
随后，UPnP服务器101将更新的客户端简档发送到UPnP客户端201[S102]。特别地，发送被注册到UPnP服务器200的UPnP客户端100的客户端简档。
UPnP客户端201将命令“GetApplication”发送到UPnP服务器101[S103]。GetApplication发出对于被安装在UPnP服务器101处的应用当中的能够在UPnP客户端201中启动的应用的列表的请求。
然后UPnP服务器101将能够在UPnP客户端201中启动的应用的列表(应用列表)发送到UPnP客户端201[S104]。在这样的情况下，应用列表可以包含应用信息、显示信息、远程信息、音频信息等等。并且，稍后将会参考图6详细地描述应用列表。
UPnP客户端201将命令特定应用的启动的启动应用发送到UPnP服务器101[S105]。特别地，用户能够命令在前述的应用列表中包含的应用当中的特定应用的启动。这样做时，使用启动应用，UPnP客户端201命令UPnP服务器101启动用户选择的特定应用。
随后，UPnP服务器101将远程协议信息发送到UPnP 201[S106]。在这样的情况下，远程协议信息包含关于在应用之间使用的远程协议的信息。
然后，UPnP服务器101将通过应用的启动生成的数据发送到UPnP客户端201[内容传输：S107]。
UPnP客户端201将用于请求关于特定应用的状态信息的命令“GetApplicationStatus”发送到UPnP服务器101[S108]。然后UPnP服务器101将被请求的应用状态信息发送到UPnP客户端201[应用状态请求：S109]。
最后，UPnP客户端201将用于终止特定应用的命令“TerminateApplication”发送到UPnP服务器101[S110]。UPnP服务器101终止特定应用的启动并且然后向UPnP客户端201通知相对应的应用的终止[终止结果：S111]。
因此，根据用于应用启动的前述序列，图像显示设备200启动被安装在移动终端100处的特定应用并且被启动的相对应的应用的屏幕可以被输出到图像显示设备200。
图5是根据本发明的实施例的客户端简档的表。
参考图5，客户端文件是关于UPnP客户端201的一般信息并且可以包含连接信息、RTP信息以及图标偏好。
连接信息是UPnP客户端201的通信连接信息并且可以包含蓝牙MAC地址(Bdaddr)、指示是否使用蓝牙作为音频数据传输的基本信道的信息(startConnection)等等。
RTP信息是关于UPnP客户端201的RTP(实时协议)的信息，并且可以包含可支持的RTP有效载荷类型信息(payloadtype)、对于回放通过RTP接收到的音频数据所要求的最小缓冲大小信息(audioIPL)、用于缓冲通过RTP接收到的音频数据的最大缓冲大小信息(audioMPL)等等。
图标偏好是关于由UPnP客户端201使用的图标的信息并且可以包含图标图像的类型(mimetype)、图标图像大小信息(例如，高度、宽度等等)等等。
UPnP客户端201通过前述的命令“SetClientProfile”将UPnP客户端201的客户端简档注册到UPnP服务器101。然后UPnP服务器101使用被注册的客户端简档与UPnP 201通信。
图6是根据本发明的实施例的应用列表的表。
参考图6，应用列表是在被安装在UPnP服务器101处的应用当中的能够在UPnP客户端201中启动的应用的列表，并且可以包括诸如应用信息、显示信息、远程信息、音频信息等等的相对应的应用的属性信息。
应用信息包括关于在UPnP客户端201中可启动的应用的种类的信息(appCategory)和关于应用的信任级别的信息(trustLevel)。应用的信任级别(trustLevel)的一个示例可以包括指示相对应的应用是否对应于未知的应用的信息、用户配置应用、自我注册的应用或者被注册的应用。
显示信息可以包括关于通过应用提供的内容种类的信息(contentCategory)和关于用于确定是否输出内容的规则的信息(contentRule)。
远程信息可以包括关于在应用之间要使用的远程协议的信息(protocolID)、关于通过远程协议发送的内容类型的信息等等。
并且，音频信息可以包括关于音频内容的类型信息(audioType)、关于音频类型的种类的信息(audioCategory)、关于当前音频内容的信任级别的信息(trustLevel)等等。
因此，UPnP客户端201经由前述的命令“GetApplicationList”接收应用列表并且然后能够辨别在UPnP客户端201启动的应用的种类和属性信息。
根据用于应用启动的序列的上面的描述，在图像显示设备200中启动在移动终端100处安装的特定应用并且将关于被启动的应用的信息被输出到图像显示设备200。
在下面的描述中，为了让移动终端100和图像显示设备200相互共享屏幕，解释被配置成将移动终端100和图像显示设备200中的一个的屏幕信息发送到另一个的屏幕发送系统。
特别地，在包括移动终端100和图像显示设备200的屏幕发送系统中，当被相互连接的图像显示设备200和移动终端100中的一个的屏幕信息被发送到另一个并且从另一个输出时，两个设备(即，图像显示设备200和移动终端100)中的每一个可以能够给用户提供相同的屏幕。
在本说明书中，如下地描述将移动终端100的屏幕信息发送到图像显示设备200的一个示例。
并且，根据本发明的屏幕发送系统能够使用VNC(虚拟联网计算)将移动终端100的屏幕信息发送到图像显示设备200。
特别地，VNC(虚拟联网计算)是用于使远程定位的设备相互共享帧缓冲器的RFB(远程帧缓冲器)协议。根据VNC，如果客户端经由网络发出用于当前帧缓冲器的请求，则服务器递送捕获的帧缓冲器并且然后经由网络以客户端可理解的图形格式递送帧缓冲器。因此，两个设备能够相互共享屏幕。
在本说明书中，如果使用VNC(虚拟联网计算)将移动终端的屏幕信息发送到图像显示设备200，则其能够被命名为VNC服务并且被如下地描述。
图7是根据本发明的实施例的图像显示设备200和移动终端100的屏幕发送系统的示意图。
参考图7，移动终端100可以包括VNC服务器102作为负责上述VNC服务的模块和被配置成将被发送的屏幕输出到服务器的输出单元103。图像显示设备200可以包括VNC客户端202作为负责前述的VNC服务的模块和被配置成将被发送的屏幕输出到用户的输出单元203。
通过移动终端100的控制器180和图像显示设备200的控制器212分别实现本发明的VNC服务器102和VNC客户端202。可替选地，VNC 102和VNC客户端202可以分别被实现成独立的软件模块。
VNC服务器102和VNC客户端202可以使用VNC(虚拟联网计算)执行发送移动终端100或者图像显示设备200的屏幕信息的VNC服务。
如在前面的描述中所提及的，为了执行VNC服务，VNC服务器102和VNC客户端202中的每一个使用用于使远程定位的设备能够相互共享帧缓冲器的RFB(远程帧缓冲器)协议将一个设备的屏幕信息和显示控制信息发送到另一设备。在这样的情况下，本发明的显示控制信息可以包括与被发送的屏幕有关的信息、关于各个设备的帧缓冲器的信息等等。
在下面的描述中，参考附图详细地解释本发明的VNC服务。
图8是根据本发明的实施例的VNC服务的流程图。
参考图8，根据被配置成将移动终端100的屏幕信息发送到图像显示设备200的本发明的VNC服务，被保存在移动终端100的帧缓冲器中的移动终端100的信息被发送到图像显示设备200。
通过在附图中示出的步骤能够执行本发明的前述VNC服务。参考附图详细地描述本发明的VNC服务。
首先，VNC客户端202将包含图像显示设备200的帧缓冲器的大小、名称、颜色支持信息等等的客户端初始化信息发送到VNC服务器102[S201]。并且，VNC服务器102将包含移动终端100的帧缓冲器的大小、名称、颜色支持信息等等的服务器初始消息发送到VNC客户端202[S201]。
VNC客户端202将包含关于通过图像显示设备200可支持的编码类型的编码类型信息的设置编码消息发送到VNC服务器102[S203]。随后，VNC服务器102通过图像显示设备200可支持的编码类型编码移动终端100的屏幕信息并且然后发送被编码的信息。
VNC客户端202将包含由图像显示设备200可支持的压缩方案信息的设置像素格式消息发送到VNC服务器102[S204]。随后，VNC服务器102通过图像显示设备200可支持的压缩方案压缩移动终端100的屏幕信息并且然后发送被压缩的信息。
VNC客户端202将包含请求移动终端的帧缓冲器更新移动终端100的屏幕信息的信息的帧缓冲器更新请求消息发送到VNC服务器102[S205]。
如果已经接收到帧缓冲器更新请求消息，则VNC客户端202更新在帧缓冲器中的移动终端100的当前屏幕信息。
VNC服务器102将包含指示移动终端100的帧缓冲器中的屏幕信息的信息的帧缓冲器更新消息和被更新的帧缓冲器中的相对应的信息发送到VNC客户端202[S206]。
最后，VNC客户端202从移动终端100的被更新的帧缓冲器中带来移动终端100的屏幕信息并且然后将相对应的屏幕信息输出到图像显示设备200。
如在前面的描述中所提及的，在本发明的VNC服务中，VNC服务器102和VNC客户端202交换各种消息以执行VNC服务。在下面的描述中，解释通过本发明的VNC服务使用的消息。
图9是根据本发明的实施例的VNC服务的消息的表。并且，图10是根据本发明的实施例的VNC服务的扩展消息的表。
参考图9和图10，本发明的VNC服务的消息可以包括设置像素格式、设置编码、帧缓冲器更新请求、键事件、指示器事件、客户端剪切文本、帧缓冲器更新、设置颜色地图实体、铃、以及服务器剪切文本。
设置像素格式可以包括关于图像显示设备200可支持的压缩方案(像素格式)的信息。
设置编码可以包括关于由图像显示设备200可支持的编码类型的信息。
帧缓冲器更新请求可以包括用于向移动终端100的帧缓冲器发出移动终端100的屏幕信息的更新的信息。
键事件可以包括关于通过图像显示设备200的硬键(例如，在PC的情况下键盘)出现的事件的信息。
指示器事件可以包括通过图像显示设备200的指示器出现的事件的信息。
客户端剪切文本可以包括关于图像显示设备200的剪贴板事件信息的信息。
帧缓冲器更新可以包括指示在移动终端100的帧缓冲器中已经更新的屏幕信息的信息和关于被更新的帧缓冲器的信息。稍后将会参考图15和图16将会详细地描述帧缓冲器更新消息。
设置彩色地图实体可以包括被保存在帧缓冲器中的屏幕的彩色地图(调色板)信息。
铃可以包括用于生成来自于图像显示设备200的铃声的信息。
ServerCutText可以包括移动终端100的剪贴板事件信息。
同时，本发明的VNC服务的扩展消息可以包括在图10中所示的各种消息作为用于共享移动终端100的屏幕的各种控制信息。
在扩展的消息中，显示配置可以包括诸如关于屏幕方向变化的可能性的信息、关于上/下缩放比例的可能性的信息、关于空白帧缓冲器更新消息处理的可能性的信息、关于支持帧缓冲器可替选文本的可能性的信息、关于可支持像素格式的信息、关于设备的物理大小的信息、关于离用户的距离的信息等等的信息。稍后将会参考图14详细地描述与图像显示设备200的帧缓冲器的各种信息相对应的客户端显示配置。
事件配置可以包括关于键盘或者UI的语言设置的信息、关于各种硬键(例如，旋钮、ITU键、虚拟键盘等等)的信息和诸如事件(例如，诸如单/多触摸、多触摸的总输入计数、压力等等的输入类型)设置信息。
事件映射可以包括关于用于硬键事件的输入功能激活的请求和处理。
设备状态可以包括诸如设备的键/触摸输入、锁定/解锁、屏保模式、夜间模式、音频输入、对车辆驾驶员引起的干扰的存在或者不存在、帧缓冲器的当前水平/垂直角度等等的可能性的设备状态信息。
帧缓冲器/音频阻挡通知可以包括指示被递送的帧缓冲器/音频被切断的消息信息。
触摸事件可以包括多触摸输入信息。
同时，本发明的VNC服务提供帧变换。根据本发明的帧变换，移动终端100的屏幕信息以被变换的方式被发送到图像显示设备200。
特别地，移动终端100没有发送移动终端100的屏幕的整个像素数据而是以缩小移动终端100的屏幕的大小或者改变移动终端100的屏幕的像素格式(例如，减少颜色深度)的方式发送移动终端100的屏幕。
在下面的描述中，解释使用帧变换在图像显示设备200和移动终端100之间发送屏幕的方法。
图11是用于根据本发明的实施例的在图像显示设备200和移动终端100之间发送屏幕的方法的图。
参考图11，根据使用本发明的帧变换在图像显示设备200和移动终端100之间发送屏幕的方法，移动终端100创建移动终端100的屏幕信息。例如，移动终端100能够通过捕获移动终端100的当前帧缓冲器创建屏幕信息。
随后，移动终端100变换被创建的屏幕信息的图像大小、被创建的屏幕信息的像素格式等等。例如，可以以缩小图像的大小或者将像素格式的颜色深度变成低颜色深度的方式变换移动终端100的屏幕信息。在这种情况下，可以减少屏幕信息的数据大小。移动终端通过图像显示设备200可支持的编码类型编码被变换的屏幕信息。
使用前述的VNC服务可以将上面变换的移动终端100的屏幕信息发送到图像显示设备200。特别地，移动终端100可以经由诸如帧缓冲器更新等等的消息将变换的移动终端100的屏幕信息发送到图像显示设备200。
随后，图像显示设备200对接收到的移动终端100的屏幕信息执行解码和重新变换。特别地，图像显示设备200解码被编码的屏幕信息并且然后将被缩小的图像大小重新变换成原始大小。然后图像显示设备200将重新变换的移动终端100的屏幕信息输出给用户。
根据使用前述的帧变换在图像显示设备200和移动终端100之间发送屏幕的方法，因为缩小被发送的屏幕信息的数据大小，所以能够保存编码/解码/数据传输时间等等并且增加被发送的屏幕的帧率。
在图像显示设备200和移动终端100之间发送屏幕的方法中，能够根据移动终端100或者设备的屏幕的状态动态地应用前述的帧变换。特别地，根据设备或者移动终端100的屏幕的状态，是否使用帧变换可以被设置不同或者屏幕变换级别可以被设置不同。
例如，像移动终端100或者图像显示设备200的数据处理性能低的情况、屏幕改变的情况、或者通过用户输入到屏幕的发生切换屏幕的情况一样，在高清晰度的屏幕是不必要的情况下，图像大小可以进一步被缩小或者屏幕信息可以变化成具有低颜色深度的像素格式。
特别地，通过用户输入到屏幕的发生切换屏幕时，如果图像大小被进一步缩小或者屏幕信息被变成具有低颜色深度的像素格式，则屏幕切换速度(即，屏幕响应速度)可以被增加。
在这样的情况下，根据本发明，以从预设的调整大小级别和像素格式选择的方式可以确定被切换的图像大小和颜色深度。
图12是根据本发明的实施例的调整大小级别的表。并且，图13是根据本发明的实施例的像素格式的表。
参考图12，本发明可以根据重新调整大小水平确定调整大小因素。特别地，如果调整大小水平变高，则调整大小因素和被变形的图像大小可以被设置为较小。
参考图13，本发明可以限定包括诸如颜色深度、每比特像素等等的信息的特定像素格式。并且，本发明可以使用对于公众已知的常规的像素格式。
另一方面，在移动终端100或者图像显示设备200的数据处理性能高的情况下，对于诸如SMS图像、电子邮件图像等等的静止图像，可以不使用帧变换，调整大小水平可以被降低(即，调整大小水平可以被增加)，屏幕信息可以变成具有高颜色深度的像素格式。因此，能够发送和输出高清晰度的屏幕信息。
在下面的描述中，参考附图解释用于实现在移动终端100或者图像显示设备200之间的上述屏幕发送方法的数据结构。
图14是根据本发明的实施例的客户端显示配置的表。
参考图14，如在前面的描述中所提及的，根据本发明的实施例的客户端显示配置可以包括关于图像显示设备200的帧缓冲器等等的信息。
根据本发明的实施例的客户端显示配置可以进一步包括被使用的帧变换和像素格式支持以及关于图像显示设备200的帧缓冲器的信息。
被使用的帧变换可以包括指示在移动终端100和图像显示设备200之间的屏幕传输中是否应用前述帧变换的信息。
像素格式支持可以包括图像显示设备200可支持的像素格式。
VNC客户端202可以将客户端显示配置消息发送到VNC服务器201。并且，VNC服务器201和VNC客户端202可以根据客户端显示配置信息执行移动终端100和图像显示设备200的前述屏幕发送方法。
图15是根据本发明的实施例的帧缓冲器更新的表，并且图16是用于根据本发明的实施例的帧缓冲器更新消息的一个示例的图。
如在前面的描述中所提及的，本发明的帧缓冲器更新可以包括指示在移动终端100的帧缓冲器中更新屏幕信息的信息和与相对应的更新屏幕有关的信息。
本发明的帧缓冲器更新可以进一步包括调整大小级别和像素格式，如在图15中所示。
调整大小级别可以包括在图12中限定的前述调整大小因素信息。并且，像素格式可以包括在图13中限定的前述像素格式信息。
在帧缓冲器更新消息的示例中，调整大小水平和像素格式分别被设置为2和RGB565。
根据本示例，在移动终端的帧缓冲器中当前更新的屏幕信息指示原始屏幕的图像大小被缩小了1/4并且原始屏幕的像素格式变成像素格式“RGB565”。
图像显示设备200将接收到的屏幕信息扩大了4X大小并且然后通过根据像素格式“RGB565”执行图像处理将移动终端100的屏幕信息输出给用户。
虽然参考其优选实施例在此已经描述和图示本发明，但是对于本领域的技术人员来说显然的是，在没有脱离本发明的精神和范围的情况下能够进行各种修改和变化。因此，旨在本发明覆盖落入随附的权利要求和等效物的范围内的本发明的修改和变化。
发明的模式
以用于本发明的最佳模式详细地描述本发明的各种实施例。
工业实用性
本发明可应用于用于共享不同设备之间的屏幕的各种系统。

Claims (15)

1.一种安装在车辆上的图像显示设备，包括：
显示单元，所述显示单元被配置成显示图像；
通信单元，所述通信单元被配置成与移动终端收发数据；以及
控制器，所述控制器被配置成：
从所述移动终端通过所述通信单元接收所述移动终端的编码的屏幕信息和所述屏幕信息的第一控制信息，
通过所述通信单元将所述屏幕信息的第二控制信息发送到所述移动终端，
基于所接收的所述第一控制信息解码所述编码的屏幕信息，
变换所述编码的屏幕信息为原始大小，
从所述移动终端接收将所述屏幕信息变换成具有低颜色深度的像素格式的变换的屏幕信息，以及
显示所述变换的屏幕信息，
其中所述第一控制信息包括所述屏幕信息的图像大小变换信息和所述屏幕信息的图像压缩格式信息，并且
其中所述第二控制信息包括可支持的压缩格式信息。
2.根据权利要求1所述的图像显示设备，其中，所述第二控制信息进一步包括指示所述屏幕信息是否是被变换的屏幕的信息。
3.根据权利要求1所述的图像显示设备，其中，所述第二控制信息进一步包括可支持的编译类型信息。
4.根据权利要求1所述的图像显示设备，其中，所述第二控制信息进一步包括在被安装在所述车辆上的所述图像显示设备中包括的第一帧缓冲器的信息。
5.根据权利要求1所述的图像显示设备，其中，所述图像大小变换信息包括所述屏幕信息的图像大小的多个信息。
6.根据权利要求1所述的图像显示设备，其中，所述控制器进一步配置为接收从包括在所述移动终端中的第二帧缓冲器生成的所述屏幕信息。
7.根据权利要求6所述的图像显示设备，其中，所述第二控制信息包括用于请求所述第二帧缓冲器更新所述屏幕信息的信息。
8.根据权利要求6所述的图像显示设备，其中，所述第一控制信息包括用于向所述第二帧缓冲器通知已经更新所述屏幕信息的信息和被更新的第二帧缓冲器的信息。
9.一种移动终端，包括：
通信单元，所述通信单元被配置成与外部图像显示设备收发数据；和
控制器，所述控制器被配置成：
通过所述通信单元将所述移动终端的屏幕信息和所述屏幕信息的第一控制信息发送到所述图像显示设备，
通过所述通信单元从所述图像显示设备接收所述屏幕信息的第二控制信息，
获取所述移动终端的当前帧缓冲器；
基于所获取的当前帧缓冲器生成所述屏幕信息，
将生成的屏幕信息的像素格式变换成具有低颜色深度的像素格式，
基于所接收的所述屏幕信息的第二控制信息以由所述图像显示设备可支持的编码类型编码变换的屏幕信息，
通过所述通信单元将所述编码的屏幕信息和所述屏幕信息的第一控制信息发送到所述图像显示设备，
其中所述第一控制信息包括所述屏幕信息的图像大小变换信息和所述屏幕信息的图像压缩格式信息，并且
其中所述第二控制信息包括所述图像显示设备可支持的可支持压缩格式信息。
10.根据权利要求9所述的移动终端，其中，所述第二控制信息进一步包括指示所述屏幕信息是否是被变换的屏幕的信息。
11.根据权利要求9所述的移动终端，其中，所述第二控制信息进一步包括通过所述图像显示设备可支持的编码类型信息和在被安装在车辆上的所述图像显示设备中包括的第一帧缓冲器的信息。
12.根据权利要求9所述的移动终端，其中，所述图像大小变换信息包括所述屏幕信息的图像大小的多个信息。
13.根据权利要求9所述的移动终端，其中，所述控制器进一步配置为从被包括在所述移动终端中的第二帧缓冲器生成所述屏幕信息。
14.根据权利要求13所述的移动终端，其中，所述第二控制信息包括用于请求所述第二帧缓冲器更新所述屏幕信息的信息。
15.根据权利要求13所述的移动终端，其中，所述第一控制信息包括用于向所述第二帧缓冲器通知已经更新所述屏幕信息的信息和被更新的第二帧缓冲器的信息。
CN201280041451.9A 2011-08-25 2012-03-28 移动终端、安装在车辆上的图像显示设备及使用其的数据处理方法 Active CN103765913B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201161527610P 2011-08-25 2011-08-25
US61/527,610 2011-08-25
PCT/KR2012/002255 WO2013027908A1 (en) 2011-08-25 2012-03-28 Mobile terminal, image display device mounted on vehicle and data processing method using the same

Publications (2)

Publication Number Publication Date
CN103765913A CN103765913A (zh) 2014-04-30
CN103765913B true CN103765913B (zh) 2018-01-12

Family

ID=47743034

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280041451.9A Active CN103765913B (zh) 2011-08-25 2012-03-28 移动终端、安装在车辆上的图像显示设备及使用其的数据处理方法

Country Status (5)

Country Link
US (1) US9116658B2 (zh)
EP (1) EP2749037B1 (zh)
KR (1) KR101556180B1 (zh)
CN (1) CN103765913B (zh)
WO (1) WO2013027908A1 (zh)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2749037B1 (en) * 2011-08-25 2021-11-24 Lg Electronics Inc. Mobile terminal, image display device mounted on vehicle and data processing method using the same
EP2597838B1 (en) * 2011-11-28 2018-09-05 Lg Electronics Inc. Mobile terminal and image display apparatus mounted in a car
US9060010B1 (en) * 2012-04-29 2015-06-16 Rockwell Collins, Inc. Incorporating virtual network computing into a cockpit display system for controlling a non-aircraft system
WO2014157839A1 (en) * 2013-03-26 2014-10-02 Samsung Electronics Co., Ltd. Terminal apparatus mountable in vehicle, mobile device for working with the terminal apparatus, and methods for providing service thereof
WO2014203021A1 (en) 2013-06-19 2014-12-24 Freescale Semiconductor, Inc. Visual display content source identifier and method
GB2517961B (en) * 2013-09-06 2017-12-13 Jaguar Land Rover Ltd A vehicle
US8938394B1 (en) * 2014-01-09 2015-01-20 Google Inc. Audio triggers based on context
KR102203060B1 (ko) 2014-04-07 2021-01-14 엘지이노텍 주식회사 통신 모듈 및 이를 이용한 데이터 분할 전송방법
US11044283B2 (en) * 2015-08-06 2021-06-22 Ford Global Technologies, Llc Methods and systems to customize a vehicle computing system based on an electronic calendar
US10223061B2 (en) * 2015-12-17 2019-03-05 International Business Machines Corporation Display redistribution between a primary display and a secondary display
CN106375432A (zh) * 2016-08-31 2017-02-01 乐视控股（北京）有限公司 一种资源处理方法及系统
KR102623181B1 (ko) * 2016-10-05 2024-01-11 엘지전자 주식회사 무선 디바이스 및 무선 시스템
KR101876636B1 (ko) * 2016-10-17 2018-07-10 현대오트론 주식회사 메시지 송수신 장치 및 방법
KR101882198B1 (ko) * 2016-11-01 2018-07-26 현대자동차주식회사 차량 및 그 제어방법
CN108763392B (zh) * 2018-05-21 2021-03-02 深圳市鼎阳科技股份有限公司 一种用于测量设备的网页抓取界面方法及其系统
US20190388851A1 (en) * 2018-06-25 2019-12-26 Faurecia Systemes D'echappement Large engine mixer for exhaust system
US20210343304A1 (en) * 2018-08-31 2021-11-04 Huawei Technologies Co., Ltd. Method for Improving Voice Call Quality, Terminal, and System
KR20200039519A (ko) * 2018-09-27 2020-04-16 현대자동차주식회사 차량용 인포테인먼트 시스템의 화면 설정 방법 및 그 방법이 적용된 차량용 인포테인먼트 시스템
CN110286864A (zh) * 2019-05-15 2019-09-27 武汉卡比特信息有限公司 一种手机与计算机类终端自适应互联投屏方法
CN112004115A (zh) * 2020-09-04 2020-11-27 京东方科技集团股份有限公司 图像处理方法及图像处理系统
CN114115786A (zh) * 2021-11-30 2022-03-01 上汽通用五菱汽车股份有限公司 多功能应用集中显示控制的方法、装置及可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1625892A (zh) * 2002-02-02 2005-06-08 苏坡斯坎伯集团公共有限公司 发送图像数据的装置和方法
CN1653780A (zh) * 2002-05-17 2005-08-10 西门子公司 用于多媒体消息有效传输的预处理方法及无线电通信机
CN1802826A (zh) * 2003-06-06 2006-07-12 西门子公司 用于在基于mms的通信系统中传输消息的方法
CN101895747A (zh) * 2009-05-20 2010-11-24 宏正自动科技股份有限公司 采用多重分辨率分解的多通道kvm服务器系统

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6470378B1 (en) * 1999-03-31 2002-10-22 Intel Corporation Dynamic content customization in a clientserver environment
KR100828342B1 (ko) * 2000-06-10 2008-05-08 삼성전자주식회사 화질 열화를 줄인 데이터 레이트 감소 장치
JP3534101B2 (ja) * 2001-10-18 2004-06-07 ミノルタ株式会社 デジタルカメラ
US20040093432A1 (en) * 2002-11-07 2004-05-13 Eastman Kodak Company Method and system for conducting image processing from a mobile client device
US20040103438A1 (en) * 2002-11-27 2004-05-27 Yong Yan Methods and systems for transferring events including multimedia data
EP1629369B1 (en) * 2003-06-02 2018-01-24 Disney Enterprises, Inc. System and method of programmatic window control for consumer video players
KR100982511B1 (ko) * 2003-10-08 2010-09-16 삼성전자주식회사 원격 제어 장치 및 방법
CN100553277C (zh) * 2004-09-15 2009-10-21 腾讯科技（深圳）有限公司 一种处理图像及其应用于即时通讯的方法和系统
US7606660B2 (en) * 2005-12-31 2009-10-20 Alpine Electronics, Inc. In-vehicle navigation system with removable navigation unit
KR20070111058A (ko) 2006-05-16 2007-11-21 주식회사 드리머 차량용 미디어 파일 전송 및 재생 시스템 및 이를 이용한차량용 미디어 파일 전송 방법
US20080088636A1 (en) * 2006-10-13 2008-04-17 Nee Shen Ho System and method for the display and control of virtual environments in a single pipe graphics memory controller hub using picture-in-picture
KR101415571B1 (ko) 2007-10-15 2014-07-07 삼성디스플레이 주식회사 표시장치 및 그 구동방법
EP2237526A1 (en) * 2009-03-30 2010-10-06 NEC Corporation Method for optimizing the remote display transfer in thin client computing environment
TW201117982A (en) * 2009-11-23 2011-06-01 Htc Corp Electronic system applied to a transport and related control method
US8359020B2 (en) * 2010-08-06 2013-01-22 Google Inc. Automatically monitoring for voice input based on context
JP2012060261A (ja) * 2010-09-06 2012-03-22 Sony Corp 画像処理装置および方法
KR101017866B1 (ko) 2010-09-08 2011-03-04 주식회사 텔레칩스 네비게이션을 이용한 휴대단말기 제어 방법
GB2481870B (en) * 2010-12-14 2012-06-13 Realvnc Ltd Method and system for remote computing
US10564791B2 (en) * 2011-07-21 2020-02-18 Nokia Technologies Oy Method and apparatus for triggering a remote data entry interface
EP2749037B1 (en) * 2011-08-25 2021-11-24 Lg Electronics Inc. Mobile terminal, image display device mounted on vehicle and data processing method using the same

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1625892A (zh) * 2002-02-02 2005-06-08 苏坡斯坎伯集团公共有限公司 发送图像数据的装置和方法
CN1653780A (zh) * 2002-05-17 2005-08-10 西门子公司 用于多媒体消息有效传输的预处理方法及无线电通信机
CN1802826A (zh) * 2003-06-06 2006-07-12 西门子公司 用于在基于mms的通信系统中传输消息的方法
CN101895747A (zh) * 2009-05-20 2010-11-24 宏正自动科技股份有限公司 采用多重分辨率分解的多通道kvm服务器系统

Also Published As

Publication number Publication date
US20130050271A1 (en) 2013-02-28
KR20140056315A (ko) 2014-05-09
US9116658B2 (en) 2015-08-25
WO2013027908A1 (en) 2013-02-28
EP2749037B1 (en) 2021-11-24
EP2749037A1 (en) 2014-07-02
EP2749037A4 (en) 2015-04-29
KR101556180B1 (ko) 2015-10-13
CN103765913A (zh) 2014-04-30

Similar Documents

Publication Publication Date Title
CN103765913B (zh) 移动终端、安装在车辆上的图像显示设备及使用其的数据处理方法
CN103814546B (zh) 移动终端、被安装到车辆上的图像显示装置及其数据处理方法
US9919598B2 (en) Mobile terminal, image display apparatus mounted in vehicle and data processing method using the same
CN103916534B (zh) 移动终端
CN102281348B (zh) 使用增强现实引导路线的方法以及使用该方法的移动终端
US9332105B2 (en) Communication connecting apparatus and method
CN103493005B (zh) 图像处理装置和用于控制图像处理装置的方法
US8265557B2 (en) Mobile terminal capable of being connected to audio output device using short-range communication and method of controlling the operation of the mobile terminal
US20150145790A1 (en) Input device disposed in handle and vehicle including the same
CN105094662A (zh) 移动终端及其控制方法
US20130331147A1 (en) Service providing system including display device and mobile device, and method for providing service using the same
CN104866265B (zh) 多媒体文件的显示方法和装置
CN102404444A (zh) 移动终端、电子系统以及使用其传送和接收数据的方法
CN103391462A (zh) 显示设备及其执行和安装应用的方法
JP2014132460A (ja) ディスプレイ装置及びモバイルデバイスを含むメッセージ送信システム、並びにメッセージ送信方法
CN106550128A (zh) 一种内存管理方法及终端
CN109684825B (zh) 一种权限管理方法及终端设备
CN106598457A (zh) 一种声音播放控制方法、装置及终端
WO2021129771A1 (zh) 应用分享方法、第一电子设备及计算机可读存储介质
CN113314120B (zh) 处理方法、处理设备及存储介质
CN106850080A (zh) 一种联系人信息的发送方法及移动终端
CN103262429A (zh) 移动终端的图像处理设备及其方法
CN106534527A (zh) 一种导航语音处理装置和方法
KR101882711B1 (ko) 이동 단말기 및 그것의 작동 방법
WO2021204153A1 (zh) 资源开销的确定方法及相关设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant