CN101582053B - 将用户界面推到远程设备 - Google Patents

将用户界面推到远程设备 Download PDF

Info

Publication number
CN101582053B
CN101582053B CN200910140597.9A CN200910140597A CN101582053B CN 101582053 B CN101582053 B CN 101582053B CN 200910140597 A CN200910140597 A CN 200910140597A CN 101582053 B CN101582053 B CN 101582053B
Authority
CN
China
Prior art keywords
annex
portable media
media device
user interface
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN200910140597.9A
Other languages
English (en)
Other versions
CN101582053A (zh
Inventor
W·布尔
A·M·菲德尔
J·L·多罗古斯克尔
E·C·舒尔波特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Priority to CN201310723831.7A priority Critical patent/CN103778082B/zh
Publication of CN101582053A publication Critical patent/CN101582053A/zh
Application granted granted Critical
Publication of CN101582053B publication Critical patent/CN101582053B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G06F9/452—Remote windowing, e.g. X-Window System, desktop virtualisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]

Abstract

可在具有用户输入设备和显示设备的远程控制附件设备上呈现图形用户界面(“GUI”)。所述GUI可由便携式媒体设备定义和管理，其中利用所述GUI来控制所述便携式媒体设备。所述便携式媒体设备可向所述附件提供要显示的GUI图像。所述附件可向所述便携式媒体设备发送指示响应于所显示的图像而对输入设备的用户操作的信息。所述便携式媒体设备可处理该输入以识别用户所请求的动作并采取适当的动作，所述动作可包括更新提供给所述附件的所述GUI图像。

Description

将用户界面推到远程设备
技术领域
本发明通常涉及用于便携式媒体设备的附件，尤其涉及允许便携式媒体设备向附件提供用于控制该媒体设备的用户界面。
背景技术
便携式媒体设备允许用户存储媒体内容(音乐、视频、照片、有声读物等)和从几乎任何地方访问所存储的媒体内容。有些便携式媒体设备还允许用户将其他设备(这里称为″附件″或″附件设备″)连接到便携式媒体设备，从而增强便携式媒体设备的操作的某些方面。例如，大多数便携式媒体设备提供用于收听音频内容的头戴式受话器插座。某些附件提供扬声器，从而允许用户与别人分享声音，或者在可能无法使用头戴式受话器的环境中(诸如在驾驶时)收听。
在有些情况下，附件可用于控制便携式媒体设备的操作；这样的附件在这里被称为″远程控制设备″。远程控制设备可向便携式媒体设备发送指示用户所请求的操作(诸如开始或暂停重放、跳到下一曲目、回到前一曲目、在曲目中快进或回退，等等)的命令。便携式媒体设备可执行所请求的操作，从而允许用户操作该便携式媒体设备而无需触摸该便携式媒体设备。这样的远程控制操作在用户不便于直接操纵便携式媒体设备的界面的情况下特别有用。例如，便携式媒体设备趋于小型化，具有相对小的控件和显示屏。因而，用户在驾驶时或穿过某一场所时可能难以操作这样的设备。
某些远程控制设备提供图形用户界面(GUI)并允许用户执行更高级的功能，诸如浏览存储内容的数据库、选择要播放的内容等。例如，Johnson Controls International<check name>已经在开发一种供车辆中使用的″移动设备通道(Mobile Device Gateway)″；该系统包括用于便携式媒体设备的连接点和提供音频/视频接口的控制台。但是现有的远程GUI是由远程控制设备定义和控制的，因而，它们与由便携式媒体设备本身提供的GUI可能并不类似。在便携式媒体设备上可用的某些功能(诸如浏览或搜索数据库、调整重放设置等)可能不可用或难以找到。因而，用户可能无法执行所希望的功能。而且，由不同远程控制设备为相同便携式媒体设备提供的GUI可能相当不同，并且，将便携式媒体设备连接到不同的具有远程控件的附件的用户可能发现这种不一致性是令人沮丧的。
因此，希望提供更一致的远程用户界面体验。
发明内容
本发明的实施例涉及在远程控制附件设备上提供图形用户界面(″GUI″)，其中该GUI可由便携式媒体设备而不是该附件设备来定义和管理。附件设备可提供用户输入设备和视觉反馈设备的组合，诸如用于向用户呈现信息和反馈的荧光屏(video screen)与用于接收用户输入的按钮、旋钮、触摸屏和/或触摸板的组合。便携式媒体设备可向附件提供要显示在荧光屏上的图像；所述图像可包括各种用户界面元素，其可类似于或复制直接提供在便携式媒体设备上的″本地(native)″GUI。附件可向便携式媒体设备发送指示响应于所显示的图像而采取的用户动作的信息；这样的信息可指示例如特定按钮被按下或用户触摸了触摸敏感显示屏的特定部份。便携式媒体设备可处理该输入以识别用户所请求的动作并采取适当的动作。该动作可包括向附件提供要显示的更新后的GUI图像，其中该更新后的GUI图像反映了该用户动作。
本发明的一方面涉及利用附件控制便携式媒体设备的方法。所述附件可向便携式媒体设备提供配置信息。所述附件可从所述便携式媒体设备接收指定第一图形用户界面图像的第一图像信号，并可在所述附件的显示设备上显示所述第一图形用户界面图像。所述附件可检测对所述附件的输入控件(input contro1)的用户操作，并且可向所述便携式媒体设备发送指示所述输入控件被操作的输入信号。所述附件还可从所述便携式媒体设备接收指定要显示的第二图形用户界面图像的第二图像信号，并可在所述附件的显示设备上显示所述第二图形用户界面图像，其中所述第二图形用户界面图像反映了对所述输入控件的所述操作。
本发明的另一方面涉及提供到便携式媒体设备的接口的附件。所述附件可包括显示器、用户可操作的输入控件、被配置成与便携式媒体设备通信的接口，以及耦接到所述显示器、所述用户可操作的输入控件和所述接口的控制器(controller)。所述显示器可被配置成响应于从所述便携式媒体设备接收到的视频信号而显示图像。所述用户可操作的输入控件可被配置成响应于对所述输入控件的用户操作而生成输入信号。所述控制器可被配置成通过所述接口从所述便携式媒体设备接收定义第一图形用户界面图像的图像信号；在显示器上显示所述第一图形用户界面图像，从所述用户可操作的输入控件接收指示用户操作的控制信号，并且通过所述接口将所述控制信号传送给所述便携式媒体设备。
本发明的另一方面涉及利用附件控制便携式媒体设备的方法。所述便携式媒体设备可从所述附件接收配置信息。部分基于所述配置信息，所述便携式媒体设备可生成第一图形用户界面图像。所述便携式媒体设备可向所述附件发送指定第一图形用户界面图像的第一图像信号；所述附件可响应于所述第一图像信号在所述附件的显示设备上显示所述第一图形用户界面图像。所述便携式媒体设备可从所述附件接收指示所述附件的用户输入控件被操作的输入信号。部分基于所述输入信号，所述便携式媒体设备可生成第二图形用户界面图像，并且可向所述附件发送指定第二图形用户界面图像的第二图像信号；所述附件可响应于所述第二图像信号在所述附件的显示设备上显示所述第二图形用户界面图像。
本发明的另一方面涉及与附件一起使用的便携式媒体设备。所述便携式媒体设备可包括本地用户界面、附件接口和处理器，其中所述本地用户界面包括显示器和用户输入控制设备，所述附件接口被配置成与附件通信，并且所述处理器被耦接到所述本地用户界面和所述附件接口。所述处理器可被配置成通过所述附件接口向所述附件提供图形用户界面图像；通过所述附件接口从所述附件接收控制信号，所述控制信号指示所述附件的输入控件响应于所述图形用户界面图像的操作；以及响应于所述控制信号执行媒体设备操作。
以下的详细描述和附图一起将提供对本发明性质和优点的更好理解。
附图说明
图1A说明便携式媒体设备，图lB和1C说明根据本发明的实施例的具有用于图lA中便携式媒体设备的远程图形用户界面的附件设备。
图2是根据本发明的实施例的包括便携式媒体设备和附件的系统的框图。
图3是根据本发明的实施例的可用于在附件设备上提供用于便携式媒体设备的远程图形用户界面的过程的流程图。
具体实施方式
本发明的实施例涉及在远程控制附件设备上提供图形用户界面(″GUI″)，该GUI可由便携式媒体设备而不是该附件设备来定义和管理。所述附件设备提供用户输入设备和视觉反馈设备的组合，诸如用于向用户呈现信息和反馈的荧光屏与用于接收用户输入的按钮、旋钮、触摸屏和/或触摸板的组合。所述便携式媒体设备可向附件提供要显示在荧光屏上的图像；所述图像可包括各种用户界面元素，其可类似于或复制直接提供在所述便携式媒体设备上的GUI。所述附件可向所述便携式媒体设备发送指示响应于所显示的图像而采取的用户动作的信息；这样的信息可指示例如特定按钮被按下或用户触摸了触摸敏感显示屏的特定部份。所述便携式媒体设备可处理该输入以识别用户所请求的动作并采取适当的动作。所述动作可包括向附件提供要显示的更新后的GUI图像，其中该更新后的GUI图像反映了所述用户动作。
图lA和lB示出根据本发明一个实施例的便携式媒体设备(″PMD″)102和附件104。在图lA中，PMD 102具有可包括显示屏106和用户输入设备108(例如本申请的受让人Apple Inc.所制造和出售的某些iPodTM媒体播放器上的点拨轮)的用户接口。显示屏106可向用户呈现GUI图像，用户可通过操作用户输入设备108而与所述GUI图像交互。因此，例如，用户可导航所存储的媒体内容的数据库、选择要播放的一个或多个媒体资源、控制重放、以及调整PMD 102的设置。由显示屏106和输入设备108所提供的界面在这里被称为PMD 102的″本地GUI″。
图lA示出可由PMD 102的一个实施例显示的本地GUI图像的例子。在该例子中，本地GUI图像101包括位于顶部的专辑名称(″专辑″)和之下的曲目列表。当前选择的曲目(″曲目5″)被突出显示。向上和向下箭头105、107指示有可能滚动以查看另外的曲目，而滑块元素109指示当前选择的曲目在曲目列表中的大概位置。
PMD 102还具有设置在其底面112上的连接器110。连接器110提供到其他设备的机械和电耦接。
参考图1B，附件设备(也被称为″附件″)104可以是车载媒体控制单元，其可安装在诸如汽车之类的车辆的仪表板中、(例如汽车或飞机中的)座椅靠背上或别的地方。附件104可包括显示器114和布置在显示器114边缘附近的按钮116a-h。按钮116可提供″软键″，其功能可由附件104根据当前显示在显示器114上的内容来解释。
在操作时，附件104可播放媒体内容。例如，附件104可在显示器114上显示视频内容和/或将视频内容传递给(例如在司机或乘客座椅靠背上的)另一个显示设备。附件104可传递音频内容给车辆的扬声器系统。附件104还可提供对于其他功能的控制；例如，附件104可提供环境控制(加热器、空调)；与导航有关的控制(交互式地图、行驶方向)；对于无线电调谐器、DVD播放器等的控制；等等。
附件104还可包括适于接纳PMD 102的入坞舱(docking bay)118。例如，入坞舱118的大小和形状可适合于至少接纳PMD 102的底部，并且入坞舱118可包括与PMD 102的连接器110配对的连接器120，从而允许在PMD 102和附件104之间来回传送电信号。在一个可替换的实施例中，PMD 102和附件104可分别具有无线通信接口(例如，实施蓝牙标准的接口)，从而允许这两个设备交换信息而无需进行直接物理连接。
根据本发明的一个实施例，当图lA的PMD 102连接到图lB的附件104时，附件104可进入″远程GUI″操作模式。在该操作模式中，PMD102可向附件104提供GUI图像。附件104可在显示器114上显示该图像。该远程GUI图像可不经附件104修改而被显示为跟接收到的一样，从而允许PMD 102控制所述界面的外观。在某些实施例中，PMD 102提供远程GUI图像，该远程GUI图像复制PMD 102的本地GUI。在其他实施例中，PMD 102可提供符合本地GUI修改版本的远程GUI图像。例如，修改后的GUI可使用不同的字体或配色方案，或者可包括附加的或不同的控制选项。
在图1B中，附件104的显示器114显示一个示例性远程GUI图像111。类似于图lA中示出的本地GUI图像101，远程GUI图像111包括位于顶部的专辑名称(″专辑″)和之下的曲目列表。当前选择的曲目(″曲目5″)被突出显示。向上和向下箭头113、115指示有可能滚动以查看另外的曲目，而滑块元素117指示当前选择的曲目在曲目列表中的大概位置。向上箭头113和向下箭头115分别位于按钮116e和116h附近，从而指示按钮116e可被用来向上移动列表，而按钮116h可被用来向下移动列表。如下面所描述的，从操作到按钮116a-h的映射可由PMD 102确定。当用户按下按钮116a-h之一时，附件104可向PMD 102发送指示按钮116a-h中哪个按钮被按下的信号。PMD 102可解释该信号并采取适当的动作。所述动作可包括更新远程GUI图像、开始或暂停重放、修改设置或指示附件104修改设置，等等。
附件104的显示器114上的远程GUI图像111还可以包括本地GUI图像101上所没有的另外的元素。例如，远程GUI图像111包括指示″播放″操作(元素119)和″退出″操作(元素121)的GUI元素。元素119和121分别靠近按钮116a和116d放置，以指示可通过按下相邻的按钮而激活相应的操作。在这个例子中，用户可按下按钮116a以指示当前选择的曲目应当被播放。用户可按下按钮116d以指示附件104应当退出远程GUI模式，以允许用户访问其他功能(例如导航、气候控制等)。用于这样的其他功能的界面可能也由PMD 102控制或者可能不由PMD 102控制。在某些实施例中，退出远程GUI模式并不将附件104从PMD 102断开连接；例如，PMD 102和附件104可在附件104的其他功能被访问的同时继续播放媒体曲目。
图1C说明根据本发明另一个实施例的附件150。类似于附件104，附件150可以是车载媒体控制单元。附件150包括显示器152和适于接纳诸如图1A的PMD 102之类的PMD的入坞舱154。在这个例子中，入坞舱154包括与PMD 102的连接器110配对的连接器156，从而允许在PMD 102和附件150之间来回传送电信号。在一个可替换的实施例中，PMD 102和附件150可分别具有无线通信接口(例如，实施蓝牙标准的接口)，从而允许这两个设备交换信息而无需进行直接物理连接。
附件150的显示器152具有触摸敏感的覆盖，从而当用户触摸显示器152的一部分时，可以例如利用(x，y)像素坐标来识别被触摸的部分。用户可触摸所显示的GUI图像的元素以选择要采取的动作，如手158所示。在其他实施例中，显示器152的触摸敏感的覆盖还可以检测手指运动，诸如沿表面拖拽或打开或合拢手指。
类似于图1B的附件104，当PMD 102连接到附件150时，附件150可进入远程GUI操作模式并可显示由PMD 102提供的远程GUI图像151。类似于图lB中的远程GUI图像111，远程GUI图像151可以是图1A的本地GUI图像101的修改版本。远程GUI图像151包括位于顶部的专辑名称(″专辑″)和之下的曲目列表。当前选择的曲目(″曲目5″)被突出显示。向上和向下箭头153、155指示有可能滚动以查看另外的曲目，而滑块元素157指示当前选择的曲目在曲目列表中的大概位置。在该情况下，用户可触摸屏幕的某个区域以选择相应的动作。因而，例如，如图1C所示，用户(手158)可触摸向下箭头155以在列表中前移该选择(例如从″曲目5″到″曲目6″)。
远程GUI图像151还可以包括本地GUI图像101上所没有的另外的元素。例如，远程GUI图像151包括指示″播放″操作(元素159)、″回退″操作(元素161)和″退出″操作(元素163)的GUI元素。在这个例子中，用户可触摸″播放″元素159以指示当前选择的曲目应当被播放。用户可触摸″回退″元素161以在数据库层次结构中回溯地导航(例如，到从中选择了当前所显示专辑的专辑列表)。用户可触摸″退出″元素163以指示附件150应当退出远程GUI模式，以允许用户访问其他功能(例如导航、气候控制等)。如上所述，用于这样的其他功能的界面可能不由PMD 102控制。同样如上所述，退出远程GUI模式不必将附件150从PMD 102断开连接；例如，PMD 102和附件150可在其他功能被访问的同时继续播放媒体曲目。
如下面所描述的那样，GUI元素到屏幕区域的映射可由PMD 102确定。当用户触摸显示屏152的一部分时，附件154可简单地向PMD102发送指示屏幕的哪一部份被触摸的信号(例如被触摸位置的像素坐标)。PMD 102可解释该信号并采取适当的动作。所述适当的动作可包括更新远程GUI图像、开始或暂停重放、修改设置或指示附件104修改设置，等等。
在不同的时候，图lA的PMD 102可耦接到不同的附件。因而，例如，有时PMD 102可耦接到图lB的附件104并可提供适合于与其中用户输入设备是按钮116a-h的界面一起使用的远程GUI。在另一时候，PMD 102可耦接到图lC的附件150并可提供适合于与触摸屏界面一起使用的远程GUI。因为远程GUI受PMD 102的控制，因此用户可与PMD 102直接交互或通过各种附件交互，并且在从一种配置改变到另一种配置时体验通常一致的界面。这样的一致性可有助于使得不同界面的使用和从一种附件到另一种附件的转换对于用户更为直观。
应当理解，图lA-1C的系统是示意性的，并且变化和修改都是有可能的。可使用各种便携式媒体设备，而不限于PMD 102，并且本地GUI可随设备改变而变化。例如，某些PMD可提供触摸屏界面、内容列表的图形表示(例如包括专辑封面的图像)、动画GUI图像、或这里没有具体说明的其他特征。某些PMD还可加入除媒体资源存储、搜索和重放之外的其他功能。例子包括个人信息管理(例如日历、联系人)；电话通信(例如通过移动电话网络)；因特网连接(例如通过诸如IEEE 802.11标准族之类的无线通信协议)；地图和导航；等等。PMD可为其任何功能或所有功能提供远程GUI交互，并且可用功能的组合可随附件而变化。(例如，为了避免司机分心，可能希望在移动的汽车中禁用因特网浏览或视频重放。)
可以在多种附件中提供远程GUI模式。例如，除了在车载系统中以外，具有远程GUI的PMD界面可设在健身机(诸如跑步机、固定自行车等)的控制台上，在商用或私人飞机的空中娱乐控制台中，在包括诸如电视之类的视频设备的家庭娱乐系统中(例如使用机顶盒或视频显示设备的集成部件来提供到PMD的接口)，等等。
图2是根据本发明一个实施例的系统200的框图。系统200可包括PMD 202(例如实现图lA的PMD 102)和附件220(例如实现图lB的附件104或图1C的附件150)。
在这个实施例中，PMD 202可提供媒体播放器能力。PMD 202可包括处理器204、存储设备206、用户接口208、和附件输入/输出(I/O)接口214。在这个实施例中，处理器204可以是可编程处理器，其执行用于实施诸如重放媒体曲目和浏览所存储的媒体资源数据库之类的操作的程序，并执行本地GUI以提供对所实施的操作的用户控制。处理器204还可以执行远程GUI程序，该远程GUI程序生成用于附件220的远程GUI图像并处理由附件220转发的用户输入，如下所述。
存储设备206可以例如利用盘、闪速存储器、或任何其他非易失性存储介质来实现。在某些实施例中，存储设备206可存储媒体资源(这里也称为″曲目″)和描述每个曲目的元数据的数据库，所述媒体资源诸如是可由PMD 202播放的音频、视频、静止图像等。元数据可包括例如媒体类型(音频曲目、视频曲目(video track)、有声读物、静止图像等)；资源标题；与资源相关联的艺术家或表演者的名字；作曲家或作者信息；资源长度；章节信息；专辑信息；歌词；关于相关作品或图像的信息；对资源的描述；等等。其他信息，包括要由处理器204执行的程序，可存储在存储设备206中。
用户接口208可包括一个或多个输入控件207和显示屏209，所述输入控件207诸如是触摸板、触摸屏、滚轮、点拨轮、拨号盘、按钮、键区、麦克风，等等。还可包括其他元件，诸如音频输出部分(未明确示出)。用户可在显示屏209上观看由处理器204生成的本地GUI图像，并且可基于所显示的图像来操作输入控件207以激活PMD 202的功能。处理器204可处理用户输入并采取适当的动作，包括更新显示屏209上的本地GUI图像。因而，用户接口208和处理器204可提供用于PMD 202的本地GUI。
附件I/O接口214可允许PMD 202与各种附件通信。例如，附件I/O接口214可支持到诸如车载媒体系统等之类的附件的连接。在一个实施例中，附件I/O接口214包括与用在Apple Inc.制造和出售的iPodTM产品上的连接器相对应的30针连接器，或一种或多种诸如通用串行总线(″USB″)或FireWire连接器之类的其他连接器。可替换地或作为附加，附件I/O接口214可包括无线接口(例如蓝牙等)。附件I/O接口214可允许PMD 202与附件220或另一附件通信。
附件220包括控制器224、一个或多个输入控件222、显示器232、PMD I/O接口226、环境/状态输入接口228、以及音频输出部分230。控制器224可包括例如微处理器或微型控制器，其执行程序代码以执行各种功能，诸如数字音频解码、模拟或数字音频和/或视频处理，等等。输入控件222可包括例如触摸板、触摸屏、滚轮、点拨轮、拨号盘、按钮、键区、麦克风，等等。显示器232可用于向用户呈现操作或控制信息以及视频内容；在某些实施例中，显示器232可被实现为多屏幕显示系统，并且显示在不同屏幕上的图像可以相同或不同。因此，例如，一个屏幕可用于操作或控制信息，而另一个屏幕用于呈现视频内容。在另外的实施例中，操作或控制信息可与视频内容重叠或组合，以允许用户在同一屏幕上同时观看这两者。
附件220可工作在″局部(local)GUI″模式以及远程GUI模式下。在局部GUI模式中，控制器224可生成要显示在显示器232上的GUI图像，并且可接收和处理来自输入控件222的用户输入，从而允许用户控制附件220的各种操作。在远程GUI模式中，GUI图像可由PMD 202的处理器204生成，通过附件I/O接口214和PMD I/O接口226传递给控制器224，并显示在显示器232上。控制器224可检测输入控件222的用户操作，并通过PMD I/O接口226和附件I/O接口214向PMD 202发送相应的信号。PMD 202的处理器204可处理该信号以确定用户请求了什么动作；取决于用户请求，处理器204可生成要由显示器232显示的更新后的远程GUI图像，生成其他指令给控制器224，或激活PMD 202的其他操作(诸如开始或结束重放、搜索存储资源数据库等)。
可实现为例如一个或多个集成电路的音频输出设备230提供输出音频的能力。例如，音频输出设备230可包括一个或多个扬声器或用于外接扬声器的驱动器电路和连接器，从而使音频能够被呈现给用户。在一个实施例中，控制器224可通过PMD I/O接口226从PMD 202接收音频信号，并且可将进一步处理过的或未进一步处理的信号提供给音频输出设备230；音频输出设备230可变换信号以适于呈现给用户。
环境/状态输入接口228可包括到其中安装有附件220的设备的其他系统的通信路径，以允许这些系统向附件220提供关于操作环境和/或状态的信息。例如，如果附件220安装在汽车中，则环境/状态输入接口228可接收这样的信息，该信息指示汽车的前灯是开启的还是关闭的，车辆当前在什么档位，是否启用了停车制动、当前车速，等等。如果附件220安装在健身机中，则环境/状态输入接口228可接收指示健身机是否正在使用的信息以及当正在锻炼时关于锻炼的当前状态的信息。附件220可将该信息提供给PMD 202，并且PMD 202可利用该信息来针对操作环境定制远程GUI图像和功能，如下所述。
附件220可以是任何提供显示器和一个或多个相关的用户输入控件的附件。例子包括：可安装在例如仪表板或椅背上的车载媒体单元、可设置在健身器材上的控制台、飞机的空中娱乐系统(例如安装在椅背、扶手或控制台单元中)、家庭娱乐系统，等等。在一个实施例中，PMD I/O接口226包括与用在Apple Inc.制造和出售的iPodTM产品上的连接器配对的30针连接器。PMD I/O接口226还可以包括其他类型的连接器，例如通用串行总线(USB)或FireWire连接器。可替换地，PMD I/O接口226可包括无线接口(例如蓝牙等)。
应当理解，这里所描述的系统配置和部件是示意性的，并且变化和修改都是有可能的。PMD和/或附件可具有这里没有具体描述的其他能力。此外，虽然PMD和附件在这里是参考特定的模块描述的，但是应当理解，这些模块是为了便于描述而定义的，而并不意图暗示组成部件的具体物理布置。而且，所述模块不必对应于物理上不同的部件。本发明的实施例可在各种设备中实现，所述设备包括利用电路和软件的任何组合所实现的电子设备。
PMD 202的附件I/O接口214和附件220的PMD I/O接口226允许PMD 202连接到附件220以及之后从附件220断开连接。如这里所使用的，只要附件I/O接口214和PMD I/O接口226之间的通信信道开启，PMD 202和附件220就是″连接的″，而只要所述通信信道关闭，PMD202和附件220就是″断开连接的″。连接可由物理附接(例如PMD 202和附件220的相应的配对连接器之间的物理附接)来实现，由诸如电缆之类的间接连接来实现，或者通过建立无线通信信道来实现。类似地，断开连接可由物理脱离来实现，通过断开电缆连接来实现，通过使附件220或PMD 202断电来实现，或者通过关闭所述无线通信信道来实现。因此，可使用多种通信信道，包括诸如USB、FireWire或通用异步收发器(″UART″)之类的有线信道，或者是诸如蓝牙之类的无线信道。
与特定的通信信道无关，只要PMD 202和附件220彼此连接，设备就能够通过根据协议交换命令和数据来通信。所述协议定义了用于在PMD 202和附件220之间发送消息的格式。例如，所述协议可规定每个消息被置于具有头部和可选净荷的分组中发送。头部提供基本信息(例如开始指示符、分组长度、和要由接收方处理的命令)，而净荷提供任何与所述命令相关联的数据；对于不同的命令，相关联的数据的量可以不同，并且某些命令可提供可变长度的净荷。在某些实施例中，可定义命令以使得特定的命令仅仅在一个方向上有效。所述分组还可以包括本领域中公知的检错码或纠错码。
所述协议可定义多个″隐语(lingo)″，其中″隐语″是可由各种类别的附件支持(或不支持)的一组相关命令。在一个实施例中，命令可由用于标识命令所属的隐语的第一字节和用于标识该隐语中的该特定命令的第二字节来唯一地标识。也可使用其他的命令结构。不要求所有附件或附件可连接到的所有PMD都支持在所述协议中定义的每个隐语。
在某些实施例中，被设计为能彼此协同操作的每种附件220和每种PMD 202都至少支持″一般″隐语，其包括对所有这类设备通用的命令。所述一般隐语可包括这样的命令，这些命令使PMD和附件能够彼此识别和认证它们自己，以及能够提供关于它们各自能力的一般信息，所述能力包括各自支持哪些其他隐语(如果有的话)。所述一般隐语还可包括认证命令，PMD可利用该认证命令来验证附件所声称的身份和能力(或反之亦然)，并且如果所述认证不成功，则可阻止该附件(或PMD)激活某些命令或隐语。
PMD 202和附件220所支持的命令协议可包括″远程GUI″隐语(或其他命令组)，该″远程GUI″隐语(或所述其他命令组)可用于传送关于准许用户通过在附件220上提供的远程GUI来控制PMD 202的操作的命令和数据。所述远程GUI隐语可包括命令，其中所述命令可由附件220发送给PMD 202以提供关于显示器232和输入控件222的配置的信息以及环境信息(诸如附件220安装在哪里，其中或其上安装有附件220的车辆或其他器材的操作状态，等等)。所述远程GUI隐语还可以包括由PMD 202使用以将GUI图像数据传递给附件220的命令，以及由附件220使用以将用户输入信号转发给PMD 202的命令。下面描述例子。
现在描述根据本发明的一个实施例的、可用于实现远程GUI的命令。在一个实施例中，所述命令可包括可用于向PMD提供关于附件的显示设备和(一个或多个)用户输入控件的配置的信息的命令。所述命令还可包括可用于向PMD提供关于附件操作的环境的信息和附件的任何特殊要求——诸如要包括在所述远程GUI图像中的徽标(logo)或其他内容——的命令。所述命令还可包括用于发送远程GUI图像数据给附件的命令，和用于发送用户输入信息给PMD的命令。
在某些实施例中，附件220可发送SetDisplayInfo命令给PMD 202以提供关于显示器232的信息。在一个实施例中，所述信息可包括下列各项中的任意个或全部：显示设备的显示器尺寸(例如以像素为单位)、显示设备的色深信息(例如显示器是彩色的还是黑白的，所支持的不同颜色值的数量，等等)；显示设备的显示格式(例如模拟或数字输入)；以及显示设备的刷新率。应当理解，任何对于配置图像有用的其他信息都可被提供给PMD 202。在某些实施例中，附件220可提供多个显示设备，并且提供给PMD 202的信息可包括显示设备的数量以及各个显示设备分别的配置信息。
在某些实施例中，附件220可发送SetControlInfo命令给PMD 202以提供关于用户输入控件222的类型、数量和位置的信息。在一个实施例中，所述命令可首先识别控件的数量。然后，对于每个控件，所述命令可识别所述控件的类型(例如按钮、旋钮、触摸屏)和大概位置。
在某些实施例中，附件220可发送SetEnvInfo命令给PMD 202以提供关于附件220的操作环境的信息。例如，环境信息可包括关于附件220安装在哪里——例如车辆仪表板、飞机的空中娱乐系统、健身机控制台、家庭娱乐系统等——的信息。
在某些实施例中，附件220可发送SetEnvImage命令给PMD 202以提供可被包括在远程GUI图像中的图像元素。例如，所述图像元素可以是与附件220(或其中安装有附件220的车辆或其他设备)的厂商或供应者相关联的徽标。如下面所描述的，PMD 202可保留远程GUI图像的某个区域以显示附件所提供的图像。
在某些实施例中，附件220可发送SetStatusInfo命令给PMD 202以提供关于操作环境的状态的信息。例如，如果附件220安装在汽车仪表板中，则状态信息可包括诸如下列信息的信息：汽车是否正在运动(或正在换档(in gear))；是白天还是晚上(例如汽车的前灯是关闭的还是打开的)；导航路线引导是否正在进行；等等。如果附件220安装在诸如跑步机之类的健身机中，则状态信息可包括诸如以下信息的信息：健身机当前是否正在使用之类，以及诸如已过去的时间或剩余时间、燃烧的卡路里、心率、当前速度之类的锻炼数据。如下所述，附件所提供的状态信息可由PMD 202使用，以给远程GUI图像增加状态信息，基于当前状态调整远程GUI图像的外观，和/或以取决于状态的方式来限制对某些特征(诸如视频重放)的访问。
在某些实施例中，PMD 202可发送RemoteGUIImageData命令给附件220以向附件220传递远程GUI图像的像素数据。所述命令可包括显示器232中一部分或全部的像素数据。在某些实施例中，命令分组可具有最大尺寸，其可限制用单个RemoteGUIImageData命令可发送的像素数据的数量。在这种情况下，PMD 202可使用多个RemoteGUIImageData命令来发送像素数据；每个命令可包括用于标识所述像素数据所应用到的显示器部分的参数。可使用任何适于发送像素数据的格式，包括压缩格式。在其他实施例中，PMD 202的附件I/O接口214可包含视频输出接口，其可以是模拟的或数字的，并且可通过该视频输出接口而不是通过发送命令来将远程GUI图像传递给附件220。
在某些实施例中，附件220可发送ProcessUserInput命令给PMD202以指示对响应于远程GUI图像的用户输入的检测。该命令可包括指示例如哪个用户控件被操作以及——如果可用的话——什么操作被执行的数据。例如，对于图1B的附件104，ProcessUserInput数据可指示按钮116a-h中的哪一个被按下。对于图1C的附件150，ProcessUserInput数据可指示屏幕上被用户触摸了的位置的像素坐标。对于可以多种方式操纵(例如顺时针或逆时针转动旋钮，或在适当配置的触摸屏上拖曳手指)的用户输入设备，ProcessUserInput数据还可指示检测到了对输入设备的哪种操纵。
在某些实施例中，可从附件220向PMD 202发送EnterRemoteGUIMode命令(或反之亦然)以启动远程GUI模式操作，并且可从PMD 202向附件220发送ExitRemoteGUIMode命令(或反之亦然)以终止远程GUI模式操作。
应当理解，这里所描述的命令是示意性的，并且变化和修改都是有可能的。在某些实施例中，PMD 202可将已知的远程GUI被使能的附件的配置数据列表保存在例如存储设备206中。每种配置可与一特定的附件标识符相关联，所述附件标识符诸如是厂商加模型名称、任意分配的代码，等等。替代如上所述的发送配置信息命令，附件220可发送提供附件标识符的识别命令。PMD 202然后可访问所存储的该附件的配置数据。这可实现更快更有效的设置。
在其他实施例中，诸如附件220之类的特定附件第一次连接到PMD 202时，附件可使用上面所描述的SetDisplayInfo和SetControlInfo命令来建立其配置。PMD 202然后可给该附件分配唯一标识符，将所分配的标识符提供给该附件，以及将配置信息与该标识符相关联地存储在存储设备206中。在随后的重新连接时，附件可向PMD 202发送具有该唯一标识符的识别命令，并且PMD 202可访问所存储的配置信息。
在任一上述命令中，信息可作为例如具有与特定信息类型相关联的特定字节的结构化数据字段而被发送。可替换地，命令可包括用于标识正在被传递的信息类型的bitmask(位屏蔽)参数，并且数据可由接收方根据该bitmask来解释。
此外，命令集还可包括由PMD 202发送的用于请求任何可用信息类型的命令，以及由PMD 202发送的用于证实从附件220接收到了该信息设置命令的命令。在某些实施例中，附件220可响应于来自PMD202的请求，或者可无需等待请求——例如响应于变化的情况——而发送某些信息。例如，如果附件220安装在具有自动变速器的车辆中，则附件220在检测到车辆进入或脱离停车状态(Park)时，可发送SetStatusInfo命令。可替换地，附件220可监测车辆的速度，并且周期性地或者在它检测到车辆速度达到预定阈值之上或之下时发送报告当前速度的SetStatusInfo命令。在一个实施例中，取决于车辆速度是高于还是低于该阈值，可启用或禁用视频操作；该阈值可设置为零或一低速度，诸如5英里/小时。
图3是根据本发明的实施例的可用于在附件设备220上提供用于PMD202的远程GUI的过程300的流程图。当附件220连接到PMD 202时，过程300开始(步骤302)。在步骤304，附件220被识别和认证。可使用传统的用于识别和认证附件的技术，例如通过交换命令和相关数据。步骤304还可包括确定是否要进入远程GUI模式；例如，附件220可发送上面所描述的EnterRemoteGUlMode命令。
在步骤306，附件220可向PMD 202提供配置、环境和/或状态信息。在一个实施例中，可使用上面所描述的SetDisplayInfo、SetControlInfo、SetEnyInfo和SetStatusInfo命令的任意组合。附件220还可例如利用上述SetEnvImage命令向PMD 202提供特定于附件(或特定于环境)的图像元素。在某些实施例中，附件220的配置和环境信息的某些或全部可如上所述地预存在PMD 202中，并且步骤306可包括PMD 202利用在步骤304期间获得的附件识别来访问所述预存的配置和环境信息。利用上述命令，附件220还可用新的信息补充或覆盖任何预存的信息。
在步骤308，PMD 202利用在步骤306提供的信息生成初始的远程GUI图像。在一个实施例中，PMD 202可应用各种规则以使得本地GUI图像适合于附件220的配置和/或适合于附件220的状态或环境。这样的规则可被结合到由处理器204执行的控制程序中以生成远程GUI图像。
例如，远程GUI可适应于附件的显示器232的特定配置。例如，图2的附件显示器232的大小(以像素为单位)可不同于PMD显示器209的大小。PMD 202可通过改变图像元素的大小、改变所显示的元素的数量、或者通过这两者，来修改本地GUI图像。此外，附件显示器232的纵横比(高度与宽度之比)可不同于PMD显示器209的纵横比，并且PMD 202可布置远程GUI图像的元素以最优化对可用空间的利用。在另一个例子中，附件显示器232的色深也可不同于PMD显示器209的色深，并且PMD 202可调整各种图像元素的颜色设置以产生视觉上舒适的外观。
另外，如上所述，附件220可提供图像元素给PMD 202。PMD 202可确定附件所提供的图像元素在远程GUI图像中的大小和位置。所述元素可以是小的，诸如位于显示区域一角的徽标，或者根据期望，它也可以较大。
远程GUI还可适应于附件的用户输入控件222的特定配置。例如，如果附件输入控件222提供触摸屏(例如图1C所示的)，则GUI元素可位于触摸屏的有效区域中的任何地方。如果附件输入控件222提供按钮阵列(例如图1B所示的)，则有效(active)GUI元素可位于被映射到该元素的按钮的附近。PMD 202可确定GUI元素到按钮或其他输入控件的映射，并相应地在显示区域中安排所述元素。
在某些实施例中，PMD 202可使得远程GUI适应于附件220的环境。例如，如果附件220被结合在汽车的仪表板控制台中，则可能希望使得远程GUI图像便于司机使用。相应地，PMD 202可选择不同的字体或字体大小，以使得远程GUI元素和所显示的信息更大和更容易阅读。PMD 202还可简化GUI，例如省去动画或减少GUI元素的数量和/或复杂度，以使司机的分心减到最小。相反，对于安装在健身机上的附件，用户分心可能不那么重要，则PMD 202可提供复杂的或动画的远程GUI图像。
在另一个例子中，PMD 202的本地GUI可使用具有暗文本的明亮背景和突出显示。这在白天可提供良好的可见度，但是在夜间行驶时，所得到的亮度可能会分散注意。在某些实施例中，PMD 202可根据附件220是处于白天模式还是夜间模式来改变配色方案——即，对于夜间使用，选择明亮文本和暗背景，或对于白天使用，选择暗文本和明亮背景。可基于附件220提供的状态信息来选择白天或夜间模式，或者在某些实施例中，远程GUI可包含用户可设置的用于选择白天或夜间模式的选项。
作为另一个例子，PMD 202可使用环境和/或状态信息来确定应该使哪些选项在远程GUI中可用。例如，PMD 202可提供视频重放能力，并且也许能够发送视频内容给附件220以供显示。但是在控制台上播放对于移动中的汽车的司机可见的视频是危险的。为了减轻这种危险，附件220可提供指示例如在给定时刻汽车是否在运动(或者在换档)的状态信息。PMD 202可利用该状态信息来确定允许视频重放是否是安全的。如果不安全，则视频重放选项可从远程GUI图像中省去或者被显示为禁用状态。因此，例如，可以仅当汽车处于″停车″时、仅当停车制动被启用了时、或者仅当车辆速度低于特定阈值(诸如5英里/小时)时，PMD 202才使能视频重放。
在某些实施例中，PMD 202可将状态信息结合到远程GUI中。例如，如果附件220被结合到健身机的控制台中，则附件220可给PMD202提供如上所述的关于正在进行的锻炼的信息。PMD 202可将该信息结合到远程GUI图像中，从而允许用户在操纵远程GUI或播放视频内容的同时监控他或她的锻炼进展。在附件220提供图像元素(诸如微标)的实施例中，PMD 202可将图像元素结合到远程GUI中。例如，PMD 202可被编程为保留远程GUI图像的一部分以用于附件所提供的图像元素，并且可将附件所提供的元素插入到任意或所有远程GUI图像中的保留部分中。PMD 202可根据需要调整附件所提供的图像元素的大小以使其适合于所保留的区域。(如果附件不提供图像元素，则所保留的部分可保持空白或填充以默认的图像元素。)
再次参考图3，在步骤310，PMD 202可发送远程GUI图像给附件220。例如，PMD 202可利用由图2的附件I/O接口214和PMD I/O接口226所提供的模拟或数字视频输出接口来发送所述图像。(相同的视频接口还可用于向附件220传递视频内容。)可替换地，PMD 202可使用上面所描述的RemoteGUIImageData命令。在步骤312，附件220可显示远程GUI图像。在某些实施例中，附件220将图像显示为跟接收到的一样而不作修改；从而，PMD 202可控制远程GUI的外观和感觉。可重复步骤310和312，直至检测到用户输入为止；例如，PMD 202可以附件220的显示设备的刷新率重复发送相同的远程GUI图像。
在步骤314，附件220检测对输入控件222之一的用户操作。在步骤316，附件220可例如利用上面所描述的ProcessUserInput命令将所述用户输入转发给PMD 202。如上所述，该命令可指示哪个控件被操作以及——如果可用的话——该操作的性质。附件220可转发用户输入，而不处理它，以识别要采取的响应动作；替代地，附件220也可简单地转发对检测到的用户动作的识别。
在步骤318，PMD 202可处理用户输入以确定要作为响应而执行的操作(或动作)。在步骤320，如果该操作不对应于退出远程GUI模式，则过程300进行到步骤322，在步骤322中，PMD 202执行用户所请求的操作。任何通过远程GUI图像能够进行的操作都可被执行，诸如开始重放、暂停重放、调整设置、浏览或搜索数据库，等等。执行某些操作可涉及从PMD 202向附件220发送命令(例如，以改变诸如音量、显示亮度等的设置)。执行其他操作(例如重放)可涉及从PMD 202向附件220发送媒体内容。另一些操作(例如数据库查询)可由PMD 202执行而无需向附件220发送命令或内容。在步骤324，PMD 202可基于所选择的操作生成更新后的远程GUI图像。过程300然后可回到步骤312以显示该更新后的远程GUI图像。应当注意，诸如重放之类的某些操作可以是正在进行的，并且正在播放的曲目(或曲目序列)可在过程300迭代时继续播放。(可例如通过用户选择暂停或停止操作而停止重放，其中利用过程300可处理该选择。)
过程300可继续，直到在步骤320用户选择引起退出远程GUI模式的操作的时候为止。这时，过程300结束(步骤326)。在某些实施例中，PMD 202可例如利用上面所描述的ExitRemoteGUIMode命令来发信号告知附件220远程GUI模式正在结束。然后，附件220可回到其局部GUI操作模式。
在某些实施例中，在退出远程GUI模式后，PMD 202可保持被连接到附件220。从而，PMD 202可继续向附件220发送媒体内容，因此即使在退出远程GUI模式之后，正在播放的曲目也可继续播放。因此，例如，如果附件220被结合到健身机的控制台中，则用户可退出远程GUI以改变锻炼设置，而同时歌曲或视频继续播放。作为另一个例子，如果附件220被结合到还提供导航功能的汽车仪表板控制台中，则用户可退出远程GUI模式以执行导航操作，而同时音乐继续播放。
此外，在某些实施例中，附件220的局部GUI可支持在被选择时命令附件220重新进入远程GUI模式的用户输入。因为PMD 202保持被连接，所以附件220可响应于检测到该用户输入而发送EnterRemoteGUIMode命令。因此，用户可根据希望而进入和退出远程GUI模式，通过远程GUI模式控制PMD 202，以及通过局部GUI模式控制附件220的其他特征。
应当理解，过程300是示意性的，并且变化和修改都是有可能的。被描述为顺次的步骤可并行执行，步骤的顺序可以变化，并且步骤可被修改或组合。除了这里描述的那些以外的命令和通信协议可被实现以允许便携式媒体设备向附件提供远程GUI图像，以及响应于该远程GUI图像处理用户输入。
虽然已经参考了特定实施例描述了本发明，但是本领域技术人员将认识到，大量修改都是有可能的。例如，虽然上面所描述的实施例可能具体参考了媒体内容的重放，但是便携式媒体设备也可提供其他功能，诸如个人信息管理、移动电话通信，等等。在其他实施例中，通过远程GUI可访问这类功能中的任意功能。因此，例如，另一种远程GUI实施方式可为例如汽车司机提供非手持式电话接口。司机可操作远程GUI以应答或进行电话呼叫，并且可利用由附件控制的扬声器和麦克风以及PMD的移动电话连接来进行呼叫。用于电话通信的远程GUI可类似于用于电话通信的PMD本地GUI，从而向用户提供更直观的界面，并且有可能减少与操作不熟悉的远程界面有关的注意力分散。
另外，上面所描述的实施例可参考提供显示在附件上的全部图像的便携式媒体设备。在一个可替换的实施例中，由便携式媒体设备提供的远程GUI图像可显示在附件的显示屏的一部分中，而来自其他源的图像数据显示在屏幕的其他部份中。例如，附件可指定显示设备中的一矩形区域用于远程GUI。便携式媒体设备可(例如以数字或模拟形式)传递用于该显示器的该远程GUI区域的像素数据，而附件确定用于该显示器的其余部分的像素。例如附件可使用显示器的一部分以显示导航信息，而另一部分用于远程GUI。对于不在远程GUI区域中的显示器部份，便携式媒体设备可提供占位符数据(例如模拟视频流中的黑色像素)或者不提供数据。(如果附件具有作为用户输入控件的触摸屏，则附件可基于屏幕的被触摸部分是在屏幕的远程GUI区域之内还是之外而选择性地向媒体播放器转发指示该被触摸部份的用户输入信号。)
获得了本教导的本领域技术人员将理解，多种实施例都是有可能的，包括但不限于下面的例子。在利用附件控制便携式媒体设备的方法的一个实施例中，附件可向便携式媒体设备提供配置信息。所述配置信息可包括例如指示附件的显示设备的特性的参数，诸如显示器大小特性、色深特性、刷新率特性、或显示器输入格式特性。所述配置信息还可包括例如指示附件的输入控件的特性的参数，诸如输入控件的类型、输入控件的数量。可通过提供便携式媒体设备使用来确定附件的显示设备和/或用户输入控件的一个或多个特性的附件标识符来提供某些或全部配置信息。
一旦从便携式媒体设备接收到指定第一图形用户界面图像的第一图像信号，附件就可在附件的显示设备上显示第一图形用户界面图像。响应于检测到对附件的输入控件的用户操作，附件可向便携式媒体设备发送指示该输入控件被操作的输入信号。附件可从便携式媒体设备接收指定要显示的第二图形用户界面图像的第二图像信号，并可在附件的显示设备上显示所述第二图形用户界面图像，其中所述第二图形用户界面图像反映了对输入控件的操作。在某些实施例中，附件还可向便携式媒体设备提供图像元素，并且便携式媒体设备将该图像元素包括在第一图形用户界面图像中。
此外，附件可向便携式媒体设备提供环境信息，所述环境信息指示附件的操作环境。附加地或替代地，附件可向便携式媒体设备提供状态信息，所述状态信息指示其中安装有该附件的系统的操作状态。例如，如果系统是汽车，则状态信息可指示例如汽车是否处于停车状态、汽车的当前速度、汽车是处于白天驾驶模式还是夜间驾驶模式下，等等。作为另一个例子，如果系统是健身机，则状态信息指示目前锻炼是否正在进行，并且附件还可向便携式媒体设备提供包括关于锻炼的数据的进一步状态信息。
在提供到便携式媒体设备的接口的附件的一个实施例中，附件可包括：被配置成响应于从便携式媒体设备接收到的视频信号而显示图像的显示器；用户可操作的输入控件(例如触摸屏、按钮、旋钮等)，被配置成响应于对所述输入控件的用户操作而生成输入信号；被配置成与便携式媒体设备通信的接口；以及耦接到所述显示器、所述用户可操作的输入控件和所述接口的控制器。所述控制器可被配置成从便携式媒体设备通过所述接口接收定义第一图形用户界面图像的图像信号(例如模拟或数字视频信号)；在显示器上显示第一图形用户界面图像，从用户可操作的输入控件接收指示用户操作的控制信号，并且通过所述接口将所述控制信号传送给便携式媒体设备。在某些实施例中，所述控制器可被配置成在所述显示器的第一部份上显示第一图形用户界面图像，而在所述显示器的第二部分中显示不同图像。
在某些实施例中，所述控制器可进一步被配置成向便携式媒体设备发送用户接口参数，并且所述用户界面图像可至少部分基于所述用户接口参数。例如，所述用户接口参数可定义所述显示器的特性，诸如显示器大小、色深、刷新率和显示器输入格式，或者定义所述输入控件的特性，诸如输入控件的数量和可用的输入控件类型。附件还可向便携式媒体设备发送附件识别信息并且所述用户界面图像可至少部分基于所述附件识别信息。
在某些实施例中，所述接口还可被配置成从便携式媒体设备接收媒体内容。所述控制器可将所接收的媒体内容的视频部份传递给显示器，而将所接收的媒体内容的音频部份传递给扬声器系统。
在媒体系统的一个实施例中，媒体系统可包括被配置成产生声音的音频设备；被配置成显示图像的显示器；用户可操作的输入控件，被配置成响应于对所述输入控件的用户操作而生成输入信号；被配置成与便携式媒体设备通信的接口；以及耦接到所述音频设备、所述显示器、所述用户可操作的输入控件和所述接口的控制器。所述控制器可被配置成操作音频设备和显示器以播放从便携式媒体设备通过所述接口传递的媒体内容。所述控制器还可被配置成通过所述接口从便携式媒体设备接收定义第一图形用户界面图像的图像信号；在显示器上显示第一图形用户界面图像，从用户可操作的输入控件接收指示用户操作的控制信号，并且通过所述接口将所述控制信号传送给便携式媒体设备。这样的媒体系统可以例如安装在汽车、健身机中，或者可用在家庭娱乐系统或者空中或车载娱乐系统中。
在利用附件控制便携式媒体设备的方法的一个实施例中，便携式媒体设备可从附件接收配置信息，并且可部分基于所述配置信息生成第一图形用户界面图像。例如，该配置信息可包括指定例如如上所述的显示器或输入控件的特性的参数，或附件标识符。
便携式媒体设备可向附件发送指定第一图形用户界面图像的第一图像信号，从而允许附件响应于第一图像信号而在附件的显示设备上显示所述第一图形用户界面图像。所述便携式媒体设备还可从所述附件接收指示附件的用户输入控件被操作的输入信号。所述便携式媒体设备可解释所述输入信号以确定对应的媒体设备操作并执行该操作。同样，部分基于所述输入信号，所述便携式媒体设备可生成第二图形用户界面图像并且可向所述附件发送指定所述第二图形用户界面图像的第二图像信号，从而允许所述附件响应于第二图像信号而在附件的显示设备上显示所述第二图形用户界面图像。
在某些实施例中，所述便携式媒体设备可从所述附件接收环境和/或操作状态信息，并且可基于所述环境和/或操作状态信息确定所述图形用户界面图像的属性。所述便携式媒体设备还可将从所述附件接收到的图像元素结合到所述图形用户界面图像中。
在与附件一起使用的便携式媒体设备的一个实施例中，所述便携式媒体设备包括本地用户界面，该本地用户界面包括显示器和用户输入控制设备；被配置成与附件通信的附件接口；以及耦接到所述本地用户界面和所述附件接口的处理器。所述处理器被配置为通过附件接口(例如使用模拟或数字视频路径)向附件提供图形用户界面图像；通过附件接口从附件接收控制信号，所述控制信号指示响应于所述图形用户界面图像而对附件的输入控件的操作；以及响应于所述控制信号执行媒体设备操作。所述图形用户界面图像可至少复制本地用户界面的一部分，并且可至少部分基于从附件接收到的附件配置信息(例如，指示如上所述的显示器特性和/或输入控件特性的信息)。所述图形用户界面图像还可部分基于通过附件接口从附件接收到的环境信息和/或基于通过附件接口从附件接收到的状态信息，其中所述环境信息指示所述附件的操作环境，而所述状态信息指示其中安装有所述附件的系统的操作状态。
在利用附件控制便携式媒体设备的设备的一个实施例中，所述设备包括：用于由所述附件向便携式媒体设备提供配置信息的装置；用于由所述附件从所述便携式媒体设备接收指定第一图形用户界面图像的第一图像信号的装置；用于由所述附件在所述附件的显示设备上显示所述第一图形用户界面图像的装置；用于由所述附件检测对所述附件的输入控制器的用户操作的装置；用于由所述附件向所述便携式媒体设备发送指示所述输入控制器被操作的输入信号的装置；用于由所述附件从所述便携式媒体设备接收指定要显示的第二图形用户界面图像的第二图像信号的装置，所述第二图形用户界面图像反映了对所述输入控制器的所述操作；以及用于由所述附件在所述附件的所述显示设备上显示所述第二图形用户界面图像的装置。
在某些实施例中，所述配置信息包括指示所述附件的所述显示设备的特性的参数，所述特性包括显示器大小特性、色深特性、刷新率特性和显示器输入格式特性中的一个或多个。
在某些实施例中，所述配置信息包括指示所述附件的所述输入控制器的特性的参数，所述特性包括所述输入控制器的类型。
在某些实施例中，所述配置信息包括附件标识符，所述附件标识符可由所述便携式媒体设备使用来确定所述附件的所述输入控制器的一个或多个特性。
在某些实施例中，所述设备还包括：用于由所述附件向所述便携式媒体设备提供环境信息的装置，所述环境信息指示所述附件的操作环境。
在某些实施例中，所述设备还包括：用于由所述附件向所述便携式媒体设备提供状态信息的装置，所述状态信息指示其中安装有所述附件的系统的操作状态。
在某些实施例中，所述设备还包括：用于由所述附件向所述便携式媒体设备提供图像元素的装置，其中所述便携式媒体设备将所述图像元素包括在所述第一图形用户界面图像中。
虽然这里所描述的实施例可能是参考具体的硬件和软件部件，但是本领域技术人员将理解，也可使用硬件和/或软件部件的不同组合，并且，被描述为用硬件实现的特定操作也可以用软件实现，或反之亦然。
包括本发明各种特征的计算机程序可被编码在各种计算机可读介质上以便存储和/或传输；合适的介质包括磁盘或磁带、诸如高密度磁盘(CD)或DVD(数字通用盘)之类的光存储介质、闪速存储器，等等。用程序代码编码的计算机可读介质可由兼容设备封装或单独地由其他设备提供(例如，通过因特网下载)。
因此，虽然已经参考具体实施例描述了本发明，但是应当理解，本发明意图覆盖在所附权利要求范围内的所有修改和等价物。

Claims (25)

1.一种利用附件控制便携式媒体设备的方法，所述方法包括：
由所述附件向便携式媒体设备提供配置信息，其中，所述配置信息包括指示所述附件的输入控件的特性的参数，所述特性包括所述输入控件的类型；
由所述附件从所述便携式媒体设备接收指定第一图形用户界面图像的第一图像信号，其中，所述图形用户界面图像适应于所述输入控件的类型；
由所述附件在所述附件的显示设备上显示所述第一图形用户界面图像；
由所述附件检测对所述附件的所述输入控件的用户操作；
由所述附件向所述便携式媒体设备发送指示所述输入控件被操作的输入信号；
由所述附件从所述便携式媒体设备接收指定要显示的第二图形用户界面图像的第二图像信号，所述第二图形用户界面图像反映了对所述输入控件的所述操作；以及
由所述附件在所述附件的所述显示设备上显示所述第二图形用户界面图像。
2.如权利要求1所述的方法，其中所述配置信息包括指示所述附件的所述显示设备的特性的参数，所述特性包括显示器大小特性、色深特性、刷新率特性和显示器输入格式特性中的一个或多个。
3.如权利要求1所述的方法，其中所述配置信息包括附件标识符，所述附件标识符由所述便携式媒体设备使用来确定所述附件的所述输入控件的一个或多个特性。
4.如权利要求1-3中任一项所述的方法，还包括：
由所述附件向所述便携式媒体设备提供环境信息，所述环境信息指示所述附件的操作环境。
5.如权利要求1-3中任一项所述的方法，还包括：
由所述附件向所述便携式媒体设备提供状态信息，所述状态信息指示其中安装有所述附件的系统的操作状态。
6.如权利要求1-3中任一项所述的方法，还包括：
由所述附件向所述便携式媒体设备提供图像元素，
其中所述便携式媒体设备将所述图像元素包括在所述第一图形用户界面图像中。
7.一种提供到便携式媒体设备的接口的附件，所述附件包括：
用于响应于从所述便携式媒体设备接收到的视频信号而在显示屏上显示图像的显示装置；
用于响应于对输入控件的用户操作而生成输入信号的输入装置；
用于与便携式媒体设备通信的接口装置；以及
用于控制所述显示装置、所述输入装置和所述接口装置的控制装置，
其中所述控制装置能够操作用于：
经过所述接口装置向便携式媒体设备提供配置信息，其中，所述配置信息包括指示所述输入装置的特性的参数，所述特性包括所述输入装置的类型，
利用所述接口装置从所述便携式媒体设备接收定义第一图形用户界面图像的图像信号，其中，所述图形用户界面图像适应于所述输入控件的类型，
利用所述显示装置显示所述第一图形用户界面图像，
利用所述输入装置接收指示用户操作的控制信号，以及
利用所述接口装置向所述便携式媒体设备发送所述控制信号。
8.如权利要求7所述的附件，其中所述输入装置包括覆盖在所述显示屏的至少一部分之上的触摸屏。
9.如权利要求7或8所述的附件，其中所述控制装置还可操作用于向所述便携式媒体设备发送用户接口参数，并且所述用户界面图像至少部分基于所述用户接口参数。
10.如权利要求7或8所述的附件，其中所述控制装置还可操作用于向所述便携式媒体设备发送附件识别信息，并且所述用户界面图像至少部分基于所述附件识别信息。
11.如权利要求7或8所述的附件，其中所述控制装置还可操作用于向所述便携式媒体设备发送环境信息。
12.如权利要求7或8所述的附件，其中所述控制装置还可操作用于从所述便携式媒体设备接收媒体内容并传递接收到的媒体内容的视频部分以供所述显示装置显示。
13.如权利要求7或8所述的附件，还包括：
用于播放声音的扬声器装置，其中所述控制装置还可操作用于从所述便携式媒体设备接收媒体内容并将接收到的媒体内容的音频部分传递给所述扬声器装置。
14.如权利要求7或8所述的附件，其中所述显示装置还可操作用于在显示屏的第一部分中显示所述第一图形图像，并在所述显示屏的第二部分中显示不同的图形图像。
15.一种媒体系统，包括：
被配置为产生声音的音频设备；
被配置为显示图像的显示器；
用户可操作的输入控件，被配置为响应于对所述输入控件的用户操作而生成输入信号；
被配置为与便携式媒体设备通信的接口；以及
控制器，被耦接到所述音频设备、所述显示器、所述用户可操作的输入控件和所述接口，
其中所述控制器被配置为操作所述音频设备和所述显示器以播放从所述便携式媒体设备通过所述接口传递的媒体内容，
所述控制器还被配置为：
经过所述接口向便携式媒体设备提供配置信息，其中，所述配置信息包括指示所述用户可操作的输入控件的特性的参数，所述特性包括所述输入控件的类型，
从所述便携式媒体设备通过所述接口接收定义第一图形用户界面图像的图像信号，其中，所述图形用户界面图像适应于所述输入控件的类型，
在所述显示器上显示所述第一图形用户界面图像，
从所述用户可操作的输入控件接收指示用户操作的控制信号，以及
通过所述接口向所述便携式媒体设备发送所述控制信号。
16.如权利要求15所述的媒体系统，其中所述媒体系统被安装在汽车中。
17.如权利要求15所述的媒体系统，其中所述媒体系统被安装在健身机中。
18.如权利要求15所述的媒体系统，其中所述媒体系统是家庭娱乐系统。
19.如权利要求15所述的媒体系统，其中所述媒体系统是飞机的空中娱乐系统。
20.一种利用附件控制便携式媒体设备的设备，所述设备包括：
用于由所述附件向便携式媒体设备提供配置信息的装置，其中，所述配置信息包括指示所述附件的输入控件的特性的参数，所述特性包括所述输入控件的类型；
用于由所述附件从所述便携式媒体设备接收指定第一图形用户界面图像的第一图像信号的装置，其中，所述图形用户界面图像适应于所述输入控件的类型；
用于由所述附件在所述附件的显示设备上显示所述第一图形用户界面图像的装置；
用于由所述附件检测对所述附件的所述输入控件的用户操作的装置；
用于由所述附件向所述便携式媒体设备发送指示所述输入控件被操作的输入信号的装置；
用于由所述附件从所述便携式媒体设备接收指定要显示的第二图形用户界面图像的第二图像信号的装置，所述第二图形用户界面图像反映了对所述输入控件的所述操作；以及
用于由所述附件在所述附件的所述显示设备上显示所述第二图形用户界面图像的装置。
21.如权利要求20所述的设备，其中所述配置信息包括指示所述附件的所述显示设备的特性的参数，所述特性包括显示器大小特性、色深特性、刷新率特性和显示器输入格式特性中的一个或多个。
22.如权利要求20所述的设备，其中所述配置信息包括附件标识符，所述附件标识符由所述便携式媒体设备使用来确定所述附件的所述输入控件的一个或多个特性。
23.如权利要求20-22中任一项所述的设备，还包括：
用于由所述附件向所述便携式媒体设备提供环境信息的装置，所述环境信息指示所述附件的操作环境。
24.如权利要求20-22中任一项所述的设备，还包括：
用于由所述附件向所述便携式媒体设备提供状态信息的装置，所述状态信息指示其中安装有所述附件的系统的操作状态。
25.如权利要求20-22中任一项所述的设备，还包括：
用于由所述附件向所述便携式媒体设备提供图像元素的装置，
其中所述便携式媒体设备将所述图像元素包括在所述第一图形用户界面图像中。
CN200910140597.9A 2008-05-13 2009-05-12 将用户界面推到远程设备 Active CN101582053B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310723831.7A CN103778082B (zh) 2008-05-13 2009-05-12 将用户界面推到远程设备

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12/119,960 US20090284476A1 (en) 2008-05-13 2008-05-13 Pushing a user interface to a remote device
US12/119,960 2008-05-13

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201310723831.7A Division CN103778082B (zh) 2008-05-13 2009-05-12 将用户界面推到远程设备

Publications (2)

Publication Number Publication Date
CN101582053A CN101582053A (zh) 2009-11-18
CN101582053B true CN101582053B (zh) 2014-01-22

Family

ID=40792169

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201310723831.7A Active CN103778082B (zh) 2008-05-13 2009-05-12 将用户界面推到远程设备
CN200910140597.9A Active CN101582053B (zh) 2008-05-13 2009-05-12 将用户界面推到远程设备

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201310723831.7A Active CN103778082B (zh) 2008-05-13 2009-05-12 将用户界面推到远程设备

Country Status (11)

Country Link
US (1) US20090284476A1 (zh)
EP (1) EP2283424A2 (zh)
JP (3) JP5137899B2 (zh)
KR (3) KR101543195B1 (zh)
CN (2) CN103778082B (zh)
AU (1) AU2009246654B2 (zh)
BR (1) BRPI0912741A2 (zh)
GB (1) GB2459956B (zh)
HK (1) HK1137831A1 (zh)
MX (1) MX2010012494A (zh)
WO (1) WO2009140095A2 (zh)

Families Citing this family (109)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120081317A1 (en) * 2010-10-01 2012-04-05 Imerj LLC Method and system for performing copy-paste operations on a device via user gestures
US9325805B2 (en) 2004-08-02 2016-04-26 Steve J Shattil Content delivery in wireless wide area networks
US9198084B2 (en) 2006-05-26 2015-11-24 Qualcomm Incorporated Wireless architecture for a traditional wire-based protocol
US10203873B2 (en) 2007-09-19 2019-02-12 Apple Inc. Systems and methods for adaptively presenting a keyboard on a touch-sensitive display
US9489086B1 (en) 2013-04-29 2016-11-08 Apple Inc. Finger hover detection for improved typing
US10126942B2 (en) 2007-09-19 2018-11-13 Apple Inc. Systems and methods for detecting a press on a touch-sensitive surface
US9454270B2 (en) 2008-09-19 2016-09-27 Apple Inc. Systems and methods for detecting a press on a touch-sensitive surface
US9110590B2 (en) 2007-09-19 2015-08-18 Typesoft Technologies, Inc. Dynamically located onscreen keyboard
US20120075193A1 (en) * 2007-09-19 2012-03-29 Cleankeys Inc. Multiplexed numeric keypad and touchpad
US20140365895A1 (en) 2008-05-13 2014-12-11 Apple Inc. Device and method for generating user interfaces from a template
US9870130B2 (en) 2008-05-13 2018-01-16 Apple Inc. Pushing a user interface to a remote device
US20090284476A1 (en) * 2008-05-13 2009-11-19 Apple Inc. Pushing a user interface to a remote device
US8970647B2 (en) 2008-05-13 2015-03-03 Apple Inc. Pushing a graphical user interface to a remote device with display rules provided by the remote device
US9311115B2 (en) 2008-05-13 2016-04-12 Apple Inc. Pushing a graphical user interface to a remote device with display rules provided by the remote device
US20100293462A1 (en) * 2008-05-13 2010-11-18 Apple Inc. Pushing a user interface to a remote device
US8519820B2 (en) * 2008-09-02 2013-08-27 Apple Inc. Systems and methods for saving and restoring scenes in a multimedia system
US9398089B2 (en) 2008-12-11 2016-07-19 Qualcomm Incorporated Dynamic resource sharing among multiple wireless devices
KR101542744B1 (ko) * 2009-03-18 2015-08-10 삼성전자주식회사 네트워크에서 피제어장치를 제어하는 방법 및 그 장치
US9264248B2 (en) 2009-07-02 2016-02-16 Qualcomm Incorporated System and method for avoiding and resolving conflicts in a wireless mobile display digital interface multicast environment
DE112009005065T5 (de) * 2009-08-13 2012-06-28 Hewlett-Packard Development Co., L.P. Verwenden von Anzeigebildschirmnutzersteuerungen, um ein Zusatzgerät einzustellen
US9582238B2 (en) 2009-12-14 2017-02-28 Qualcomm Incorporated Decomposed multi-stream (DMS) techniques for video display systems
US20110167176A1 (en) * 2010-01-06 2011-07-07 Apple Inc. Connecting multiple accessories to a portable computing device
EP2369468A1 (en) * 2010-02-26 2011-09-28 Research In Motion Limited Computer to handheld device virtualization system
US8301723B2 (en) 2010-02-26 2012-10-30 Research In Motion Limited Computer to handheld device virtualization system
US11330046B2 (en) 2010-03-01 2022-05-10 Tybalt, Llc Content delivery in wireless wide area networks
US10419533B2 (en) 2010-03-01 2019-09-17 Genghiscomm Holdings, LLC Edge server selection for device-specific network topologies
US10048921B2 (en) * 2010-03-02 2018-08-14 Qualcomm Incorporated Controlling a multimedia device in remote display mode
TWM389063U (en) * 2010-03-16 2010-09-21 Wonde Proud Technology Co Ltd Vehicle mobile device control system
US20110258555A1 (en) * 2010-04-15 2011-10-20 Po-Yen Lee Systems and methods for interface management
WO2011135352A1 (en) * 2010-04-26 2011-11-03 Hu-Do Limited A computing device operable to work in conjunction with a companion electronic device
JP2012010252A (ja) * 2010-06-28 2012-01-12 Jvc Kenwood Corp 操作装置、操作方法および操作プログラム
KR101668118B1 (ko) * 2010-07-23 2016-10-21 삼성전자주식회사 원격 사용자 인터페이스 시스템에서 원격 사용자 인터페이스 데이터 송/수신장치 및 방법
EP2665497A2 (en) 2011-01-20 2013-11-27 Cleankeys Inc. Systems and methods for monitoring surface sanitation
US20130003624A1 (en) * 2011-01-21 2013-01-03 Qualcomm Incorporated User input back channel for wireless displays
US9065876B2 (en) * 2011-01-21 2015-06-23 Qualcomm Incorporated User input back channel from a wireless sink device to a wireless source device for multi-touch gesture wireless displays
US9413803B2 (en) * 2011-01-21 2016-08-09 Qualcomm Incorporated User input back channel for wireless displays
US8964783B2 (en) * 2011-01-21 2015-02-24 Qualcomm Incorporated User input back channel for wireless displays
US9787725B2 (en) 2011-01-21 2017-10-10 Qualcomm Incorporated User input back channel for wireless displays
US10135900B2 (en) 2011-01-21 2018-11-20 Qualcomm Incorporated User input back channel for wireless displays
US20130013318A1 (en) 2011-01-21 2013-01-10 Qualcomm Incorporated User input back channel for wireless displays
US10108386B2 (en) 2011-02-04 2018-10-23 Qualcomm Incorporated Content provisioning for wireless back channel
US9503771B2 (en) 2011-02-04 2016-11-22 Qualcomm Incorporated Low latency wireless display for graphics
US9152373B2 (en) * 2011-04-12 2015-10-06 Apple Inc. Gesture visualization and sharing between electronic devices and remote displays
EP4344163A3 (en) 2011-06-05 2024-04-24 Apple Inc. Systems and methods for displaying notifications received from multiple applications
CN102855866A (zh) * 2011-06-30 2013-01-02 联想(北京)有限公司 终端、显示终端、显示系统和显示方法
US9552140B2 (en) 2011-07-21 2017-01-24 Nokia Technologies Oy Method and apparatus for providing data entry content to a remote environment
US8562435B2 (en) 2011-08-16 2013-10-22 Steelseries Aps Method and apparatus for adapting to gaming venue states
US8678312B2 (en) 2011-08-30 2014-03-25 Textron Innovations, Inc. Aircraft side-ledge console
US8966366B2 (en) * 2011-09-19 2015-02-24 GM Global Technology Operations LLC Method and system for customizing information projected from a portable device to an interface device
US9495012B2 (en) 2011-09-27 2016-11-15 Z124 Secondary single screen mode activation through user interface activation
US9182965B2 (en) * 2011-10-31 2015-11-10 Nokia Technologies Oy Method and apparatus for developing socially suitable applications and devices
US9162574B2 (en) * 2011-12-20 2015-10-20 Cellco Partnership In-vehicle tablet
US10637749B2 (en) * 2011-12-22 2020-04-28 Intel Corporation Remote machine management
US9525998B2 (en) 2012-01-06 2016-12-20 Qualcomm Incorporated Wireless display with multiscreen service
CN103365888A (zh) * 2012-03-31 2013-10-23 上海移云信息科技有限公司 一种手表样式的搜索方法
US9104260B2 (en) 2012-04-10 2015-08-11 Typesoft Technologies, Inc. Systems and methods for detecting a press on a touch-sensitive surface
CN103425237B (zh) * 2012-05-16 2016-08-03 联想(北京)有限公司 一种显示控制方法和电子设备
DE102012020567B4 (de) 2012-10-19 2015-07-16 Audi Ag Bedienvorrichtung und Verfahren zum Ansteuern von Funktionseinheiten eines Kraftfahrzeugs und Kraftfahrzeug
WO2014143776A2 (en) 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Providing remote interactions with host device using a wireless device
EP2778614B1 (en) 2013-03-15 2016-07-20 Apple Inc. Mapping application with turn-by-turn navigation mode for output to vehicle display
US10251034B2 (en) 2013-03-15 2019-04-02 Blackberry Limited Propagation of application context between a mobile device and a vehicle information system
US9317813B2 (en) 2013-03-15 2016-04-19 Apple Inc. Mobile device with predictive routing engine
US9300779B2 (en) 2013-03-15 2016-03-29 Blackberry Limited Stateful integration of a vehicle information system user interface with mobile device operations
EP2778615B1 (en) 2013-03-15 2018-09-12 Apple Inc. Mapping Application with Several User Interfaces
EP3101392B1 (en) 2013-03-15 2021-12-15 Apple Inc. Mapping application with turn-by-turn navigation mode for output to vehicle display
US9891068B2 (en) 2013-06-08 2018-02-13 Apple Inc. Mapping application search function
US9303997B2 (en) 2013-03-15 2016-04-05 Apple Inc. Prediction engine
CN110083411B (zh) * 2013-06-08 2022-02-01 苹果公司 用于从模板生成用户界面的设备和方法
AU2014275224B2 (en) 2013-06-08 2017-08-31 Apple Inc. Device, method, and graphical user interface for synchronizing two or more displays
US20140365459A1 (en) 2013-06-08 2014-12-11 Apple Inc. Harvesting Addresses
US10289302B1 (en) 2013-09-09 2019-05-14 Apple Inc. Virtual keyboard animation
CN104679677A (zh) * 2013-11-27 2015-06-03 宁波复博信息技术有限公司 界面获取装置
CN105917320B (zh) * 2013-12-03 2019-12-20 本田技研工业株式会社 一种移动电子装置协同系统
CN103777851B (zh) * 2014-02-26 2018-05-29 大国创新智能科技(东莞)有限公司 物联网视频交互方法和系统
DE102015203446B4 (de) 2014-03-03 2017-07-06 Apple Inc. Kartenanwendung mit verbesserten Navigationswerkzeugen
US20150261425A1 (en) * 2014-03-14 2015-09-17 Apple Inc. Optimized presentation of multimedia content
US20150350146A1 (en) 2014-05-29 2015-12-03 Apple Inc. Coordination of message alert presentations across devices based on device modes
US20150370446A1 (en) * 2014-06-20 2015-12-24 Google Inc. Application Specific User Interfaces
US20150370419A1 (en) * 2014-06-20 2015-12-24 Google Inc. Interface for Multiple Media Applications
US20150370461A1 (en) * 2014-06-24 2015-12-24 Google Inc. Management of Media Player Functionality
TWI647608B (zh) 2014-07-21 2019-01-11 美商蘋果公司 遠端使用者介面
CN105450701A (zh) * 2014-08-28 2016-03-30 冠捷投资有限公司 远程动态管理显示装置的系统
US9547419B2 (en) 2014-09-02 2017-01-17 Apple Inc. Reduced size configuration interface
WO2016036427A1 (en) * 2014-09-02 2016-03-10 Apple Inc. Electronic device with rotatable input mechanism
US10025684B2 (en) 2014-09-24 2018-07-17 Microsoft Technology Licensing, Llc Lending target device resources to host device computing environment
US9769227B2 (en) * 2014-09-24 2017-09-19 Microsoft Technology Licensing, Llc Presentation of computing environment on multiple devices
US10635296B2 (en) 2014-09-24 2020-04-28 Microsoft Technology Licensing, Llc Partitioned application presentation across devices
CA2936123C (en) * 2015-02-02 2018-07-10 Fillmore West Investment Trust Personal life manager (plm) system and method
US10216351B2 (en) * 2015-03-08 2019-02-26 Apple Inc. Device configuration user interface
CN106034255A (zh) * 2015-03-20 2016-10-19 冠捷投资有限公司 控制数据资料在同一网络的方法
US9948760B2 (en) * 2015-06-26 2018-04-17 Honda Motor Co., Ltd. System and method for controlling vehicle network functions with version control
CN105260112A (zh) * 2015-09-14 2016-01-20 百度在线网络技术（北京）有限公司 终端间屏幕控制的方法和装置
CN106550090A (zh) * 2015-09-16 2017-03-29 中兴通讯股份有限公司 远程控制方法、装置及移动终端
CN105306488A (zh) * 2015-11-19 2016-02-03 邓苏湘 提高移动设备运行安全性的装置及其方法
US20170195735A1 (en) * 2015-12-31 2017-07-06 Nagravision S.A. Method and apparatus for peripheral context management
JP6177361B2 (ja) * 2016-02-12 2017-08-09 クラリオン株式会社 車載機およびその表示制御方法
US10310725B2 (en) * 2016-06-12 2019-06-04 Apple Inc. Generating scenes based on accessory state
US11373459B2 (en) * 2016-11-15 2022-06-28 Runway Growth Credit Fund Inc. Program and vehicle interaction
KR102618900B1 (ko) * 2019-01-08 2023-12-29 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US10672249B1 (en) * 2019-05-06 2020-06-02 Cambridge Mobile Telematics Inc. Determining, scoring, and reporting mobile phone distraction of a driver
US10759441B1 (en) * 2019-05-06 2020-09-01 Cambridge Mobile Telematics Inc. Determining, scoring, and reporting mobile phone distraction of a driver
KR102393717B1 (ko) 2019-05-06 2022-05-03 애플 인크. 전자 디바이스의 제한된 동작
DK201970533A1 (en) 2019-05-31 2021-02-15 Apple Inc Methods and user interfaces for sharing audio
US11481094B2 (en) 2019-06-01 2022-10-25 Apple Inc. User interfaces for location-related communications
US11477609B2 (en) 2019-06-01 2022-10-18 Apple Inc. User interfaces for location-related communications
DE102019118189A1 (de) * 2019-07-05 2021-01-07 Bayerische Motoren Werke Aktiengesellschaft Koppelung von Benutzeroberflächen
CN114327312B (zh) * 2020-09-25 2023-10-20 华为技术有限公司 投屏控制方法和装置
CN114510203A (zh) * 2020-11-16 2022-05-17 荣耀终端有限公司 电子设备及其设备间屏幕协同方法和介质
EP4254920A1 (en) * 2021-04-13 2023-10-04 Samsung Electronics Co., Ltd. Electronic device for vehicle, mobile device for controlling electronic device for vehicle, and method for controlling electronic device for vehicle by using mobile device

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101048724A (zh) * 2004-09-10 2007-10-03 皇家飞利浦电子股份有限公司 控制至少一个媒体数据处理设备的装置及其方法

Family Cites Families (103)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4414576A (en) * 1981-09-25 1983-11-08 Vicon Industries, Inc. Housing assembly for electrical apparatus
US4924216A (en) * 1988-02-12 1990-05-08 Acemore International Ltd. Joystick controller apparatus
EP0626635B1 (en) * 1993-05-24 2003-03-05 Sun Microsystems, Inc. Improved graphical user interface with method for interfacing to remote devices
US5537300A (en) * 1995-02-01 1996-07-16 Kraco Enterprises, Inc. Control panel
AU693350B2 (en) * 1995-04-11 1998-06-25 Mold-Tech Plastics Limited Partnership Interface for portable communications device
JPH09149325A (ja) * 1995-11-21 1997-06-06 Sony Corp グラフイック表示データ分散型ａｖシステム
US5881366A (en) * 1996-05-01 1999-03-09 Logitech, Inc. Wireless peripheral interface
US5991640A (en) * 1996-11-22 1999-11-23 Ericsson Inc. Docking and electrical interface for personal use communication devices
JPH113314A (ja) * 1997-04-14 1999-01-06 Matsushita Electric Ind Co Ltd ネットワーク制御システムおよびネットワーク端末およびコントロール端末
US6012105A (en) * 1997-05-01 2000-01-04 Telefonaktiebolaget L M Ericsson System for interfacing with an external accessory in one of two interface modes based on whether communication can be established with external accessory or not
US6268845B1 (en) * 1997-06-11 2001-07-31 Compaq Computer Corporation Bezel button controls over USB
ES2184295T5 (es) * 1997-06-25 2007-06-01 Samsung Electronics Co., Ltd. Metodo para crear macros para una red domestica.
US6127941A (en) * 1998-02-03 2000-10-03 Sony Corporation Remote control device with a graphical user interface
US6225984B1 (en) * 1998-05-01 2001-05-01 Hitachi Micro Systems, Inc. Remote computer interface
JPH11328081A (ja) * 1998-05-13 1999-11-30 Matsushita Electric Ind Co Ltd ネットワーク制御システム、コントローラ及びデバイス
US5969283A (en) * 1998-06-17 1999-10-19 Looney Productions, Llc Music organizer and entertainment center
JP3202968B2 (ja) * 1998-06-30 2001-08-27 インターナショナル・ビジネス・マシーンズ・コーポレーション 表示制御情報生成方法及びコンピュータ
US6185491B1 (en) * 1998-07-31 2001-02-06 Sun Microsystems, Inc. Networked vehicle controlling attached devices using JavaBeans™
US6694200B1 (en) * 1999-04-13 2004-02-17 Digital5, Inc. Hard disk based portable device
JP2000358051A (ja) * 1999-04-14 2000-12-26 Sony Corp データ伝送方法及びデータ伝送装置
JP2000312391A (ja) * 1999-04-27 2000-11-07 Matsushita Electric Ind Co Ltd 機器制御装置、制御装置、双方向リモコン装置および被制御装置
US20040179848A1 (en) * 2003-03-11 2004-09-16 Mikhail Belenkii Scintillation free laser communication system
US6556219B1 (en) * 1999-05-18 2003-04-29 Gateway, Inc. Method and system for peripheral device user interface construction
US6496927B1 (en) * 1999-06-09 2002-12-17 Amx Corporation Method and configuring a user interface for controlling a controlled device based upon a device class
JP2001092575A (ja) * 1999-09-20 2001-04-06 Nec Corp 視覚的接続機器制御方式とその方法
JP2001103568A (ja) * 1999-09-30 2001-04-13 Toshiba Corp 通信システム、この通信システムに用いられる移動体通信装置、携帯型情報処理装置及びデータ通信方法
JP2001142618A (ja) * 1999-11-16 2001-05-25 Canon Inc 画像処理装置、方法、記憶媒体およびプログラムエレメント
EP1111915A1 (en) * 1999-12-23 2001-06-27 Two Way TV Limited Control system
US7257217B1 (en) * 1999-12-27 2007-08-14 Nortel Networks Limited Call features for automatic call distribution system
US6772212B1 (en) * 2000-03-08 2004-08-03 Phatnoise, Inc. Audio/Visual server
US7187947B1 (en) * 2000-03-28 2007-03-06 Affinity Labs, Llc System and method for communicating selected information to an electronic device
US7181517B1 (en) * 2000-06-02 2007-02-20 Astec International Limited Browser-enabled remote user interface for telecommunications power system
US7245291B2 (en) * 2000-07-11 2007-07-17 Imran Sharif System and method for internet appliance data entry and navigation
JP3620716B2 (ja) * 2000-07-26 2005-02-16 日本電気株式会社 遠隔操作システムとその遠隔操作方法、及び遠隔操作プログラムを記録した記録媒体
US7493645B1 (en) * 2000-10-27 2009-02-17 Audiovox Corporation Console with monitor and wireless receiver
US20020151327A1 (en) * 2000-12-22 2002-10-17 David Levitt Program selector and guide system and method
US6642629B2 (en) * 2000-12-28 2003-11-04 Intel Corporation Audio system with removable, active faceplate
JP2002215483A (ja) * 2001-01-15 2002-08-02 Matsushita Electric Ind Co Ltd 機器制御システム並びに、機器制御システムにおけるコントローラ及びデバイス
US7093003B2 (en) * 2001-01-29 2006-08-15 Universal Electronics Inc. System and method for upgrading the remote control functionality of a device
US6480378B2 (en) * 2001-04-06 2002-11-12 Dean Chang Multi-angle placement rack of personal digital assistant for use in an automobile
US7450961B1 (en) * 2001-05-14 2008-11-11 At&T Mobility Ii Llc Portable communication device interface to a projection display
US20030025738A1 (en) * 2001-07-31 2003-02-06 Eastman Kodak Company User interface including portable display for use with multiple electronic devices
US6483428B1 (en) * 2001-08-22 2002-11-19 Matsushita Electric Industrial Co., Ltd. Removable front panel for an entertainment device
KR100534106B1 (ko) * 2001-08-22 2005-12-08 삼성전자주식회사 컴퓨터 및 컴퓨터의 외부기기 동작 상태 표시 방법
US6978424B2 (en) * 2001-10-15 2005-12-20 General Instrument Corporation Versatile user interface device and associated system
US20030073432A1 (en) * 2001-10-16 2003-04-17 Meade, William K. Mobile computing device with method and system for interrupting content performance among appliances
US7302465B2 (en) * 2001-10-22 2007-11-27 Comverse, Inc. Distributed multimedia transfer
GB2387001B (en) * 2001-10-22 2005-02-02 Apple Computer Intelligent interaction between media player and host computer
JP2003143670A (ja) * 2001-10-31 2003-05-16 Sony Corp リモートコントロールシステム、電子機器、及びプログラム
US7299304B2 (en) * 2001-11-20 2007-11-20 Intel Corporation Method and architecture to support interaction between a host computer and remote devices
JP2003190181A (ja) * 2001-12-26 2003-07-08 Olympus Optical Co Ltd 制御装置
US7006793B2 (en) * 2002-01-16 2006-02-28 International Business Machines Corporation Safe use of electronic devices in an automobile
US7257776B2 (en) * 2002-02-05 2007-08-14 Microsoft Corporation Systems and methods for scaling a graphical user interface according to display dimensions and using a tiered sizing schema to define display objects
US20030154291A1 (en) * 2002-02-05 2003-08-14 International Business Machines Corporation Mobile modular computer
US6742061B1 (en) * 2002-03-08 2004-05-25 Nokia Corporation Accessory control interface
US7433546B2 (en) * 2004-10-25 2008-10-07 Apple Inc. Image scaling arrangement
JP2003324543A (ja) * 2002-05-07 2003-11-14 Fujitsu Ltd 情報処理装置の操作による移動電話機の制御
US7167604B2 (en) * 2002-08-07 2007-01-23 Hewlett-Packard Development Company, L.P. Portable document scan accessory for use with a wireless handheld communications device
JP2004121592A (ja) * 2002-10-03 2004-04-22 Kunihiko Ichikawa トレーニング装置
JP4209176B2 (ja) * 2002-11-14 2009-01-14 アルパイン株式会社 クライアント装置およびサーバ装置
JP2004172695A (ja) * 2002-11-18 2004-06-17 Alpine Electronics Inc マルチメディア再生方法およびマルチメディア再生システム、操作画面カスタマイズ用プログラム
US20050239434A1 (en) * 2002-12-11 2005-10-27 Marlowe Ira M Multimedia device integration system
JP2004194011A (ja) * 2002-12-11 2004-07-08 Canon Inc リモート操作制御システム、リモート制御装置、リモート操作方法、プログラム、及び記憶媒体
US6983171B2 (en) * 2003-02-28 2006-01-03 Motorola, Inc. Device and method for communicating teletype information in a vehicle communication system
US7281214B2 (en) * 2003-06-02 2007-10-09 Apple Inc. Automatically updating user programmable input sensors to perform user specified functions
US7043572B2 (en) * 2003-06-06 2006-05-09 Microsoft Corporation Method and system for providing a peripheral service to a host computing device
JP2005074211A (ja) * 2003-09-03 2005-03-24 Takao Okazawa 風景表示装置を有するランニングマシン
US8196044B2 (en) * 2004-01-05 2012-06-05 Microsoft Corporation Configuration of user interfaces
EP1903444B1 (en) * 2004-02-12 2011-05-11 Irdeto Access B.V. Method and system of external data storage
US9014753B2 (en) * 2004-03-31 2015-04-21 Volkswagen Ag Communication system and information system for a motor vehicle
US20050222875A1 (en) * 2004-04-02 2005-10-06 Lordeman Frank L System and method for interlinking medical-related data and payment services
US7293122B1 (en) * 2004-04-27 2007-11-06 Apple Inc. Connector interface system facilitating communication between a media player and accessories
US7441062B2 (en) * 2004-04-27 2008-10-21 Apple Inc. Connector interface system for enabling data communication with a multi-communication device
US20060036356A1 (en) * 2004-08-12 2006-02-16 Vladimir Rasin System and method of vehicle policy control
KR100647915B1 (ko) * 2004-08-31 2006-11-23 주식회사 오성전자 원격제어장치
JP4654651B2 (ja) * 2004-10-13 2011-03-23 トヨタ自動車株式会社 車載ハンズフリー通話システム
US7580540B2 (en) * 2004-12-29 2009-08-25 Motorola, Inc. Apparatus and method for receiving inputs from a user
JP2006236323A (ja) * 2005-01-25 2006-09-07 Sony Corp アプリケーション提供システム、サーバ、クライアントおよびアプリケーション提供方法
US20060226298A1 (en) * 2005-03-30 2006-10-12 Lionel L.L.C. Graphical method and system for model vehicle and accessory control
JP2006324860A (ja) * 2005-05-18 2006-11-30 Matsushita Electric Ind Co Ltd 機器制御システムおよび機器制御方法
JP4266960B2 (ja) * 2005-06-08 2009-05-27 キヤノン株式会社 情報処理装置及びその方法
EP1736948A1 (en) * 2005-06-21 2006-12-27 Mitac Technology Corp. Apparatus and method for remotely controlling an appliance using a touch screen
US7552009B2 (en) * 2005-07-14 2009-06-23 Honda Motor Co., Ltd. System and method for synchronizing data for use in a navigation system
US7844442B2 (en) * 2005-08-16 2010-11-30 Exent Technologies, Ltd. System and method for providing a remote user interface for an application executing on a computing device
US20070049197A1 (en) * 2005-08-31 2007-03-01 Andre Klein Control device for audio players
US20070080823A1 (en) * 2005-10-07 2007-04-12 Apple Computer, Inc. Techniques for pairing remote controllers with host devices
JP2007110629A (ja) * 2005-10-17 2007-04-26 Sony Ericsson Mobilecommunications Japan Inc 携帯通信機器、遠隔操作方法及び遠隔操作プログラム
US7574177B2 (en) * 2006-01-04 2009-08-11 Apple Inc. Remote controller and FM reception arrangement
US8086332B2 (en) * 2006-02-27 2011-12-27 Apple Inc. Media delivery system with improved interaction
JP4677938B2 (ja) * 2006-03-23 2011-04-27 富士通株式会社 情報処理装置、ユニバーサル通信方法及びユニバーサル通信プログラム
JP2007267102A (ja) * 2006-03-29 2007-10-11 Pioneer Electronic Corp 入力信号表示装置、信号出力装置、入力信号表示システム、及び、遠隔操作方法
US7987432B1 (en) * 2006-04-25 2011-07-26 Parallels Holdings, Ltd. Seamless integration and installation of non-native application into native operating system
JP2008084434A (ja) * 2006-09-27 2008-04-10 Alpine Electronics Inc 可動式ディスプレイを備えた電子装置
US7363129B1 (en) * 2007-01-05 2008-04-22 Moon Valley Software Apparatus, system and method that interfaces with an automobile engine control unit
US8549429B2 (en) * 2007-01-25 2013-10-01 Sharp Kabushiki Kaisha Multi-window management apparatus and program, storage medium and information processing apparatus
US8095936B2 (en) * 2007-01-31 2012-01-10 Halliburton Energy Services, Inc. Remotely controlling and viewing of software applications
US8555180B2 (en) * 2007-03-27 2013-10-08 Amulet Technologies, Llc Smart peripheral architecture for portable media players
JP5416123B2 (ja) * 2007-09-14 2014-02-12 パナソニック・アビオニクス・コーポレイション 乗物情報システムのためのメディアデバイスインタフェースシステム及び方法
US7834758B2 (en) * 2007-10-31 2010-11-16 General Motors Llc In-vehicle entertainment method and system for executing the same
US20090195513A1 (en) * 2008-02-05 2009-08-06 Delphi Technologies, Inc. Interactive multimedia control module
US8433812B2 (en) * 2008-04-01 2013-04-30 Microsoft Corporation Systems and methods for managing multimedia operations in remote sessions
US20090284476A1 (en) * 2008-05-13 2009-11-19 Apple Inc. Pushing a user interface to a remote device
JP2010130669A (ja) * 2008-12-01 2010-06-10 Fujitsu Ten Ltd 車載装置および無線通信システム

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101048724A (zh) * 2004-09-10 2007-10-03 皇家飞利浦电子股份有限公司 控制至少一个媒体数据处理设备的装置及其方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JP特表2004-512768A 2004.04.22

Also Published As

Publication number Publication date
HK1137831A1 (en) 2010-08-06
KR20140084325A (ko) 2014-07-04
CN101582053A (zh) 2009-11-18
CN103778082B (zh) 2017-04-05
KR101536044B1 (ko) 2015-07-13
KR20110014194A (ko) 2011-02-10
GB2459956A (en) 2009-11-18
KR20130005310A (ko) 2013-01-15
JP5137899B2 (ja) 2013-02-06
JP2013047954A (ja) 2013-03-07
JP2016001477A (ja) 2016-01-07
WO2009140095A2 (en) 2009-11-19
WO2009140095A3 (en) 2010-02-25
KR101275466B1 (ko) 2013-06-14
BRPI0912741A2 (pt) 2015-10-13
AU2009246654B2 (en) 2012-10-04
KR101543195B1 (ko) 2015-08-07
JP2010033548A (ja) 2010-02-12
GB0907592D0 (en) 2009-06-10
US20090284476A1 (en) 2009-11-19
GB2459956B (en) 2010-08-25
AU2009246654A1 (en) 2009-11-19
MX2010012494A (es) 2010-12-21
JP5781043B2 (ja) 2015-09-16
CN103778082A (zh) 2014-05-07
EP2283424A2 (en) 2011-02-16

Similar Documents

Publication Publication Date Title
CN101582053B (zh) 将用户界面推到远程设备
US9875006B2 (en) Pushing a graphical user interface to a remote device with display rules provided by the remote device
US9176651B2 (en) Pushing a user interface to a remote device
US9311115B2 (en) Pushing a graphical user interface to a remote device with display rules provided by the remote device
US20100293462A1 (en) Pushing a user interface to a remote device
JP5736323B2 (ja) 車両インフォメーション・エンターテインメントシステムのための仮想特徴管理
EP2980744A1 (en) Mirroring deeplinks
US20160342406A1 (en) Presenting and interacting with audio-visual content in a vehicle
CN104115119B (zh) 与信息娱乐主机单元的移动装置应用程序集成
EP3092559A1 (en) Presenting and interacting with audio-visual content in a vehicle
CN103873908A (zh) 显示装置、遥控装置及使用所述装置提供用户界面的方法
EP2214174A2 (en) Apparatus and method for playing of multimedia item
AU2013200021B2 (en) Pushing a user interface to a remote device

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant