CN103282870B - 用于使外部显示器的使用与移动设备适配的方法和系统 - Google Patents

用于使外部显示器的使用与移动设备适配的方法和系统 Download PDF

Info

Publication number
CN103282870B
CN103282870B CN201180063594.5A CN201180063594A CN103282870B CN 103282870 B CN103282870 B CN 103282870B CN 201180063594 A CN201180063594 A CN 201180063594A CN 103282870 B CN103282870 B CN 103282870B
Authority
CN
China
Prior art keywords
mobile device
image
touch
display
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201180063594.5A
Other languages
English (en)
Other versions
CN103282870A (zh
Inventor
约尔格·基希
比努·亚伯拉罕
乔舒亚·加利西亚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google Technology Holdings LLC
Original Assignee
Google Technology Holdings LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google Technology Holdings LLC filed Critical Google Technology Holdings LLC
Publication of CN103282870A publication Critical patent/CN103282870A/zh
Application granted granted Critical
Publication of CN103282870B publication Critical patent/CN103282870B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1647Details related to the display arrangement, including those related to the mounting of the display in the housing including at least an additional display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • G06F9/452Remote windowing, e.g. X-Window System, desktop virtualisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Telephone Function (AREA)

Abstract

在至少一个实施例中,移动设备(102)系统包括与移动设备(102)通信的外部显示器设备(104)。所述移动设备(102)具有触摸屏显示器(112)、由(一个或多个)处理组件所执行的至少一个附加的软件组件(308、310)以及操作系统(302),其中,来自所述显示器的一个或多个输入信号被传送到所述操作系统(302)。所述至少一个附加的软件组件基于至少间接地从所述操作系统(302)传送的一个或多个第一图像信号来生成输出信号。所述外部显示器设备(104)接收所述输出信号并且基于其来显示具有两个分量的图像,所述两个分量中的一个反映移动设备(102)状态/操作条件并且基本上类似于在所述外部显示器设备(104)和移动设备(102)不处于通信中的情况下被显示在所述触摸屏显示器(112)上的另一图像。还公开了操作这样的移动设备(102)系统和移动设备(102)的方法。

Description

用于使外部显示器的使用与移动设备适配的方法和系统
技术领域
本发明涉及移动设备,并且更具体地,涉及允许从移动设备输出信息或信号和/或将信息或信号输入到移动设备的方法和系统。
背景技术
诸如手机、个人数字助理(PDA)以及智能电话的移动设备是普遍存在的并且被用于各种目的。尽管移动设备向用户提供了许多优点,但是因为移动设备的相对小的尺寸,所以移动设备在某些情况下的使用是受约束的或不太理想的。
除了别的以外,在移动设备上包含的显示器或屏幕还典型地具有相对小的横截面。因此,根据情况,这样的显示器常常不适合于清楚地显示大量的信息。并且,移动设备上的专用键或按钮常常在它们的物理尺寸方面是相对小的,并且造成在某些情况下用户难以按或者以其它的方式操纵这些输入设备以将命令或信息输入到移动设备中。
因此,如果能够开发允许移动设备克服诸如上文提到的那些中的一个或多个的一个或多个缺点的改进方法或系统来在移动设备上使用或者与移动设备相关地使用或者实现,则将是有利的。
发明内容
在至少一个实施例中,本发明涉及移动设备。所述移动设备包括:第一通信设备,所述第一通信设备具有第一发射机和第一接收机中的一个或两个;用户输入设备,所述用户输入设备允许移动设备接收用户输入;端子,通过所述端子移动设备能够与外部显示器设备通信;以及至少一个处理器部,所述至少一个处理器部执行包括移动设备操作系统组件和至少一个中间软件组件的多个软件组件,通过所述至少一个中间软件组件移动设备操作系统至少间接地与用户输入设备和端子进行通信。所述多个软件组件操作以便在端子处提供外部显示驱动信号,该外部显示驱动信号被配置成使外部显示器设备显示包括表示移动设备的操作状态或条件的第一图像部分的图像。
在至少一个附加的实施例中,本发明涉及包括移动设备和外部显示器设备的移动设备系统。所述移动设备具有触摸屏显示器、由至少一个处理组件所执行的至少一个附加的软件组件以及操作系统,所述至少一个附加的软件组件用来至少间接地向操作系统传送来自触摸屏显示器的一个或多个输入信号。所述至少一个附加的软件组件基于至少间接地从操作系统传送的一个或多个第一图像信号来生成输出信号。所述移动设备系统的外部显示器设备与移动设备进行通信。外部显示器设备接收输出信号并且基于其来显示具有第一和第二图像分量的图像,而且第一图像分量反映移动设备状态或操作条件并且基本上类似于在外部显示器设备不与移动设备进行通信的情况下被显示在触摸屏显示器上的另一图像。
另外,在至少一个实施例中,本发明涉及与外部显示器设备相关地操作移动设备的方法。所述方法包括:在移动设备的触摸屏显示器处接收一个或多个用户输入;并且通过一个或多个附加的中间软件组件至少间接地将指示所述用户输入的一个或多个输入信号提供给移动设备操作系统。所述方法此外包括:在移动设备操作系统处生成一个或多个第一图像信号,该一个或多个第一图像信号指示表示移动设备状态或操作条件的第一图像部分;并且处理所述一个或多个第一图像信号以便产生还指示所述第一图像部分的第二图像信号。所述方法还包括发送与第二图像信号相同或至少部分地基于所述第二图像信号的输出信号以由外部显示器设备接收,从而外部显示器设备显示包括第一图像部分的总体图像。
附图说明
图1示出依照本发明的一个实施例的耦合到并且与外部显示器设备通信的移动设备的示例性系统;
图2是示出图1的移动设备的示例内部硬件组件的框图;
图3是示出特别地当移动设备未被耦合到外部显示器设备时在操作的正常模式下在图1和2的移动设备和移动设备内部硬件组件上操作的示例软件组件的框图;
图4是示出特别地当移动设备被耦合到外部显示器设备时在操作的外部显示器模式下在图1和2的移动设备和移动设备内部硬件组件上操作的示例软件组件的框图;
图5是移动设备的触摸屏显示器和外部显示器设备的附加显示器的示例截屏的图示;以及
图6是示出图1-4的系统/组件的组件中的一些的操作的各种示例步骤的顺序图/流程图。
具体实施方式
参考图1,示例移动设备102被示出为与外部显示器设备104互连。该互连在本实施例中是将移动设备102的端子(输出端子)108与外部显示器设备104链接的有线连接106。在替换实施例中,能够实现移动设备102与外部显示器设备104之间的其它形式的连接,包括诸如蓝牙连接的无线连接。移动设备102旨在表示包括例如蜂窝电话、个人数字助理(PDA)、智能电话或其它手持式或便携式电子设备的各种移动设备。在替换实施例中,移动设备还可以是头戴式耳机、MP3播放机、电池供电设备、可佩戴设备、无线电设备、导航设备、膝上型电脑或笔记本计算机、上网本、寻呼机、PMP(个人媒体播放机)、DVR(数字视频录像机)、游戏设备、相机、电子阅读器、电子书、平板设备、具有视频能力屏幕的导航设备、多媒体插接站或其它移动设备。
取决于实施例,外部显示器设备104还能够采取各种形式。例如,外部显示器设备104可以是电视、高清晰度电视(HDTV)显示器、监视器或其它显示器设备(例如,诸如电子书的平板设备),可能包括已经与其它设备相关联或者被实现在其它设备中的显示器设备。在本实施例中,设想外部显示器设备104不具有显著的处理能力并且仅用作用于纯粹地或实质上基于由移动设备102所生成并从移动设备102接收以及经由有线连接106传送到外部显示器设备104的信号来显示图像的设备。就外部显示器设备104具有任何处理能力来说,这样的能力限于调整关于颜色显示的诸如色调、亮度、对比度以及黑和白等的标准图像特性。然而,在其它实施例中,外部显示器设备代替地可以是具有更多处理能力的“智能”设备。例如,外部显示器设备可以是个人计算机、笔记本计算机或具有基本处理能力的类似设备的屏幕。
如所示,在本实施例中外部显示器设备104特别地包括在横截面积方面基本上大于移动设备102的触摸屏显示器112的显示器110(例如,约大10倍的面积)。然而,显示器110、112的相对尺寸能够根据实施例而显著地变化。除能够输出图像之外,触摸屏显示器112还能够接收或者感测如通过用户的手指或诸如触针的其它触摸输入设备所提供的触摸式输入。尽管存在触摸屏显示器112,但是在本实施例中移动设备102还具有用作该移动设备的输入设备的许多分立键或按钮114。然而,在其它实施例中,此类键或按钮(或任何特定数目的此类键或按钮)未必存在,而是触摸屏显示器112能够用作主要的或唯一的用户输入设备。
参考图2,依照本实施例提供了图示图1的移动设备102的示例内部硬件组件200的框图。如图2中所示,内部组件200包括一个或多个无线收发机202、处理器部204(例如,(一个或多个)微处理器、(一个或多个)微计算机、(一个或多个)专用集成电路等中的一个或多个)、存储器部206、一个或多个输出设备208以及一个或多个输入设备210。内部组件200能够进一步包括组件接口212以将直接连接提供给用于附加的或增强的功能的辅助组件或配件。内部组件200优选地还包括电源214,诸如电池,以用于将功率提供给其它内部组件同时使得移动设备102能够为便携式。另外,内部组件200另外包括一个或多个传感器228。所有的内部组件200能够通过一个或多个内部通信链路232(例如,内部总线)互相耦合并且与彼此通信。
无线收发机202中的每一个都利用无线技术用于通信,所述无线技术能够包括例如(但不限于)诸如模拟通信(使用AMPS)、数字通信(使用CDMA、TDMA、GSM、iDEN、GPRS、EDGE等)以及下一代通信(使用UMTS、WCDMA、LTE、IEEE 802.16等)或其变体的基于蜂窝的通信技术,或诸如HomeRF(射频)、蓝牙或IEEE 802.11(a、b、g或n)的对等或自组织通信技术,或诸如红外技术的其它无线通信技术。在本实施例中,无线收发机202包括蜂窝收发机203和无线局域网(WLAN)收发机205,尽管在其它实施例中仅这些类型的无线收发机中的一个(以及可能这些类型的无线收发机和/或附加类型的无线收发机中的任一个)存在。应该理解的是,虽然本实施例包括无线收发机202,其中的每一个都可以被理解为包括无线接收机和无线发射机,但是在其它实施例中用于任何给定类型的类型的无线技术的接收机和发射机可以是不同的组件,和/或即使用于该无线技术的发射机不存在用于给定类型的无线技术的接收机也能够存在,或者反之亦然(发射机存在然而接收机不存在)。
借助于无线收发机202的使用,移动设备102能够与诸如小区基站、接入点/热点的各种外部组件和其它设备进行通信。如已经指出的,尽管图1的实施例示出了经由有线连接106被耦合到移动设备102的外部显示器设备104,但在其它实施例中移动设备与外部显示器设备之间的通信能够通过无线连接来实现。在一些这样的实施例中,无线收发机202(例如,蓝牙收发机)中的一个或多个能够由移动设备102用来实现与外部显示器设备104的通信。就这样的无线通信被用于此目的来说,无线收发机202(或用于此类通信的移动设备的特定无线收发机)可以被认为是移动设备的端子108,通过其移动设备与外部显示器设备通信。
无线收发机202与移动设备102的内部组件200中的其它组件相结合的操作能够采取各种形式。例如,无线收发机202的操作能够以其中在收到无线信号后,内部组件200检测通信信号并且收发机202解调该通信信号以恢复由无线信号所发射的诸如语音和/或数据的传入信息的方式来进行。在从收发机202接收到传入信息之后,处理器部204针对一个或多个输出设备208来格式化传入信息。同样地,为了发射无线信号,处理器部204格式化能够但未必由输入设备210来激活的外发信息,并且将该外发信息输送到无线收发机202中的一个或多个用于调制,以便提供待发射的经调制的通信信号。无线收发机202通过无线(以及可能为有线)通信链路(未示出)将经调制的通信信号输送到其它设备,诸如小区基站、接入点/热点或远程服务器或各种其它远程设备。
取决于实施例,内部组件200的输入和输出设备208、210能够包括各种视觉、音频和/或机械输出。例如,(一个或多个)输出设备208能够包括诸如液晶显示器和/或发光二极管指示器的一个或多个视觉输出设备216、诸如扬声器、警报器和/或蜂鸣器的一个或多个音频输出设备218和/或诸如振动机构的一个或多个机械输出设备220。视觉输出设备216除了别的以外还能够包括视频屏幕。同样地,通过示例,(一个或多个)输入设备210能够包括诸如光学传感器(例如,相机透镜和光敏器件)的一个或多个视觉输入设备222、诸如话筒的一个或多个音频输入设备224和/或诸如翻转传感器、键盘、小键盘、选择按钮、导航集群、触摸板、电容传感器、运动传感器和/或开关的一个或多个机械输入设备226。能够开动输入设备210中的一个或多个的操作能够不仅包括按钮或其它促动器的物理按压/促动,而且还能够包括例如打开移动设备、解锁设备、移动设备以促动运动,移动设备以促动位置定位系统以及操作设备。
此外,虽然在图2中输入设备210被示出为不同于输出设备208,但应该认识到,在包括本实施例的一些实施例中,一个或多个设备既用作(一个或多个)输入设备且用作(一个或多个)输出设备。也就是说,在图1的本实施例中,移动设备102的触摸屏显示器112是包括视觉输出设备216中的一个或多个(在触摸屏显示器输出图像的范围内)以及机械输入设备226中的一个或多个(在用户触摸输入被触摸屏显示器感测到的范围内)的用户接口。在其它实施例中,能够使用应该被认为在输入设备210和输出设备208之间的其它类型的设备。
如上所述,内部组件200还能够包括各种类型的传感器228中的一个或多个。传感器228能够包括例如接近传感器(例如,光检测传感器、超声波收发机或红外收发机)、触摸传感器、高度传感器以及一个或多个定位电路/组件,所述一个或多个定位电路/组件能够包括例如全球定位系统(GPS)接收机、三角测量接收机、加速计、倾斜传感器、陀螺仪或能够识别移动设备102的当前位置或用户设备接口的任何其它信息收集设备。虽然出于图2的目的传感器228被认为不同于输入设备210,但在其它实施例中所述输入设备中的一个或多个还能够被认为构成传感器中的一个或多个是可能的(并且反之亦然)。出于本描述的目的,尽管该显示器的触摸感测能力替代地能够被认为是在传感器之中,但触摸屏显示器112被认为不是(并且不包括)传感器228中的任一个。
内部组件200的存储器部206能够包含各种形式中的任一形式的一个或多个存储器设备(例如,只读存储器、随机存取存储器、静态随机存取存储器、动态随机存取存储器等),并且能够由处理器部204用来存储和检索数据。在一些实施例中,存储器部206(或其一部分)能够与处理器部204(或其一部分)一起集成在单个设备(例如,包括存储器或存储器处理器(PIM)的处理设备)中,即使这样的单个设备仍然通常将具有执行不同的处理和存储器功能并且可以被认为是单独设备的不同部/零件。由存储器部206所存储的数据能够包括但未必限于操作系统、程序(应用)以及信息数据。每个操作系统包括控制移动设备102的基本功能的可执行代码,所述基本功能诸如为包括在内部组件200之间的各种组件之间的交互、经由无线收发机202和/或组件接口212与外部设备进行的通信以及存储程序和数据到存储器部206和从存储器部206检索程序和数据。关于图3-6对一个示例操作系统在下文进行更详细的讨论。
至于程序,每个程序包括利用操作系统来提供更特殊的功能,诸如存储在存储器部206中的受保护数据和无保护数据的文件系统服务和处理的可执行代码。尽管许多此类程序支配移动设备102的标准或必须的功能性,但在许多情况下程序包括支配可选或专用功能性的应用(或者简称“apps”),所述应用能够在某些情况下由与移动设备制造商无关的第三方供应商来提供。特别地在那些程序/应用如何与移动设备102的移动设备操作系统以及某些硬件组件和外部显示器设备104的交互的方面,关于图3-6对本实施例的移动设备102的某些示例程序/应用的操作进行更详细的讨论。
最后,关于信息数据,这是能够由操作系统或程序参考和/或操纵以用于执行移动设备102的功能的非执行代码或信息。这样的信息数据能够包括例如在制造期间依照移动设备102被预编程的数据、或被上载到移动设备102在它进行操作期间与其进行通信的服务器或其它设备、从其下载或者以其它的方式在所述服务器或其它设备处访问的各种类型信息中的任一类型的信息。
转向图3和图4,虽然图2说明了移动设备102的各种硬件组件,但是图3和图4示意性地图示了正由移动设备并且特别是移动设备处理器部204执行的各种软件组件。图3特别地示出了当外部显示器设备104被从移动设备102断开时移动设备软件组件如何彼此交互,然而图4示出了当外部显示器设备与移动设备连接时(或当外部显示器设备与移动设备通信时)移动设备软件组件如何彼此交互。在移动设备102感测到连接已被建立在移动设备与外部显示器设备104之间后,例如,当形成有线连接106的电线的物理插头被插入到移动设备102的端子108中时(或者替换地当移动设备感测到诸如蓝牙连接的无线连接已被建立移动设备与外部显示器设备之间时),根据图3的操作与根据图4的操作之间的切换通常立即发生。
特别地关于图3,当移动设备102正在其中外部显示器设备104未与移动设备102连接(或者正被其驱动)的正常模式下操作时,由移动设备的处理器部204所执行的软件组件特别地包括安卓(Android)操作系统302和与触摸屏显示器112对接的其它软件组件304(为方便起见在图3中示出触摸屏显示器112,虽然将理解的是,该触摸屏显示器自身不是软件组件而是硬件组件)。
尽管安卓操作系统302是操作系统软件组件,但将理解的是,其它软件组件304是程序/应用。逻辑上,因此,移动设备操作系统302可以被认为不同于其它软件组件304,并且因此示出这个逻辑分隔的虚线306在图3中被提供。此外,尽管安卓操作系统302软件组件被称为“操作系统”,但应该进一步理解的是,这个软件组件还可以被认为是安卓“平台”,只要这个软件组件像包括Linux操作系统的轻量级版本的移动或便携式设备平台那样操作。
另外,尽管在本实施例中它是正在移动设备302上操作的安卓操作系统(或平台)302,但应该理解的是,这仅是能够被采用的一个示例移动设备操作系统(或平台),并且在其它实施例中能够利用除安卓操作系统之外或者代替安卓操作系统的一个或多个其它操作系统。例如,在其它实施例中,代替在移动设备102中利用安卓操作系统(或平台)302,而是能够采用另一移动设备操作系统(平台),包括但不限于iPhone、Windows Mobile、Symbian以及其它类型的移动设备操作系统(平台)。虽然安卓操作系统(平台)302和其它前述移动设备操作系统(平台)中的一个或多个(诸如iPhone的移动设备操作系统(平台))利用或者是基于Linux的形式的,但在一些其它实施例中操作系统(平台)不需要利用或者基于Linux。
关于其它软件组件304,这些允许移动设备102的触摸屏显示器112操作以既输出信息/图像以及且经由触摸从用户(通过用户手指、触针或其它促动设备)接收输入命令。如所示,其它软件组件304包括图形处理单元应用程序设计接口(GPU API)308和触摸屏驱动器310,其中的每一个都与安卓操作系统302和触摸屏显示器112两者通信。更特别地,触摸屏显示器112通过由GPU API308所提供的成像信号314来驱动。GPU API308基于从安卓操作系统302接收到的成像信号316来提供成像信号314。尽管成像信号314能够与成像信号316相同,但更通常地在GPU API处理成像信号316以得出更适合于触摸屏显示器112的成像信号314的范围内,成像信号314不同于成像信号316。
尽管成像信号314、316和GPU API308允许安卓操作系统302通过触摸屏显示器112来驱动并控制输出/成像,但是附加信号被传送,允许安卓操作系统302接收与由触摸屏显示器所接收到的用户输入信号(包括用户命令)相对应的信息。更特别地如所示,触摸屏显示器112在接收到用户输入信号后将触摸屏信号318从触摸屏显示器发送到触摸屏驱动器310。此外,触摸屏驱动器310进而处理触摸屏信号318以得出然后被提供给安卓操作系统302(跨越虚线306)的触摸屏驱动信号320。在本实施例中,触摸屏信号318是指示在其已接收到用户输入信号的触摸屏显示器112上的位置(即,已被触摸的触摸屏显示器上的位置)的绝对坐标信号。在本实施例中,触摸屏驱动器信号320也是绝对坐标信号(触摸屏驱动器可以被认为是到触摸屏硬件的Linux输入设备接口)。尽管有在触摸屏显示器112与触摸屏驱动器310之间提供并且然后到安卓设备操作系统302上的信号318、320的描述,在其它实施例中这些信号能够采取其它形式。
转向图4,当移动设备确定诸如外部显示器设备104的外部显示器设备已被连接到移动设备时,移动设备102内的软件组件交互相比图3中所示出的软件组件交互显著地改变。当这个发生时,移动设备102将其操作的模式从其正常模式切换到外部显示器模式,并且安卓操作系统302不再直接地与其它软件组件304进行通信,而是与被操作的许多附加的中间软件组件402进行通信。也就是说,当外部显示器设备104被连接到移动设备102(例如,插头插入移动设备中到或者以其它的方式与移动设备进入通信)时,除其它软件组件304和安卓操作系统302之外,附加的中间软件组件402由处理器部204来启动和执行。尽管有上述描述,在一些供替换的实施例中,除外部显示器设备104连接到移动设备102之外的其它触发事件也能够促成在图3的配置与图4的配置之间的切换。
如在下文进一步详细地描述的,附加的中间软件组件402用来在安卓操作系统302与其它软件组件304之间对接,以及以允许与外部显示器设备104的通信(或者,更特别地,以允许与外部显示器设备的显示器110的通信)。与图3类似,尽管触摸屏显示器112以及外部显示器设备104(和显示器110)是硬件组件/设备,但是为方便起见这些组件/设备也在图4中被示出,以图示各种软件组件和这些硬件组件/设备之间的相对交互。同样与图3类似,能够理解,逻辑差别存在于安卓操作系统302与附加的中间软件组件402之间,如由虚线404所表示的,并且另外,如由虚线406所表示的,该附加的中间软件组件能够不同于其它软件组件304(其与图3中的相同)。
如所示,其它软件组件304包括与图3中示出的相同的其它软件组件,即,GPUAPI308和触摸屏驱动器310。同样如图3中那样,GPU API308将成像信号314提供给触摸屏显示器112并且该触摸屏显示器将触摸屏信号318提供给触摸屏驱动器312。然而,和图3中示出的布置对比,在图4中从GUP API308接收到的成像信号314是基于由GPU API从除安卓操作系统302以外的组件接收的成像信号408,即从作为附加的中间软件组件402中的一个的事件桥组件412接收到的成像信号408。另外,代替触摸屏312将触摸屏驱动器信号320提供给安卓操作系统302,在图4中触摸屏驱动器信号320被提供给事件桥组件412。
关于附加的中间软件组件402,这些包括事件桥组件412和若干附加的软件组件两者。更特别地,如所示,除事件桥组件412之外,附加的中间软件组件402包括事件转发驱动器组件414、X窗口(X window)组件416、附加的GPU API418、Android-in-a-window(AIW)组件420和EAS驱动器组件422以及可能地(尽管不一定)一个或多个应用或Linux程序424。GPUAPI418可以是但未必是与GPU API308相同类型的组件。如上文指出的,附加的中间软件组件402共同地用作安卓操作系统302与其它软件组件304之间的接口或桥,并且进一步用来驱动外部显示器设备104(以及关联的显示器110)的操作。这个借助于在中间软件组件402之中和在那些附加的中间软件组件与安卓操作系统302、外部显示器设备104(以及关联的显示器110)与其它软件组件304之间传送的交互信号来实现。
更特别地在这点上,为了开始,事件桥组件412是具体与其它软件组件304对接并且用作虚拟输入设备的Linux用户空间应用。除了别的以外,事件桥组件412还构成捕获来自触摸屏驱动器312的形式为触摸屏驱动器信号320的输入事件,并且还将成像信号(即,成像信号408)发送到GPU API308以用于最后传输(通常通过GPU API的以下处理)到触摸屏显示器112,该成像信号旨在使触摸屏显示器示出特定图形图像。
在本实施例中,当移动设备102正在外部显示器模式下操作时,事件桥组件412控制触摸屏显示器112以单独或者主要地显示表示用户界面(虚拟用户界面)的图像,所述用户界面诸如为轨迹板(以与使用鼠标式设备实现的方式类似的方式允许用户输入的选择性输入设备)或具有键的图像的小键盘中的一个或两者。就提供小键盘来说,小键盘的键能够模拟键/按钮114中的键,所述键/按钮114是物理或“硬”键和/或是除那些硬键之外的以便使用户输入(例如,用来控制在触摸屏显示器112上示出的图像的纵向定向/横向定向的用户输入)成为可能。简而言之,触摸屏显示器112被控制以在小键盘模式和其中具体指针可用的轨迹板/鼠标模式中的一个或两者(同时地)下操作。
假定触摸屏显示器112主要由事件桥组件412来驱动以用作用户接口,触摸屏信号318和触摸屏驱动器信号320具体是指示以下各项中的一个或两者的键/位置信号:(i)与显示的(一个或多个)键图像相对应的触摸屏显示器112上的(一个或多个)位置是否已被用户触摸或者以其它的方式选择,或(ii)在触摸屏上示出的轨迹板上的(一个或多个)特定位置是否已被用户选择。也就是说,触摸屏信号318和触摸屏驱动器信号320具体地包括特定键已被按下/选择的(一个或多个)键指示和/或一个或多个位置已被触摸/选择的(一个或多个)坐标指示中的一个或两个。在(一个或多个)坐标指示正被提供的情况下,触摸屏信号318和触摸屏驱动器信号320能够具体地提供表示已被用户选择/触摸的该触摸屏显示器上的(一个或多个)绝对位置的绝对坐标值。
虽然有上述描述,应该进一步注意的是,即使在本实施例中事件桥组件412驱动触摸屏显示器112以单独或者主要地示出用户界面特征,也存在其中事件桥组件412使触摸屏显示器112显示不同于用户界面特征(或除用户界面特征之外)的某物的一些情况。特别地,当事件桥组件接收一个或多个传入通知448时这能够发生。该传入通知能够包括例如由安卓操作系统302所发送的仍然应该被显示在移动设备112的触摸屏显示器112上的最优先通知(例如,在某些情况下,紧急来电、某些类型的新闻以及可能某些社交网络/社交状态信息、某些消息以及某些类型的天气信息或其它实时信息的通知)。并且,触摸屏显示器112能够被控制以在外部显示器设备104被连接到移动装置的端子108时的时间或者之后显示该通知持续一定时间段。这样的通知能够在GPU API418感测到外部显示器设备104的存在后被从GPU API418提供给事件桥组件412。此外,在至少一些实施例中,事件桥组件412还能够将传出通知450输出到其它系统组件。
补充事件桥组件412在对接其它软件组件304中的作用,附加的中间软件组件402中的其它组件用来对接安卓操作系统302,即,AIW组件420和EAS驱动器组件424。如所示,和其中安卓操作系统302发送成像信号316以供GPU API308接收的图3相反,在图4中安卓操作系统代替地发出其它成像信号426以供AIW组件420接收。另外,不是像在图3中那样从触摸屏驱动器312接收触摸屏驱动器信号320,在图4中安卓操作系统302从EAS驱动器组件422接收附加信号428,所述EAS驱动器组件422基于从AIW组件420接收到的AIW信号430来提供那些附加信号。EAS驱动器组件422在本实施例中可以被认为是用于处理AIW信号430并且用于专门地针对安卓操作系统302生成附加信号428的Linux输入设备驱动器。
另外关于附加的中间软件组件402,X窗口组件416用作在AIW组件420、事件桥组件412以及若干其它软件组件中间的中央调解设备。本实施例中的X窗口组件416特别地由Linux来提供并且提供视窗式环境(逻辑上与由Microsoft Windows所提供的环境类似),并且包括Windows Mobile(WM)应用程序设计接口。虽然在本实施例中,X窗口被采用,但在其它实施例中能够使用其它视窗系统(再次,例如,Microsoft Windows)。
如所示,X窗口组件416经由事件转发驱动器组件414与事件桥组件412通信,并且借助于这些通信X窗口组件接收有关如上文所讨论的提供给触摸屏112的用户输入的键指示信息和/或坐标指示信息中的一个或两个。特别地在这点上,事件桥组件412在接收到触摸屏驱动器信号320后能够处理相关的触摸屏输入信号432并然后将其转发到事件转发驱动器组件414。由事件桥组件412所执行的处理能够涉及例如绝对坐标信息到相对坐标信息的转换。
事件转发驱动器组件414在接收到相关的触摸屏输入信号432后进而基于相关的触摸屏输入信号来将转发的触摸屏输入信号434提供给X窗口组件416。该事件转发驱动器可以被基本上认为是应该被插入以允许X窗口组件416从事件桥组件412接收事件的基于Linux的X窗口组件。借助于这些通信,X窗口组件416间接地接收在触摸屏显示器112处的用户输入的键和/或(一个或多个)坐标指示。
在经转发的触摸屏输入信号438在X窗口组件416处被接收后,该X窗口组件自身能够利用键/坐标指示信息,并且此外进一步地将该信号作为另外的触摸屏输入信号438发送到AIW组件420上。另外的触摸屏输入信号438在被AIW组件420接收到后被用作用于提供给EAS驱动器组件422的AIW信号430的基础,所述AIW信号430进而被处理并且作为附加信号428提供给安卓操作系统302。因此,当触摸屏驱动器信号320被从触摸屏驱动器310直接地提供给安卓操作系统时,安卓操作系统302至少间接地被提供有与如由安卓操作系统302在图3中接收的相同的信息或基本上相同的信息。也就是说,即使当移动设备102正在外部显示器模式下操作时,安卓操作系统302也仍然被告知在触摸屏显示器112处的用户输入。
如已经指出的,安卓操作系统302将其它成像信号426发送到AIW块420。考虑到在安卓操作系统再次通过附加信号428接收到触摸屏输入信号方面来说安卓操作系统302在图4中以与图3中所示出的相同的方式或基本上相同的方式操作,在图4中其它成像信号426能够被理解为与图3的成像信号316相同或基本上相同类型的成像信号。然而,如将在下文进一步详细地讨论的,当移动设备102正在外部显示器模式下操作时,其它成像信号426未被用来控制由触摸屏显示器112所显示的图像(因为它其实是用于此目的的事件桥组件412的成像信号408),而是影响在外部显示器设备上显示的东西。为了为此目的格式化其它成像信号,因此,那些信号在从安卓操作系统302在AIW组件420被接收后进而被AIW组件处理以生成然后被提供给X窗口组件416的AIW成像信号。
除上述交互之外,如上所述附加的中间软件组件在本实施例还包括同样正在移动设备102上操作的一个或多个应用或Linux程序424。取决于实施例或情况,应用或Linux程序424能够采取各种形式。例如,应用或Linux程序424能够包括常规地在便携式计算机或其它设备上运行的各种程序中的任一个,包括需要或者利用用户输入来支配程序的操作的程序(例如,字处理程序、电子表格程序、视频游戏、桌面应用等)。另外在本实施例中,应用或Linux程序424的操作能够进一步影响和/或考虑在外部显示器设备104(或显示器110)上显示什么。并且在本实施例中,应用或Linux程序424被设计成考虑如在触摸屏显示器112处提供的用户输入或者至少部分地基于其来操作。因此,当移动设备102正在外部显示器模式下操作时,如所示另外的触摸屏输入信号438不仅被提供给AIW组件420而且提供给应用或Linux程序424。
另外,为了允许应用或Linux程序424影响在外部显示器设备104(或显示器110)上显示的图像,应用成像信号442被从那些应用/Linux程序进一步提供给X窗口组件416。尽管在本实施例中来自应用或Linux程序424的信号是成像信号,但在其它实施例中,代替应用成像信号442或除其之外,不旨在具体地影响成像的其它信号可以被发送到X窗口组件416。另外,尽管有上述描述,在供替换的实施例中应用或Linux程序不需要存在或者不需要在任何给定时间操作,和/或应用或Linux程序不需要考虑触摸屏用户输入信息或者将应用成像信号提供给X窗口组件416。
因此,如图4中所示,本实施例中的X窗口块416从若干不同的源接收若干不同类型的传入信号,即,经转发的触摸屏信号434、AIW成像信号440以及可能是来自应用或Linux程序424中的一个或多个的应用成像信号442。基于这些信号,X窗口块416能够确定用于显示在外部显示器设备104(或显示器110)上的适当图像(常常由多个图像子部分组成)。更特别地,基于经转发的触摸屏信号434、AIW成像信号以及(至少在一些实施例或情况中)应用成像信号442,X窗口块416生成被提供给GPU API418的输出成像信号444。GPU API418然后进而生成被从移动设备102的端子108输出并且经由有线连接106传送到外部显示器设备104(或显示器110)的另外的输出成像信号446。外部显示器设备104的显示器110然后依照那些另外的输出成像信号446来显示图像。
考虑到图4中示出的软件组件302、304、402,移动设备102和外部显示器设备104能够以显著地不同于(图3的)正常模式的方式的方式彼此协调地操作。特别地,如在下文进一步讨论的并且此外如图5中所图示的,虽然在正常模式下触摸屏显示器112被不仅用来接收某些类型的用户输入而且用来显示通过由安卓操作系统302所提供的成像信号316所确定的移动设备操作状态信息(或其它信息),但在外部显示器模式下是外部显示器设备104而不是触摸屏显示器112显示由安卓操作系统而不是触摸屏显示器112所提供的此类操作状态信息,所述触摸屏显示器112代替地被控制以仅显示前述轨迹板和小键盘中的一个或两者。另外,在外部显示器模式下,外部显示器设备104不仅被控制显示由安卓操作系统302所提供的移动设备操作状态信息,而且被控制(或者能够被控制)以显示附加的信息,诸如由应用或Linux程序424通过应用成像信号442所提供的信息。
更特别地,在外部显示器模式下,触摸屏显示器112单独(或者主要地)成为用户输入设备,该用户输入设备旨在接收用户输入并且不再用作(或者不再主要地用作)用于传送除用户界面及其操作的显示以外的其它类型的信息的机构。从事件桥组件412传送的成像信号408、314单独(或者主要地)用来控制与用户界面相对应的图像在触摸屏显示器12上的生成,通过所述用户界面一个用户(或多个用户)能够输入信息。如上文所讨论的,在本实施例中,被呈现在触摸屏显示器112上的用户界面是轨迹板和/或小键盘中的一个或两个,但在其它实施例中还能够呈现其它类型的用户界面(例如,菜单驱动的用户界面)。除使触摸屏显示器112显示特定图像之外,从事件桥组件412传送的成像信号408、314还允许触摸屏显示器112在其外观方面变化以反映用户界面对用户输入的反应(例如,如果小键盘的键被按,则该键的图像被修改以示出该键的按压/响应)。
此外,代替利用触摸屏显示器112来示出如由安卓操作系统302所提供的与轨迹板和/或小键盘无关的移动设备操作状态信息(或其它信息),在外部显示器模式下这样的操作状态信息(或其它信息)被代替地示出在外部显示器设备104的显示器110上。安卓操作系统302继续在与在图3的正常模式下相同的或基本上相同的方式操作,其中触摸屏输入信息(或基于其的信息)经由触摸屏驱动器312、事件桥组件412、事件转发驱动器组件414、X窗口组件416、AIW组件420以及EAS驱动器组件422而被间接地传送到安卓操作系统。另外,响应于在安卓操作系统302处接收到触摸屏输入信息(以及甚至在缺少这样的触摸屏输入信息的情况下),安卓操作系统还向AIW组件420提供指示移动设备操作状态信息(或其它信息)的其它成像信号426。
尽管其它成像信号426它们自身能够用于生成图像(就像成像信号316被用来在与图3相对应的正常模式下生成图像一样),在图4的外部显示器模式下其它成像信号426被用来仅生成最后在外部显示器设备104处显示的图像的一部分。这是因为,考虑到与触摸屏显示器112的尺寸相比外部显示器设备104的显示器110的大尺寸,外部显示器设备能够显示超出仅通常将在正常模式下被显示在触摸屏显示器112上的操作状态信息(或其它信息)的大量信息。
为了允许在外部显示器设备104的显示器110上生成包含安卓操作系统302成像信号输出而且还包括其它可能的成像信息并且将这些不同的图像分量合成为总体图像的总体图像,在本实施例中AIW组件420修改其它成像信号426以生成AIW成像信号440。特别地,如果其它成像信号426本身被利用来生成图像(如成像信号316被用来在图3的正常模式下生成触摸屏显示器112上的图像),则AIW成像信号440允许包含与将作为总体图像跨越整个显示屏幕显示的相同或基本上相同的信息的图像子部分(“窗口”)的生成。换句话说,AIW组件420抓取安卓操作系统102的屏幕并且示出用于进入到X窗口组件416中的安卓屏幕的内容。
假定X窗口组件416被提供AIW成像信号440而不是其它成像信号416,由该X窗口组件所生成的输出成像信号444(以及由此由GPU API418基于其所输出的另外的输出成像信号446)表示合成总体图像,所述合成总体图像不仅包括与来自安卓操作系统302的成像信号426相对应的图像子部分而且包括与其它信息/信号相对应的一个或多个附加的图像子部分。尽管用于附加的子部分的特定基础能够根据实施例而变化,但在本实施例中所述附加的子部分特别地反映从应用或Linux程序424提供的应用图像信号442。因此,在本实施例中由X窗口组件416所生成的输出成像信号444以及由此用于驱动外部显示器设备104的另外的输出成像信号446被特别地配置成引起复合或合成图像的生成,所述复合或合成图像包括与AIW成像信号440相对应的移动设备操作状态信息以及与如由应用成像信号442所指示的应用或Linux程序424中的一个或多个的状态或操作相对应的图像分量两者。
现转向图5,能够被显示在触摸屏显示器112上的示例第一图像502和能够被同时地显示在外部显示器设备104的显示器110上的示例第二图像504被示出,以进一步地图示当两者设备被连接并且移动设备正在与图4相对应的外部显示器设备模式下操作时总体移动设备102和外部显示器设备的操作。第一图像502还能够被认为是主图形用户界面(GUI)而第二图像504能够被认为是第二GUI。如所示,当这样的操作正发生时,在触摸屏显示器112上提供的第一图像502特别地包括包括有多个分立键的小键盘506以及包括左和右选择器按钮510以及其中能够接收来自用户的触摸输入的区511的轨迹板布置508。如已经讨论的,因此,第一图像502被配置成用作用户输入设备(或多个用户输入设备)的图像,在所述用户输入设备处用户能够输入用户输入。
尽管图5的实施例将图像502示出为包括小键盘和轨迹板特征两者,但这些仅旨在为示例。例如,在其它实施例中,仅存在轨迹板或小键盘,或者存在代替或者除这些特征之外的其它类型的用户输入界面特征。另外,在至少一些实施例中,触摸屏显示器112作象被控制(例如,通过事件桥组件412)以便用户界面特征根据包括经由移动设备的传感器228提供的各种输入的各种因素而被重定向(例如,在触摸屏显示器上的横向布置与纵向布置之间)。例如,如由一个或多个传感器228所感测到的移动设备102相对于地面或一些其它参考点的定向能够用作用于重定向在触摸屏显示器112上显示的一个或多个特征的基础。
在图5的实施例中,当触摸屏显示器112提供第一图像502时,但是外部显示器设备104的显示器110显示其它信息。更特别地如所示,在显示器110上提供的第二图像504包括基于AIW成像信号440来示出图像的第一子部分或窗口512,所述AIW成像信号440像上文所讨论的那样反映由安卓操作系统302所提供的其它成像信号426。第一子部分512表示如果外部显示器设备104不存在并且移动设备正在图3的正常模式下操作由于移动设备其自身的操作而将会在移动设备102的触摸屏显示器112上显示的东西。另外例如,如所示,第一子部分512能够示出消息“来电...来自888-888-8888”,该消息指示移动设备102正收到来自外部电话号码的电话呼叫,其正在发生。
将理解的是,尽管有图5的第一子部分512中示出的特定作象,由该子部分在任何给定情况或环境中所显示的特定信息能够根据由移动设备102所经历的操作的特定情况而变化。还能够显示各种类型的信息。例如,第一子部分512替换地能够包括指示从用户输入的文本消息的文本区域(如将由安卓操作系统302来识别)。并且例如,在某些情况下,第一子部分能够显示有关各种类型的社交网络的信息和/或社交状态信息、各种其它形式的消息(例如,电子邮件)以及诸如新闻、天气、股票市场或的各种类型的信息或其它实时信息。并且,第一子部分512在第二图像504内的位置、该子部分与第二图像相比的相对尺寸以及其它特性能够根据实施例而变化。
除第一子部分512之外,还存在第二子部分514,该第二子部分514占据在外部显示器设备104的显示器110上示出的第二图像504的剩余部分。第二子部分514根据实施例或情况能够包括各种信息中的任一个,包括由正被移动设备102执行(或者潜在地能够在其上执行)的应用或Linux程序424中的一个或多个所提供或者与其相对应的各种信息中的任一个。在本示例中,第二子部分514特别地包括与能够在移动设备102上运行的可选择应用相对应的若干图标516以及示出与已经正在操作的特定应用相关联的图像的窗口部分518,即,以子图标520完成的字处理文档图像,用户能够选择子图标520以影响该字处理应用的操作。
尽管在图5的示例中存在第一和第二子部分512、514两者,但将理解的是,在某些情况下在特定时刻仅第二子部分或第一子部分需要存在。例如,在某些情况下,因为此刻没有感兴趣的东西正在使用移动设备,所以与移动设备操作状态(如由安卓操作系统302的其它成像信号426来指示)相对应的第一子部分512能够消失。替换地,第一子部分512能够被扩展以占据外部显示器设备104的整个(或几乎整个)显示器110是可能的。
现参考图6,示例性顺序图/流程图600被另外提供来进一步详细地示出当移动设备102在与图4-5相对应的外部显示器模式下开始操作并且然后继续操作时的示例信号流程。在本示例中,如由指示移动设备102最初正在正常模式(其中外部显示器设备104仍然未被连接到移动设备)下操作的箭头601所表示的那样操作开始。接下来,如由箭头602所表示的,外部显示器设备104被连接到移动设备102(例如,通过用户604以便建立有线连接106)。接下来,如由箭头603所表示的,移动设备102检测到(被通知)外部显示器设备104已被连接到移动设备102,并且因此移动设备102启动所有的附加的中间软件组件402以便那些软件组件正由处理器部204来执行。这个由箭头603来表示,因为这具体指附加的中间软件组件402的X窗口组件416。因此,移动设备102开始在操作的外部显示器模式下操作并且至少与有关移动设备操作状态的安卓操作系统302输出信息相对应的第一子部分512被显示在外部显示器设备104上(“安卓窗口”进入“焦点”)。
接下来,如由箭头605所表示的那样用户604触摸移动设备102的触摸屏显示器112。在触摸屏显示器112以这样方式被触摸后,该触摸屏显示器将包括触摸屏输入信息(特别是键和/或绝对坐标值信息)的触摸屏信号318发送到事件桥组件412。这个触摸屏输入信号从触摸屏显示器112到事件桥组件的传送特别地由箭头606来表示,同时应当理解的是,(尽管在图6中未示出)这个信息还在其从触摸屏显示器到事件桥组件的路线上穿过触摸屏驱动器310。接下来,在触摸屏输入信息在事件桥组件412处被接收后,该事件桥组件确定为了反映用户的输入动作或因为一些其它原因在触摸屏显示器112本身上显示的图像是否应该被更新。例如,潜在地能够改变在触摸屏显示器112处的图像以示出在触摸屏显示器上显示的键的按压或在显示器上示出的光标的移动。因此,成像信号408并且然后314(通过GPUAPI 308)被往回提供给触摸屏显示器112,如由图6的箭头608所表示的。
此外,在事件桥组件412接收到触摸屏输入信息后,它还进一步地将相关的触摸屏输入信号432提供给事件转发驱动器组件414,并且该事件转发驱动器组件进而将基于其的经转发的触摸屏输入信号434提供给X窗口组件416,如分别由图6中的箭头610和612所表示的。如所指出的,虽然在由事件桥组件412根据箭头606接收的触摸屏输入信息之中包括的任何坐标信息是绝对坐标值信息,但是从事件桥组件412提供给事件转发驱动器组件414并且然后提供给X窗口组件416的任何坐标信息是相对坐标值信息。
如已经讨论的,如间接地从触摸屏显示器112传送的在X窗口组件416处接收的触摸屏输入信息能够与移动设备102它本身的操作有关(像将会是不管外部显示器设备103是否存在的情况一样)以及与正在移动设备102上操作的应用或Linux程序424中的一个或多个的操作有关,并且通过存在外部显示器104,其显示特别地成为可能。因此,在X窗口组件416接收到触摸屏输入(例如,键或相对坐标)信息后,如由箭头614表示的那样X窗口组件将形式为另外的触摸屏输入信号438的该信息发送到AIW组件420,以及如由箭头616所指示的那样发送到应用或Linux程序424。在AIW组件420处接收到触摸屏输入(例如,键或相对坐标)信息后,如由另外的箭头618所表示的那样该组件进而将形式为AIW信号430的那个信息发送到EAS驱动器组件422。如所指出的,虽然在由事件桥组件420根据箭头614所接收到的触摸屏输入信息之中包括的任何坐标信息是相对坐标值信息,但从AIW组件420提供给EAS驱动器组件422的任何坐标信息是绝对坐标值信息。
在接收到包含触摸屏输入信息的AIW信号430后,如由箭头620所表示的那样EAS驱动器组件422进而将形式为附加信号428的该信息转发到安卓操作系统302。安卓操作系统302在接收到触摸屏输入信息后然后在考虑到那个接收到的信息时来确定移动设备操作(并且特别是与移动设备操作相对应的信息的显示)应该如何改变。在确定应该做出特定屏幕改变后,安卓操作系统302进而将表示适当的屏幕改变的其它成像信号426发送到AIW块420,如由箭头622所表示的。因为其它成像信号426被配置成引起整个屏幕改变,并且仍然(如上文所讨论的)在外部显示器模式下仅由外部显示器设备104所显示的整体图像的子部分/窗口将反映安卓操作系统302成像信息,所以AIW组件420用来将所接收到的其它成像信号426转换成AIW成像信号440。如由箭头624所表示的那样,适用于产生与安卓操作系统302成像信息相对应的窗口改变的AIW成像信号440然后被发送到X窗口组件416(更特别地在这点上,AIW检测安卓呈现中的改变并且通过调用WM API来显示经修改的(一个或多个)图形图像子部分/区域)。
如已经指出的,X窗口组件416用来将由AIW成像信号440(反映窗口改变)所提供的成像信息与由应用或Linux程序424所提供的附加的成像信息集成。因此,在如由箭头628所指示的那样从应用或Linux程序424接收到应用成像信号442后,X窗口组件基于应用成像信号442和AIW成像信号440二者来生成输出成像信号444,并且然后发送该输出成像信号以供外部显示器设备104接收,如由箭头630所指示的。将理解的是,与箭头630相对应的输出成像信号的发送旨在表示通过GPU API 418的那些成像信号的进一步处理和另外的输出成像信号446到外部显示器设备的对应发送。
鉴于上述描述,应该明显的是,至少所公开的实施例和/或其变化中的一些提供一个或多个优点。为了开始,当移动设备102被连接到外部显示器设备104并且正在外部显示器模式下操作时,用户提供有大面积、高度可用的、内置虚拟键盘和/或轨迹板设备(或其它用户界面)。因此,用户能够操作移动设备102和运行在其上的应用(诸如应用或Linux程序424)而不用携带其它输入设备,并且特别地能够实现输入文本和/或控制多个应用正运行在其中的桌面环境的有效登录。用户界面提供的虚拟键盘和/或轨迹板可以是真实键盘和/或轨迹板(或鼠标式设备)的精细模拟,从而使得移动设备触摸屏显示器112作为用户输入设备的使用变得直观。
另外,通过外部显示器设备104的有效使用,不仅可以继续显示如由安卓操作系统所提供的移动设备操作状态信息,而且可以显示各种广泛的其它类型的信息,并且特别地显示当仅单独采用移动设备时为可能的不同类型的相当大量的信息。除了别的以外,如由安卓操作系统所提供的移动设备操作状态信息还能够被制成为在外部显示器设备上一直可见。另外,用户能够在不用在移动设备它本身上显示信息的情况下提供有这个信息,也就是说,能够使信息成为可用的,而不用为了这样的信息的显示通过占用触摸屏显示器上的宝贵空间来限制触摸屏显示器作为用户输入设备的效力。此外,应用或Linux程序424(或其它应用)中的多个应用能够使用移动设备102作为形成桌面环境的平台来运行。也就是说,至少一些实施例使得能够在移动设备中使用完全成熟的视窗系统和基于窗口的应用,这能够允许对利用电话来提供桌面(视窗)环境的杠杆式支持(leveraging),在桌面(视窗)环境上能够利用一个或多个桌面应用。
此外各种其它有益效果在至少一些实施例中被实现。例如,移动设备平台和应用像在没有代码修改的情况下在外部显示器设备上预期的那样工作,因为向它们报告的屏幕分辨率和尺寸不会(或者不需要)改变。并且,能够在诸如其它窗口或标签的不同显示表面中单独地显示同时工作的移动设备应用。这使得在应用之间切换变得更快和更容易并且让用户知道同时运行的应用。同样,用户能够通过使用在外部显示器设备上显示的图像的图像部分(即,示出如由安卓操作系统所提供、如在第二GUI上显示的移动设备操作状态的窗口)以将移动设备作为免提电话来采用,或者通过断开外部显示器设备(例如,HDTV)电缆以参与私密对话来对来电做出响应。
另外,尽管有上述描述,本发明旨在包含除上文讨论的那些之外的各种其它实施例。例如,在一些实施例中,考虑到在外部显示器模式下触摸屏显示器112是活动显示器,轨迹板区域能够被配置成视情况而定将视觉线索(例如,消息、照片、视频等)给予用户。并且例如,在一些附加的实施例中,外部显示器设备还能够用作触摸屏或者以其它的方式允许用户输入。在一些这样的实施例中,诸如姿势的用户输入在这些姿势如何与在外部显示器设备上显示的整体图像的第一子部分512相关(也就是说,和与安卓操作系统的输出相对应的窗口相关)方面被特别地感测到。在这样的实施例中,在外部显示器设备与移动设备102之间能够存在双向通信。
并且例如,在一些实施例中移动设备的触摸屏显示器112被配置成感测包括例如多触摸姿势的各种附加的(例如,非标准)姿势。另外,在其中外部显示器设备能够接收用户输入(除移动设备触摸屏显示器112之外)但其中外部显示器设备仅能够接收某些类型的用户输入而不是其它的(再次,例如,非标准姿势)的一些实施例中,移动设备102能够操作以在适当情况下取代外部显示器设备在这点上的操作(例如,如果移动设备的窗口是清晰的)。例如,在第一子部分512(再次,与安卓操作系统的输出相对应的窗口)上进行的姿势被传递给移动设备触摸屏显示器112(主GUI)。
因此,具体地意图是,本发明不限于包含在本文中的实施例和图示,而且包括如落入以下权利要求的范围内的包括有实施例的部分和不同实施例的要素的组合的修改形式的那些实施例。

Claims (19)

1.一种移动设备,包括:
第一通信设备,所述第一通信设备具有第一发射机和第一接收机中的一个或两个;
用户输入设备,所述用户输入设备允许所述移动设备接收用户输入以及显示表示所述移动设备的操作状态或条件的第一图像部分;
端子,通过所述端子所述移动设备能够与外部显示器设备通信;以及
至少一个处理器部,所述至少一个处理器部执行包括移动设备操作系统组件和至少一个中间软件组件的多个软件组件,通过所述至少一个中间软件组件所述移动设备操作系统至少间接地与所述用户输入设备和所述端子二者进行通信,
所述多个软件组件:
经由所述至少一个中间软件组件来间接地接收指示在所述用户输入设备处接收到的所述用户输入的一个或多个输入信号;
生成一个或多个第一成像信号、表示所述移动设备的操作状态或条件的所述第一图像部分以及第二图像部分,其中,所述外部显示驱动信号至少部分地基于所述一个或多个第一成像信号,所述第二图像部分至少部分地取决于所述用户输入或所述移动设备操作系统对所述用户输入的响应;以及
在所述端子处提供被配置为使得所述外部显示器设备显示所述第一图像部分以及所述第二图像部分的外部显示驱动信号。
2.根据权利要求1所述的移动设备,其中,所述用户输入设备是触摸屏显示器,并且其中,所述输入信号指示在所述触摸屏显示器上的、已接收到所述用户输入的一个或多个位置。
3.根据权利要求2所述的移动设备,其中,所述至少一个中间软件组件包括至少一个附加的软件组件,该至少一个附加的软件组件生成至少间接地影响在所述触摸屏显示器上显示的触摸屏图像的一个或多个第二成像信号。
4.根据权利要求3所述的移动设备,
其中,所述至少一个附加的软件组件包括桥组件,并且其中,所述一个或多个第二成像信号被从桥组件提供给图形处理单元应用程序设计接口(GPU API),所述图形处理单元应用程序设计接口(GPU API)进而至少部分地基于所述一个或多个第二成像信号来将一个或多个第三成像信号提供给所述触摸屏显示器。
5.根据权利要求4所述的移动设备,其中,基于所述一个或多个第三成像信号,所述触摸屏显示器输出包括小键盘图像和鼠标式用户界面图像中的一个或两个的另外的图像,并且
其中,所述桥组件从触摸屏驱动器软件组件接收指示所述用户输入的位置信号,所述位置信号更具体地指示所述触摸屏上的位置,所述位置已被触摸并且对应于所述小键盘图像的至少一个键或所述鼠标式用户界面图像的可选择区内的至少一个位置中的一个或多个。
6.根据权利要求1所述的移动设备,其中,所述移动设备操作系统生成所述一个或多个第一成像信号,所述外部显示驱动信号至少部分地基于所述一个或多个第一成像信号。
7.根据权利要求6所述的移动设备,其中,所述至少一个附加的软件组件包括处理所述一个或多个第一成像信号以生成一个或多个第二成像信号的另外的软件组件,所述外部显示驱动信号至少部分地基于所述一个或多个第二成像信号,其中,所述一个或多个第二成像信号被配置成使所述第一图像部分成为在所述外部显示器设备上显示的图像的子部分。
8.根据权利要求7所述的移动设备,其中,所述至少一个附加的软件组件还包括一个或多个应用并且进一步包括至少一个合成软件组件,其中,所述一个或多个应用生成第三成像信号,其中,所述第二成像信号和所述第三成像信号由所述至少一个合成软件组件来接收。
9.根据权利要求8所述的移动设备,
其中,所述至少一个合成软件组件生成输出信号,所述外部显示驱动信号至少部分地基于所述输出信号,并且
其中,由于所述至少一个合成软件组件的操作,所述外部显示驱动信号被配置成使所述外部显示器设备显示包括所述第一图像部分和所述第二图像部分二者的所述图像,并且其中,所述第一图像部分至少部分地得自所述第二成像信号,而所述第二图像部分进一步至少部分地得自所述第三成像信号。
10.根据权利要求9所述的移动设备,其中,所述外部显示驱动信号被配置成使所述外部显示器设备显示第一窗口部分和第二窗口部分二者,所述第一窗口部分是表示所述移动设备的操作状态或条件的所述第一图像部分,所述第二窗口部分包括指示所述一个或多个应用中的至少一个的状态或条件的所述第二图像部分。
11.根据权利要求10所述的移动设备,其中,所述移动设备操作系统是为安卓平台或作为安卓平台的一部分的安卓操作系统,并且所述另外的软件组件是Android-in-a-window软件组件,以及其中,所述至少一个合成软件组件包括X窗口软件组件。
12.根据权利要求10所述的移动设备,其中,所述一个或多个应用包括字处理应用、互联网浏览器应用以及电子表格应用中的一个或多个。
13.根据权利要求8所述的移动设备,其中,一个或多个输入信号至少间接地从所述用户输入设备经由所述至少一个合成软件组件被提供给所述一个或多个应用以及所述移动设备操作系统,并且其中,所述第二和第三成像信号至少部分地取决于所述一个或多个应用和所述移动设备操作系统对所述一个或多个输入信号的一个或多个反应。
14.根据权利要求8所述的移动设备,其中,所述至少一个中间软件组件除所述至少一个合成软件组件之外另外包括以下各项中的一个或多个:
GPU API,通过所述GPU API所述至少一个合成软件组件与所述端子通信;
至少一个接口组件,所述至少一个接口组件包括允许所述至少一个合成软件组件与所述移动设备操作系统之间的通信的至少一个第一驱动器组件;以及
至少一个另外的接口组件,所述至少一个另外的接口组件包括允许所述用户输入设备与所述至少一个合成软件组件之间的另外的通信的至少一个第二驱动器组件。
15.一种移动设备系统,包括:
移动设备,所述移动设备包括:
触摸屏显示器,所述触摸屏显示器被配置为接收一个或多个输入信号以及显示表示所述移动设备的操作状态或条件的第一图像部分;
由至少一个处理组件所执行的至少一个附加的软件组件和操作系统,所述至少一个附加的软件组件:
用来向所述操作系统传送至少间接地从所述触摸屏显示器接收的所述一个或多个输入信号;以及
基于至少间接地从所述操作系统传送的一个或多个第一图像信号来生成输出信号;以及
外部显示器设备,所述外部显示器设备与所述移动设备通信,所述外部显示器设备接收所述输出信号并且基于所述输出信号显示具有第一和第二图像分量的图像,所述第一图像分量取决于在所述外部显示器设备不与所述移动设备通信的情况下被显示在所述触摸屏显示器上的所述第一图像部分以及所述第二图像分量至少部分地取决于来自所述触摸屏显示器的一个或多个输入信号或所述操作系统对所述一个或多个输入信号的响应。
16.根据权利要求15所述的移动设备系统,其中,所述至少一个附加的软件组件包括生成一个或多个第二图像信号的应用组件,并且其中,由所述外部显示器设备所显示的所述图像的所述第二图像分量进一步至少间接地基于所述一个或多个第二图像信号。
17.根据权利要求15所述的移动设备系统,其中,所述移动设备包括蜂窝电话、个人数字助理以及智能电话中的一个,并且其中,所述外部显示器包括电视、高清晰度电视(HDTV)显示器设备以及计算机监视器中的一个。
18.一种与外部显示器设备相关地操作移动设备的方法,所述方法包括:
在所述移动设备的触摸屏显示器处接收一个或多个用户输入;
通过一个或多个附加的中间软件组件至少间接地将指示所述用户输入的一个或多个输入信号提供给移动设备操作系统;
在所述移动设备操作系统处生成一个或多个第一图像信号,该一个或多个第一图像信号指示第一图像部分和第二图像部分,所述第一图像部分表示所述移动设备的操作状态或条件以及所述第二图像部分至少部分地取决于在所述触摸屏显示器处的一个或多个用户输入或所述移动设备操作系统对所述一个或多个用户输入的响应;
处理所述一个或多个第一图像信号以便产生还指示所述第一图像部分和所述第二图像部分的第二图像信号;以及
发送与所述第二图像信号相同或至少部分地基于所述第二图像信号的输出信号,用于由所述外部显示器设备接收,从而所述外部显示器设备显示包括所述第一图像部分和所述第二图像部分的总体图像。
19.根据权利要求18所述的方法,还包括在所述接收之前:
检测所述外部显示器设备可用于与所述移动设备的通信或者已经进入与所述移动设备的通信;
在至少一个处理设备上开始执行所述附加的中间软件组件,其中,所述附加的中间软件组件与所述移动设备操作系统、经由一个或多个触摸屏显示器软件组件的所述触摸屏显示器以及所述外部显示器设备中的每一个对接。
CN201180063594.5A 2010-12-31 2011-12-28 用于使外部显示器的使用与移动设备适配的方法和系统 Active CN103282870B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/983,161 2010-12-31
US12/983,161 US8369893B2 (en) 2010-12-31 2010-12-31 Method and system for adapting mobile device to accommodate external display
PCT/US2011/067468 WO2012092316A1 (en) 2010-12-31 2011-12-28 Method and system for adapting the usage of external display with mobile device

Publications (2)

Publication Number Publication Date
CN103282870A CN103282870A (zh) 2013-09-04
CN103282870B true CN103282870B (zh) 2017-02-08

Family

ID=45532027

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180063594.5A Active CN103282870B (zh) 2010-12-31 2011-12-28 用于使外部显示器的使用与移动设备适配的方法和系统

Country Status (5)

Country Link
US (1) US8369893B2 (zh)
EP (1) EP2659350B1 (zh)
KR (1) KR101561155B1 (zh)
CN (1) CN103282870B (zh)
WO (1) WO2012092316A1 (zh)

Families Citing this family (80)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130024812A1 (en) 2011-07-13 2013-01-24 Z124 Foreground/background assortment of hidden windows
US8933949B2 (en) 2010-10-01 2015-01-13 Z124 User interaction across cross-environment applications through an extended graphics context
US8726294B2 (en) 2010-10-01 2014-05-13 Z124 Cross-environment communication using application space API
US9152582B2 (en) 2010-10-01 2015-10-06 Z124 Auto-configuration of a docked system in a multi-OS environment
US8966379B2 (en) 2010-10-01 2015-02-24 Z124 Dynamic cross-environment application configuration/orientation in an active user environment
US9047102B2 (en) 2010-10-01 2015-06-02 Z124 Instant remote rendering
US8819705B2 (en) 2010-10-01 2014-08-26 Z124 User interaction support across cross-environment applications
WO2012044546A2 (en) 2010-10-01 2012-04-05 Imerj, Llc Auto-waking of a suspended os in a dockable system
US8842080B2 (en) 2010-10-01 2014-09-23 Z124 User interface with screen spanning icon morphing
US8761831B2 (en) 2010-10-15 2014-06-24 Z124 Mirrored remote peripheral interface
US9494975B1 (en) * 2011-03-28 2016-11-15 Amazon Technologies, Inc. Accessory device identification method
US8856355B2 (en) 2011-05-09 2014-10-07 Samsung Electronics Co., Ltd. Systems and methods for facilitating communication between mobile devices and display devices
US8971924B2 (en) 2011-05-23 2015-03-03 Apple Inc. Identifying and locating users on a mobile network
US10715380B2 (en) 2011-05-23 2020-07-14 Apple Inc. Setting a reminder that is triggered by a target user device
WO2013002547A2 (ko) 2011-06-30 2013-01-03 주식회사 케이티 외부 디바이스와 도킹되는 휴대 단말 및 그 제어 방법
KR101554599B1 (ko) 2011-06-30 2015-09-21 주식회사 케이티 외부 디바이스와 도킹 연결되는 휴대 단말 및 어플리케이션 실행 방법
KR20130024615A (ko) * 2011-08-31 2013-03-08 주식회사 케이티 외부 디바이스와 결합하는 휴대 단말 및 그 제어 방법
KR101932529B1 (ko) * 2011-09-16 2018-12-28 삼성전자 주식회사 Sns 기능 통합 운용 방법 및 시스템
US8842057B2 (en) 2011-09-27 2014-09-23 Z124 Detail on triggers: transitional states
US20130109374A1 (en) * 2011-10-31 2013-05-02 Young Hoon Kwon System and Method for a Display Unit Coupled to a Smartphone
KR101474927B1 (ko) 2011-12-22 2014-12-31 주식회사 케이티 외부 디스플레이 기기로의 영상 송출 방법 및 그 단말
KR101546407B1 (ko) 2011-12-23 2015-08-24 주식회사 케이티 어플리케이션 실행 제어 방법 및 장치
KR101522399B1 (ko) 2011-12-23 2015-05-22 주식회사 케이티 휴대 단말에서 외부 디스플레이 기기로의 화면 표출 방법 및 그 휴대 단말
KR101504655B1 (ko) 2011-12-26 2015-03-23 주식회사 케이티 어플리케이션 실행 제어 방법 및 장치
KR101522397B1 (ko) 2011-12-26 2015-05-22 주식회사 케이티 복수의 외부 장치와 연결될 수 있는 휴대 단말 및 그 제어 방법
CA2777701C (en) * 2012-01-09 2017-06-06 Research In Motion Limited Selective rendering of electronic messages by an electronic device
US20170034702A9 (en) * 2012-02-09 2017-02-02 Nordic Capital Partners, LLC Dual-Mode Master-Slave Controller and Method
US20150100658A1 (en) * 2012-02-09 2015-04-09 Keystone Intergrations LLC Dual Mode Master/Slave Interface
US9832036B2 (en) 2012-02-09 2017-11-28 Keystone Integrations Llc Dual-mode vehicular controller
US20130234959A1 (en) * 2012-03-06 2013-09-12 Industry-University Cooperation Foundation Hanyang University System and method for linking and controlling terminals
KR20130104037A (ko) * 2012-03-12 2013-09-25 삼성전자주식회사 디스플레이장치 및 그 제어방법
KR101277657B1 (ko) * 2012-05-30 2013-06-27 주식회사 케이티 외부 디바이스와 이에 도킹되는 휴대 단말 사이의 입력 이벤트 처리 방법
EP3355561B1 (en) * 2012-09-10 2021-04-28 Samsung Electronics Co., Ltd. Method for connecting mobile terminal and external display and apparatus implementing the same
US20140075377A1 (en) * 2012-09-10 2014-03-13 Samsung Electronics Co. Ltd. Method for connecting mobile terminal and external display and apparatus implementing the same
CN102984361B (zh) * 2012-11-14 2014-08-06 广东欧珀移动通信有限公司 一种接听和挂断通话的方法及移动通讯设备
US11237719B2 (en) * 2012-11-20 2022-02-01 Samsung Electronics Company, Ltd. Controlling remote electronic device with wearable electronic device
DE112013005688B4 (de) * 2012-11-28 2024-07-18 Nvidia Corporation Vorrichtung zur Bereitstellung grafischer Verarbeitung und an einem Netzwerk angebundene GPU-Einrichtung
US11082490B2 (en) 2012-11-28 2021-08-03 Nvidia Corporation Method and apparatus for execution of applications in a cloud system
US10942735B2 (en) * 2012-12-04 2021-03-09 Abalta Technologies, Inc. Distributed cross-platform user interface and application projection
TW201428569A (zh) * 2013-01-10 2014-07-16 Sipix Technology Inc 包含電泳觸控面板之顯示系統
US8989773B2 (en) 2013-01-29 2015-03-24 Apple Inc. Sharing location information among devices
US9619131B2 (en) * 2013-02-22 2017-04-11 Blackberry Limited Methods and devices for displaying content
US10313626B2 (en) 2013-06-24 2019-06-04 Intel Corporation Techniques and system for multiple display media presentations
KR102064952B1 (ko) * 2013-07-12 2020-01-10 삼성전자주식회사 수신 데이터를 이용하여 어플리케이션을 운영하는 전자 장치
US9842532B2 (en) 2013-09-09 2017-12-12 Nvidia Corporation Remote display rendering for electronic devices
US9609390B2 (en) * 2013-10-03 2017-03-28 Jamdeo Canada Ltd. System and method for providing contextual functionality for presented content
EP3092630B1 (en) * 2014-01-06 2023-10-25 Hubble Connected Ltd Dual mode baby monitoring priority application
US20150350146A1 (en) 2014-05-29 2015-12-03 Apple Inc. Coordination of message alert presentations across devices based on device modes
US10382378B2 (en) 2014-05-31 2019-08-13 Apple Inc. Live location sharing
US9207835B1 (en) 2014-05-31 2015-12-08 Apple Inc. Message user interfaces for capture and transmittal of media and location content
WO2016022496A2 (en) 2014-08-06 2016-02-11 Apple Inc. Reduced-size user interfaces for battery management
WO2016036541A2 (en) 2014-09-02 2016-03-10 Apple Inc. Phone user interface
EP4027227A1 (en) * 2014-09-02 2022-07-13 Apple Inc. Reduced-size interfaces for managing alerts
US9967320B2 (en) 2014-12-18 2018-05-08 Google Llc Methods, systems, and media for controlling information used to present content on a public display device
US11144959B2 (en) 2014-12-18 2021-10-12 Google Llc Methods, systems, and media for presenting advertisements relevant to nearby users on a public display device
US9841939B2 (en) 2014-12-18 2017-12-12 Google Inc. Methods, systems, and media for presenting requested content on public display devices
US9916122B2 (en) * 2014-12-18 2018-03-13 Google Llc Methods, systems, and media for launching a mobile application using a public display device
JP6627217B2 (ja) * 2014-12-25 2020-01-08 カシオ計算機株式会社 テキスト表示装置、学習方法、及びプログラム
US10534414B2 (en) * 2015-02-12 2020-01-14 International Business Machines Corporation Disaggregated mobile client
US9844700B1 (en) * 2015-06-14 2017-12-19 Grady Burleson, Jr. Avalanche self-rescue device
US10003938B2 (en) 2015-08-14 2018-06-19 Apple Inc. Easy location sharing
US9769596B2 (en) 2015-11-24 2017-09-19 International Business Machines Corporation Mobile device output to external device
US10650621B1 (en) 2016-09-13 2020-05-12 Iocurrents, Inc. Interfacing with a vehicular controller area network
KR102365678B1 (ko) * 2017-03-29 2022-02-21 삼성전자주식회사 외부 장치를 이용한 화면 출력 방법 및 이를 지원하는 전자 장치
CN107632810B (zh) * 2017-09-27 2020-09-29 珠海研果科技有限公司 一种基于Android系统HDMI同显时节省带宽的方法
US12067466B2 (en) 2017-10-19 2024-08-20 Pure Storage, Inc. Artificial intelligence and machine learning hyperscale infrastructure
US11861423B1 (en) 2017-10-19 2024-01-02 Pure Storage, Inc. Accelerating artificial intelligence (‘AI’) workflows
US10671435B1 (en) 2017-10-19 2020-06-02 Pure Storage, Inc. Data transformation caching in an artificial intelligence infrastructure
US10360214B2 (en) 2017-10-19 2019-07-23 Pure Storage, Inc. Ensuring reproducibility in an artificial intelligence infrastructure
US11494692B1 (en) 2018-03-26 2022-11-08 Pure Storage, Inc. Hyperscale artificial intelligence and machine learning infrastructure
US11455168B1 (en) 2017-10-19 2022-09-27 Pure Storage, Inc. Batch building for deep learning training workloads
WO2020091795A1 (en) 2018-11-01 2020-05-07 Hewlett-Packard Development Company, L.P. Multifunction display port
US11489956B2 (en) 2018-11-30 2022-11-01 Dish Network L.L.C. Systems and methods for notification forwarding
US11481094B2 (en) 2019-06-01 2022-10-25 Apple Inc. User interfaces for location-related communications
US11477609B2 (en) 2019-06-01 2022-10-18 Apple Inc. User interfaces for location-related communications
US11152100B2 (en) 2019-06-01 2021-10-19 Apple Inc. Health application user interfaces
CN110675795B (zh) * 2019-09-23 2021-02-02 珠海格力电器股份有限公司 显示器的驱动方法及装置、系统、触控屏
JP2023512410A (ja) 2019-12-27 2023-03-27 アバルタ テクノロジーズ、 インク. 接続リソースを使用したユーザデバイスアプリケーションの投影、制御、および管理
CN114064170A (zh) * 2021-10-18 2022-02-18 维沃移动通信有限公司 悬浮窗口显示方法、装置、电子设备和可读存储介质
CN114333933B (zh) * 2022-03-11 2022-05-20 北京麟卓信息科技有限公司 一种Linux平台上安卓应用低延迟音频输出方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1455267A2 (en) * 2003-03-04 2004-09-08 Kabushiki Kaisha Toshiba Information processing apparatus and program
JP4308245B2 (ja) * 2005-12-21 2009-08-05 政弘 井筒 携帯情報通信装置及び該携帯情報通信装置と情報をやり取りするWebサーバ

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002039245A2 (en) 2000-11-09 2002-05-16 Change Tools, Inc. A user definable interface system, method and computer program product
KR100474724B1 (ko) 2001-08-04 2005-03-08 삼성전자주식회사 터치스크린을 가지는 장치 및 그 장치에 외부디스플레이기기를 연결하여 사용하는 방법
JP2007006173A (ja) * 2005-06-24 2007-01-11 Fujitsu Ltd 電子装置、画面情報出力方法及びプログラム
US20100115145A1 (en) * 2006-05-26 2010-05-06 Smart Technologies Ulc Plug-and-play device and method of using the same
EP2283421B1 (en) 2008-05-20 2019-08-14 Citrix Systems, Inc. Methods and systems for using external display devices with a mobile computing device
JP4818454B1 (ja) * 2010-08-27 2011-11-16 株式会社東芝 表示装置、及び表示方法
WO2012046891A1 (ko) * 2010-10-06 2012-04-12 엘지전자 주식회사 이동단말기, 디스플레이 장치 및 그 제어 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1455267A2 (en) * 2003-03-04 2004-09-08 Kabushiki Kaisha Toshiba Information processing apparatus and program
JP4308245B2 (ja) * 2005-12-21 2009-08-05 政弘 井筒 携帯情報通信装置及び該携帯情報通信装置と情報をやり取りするWebサーバ

Also Published As

Publication number Publication date
KR20130111600A (ko) 2013-10-10
EP2659350B1 (en) 2019-07-03
KR101561155B1 (ko) 2015-10-26
EP2659350A1 (en) 2013-11-06
CN103282870A (zh) 2013-09-04
US20120172088A1 (en) 2012-07-05
WO2012092316A1 (en) 2012-07-05
US8369893B2 (en) 2013-02-05

Similar Documents

Publication Publication Date Title
CN103282870B (zh) 用于使外部显示器的使用与移动设备适配的方法和系统
CN111061574B (zh) 一种对象分享方法及电子设备
WO2021136133A1 (zh) 一种应用程序切换方法及电子设备
WO2020181942A1 (zh) 图标控制方法及终端设备
WO2019206036A1 (zh) 消息管理方法及终端
CN110658971B (zh) 一种截屏方法及终端设备
KR20140112920A (ko) 사용자 기기의 오브젝트 운용 방법 및 장치
WO2021004327A1 (zh) 应用权限设置方法及终端设备
WO2021129536A1 (zh) 图标移动方法及电子设备
KR102004986B1 (ko) 어플리케이션 실행 방법 및 시스템, 단말과 그 기록 매체
CN109634494A (zh) 一种图片处理方法及终端设备
WO2020215969A1 (zh) 内容输入方法及终端设备
US12028476B2 (en) Conversation creating method and terminal device
CN107992342A (zh) 一种应用配置更改方法及移动终端
WO2020215982A1 (zh) 桌面图标管理方法及终端设备
WO2020181950A1 (zh) 显示方法及终端
CN110262713B (zh) 图标显示方法及终端设备
KR101616439B1 (ko) 멀티디스플레이 장치, 전자 기기 및 멀티디스플레이 장치의 제어 방법
US11526320B2 (en) Multi-screen interface control method and terminal device
CN108881742B (zh) 一种视频生成方法及终端设备
CN109491964A (zh) 一种文件分享方法及终端
CN109814795A (zh) 一种显示方法及终端设备
CN109814769A (zh) 一种图标排列方法及终端设备
KR101575991B1 (ko) 이동단말기 및 그 제어방법
CN109408119B (zh) 一种应用程序的标记方法和终端设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20161025

Address after: American California

Applicant after: Technology Holdings Co., Ltd of Google

Address before: Illinois State

Applicant before: Motorola Mobility, Inc.

C14 Grant of patent or utility model
GR01 Patent grant