CN103530032A - 移动终端、图像显示装置及使用其的用户接口提供方法 - Google Patents
移动终端、图像显示装置及使用其的用户接口提供方法 Download PDFInfo
- Publication number
- CN103530032A CN103530032A CN201310217541.5A CN201310217541A CN103530032A CN 103530032 A CN103530032 A CN 103530032A CN 201310217541 A CN201310217541 A CN 201310217541A CN 103530032 A CN103530032 A CN 103530032A
- Authority
- CN
- China
- Prior art keywords
- screen
- mobile terminal
- image display
- display device
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
- H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
- G06F1/1694—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/14—Display of multiple viewports
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
- H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
- H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
- H04N21/42222—Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2624—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
- G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
- G06F2200/163—Indexing scheme relating to constructional details of the computer
- G06F2200/1637—Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/038—Indexing scheme relating to G06F3/038
- G06F2203/0384—Wireless input, i.e. hardware and software details of wireless interface arrangements for pointing devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/04—Changes in size, position or resolution of an image
- G09G2340/0442—Handling or displaying different aspect ratios, or changing the aspect ratio
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/04—Changes in size, position or resolution of an image
- G09G2340/0464—Positioning
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/04—Changes in size, position or resolution of an image
- G09G2340/0492—Change of orientation of the displayed image, e.g. upside-down, mirrored
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2356/00—Detection of the display position w.r.t. other display screens
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/16—Use of wireless transmission of display information
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/20—Details of the management of multiple sources of image data
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了移动终端、图像显示装置及使用其的用户接口提供方法。一种控制连接到外部连接的图像显示装置的多个移动终端的方法。该方法包括:将屏幕信息从第一移动终端传送到图像显示装置;将屏幕信息从第二移动终端传送到图像显示装置;在图像显示装置的显示器的第一区域中显示与第一移动终端的屏幕信息相对应的第一镜像屏幕,并且在图像显示装置的显示器的第二区域中显示与第二移动终端的屏幕信息相对应的第二镜像屏幕;跟踪从图像显示装置的输入单元输入的在图像显示装置的显示器上的光标;以及当光标在显示器的第一区域内时,从图像显示装置控制第一移动终端,并且当光标在显示器的第二区域内时,从图像显示装置控制第二移动终端。
Description
技术领域
本发明涉及移动终端、图像显示装置和使用该移动终端、图像显示装置的用户接口提供方法,并且更具体地,涉及下述移动终端、图像显示装置和使用该移动终端、图像显示装置的用户接口提供方法,其能够在图像显示装置上显示各种移动装置的屏幕,允许用户经由在图像显示装置上输出的移动终端的屏幕来控制移动终端,输出移动终端的屏幕,并且经由移动终端控制在图像显示装置上输出的屏幕。
背景技术
最近,随着技术发展,已经开发并且开始广泛使用用于在两个装置之间共享图像的镜像服务。使用用于提供图像信息的源装置和用于输出接收到的图像信息的接收装置(sink device)来提供镜像服务。因为镜像服务方便地通过在接收装置上显示源装置的屏幕来允许用户共享两个装置的屏幕,所以与此相关联的服务已经逐渐增加。
源装置的示例包括移动终端,该移动终端具有相对小的屏幕并且被配置成容易接收用户命令,并且接收装置的示例包括具有大屏幕的图像显示装置。
通常,仅使用一个源装置和一个接收装置来提供镜像服务。即,仅在一个图像显示装置上显示一个移动终端的屏幕。然而,由于对于各种屏幕的用户需求已经增加,存在对于用于将各种源装置连接到一个接收装置并且在一个接收装置上显示各种源装置的屏幕的多镜像服务的需要。
多镜像服务包括连接的接收装置和用于控制接收装置的多用户输入反向信道(UIBC)服务提供方法。
现有技术的移动终端被配置成使用触摸传感器来接收用户命令。即,用户触摸移动终端的触摸传感器以键入用户命令。现有技术的移动终端不显示与触摸输入相对应的指示光标。
因此,如果用户经由作为源装置的移动终端操纵作为接收装置的图像显示装置的屏幕,则用户操纵移动终端,并且然后检查图像显示装置以便于检查是否已经适当地执行了操作。即,用户必须执行操作,同时频繁地和交替地检查移动终端和图像显示装置。
因此,在源装置和接收装置之间需要相对大的交互作用的操作中,用户在频繁地和交替地检查移动终端和图像显示装置的同时必定不方便地执行操作。这对于期望使他们的眼睛固定在一个方向上的用户来说是麻烦的。
发明内容
因此,本发明针对移动终端、图像显示装置以及使用该移动终端、图像显示装置的用户接口提供方法,其基本上消除了由于现有技术的局限和缺点而导致的一个或多个问题。
本发明的目的在于提供移动终端、图像显示装置以及使用该移动终端、图像显示装置的用户接口提供方法,其能够允许用户经由在图像显示装置上输出的移动终端的屏幕来控制移动终端,并且允许用户有效地控制在图像显示装置上输出的屏幕。
本发明的另一目的在于提供一种图像显示装置和使用该图像显示装置的用户接口,其能够允许用户经由在图像显示装置上输出的移动终端的屏幕来有效地控制移动终端。
在下面的描述中将部分地阐述本发明的其他优点、目的和特征,并且在查阅以下内容之后,部分地对本领域普通技术人员来说将变得显而易见,或者可以从本发明的实践来习得。可以通过撰写的描述及其权利要求书以及附图中特别指出的结构来实现和获得本发明的目的和其他优点。
为了实现这些目的和其它优点并且根据本发明的目的,如在此具体化和广泛描述的,一种使用图像显示装置和彼此连接的至少一个移动终端的用于数据通信的用户接口提供方法,包括:生成移动终端的屏幕信息并且将该移动终端的屏幕信息传送到图像显示装置;在图像显示装置的显示器的第一区域中输出作为被传送的移动终端的屏幕信息的镜像屏幕;设置与第一区域的相邻区域相对应的第二区域;在图像显示装置的显示器上输出通过图像显示装置的用户输入单元输入的光标;如果光标位于第二区域中,则在与第二区域相邻的第一区域相对应的移动终端和图像显示装置之间建立数据通信;如果光标位于第一区域中,则确定与第一区域相对应的移动终端是用户要控制的目标移动终端;以及将通过图像显示装置的用户输入单元输入的用户命令传送到目标移动终端。
在本发明的另一方面中,一种连接到至少一个移动终端的用于数据通信的图像显示装置包括:显示单元,该显示单元被配置成输出图像;通信单元,该通信单元被配置成执行与移动终端的数据通信;用户输入单元,该用户输入单元被配置成从用户接收用户命令;以及控制器,该控制器被配置成控制通信单元以接收移动终端的屏幕信息,控制显示器以在图像显示装置的显示器的第一区域中输出作为接收到的移动终端的屏幕信息的镜像屏幕,控制显示器以设置与第一区域的相邻区域相对应的第二区域,并且在图像显示装置的显示器上输出通过图像显示装置的用户输入单元输入的光标,如果光标位于第二区域中,则控制通信单元以建立与对应于与第二区域相邻的第一区域的移动终端和图像显示装置的数据通信,并且如果光标位于第一区域中,则控制通信单元以确定与第一区域相对应的移动终端是用户要控制的目标移动终端,并且将通过图像显示装置的用户输入单元输入的用户命令传送到目标移动终端。
在本发明的另一方面中,一种移动终端包括:显示器,该显示器被配置成输出图像;通信单元,该通信单元被配置成执行与外部图像显示装置的数据通信;传感器单元,该传感器单元包括用于感测从用户接收到的第一用户触摸的第一触摸传感器和用于感测第二用户触摸的第二触摸传感器;以及控制器,该控制器被配置成控制显示器以在其中输入第一用户触摸的屏幕区域中输出指南图像,分析和执行与第二用户触摸相对应的用户命令,使用在显示器上输出的图像来生成屏幕信息,并且控制通信单元以将生成的屏幕信息传送到图像显示装置。
应当理解,本发明的前面的一般描述和以下的详细描述是示例性和解释性的,并且旨在提供对要求保护的本发明的进一步解释。
附图说明
附图被包括进来以提供对本发明的进一步理解并且并入和构成本申请的一部分,附图图示了本发明的实施例并且与说明一起用于解释本发明的原理。在附图中:
图1是示出根据本发明的实施例的使用移动终端和图像显示装置的用户接口提供环境的图;
图2是示出根据本发明的实施例的图像显示装置的内部配置的框图;
图3是示出根据本发明的实施例的移动终端的内部配置的框图;
图4至图7是图示根据本发明的第一实施例的用户接口提供方法的图;
图8至图10是图示根据本发明的实施例的用于提供多镜像服务的图像显示装置的屏幕配置方法的图;
图11至图13是图示本发明的多UIBC服务提供方法的第一实施例的图;
图14至图15是图示本发明的多UIBC服务提供方法的第二实施例的图;
图16是图示根据本发明的第一实施例的用户接口提供方法的流程图;
图17和图18是图示根据本发明的第二实施例的用户接口提供方法的流程图;
图19至图23是图示用于控制本发明的图像显示装置的屏幕的用户接口提供方法的第一实施例的图;
图24至图28是图示用于控制本发明的图像显示装置的屏幕的用户接口提供方法的第二实施例的图;
图29至图33是图示用于控制本发明的图像显示装置的屏幕的用户接口提供方法的第三实施例的图;
图34是示出图示用于控制本发明的图像显示装置的屏幕的用户接口提供方法的第四至第六实施例的用户接口环境的图;
图35是图示用于控制本发明的图像显示装置的屏幕的用户接口提供方法的第四实施例的图;
图36是图示用于控制本发明的图像显示装置的屏幕的用户接口提供方法的第五实施例的图;
图37是图示用于控制本发明的图像显示装置的屏幕的用户接口提供方法的第六实施例的图;以及
图38是图示用于控制本发明的图像显示装置的屏幕的用户接口提供方法的第七实施例的图。
具体实施方式
现在将详细参考本发明的优选实施例,在附图中图示了本发明的优选实施例的示例。只要可能,在附图中将使用相同的附图标记来指代相同或者相似的部件。
尽管在考虑到本说明书中的元件的功能的情况下从本领域中广泛使用的通用术语中选择本说明书中的元件的大多数术语,但是该术语可以根据本领域中技术人员的意图或者惯例或者新技术的引入而改变。申请人已经任意地选择了一些术语并且根据需要在下面的描述中解释了其含义。因此,在本说明书中使用的术语应当基于本说明书中的整个内容以及术语的实际含义而不是其简单名称或者含义来解释。
词语“模块”和“单元”被附加到描述组件的术语,仅用于易于解释本发明并且因此可以互换地使用。
在本说明书中描述的图像显示装置100可以包括能够显示图像的所有装置,诸如移动电话、智能电话、个人数字助理(PDA)、便携式多媒体播放器(PMP)、TV接收器、膝上型计算机、数字广播终端、导航装置等。
在本说明书中描述的移动装置200可以包括连接到图像显示装置100以执行数据通信的所有终端,诸如移动电话、智能电话、个人数字助理(PDA)、便携式多媒体播放器(PMP)等。
图1是示出根据本发明的实施例的使用移动终端200和图像显示装置100的用户接口提供环境的图。
在本发明的用户接口提供环境中,图像显示装置100和移动终端200有线或无线地连接以执行数据通信。即,图像显示装置100和移动终端200被配置成将数据有线或者无线地传送到与之连接的另一装置/从与之连接的另一装置有线或者无线地接收数据。
在连接图像显示装置100和移动终端200的方法中,诸如以太网、通用串行总线(USB)、移动高清(MHL)、无线LAN(WLAN)(Wi-Fi)、无线宽带(Wibro)、蓝牙、射频识别(RFID)、红外线数据协会(IrDA)、超宽带(UWB)、ZigBee等各种技术。
图像显示装置100和移动终端200可以通过数据通信共享屏幕。即,图像显示装置100和移动终端200接收和输出对应装置的屏幕信息。因此,用户能够使用两个装置来接收相同的屏幕。
在两个装置之间共享屏幕被称为镜像服务。可以使用用于提供屏幕信息的源装置和用于输出接收到的屏幕信息的接装置来提供镜像服务。即,镜像服务在接收装置上显示源装置的屏幕。
源装置对源装置的屏幕信息进行编码并且将编码的屏幕信息传送到接收装置。接收装置对接收到的屏幕信息进行解码并且输出解码的屏幕信息。此时,源装置可以从接收装置请求接收装置所支持的解码方法,并且接收解码方法。
另外,源装置可以将源装置的音频信息传送到接收装置。接收装置经由扬声器输出接收到的音频信息。在该情况下,源装置可以单独地传送屏幕信息和音频信息,或者可以复用屏幕信息和音频信息并且传送复用的信息。
在本说明书中,图像显示装置100是接收装置,并且移动终端200是源装置。替代地,图像显示装置100可以用作源装置,并且移动终端200可以用作接收装置。
图像显示装置100和移动终端200能够传送通过数据通信输入的用户命令。即,如果用户将用户命令键入到用于显示移动终端200的屏幕的图像显示装置100,则图像显示装置100将用户命令传送到移动终端200,并且移动终端200根据接收到的用户命令执行移动终端200的操作。
因此,用户可以使用图像显示装置100来控制移动终端200。使用接收装置控制源装置的操作被称为用户输入反向信道(UIBC)服务。
在图1(a)中,图像显示装置100和移动终端200通过数据通信等同地输出作为移动终端200的屏幕的应用图标屏幕。即,移动终端200通过数据通信将移动终端200的屏幕信息传送到图像显示装置100,并且图像显示装置100显示移动终端200的屏幕信息。
图像显示装置100从诸如无线遥控器的用户输入单元155接收用户命令,并且将接收到的用户命令传送到移动终端200。即,用户将用户命令键入到图像显示装置100以控制移动终端200。
另外,如在图1(a)中所示,图像显示装置100和移动终端200可以在相应的屏幕上显示用于显示用户命令的输入的指南图像156和256。
图1(a)示出了连接到图像显示设备100的一个移动终端200,并且图1(b)示出了连接到图像显示设备100的两个移动终端201和202。
参考图1(b),将若干移动终端201和202连接到一个图像显示装置100并且在图像显示装置100上同时显示移动终端201和202的屏幕被称为多镜像服务。用户通过图像显示装置100控制若干移动终端201和202被称为多UIBC服务。
本发明的用户接口的目的在于,如果若干移动终端201和202连接到图像显示装置100,则向用户有效地提供多镜像服务和多UIBC服务。
在本说明书中,在描述使用图像显示装置100和移动终端200的用户接口提供方法之前,将描述图像显示装置100和移动终端200的配置。
具体地,图2是示出根据本发明的实施例的图像显示装置100的内部配置的框图。
参考图2,图像显示装置100包括音频/视频处理器101、接口150、存储器160、显示器170、音频输出单元175以及控制器180。
在图2中示出的组件不是必要的,并且可以实现具有更多的组件或者更少的组件的图像显示装置100。在下文中,将顺序地描述上述组件。
音频/视频处理器101处理视频或者音频信号,使得通过图像显示装置100的显示器170或者音频输出单元175输出视频或者音频。对于视频或者音频信号处理,音频/视频处理器101可以包括信号输入单元110、解调器120和信号处理器140。另外,信号输入单元110可以包括调谐器111、A/V输入单元112、USB输入单元113以及无线信号输入单元114。
调谐器单元111调谐到与用户从通过天线接收到的RF广播信号中选择的信道相对应的射频(RF)广播信号,并且将调谐的RF广播转换成中间频率(IF)信号或者模拟基带音频/视频(AV)信号。从调谐器111输出的模拟基带音频/视频信号(CVBS(复合视频消隐同步)中音频(SIF)可以被直接输入到信号处理器140。
解调器120从调谐器单元110接收数字IF信号DIF,并且解调数字IF信号DIF。解调器120可以执行解调和信道解码,从而获得流信号TS。从解调器120输出的流信号可以被输入到信号处理器120。
信号处理器140执行解复用和信号处理,将视频信号输出到显示器170并且将音频信号输出到音频输出单元175。
另外,信号输入单元110可以连接外部设备和图像显示装置100。信号输入单元110连接到诸如数字多功能盘(DVD)、蓝光装置、游戏控制台、可携式摄像机或者计算机(膝上型计算机)的外部装置以将外部输入音频信号、外部输入音频信号和外部输入数据信号传送到图像显示装置100的信号处理器140。可以将通过图像显示装置100处理的视频信号、音频信号和数据信号输出到另一外部设备。
信号输入单元110的A/V输入单元112可以包括复合视频消隐同步(CVBS)端口、组件端口、超视频(S视频)(模拟)端口、数字视频接口(DVI)端口、高清多媒体接口(HDMI)端口、红绿蓝(RGB)端口、D-SUB端口、IEEE1394端子、SPDIF端子、液晶HD端子等,以便于将外部设备的视频和音频信号输入到图像显示装置100。可以将经由CVBS端子和S视频端子输入的模拟信号转换成数字信号,并且可以将转换的数字信号输入到信号处理器140。在不进行模拟/数字转换的情况下,可以将经由另一输入端子输入的数字信号输入到信号处理器140。
USB输入单元113可以通过USB端子接收音频和视频信号。
无线信号输入单元114可以将图像显示装置100连接到无线网络。图像显示装置100可以通过无线信号输入单元114连接到无线因特网。无线信号输入单元114可以执行与其他电子设备的短程无线通信。
信号输入单元110可以将图像显示装置100连接到机顶盒。例如,为了交互式通信,如果机顶盒是因特网协议(IP)TV机顶盒,则IPTV机顶盒的视频或者数据信号可以被发送到信号处理器,并且可以将由信号处理器140处理的信号发送到IPTV机顶盒。IPTV可以包括因特网TV和全浏览TV。
信号处理器140可以将例如MPEG-2TS的接收到的流信号解复用成视频信号、音频信号和数据信号。信号处理器140可以执行解复用的视频信号的视频处理。例如,如果解复用的视频信号是编码的视频信号,则信号处理器140可以对编码的视频信号进行解码。更具体地,如果解复用的视频信号是MPEG-2编码的视频信号,则可以通过MPEG-2解码器来对MPEG-2编码的视频信号进行解码。
使用显示器170显示由信号处理器140处理的视频信号。信号处理器可以执行解复用的音频信号的音频处理。
信号处理器140可以执行在屏显示(OSD)处理。更具体地,信号处理器140可以基于处理的视频信号和处理的数据信号以及通过移动终端200输入的信号中的至少一个以图形或者文本的形式在显示器170的屏幕上显示各种信息。
存储器160可以存储对于控制器180处理和控制信号所需要的各种程序,并且还可以存储处理的视频、音频和数据信号。存储器180可以临时存储从信号输入单元110接收到的视频、音频和/或数据信号。
存储器160可以存储闪速存储器、硬盘、多媒体卡微型或者卡式存储器(例如,SD或者XD存储器等等)、RAM和ROM中的至少一个。图像显示装置100可以输出回存储在存储器160中的文件(运动图像文件、静止图像文件、音乐文件、文档等),以向用户提供文件提,并且执行存储在存储器160中的应用以将该应用提供给用户。
控制器180控制图像显示装置100的全面操作。
控制器180通过接口150从移动终端200接收移动终端200的屏幕信息。控制器180控制信号处理器140,以处理移动终端的屏幕信息,并且将处理的视频信号输出到显示器170。
控制器180通过用户输入单元155从用户接收用于控制移动终端200的用户命令。控制器180可以通过接口150将根据接收到的用户命令的数据传送到移动终端200。
用户输入单元155可以包括连接到无线遥控器、魔力遥控器(magicremote controller)以及图像显示装置100的键盘、鼠标等。在本说明书中,假定用户输入单元155是无线遥控器。
图3是示出根据本发明的实施例的移动终端200的内部配置的框图。
参考图3,移动终端200包括无线通信单元210、音频/视频输入单元220、感测或者传感器单元240、输出单元250、存储器260、接口270、控制器280以及电源190。
在图3中示出的组件不是必须的,并且可以实现具有更多或者更少组件的移动终端200。在下文中,将顺序地描述上述组件。
无线通信单元210可以包括用于执行在移动终端200和无线通信系统之间或者在移动终端200和移动终端200所位于的网络之间的无线通信的一个或者多个模块。例如,无线通信单元210可以包括广播接收模块211、移动通信模块212、无线因特网模块213、短程通信模块214以及位置定位模块215。
广播接收模块211经由广播信道从外部广播管理服务器接收广播信号和/或广播相关信息。广播信道可以包括卫星信道和地面信道。广播管理服务器可以生成并且向终端传送广播信号和/或广播相关信息,或者接收先前生成的广播信号和/或广播相关信息。广播信号可以包括TV广播信号、无线电广播信号以及数据广播信号,并且还包括TV广播信号或无线电广播信号和数据广播信号的组合。
存在各种广播相关信息。例如,广播相关信息可以采用数字多媒体广播(DMB)的电子节目指南(EPG)或者手持式数字视频广播(DVB-H)的电子服务指南(ESG)的形式。可以将通过广播接收模块211接收到的广播信号和/或广播相关信息存储在存储器260中。
移动通信模块212通过移动通信网络向和从基站、外部设备和服务器中的至少一个传送和接收无线电信号。根据音频信号、视频信号或者文本/多媒体消息传送和接收,无线电信号可以包括各种数据。
无线因特网模块213访问无线因特网,并且可以被安装在移动终端200的内部或者外部。为了连接到无线因特网,可以使用无线局域网(WLAN)(即,Wi-Fi)、无线宽带(WiBro)、全球微波接入互操作性(Wimax)以及高速下行链路分组接入(HSDPA)。
短程通信模块214执行短程通信。可以使用蓝牙、射频识别(RFID)、红外线数据协会(IrDA)、超宽带(UWB)、ZigBee、NFC等作为短程通信技术。
位置信息模块215获取移动终端的位置,并且其代表性示例包括全球定位系统(GPS)模块。
参考图3,A/V输入单元220接收音频信号或者视频信号,并且可以包括相机221和麦克风222。相机221处理图像帧,诸如由图像传感器在视频通信模式或者捕获模式下所获得的静止图像或者运动图像。可以在显示器251上显示所处理的图像帧。
由相机221处理的图像帧可以被存储在存储器260中,或者经由无线通信单元210传送到外部设备。根据使用环境可以包括两个或者更多个相机221。麦克风222在通信模式、记录模式或者语音识别模式下接收外部声音信号并且将外部声音信号转换成电语音数据。在通信模式中,所处理的语音数据可以被转换成可传送到基站以进行输出的形式。可以在麦克风222中实现用于消除在接收外部声音信号的过程中生成的噪声的各种噪声消除算法。
感测单元240感测移动终端200的打开/关闭状态、移动终端200的位置、用户的接触或者不接触、移动终端的方位以及移动终端的加速/减速,并且生成用于控制移动终端200的操作的传感器信号。感测单元240可以包括接近传感器、重力传感器、陀螺仪传感器等。
输出单元250生成视觉、听觉或者触觉输出,并且可以包括显示器251、音频输出模块252、报警模块253、触觉模块254等。
显示器251显示(输出)由移动终端200处理的信息。例如,如果移动终端处于通信模式,则显示与通信相关联的用户界面(UI)或者图形用户界面(GUI)。如果移动终端200处于视频通信模式或者捕获模式下,则显示捕获的和/或接收到的图像、UI或者GUI。另外,可以输出从外部图像显示装置100接收到的屏幕信息。
显示器251可以包括液晶显示器(LCD)、薄膜晶体管液晶显示器(TFT LCD)、有机发光二极管(OLED)、柔性显示器以及3维(3D)显示器中的至少一个。
显示器251和用于感测触摸操作的传感器(在下文中,称为“触摸传感器”)具有分层的结构(在下文中,称为“触摸屏”),显示器251可以用作输入装置和输出装置。触摸传感器可以包括触摸膜、触摸片、触摸板等。
触摸传感器可以被配置成将施加到显示器251的特定部分的压力或者在显示器251的特定部分中产生的电容的改变转换成电输入信号。触摸传感器可以被配置成检测触摸位置和区域以及触摸压力。
如果存在对触摸传感器的触摸输入,则将与之相对应的信号发送到触摸控制器。触摸控制器处理信号,并且然后将与之相对应的触摸信号传送到控制器280。控制器280确定显示器251的哪一部分被触摸,并且控制器280根据该触摸信号来分析用户命令并且根据用户命令来控制移动终端200。
触摸传感器可以被配置成识别各种用户的触摸操作。例如,触摸传感器可以接收根据触摸压力而变化的用户触摸。
在触摸传感器的实现中,触摸传感器可以包括用于可区分地识别弱触摸压力和强触摸压力的一个触摸传感器,或者包括用于识别弱触摸压力的第一触摸传感器和用于识别强触摸压力的第二触摸传感器。
控制器280可以根据通过第一触摸传感器或者第二触摸触感器识别的触摸来识别用户命令。例如,控制器280可以将与由第一触摸传感器识别的触摸相对应的用户命令识别为第一用户命令,并且将与由第二触摸传感器识别的触摸相对应的用户命令识别为第二用户命令。控制器280根据用户命令来控制移动终端200。
音频输出模块252可以在呼叫信号模式、通信模式、记录模式、语音识别模式、广播接收模式等下输出从无线通信单元210接收到的或者存储在存储器260中的音频数据。音频输出模块252可以输出与由移动终端200执行的功能(例如,呼叫信号接收声音、消息接收声音等)相关联的声音信号。这样的音频输出模块252可以包括接收器、扬声器、蜂鸣器等。
报警单元253输出向用户通知在移动终端200中已经发生事件的信号。在移动终端200中发生的事件的示例包括呼叫信号接收、消息接收、键信号输入、触摸输入等。报警单元253可以以除了视频信号或者音频信号之外的形式(例如,通过振动)输出向用户通知事件已经发生的信号。视频信号或者音频信号可以通过显示器251或者音频输出模块252输出,并且显示器251和音频输出模块252可以用作报警单元253的部分。
触觉模块254生成用户能够感觉到的各种触觉效果。由触觉模块254生成的触觉效果的典型示例是振动。可以控制由触觉模块254生成的振动的强度和模式。例如,不同的振动可以被合成和输出,或者可以被顺序输出。
存储器260可以存储用于控制器280的处理和控制的程序,并且可以临时存储输入或者输出数据(例如,电话簿、消息、音频、静止图像以及运动图像)。存储器260可以存储关于振动的数据以及在触摸屏的触摸输入之后输出的各种模式的声音。
接口270包括外部通信单元271和用户输入单元272,并且用作与连接到移动终端200的所有外部设备的接口。
外部设备通信单元271可以从连接到移动终端200的所有外部设备接收数据或者将移动终端200的数据传送到外部设备。
用户输入单元272可以生成用于使得用户能够控制移动终端200的操作的输入数据。用户输入单元272可以包括小键盘、薄膜开关、转向轮、转动开关等。用户输入单元272可以包括上述触摸板(静压/静电)。
控制器280控制移动终端200的整个操作。例如,控制器280执行与语音通信、数据通信、视频通信等相关联的控制和处理。
电源290接收外部电力或者内部电力,并且在控制器280的控制下将针对操作所请求的电力供应到每个组件。
可以通过例如硬件、固件、软件或其组合的各种手段在计算机或者计算机类的装置可读的记录介质中实现在此描述的各种实施例。在硬件配置中,可以通过一个或者多个专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理装置(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器以及用于执行功能的其它电子单元来实现本发明的实施例。在一些情况下,可以在控制器180中实现本发明的实施例。在软件配置中,以执行在此描述的一个或者多个功能和操作的软件模式的形式来实现根据本发明的实施例的过程和功能。软件代码可以通过以适当的编程语言编写、存储在存储器260中并且通过控制器180执行的软件应用来实现。
在下文中,将描述使用图像显示装置100和移动终端200的用户接口提供方法。
首先,图4至图7是图示根据本发明的第一实施例的用户接口提供方法的图。具体地,图4至图6示出了用于在三个移动终端201、202和203连接到图像显示装置100时经由移动终端100输出三个移动终端201、202和203的三个屏幕101、102和103的多镜像服务。
即,三个移动终端201、202和203将其各自的屏幕信息传送到图像显示装置100,并且图像显示装置100在显示器170上处理和输出三个移动终端201、202和203的屏幕信息。
如在附图中所示,图像显示装置100输出第一移动终端201的屏幕作为第一屏幕101、输出第二移动终端202的屏幕作为第二屏幕102并且输出第三移动终端203的屏幕作为第三屏幕103。
图4还示出了三个移动终端201、202和203通过诸如以太网、通用串行总线(USB)或者移动高清(MHL)的有线技术连接到图像显示装置100。图5示出了三个移动终端201、202和203通过诸如Wi-Fi或者WiDi的无线技术连接到图像显示装置100。图6示出了三个移动终端201、202和203通过诸如USB、MHL或者WiDi的有线或者无线技术连接到图像显示装置100。
因此,可以使用各种连接方法将移动终端200连接到图像显示装置100,以将其屏幕信息传送到图像显示装置100。图像显示装置100在显示器170上输出接收到的屏幕信息。
图7示出了用于在三个移动终端201、202和203连接到图像显示装置100时经由图像显示装置100输出三个移动终端201、202和203的三个屏幕101、102以及103以及图像显示装置100的图像104的多镜像服务。
如在图7中所示,图像显示装置100输出第一移动终端201的屏幕作为第一屏幕101,输出第二移动终端202的屏幕作为第二屏幕102,输出第三移动终端203的屏幕作为第三屏幕103,并且输出图像显示装置100的图像作为第四屏幕104。
如上所述,可以通过在图像显示装置100和移动终端200之间的数据通信向移动终端200传送对图像显示装置100输入的用户命令。即,如果用户将用户命令键入到用于输出移动终端200的屏幕的图像显示装置100,则图像显示装置100将接收到的用户命令传送到移动终端200,并且移动终端200根据接收到的用户命令来执行移动终端200的操作。
如在附图中所示,如果若干移动终端200连接到图像显示装置100,则用户能够使用用户输入单元155经由在图像显示装置100上输出的移动终端200的屏幕来控制移动终端200。
即,如果用户将用户命令键入到要使用遥控器155控制的移动终端200的屏幕,则图像显示装置100将与接收到的用户命令相对应的数据传送到移动终端200。
因此,用户可以经由第一屏幕101控制第一移动终端201,经由第二屏幕102控制第二移动终端202,经由第三屏幕103控制第三移动终端203,并且经由第四屏幕104控制图像显示装置100。
因此,图像显示装置100确定用户在哪个屏幕上键入用户命令或者用户控制哪个移动终端。即,图像显示装置100确定期望由用户控制的目标移动终端200。图像显示装置100将接收到的用户命令传送到用户要控制的目标移动终端200。
稍后将参考图11至图13来详细地描述确定目标移动终端200的方法。
接下来,图8至图10是图示根据本发明的实施例的用于提供多镜像服务的图像显示装置100的屏幕配置方法的图。
在上述多镜像服务中,经由图像显示装置100输出若干移动终端200的屏幕。因此,图像显示装置100布置移动终端200的屏幕,使得用户直观地观看移动终端200的屏幕。在下文中,将描述布置移动终端200的屏幕的方法。
首先,图像显示装置100能够根据预定的情景来布置移动终端200的屏幕。即,如果两个移动终端200连接到图像显示装置100,则图像显示装置100的屏幕可以被分成右屏幕和左屏幕,可以在左屏幕上输出第一移动终端201的屏幕101,并且可以在右屏幕上输出第二移动终端202的屏幕102。
如果新的第三移动终端203进一步连接到图像显示装置100,则图像显示装置100可以以画中画(PiP)格式输出第三移动终端203的屏幕103。
如果新的第四移动终端进一步连接到图像显示装置100,则图像显示装置100的屏幕被四等分以输出移动终端200的屏幕。
图像显示装置100可以根据预定的情景来布置连接到图像显示装置100的移动终端200的屏幕。
图像显示装置100还能够接收用户命令,并且改变移动终端200的屏幕的布置。即,本发明提供了用于改变移动终端200的屏幕的位置和大小的用户接口。
因此,图像显示装置100接收与移动终端200的屏幕中的改变相对应的用户命令,并且根据接收到的用户命令来改变移动终端200的屏幕。
具体地,图8至图10示出了通过向图像显示装置100键入命令来改变移动终端200的屏幕的布置的示例。
图8示出了用户改变移动终端200的屏幕的位置。在主屏幕上输出第一移动终端201的屏幕101,并且在子屏幕上输出其它的屏幕102、103和104。
此时,当用户将用于拖放第二屏幕102的用户命令键入到第一屏幕101时,图像显示装置100在主屏幕上输出第二屏幕102并且在第二屏幕102的位置处输出第一屏幕101。即,图像显示装置100改变第一屏幕101和第二屏幕102的位置。
除了拖放方法之外,可以使用诸如屏幕的选择、改变屏幕的位置的各种方法来输入用户命令。
图9示出了用户改变移动终端200的屏幕的大小。在图像显示装置100上输出第一至第四屏幕101至104。
此时,当用户键入用于改变第一屏幕的大小的用户命令时,图像显示装置100根据用户命令来改变第一屏幕的大小。
图像显示装置100根据用户命令来改变移动终端200的屏幕。然而,本发明的图像显示装置100也能够当在移动终端200中已经发生事件时改变移动终端200的屏幕的布置。
具体地,图10示出了图像显示装置100改变移动终端200的屏幕的布置以便于向用户通知在移动终端200中已经发生事件。
在图10中,在第三移动终端203中已经发生事件。因此,图像显示装置100在屏幕的最前侧处布置与第三移动终端203相对应的第三屏幕103并且突出显示第三屏幕103,以便于向用户通知已经发生事件。
因此,用户可以感知在第三移动终端203中已经发生事件并且容易地经由第三屏幕103控制第三移动终端203。
图像显示装置100确定对其输入用户命令的屏幕,即,用户要控制的目标移动终端200的屏幕。这是因为图像显示装置100应当将接收到的用户命令发送到用户要控制的目标移动终端200。
接下来,图11至图13是图示本发明的多UIBC服务提供方法的第一实施例的图。
在本发明的多UIBC服务提供方法的第一实施例中,提供了使用屏幕的位置信息和在图像显示装置100处的光标的位置信息来有效地确定用户要控制的目标移动终端200的方法。
图11示出了两个移动终端200连接到图像显示装置100,在第一屏幕101上输出第一移动终端201,并且在第二屏幕102上输出第二移动终端202。
图像显示装置100生成第一屏幕101的边界坐标信息和第二屏幕102的边界坐标信息。边界坐标信息是屏幕的位置和大小信息。边界坐标信息可以由屏幕的边界点的坐标或者屏幕的原点的坐标和屏幕的宽度/长度信息组成。
如果用户为了控制移动终端200而使用无线遥控器155来指向图像显示装置100,则图像显示装置100在由无线遥控器155指向的点处输出作为指南图像156的光标。图像显示装置100生成在通过无线遥控器155指向的点处输出的光标156的坐标信息。
图像显示装置100将第一屏幕101和第二屏幕102的边界坐标信息与光标156的坐标信息作比较,并且确定用户要指向的哪个屏幕。
在图11中,用户将光标156从第二屏幕102移动到第一屏幕101。如果光标156位于第二屏幕上,则图像显示装置100可以确定用户要控制的移动终端200是第二移动终端200,并且如果光标156位于第一屏幕上,则图像显示装置100可以确定用户要控制的移动终端200是第一移动终端201。
即,图像显示装置100将移动终端200的边界坐标信息与无线遥控器155的光标156的坐标信息作比较,确定光标156所位于的屏幕,并且将与确定的屏幕相对应的移动终端200确定为用户要控制的目标移动终端200。
因此,图像显示装置100控制接口150以建立通信,以便于将数据传送到确定为目标移动终端200的移动终端200并且从确定为目标移动终端200的移动终端200接收数据。
图12示出了三个移动终端200连接到图像显示装置100,在第一屏幕101上输出第一移动终端201,在第二屏幕102上输出第二移动终端202,并且在第三屏幕103上输出第三移动终端203。
图像显示装置100生成第一屏幕101的边界坐标信息、第二屏幕102的边界坐标信息以及第三屏幕103的边界坐标信息。边界坐标信息是屏幕的位置和大小信息。边界坐标信息可以由屏幕的边界点的坐标或者屏幕的原点的坐标以及屏幕的宽度/长度信息组成。
如果用户为了控制移动终端200而使用无线遥控器155指向图像显示装置100,则图像显示装置100在由无线遥控器155指向的点处输出作为指南图像156的光标。图像显示装置100生成在由无线遥控器155指向的点处输出的光标156的坐标信息。
图像显示装置100将第一屏幕101、第二屏幕102以及第三屏幕103的边界坐标信息与光标156的坐标信息作比较,并且确定用户要指向哪个屏幕。
图12示出了用户将光标156从第三屏幕103移动到第二屏幕102。如果光标156位于第三屏幕103上,则图像显示装置100可以确定用户要控制的移动终端200是第三移动终端203,并且如果光标156位于第二屏幕上,则图像显示装置100可以确定用户要控制的移动终端200是第二移动终端202。
即,图像显示装置100将移动终端200的边界坐标信息与无线遥控器155的光标156的坐标信息作比较,确定光标156所位于的屏幕,并且将与确定的屏幕相对应的移动终端200确定为用户要控制的目标移动终端200。
图13示出了四个移动终端200连接到图像显示装置100,在第一屏幕101上输出第一移动终端201,在第二屏幕102上输出第二移动终端202,在第三屏幕103上输出第三移动终端203,并且在第四屏幕104上输出第四移动终端204。图像显示装置100生成第一屏幕101至第四屏幕104的边界坐标信息。
图13示出了用户将光标156从第四屏幕104移动到第一屏幕101。如上所述,如果光标156位于第四屏幕上,则图像显示装置100可以将用户要控制的移动终端200确定为第四移动终端204,并且如果光标156位于第一屏幕上,则图像显示装置100可以将用户控制的移动终端200确定为第一移动终端201。
图像显示装置100将移动终端200的边界坐标信息与无线遥控器155的光标156的坐标信息作比较,确定光标156所位于的屏幕,并且将与所确定的屏幕相对应的移动终端200确定为用户要控制的目标移动终端200。
图14至图15是图示本发明的多UIBC服务提供方法的第二实施例的图。
在本发明的多UIBC服务提供方法的第二实施例中,图像显示装置100快速建立与改变的目标移动终端200的通信。
具体地,图14示出了两个移动终端200连接到图像显示装置100,在第一屏幕101上输出第一移动终端102并且在第二屏幕102上输出第二移动终端202。
如上所述,图像显示装置100生成第一屏幕101的边界坐标信息和第二屏幕102的边界坐标信息。边界坐标信息是屏幕的位置和大小信息。边界坐标信息可以由屏幕的边界点的坐标或者屏幕的原点的坐标和屏幕的宽度/长度信息组成。
图像显示装置100可以生成关于第一屏幕101和第二屏幕102的相邻屏幕的信息。例如,可以设置相邻的屏幕连接区域301和302,或者可以生成相邻的屏幕的标识。相邻的屏幕连接区域301和302是从与相邻屏幕的边界延伸的区域。图像显示装置100生成相邻屏幕连接区域的坐标信息以及相邻屏幕的标识。
与图14不同,如在图15中所示,本发明可应用于分成三个屏幕区域的屏幕。如在图15中所示,第三屏幕103仅与第二屏幕102相邻,并且不与第一屏幕101相邻。因此,在第三屏幕103和第一屏幕102之间不需要生成相邻屏幕的标识。
第一相邻屏幕连接区域301被设置在第一屏幕101上,并且与从与第一屏幕101相邻的第二屏幕102的边界开始的预定区域相对应。第一相邻屏幕连接区域301包括关于作为第一屏幕101的相邻屏幕的第二屏幕102的信息。
第二相邻屏幕连接区域302被设置在第二屏幕102上,并且与从与第二屏幕102相邻的第一屏幕101的边界开始的预定区域。第二相邻屏幕连接区域302包括关于与第二屏幕102相邻的第一屏幕101的信息。
如在图14中所示,如果用户为了改变目标移动终端200而将无线遥控器155从第二屏幕102移动到第一屏幕101,则光标首先通过第二相邻屏幕连接区域302从第二屏幕102移动到第一屏幕101。
此时,图像显示装置100确定光标是否位于相邻屏幕连接区域301和302中。如果光标位于相邻屏幕连接区域301和302中,则图像显示装置100建立与相邻屏幕连接区域301和302相对应的移动终端200的通信。
更详细地,如在图14中所示,如果用户为了将目标移动终端200改变为第一移动终端201而将无线遥控器155从第二屏幕102移向第一屏幕101,则光标156首先通过第二相邻屏幕连接区域302。
因此,当光标156位于第二相邻屏幕连接区域302时,图像显示装置100准备向与第二屏幕102相邻的第一屏幕101提供UIBC服务。即,当光标156首先移动到包括在第二屏幕102中的第二连接区域302时,图像显示装置100建立与第一屏幕101相对应的第一移动终端201的数据通信。
图14中的第二屏幕102与第二移动终端102相对应。然而,第二屏幕102可以是由显示装置100本身显示的屏幕(例如,广播节目)。
如果用户改变目标移动终端200,则能够快速地建立与改变的目标移动终端200的通信,并且将UIBC服务有效地提供给用户。
在图14中,光标156可以通过第二相邻屏幕连接区域302,并且位于第一相邻屏幕连接区域301中。在该实例中,图像显示装置100可以忽略事先位于第一相邻屏幕连接区域301中的光标156。
图15示出了三个移动终端200连接到图像显示装置100,在第一屏幕101上输出第一移动终端201,在第二屏幕102上输出第二移动终端202,并且在第三屏幕103上输出第三移动终端203。
如上所述,图像显示装置100生成第一屏幕101、第二屏幕102以及第三屏幕103的边界坐标信息,并且设置第一屏幕101、第二屏幕102以及第三屏幕103的相邻屏幕连接区域301、302和303。
相邻屏幕连接区域301、302和303是从相邻屏幕的边界延伸的预定区域,并且包括区域的坐标信息,以及关于相邻屏幕的信息。
第一相邻屏幕连接区域301被设置在第一屏幕101上,并且与从和与第一屏幕101相邻的第二屏幕102的边界延伸的预定区域相对应。第一相邻屏幕连接区域301包括关于作为第一屏幕的相邻屏幕的第二屏幕102的信息。
第二相邻屏幕连接区域302被设置在第二屏幕102上,并且与从与第二屏幕102相邻的第一屏幕101的边界延伸的预定区域相对应。第二相邻屏幕连接区域302包括关于作为第二屏幕的相邻屏幕的第一屏幕101的信息。
第三相邻屏幕连接区域303被设置在第三屏幕103中的第三屏幕上,并且与从与第三屏幕103相邻的第二屏幕102的边界延伸的预定区域相对应。第三相邻屏幕连接区域303包括关于作为第三屏幕103的相邻屏幕的第二屏幕102的信息。
如在图15中所示,如果用户为了改变目标移动终端200而将无线遥控器155从第三屏幕103移动到第二屏幕102,则光标通过第三相邻连接区域303从第三屏幕103移动到第二屏幕102。
此时,图像显示装置100确定光标是否位于相邻屏幕连接区域301、302和303中,并且如果光标位于相邻屏幕连接区域301、302和330中,则建立与对应于相邻屏幕连接区域301、302和303的移动终端200的通信。
在图15中,如果用户为了将目标移动终端200改变为第二移动终端202而将无线遥控器155从第三屏幕103移动到第二屏幕102,则光标156通过第三相邻屏幕连接区域303。
如果光标156位于第三相邻屏幕连接区域303,则图像显示装置100准备提供用于与第三屏幕103相邻的第二屏幕102的UIBC服务。即,图像显示装置100建立与对应于第二屏幕102的第二移动终端202的数据通信。
接下来,图16是图示根据本发明的第一实施例的用户接口提供方法的流程图。
根据本发明的第一实施例的用户接口提供方法包括:确定图像显示装置100是否提供多镜像服务(S100),生成并且存储多屏幕的边界坐标信息(S200),设置多屏幕的各个相邻屏幕连接区域300(S300),读取图像显示装置100的光标156的坐标(S400),确定光标156的坐标是否与相邻屏幕连接区域300相对应(S500),建立与对应于相邻屏幕的移动终端200的数据通信(S600),将光标156的坐标与边界坐标信息作比较以确定在哪个屏幕上执行UIBC操作(S700),以及执行与对应于确定的屏幕的移动终端200的UIBC操作(S800)。
首先,图像显示装置100确定是否提供多镜像服务(S100)。
如上所述,多镜像服务指示若干移动终端200连接到一个图像显示装置100以经由图像显示装置100同时输出移动终端200的屏幕。本发明的用户接口方法提供多UIBC服务,该多UIBC服务被配置成,如果提供了这样的多镜像服务,则允许用户经由图像显示装置100控制若干移动终端201和202。
图像显示装置100存储多屏幕的边界坐标信息(S200)。边界坐标信息可以由屏幕的边界点的坐标或者屏幕的原点的坐标和屏幕的宽度/长度信息组成。
图像显示装置100设置多个屏幕的相邻屏幕连接区域300(S300)。相邻屏幕连接区域301和302是从与相邻屏幕的边界延伸的区域,并且包括相应的区域的坐标信息和关于相邻屏幕的信息。
图像显示装置100读取图像显示装置100的光标156的坐标(S400)。
如果用户为了控制移动终端200而使用无线遥控器155来指向图像显示装置100,则图像显示装置100在由无线遥控器155指向的点处输出作为指南信息156的光标。图像显示装置100生成并且读取在由无线遥控器155指向的点处输出的光标的坐标信息。
图像显示装置100确定光标156的坐标是否与相邻屏幕连接区域300相对应(S500)。如果光标156位于相邻屏幕连接区域301和302中,则图像显示装置100建立与对应于相邻屏幕的移动终端200的通信,以便于执行相邻屏幕的UIBC(S600)。
图像显示装置100将光标156的坐标与边界坐标信息作比较,以确定在哪个屏幕上执行UIBC操作(S700)。
即,图像显示装置100将每个屏幕的边界坐标信息与光标156的坐标信息作比较,确定光标所位于的屏幕,并且将与所确定的屏幕相对应的移动终端200确定为用户要控制的目标移动终端200。
最后,图像显示装置100执行与对应于所确定的屏幕的移动终端200的UIBC操作(S800)。
此后,将描述用于在共享图像显示装置100和移动终端200的屏幕时允许用户有效地控制共享的屏幕的用户接口提供方法。
图17和图18是图示根据本发明的第二实施例的用户接口提供方法的流程图。
首先,参考图17,移动终端200确定是否输入了用户触摸(S101)。移动终端200的控制器280确定用户触摸是否被输入到触摸传感器。
如果用户触摸没有被输入到触摸传感器,则控制器280捕获当前屏幕并且生成移动终端200的屏幕信息(S106)。控制器280经由外部设备通信单元271将生成的屏幕信息传送到图像显示装置100(S107)。
如果用户触摸被输入到触摸传感器,则控制器280确定第一用户触摸是否被输入到触摸传感器(S102)。即,控制器280确定输入到触摸传感器的用户触摸是否是第一用户触摸。
如上所述,触摸传感器可以可区分地感测接收到的用户触摸作为第一用户触摸或者第二用户触摸。触摸传感器包括用于感测第一用户触摸的第一触摸传感器和用于感测第二用户触摸的第二触摸传感器。
在本发明中,用户触摸可以根据各种准则而被划分为第一用户触摸和第二用户触摸。即,触摸传感器可以根据不同的准则来可区分地感测第一用户触摸和第二用户触摸。
例如,触摸传感器可以将小区域的触摸识别为第一用户触摸,并且将大区域的触摸识别为第二用户触摸。触摸传感器可以将短时间段的触摸识别为第一用户触摸,并且将长时间段的触摸识别为第二用户触摸。触摸传感器可以将弱压力的触摸识别为第一用户触摸,并且将强压力的触摸识别为第二用户触摸。触摸传感器可以将特定手势的触摸识别为第一用户触摸并且将此后的触摸识别为第二用户触摸。
此时,控制器280将第一用户触摸识别为第一用户命令,并且将第二用户触摸识别为第二用户命令,并且根据用户命令来控制移动终端200。
在本说明书中,假定第一用户触摸是弱压力的触摸并且第二用户触摸是强压力的触摸。
因此,控制器280确定是否使用第一触摸传感器来输入第一用户触摸。即,控制器280确定是否使用第一触摸传感器来输入作为弱压力的触摸的第一用户触摸。
如果第一用户触摸被输入到触摸传感器,则控制器280控制输出单元250以在输入第一用户触摸的屏幕区域中输出指南图像156(S103)。
指南图像156指示其中感测到第一用户触摸的屏幕区域并且可以以指针、图标等形式输出。在本说明书中,例如,控制器280输出指针图像作为指南图像156。
因此,如果用户在屏幕的特定区域中输入第一用户触摸,则控制器280在输入第一用户触摸的屏幕区域中输出指南图像156。
如果第一用户触摸没有被输入到触摸传感器,则控制器280确定第二用户触摸是否被输入到触摸传感器(S104)。即,控制器280确定是否使用第二触摸传感器来输入作为强压力的用户触摸的第二用户触摸。
如果第二用户触摸被输入到触摸传感器,则控制器280执行与第二用户触摸相对应的用户命令(S105)。即,控制器280分析与第二用户命令相对应的用户命令,并且根据用户命令来控制移动终端200。
最后,控制器280捕获当前屏幕,并且生成移动终端200的屏幕信息(S106)。控制器280经由外部设备通信单元271将生成的屏幕信息传送到图像显示装置100(S107)。
图18是图示根据本发明的另一实施例的使用移动终端200和图像显示装置100的用户接口提供方法的流程图。
首先,控制器280确定移动终端200是否连接到图像显示装置100已进行数据通信,以便于提供用于将移动终端200的屏幕传送到图像显示装置100的镜像服务(S201)。
如果提供了镜像服务,则控制器280设置与通过移动终端200执行的功能相对应的语音命令集(S202)。例如,如果在移动终端200上执行运动图像导航,则控制器280可以事先设置与运动图像导航功能相对应的“倒回”、“快速前进”、“播放”以及“停止”的语音命令集。另外,如果在移动终端200上实现因特网浏览器,则控制器280可以事先设置与因特网浏览器的功能相对应的“选择”、“点击”以及“后退”的语音命令集,使得控制器280仅识别预定的语音命令以快速地执行功能。
控制器280确定是否接收到预定的语音命令(S203)。控制器280可以键入语音识别模式,以便于识别预定的语音命令。控制器280可以经由输出单元250输出与语音待机模式相对应的屏幕,以便于向用户通知语音待机模式的进入。
如果接收到语音命令,则控制器280执行与接收到的音乐命令相对应的功能(S204)。控制器280分析与接收到的语音命令相对应的用户命令并且执行该用户命令。
如果还没有接收到的语音命令,则控制器280执行参考图4描述的用户接口提供方法(S101至S107)。即,如果用户在屏幕的特定区域中输入第一用户触摸,则控制器280在其中输入第一用户触摸的屏幕区域中输出指南图像156。如果用户输入第二用户触摸,则控制器280执行与第二用户触摸相对应的用户命令。
可以使用各种实施例来实现用户接口提供方法。在下文中,将描述根据本发明的各种实施例的用户接口。
接下来,图19至图23是图示用于控制本发明的图像显示装置100的屏幕的用户接口提供方法的第一实施例的图。
图19示出了根据用于控制本发明的图像显示装置100的屏幕的用户接口提供方法的第一实施例的用户接口环境。
移动终端200通过数据通信将移动终端200的屏幕信息传送到图像显示装置100。图像显示装置100向用户输出接收到的移动终端200的屏幕信息。
即,图像显示装置100接收并且输出移动终端200的屏幕信息,使得图像显示装置100和移动终端200输出相同的屏幕。因此,用户可以从移动终端200和图像显示装置100接收移动终端200的屏幕。
在图19中,将作为移动终端200的屏幕的应用图标屏幕传送到图像显示装置100并且在图像显示装置100上同等地输出。
图20示出了用户将第一用户触摸输入到移动终端200,并且图21示出了在第一用户触摸输入到移动终端200时的图像显示装置100的屏幕。
在图20中,用户在移动终端200的一个右下区域中输入第一用户触摸。然后,用户将第一用户触摸拖动到其中显示应用图标“网络(web)”的区域。即,用户在移动终端200的一个右下区域中输入弱压力的触摸,并且然后将第一用户触摸拖动到其中显示应用图标“网络”的区域。
这时,移动终端200的控制器280控制输出单元250,并且在其中输入第一用户触摸的屏幕区域中输出指南图像156。
如上所述,指南图像156指示其中感测第一用户触摸的屏幕区域。在图21中,控制器280输出指针作为指南图像156。因此,如果用户在屏幕的一个区域中输入第一用户触摸,则控制器280在其中输入第一用户触摸的屏幕区域中输出指针。
如在图20中所示,如果用户在移动终端200的右下区域中输入第一用户触摸,并且然后将第一用户触摸拖动到其中显示应用图标“网络”的区域,则控制器280根据其中输入第一用户触摸的区域输出指南图像156。
控制器280捕获移动终端200的当前屏幕,生成移动终端200的屏幕信息,并且经由外部设备通信单元271将生成的屏幕信息传送到图像显示装置100。传送的移动终端200的屏幕信息是关于在其上进一步显示根据第一用户触摸的指南图像156的屏幕的信息。
图像显示装置100在显示器170上输出移动终端200的屏幕信息。
图21示出了传送到图像显示装置100的移动终端200的屏幕信息的输出,其中进一步显示根据第一用户触摸的指南图像156。即,在从其中输入第一用户触摸的右下区域移动到其中显示应用图标“网络”的区域的同时,输出作为指南图像156的指针。
图22示出了用户将第二用户触摸输入到移动终端200,并且图23示出了在第二用户触摸被输入到移动终端200时的图像显示装置100的屏幕。
在图22中,用户在移动终端200的其中显示应用图标“网络”的区域中输入第二用户触摸。即,用户在其中显示应用图标“网络”的区域中输入强压力的触摸。
此时,移动终端200的控制器280执行与第二用户触摸相对应的用户命令。即,控制器280分析与第二用户触摸相对应的用户命令,并且根据用户命令来控制移动终端200。
因此,控制器280分析与作为应用“网络”的执行的第二用户触摸相对应的用户命令,并且由此执行应用“网络”。
控制器280捕获移动终端200的当前屏幕,生成移动终端200的屏幕信息,并且经由外部装置通信单元271将生成的屏幕信息传送到图像显示装置100。所传送的移动终端200的屏幕信息是关于其上执行应用“网络”的屏幕的信息。
图像显示装置100在显示器170上输出移动终端200的屏幕信息。
图23示出了其中执行应用“网络”的传送到图像显示装置100的移动终端的屏幕信息的输出。即,输出根据第二用户触摸执行的应用“网络”的屏幕。
在使用移动终端200在图像显示装置100上输出的屏幕的控制中,用户可以在将他们的眼睛固定在图像显示装置100上的状态下操纵移动终端200,从而提高用户便利性。即,能够解决用户应当在交替地观看移动终端200和图像显示装置100的同时操纵移动终端200的用户不便。
在屏幕上显示与用户命令相对应的指南图像156中,用于计算用户命令的输入位置的复杂协议不需要被安装在装置之间,并且由此用户接口的复杂性能够被显著地减少。
接下来,图24至图28是图示用于控制本发明的图像显示装置100的屏幕的用户接口提供方法的第二实施例的图。
图24示出了根据用于控制本发明的图像显示装置100的屏幕的用户接口提供方法的第二实施例的用户接口环境。
移动终端200通过数据通信将移动终端200的屏幕信息传送到图像显示装置100。图像显示装置100向用户输出移动终端200的屏幕信息。
即,图像显示装置100接收并且输出移动终端200的屏幕信息,使得图像显示装置100和移动终端200输出相同的屏幕。因此,用户可以从移动终端200和图像显示装置100接收移动终端200的屏幕。
在图24中,作为移动终端200的屏幕的运动图像屏幕被传送到图像显示装置100,并且在图像显示装置100上同等地输出。
图25示出了用户将第一用户触摸输入到移动终端200,并且图26示出了在第一用户触摸被输入到移动终端200时的图像显示装置100的屏幕。
在图25中,用户在移动终端200的一个右下区域中输入第一用户触摸。然后,用户将第一用户触摸拖动到“倒回”菜单区域。即,用户在移动终端200的右下区域中输入弱压力的触摸,并且然后将第一用户触摸拖动到“倒回”菜单区域。
如果第一用户触摸被输入到移动终端200,则移动终端200的控制器280执行与第一用户触摸相对应的用户命令。即,控制器280可以分析与第二用户触摸相对应的用户命令,并且根据用户命令来控制移动终端200。
如果在如在图25中所示的移动终端200上回放运动图像时第一用户触摸被输入到移动终端200,控制器280可以将第一用户触摸识别为用于执行运动图像导航的用户命令。控制器280执行与第一用户触摸相对应的用户命令,并且控制输出单元250以输出运动图像导航屏幕。
控制器280控制输出单元250以在其中输入第一用户触摸的屏幕区域中输出指南图像156。如在图25中所示,如果用户在屏幕的一个区域中输入第一用户触摸,则控制器280在其中输入第一用户触摸的屏幕区域中输出指针300。
如在图25中所示,如果用户在移动终端200的一个右下区域中输入第一用户触摸并且然后将第一用户触摸拖动到“倒回”菜单区域,控制器280沿着其中输入第一用户触摸的区域输出指南图像156。
控制器280捕获移动终端200的当前屏幕,生成移动终端200的屏幕信息,并且经由外部装置通信单元271将生成的屏幕信息传送到图像显示装置100。
例如,如果经由Wi-Fi连接移动终端200和图像显示装置100,则控制器280经由Wi-Fi数据通信将移动终端200的屏幕信息传送到图像显示装置100。然后,控制器280编码移动终端200的屏幕信息,并且将编码的屏幕信息传送到图像显示装置100。图像显示装置100对接收到的屏幕信息进行解码,并且输出解码的屏幕信息。
移动终端200的屏幕信息是关于在其上执行与第一用户触摸相对应的用户命令的屏幕的信息,并且进一步显示根据第一用户触摸的指南图像156。
图像显示装置100在显示器170上输出移动终端200的屏幕信息。
图26示出了传送到图像显示装置100的移动终端200的屏幕信息的输出,其中输出运动图像导航屏幕并且进一步显示根据第一用户触摸的指南图像156。在从其中输入第一用户触摸的屏幕的右下区域移动到“倒回”菜单区域的同时,输出作为指南图像156的指针。
图27示出了用户将第二用户触摸输入到移动终端200,并且图28示出了在第二用户触摸被输入到移动终端200时的图像显示装置100的屏幕。
在图27中,用户在移动终端200的“倒回”菜单区域中输入第二用户触摸。即,用户在“倒回”菜单区域中输入强压力的触摸。
此时,移动终端200的控制器280执行与第二用户触摸相对应的用户命令。即,控制器280可以分析与第二用户触摸相对应的用户命令,并且根据用户命令来控制移动终端200。
因此,控制器280根据与第二用户触摸相对应的用户命令来执行“倒回”菜单。控制器280捕获移动终端200的当前屏幕,生成移动终端200的屏幕信息,并且经由外部装置通信单元271将生成的屏幕信息传送到图像显示装置100。所传送的屏幕信息是关于在其上执行运动图像的“倒回”菜单的屏幕的信息。
图像显示装置100在显示器170上输出移动终端200的屏幕信息。
图28示出了其中执行“倒回”菜单的传送到图像显示装置100的移动终端200的屏幕信息的输出。即,输出在其上根据第二用户触摸执行“倒回”菜单的屏幕。
接下来,图29至图33是图示用于控制本发明的图像显示装置的屏幕的用户接口提供方法的第三实施例的图。
图29示出了根据用于控制本发明的图像显示装置100的屏幕的用户接口提供方法的第三实施例的用户接口环境。
移动终端200通过数据通信来将移动终端200的屏幕信息传送到图像显示装置100。图像显示装置100向用户输出移动终端200的屏幕信息。
即,图像显示装置100接收和输出移动终端100的屏幕信息,使得图像显示装置100和移动终端200输出相同的屏幕。因此,用户可以从移动终端200和图像显示装置100接收移动终端200的屏幕。
在图29中,在执行移动图像的同时,在移动终端200的屏幕上输出文本消息屏幕。移动终端200的屏幕被传送到图像显示装置100,并且在图像显示装置100上同等地输出。
虽然在图29中等同地输出移动终端200的屏幕和图像显示装置100的屏幕,但是可以根据情况而输出不同的屏幕。移动终端200确定屏幕信息是否被传送到图像显示装置100,即,是否提供镜像服务,如果提供镜像服务,则将移动终端200的屏幕信息转换成适合连接的图像显示装置100的格式,并且传送所转换的屏幕信息。
例如,如在图29中所示,如果在实现运动图像的同时接收到文本消息,则移动终端200可以在移动终端200的屏幕上输出文本消息的内容。然而,如在图29中所示,可以将消息确认屏幕传送到图像显示装置100。
图30示出了用户将第一用户触摸输入到移动终端200,并且图31示出了在将第一用户触摸输入到移动终端200时的图像显示装置100的屏幕。
在图30中,用户在移动终端200的一个右下区域中输入第一用户触摸。然后,用户将第一用户触摸拖动到“是”菜单区域。即,用户在移动终端200的一个右下区域中输入弱压力的触摸,并且然后将触摸拖动到“是”菜单区域。
在该情况下,移动终端200的控制器280控制输出单元250以在其中输入第一用户触摸的屏幕区域中输出指南图像156。如在图30中所示,如果用户在屏幕的一个区域中输入第一用户触摸,则控制器280在其中输入第一用户触摸的屏幕区域中输出指针。
如在图30中所示,如果用户在移动终端200的一个右下区域中输入第一用户触摸,并且然后将第一用户触摸拖动到“是”菜单区域,则控制器280沿着其中第一用户触摸被输入的区域输出指南图像156。
然后,控制器280捕获移动终端200的当前屏幕,生成移动终端200的屏幕信息,并且经由外部装置通信单元271将所生成的屏幕信息传送到图像显示装置100。所传送的移动终端200的屏幕信息是进一步显示根据第一用户触摸的指南图像的屏幕的信息。
图像显示装置100经由显示器170输出移动终端200的屏幕信息。
图31示出了传送到图像显示装置100的移动终端的屏幕信息的输出,其中进一步显示根据第一用户触摸的指南图像156。即,在从其中第一用户触摸被输入的屏幕的右下区域移动到“是”菜单区域的同时,输出作为指南图像156的指针。
图32示出了用户将第二用户触摸输入到移动终端200,并且图33示出了在第二用户触摸被输入到移动终端200时的图像显示装置100的屏幕。
在图32中,用户在移动终端200的“是”菜单区域中输入第二用户触摸。即,用户在“是”菜单区域中输入强压力的触摸。
此时,移动终端200的控制器280执行与第二用户触摸相对应的用户命令。即,控制器280可以分析与第二用户触摸相对应的用户命令,并且根据用户命令来控制移动终端200。
因此,控制器280根据与第二用户触摸相对应的用户命令来执行“是”菜单。控制器280捕获移动终端200的当前屏幕,生成移动终端200的屏幕信息,并且经由外部装置通信单元271将生成的屏幕信息传送到图像显示装置100。所传送的屏幕信息是关于在其上执行运动图像的“是”菜单的屏幕的信息。
图像显示装置100在显示器170上输出移动终端200的屏幕信息。
图33示出了其中执行“是”菜单的传送到图像显示装置100的移动终端200的屏幕信息的输出。即,作为关于在其上执行根据第二用户触摸的“是”菜单的屏幕的信息,输出文本消息。
在第一至第三实施例中,适用于用户输入以便于控制经由图像显示装置100输出的移动终端100的屏幕信息。即,用户将触摸输入到移动终端200,以控制经由移动终端200和图像显示装置100输出的屏幕。
本发明能够提供用于使用除了现在描述的用户触摸之外的各种输入手段控制经由图像显示装置100输出的移动终端200的屏幕信息的用户接口。
图34是示出图示用于控制本发明的图像显示装置100的屏幕的用户接口提供方法的第四至第六实施例的用户接口环境的图。
移动终端200通过数据通信将移动终端200的屏幕信息传送到图像显示装置100。图像显示装置100向用户输出移动终端200的屏幕信息。
即,图像显示装置100接收和输出移动终端200的屏幕信息,使得图像显示装置100和移动终端200输出相同屏幕。因此,用户可以经由移动终端200和图像显示装置100接收移动终端200的屏幕。
在图34中,作为移动终端200的屏幕的运动图像屏幕被传送到图像显示装置100并且在图像显示装置100上等同地输出。
图35示出了用于控制本发明的图像显示装置100的屏幕的用户接口提供方法的第四实施例。在图35中,用户将语音“菜单”输入到移动终端200的用户输入单元272。
如果用户语音被输入到移动终端200,则移动终端200的控制器280执行与用户语音相对应的用户命令。即,控制器280分析与输入用户语音相对应的用户命令,并且根据用户命令来控制移动终端200。
如在图35中所示,如果将用户语音“菜单”输入到移动终端200,则控制器280可以将用户语音“菜单”识别为用于执行运动图像导航的用户命令。控制器280执行与用户语音相对应的用户命令。控制器280控制输出单元250以输出运动图像导航屏幕。
如果执行与用户语音相对应的用户命令,则控制器280键入语音识别命令,并且等待用户语音识别。例如,如在图35中所示,如果根据用户语音“菜单”执行运动图像导航,则控制器可以进入语音识别模式以识别用于控制导航的用户语音。这允许用户连续地语音控制移动终端200。控制器280可以通过输出单元250来输出与语音待机模式相对应的屏幕,以便于通知用户进入语音待机模式。
在进入语音待机模式之后,控制器280可以事先设置进行语音识别的语音命令集。例如,如果执行运动图像导航,则控制器280可以事先设置与运动图像导航功能相对应的“倒回”、“快速前进”、“播放”以及“停止”的语音命令集。此外,如果实现因特网浏览器,则控制器280可以事先设置与因特网浏览器的功能相对应的“选择”、“点击”以及“后退”的语音命令集,使得控制器280仅识别预定的语音命令。
控制器280捕获移动终端200的当前屏幕,生成移动终端200的屏幕信息,并且经由外部装置通信单元271将生成的屏幕信息传送到图像显示装置100。所传送的移动终端200的屏幕信息是关于在其上进一步显示根据用户的语音命令执行的运动图像导航的屏幕的信息。图像显示装置100经由显示器170输出移动终端200的屏幕信息。
图36示出了用于控制本发明的图像显示装置100的屏幕的用户接口提供方法的第五实施例。
在图36中,用户将预定的手势输入到移动终端200的用户输入单元272。虽然图36示出了其中用户使用触摸输入手势的情况,但是用户可以经由相机221使用运动来输入手势。
如果用户手势被输入到移动终端200,则移动终端200的控制器280执行与用户手势相对应的用户命令。即,控制器280分析与输入用户手势相对应的用户命令,并且根据用户命令来控制移动终端200。
如在图36中所示,如果“M”手势被输入到移动终端200,则控制器280可以将“M”手势识别用于执行运动图像导航的用户命令。控制器280执行与用户手势相对应的用户命令。控制器280控制输出250以输出运动图像导航屏幕。
控制器280捕获移动终端200的当前屏幕,生成移动终端200的屏幕信息,并且经由外部装置通信单元271将生成的屏幕信息传送到图像显示装置100。所传送的移动终端200的屏幕信息是关于在其上进一步显示根据用户的语音命令执行的运动图像导航的屏幕的信息。图像显示装置100经由显示器170输出移动终端200的屏幕图像。
图37是示出用于控制本发明的图像显示装置100的屏幕的用户接口提供方法的第六实施例的图。
在图37中,用户经由用户输入单元155将预定的手势输入到图像显示装置100。
如果用户手势被输入到图像显示装置100,则图像显示装置100的控制器180分析与输入用户手势相对应的用户命令并且生成用户命令数据。控制器180经由接口150将生成的用户命令传送到移动终端200。
移动终端200的控制器280根据接收到的用户命令数据来控制移动终端200。
如在图37中所示,如果举起手的手势被输入到图像显示装置100,则图像显示装置100的控制器180可以将该手势识别为用于执行运动图像导航的用户命令。控制器180生成与用户手势相对应的用户命令数据并且将其传送到移动终端200。
移动终端200的控制器280可以根据接收到的用户命令数据来控制输出单元250以输出运动图像导航屏幕。
控制器280捕获移动终端200的当前屏幕,生成移动终端200的屏幕信息,并且经由外部装置通信单元271将生成的屏幕信息传送到图像显示装置100。所传送的移动终端200的屏幕信息是关于在其上还显示根据用户的手势命令执行的导航图像导航的屏幕的信息。图像显示装置100经由显示器170输出移动终端200的屏幕图像。
根据上述用户接口,本发明能够提供用于控制图像显示装置100的屏幕的各种输入手段。因此,用户能够容易地控制在移动终端200和图像显示装置100之间共享的屏幕。
图38是示出用于控制本发明的图像显示装置100的屏幕的用户接口提供方法的第七实施例的图。
如上所述,移动终端200和图像显示装置100向用户输出相同的屏幕。因此,用户观看的移动终端200的屏幕和图像显示装置100的屏幕应当是相同的。
然而,用户在固定方向上观看图像显示装置100的屏幕,但是在可以根据使用形式而变化的方向上观看移动终端200的屏幕。
如在图38中所示,虽然用户在横向模式下观看图像显示装置100的屏幕,但是用户可以在纵向模式或者横向模式下观看移动终端200的屏幕。
即,如果移动终端200处于横向模式下,则用户在横向模式下观看移动终端200的屏幕,并且如果移动终端200处于纵向模式下,则用户在纵向模式下观看移动终端200的屏幕。
因此,本发明提供了下述用户接口以便于向用户等同地提供移动终端200的屏幕和图像显示装置100的屏幕。
图38(a)示出了处于纵向模式的移动终端200。在该实例中,移动终端200的控制器280设置屏幕信息中的左右页边(margin),并且将具有左右页边的屏幕信息传送到图像显示装置100。
如在图38中所示,移动终端200的控制器280可以处理黑白的屏幕信息的左右页边,使得纵向模式的屏幕适合横向模式的图像显示装置100的屏幕,并且将屏幕信息传送到图像显示装置100。
图像显示装置100经由显示器170输出具有左右页边的移动终端200的屏幕信息。
图38(b)示出了处于横向模式的移动终端200。因为移动终端的屏幕和图像显示装置100的屏幕位于相同的方向上,所以移动终端200的控制器280在不改变的情况下将屏幕信息传送到图像显示装置100。图像显示装置100经由显示器170输出移动终端200的屏幕信息。
如果图像显示装置100处于纵向模式并且移动终端200处于横向模式,则移动终端200的控制器280可以处理黑白的屏幕信息的上下页边,并且将具有上下页边的屏幕信息传送到图像显示装置100。
在本发明中,可以使用除了黑白处理方法之外的各种方法来处理页边。例如,移动终端200的控制器280可以将移动终端200的屏幕信息自动地改变成纵向或者横向模式并且可以设置页边。控制器280可以将移动终端200的屏幕信息自动地改变成图像显示装置100的屏幕相对布置方向以去除页边。
控制器280可以输出页边中的移动终端200的隐藏屏幕以填充页边。即,控制器280可以输出用于显示被执行但是没有输出的功能的屏幕,诸如页边中的墙纸的窗口小部件、时钟、消息等。
即,移动终端200的控制器280可以将图像显示装置100和移动终端200的屏幕相对布置方向进行比较,并且确定在屏幕信息中是否设置页边。
移动终端200的控制器280可以使用陀螺仪传感器等来测量移动终端200的屏幕相对布置方向。图像显示装置100的控制器180可以使用陀螺仪传感器等来测量图像显示装置100的屏幕相对布置方向。移动终端200和图像显示装置100可以通过数据通信来共享移动终端200和图像显示装置100的屏幕信息。
此时,移动终端200的控制器280设置移动终端200的屏幕信息中的页边,并且如果移动终端200的屏幕相对布置方向和图像显示装置100的屏幕相对布置方向不同,则将具有页边的屏幕信息传送到图像显示装置100。
根据本发明,能够使用在图像显示装置上输出的屏幕的位置信息和光标的位置信息来有效地确定用户要控制的目标移动终端。另外,如果用户改变目标移动终端,则图像显示装置能够快速地建立与改变的目标移动终端的数据通信。
在使用移动终端控制在图像显示装置上输出的屏幕中,用户可以在将他们的眼睛固定在图像显示装置上的状态下操纵移动终端,从而增加用户便利。即,能够解决用户在交替地观看移动终端和图像显示装置时应操纵移动终端的不便。
能够提供用于控制在图像显示装置上输出的屏幕的各种输入手段,并且允许用户容易地控制在移动终端与图像显示装置之间共享的屏幕。
另外,在屏幕上显示与用户命令相对应的指南图像中,用于计算用户命令的输入位置的复杂协议不需要被安装在装置之间,并且由此能够显著减少用户接口的复杂性。
本领域内的技术人员将会明白,在不偏离本发明的精神或范围的情况下,能够在本发明中进行各种修改和变化。因此,旨在本发明涵盖本发明的修改和变化,只要它们落在所附权利要求和它们的等同内容的范围内。
Claims (20)
1.一种控制连接到外部连接的图像显示装置的多个移动终端的方法,所述方法包括:
将第一移动终端的屏幕信息传送到所述图像显示装置;
将第二移动终端的屏幕信息传送到所述图像显示装置;
在所述图像显示装置的显示器的第一区域中显示与所述第一移动终端的屏幕信息相对应的第一镜像屏幕,并且在所述图像显示装置的显示器的第二区域中显示与所述第二移动终端的屏幕信息相对应的第二镜像屏幕;
跟踪从所述图像显示装置的输入单元输入的在所述图像显示装置的显示器上的光标;以及
当所述光标在所述显示器的第一区域内时,从所述图像显示装置控制所述第一移动终端,并且当所述光标在所述显示器的第二区域内时,从所述图像显示装置控制所述第二移动终端。
2.根据权利要求1所述的方法,其中,所述第一区域和所述第二区域彼此相邻。
3.根据权利要求2所述的方法,其中,当经由所述输入单元选择在所述第一镜像屏幕上显示的图标时,在所述第一移动终端上执行相对应的应用,并且当经由所述输入单元选择在所述第二镜像屏幕上显示的图标时,在所述第二移动终端上执行相对应的应用。
4.根据权利要求2所述的方法,进一步包括:
限定与所述第二镜像屏幕相邻的所述第一镜像屏幕的第一相邻部分,并且限定与所述第一镜像屏幕相邻的所述第二镜像屏幕的第二相邻部分,所述第一相邻部分包括与所述第二镜像屏幕相关的信息,并且所述第二相邻部分包括与所述第一镜像屏幕相关的信息;以及
当所述光标在越过进入到所述第二镜像屏幕之前处于所述第一镜像屏幕的所述第一相邻部分中时,确定要控制所述第二移动终端,并且当所述光标在越过进入到所述第一镜像屏幕之前处于所述第二镜像屏幕的第二相邻部分中时,确定要控制所述第一移动终端。
5.根据权利要求1所述的方法,进一步包括:
经由所述第一移动终端上的传感器来感测第一用户触摸和与所述第一用户触摸不同的第二用户触摸;
根据感测到的第一用户触摸来移动所述图像显示装置的所述第一镜像屏幕上的光标;以及
根据所述第二用户触摸来执行用户命令,并且在所述第一镜像屏幕上输出所执行的用户命令的结果。
6.根据权利要求5所述的方法,其中,所述第一用户触摸和所述第二用户触摸根据触摸压力、触摸时间以及触摸区域中的一个彼此不同。
7.根据权利要求1所述的方法,进一步包括:
基于所述第一移动终端和所述第二移动终端的布置来将所述第一镜像屏幕和所述第二镜像屏幕布置在所述图像显示装置的所述显示器上。
8.根据权利要求1所述的方法,进一步包括:
在所述第一移动终端上接收呼入事件;以及
突出显示所述第一镜像屏幕,以指示在所述第一移动终端上已经接收到所述呼入事件。
9.根据权利要求1所述的方法,进一步包括:
测量与所述第一移动终端和所述第二移动终端的布置方向相对应的屏幕相对布置方向;以及
显示所述第一镜像屏幕和所述第二镜像屏幕,以匹配所述第一移动终端和所述第二移动终端的布置方向。
10.一种图像显示装置,所述图像显示装置连接到多个移动终端,所述图像显示装置包括:
通信单元,所述通信单元被配置成接收第一移动终端的屏幕信息,并且接收第二移动终端的屏幕信息;
显示器,所述显示器被配置成在第一区域中显示与所述第一移动终端的屏幕信息相对应的第一镜像屏幕,并且在第二区域中显示与所述第二移动终端的屏幕信息相对应的第二镜像屏幕;以及
控制器,所述控制器被配置成:
根据来自所述图像显示装置的输入单元的输入来跟踪所述图像显示装置的所述显示器上的光标,并且
当所述光标在所述显示器的所述第一区域内时,从所述图像显示装置控制所述第一移动终端,并且当所述光标在所述显示器的所述第二区域时,从所述图像显示装置控制所述第二移动终端。
11.根据权利要求10所述的图像显示装置,其中,所述第一区域和所述第二区域彼此相邻。
12.根据权利要求11所述的图像显示装置,其中,所述控制器进一步被配置成,当经由所述输入单元选择在所述第一镜像屏幕上显示的图标时,控制要在所述第一移动终端上执行的相对应的应用,并且当经由所述输入单元选择在所述第二镜像屏幕上显示的图标时,控制要在所述第二移动终端上执行的相对应的应用。
13.根据权利要求11所述的图像显示装置,其中,所述控制器进一步被配置成:
限定与所述第二镜像屏幕相邻的所述第一镜像屏幕的第一相邻部分,并且限定与所述第一镜像屏幕相邻的所述第二镜像屏幕的第二相邻部分,所述第一相邻部分包括与所述第二镜像屏幕相关的信息,并且所述第二相邻部分包括与所述第一镜像屏幕相关的信息;以及
当所述光标在越过进入到所述第二镜像屏幕之前处于所述第一镜像屏幕的所述第一相邻部分中时,确定要控制所述第二移动终端,并且当所述光标在越过进入到所述第一镜像屏幕之前处于所述第二镜像屏幕的所述第二相邻部分中时,确定要控制所述第一移动终端。
14.根据权利要求10所述的图像显示装置,其中,所述控制器进一步被配置成:
根据在所述第一移动终端上的感测到的第一用户触摸在所述图像显示装置的所述第一镜像屏幕上移动所述光标;以及
根据所述第一移动终端上的感测到的第二用户触摸执行用户命令,并且在所述第一镜像屏幕上输出所执行的用户命令的结果。
15.根据权利要求14所述的图像显示装置,其中,所述第一用户触摸和所述第二用户触摸根据触摸压力、触摸时间以及触摸区域中的一个而彼此不同。
16.根据权利要求10所述的图像显示装置,其中,所述控制器进一步被配置成,基于所述第一移动终端和所述第二移动终端的布置来布置所述第一镜像屏幕和所述第二镜像屏幕。
17.根据权利要求10所述的图像显示装置,其中,所述控制器进一步被配置成突出显示所述第一镜像屏幕以指示在所述第一移动终端上已经接收到呼入事件。
18.根据权利要求10所述的图像显示装置,其中,所述控制器进一步被配置成显示所述第一镜像屏幕和所述第二镜像屏幕以匹配所述第一移动终端和所述第二移动终端的布置方向。
19.一种移动终端,包括:
显示器,所述显示器被配置成显示图像;
通信单元,所述通信单元被配置成执行与外部图像显示装置的数据通信;
传感器单元,所述传感器单元被配置成感测第一用户触摸和与所述第一用户触摸不同的第二用户触摸;以及
控制器,所述控制器被配置成:
控制所述显示器以在输入所述第一用户触摸的部分处输出光标图像,
分析并且执行与所述第二用户触摸相对应的用户命令,
使用在所述显示器上输出的图像生成屏幕信息,以及
控制所述通信单元以将所生成的屏幕信息传送到外部图像显示装置。
20.根据权利要求19所述的移动终端,其中,所述第一用户触摸和所述第二用户触摸通过触摸压力、触摸时间以及触摸区域中的一个进行区分。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810337103.5A CN108762702B (zh) | 2012-07-06 | 2013-06-03 | 移动终端、图像显示装置及使用其的用户接口提供方法 |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020120073677A KR101890626B1 (ko) | 2012-07-06 | 2012-07-06 | 이동 단말기, 영상표시장치 및 이들을 이용한 사용자 인터페이스 제공 방법 |
KR10-2012-0073677 | 2012-07-06 | ||
KR10-2012-0082974 | 2012-07-30 | ||
KR1020120082974A KR101925027B1 (ko) | 2012-07-30 | 2012-07-30 | 영상표시장치 및 이를 이용한 사용자 인터페이스 제공 방법 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810337103.5A Division CN108762702B (zh) | 2012-07-06 | 2013-06-03 | 移动终端、图像显示装置及使用其的用户接口提供方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103530032A true CN103530032A (zh) | 2014-01-22 |
CN103530032B CN103530032B (zh) | 2018-05-22 |
Family
ID=48607100
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810337103.5A Active CN108762702B (zh) | 2012-07-06 | 2013-06-03 | 移动终端、图像显示装置及使用其的用户接口提供方法 |
CN201310217541.5A Active CN103530032B (zh) | 2012-07-06 | 2013-06-03 | 移动终端、图像显示装置及使用其的用户接口提供方法 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810337103.5A Active CN108762702B (zh) | 2012-07-06 | 2013-06-03 | 移动终端、图像显示装置及使用其的用户接口提供方法 |
Country Status (3)
Country | Link |
---|---|
US (9) | US9632648B2 (zh) |
EP (2) | EP3754483A1 (zh) |
CN (2) | CN108762702B (zh) |
Cited By (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103841271A (zh) * | 2014-03-21 | 2014-06-04 | 天津松下汽车电子开发有限公司 | 基于uibc活用的智能屏与智能手机互联系统及方法 |
CN103986953A (zh) * | 2014-05-27 | 2014-08-13 | Tcl集团股份有限公司 | 一种基于遥控器的光标移动方法和设备 |
CN104765535A (zh) * | 2015-04-29 | 2015-07-08 | 福建捷联电子有限公司 | 一种利用外围设备对显示设备菜单进行操作的方法 |
CN105988860A (zh) * | 2015-01-20 | 2016-10-05 | 纬创资通股份有限公司 | 执行应用程序的方法及移动装置 |
CN106210814A (zh) * | 2015-05-29 | 2016-12-07 | 三星电子株式会社 | 遥控装置、提供遥控装置的振动反馈的方法以及显示系统 |
CN107071532A (zh) * | 2016-01-11 | 2017-08-18 | Lg 电子株式会社 | 图像显示装置 |
WO2017140153A1 (zh) * | 2016-02-17 | 2017-08-24 | 中兴通讯股份有限公司 | 语音控制方法及装置 |
CN107168563A (zh) * | 2017-06-30 | 2017-09-15 | 联想(北京)有限公司 | 一种鼠标切换的控制方法及装置 |
CN107193437A (zh) * | 2017-04-26 | 2017-09-22 | 咪咕音乐有限公司 | 一种信息显示方法及装置 |
CN107533448A (zh) * | 2015-05-08 | 2018-01-02 | 富士通株式会社 | 图像输出控制方法、图像输出控制程序以及显示装置 |
CN107870754A (zh) * | 2016-09-28 | 2018-04-03 | 法乐第(北京)网络科技有限公司 | 一种控制设备上展示的内容的方法及装置 |
CN107925791A (zh) * | 2015-07-02 | 2018-04-17 | Lg电子株式会社 | 图像显示设备和移动终端 |
CN108475184A (zh) * | 2016-02-16 | 2018-08-31 | 三星电子株式会社 | 电子设备及其应用数据显示方法 |
CN108874342A (zh) * | 2018-06-13 | 2018-11-23 | 深圳市东向同人科技有限公司 | 投影视图切换方法及终端设备 |
CN108966182A (zh) * | 2017-05-26 | 2018-12-07 | 佳能株式会社 | 通信装置、通信方法和存储介质 |
TWI674506B (zh) * | 2017-02-06 | 2019-10-11 | 美商惠普發展公司有限責任合夥企業 | 螢幕鏡映技術 |
CN107005681B (zh) * | 2014-10-23 | 2020-05-29 | 应用程序动态有限责任公司 | 通用镜像接收器 |
CN113377317A (zh) * | 2015-02-27 | 2021-09-10 | 三星电子株式会社 | 用于提供屏幕镜像服务的设备和方法 |
US11455140B2 (en) * | 2018-08-29 | 2022-09-27 | Samsung Electronics Co., Ltd. | Electronic device and method for same controlling external device |
Families Citing this family (122)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012102416A1 (en) * | 2011-01-24 | 2012-08-02 | Lg Electronics Inc. | Data sharing between smart devices |
US10524100B2 (en) * | 2012-09-07 | 2019-12-31 | Samsung Electronics Co., Ltd. | Electronic apparatus and method of outputting content by the electronic apparatus |
KR101936075B1 (ko) * | 2012-09-21 | 2019-01-08 | 삼성전자주식회사 | 이동통신 단말기를 이용한 디스플레이 장치의 데이터 표시 방법 및 상기 장치들 |
JP5575960B2 (ja) * | 2012-12-25 | 2014-08-20 | シャープ株式会社 | 放送番組再生システム、放送番組再生装置および端末装置 |
KR102131646B1 (ko) * | 2013-01-03 | 2020-07-08 | 삼성전자주식회사 | 디스플레이장치 및 그 제어방법 |
US9197680B2 (en) * | 2013-05-23 | 2015-11-24 | Qualcomm Incorporated | Establishing and controlling audio and voice back channels of a Wi-Fi display connection |
KR102189679B1 (ko) * | 2013-07-12 | 2020-12-14 | 삼성전자주식회사 | 외부 기기에 디스플레이된 정보와 관련된 기능을 실행하는 휴대용 기기, 휴대용 기기에서 외부 기기에 디스플레이된 정보와 관련된 기능을 실행하는 방법 및 컴퓨터 판독 가능한 기록 매체 |
JP6277626B2 (ja) * | 2013-08-08 | 2018-02-14 | 株式会社リコー | 再生システム、再生制御システム、情報端末、表示装置、再生制御プログラム及び再生制御方法 |
KR20150024247A (ko) * | 2013-08-26 | 2015-03-06 | 삼성전자주식회사 | 터치 스크린 디바이스에서 다수의 입력기구를 이용하는 애플리케이션을 실행하는 방법 및 터치 스크린 디바이스 |
US10063802B2 (en) * | 2013-08-28 | 2018-08-28 | Lg Electronics Inc. | Multimedia device and method for controlling external devices of the same |
KR102071579B1 (ko) * | 2013-09-02 | 2020-01-30 | 삼성전자주식회사 | 화면 미러링을 이용한 서비스 제공 방법 및 그 장치 |
KR102088384B1 (ko) * | 2013-09-04 | 2020-05-28 | 삼성전자주식회사 | 디스플레이 기기의 제어 방법, 그에 따른 싱크 기기 및 그에 따른 미러링 시스템 |
KR102084633B1 (ko) * | 2013-09-17 | 2020-03-04 | 삼성전자주식회사 | 화면 미러링 방법 및 그에 따른 소스 기기 |
JP5802249B2 (ja) * | 2013-09-30 | 2015-10-28 | シャープ株式会社 | 表示装置、ソース機器、及び表示システム |
CN105765567B (zh) * | 2013-11-14 | 2019-02-12 | 英派尔科技开发有限公司 | 基于视觉选择的通信请求的生成 |
KR20150067521A (ko) * | 2013-12-10 | 2015-06-18 | 에스케이플래닛 주식회사 | 화면 공유 서비스를 위한 장치 및 방법, 이를 위한 화면 공유 시스템 |
KR102210704B1 (ko) * | 2013-12-24 | 2021-02-02 | 삼성전자주식회사 | 사용자단말기 및 사용자단말기의 제어방법 |
US9886134B2 (en) | 2013-12-27 | 2018-02-06 | Pioneer Corporation | Terminal device, calibration method and calibration program |
USD753143S1 (en) * | 2013-12-30 | 2016-04-05 | Samsung Electronics Co., Ltd. | Display screen or portion thereof with graphical user interface |
USD760733S1 (en) * | 2013-12-30 | 2016-07-05 | Samsung Electronics Co., Ltd. | Display screen or portion thereof with graphical user interface |
USD752606S1 (en) * | 2013-12-30 | 2016-03-29 | Samsung Electronics Co., Ltd. | Display screen or portion thereof with graphical user interface |
USD753142S1 (en) * | 2013-12-30 | 2016-04-05 | Samsung Electronics Co., Ltd. | Display screen or portion thereof with graphical user interface |
KR20150083703A (ko) * | 2014-01-10 | 2015-07-20 | 삼성전자주식회사 | 데이터 처리 방법 및 그 전자 장치 |
KR20150092454A (ko) * | 2014-02-05 | 2015-08-13 | 삼성전자주식회사 | 디스플레이 장치, 디스플레이 장치의 제어 방법 및 컴퓨터 판독가능 기록매체 |
USD777739S1 (en) * | 2014-02-21 | 2017-01-31 | Lenovo (Beijing) Co., Ltd. | Display screen or portion thereof with graphical user interface |
USD784373S1 (en) * | 2014-02-21 | 2017-04-18 | Lenovo (Beijing) Co., Ltd. | Display screen or portion thereof with graphical user interface |
KR102280065B1 (ko) * | 2014-02-28 | 2021-07-22 | 삼성전자주식회사 | 통신 시스템에서 멀티미디어 콘텐츠 재생 방법 및 장치 |
US10691397B1 (en) * | 2014-04-22 | 2020-06-23 | sigmund lindsay clements | Mobile computing device used to operate different external devices |
WO2015141320A1 (ja) * | 2014-03-19 | 2015-09-24 | ソニー株式会社 | 情報処理装置、情報処理システム、および情報処理方法 |
KR102374584B1 (ko) | 2014-03-21 | 2022-03-16 | 삼성전자주식회사 | 영상을 디스플레이 하는 방법 및 디바이스 |
KR20150112252A (ko) * | 2014-03-27 | 2015-10-07 | 삼성전자주식회사 | 전자 장치 및 이의 연결 방법 |
JP2015197587A (ja) * | 2014-04-01 | 2015-11-09 | セイコーエプソン株式会社 | 双方向表示方法および双方向表示装置 |
KR102120843B1 (ko) * | 2014-04-22 | 2020-06-09 | 삼성전자주식회사 | 디스플레이 장치 및 그의 멀티 뷰 디스플레이 방법 |
KR20150124235A (ko) * | 2014-04-28 | 2015-11-05 | 삼성전자주식회사 | 사용자 단말 및 이의 제어 방법, 그리고 멀티미디어 시스템 |
CN105025377A (zh) * | 2014-04-30 | 2015-11-04 | 深圳市天易联科技有限公司 | 智能电视界面指令自适应识别方法 |
KR102270007B1 (ko) * | 2014-05-07 | 2021-06-28 | 삼성전자주식회사 | 단말 장치 및 단말 장치의 원격 제어 방법 |
USD779519S1 (en) * | 2014-05-30 | 2017-02-21 | Samsung Electronics Co., Ltd. | Display screen or portion thereof with graphical user interface |
TWI610221B (zh) * | 2014-06-18 | 2018-01-01 | 緯創資通股份有限公司 | 螢幕播送方法以及使用該方法的系統與裝置 |
TWI616808B (zh) * | 2014-06-30 | 2018-03-01 | 緯創資通股份有限公司 | 分享顯示畫面的方法及裝置 |
KR20160006889A (ko) * | 2014-07-09 | 2016-01-20 | (주)휴맥스 | 린백 제어 방송 수신 시스템 및 방법 |
JP5708868B1 (ja) * | 2014-08-20 | 2015-04-30 | 富士ゼロックス株式会社 | プログラム、情報処理装置及び方法 |
KR101677644B1 (ko) * | 2014-09-02 | 2016-11-29 | 엘지전자 주식회사 | 이동 단말기 및 이의 제어 방법 |
EP2996346A1 (en) * | 2014-09-12 | 2016-03-16 | Samsung Electronics Co., Ltd. | Multi-screen control method and device supporting multiple window applications |
US20160092152A1 (en) * | 2014-09-25 | 2016-03-31 | Oracle International Corporation | Extended screen experience |
KR102269481B1 (ko) * | 2014-10-17 | 2021-06-28 | 삼성전자주식회사 | 디바이스 간에 화면 공유 방법 및 이를 이용하는 디바이스 |
US10055064B2 (en) * | 2014-10-29 | 2018-08-21 | Sony Corporation | Controlling multiple devices with a wearable input device |
CN104464238B (zh) * | 2014-11-07 | 2018-05-29 | 小米科技有限责任公司 | 移动终端之间的操作控制方法及装置 |
JP6729372B2 (ja) * | 2014-11-27 | 2020-07-22 | ソニー株式会社 | 情報処理装置および情報処理方法 |
CN104602232B (zh) * | 2014-12-26 | 2018-06-05 | 广州三星通信技术研究有限公司 | 用于电子设备间建立通信连接的方法、装置及系统 |
US9959024B2 (en) * | 2015-01-27 | 2018-05-01 | I/O Interconnect, Ltd. | Method for launching applications of handheld computer through personal computer |
CN104640233B (zh) * | 2015-01-28 | 2018-12-21 | 广州三星通信技术研究有限公司 | 电子设备之间建立通信连接的方法、装置和系统 |
EP3253066B1 (en) * | 2015-01-30 | 2021-06-09 | Sony Corporation | Information processing device |
US10297002B2 (en) * | 2015-03-10 | 2019-05-21 | Intel Corporation | Virtual touch pad method and apparatus for controlling an external display |
USD776693S1 (en) * | 2015-04-07 | 2017-01-17 | A. J. T. Systems, Inc. | Display screen with graphical user interface |
KR102390082B1 (ko) * | 2015-07-14 | 2022-04-25 | 삼성전자주식회사 | 전자 장치의 동작 방법 및 전자 장치 |
KR20170011178A (ko) * | 2015-07-21 | 2017-02-02 | 삼성전자주식회사 | 휴대 장치, 디스플레이 장치 및 디스플레이 장치의 사진 표시방법 |
WO2017052502A1 (en) * | 2015-09-22 | 2017-03-30 | Hewlett-Packard Development Company, L.P. | Display devices with virtual representations of electronic devices |
US10133532B2 (en) * | 2015-09-25 | 2018-11-20 | Seiko Epson Corporation | Display system, display device, information display method, and program |
KR102450840B1 (ko) | 2015-11-19 | 2022-10-05 | 엘지전자 주식회사 | 전자 기기 및 전자 기기의 제어 방법 |
KR20170066916A (ko) * | 2015-12-07 | 2017-06-15 | 삼성전자주식회사 | 전자 장치 및 그의 제어 방법 |
KR102459590B1 (ko) | 2015-12-24 | 2022-10-26 | 엘지전자 주식회사 | 영상표시장치 |
KR20170087350A (ko) * | 2016-01-20 | 2017-07-28 | 삼성전자주식회사 | 전자 장치 및 전자 장치의 동작 방법 |
KR102484135B1 (ko) * | 2016-02-15 | 2023-01-04 | 엘지전자 주식회사 | 디스플레이 장치 및 그의 동작 방법 |
KR102412283B1 (ko) | 2016-02-17 | 2022-06-23 | 삼성전자 주식회사 | 전자 장치 및 전자 장치의 영상 공유 제어 방법 |
US10620786B2 (en) * | 2016-03-07 | 2020-04-14 | Intel Corporation | Technologies for event notification interface management |
CN108886633B (zh) * | 2016-03-29 | 2021-06-22 | 三菱电机株式会社 | 图像接收再现方法和装置以及图像生成发送方法和装置 |
KR102542122B1 (ko) * | 2016-04-01 | 2023-06-09 | 엘지전자 주식회사 | 영상표시장치 |
JP6747025B2 (ja) * | 2016-04-13 | 2020-08-26 | セイコーエプソン株式会社 | 表示システム、表示装置、及び、表示システムの制御方法 |
US10674172B2 (en) | 2016-04-19 | 2020-06-02 | Mitsubishi Electric Corporation | Image processing apparatus, image processing method, and computer-readable recording medium |
US10394437B2 (en) * | 2016-07-19 | 2019-08-27 | International Business Machines Corporation | Custom widgets based on graphical user interfaces of applications |
KR102525575B1 (ko) * | 2016-08-12 | 2023-04-25 | 삼성전자주식회사 | 영상 표시 장치 및 그 동작 방법 |
US20180063312A1 (en) * | 2016-08-28 | 2018-03-01 | Chiou-muh Jong | Touch screen device embedded on fashion item as complementary display screen for smartphone |
KR102627518B1 (ko) * | 2016-09-02 | 2024-01-23 | 엘지전자 주식회사 | 싱크 디바이스 및 그 제어 방법 |
JP6394669B2 (ja) * | 2016-09-30 | 2018-09-26 | トヨタ自動車株式会社 | 車両用操作装置 |
EP3319308B1 (en) * | 2016-10-27 | 2022-08-03 | Samsung Electronics Co., Ltd. | Spherical image display apparatus and method of displaying spherical image on a planar display |
KR102598082B1 (ko) * | 2016-10-28 | 2023-11-03 | 삼성전자주식회사 | 영상 표시 장치, 모바일 장치 및 그 동작방법 |
JP6565878B2 (ja) * | 2016-11-25 | 2019-08-28 | トヨタ自動車株式会社 | 表示システム |
US20190311697A1 (en) * | 2016-12-01 | 2019-10-10 | Lg Electronics Inc. | Image display device and image display system comprising same |
CN109254672B (zh) * | 2017-07-12 | 2022-07-15 | 英业达科技有限公司 | 游标控制方法及游标控制系统 |
EP3663903B1 (en) * | 2017-08-23 | 2021-07-14 | Huawei Technologies Co., Ltd. | Display method and device |
KR102411283B1 (ko) * | 2017-08-23 | 2022-06-21 | 삼성전자주식회사 | 사용자 인터페이스의 입력 검출 영역을 설정하기 위한 방법 및 그 전자 장치 |
KR102496339B1 (ko) * | 2017-10-31 | 2023-02-06 | 삼성전자주식회사 | 디스플레이 장치 및 디스플레이 시스템 |
KR20190055946A (ko) * | 2017-11-16 | 2019-05-24 | 삼성전자주식회사 | Av 출력 분석장치, 방법 및 컴퓨터 판독 가능 기록 매체 |
US20190215583A1 (en) * | 2018-01-06 | 2019-07-11 | Shadecraft, Inc. | Method and system of fleet management of shading devices |
US11055051B2 (en) * | 2018-01-31 | 2021-07-06 | Pxio | Direct and discriminate pixel flow between logically-grouped source to sink based on an interaction |
KR102469754B1 (ko) * | 2018-02-13 | 2022-11-22 | 삼성전자주식회사 | 전자 장치 및 그 동작 방법 |
US10824384B2 (en) * | 2018-04-30 | 2020-11-03 | Dell Products L.P. | Controller for providing sharing between visual devices |
KR102693268B1 (ko) * | 2018-07-31 | 2024-08-08 | 삼성전자주식회사 | 전자 장치의 디스플레이 및 외부 디스플레이 전부를 이용하여 어플리케이션을 실행하기 위한 전자 장치 및 방법 |
CN109271095B (zh) * | 2018-11-16 | 2023-07-07 | 深圳安柠科技有限公司 | 用于连接移动终端进行数据处理的电子设备 |
CN109857289B (zh) * | 2018-12-24 | 2021-01-08 | 维沃移动通信有限公司 | 显示控制方法及终端设备 |
KR102679851B1 (ko) * | 2019-01-03 | 2024-07-01 | 삼성전자주식회사 | 가전 기기 및 그 제어 방법 |
CN109753184A (zh) * | 2019-01-07 | 2019-05-14 | 北京硬壳科技有限公司 | 触控显示设备及其控制方法和装置 |
KR102607214B1 (ko) | 2019-03-25 | 2023-11-29 | 삼성전자주식회사 | 디스플레이 장치 및 그 제어 방법 |
JP2020197687A (ja) * | 2019-06-05 | 2020-12-10 | パナソニックIpマネジメント株式会社 | 画像表示システム、表示制御装置及び表示制御方法 |
US11379104B2 (en) * | 2019-06-07 | 2022-07-05 | Microsoft Technology Licensing, Llc | Sharing user interface customization across applications |
CN110686667B (zh) * | 2019-09-24 | 2024-01-09 | 努比亚技术有限公司 | 方向指示方法、双屏终端及计算机可读存储介质 |
KR20210074877A (ko) * | 2019-12-12 | 2021-06-22 | 삼성전자주식회사 | 디스플레이 장치 및 그 동작방법 |
US11093046B2 (en) | 2019-12-16 | 2021-08-17 | Microsoft Technology Licensing, Llc | Sub-display designation for remote content source device |
US11404028B2 (en) | 2019-12-16 | 2022-08-02 | Microsoft Technology Licensing, Llc | Sub-display notification handling |
US11487423B2 (en) | 2019-12-16 | 2022-11-01 | Microsoft Technology Licensing, Llc | Sub-display input areas and hidden inputs |
US11042222B1 (en) | 2019-12-16 | 2021-06-22 | Microsoft Technology Licensing, Llc | Sub-display designation and sharing |
TWI736151B (zh) * | 2020-02-26 | 2021-08-11 | 瑞昱半導體股份有限公司 | 顯示裝置及影像顯示方法 |
KR20210121777A (ko) * | 2020-03-31 | 2021-10-08 | 엘지전자 주식회사 | 디스플레이 장치 및 그의 동작 방법 |
KR20210130424A (ko) * | 2020-04-22 | 2021-11-01 | 엘지전자 주식회사 | 무선 디바이스 |
WO2021212463A1 (zh) * | 2020-04-24 | 2021-10-28 | 海信视像科技股份有限公司 | 一种显示设备及投屏方法 |
CN111752721B (zh) * | 2020-05-14 | 2024-05-24 | 西安万像电子科技有限公司 | 数据传输方法及设备 |
CN111988653A (zh) | 2020-08-25 | 2020-11-24 | 京东方科技集团股份有限公司 | 多视频投屏信息的交互方法、装置、设备及存储介质 |
CN112199061B (zh) * | 2020-09-30 | 2023-06-27 | 联想(北京)有限公司 | 一种显示方法和设备 |
EP4191397A4 (en) * | 2020-10-28 | 2023-12-13 | Samsung Electronics Co., Ltd. | ELECTRONIC DEVICE, DISPLAY DEVICE AND CONTROL METHOD THEREOF |
CN114691064B (zh) * | 2020-12-29 | 2024-10-18 | 华为技术有限公司 | 一种双路投屏的方法及电子设备 |
US11762458B2 (en) * | 2021-02-15 | 2023-09-19 | Sony Group Corporation | Media display device control based on eye gaze |
CN115113832A (zh) * | 2021-03-17 | 2022-09-27 | 华为技术有限公司 | 一种跨设备同步显示的控制方法及系统 |
US11868595B2 (en) * | 2021-06-11 | 2024-01-09 | Roku, Inc. | Intelligent user interface customization for one-handed use |
US20230051956A1 (en) * | 2021-08-16 | 2023-02-16 | Capstone Industries, Inc. | Smart mirror capable of remotely operating a mobile device |
CN117859331A (zh) * | 2021-08-27 | 2024-04-09 | 海信视像科技股份有限公司 | 显示设备、终端设备及内容显示方法 |
CN113784187B (zh) * | 2021-09-14 | 2023-07-18 | 海信视像科技股份有限公司 | 一种显示设备及共享资源的控制方法 |
CN113992958B (zh) * | 2021-10-18 | 2023-07-18 | 深圳康佳电子科技有限公司 | 一种多窗口同屏互动方法、终端及存储介质 |
EP4432675A4 (en) * | 2021-11-19 | 2024-10-09 | Lg Electronics Inc | DISPLAY DEVICE AND OPERATING METHOD THEREOF |
KR102664915B1 (ko) * | 2021-12-06 | 2024-05-17 | 엘지전자 주식회사 | 디스플레이 장치 및 그의 동작 방법 |
TWI822437B (zh) * | 2021-12-07 | 2023-11-11 | 仁寶電腦工業股份有限公司 | 電子裝置及其操控方法 |
GB2620636A (en) * | 2022-07-15 | 2024-01-17 | Amulet Hotkey Ltd | Switching apparatus |
US20240021175A1 (en) * | 2022-07-18 | 2024-01-18 | Hewlett-Packard Development Company, L.P. | Display of selected image regions |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040051719A1 (en) * | 2001-06-01 | 2004-03-18 | Seiko Epson Corporation | Display-service providing system and image display apparatus |
US20080062122A1 (en) * | 1998-06-23 | 2008-03-13 | Immersion Corporation | Haptic feedback for touchpads and other touch controls |
CN101467133A (zh) * | 2006-05-30 | 2009-06-24 | 戴尔产品有限公司 | 电子设备之间的活动映射 |
US20100064260A1 (en) * | 2007-02-05 | 2010-03-11 | Brother Kogyo Kabushiki Kaisha | Image Display Device |
US20100162127A1 (en) * | 2008-12-22 | 2010-06-24 | Kabushiki Kaisha Toshiba | Information processing system and display control method |
US20110199389A1 (en) * | 2008-12-19 | 2011-08-18 | Microsoft Corporation | Interactive virtual display system for ubiquitous devices |
US20110316879A1 (en) * | 2010-06-23 | 2011-12-29 | Denso Corporation | Display apparatus for vehicle |
US20120038678A1 (en) * | 2010-08-13 | 2012-02-16 | Lg Electronics Inc. | Mobile terminal, display device and controlling method thereof |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3998376B2 (ja) | 1999-09-10 | 2007-10-24 | 富士通株式会社 | 入力処理方法及びそれを実施する入力処理装置 |
JP2005197930A (ja) * | 2004-01-06 | 2005-07-21 | Funai Electric Co Ltd | 地上波ディジタル放送受信機及びディジタル放送受信機 |
US7653883B2 (en) * | 2004-07-30 | 2010-01-26 | Apple Inc. | Proximity detector in handheld device |
KR101134869B1 (ko) | 2005-07-27 | 2012-04-13 | 엘지전자 주식회사 | 더블/와이드 영상표시장치 |
JP2007067710A (ja) | 2005-08-30 | 2007-03-15 | Canon Inc | 画像表示装置および画像表示装置の制御方法 |
CN101416490A (zh) * | 2006-04-06 | 2009-04-22 | 三星电子株式会社 | 在多屏幕环境中管理资源的设备和方法 |
JP5172156B2 (ja) * | 2007-01-15 | 2013-03-27 | 富士通株式会社 | 情報処理装置,表示方法および表示プログラム |
KR101564415B1 (ko) | 2009-01-07 | 2015-10-30 | 삼성전자주식회사 | 통합 채널 관리를 통한 컨텐트 재생 방법 및 장치 |
JP2011017750A (ja) * | 2009-07-07 | 2011-01-27 | Sony Corp | 情報処理装置、表示制御方法、およびプログラム |
EP2354914A1 (en) * | 2010-01-19 | 2011-08-10 | LG Electronics Inc. | Mobile terminal and control method thereof |
KR101096051B1 (ko) * | 2010-02-12 | 2011-12-19 | 황정원 | 디스플레잉 방향을 전환하는 텔레비전 |
DE202011110735U1 (de) | 2010-04-06 | 2015-12-10 | Lg Electronics Inc. | Mobiles Endgerät |
US8744420B2 (en) * | 2010-04-07 | 2014-06-03 | Apple Inc. | Establishing a video conference during a phone call |
US8839112B2 (en) | 2010-08-10 | 2014-09-16 | Microsoft Corporation | Cloning or extending a computer desktop on a wireless display surface |
JP2012054682A (ja) * | 2010-08-31 | 2012-03-15 | Sony Corp | 画像処理装置および画像処理方法 |
US9749832B2 (en) | 2010-09-24 | 2017-08-29 | Qualcomm Incorporated | Wireless display discovery and operation with TDLS |
US8605048B2 (en) * | 2010-11-05 | 2013-12-10 | Bluespace Corporation | Method and apparatus for controlling multimedia contents in realtime fashion |
US20120307141A1 (en) * | 2011-06-06 | 2012-12-06 | Apple Inc. | Frame retiming for mirror mode |
US9008177B2 (en) * | 2011-12-12 | 2015-04-14 | Qualcomm Incorporated | Selective mirroring of media output |
US20130222225A1 (en) * | 2012-02-24 | 2013-08-29 | Marcus Eriksson | Device, System and Method for Generating Display Data |
US8738826B2 (en) | 2012-06-08 | 2014-05-27 | Apple Inc. | System and method for display mirroring |
-
2013
- 2013-05-16 US US13/895,800 patent/US9632648B2/en active Active
- 2013-06-03 CN CN201810337103.5A patent/CN108762702B/zh active Active
- 2013-06-03 CN CN201310217541.5A patent/CN103530032B/zh active Active
- 2013-06-06 EP EP20185410.6A patent/EP3754483A1/en active Pending
- 2013-06-06 EP EP13170811.7A patent/EP2682859A3/en not_active Ceased
-
2017
- 2017-03-20 US US15/463,914 patent/US9927942B2/en active Active
-
2018
- 2018-02-14 US US15/896,924 patent/US10282050B2/en active Active
-
2019
- 2019-03-19 US US16/358,132 patent/US10579201B2/en active Active
-
2020
- 2020-01-30 US US16/777,231 patent/US10891012B2/en active Active
- 2020-09-08 US US17/014,596 patent/US11237689B2/en active Active
-
2021
- 2021-01-22 US US17/156,155 patent/US11360633B2/en active Active
-
2022
- 2022-05-13 US US17/744,302 patent/US11868580B2/en active Active
-
2023
- 2023-11-21 US US18/516,383 patent/US20240086023A1/en active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080062122A1 (en) * | 1998-06-23 | 2008-03-13 | Immersion Corporation | Haptic feedback for touchpads and other touch controls |
US20040051719A1 (en) * | 2001-06-01 | 2004-03-18 | Seiko Epson Corporation | Display-service providing system and image display apparatus |
CN101467133A (zh) * | 2006-05-30 | 2009-06-24 | 戴尔产品有限公司 | 电子设备之间的活动映射 |
US20100064260A1 (en) * | 2007-02-05 | 2010-03-11 | Brother Kogyo Kabushiki Kaisha | Image Display Device |
US20110199389A1 (en) * | 2008-12-19 | 2011-08-18 | Microsoft Corporation | Interactive virtual display system for ubiquitous devices |
US20100162127A1 (en) * | 2008-12-22 | 2010-06-24 | Kabushiki Kaisha Toshiba | Information processing system and display control method |
US20110316879A1 (en) * | 2010-06-23 | 2011-12-29 | Denso Corporation | Display apparatus for vehicle |
US20120038678A1 (en) * | 2010-08-13 | 2012-02-16 | Lg Electronics Inc. | Mobile terminal, display device and controlling method thereof |
Cited By (31)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103841271A (zh) * | 2014-03-21 | 2014-06-04 | 天津松下汽车电子开发有限公司 | 基于uibc活用的智能屏与智能手机互联系统及方法 |
CN103841271B (zh) * | 2014-03-21 | 2016-06-01 | 天津松下汽车电子开发有限公司 | 基于uibc活用的智能屏与智能手机互联系统及方法 |
CN103986953A (zh) * | 2014-05-27 | 2014-08-13 | Tcl集团股份有限公司 | 一种基于遥控器的光标移动方法和设备 |
CN103986953B (zh) * | 2014-05-27 | 2017-12-26 | Tcl集团股份有限公司 | 一种基于遥控器的光标移动方法和设备 |
US11425447B2 (en) | 2014-10-23 | 2022-08-23 | App Dynamic Ehf | Universal mirroring receiver |
US10958967B2 (en) | 2014-10-23 | 2021-03-23 | App Dynamic Ehf | Universal mirroring receiver |
CN111641849A (zh) * | 2014-10-23 | 2020-09-08 | 应用程序动态有限责任公司 | 通用镜像接收器 |
CN107005681B (zh) * | 2014-10-23 | 2020-05-29 | 应用程序动态有限责任公司 | 通用镜像接收器 |
CN105988860A (zh) * | 2015-01-20 | 2016-10-05 | 纬创资通股份有限公司 | 执行应用程序的方法及移动装置 |
CN105988860B (zh) * | 2015-01-20 | 2019-08-16 | 纬创资通股份有限公司 | 执行应用程序的方法及移动装置 |
CN113377317A (zh) * | 2015-02-27 | 2021-09-10 | 三星电子株式会社 | 用于提供屏幕镜像服务的设备和方法 |
CN104765535B (zh) * | 2015-04-29 | 2018-07-03 | 福建捷联电子有限公司 | 一种利用外围设备对显示设备菜单进行操作的方法 |
CN104765535A (zh) * | 2015-04-29 | 2015-07-08 | 福建捷联电子有限公司 | 一种利用外围设备对显示设备菜单进行操作的方法 |
CN107533448A (zh) * | 2015-05-08 | 2018-01-02 | 富士通株式会社 | 图像输出控制方法、图像输出控制程序以及显示装置 |
CN106210814A (zh) * | 2015-05-29 | 2016-12-07 | 三星电子株式会社 | 遥控装置、提供遥控装置的振动反馈的方法以及显示系统 |
CN107925791A (zh) * | 2015-07-02 | 2018-04-17 | Lg电子株式会社 | 图像显示设备和移动终端 |
CN107071532B (zh) * | 2016-01-11 | 2021-04-30 | Lg 电子株式会社 | 图像显示装置 |
CN107071532A (zh) * | 2016-01-11 | 2017-08-18 | Lg 电子株式会社 | 图像显示装置 |
CN108475184A (zh) * | 2016-02-16 | 2018-08-31 | 三星电子株式会社 | 电子设备及其应用数据显示方法 |
WO2017140153A1 (zh) * | 2016-02-17 | 2017-08-24 | 中兴通讯股份有限公司 | 语音控制方法及装置 |
CN107870754A (zh) * | 2016-09-28 | 2018-04-03 | 法乐第(北京)网络科技有限公司 | 一种控制设备上展示的内容的方法及装置 |
TWI674506B (zh) * | 2017-02-06 | 2019-10-11 | 美商惠普發展公司有限責任合夥企業 | 螢幕鏡映技術 |
US10901679B2 (en) | 2017-02-06 | 2021-01-26 | Hewlett-Packard Development Company, L.P. | Mirroring of screens |
CN107193437A (zh) * | 2017-04-26 | 2017-09-22 | 咪咕音乐有限公司 | 一种信息显示方法及装置 |
CN107193437B (zh) * | 2017-04-26 | 2023-10-20 | 咪咕音乐有限公司 | 一种信息显示方法及装置 |
CN108966182A (zh) * | 2017-05-26 | 2018-12-07 | 佳能株式会社 | 通信装置、通信方法和存储介质 |
US11435973B2 (en) | 2017-05-26 | 2022-09-06 | Canon Kabushiki Kaisha | Communication apparatus, communication method, and storage medium |
CN107168563A (zh) * | 2017-06-30 | 2017-09-15 | 联想(北京)有限公司 | 一种鼠标切换的控制方法及装置 |
CN108874342B (zh) * | 2018-06-13 | 2021-08-03 | 深圳市东向同人科技有限公司 | 投影视图切换方法及终端设备 |
CN108874342A (zh) * | 2018-06-13 | 2018-11-23 | 深圳市东向同人科技有限公司 | 投影视图切换方法及终端设备 |
US11455140B2 (en) * | 2018-08-29 | 2022-09-27 | Samsung Electronics Co., Ltd. | Electronic device and method for same controlling external device |
Also Published As
Publication number | Publication date |
---|---|
CN108762702B (zh) | 2021-07-06 |
US20240086023A1 (en) | 2024-03-14 |
CN108762702A (zh) | 2018-11-06 |
US10282050B2 (en) | 2019-05-07 |
EP3754483A1 (en) | 2020-12-23 |
US11237689B2 (en) | 2022-02-01 |
US20210173504A1 (en) | 2021-06-10 |
US20180246604A1 (en) | 2018-08-30 |
US10891012B2 (en) | 2021-01-12 |
US10579201B2 (en) | 2020-03-03 |
US20200401257A1 (en) | 2020-12-24 |
EP2682859A3 (en) | 2014-07-16 |
EP2682859A2 (en) | 2014-01-08 |
US20200167023A1 (en) | 2020-05-28 |
US20220269362A1 (en) | 2022-08-25 |
US20170255304A1 (en) | 2017-09-07 |
US20140009394A1 (en) | 2014-01-09 |
US20190212848A1 (en) | 2019-07-11 |
CN103530032B (zh) | 2018-05-22 |
US11360633B2 (en) | 2022-06-14 |
US9927942B2 (en) | 2018-03-27 |
US9632648B2 (en) | 2017-04-25 |
US11868580B2 (en) | 2024-01-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103530032A (zh) | 移动终端、图像显示装置及使用其的用户接口提供方法 | |
CN105872683B (zh) | 图像显示设备和方法 | |
CN102420950B (zh) | 图像显示装置和操作该图像显示装置的方法 | |
KR101788006B1 (ko) | 원격제어장치 및 원격제어장치로 제어 가능한 영상표시장치 | |
KR102230024B1 (ko) | 전자 기기 및 그 동작방법 | |
CN103917941A (zh) | 遥控器及其操作方法 | |
CN104219552A (zh) | 图像显示装置的操作方法 | |
CN105763921B (zh) | 图像显示设备和方法 | |
KR20160091628A (ko) | 싱크 디바이스 및 그 제어 방법 | |
CN103428548A (zh) | 图像显示设备及其操作方法 | |
KR20170035153A (ko) | 영상 표시 장치 및 그 동작 방법 | |
KR101890626B1 (ko) | 이동 단말기, 영상표시장치 및 이들을 이용한 사용자 인터페이스 제공 방법 | |
CN105763914A (zh) | 图像显示装置和方法 | |
CN107636749A (zh) | 图像显示设备及其操作方法 | |
CN105739815A (zh) | 图像显示设备和图像显示方法 | |
KR20130019260A (ko) | 휴대 단말기의 동작 방법 | |
KR20160088652A (ko) | 멀티미디어 디바이스 및 그 제어 방법 | |
KR20120131258A (ko) | 영상표시장치 및 그 동작방법 | |
KR102056165B1 (ko) | 방송수신장치, 및 그 동작방법 | |
KR102269276B1 (ko) | 전자 기기, 및 그 동작 방법 | |
KR101799315B1 (ko) | 영상표시장치의 동작 방법 | |
KR101891614B1 (ko) | 휴대 단말기 및 영상표시장치의 동작 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |