CN104219791B - 通用环境扩展器 - Google Patents

通用环境扩展器 Download PDF

Info

Publication number
CN104219791B
CN104219791B CN201310410701.8A CN201310410701A CN104219791B CN 104219791 B CN104219791 B CN 104219791B CN 201310410701 A CN201310410701 A CN 201310410701A CN 104219791 B CN104219791 B CN 104219791B
Authority
CN
China
Prior art keywords
transmitter
receiver
expander
general environment
application program
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310410701.8A
Other languages
English (en)
Other versions
CN104219791A (zh
Inventor
B·W·陈
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kingston Digital Inc
Original Assignee
Kingston Digital Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kingston Digital Inc filed Critical Kingston Digital Inc
Publication of CN104219791A publication Critical patent/CN104219791A/zh
Application granted granted Critical
Publication of CN104219791B publication Critical patent/CN104219791B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/104—Peer-to-peer [P2P] networks
    • H04L67/1074—Peer-to-peer [P2P] networks for supporting data block transmission mechanisms
    • H04L67/1078—Resource delivery mechanisms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/222—Secondary servers, e.g. proxy server, cable television Head-end
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4222—Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/02—Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
    • H04L63/029—Firewall traversal, e.g. tunnelling or, creating pinholes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/104—Peer-to-peer [P2P] networks

Abstract

本发明公开一种通用环境扩展器。所述通用环境扩展器包括智能装置以及在所述智能装置上运行的主控制实用程序。所述主控制实用程序允许所述通用环境扩展器作为接收机以如下模式工作：所述模式允许所述通用环境扩展器对源内容/应用程序进行探索及反向探索以及从作为发送机的另一智能装置扩展显示环境。

Description

通用环境扩展器
技术领域
本发明涉及智能装置，且更具体而言涉及用于扩展此种装置的一种系统及一种方法。
背景技术
随着智能装置(例如智能电话及平板电脑)的日益普及和流行，期望此种装置的用户界面及用户体验可扩展至智能装置的物理界限之外。如果将智能装置用作人体的一种感官(sense)，则其可用作能够大大扩展用户身体边界的环境扩展器(environmentextender)。
智能装置来自不同的供应商并装有不同的操作系统(operating system；OS)，例如Andriod、iOS及Linux。使扩展器能够在不同OS及/或环境下与不同的智能装置一起工作是一项大的难题。
环境扩展器的概念并不是新出现的。其已由Apple TV及Android Miracast有限地实现。在Apple TV中，iPhone或iPad的音频及视频内容可被镜像至连接到高分辨率电视机(high definition TV；HDTV)的Apple TV机顶盒。音频及视频内容从智能装置iPhone或iPad串流传输至HDTV。Apple TV也可从智能装置接收所选择的媒体文件格式(例如mp4、mp3或jpeg)并在HDTV上进行播放。在此种情形中，Apple TV即用作环境扩展器。其可通过AppleTV将智能装置的环境“镜像”至HDTV上，或将“某些内容”从智能装置“串流传输”至HDTV。
在Android平台上的Miracast的情形中，智能装置的环境是通过Android机顶盒而被“镜像”至HDTV。Android机顶盒也可从智能装置接收“某些串流传输内容”并在HDTV上进行播放。
尽管这两种平台均可进行“镜像”及“串流传输”，然而其仅限于作为发送机的智能装置与作为接收机的机顶盒在相同的操作系统(OS)下运行的情形。此外，文件格式的支持受到限制。其通常仅限于mp4、mp3及jepeg文件。
从一个智能装置传输内容至在不同OS下运行的另一接收机即使不是不可能的，通常也是困难的。此种情形的实例为：从iDevice传输至Android接收机；从Android装置传输至Apple接收机(例如Apple TV)。
发明内容
本发明公开一种通用环境扩展器。所述通用环境扩展器包括智能装置以及在所述智能装置上运行的主控制实用程序。所述主控制实用程序允许所述通用环境扩展器作为接收机以如下模式工作：所述模式允许所述通用环境扩展器对源内容/应用程序进行探索及反向探索以及从作为发送机的另一智能装置扩展显示环境。
附图说明
图1为具有接收机主/镜像/播放器应用程序的传统媒体播放器的方框图；
图2为通用环境扩展器处于本地镜像模式时的图；
图3为通用环境扩展器在探索接收机主菜单时的图；
图4为通用环境扩展器处于设定模式时的图；
图5为通用环境扩展器在处于接收机应用程序探索器模式时的图；
图6为通用环境扩展器在处于接收机应用程序播放器模式时的图；
图7为通用环境扩展器在处于接收机内容探索器模式时的图；
图8为通用环境扩展器在处于接收机内容播放器模式时的图；
图9为发送机主控制实用程序的运行流程图；
图10为接收机主控制实用程序的运行流程图；
图11为接收机应用程序探索器/播放器实用程序的运行流程图；
图12为接收机内容探索器/播放器实用程序的运行流程图；以及
图13为云基础结构中的通用环境扩展器(接收机)。
主要元件标记说明
10：接收机显示装置
11：显示面板
12：媒体播放器(接收机)
13：接收机主/镜像/播放器实用程序
14：键盘
15：鼠标
16：远程控制杆
17：发送机
170：发送机显示面板
18：应用程序模式
19：发送机
190：发送机显示面板
191：用户界面模式
20：接收机显示装置
21：显示内容
22：接收机
220：存储区
221：应用程序
23：本地镜像模式/主控制实用程序
24：第一发送机
25：发送机的显示面板
26：本地镜像模式
27：第二发送机
28：发送机的显示面板
29：本地镜像模式
31：接收机显示面板
32：主控制图标
33：主控制实用程序
34：图标
35：显示面板
36：反向镜像模式
38：发送机的远程控制面板
39：远程控制模式
380：鼠标垫区域
381：反向镜像/触发器”
382：“选择显示器”
383：手指鼠标
384：“向左搜索”
385：“播放/暂停”
386：“向右搜索”
387：“返回至上一级”
388：“原始位置”
389：“软键盘”
390：“关机”
391：“降低音量”
392：“升高音量”
41：接收机显示面板
42：无线设定
43：接收机设定实用程序
44：图标
440：显示设定
45：发送机显示面板
46：反向镜像模式/发送机设定实用程序47：系统设定
48：高级设定
49：远程控制模式/发送机设定实用程序
51：接收机显示面板
52：应用程序图标
53：接收机应用程序探索器/播放器实用程序
54：图标
55：发送机显示面板
56：反向镜像模式
59：远程控制模式
61：接收机显示面板
63：应用程序探索器/播放器实用程序
65：发送机的面板
66：反向镜像模式
69：远程控制模式
71：接收机显示面板
72：内容类型图标
73：接收机内容探索器/播放器实用程序
74：图标
75：发送机显示面板
76：反向镜像模式
79：远程控制模式
81：接收机显示面板
85：发送机显示面板
86：反向镜像模式
89：远程控制模式
1300：公共云
1301：发送机
1302：路由器_P(Router_P)
1303：路由器_S(Router_S)
1304：局域网(LAN)
1305：局域网(LAN)
1306：发送机
1308：接收机
1309：发送机
1310：发送机
1312：第三方路由服务器
1320：私有IP_S
1321：客户机/接收机
1327：客户机/接收机
1330：发送机显示面板
1331：接收机显示面板
1336：发送机显示面板
1337：接收机显示面板
1338：接收机显示面板
1339：发送机显示面板
1340：发送机显示面板
具体实施方式
本发明涉及智能装置，且更具体而言涉及用于扩展此种装置的一种系统及一种方法。以下说明是为了使所属领域中的普通技术人员能够制作及利用本发明，而且本说明是以专利申请案及其要求作为上下文来提供。优选实施例的各种修改形式以及本文所述的一般原理及特征对于所属领域的技术人员而言将是显而易见的。因此，本发明并非旨在仅限于所示实施例，而是符合与本文所述原理及特征一致的最广范围。
根据一实施例的一种系统及方法包括接收机、发送机、以及在这两个装置上运行的一对应用程序。其中一个接收应用程序是在接收机中运行，而另一发送机应用程序是在目标智能装置中运行。接收机能够与安装有所述发送机应用程序的任何智能装置进行交互作用。其能够对任何智能装置环境进行镜像并能够将任何拟定的文件内容串流传输至远程显示器(例如HDTV、智能手表、智能眼镜、智能会议室投影仪、智能机顶盒、智能汽车娱乐系统、医学控制台、或智能小配件(gadget)。
本发明的系统及方法还将发送机与接收机之间的网络接口从无线局域网(wireless local area network；WLAN)扩展至广域网(wide area network；WAN)。通过应用例如在授予本申请案受让人的名称为“私有云服务器及不采用路由服务器的客户端架构(PRIVATE CLOUD SERVER AND CLIENT ARCHITECTURE WITHOUT UTILIZING A ROUTINGSERVER)”的美国专利申请第13/229,285号中所公开的原理，作为智能装置客户机的发送机可随时随地访问作为私有云服务器的接收机。发送机也可访问位于具有固定或动态互联网地址(IP address)的防火墙后面的作为私有云服务器的接收机。作为智能装置客户机的发送机在广域网(WAN)中不需要外部或第三方路由服务器1312；在局域网(LAN)中与作为私有云服务器的接收机之间建立安全的对等通信信道(secure peer-to-peer communicationchannel)时不需要进行额外的路由器设置。作为智能装置客户机的发送机可自作为私有云服务器的接收机访问服务或存储区。
提供一种能够与来自不同供应商的具有不同操作系统(OS)的智能装置一起工作的通用环境扩展器。所述通用环境扩展器能够使用户界面及用户体验超出智能装置的物理边界而扩展至同样可由用户访问的远程环境上。
根据一实施例的通用环境扩展器可与HDTV、智能手表、智能眼镜、智能会议室投影仪、智能机顶盒、智能汽车娱乐系统、医学控制台、或智能小配件一起使用。
内容一般被分为两类：
1.接收机可访问的内容
2.发送机可访问但接收机不可访问的内容
传统上，发送机会通过接口将内容“推”至接收机。随后接收机将所述内容解码并在本地显示器上进行播放。此种机制已由Apple TV以及Android媒体播放器采用。当发送机能够“探索”并发现位于其本地访问域之外的其他内容时，问题会变得明显。所述内容将必须被下载或串流传输至发送机并随后发送至接收机。从内容的源到最终显示器的路由距离即便不翻倍的话也会变得长得多。本发明的一个目的是通过使接收机能够从无论是位于发送机上还是位于发送机能够访问的网络资源上的源直接“拉”出内容而使内容的串流传输更有效率。
接收机将对接收机可访问的内容建立内容探索器。接着，发送机对所述内容进行探索及选择。随后，接收机将所述内容从原始源域“拉”出。
接收机将基于来自发送机的信息而对仅发送机可访问而接收机不可访问的内容建立反向内容探索器。接着，发送机对所述内容进行探索及选择。随后，接收机通过发送机将所述内容从原始源域“拉”出。
如图1所示，传统的媒体播放器12具有运行的主/镜像/播放器应用程序13。媒体播放器12可连接键盘14、鼠标15、及/或远程控制杆(remote control stick)16。媒体播放器12也可无线连接作为发送机19的智能电话或作为发送机17的平板电脑。智能电话与平板电脑统称为智能装置。智能装置具有以用户界面(user interface；UI)模式191或应用程序模式18运行的应用程序。连接至媒体播放器(接收机)12的接收机显示装置10可为HDTV、投影仪、汽车仪表盘、或手表面板。显示面板11显示来自接收机主/镜像/播放器应用程序的结果的可视内容。发送机17、19能够以镜像模式将内容“推”至接收机12，接收机12在接收机显示面板11上显示在发送机显示面板170或190上所示内容的准确镜像。
发送机17、19也能够以UI模式191运行，以控制接收机主/镜像/播放器实用程序13来进行配置及执行系统功能。发送机17、19还能以应用程序模式18运行，以将所选的内容、视频、音频、及/或照片“推”至接收机显示面板11或与接收机12连接的音频功能(图未示出)。
在本说明的其余全部内容中，术语“显示器”或“显示面板”适用于显示装置上的视频功能及音频功能两者。术语“内容”一般是指视频、音频、照片、及文档文件。术语“应用程序”一般是指安装在发送机及接收机上的应用程序。术语“串流传输”一般是指从所述源/向所述源“播放”及/或“读/写”内容。术语“无线”是指任何无线网络，包括WiFi局域网(WLAN)或广域网(WAN)。术语“探索器”是指存储区、文件、或内容探索器。在某些情形中，“探索器”是指应用程序探索器。术语“存储区”是指可访问的存储区，包括本地存储区或网络存储区。
从图1可见，用键盘14、鼠标15、及/或远程控制杆16对接收机12的功能进行配置或操作颇为繁琐。最好是去除键盘、鼠标、及/或远程控制杆但仍能够对接收机12的功能进行配置或操作。通过去除此种用户界面，能够节省成本并且也能为用户提供更好的解决方案。
在无线联网的环境中，用作发送机及接收机的两个智能装置可以两种不同的模式工作。一种是对等(peer-to-peer)模式，而另一种是加入无线存取点(access point；AP)模式。在自含式(self-contained)环境中，当许多客户机可连接至所述路由器时，在一个装置用作路由器的情况下，使用对等模式便足够。但对于智能装置而言，“加入无线存取点”模式在工作或家庭中更常见。
为两个智能装置(一个作为发送机且另一个作为接收机)建立对等网络并不困难。一旦建立起对等网络，发送机便能够通过浏览器或应用程序来配置接收机设定值。但如果用作主路由器的无线网络上存在另一无线存取点，则最好是使发送机与接收机两者均加入此AP网络，以使两者均可访问所述网络上的资源。可用的资源包括网络存储区、因特网能力、网络打印、网络音频等等。
对于发送机而言，通过对等网络来配置新发现的接收机以及在开放的无线环境上发现可用的存取点(AP)会变得困难且不明显。本发明的第二个目的是使发送机能够分别发现接收机及无线存取点，并使发送机能够配置接收机以及完全通过发送机上的发送机用户界面面板将接收机连接至存取点而不借助于任何外部构件(如鼠标、键盘、或远程控制杆)。
该目的的实现方法阐述于授予本申请受让人的名称为“双模式无线联网装置界面及其自动配置(DUAL-MODE WIRELESS NETWORKED DEVICE INTERFACE AND AUTOMATICCONFIGURATION THEREOF)”的美国专利申请第12/912,614号中。提供自动配置(autoconfiguration)功能，所述自动配置功能可通过便携式装置来与下游无线网络上的一个或多个便携式装置相关联以及与上游无线网络上的一个或多个存取点相关联。
就内容而言，其被分成两种类型：可播放内容与对象/链接内容。可播放内容包括视频、音频、照片、及文档。文档包括Word、Excel、Power Point、PDF、Text等等。对象/链接内容包括：URL链接、应用程序链接(例如YouTube链接、Facebook链接)等等。在传统的媒体播放器中，仅限于视频、音频及照片的可播放内容从发送机17、19被“推”至接收机12。接收机播放器实用程序13将可播放内容解码并在接收机显示面板11上进行“播放”或显示。对象/链接被称为应用程序更恰当。
由于IP及兼容性问题，发送机与接收机往往成对工作。此意味着发送机与接收机必须以相同领域的操作系统(OS)运行，例如iOS、Android或Linux。
本发明的第三个目的是消除此种限制，以使在任一种OS下运行的发送机均能够在接收机上以所有工作模式播放任一种内容及应用程序。
视频、音频及照片是发送机与接收机之间最明显的串流传输应用。传统的接收机将应用程序限制为仅支持这三种内容格式的串流传输。本发明的第四个目的是实现除对传统的视频、音频、照片内容进行串流传输之外还对Word、text、power point、Excel、PDF、及其他文档文件格式进行串流传输。
通过将内容从发送机“推”至接收机，传统媒体播放器在将内容从发送机外部串流传输至接收机过程中作为中间人时具有另一缺陷。其必须将内容从发送机外部“拉”出并随后将其“推”至接收机。就效率而言，传统的媒体播放器在串流传输过程中浪费传送带宽及发送机的资源。本发明的第五个目的是在接收机中构建“拉”机制。在上述情景中，发送机所需要做的只是将内容位置信息传递至接收机。实质上，这使接收机能够对发送机有权访问的内容(包括发送机以及与接收机存在于同一网络上的那些可访问装置上的内容)建立反向内容探索器。一旦对内容进行选择，接收机便将所述内容直接从发送机中“拉”出，而不使用任何专用资源。
本发明的第六个目的是将发送机与接收机之间的接口从无线局域网(WLAN)扩展至广域网(WAN)。此种目的的实现方法阐述于序列号为13/229,285且名称为“私有云服务器及不采用路由服务器的客户端架构(PRIVATE CLOUD SERVER AND CLIENT ARCHITECTUREWITHOUT UTILIZING A ROUTING SERVER)”的美国专利申请中。其使作为智能装置客户机的发送机能够随时随地访问作为私有云服务器的接收机。发送机也可访问位于具有固定或动态IP地址的防火墙后面的作为私有云服务器的接收机。作为智能装置客户机的发送机在WAN中不需要外部或第三方路由服务器1312；在LAN中与作为私有云服务器的接收机之间建立安全的对等通信信道时不需要进行额外的路由器设置。作为智能装置客户机的发送机可自作为私有云服务器的接收机访问服务或存储区。
如图2所示，第一和第二发送机24、27具有主控制实用程序(如图9所示)，而接收机22具有对应的主控制实用程序23(如图10所示)。在发送机主控制实用程序中，第一和第二发送机24、27首先尝试着发现接收机(步骤90)。一旦发现接收机22，其便检查本地镜像模式是否被激活(步骤91)。如果本地镜像模式被激活，则第一和第二发送机24、27向接收机发送本地镜像模式请求(步骤910)。发送机开始与接收机进行交互作用(步骤911)。如图2所示，第一和第二发送机24、27保持以本地镜像模式26、29运行。发送机的显示面板25、28被镜像至接收机显示面板21上，其中作为接收机的通用环境扩展器22以本地镜像模式23运行。显示内容21被显示及镜像于接收机显示装置20上。接收机22能够访问存储区220以及应用程序221。存储区包括本地存储区及网络上的网络可访问存储区。
如图3及图9所示，如果本地镜像模式未被激活，则第一和第二发送机24、27安装能够使其与接收机22进行通信的虚拟用户界面(UI)驱动器(步骤92)。发送机24将在其显示面板35上显示图标(icon)并以反向镜像模式36运行(步骤920)以控制接收机22。在反向镜像模式36中，手指可在显示面板区域35中自由地移动。在显示面板35中，显示有若干个图标并可对这些图标进行选择，所述图标包括“降低音量”391、“升高音量”392、“返回至上一级”387、“原始位置”388、“软键盘”389、“反向镜像/触发器”381、“选择显示器”382及“关机”390。发送机27将在其远程控制面板38上显示图标，并以远程控制模式39运行(步骤921)以控制接收机22。在远程控制模式中，手指鼠标383可在鼠标垫(mouse pad)区域380中自由移动。在远程控制面板38中，显示有若干个图标并可对这些图标进行选择，所述图标包括“向左搜索”384、“播放/暂停”385、“向右搜索”389、“降低音量”391、“升高音量”392、“返回至上一级”387、“原始位置”388、“软键盘”389、“反向镜像/触发器”381、“选择显示器”382及“关机”390。
以反向镜像模式36运行的第一发送机24可在需要时随时通过选择“反向镜像/触发器”图标381而切换至发送机27的远程控制模式39(步骤921)。所述单元可通过选择图标“关机”390而安全关机。图标“向左搜索”384、“播放/暂停”385、“向右搜索”386在被选中时主要由视频、音频及照片内容探索器及播放器使用。图标“降低音量”391及“升高音量”392在被选中时是用于对接收机22进行扬声器音量控制。选中图标“返回至上一级”387会返回至上一动作。选中图标“选择显示器”382则会选择由哪一接收机22在当前播放存储区220中的来自第一和第二发送机24,27的内容。可播放显示面板包括发送机自身的本地显示器35、38以及任何可在网络上发现的接收机22。
一旦在远程控制模式39中选中反向镜像/触发器图标381，第二发送机27便切换至反向镜像模式36。发送机的显示面板35将对接收机显示面板31上所显示的任何内容进行镜像。来自第二发送机27的远程控制面板38的某些图标也显示于接收机显示面板31的底部行上，以在反向镜像模式36中进行控制。所述图标的实例为：“降低音量”391、“升高音量”392、“返回至上一级”387、“原始位置”388、“软键盘”389、“反向镜像/触发器”381、“选择显示器”382及“关机”390。在处于反向镜像模式36时，第一发送机24也可在需要时随时通过选择“反向镜像/触发器”图标381而切换至远程控制模式39。
“选择显示器”图标382与“反向镜像/触发器”图标381相组合来指定在运行期间所现用的显示器。“选择显示器”图标382用于选择主现用显示面板。当“选择显示器”图标382选择发送机时，仅发送机显示面板被选择为主现用显示器。当“选择显示器”图标382选择接收机、同时“反向镜像/触发器”图标381处于打开状态时，接收机显示面板为主现用显示器，同时发送机显示面板也被选中。当“选择显示器”图标382选择接收机、同时“反向镜像/触发器”图标381处于关闭状态时，仅接收机显示面板被选中。
如图10所示，接收机22启动其主控制实用程序23、33。接收机22首先收听发送机请求100并力图被发送机发现(步骤101)。一旦被发现，接收机22便检查本地镜像模式是否已被激活(步骤102)？如果本地镜像模式已被激活，接收机22则开始处理本地镜像模式(步骤1020)。
如果本地镜像模式未被激活，则接收机22安装虚拟UI驱动器(步骤93)。接收机22显示主菜单31(步骤104)。所显示的菜单在需要时被镜像回至第一和第二发送机24、27(步骤106)，并等待发送机输入(步骤105)。
如图3所示，在接收机显示面板31上选择其中一个主控制图标32。在以反向镜像模式36运行的发送机显示面板35上选择相同的图标34。如果第二发送机27以远程控制模式39运行，则可在发送机显示面板38上选择控制图标。对应的控制图标也显示于接收机显示面板31的底部行上。
如图3及图9所示，第一和第二发送机24、27开始探索接收机主菜单(步骤93)。如果选择设定模式，则第一和第二发送机24、27向接收机发送请求(步骤940)。发送机可通过在任一模式中选择“反向镜像/触发器”图标381而在反向镜像模式36与远程控制模式39之间进行切换(步骤941)。第一和第二发送机24、27开始与接收机进行交互作用(步骤942)。接收机22在接收机主控制实用程序33开始处理请求(步骤1070)。第一和第二发送机24、27与接收机22之间的交互作用如图4所示。
如图4所示，可具有其他设定图标，包括无线设定42、显示器设定440、系统设定47及高级设定48。无线设定42是针对接收机无线属性，所述属性除包括可用无线存取点(AP)信息之外还包括身份(ID)、密码、及信道。对应的接收机设定实用程序43及发送机设定实用程序46、49允许第一和第二发送机24、27对接收机22进行配置(图未示出)，以在与接收机22一起位于对等无线网络上时加入另一无线网络存取点(AP)。
显示器设定440是针对接收机22及接收机显示装置20。系统设定47是针对接收机22的系统设定，包括系统信息及固件升级。高级设定48涵盖接收机22的更针对专业模式设定的其余设定方面。
如图4所示，在接收机显示面板41上选择其中一个设定图标42。在以反向镜像模式46运行的发送机显示面板45上选择相同的图标44。如果第二发送机27以远程控制模式49运行，则可在发送机显示面板38上选择控制图标。对应的控制图标也显示于接收机显示面板41的底部行上。
如果选择应用程序模式，如图5所示，第一和第二发送机24,27则向接收机发送请求(步骤96)。发送机可通过在任一种模式中选择“反向镜像/触发器”图标381而在反向镜像模式56与远程控制模式59之间进行切换(步骤961)。第一和第二发送机24、27开始与接收机进行交互作用(步骤962)。在接收机侧上，接收机激活接收机应用程序探索器/播放器实用程序53(步骤109)，如图5及图10所示。
如图5、图6及图11所示，接收机22启动应用程序探索器/播放器实用程序53、63及应用程序探索器(步骤111)。接收机22等待发送机的选择(步骤113)以判断来自应用程序221的应用程序是否可在接收机上播放(步骤114)？如果可播放，则在接收机上运行来自应用程序221的应用程序(步骤116)。如果不可播放，则接收机22在需要时指定外部资源来播放所述应用程序(步骤115)。
如图5所示，在接收机显示面板51上选择来自应用程序22的其中一个应用程序图标52。在以反向镜像模式56运行的发送机显示面板55上选择相同的图标54。如果第二发送机27以远程控制模式59运行，则可在发送机显示面板38上选择控制图标。对应的控制图标也显示于接收机显示面板51的底部行上。
如图5及图6所示，自应用程序221所选择的应用程序52通过接收机应用程序探索器/播放器实用程序53、63而在接收机显示面板61上被播放。所选的应用程序52可被反向镜像回至第一发送机24的面板65上。在远程控制模式69或反向镜像模式66中，大多数控制图标可在发送机显示面板38,65上获得或在接收机显示面板61的底行上获得。
如图9所示，如果选择探索器模式，则第一和第二发送机24、27将首先向接收机发送请求(步骤950)。发送机可通过在任一模式中选择反向镜像/触发器图标381而在反向镜像模式56与远程控制模式59之间进行切换(步骤951)。随后，第一和第二发送机24、27探索存储区220中的本地内容(步骤9510)并将内容位置发送至接收机(步骤9511)，并开始与接收机进行交互作用(步骤962)。在接收机侧上，如图10所示，如果选择探索器模式，则接收机启动接收机探索器实用程序(步骤1080)。
如图7所示，在接收机显示面板71上选择其中一个内容类型图标72。在以反向镜像模式76运行的发送机显示面板75上选择相同的图标74。如果第二发送机27以远程控制模式79运行，则可在发送机显示面板38上选择控制图标。对应的控制图标也显示于接收机显示面板71的底部行上。
如图7及图8所示，接收机内容探索器/播放器实用程序73将进一步探索(图未示出)所选的内容类型72。在存储区220中所选的内容最终由接收机应用程序探索器/播放器实用程序73在接收机显示面板81上播放。存储区220中的所播放内容可被反向镜像回至第一发送机24的显示面板85上。在远程控制模式89或反向镜像模式86中，大多数控制图标可在发送机显示面板38,85上获得或在接收机显示面板81的底部行上获得。
“选择显示器”图标382与“反向镜像/触发器”图标381相组合来指定在运行期间所现用的显示器。当“选择显示器”图标382选择发送机时，仅发送机显示面板被选择。当“选择显示器”图标382选择接收机、同时“反向镜像/触发器”图标381处于打开状态时，接收机显示面板与发送机显示面板均被选择。当“选择显示器”图标382选择接收机、同时“反向镜像/触发器”图标381处于关闭状态时，仅接收机显示面板被选择。
如图7及图12所示，接收机内容探索器/播放器实用程序73自第一和第二发送机24、27接收内容位置信息(步骤120)。随后，接收机内容探索器/播放器实用程序73在发送机上启动反向内容探索器(步骤121)。接收机内容探索器/播放器实用程序73也将自接收机22及接收机22可访问的网络域对存储区220中的内容进行探索(步骤1210)。接收机内容探索器/播放器实用程序73等待来自发送机的选择(步骤122)。存储区220中的内容被从源中“拉”出并串流传输至接收机(步骤123)。接收机22将在需要时解密存储区220中的内容(步骤126)。接收机22检查所述内容是否可在接收机上播放(步骤128)？如果可播放，则播放所述内容(步骤1280)。如果不可播放，则接收机22将在需要时指定外部资源来播放所述内容(步骤129)。
如图13所示，私有云服务器1308及客户机1327、1321用作接收机。智能装置客户机1306、1309、1310、1301用作发送机。发送机与接收机分别具有对应的显示面板1336、1339、1330、1340及1337、1338、1331。发送机与接收机组成的对可存在于同一LAN 1304上并可直接以有线或无线方式连接，如同发送机1306与接收机1308、1327一样。发送机1301也可通过WAN及公共云1300而连接至Router_P 1302及LAN 1304后面的接收机1308。Router_S1303及LAN 1305后面的发送机1309、1310可通过WAN及公共云1300而连接至Router_P 1302及LAN1304后面的接收机1308。
当发送机与接收机位于同一LAN 1304上时，“选择显示器”及“反向镜像/触发器”图标相组合地在以下三种组合其中之一中选择现用的显示器：仅发送机显示面板、仅接收机显示面板、或所述两个显示面板。
当发送机1301、1309、1310与接收机1308通过公共云1300相连时，最好是将“选择显示器”选项设定成发送机显示面板，以使所播放的内容视频、音频、照片或文档可在云存取应用中直接从源串流传输至发送机显示面板。另一种替代方法是将“选择显示器”设定成接收机显示面板并将“反向镜像/触发器”设定为开(ON)，以选择接收机显示面板且使发送机显示面板也被开启以对接收机显示面板进行镜像。此种替代设定方法对于将接收机可访问的应用程序从云串流传输至发送机显示面板而言是最佳的。
图13显示通用环境扩展器系统的多种情景。其中一种情景是在位于LAN1305上拥有一私有IP_S 1320的发送机1309与接收机1321之间。内容/应用程序的源可来自LAN 1305上的任一成员。目标显示面板可位于发送机显示面板1339自身上或位于接收机显示面板1331上抑或位于发送机显示面板与接收机显示面板两者上。
另一情景是通过LAN 1305及1304跨过云1300而位于发送机1310与接收机1308之间。内容/应用程序的源可来自LAN 1305及LAN 1304上的任一成员。目标显示面板可位于发送机显示面板1330自身上或跨过云1300而位于LAN 1304上的接收机显示面板1338,1337上、或位于同一LAN 1305上的接收机面板1331上、或者位于发送机显示面板与接收机显示面板两者上。
在位于LAN上的第一情景中，目标显示面板可位于发送机显示面板1339自身上或接收机显示面板1331上。接收机显示面板1331可为能够从发送机1309所在之处实际看到的HDTV、智能手表、智能眼镜、智能会议室投影仪、智能机顶盒、智能汽车娱乐系统、医学控制台、或智能小配件。
在跨过WAN或云1300的第二情景中，发送机1310可查看LAN 1304上通过私有云服务器/扩展器/接收机1308进行路由的任一个成员上所存储的源内容/应用程序。所述源内容/应用程序随后可在发送机显示面板1330自身上或在同一LAN上的接收机显示面板1331上被看到。接收机显示面板1331可为能够从发送机1309所在之处实际看到的HDTV、智能手表、智能眼镜、智能会议室投影仪、智能机顶盒、智能汽车娱乐系统、医学控制台、或智能小配件。
替代的实例性实施例
通用环境扩展器可适用于HDTV、智能手表、智能眼镜、智能会议室投影仪、智能机顶盒、智能汽车娱乐系统、医学控制台、或智能小配件。
尽管已根据所示实施例阐述了本发明，然而所属领域中的普通技术人员应易于得知，可对所述实施例作出改变且所述改变将属于本发明的精神及范围内。因此，所属领域中的普通技术人员可在不背离本发明的精神及范围的条件下对本发明作出许多修改。

Claims (19)

1.一种通用环境扩展器，包含：
智能装置；以及
主控制实用程序，在所述智能装置上运行，其中所述主控制实用程序允许所述扩展器作为接收机以如下模式工作，所述模式允许所述扩展器对源内容/应用程序进行探索及反向探索以及从作为发送机的另一智能装置扩展显示环境；
其中，所述主控制实用程序自所述发送机接收位置信息，以建立反向探索器，且所述接收机将位于所述发送机的源内容/应用程序从所述发送机拉出。
2.如权利要求1所述的通用环境扩展器，其特征在于，所述主控制实用程序允许由所述发送机通过远程控制或通过反向镜像图标来配置接收机设定值。
3.如权利要求1所述的通用环境扩展器，其特征在于，所述主控制实用程序提供自动配置功能，通过便携式装置，所述自动配置功能可与下游无线网络上的一个或多个便携式装置相关联并与上游无线网络上的一个或多个存取点相关联。
4.如权利要求1所述的通用环境扩展器，其特征在于，所述主控制实用程序向作为发送机的所述智能装置提供反向镜像显示及接收机内容。
5.如权利要求1所述的通用环境扩展器，其特征在于，所述主控制实用程序允许所述发送机探索所述接收机可访问的内容。
6.如权利要求1所述的通用环境扩展器，其特征在于，所述主控制实用程序从所述接收机可访问的网络装置上的源拉出串流内容；其中如果所述内容不能在本地播放，则可在需要时调用外部资源。
7.如权利要求1所述的通用环境扩展器，其特征在于，所述内容包含各种格式的视频、音频、照片及文档。
8.如权利要求1所述的通用环境扩展器，其特征在于，所述主控制实用程序播放来自所述接收机可访问的网络装置上的源的应用程序；其中如果不能在本地执行所述应用程序，则可调用外部资源。
9.如权利要求1所述的通用环境扩展器，其特征在于，所述智能装置在无线区域网(wireless area network；WAN)中不需要外部或第三方路由服务器；在局域网(local areanetwork；LAN)中与作为私有云服务器的所述接收机之间建立安全的对等通信信道时不需要进行额外的路由器设置。
10.如权利要求1所述的通用环境扩展器，其特征在于，所述智能装置包括：
处理器；
存储器；
本地存储区及网络存储区；
输入/输出(I/O)，连接至视频装置及音频装置；
下游无线接口；
上游无线接口；
操作系统；以及
虚拟用户界面(user interface；UI)实用程序，能够与来自另一智能装置的虚拟用户界面进行通信。
11.一种发送机，包括：
智能装置；
主控制实用程序，所述主控制实用程序包括：
虚拟用户界面(UI)实用程序，能够与通用环境扩展器配对，并通过所述智能装置来控制所述扩展器；以及
远程控制实用程序，用于在所述发送机的显示面板上配置及控制所述通用环境扩展器；以及
用户界面菜单，用于对源内容/应用程序进行探索、指定目标显示面板、以及播放所选的源内容/应用程序；
其中，所述发送机传递位置信息至接收机，以建立反向探索器，且所述接收机将位于所述发送机的源内容/应用程序从所述发送机拉出。
12.如权利要求11所述的发送机，其特征在于，所述远程控制实用程序包括对“选择显示器”以及“反向镜像”进行控制，以选择所述发送机及所述接收机上使用的显示面板。
13.如权利要求11所述的发送机，其特征在于，所述远程控制实用程序包括在显示器上对手指鼠标，以及“向左搜索”、“播放/暂停”、“向右搜索”、“降低音量”、“升高音量”、“返回至上一级”、“原始位置”、“软键盘”、“反向镜像/触发器”、“选择显示器”、“关机”的图标进行控制。
14.如权利要求11所述的发送机，其特征在于，所述远程控制实用程序对所述扩展器进行配置，以在处于具有所述扩展器的对等无线网络上时加入另一无线网络存取点(AP)。
15.如权利要求11所述的发送机，其特征在于，所述远程控制实用程序允许所述发送机随时随地访问作为私有云服务器的所述扩展器。
16.如权利要求15所述的发送机，其特征在于，所述私有云服务器位于具有固定或动态互联网地址(IP address)的防火墙的后面。
17.如权利要求15所述的发送机，其特征在于，来自所述扩展器的应用程序或存储区可作为私有云服务器被访问。
18.一种通用环境扩展器(universal environment extender；UEE)系统，其特征在于，包括：
一个或多个作为接收机的通用环境扩展器；
一个或多个作为发送机的与通用环境扩展器配对的智能装置；
一个或多个显示面板，连接至所述发送机；
一个或多个显示面板，连接至所述接收机；以及
网络基础结构；其中所述一个或多个接收机将来自源及显示器的存储内容及应用程序拉至一个或多个接收机显示面板上；在需要时将存储内容及应用程序镜像至发送机显示面板上；并允许在源、发送机及接收机之间进行所述存储内容的编辑/传送；
其中，所述发送机传递位置信息至所述接收机，以建立反向探索器，且所述接收机将位于发送机的源内容/应用程序从所述发送机拉出。
19.一种通用环境扩展器(UEE)系统，其特征在于，包括：
一个或多个作为接收机的通用环境扩展器；
一个或多个作为发送机的与通用环境扩展器配对的智能装置；
一个或多个显示面板，连接至所述发送机；
一个或多个显示面板，连接至所述接收机；以及
网络基础结构；其中所述一个或多个发送机将来自源及显示器的存储内容及应用程序拉至一个或多个发送机显示面板上；在需要时将存储内容及应用程序镜像至接收机显示面板上；并允许在源、发送机及接收机之间进行所述存储内容的编辑/传送；
其中，所述发送机传递位置信息至所述接收机，以建立反向探索器，且所述接收机将位于发送机的源内容/应用程序从所述发送机拉出。
CN201310410701.8A 2013-06-04 2013-09-10 通用环境扩展器 Active CN104219791B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/909,889 2013-06-04
US13/909,889 US10021180B2 (en) 2013-06-04 2013-06-04 Universal environment extender

Publications (2)

Publication Number Publication Date
CN104219791A CN104219791A (zh) 2014-12-17
CN104219791B true CN104219791B (zh) 2018-03-09

Family

ID=49033550

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310410701.8A Active CN104219791B (zh) 2013-06-04 2013-09-10 通用环境扩展器

Country Status (4)

Country Link
US (1) US10021180B2 (zh)
CN (1) CN104219791B (zh)
GB (2) GB2534672B (zh)
TW (1) TWI538499B (zh)

Families Citing this family (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9622278B2 (en) 2010-10-26 2017-04-11 Kingston Digital Inc. Dual-mode wireless networked device interface and automatic configuration thereof
US10237253B2 (en) 2011-09-09 2019-03-19 Kingston Digital, Inc. Private cloud routing server, private network service and smart device client architecture without utilizing a public cloud based routing server
US11683292B2 (en) 2011-09-09 2023-06-20 Kingston Digital, Inc. Private cloud routing server connection mechanism for use in a private communication architecture
US10601810B2 (en) 2011-09-09 2020-03-24 Kingston Digital, Inc. Private cloud routing server connection mechanism for use in a private communication architecture
US11863529B2 (en) 2011-09-09 2024-01-02 Kingston Digital, Inc. Private cloud routing server connection mechanism for use in a private communication architecture
US9781087B2 (en) 2011-09-09 2017-10-03 Kingston Digital, Inc. Private and secure communication architecture without utilizing a public cloud based routing server
US9935930B2 (en) 2011-09-09 2018-04-03 Kingston Digital, Inc. Private and secure communication architecture without utilizing a public cloud based routing server
US9804759B2 (en) 2012-05-09 2017-10-31 Apple Inc. Context-specific user interfaces
US20140282103A1 (en) * 2013-03-16 2014-09-18 Jerry Alan Crandall Data sharing
US10021180B2 (en) * 2013-06-04 2018-07-10 Kingston Digital, Inc. Universal environment extender
EP2816761A1 (en) * 2013-06-17 2014-12-24 Thomson Licensing Wifi display compatible network gateway
CN104346119B (zh) * 2013-08-09 2017-12-29 联想(北京)有限公司 显示的方法和电子设备
TWI498739B (zh) * 2013-12-17 2015-09-01 Inwellcom Technology Corp Remote control system and control method
KR102263481B1 (ko) * 2014-02-07 2021-06-11 삼성전자 주식회사 사용자단말기 및 그 제어방법
US10127002B2 (en) * 2014-04-10 2018-11-13 Screenovate Technologies Ltd. Method for real-time multimedia interface management
KR20150134674A (ko) * 2014-05-22 2015-12-02 삼성전자주식회사 사용자 단말 및 이의 제어 방법, 그리고 멀티미디어 시스템
US20150347188A1 (en) * 2014-05-30 2015-12-03 Appsfreedom, Inc. Delegated business process management for the internet of things
US10452253B2 (en) 2014-08-15 2019-10-22 Apple Inc. Weather user interface
KR102273024B1 (ko) * 2014-11-05 2021-07-05 삼성전자주식회사 디바이스가 다른 디바이스를 제어하는 방법 및 그 디바이스
US10931806B2 (en) * 2014-12-09 2021-02-23 Inwellcom Technology Co., Ltd. Remotely managing and controlling system and method
WO2016144385A1 (en) 2015-03-08 2016-09-15 Apple Inc. Sharing user-configurable graphical constructs
EP4321088A3 (en) 2015-08-20 2024-04-24 Apple Inc. Exercise-based watch face
US10326822B2 (en) * 2015-12-03 2019-06-18 Google Llc Methods, systems and media for presenting a virtual operating system on a display device
US11150798B2 (en) 2016-03-28 2021-10-19 Apple Inc. Multifunction device control of another electronic device
US10650621B1 (en) 2016-09-13 2020-05-12 Iocurrents, Inc. Interfacing with a vehicular controller area network
JP6758590B2 (ja) 2016-09-23 2020-09-23 アップル インコーポレイテッドＡｐｐｌｅ Ｉｎｃ． ウォッチシアターモード
KR102598082B1 (ko) * 2016-10-28 2023-11-03 삼성전자주식회사 영상 표시 장치, 모바일 장치 및 그 동작방법
DK179412B1 (en) 2017-05-12 2018-06-06 Apple Inc Context-Specific User Interfaces
DK179555B1 (en) 2017-05-16 2019-02-13 Apple Inc. USER INTERFACE FOR A FLASHLIGHT MODE ON AN ELECTRONIC DEVICE
US10732826B2 (en) * 2017-11-22 2020-08-04 Microsoft Technology Licensing, Llc Dynamic device interaction adaptation based on user engagement
CN108196826A (zh) * 2017-11-27 2018-06-22 中科开元信息技术(北京)有限公司 一种实时遥控通信体系架构的实现方法及系统
USD858554S1 (en) * 2018-04-25 2019-09-03 Allstate Insurance Company Display screen with graphical user interface
US11327650B2 (en) 2018-05-07 2022-05-10 Apple Inc. User interfaces having a collection of complications
KR20200084587A (ko) * 2019-01-03 2020-07-13 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
CN111831243A (zh) * 2019-04-18 2020-10-27 三星电子株式会社 显示装置、用户终端装置、以及装置的控制方法
EP3827323B1 (en) 2019-05-06 2023-12-13 Apple Inc. Restricted operation of an electronic device
US11960701B2 (en) 2019-05-06 2024-04-16 Apple Inc. Using an illustration to show the passing of time
US11131967B2 (en) 2019-05-06 2021-09-28 Apple Inc. Clock faces for an electronic device
US10878782B1 (en) 2019-09-09 2020-12-29 Apple Inc. Techniques for managing display usage
EP4133371A1 (en) 2020-05-11 2023-02-15 Apple Inc. User interfaces for managing user interface sharing
US11372659B2 (en) 2020-05-11 2022-06-28 Apple Inc. User interfaces for managing user interface sharing
DK181103B1 (en) 2020-05-11 2022-12-15 Apple Inc User interfaces related to time
CN114116570A (zh) * 2020-08-28 2022-03-01 中强光电股份有限公司 电子装置控制系统与电子装置控制方法
US11694590B2 (en) 2020-12-21 2023-07-04 Apple Inc. Dynamic user interface with time indicator
US11720239B2 (en) 2021-01-07 2023-08-08 Apple Inc. Techniques for user interfaces related to an event
US11921992B2 (en) 2021-05-14 2024-03-05 Apple Inc. User interfaces related to time

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6563515B1 (en) * 1998-05-19 2003-05-13 United Video Properties, Inc. Program guide system with video window browsing
CN1510587A (zh) * 2002-12-23 2004-07-07 �ʼҷ����ֵ��ӹɷ����޹�˾ 可扩展的光盘播放机
CN1555644A (zh) * 2001-08-13 2004-12-15 �����ɷ� 通过无线网络许可无线装置应用程序的系统和方法
US7908555B2 (en) * 2005-05-31 2011-03-15 At&T Intellectual Property I, L.P. Remote control having multiple displays for presenting multiple streams of content
US7948914B2 (en) * 2009-01-28 2011-05-24 Agere Systems Inc. Power learning security in wireless routers

Family Cites Families (65)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5408618A (en) 1992-07-31 1995-04-18 International Business Machines Corporation Automatic configuration mechanism
GB2341523B (en) 1998-09-12 2003-10-29 Ibm Apparatus and method for establishing communication in a computer network
US6892230B1 (en) 1999-06-11 2005-05-10 Microsoft Corporation Dynamic self-configuration for ad hoc peer networking using mark-up language formated description messages
US6725281B1 (en) 1999-06-11 2004-04-20 Microsoft Corporation Synchronization of controlled device state using state table and eventing in data-driven remote device control model
US6438594B1 (en) 1999-08-31 2002-08-20 Accenture Llp Delivering service to a client via a locally addressable interface
US7068680B1 (en) 1999-10-01 2006-06-27 Accenture Llp Communication service architectures for netcentric computing systems
US7020697B1 (en) 1999-10-01 2006-03-28 Accenture Llp Architectures for netcentric computing systems
US6981041B2 (en) 2000-04-13 2005-12-27 Aep Networks, Inc. Apparatus and accompanying methods for providing, through a centralized server site, an integrated virtual office environment, remotely accessible via a network-connected web browser, with remote network monitoring and management capabilities
WO2002015491A1 (en) 2000-08-17 2002-02-21 Advanced Network Technology Laboratories Pte Ltd. Reconfigurable computer networks
ATE445988T1 (de) 2000-12-04 2009-10-15 Nokia Corp Anwendergerät, verfahren und kommunikationssystem zur herstellung einer verbindung zu einem netzwerkdienstelement
US6954790B2 (en) 2000-12-05 2005-10-11 Interactive People Unplugged Ab Network-based mobile workgroup system
US7194263B2 (en) 2001-09-17 2007-03-20 Microsoft Corporation System and method for concurrent operation of a wireless device in two disjoint wireless networks
US7139818B1 (en) 2001-10-04 2006-11-21 Cisco Technology, Inc. Techniques for dynamic host configuration without direct communications between client and server
US7219140B2 (en) 2001-12-05 2007-05-15 Dennis Craig Marl Configuration and management systems for mobile and embedded devices
US7474327B2 (en) 2002-02-12 2009-01-06 Given Imaging Ltd. System and method for displaying an image stream
US6978314B2 (en) 2002-02-26 2005-12-20 Xerox Corporation System and method for locating devices on a local area network
US7408882B2 (en) 2002-06-24 2008-08-05 Paradyne Corporation Automatic discovery of network node addresses
US7562393B2 (en) 2002-10-21 2009-07-14 Alcatel-Lucent Usa Inc. Mobility access gateway
EP1586214B1 (en) 2003-01-16 2008-12-03 Research In Motion Limited System and method of exchanging identification information for mobile stations
US20050041736A1 (en) * 2003-05-07 2005-02-24 Bernie Butler-Smith Stereoscopic television signal processing method, transmission system and viewer enhancements
US7328256B2 (en) 2003-06-02 2008-02-05 Apple Inc. Method and apparatus for distributing computer files across a network to multiple clients
US7453852B2 (en) 2003-07-14 2008-11-18 Lucent Technologies Inc. Method and system for mobility across heterogeneous address spaces
FR2861934B1 (fr) 2003-10-30 2006-01-27 Wavecom Procede et dispositif d'acces a un terminal serveur mobile d'un premier reseau de communication au moyen d'un terminal client d'un autre reseau de communication.
US8590032B2 (en) 2003-12-10 2013-11-19 Aventail Llc Rule-based routing to resources through a network
US7640546B2 (en) 2004-01-16 2009-12-29 Barclays Capital Inc. Method and system for identifying active devices on network
US7231632B2 (en) 2004-04-16 2007-06-12 Apple Computer, Inc. System for reducing the number of programs necessary to render an image
US7881267B2 (en) 2004-06-04 2011-02-01 Hewlett-Packard Development Company, L.P. Portable computing device for wireless communications and method of operation
EP2264956B1 (en) 2004-07-23 2017-06-14 Citrix Systems, Inc. Method for securing remote access to private networks
US7810148B2 (en) 2005-02-25 2010-10-05 Microsoft Corporation Enabling terminal services through a firewall
US20080201751A1 (en) 2006-04-18 2008-08-21 Sherjil Ahmed Wireless Media Transmission Systems and Methods
US7676690B2 (en) 2006-05-30 2010-03-09 Dell Products L.P. Mirroring of activity between electronic devices
US8589489B2 (en) 2006-06-19 2013-11-19 Bomgar Method and system for providing secure remote access and control
US8860752B2 (en) 2006-07-13 2014-10-14 Apple Inc. Multimedia scripting
US7761087B2 (en) 2006-07-21 2010-07-20 Kyocera Corporation Apparatus, system and method for providing services through a multi-mode wireless terminal device
US7647203B1 (en) 2006-08-24 2010-01-12 Nvidia Corporation Multifaceted video benchmarking system, method, and computer program product
US8141143B2 (en) 2007-05-31 2012-03-20 Imera Systems, Inc. Method and system for providing remote access to resources in a secure data center over a network
US20090019492A1 (en) 2007-07-11 2009-01-15 United Video Properties, Inc. Systems and methods for mirroring and transcoding media content
TW200920030A (en) 2007-10-18 2009-05-01 D Link Corp The method to puncture the firewall for building the linking channel between the network terminal devices
US20090129301A1 (en) 2007-11-15 2009-05-21 Nokia Corporation And Recordation Configuring a user device to remotely access a private network
US20090303973A1 (en) 2008-06-10 2009-12-10 Nokia Siemens Networks Oy Packet data network selection
US7636764B1 (en) 2008-09-29 2009-12-22 Gene Fein Cloud resource usage in data forwarding storage
US8300056B2 (en) 2008-10-13 2012-10-30 Apple Inc. Seamless display migration
US8069217B2 (en) 2009-04-16 2011-11-29 Dell Products L.P. System and method for providing access to a shared system image
US8412798B1 (en) 2009-10-03 2013-04-02 Frank C. Wang Content delivery system and method
US10264029B2 (en) 2009-10-30 2019-04-16 Time Warner Cable Enterprises Llc Methods and apparatus for packetized content delivery over a content delivery network
EP3002703B1 (en) 2009-12-14 2017-08-30 Citrix Systems Inc. Methods and systems for communicating between trusted and non-trusted virtual machines
GB201003962D0 (en) 2010-03-10 2010-04-21 Tangentix Ltd Multimedia content delivery system
US8725880B2 (en) 2010-04-07 2014-05-13 Apple, Inc. Establishing online communication sessions between client computing devices
US8583811B2 (en) 2010-04-23 2013-11-12 Qualcomm Incorporated Gateway device for multimedia content
US20120030584A1 (en) * 2010-07-30 2012-02-02 Brian Bian Method and apparatus for dynamically switching between scalable graphical user interfaces for mobile devices
US20120042275A1 (en) * 2010-08-10 2012-02-16 Microsoft Corporation Cloning specific windows on a wireless display surface
KR20120015931A (ko) 2010-08-13 2012-02-22 삼성전자주식회사 휴대용 전자 장치 및 그것의 디스플레이 미러링 방법
US9466127B2 (en) 2010-09-30 2016-10-11 Apple Inc. Image alteration techniques
EP2622462A4 (en) 2010-10-01 2014-01-29 Z124 MULTIPLE OPERATING SYSTEM
US8583054B2 (en) * 2010-12-25 2013-11-12 Intel Corporation Wireless display performance enhancement
US8958559B2 (en) 2011-06-03 2015-02-17 Apple Inc. System and method for secure instant messaging
US20120307141A1 (en) 2011-06-06 2012-12-06 Apple Inc. Frame retiming for mirror mode
US20130177891A1 (en) * 2011-07-02 2013-07-11 Joachim Hammerschmidt Audio-visual learning system
US9203807B2 (en) 2011-09-09 2015-12-01 Kingston Digital, Inc. Private cloud server and client architecture without utilizing a routing server
US8888590B2 (en) * 2011-12-13 2014-11-18 Empire Technology Development Llc Graphics render matching for displays
US9967388B2 (en) * 2012-02-21 2018-05-08 Qualcomm Incorporated Mirrored interface navigation of multiple user interfaces
KR101911253B1 (ko) * 2012-11-21 2018-10-24 엘지전자 주식회사 전자 태그와 모바일 디바이스 및 디스플레이 장치를 포함하는 시스템의 제어 방법, 모바일 디바이스 그리고 디스플레이 장치
EP2931002A4 (en) * 2012-12-09 2016-07-13 Lg Electronics Inc METHOD AND APPARATUS FOR SESSION INITIALIZATION IN WIRELESS COMMUNICATION SYSTEM
CN104104709A (zh) * 2013-04-12 2014-10-15 上海帛茂信息科技有限公司 可与多个显示设备进行通讯的方法及使用该方法的电子设备
US10021180B2 (en) * 2013-06-04 2018-07-10 Kingston Digital, Inc. Universal environment extender

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6563515B1 (en) * 1998-05-19 2003-05-13 United Video Properties, Inc. Program guide system with video window browsing
CN1555644A (zh) * 2001-08-13 2004-12-15 �����ɷ� 通过无线网络许可无线装置应用程序的系统和方法
CN1510587A (zh) * 2002-12-23 2004-07-07 �ʼҷ����ֵ��ӹɷ����޹�˾ 可扩展的光盘播放机
US7908555B2 (en) * 2005-05-31 2011-03-15 At&T Intellectual Property I, L.P. Remote control having multiple displays for presenting multiple streams of content
US7948914B2 (en) * 2009-01-28 2011-05-24 Agere Systems Inc. Power learning security in wireless routers

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Panasonic My Home Screen Smart TV interface;John Archer;《Trusted Reviews》;20130306;第3页第2部分第3段，第3页第3部分第1-3段 *
Wi-Fi CERTIFIED Miracast- Extending the Wi-Fi experience to seamless video display - Industry (2012);wifi alliance;《wifi alliance》;20120919;第2页倒数第1、2段，第5页倒数第1、2段，第6页第1段第7行，第8页页第1段第3-7行、倒数第1段、文本框，附图3 *

Also Published As

Publication number Publication date
CN104219791A (zh) 2014-12-17
GB2534672A (en) 2016-08-03
TW201448584A (zh) 2014-12-16
US10021180B2 (en) 2018-07-10
GB201312300D0 (en) 2013-08-21
TWI538499B (zh) 2016-06-11
GB201521425D0 (en) 2016-01-20
US20140359477A1 (en) 2014-12-04
GB2534672B (en) 2017-12-20
GB2514856A (en) 2014-12-10
GB2514856B (en) 2017-12-20

Similar Documents

Publication Publication Date Title
CN104219791B (zh) 通用环境扩展器
CN108141629B (zh) 在显示设备上呈现虚拟操作系统用户界面的方法、系统和介质
US9288534B2 (en) Systems and methods for operating media devices
EP3005649B1 (en) Systems, methods, and media for presenting media content
EP3089466A1 (en) Method and device for same-screen interaction
JP6492227B2 (ja) コンテンツ投影のための方法およびモバイル端末
EP3169086A1 (en) Connection method for multimedia playing device, master device, control terminal, and system
CN101316318A (zh) 连接到服务传递平台的设备的遥控装置
CN104254005A (zh) 一种无线视频共享播放器及播放方法
US20200228858A1 (en) Methods and systems for implementing legacy remote and keystroke redirection
CN107005750A (zh) 信息处理装置、信息处理方法和程序
JP2011142392A (ja) 携帯情報処理装置
KR101333879B1 (ko) 이동 단말기 및 이동 단말기를 이용한 제어 방법
KR102051540B1 (ko) 디스플레이장치 및 그 제어방법
KR20160132049A (ko) 통신 시스템에서 콘텐츠를 제공하는 방법 및 장치
CN204316754U (zh) 带触摸显示屏可远端显示与遥控的无线路由器
CN105376069A (zh) 用于车辆头部单元的wlan适配器
CN112073761B (zh) 蓝牙功能的实现方法及装置、双硬件系统显示设备
CN107771387A (zh) 用于在不访问网络时间协议的情况下设定设备中的时间和日期的系统和方法
JP6922170B2 (ja) 情報処理装置、情報処理方法、プログラム、及び情報処理システム
CN112073768B (zh) 蓝牙通信方法及显示设备
CN103607620B (zh) 控制智能电视的移动通信终端方法及装置
CN105915984A (zh) 遥控器和WIFIMirocast冲突解决方法和系统
KR20210014582A (ko) 다중경로 무선 제어기
JP4922469B2 (ja) 電子機器、及び電子機器の制御方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant