CN110114823B - 用户系统中的共享显示链路 - Google Patents

用户系统中的共享显示链路 Download PDF

Info

Publication number
CN110114823B
CN110114823B CN201780080989.3A CN201780080989A CN110114823B CN 110114823 B CN110114823 B CN 110114823B CN 201780080989 A CN201780080989 A CN 201780080989A CN 110114823 B CN110114823 B CN 110114823B
Authority
CN
China
Prior art keywords
protocol
link
display
sensor
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780080989.3A
Other languages
English (en)
Other versions
CN110114823A (zh
Inventor
S·C·帕瓦尔
R·A·巴布
S·R·穆苏努力
S·穆斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of CN110114823A publication Critical patent/CN110114823A/zh
Application granted granted Critical
Publication of CN110114823B publication Critical patent/CN110114823B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/131—Protocols for games, networked simulations or virtual reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/14—Session management
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/212—Input arrangements for video game devices characterised by their sensors, purposes or types using sensors worn by the player, e.g. for measuring heart beat or leg activity
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/23—Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A63F13/26—Output arrangements for video game devices having at least one additional display device, e.g. on the game controller or outside a game booth
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/32—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers using local area network [LAN] connections
    • A63F13/323—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers using local area network [LAN] connections between game devices with different hardware characteristics, e.g. hand-held game devices connectable to game consoles or arcade machines
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/32—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers using local area network [LAN] connections
    • A63F13/327—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers using local area network [LAN] connections using wireless networks, e.g. Wi-Fi® or piconet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8082—Virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Biophysics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Cardiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

实施例包括装置、方法和系统，其中包括通信聚合器，其具有：第一接口，用于通过基于第一协议的第一链路与主机通信；第二接口，耦合到第一接口，用于通过基于第一协议的第二链路与显示设备通信；以及第三接口，耦合到第一接口，用于基于第二协议通过耦合到第三接口的第三链路与传感器通信。另外，主机通过基于第一协议的第一链路和基于第一协议的第二链路与显示设备通信；并且传感器通过基于第二协议的第三链路和基于第一协议的第一链路与主机通信。也可以描述和要求保护其他实施例。

Description

用户系统中的共享显示链路
相关申请的交叉引用
本申请要求2016年12月28日提交的标题为“SHARED DISPLAY LINKS IN A USERSYSTEM”的第15/393,159号美国申请的优先权。
技术领域
本发明的实施例总体涉及通信的技术领域，更具体而言涉及虚拟现实系统中的共享显示链路。
背景技术
这里提供的背景技术描述是为了总体给出本公开的背景。除非本文另外指出，否则本部分中描述的素材并不是本申请中的权利要求的现有技术，并且并不因为被包括在本部分中就被承认为是现有技术。
两个通信设备可以基于通信协议通过它们之间的通信链路通信。通信设备可以被称为设备，通信链路可以被称为链路，并且通信协议可以被称为协议。两个设备之间的链路可以是实际物理链路，例如有线线缆，或者无线链路。链路可以包括一个或多个信道，其中信道可以是两个设备之间在链路上的逻辑路径。协议可以是一组规则，该组规则允许两个设备在其间的链路上进行信息通信。
通过多个链路彼此通信的多个设备可以形成用于各种应用的通信系统。例如，虚拟现实(virtual reality，VR)系统可以包括各种设备，例如主机计算机(或者简称为主机)、显示设备、投影仪、各种传感器和/或输入设备，它们通过多个链路通信以生成复制真实环境的逼真图像、声音和其他感观。然而，连接各种设备的多个链路，例如有线线缆，可能限制用户移动并且为VR系统的用户造成不舒服的用户体验。类似地，多个链路也可能为其他通信系统和应用(例如游戏系统或其他)造成不期望的用户体验。
附图说明
通过接下来的详细描述结合附图将容易理解实施例。为了帮助此描述，相似的附图标记指定相似的结构元素。在附图中以示例方式而非限制方式示出了实施例。
图1示出了根据各种实施例的包括多个设备的示例虚拟现实系统，该多个设备基于协议通过主机和聚合器之间的共享链路经由聚合器与主机通信。
图2示出了根据各种实施例的包括多个设备的另一示例虚拟现实系统，该多个设备基于协议通过主机和聚合器之间的共享链路经由聚合器与主机通信。
图3中的(a)-(b)示出了根据各种实施例的用于虚拟现实系统中的主机和聚合器之间的共享链路的示例协议格式。
图4示出了根据各种实施例的包括多个设备的另一示例虚拟现实系统，该多个设备通过主机和聚合器之间的共享链路经由聚合器与主机通信。
图5示出了根据各种实施例的由管理多个设备的聚合器执行的操作的示例状态图，该多个设备基于协议通过主机和聚合器之间的共享链路经由聚合器与主机通信。
图6示出了根据各种实施例的用于在虚拟现实系统中管理多个设备的示例过程，该多个设备通过主机和聚合器之间的共享链路经由聚合器与主机通信。
图7示出了根据各种实施例的适合用于实现本公开的各种方面的示例设备。
图8示出了根据各种实施例的具有用于实现参考图1-图7描述的方法的指令的存储介质。
具体实施方式
虚拟现实(VR)通常指的是使用软件来生成复制真实环境的逼真图像、声音和其他感观和/或在复制的环境中模拟角色或用户的物理存在的技术。VR系统可以是通信系统，用来为用户创建VR。更详细地说，VR系统可以包括通过多个链路(例如有线线缆)耦合到各种传感器、输入设备和一个或多个显示设备的一个或多个主机。主机可以存储多媒体数据，并且将数据传送到显示设备以在显示设备上提供虚拟现实显示。主机和显示设备之间的通信可以基于被设计用于与显示设备的通信的显示协议。传送到显示设备的信息可以采取被设计用于显示信息的格式。此外，各种传感器和输入设备可以耦合到主机以提供关于用户的移动、动作和反馈的传感器信息或输入。主机可以基于传感器信息或输入调整要为用户传送到显示设备的信息。除了创建虚拟现实以外，包括主机、显示设备、传感器和输入设备的VR系统还可以对其他应用有用，例如游戏系统等。这里的VR系统可以指包括一个或多个主机、显示设备、各种传感器和输入设备等的通信系统。
在VR系统中，主机可以通过例如有线线缆的多个链路与多个设备通信，其中多个链路可能造成不期望的用户体验或其他不期望的影响。为了减少不期望的影响并改善用户体验，例如改善用户的移动性，通信聚合器(或者简称为聚合器)可以被放置在VR系统中，从而使得在聚合器和主机之间存在减少数目的链路，例如只有一个链路。因此，通过多个设备和主机之间的减少数目的有线线缆，可以改善用户的移动性。显示设备和各种传感器可以通过聚合器与主机之间的一个或多个共享链路经由聚合器与主机通信。以基于其他协议的格式接收的来自传感器或其他设备的信息可以被转换成基于用于一个或多个共享链路的协议的格式以与主机通信。为了易于理解，剩余的描述将主要在单个共享链路的背景中给出，然而本公开不限于此，而是可以利用多个共享链路来实现。
在实施例中，聚合器可以是用于VR系统中的通信的装置，并且可以包括耦合到多个接口的控制器，例如第一接口、第二接口和第三接口。聚合器可以通过耦合到第一接口的第一链路与主机通信，通过耦合到第二接口的第二链路与显示设备通信，并且通过耦合到第三接口的第三链路与传感器通信。另外，通过第一链路进行的通信和通过第二链路进行的通信可以基于相同协议，例如第一协议，其可以是被设计用于与显示设备通信以在显示设备上提供虚拟现实显示的显示协议。另一方面，通过第三链路进行的通信可以基于第二协议以为虚拟现实显示提供传感器信息。因此，主机可以通过基于第一协议(例如，显示协议)的第一链路和第二链路与显示设备通信。类似地，主机可以通过基于第一协议的第一链路和基于第二协议(例如，非显示协议)的第三链路与传感器通信。采取基于第二协议的格式来自传感器的信息可以被转换成基于第一协议的另一格式，并且与主机进一步通信。类似地，采取基于第一协议的格式来自主机的信息可以被转换成基于第二协议的另一格式，并且与传感器进一步通信。传感器与主机之间的通信，以及从一个格式另一格式的信息的转换，可以由聚合器内的控制器来促成。
在实施例中，用于虚拟现实的系统可以包括聚合器、主机、显示设备和传感器，它们全都与聚合器耦合。主机通过基于第一协议的第一链路与聚合器通信，显示设备通过基于第一协议的第二链路与聚合器通信，并且传感器通过基于第二协议的第三链路与聚合器通信。因此，主机通过基于第一协议的第一链路和基于第一协议的第二链路与显示设备通信以提供虚拟现实显示。类似地，传感器通过基于第二协议的第三链路和基于第一协议的第一链路与主机通信以为虚拟现实显示提供传感器信息。
在实施例中，虚拟现实装置可以通过第一链路耦合到主机，通过第二链路耦合到显示设备，并且通过第三链路耦合到传感器。由该虚拟现实装置执行的方法可以包括：通过第一链路从主机以基于第一协议的第一格式接收与提供虚拟现实显示相关联的第一信息；并且通过耦合到显示设备的第二链路将第一信息发送到显示设备以呈现虚拟现实显示。该方法还可以包括通过耦合到传感器的第三链路从传感器获得用于虚拟现实显示的第二信息，其中第二信息采取基于第二协议的第二格式。此外，该方法还可以包括将第二格式的第二信息转换成基于第一协议的第一格式的第二信息，并且基于第一协议通过第一链路将第一格式的第二信息发送到主机。
这里的实施例可以应用到主机可以耦合到多个设备的许多应用以减少到设备的链路的数目。为了易于理解，剩余的描述可以频繁提及VR系统。本领域技术人员将会明白，VR系统可以只是用于说明的并且可以不是限制性的，并且本公开可应用到许多其他通信系统。
在接下来的描述中，参考了附图，附图形成本文的一部分，其中相似的标号始终指定相似的部件，并且在附图中以说明方式示出了可以实现的实施例。要理解，在不脱离本公开的范围的情况下，可以利用其他实施例并且可以做出结构或逻辑上的改变。因此，接下来的详述描述不应从限制意义上来理解，并且实施例的范围由所附权利要求及其等同物来限定。
各种方法的操作可以按对于理解要求保护的主题最有帮助的方式被依次描述为多个离散动作或操作。然而，描述的顺序不应当被解释为意味着这些操作一定是依赖于顺序的。尤其，可以不按呈现的顺序执行这些操作。可以按与描述的实施例不同的顺序执行描述的操作。在额外的实施例中可以执行各种额外的操作和/或可以省略、分割或组合描述的操作。
对于本公开而言，短语“A或B”和“A和/或B”的意思是(A)、(B)或者(A和B)。对于本公开而言，短语“A、B和/或C”的意思是(A)、(B)、(C)、(A和B)、(A和C)、(B和C)或者(A、B和C)。
描述可以使用短语“在一实施例中”或者“在实施例中”，它们各自可以指一个或多个相同或不同实施例。此外，联系本公开的实施例使用的术语“包括”、“包含”、“具有”等等是同义的。
就下文(包括权利要求)使用的而言，术语“模块”或“例程”可以指以下各项、是以下各项的一部分或者包括以下各项：专用集成电路(ASIC)、电子电路、执行一个或多个软件或固件程序的处理器(共享的、专用的或群组的)和/或存储器(共享的、专用的或群组的)、组合逻辑电路和/或提供描述的功能的其他适当组件。
当本公开述及“一”或“第一”元素或者其等同物时，这样的公开包括一个或多个这样的元素，既不要求也不排除两个或更多个这样的元素。另外，对于识别的元素的顺序指示(例如，第一、第二或第三)用于在元素之间进行区分，而并不指示或暗示这种元素的要求或限制的数目，也不指示这种元素的特定位置或顺序，除非另有具体声明。
本文可以使用术语“与…耦合”和“耦合到”等等。“耦合”的意思可以是以下的一个或多个。“耦合”的意思可以是两个或更多个元素发生直接物理或电气接触。然而，“耦合”的意思也可以是两个或更多个元素与彼此间接接触，但仍与彼此合作或交互，并且意思可以是一个或多个其他元素耦合或连接在据称与彼此耦合的元素之间。作为示例而非限制，“耦合”的意思例如可以是两个或更多个元素或器件在诸如主板之类的印刷电路板上通过电连接耦合。作为示例而非限制，“耦合”的意思可以是两个或更多个元素/设备通过诸如有线和/或无线网络之类的一个或多个网络链接来合作和/或交互。作为示例而非限制，计算装置可以包括在主板上或者通过一个或多个网络链接来“耦合”的两个或更多个计算设备。
就本文使用的而言，术语“电路”可以指以下各项、是以下各项的一部分或者包括以下各项：专用集成电路(ASIC)、电子电路、执行一个或多个软件或固件程序的处理器(共享的、专用的或群组的)和/或存储器(共享的、专用的或群组的)、组合逻辑电路和/或提供描述的功能的其他适当硬件组件。就本文使用的而言，“由计算机实现的方法”可以指由一个或多个处理器、具有一个或多个处理器的计算机系统、诸如智能电话之类的移动设备(其可以包括一个或多个处理器)、平板设备、膝上型计算机、机顶盒、游戏机等等之类执行的任何方法。
图1示出了根据各种实施例的示例VR系统100，该VR系统包括多个设备，例如显示设备121、传感器131和输入设备141，它们基于协议114通过共享链路(例如主机111和聚合器101之间的链路112)经由聚合器(例如聚合器101)与主机(例如主机111)通信。
在实施例中，聚合器101可以通过基于协议114的链路112与主机111通信，通过基于协议124的链路122与显示设备121通信，通过基于协议134的链路132与传感器131通信，并且通过基于协议144的链路142与输入设备141通信。聚合器101可以将来自传感器131或输入设备141的采取基于协议134或协议144的格式的信息转换成基于协议114的格式，并且进一步将这种信息传达到主机111。类似地，聚合器101可以将来自主机111的采取基于协议114的格式的信息转换成基于协议134或协议144的格式，并且将这种信息传达到传感器131或输入设备141。在一些实施例中，协议124可以与协议114相同，并且聚合器101可以简单地在主机111和显示设备121之间基于协议114和协议124以相同格式传递信息。
在实施例中，聚合器101可以包括彼此耦合的接口103、接口105、接口107和接口109。接口，例如接口103、接口105、接口107或接口109，可以包括网络接口卡、收发机、调制解调器等等。因此，在实施例中，接口可以被称为收发机，或者调制解调器。类似地，主机111可以包括接口113和接口115，显示设备121可以包括接口125，传感器131可以包括接口135和接口137，并且输入设备141可以包括接口149。接口113、接口115、接口125、接口135、接口137和接口149可以包括网络接口卡、收发机、调制解调器等等。
在实施例中，链路112可以在接口103和接口113之间。链路122可以在接口105和接口125之间。链路132可以在接口107和接口137之间。链路142可以在接口109和接口149之间。在一些实施例中，在接口115和接口135之间可以有链路116，用于主机111在不经过聚合器101的情况下与传感器131通信。这种添加链路，例如链路116，可以用于可能想要主机111和传感器131之间的某种直接通信的一些应用。
在实施例中，链路，例如链路112、链路122、链路132、链路142或链路116，可以是实际物理链路。链路可以是有线线缆，或者无线链路。例如，链路112可以是有线线缆，而链路132可以是无线链路。不同的链路可以使用相同或不同的通信技术。例如，链路132可以使用无线蜂窝技术，链路142可以使用不同的无线技术，例如
Figure BDA0002109519670000071
而链路122可以是有线线缆。在一些其他实施例中，链路112、链路122、链路132、链路142和链路116可以全都是有线线缆。
在实施例中，用于链路112的协议114、用于链路122的协议124、用于链路132的协议134或者用于链路142的协议144可以是一些通信或计算协议。协议114、协议124、协议134或协议144可以包括在各种层中包含协议的协议栈，例如用于物理层、介质接入层、网络层或应用层的协议。在实施例中，协议114可以是被设计用于主机111和显示设备121之间的通信以在显示设备121上提供虚拟现实显示的显示协议。在实施例中，用于传感器131与聚合器101通信的协议134可以为要显示在显示设备121上的虚拟现实显示提供传感器信息。
在实施例中，协议114和协议124可以是显示协议，例如以下协议中选定的一种：移动工业处理器接口显示串行接口(MIPI-DSI)协议、高清晰度多媒体接口(HDMI)协议、显示端口(DP)协议、无线传屏(Miracast)协议、或无线显示(WiDi)协议。而协议134和协议144可以是非显示通用通信总线协议，例如以下协议中选定的一种：串行外围接口(SPI)协议、可扩缩连贯接口(SCI)协议、小型计算机系统接口(SCSI)协议、通用串行总线(USB)协议、外围组件互连(PCI)协议、或集成电路间(I2C)协议。
在一些其他实施例中，协议134或协议144可以包括无线协议。例如，协议134或协议144可以包括近场通信(NFC)协议、无线个域网(WPAN)协议、移动体域网(MBAN)协议、红外协议、
Figure BDA0002109519670000081
协议、ZigBee协议、Z-Wave协议等。
在实施例中，聚合器101可以包括控制器102来促进通过链路在多个设备之间传达的信息。在设备之间传达的信息可以包括数据、语音或多媒体。控制器102可以促进将来自第一设备的基于第一协议的第一格式的信息转换成基于第二协议的第二格式以传送到第二设备。例如，控制器102可以促进将来自传感器131或输入设备141的基于协议134或协议144的格式的信息转换成基于协议114的格式以便进一步传送到主机111。类似地，控制器102可以促进将来自主机111的基于协议114的格式的信息转换成基于协议134或协议144的格式，以便进一步传送到传感器131或输入设备141。此外，控制器102可以促进将来自传感器131的基于协议134的格式的信息转换成基于协议124的格式以便进一步传送到显示设备121。此外，协议中的一些可以是相同的。例如，协议124可以与协议114相同，并且控制器102可以简单地促进聚合器101在主机111和显示设备121之间基于协议114和协议124以相同格式传递信息。由控制器102执行的操作的更多细节可以在图5和图6中图示。
在实施例中，主机111可以是向系统100的其他设备(例如显示设备121)提供信息资源、服务和应用的计算机或计算设备。主机111和显示设备121可以利用客户端-服务器计算模型通过聚合器101通信，其中主机111可以是服务器。在一些其他实施例中，主机111和显示设备121可以利用对等模型通过聚合器101通信，其中主机111和显示设备121以对等方式共享和消耗资源。在实施例中，主机111可以是通过聚合器101与显示设备121通信的主设备，而显示设备121可以是从设备，并且主机111可以对显示设备121具有单向控制。
在实施例中，当VR系统100可以为用户创建VR时，主机111可以将仿真及其配置递送到一个或多个视觉客户端，例如显示设备121。主机111可以接收来自其他设备(例如传感器131和输入设备141)的反馈，并且基于接收到的反馈调整虚拟现实内容到显示设备121的递送。
在实施例中，显示设备121可以包括显示器127和控制器123。例如，显示器127可以是以下各项中选定的一个：发光二极管(LED)显示器、液晶显示器(LCD)、薄膜晶体管液晶显示器(TFT-LCD)、数字光处理(DLP)显示器、等离子显示器、电致发光面板、有机发光二极管(OLED)显示器、或电子纸。在实施例中，显示器127可以被安装在附着到用户的头戴装置上。控制器123可以促进通过聚合器101从主机111接收的信息被显示在显示器127上。
在实施例中，传感器131可以是以下各项中选定的一个：磁强计、加速度计、陀螺仪、压力传感器、湿度传感器、接近传感器、位置传感器或者温度传感器。此外，输入设备141可以是键盘、光标控制设备、按钮或一些其他输入设备。在一些实施例中，取决于VR系统100被设计用于的应用，传感器131或输入设备141可以被一些其他设备所替代，例如可穿戴设备。
在实施例中，主机111可以是可穿戴设备、智能电话、计算机平板、膝上型计算机、游戏控制器、机顶盒、信息娱乐控制台、物联网(IoT)设备等。
图2示出了根据各种实施例的另一示例VR系统200，该VR系统包括多个设备，例如显示设备221和传感器231，它们通过基于协议214的共享链路(例如主机211和聚合器201之间的链路212)经由聚合器(例如聚合器201)与主机(例如主机211)通信。系统200可以是图1所示的系统100的示例。例如，聚合器201可以是聚合器101的示例，主机211、显示设备221和传感器231可以分别是主机111、显示设备121和传感器131的示例。VR系统200还可以包括为了清晰没有示出的其他设备，例如输入设备。
在实施例中，聚合器201可以通过基于协议214的链路212与主机211通信，通过基于协议224的链路222与显示设备221通信，并且通过基于协议234的链路232与传感器231通信。聚合器201可以将来自传感器231的基于协议234的格式的信息转换成基于协议214的格式，并且进一步将这种信息传达到主机211。类似地，聚合器201可以将来自主机211的基于协议214的格式的信息转换成基于协议234的格式，并且进一步将这种信息传达到传感器231。在一些实施例中，协议224可以与协议214相同，并且聚合器201可以简单地在主机211和显示设备221之间基于协议214和协议224以相同格式传递信息。在实施例中，来自主机211的被显示设备221接收的信息可以在显示器227上呈现给用户。
在实施例中，聚合器201可以包括彼此耦合的接口203、接口205和接口207。类似地，主机211可以包括接口213，显示设备221可以包括接口225，并且传感器231可以包括接口237。在实施例中，链路212可以在接口203和接口213之间。链路222可以在接口205和接口225之间。链路232可以在接口207和接口237之间。在实施例中，用于链路212的协议214、用于链路222的协议224或者用于链路232的协议234可以是一些通信或计算协议。
在实施例中，链路212可以包括多于一个信道，其中信道可以是两个设备之间的单个路径。例如，链路212可以包括信道219、信道216和信道218。类似地，链路222可以包括信道229、信道226和信道228。另一方面，链路232可以包括信道236。
在实施例中，在链路中可以有不同种类的信道。例如，信道219可以是从聚合器201到主机211的单工信道，信道216可以是从主机211到聚合器201的另一单工信道，并且信道218可以是主机211与聚合器201之间的双工信道。在实施例中，信道218可以是全双工信道或半双工信道。在实施例中，信道219、信道216或信道218可以是串行信道，或者多个并行信道。类似地，信道229和信道226可以是单工信道，而信道228可以是双工信道。在实施例中，链路232可以只包括一个信道236，该信道可以是单工信道或双工信道。
在实施例中，用于链路212的协议214可以为链路212的信道的全部或一部分提供一组规则。当链路具有多个信道时，链路上的协议可以为该链路内的所有信道提供一组规则。例如，协议214可以为信道219、信道216和信道218提供一组规则。类似地，协议224可以为信道229、信道226和信道228提供一组规则。此外，协议234可以为信道236提供一组规则。
在实施例中，协议214和协议224可以是以下各项中选定的一个：MIPI-DSI协议、HDMI协议、显示端口(DP)协议、无线传屏协议、或无线显示(WiDi)协议。此外，协议234可以是以下各项中选定的一个：SPI协议、SCI协议、SCSI协议、USB协议、PCI协议、或I2C协议。
例如，协议214可以是MIPI-DSI协议，这是一种目标在于降低通常具有LCD或类似显示技术的移动设备中的显示控制器的成本的协议。MIPI-DSI协议可以包括主机(图像数据的源)和显示设备(图像数据的目的地)之间的串行总线和通信协议。当协议214是用于聚合器201和主机211之间的链路212的MIPI-DSI协议时，在链路212内可以有四个不同的信道(在MIPI-DSI标准中也称为通道)，即，MIPI-DSI-D0、MIPI-DSI-D1、MIPI-DSI-D2和MIPI-DSI-D3。MIPI-DSI-D0可以是双向双工信道，而MIPI-DSI-D1、MIPI-DSI-D2和MIPI-DSI-D3可以是从主机211经由聚合器201向显示设备221传送多媒体数据的单向单工信道。当MIPI-DSI-D0、MIPI-DSI-D1、MIPI-DSI-D2和MIPI-DSI-D3中的多于一个通道被使用时，它们可从主机211并行发送数据。因此，可以通过基于MIPI-DSI协议的链路212从主机211向聚合器201同时发送4个比特，每个通道上一个。
MIPI-DSI协议可以包括用于控制显示设备的一组命令，即显示命令集(DCS)。此外，MIPI-DSI协议可以包括一组命令，即制造方命令集(MCS)，其是定义由设备制造方决定的设备特定命令空间。原本，MCS命令可以旨在对非易失性存储器编程或设置特定显示设备寄存器。在实施例中，当协议214是MIPI-DSI协议时，MCS命令可以被扩展到对其他设备(例如传感器231)编程，以将数据从主机211发送到传感器231，或者从传感器231接收数据。
在实施例中，聚合器201可以包括控制器202来促进通过链路在多个设备之间传达的信息。控制器202可以管理多个设备，并且促进为链路内的不同信道将来自第一设备的基于第一协议的第一格式的信息转换成基于第二协议的第二格式。
为了管理多个设备，控制器202可以维护设备表来列出耦合到聚合器201的设备，例如传感器231、显示设备221、输入设备等。控制器202还可以为耦合到聚合器201的每个设备指派唯一设备识别符(ID)。主机211也可以维护与主机211通信的设备的设备表。由主机211维护的设备表可以不同于由聚合器201维护的设备表，因为可以存在不经过聚合器201直接与主机211通信的设备。为了使由主机211维护的设备表和由聚合器201维护的设备表保持一致，聚合器201可以在每当任何设备耦合到聚合器201或者从聚合器201断开连接时更新主机211。除了由控制器202或主机211维护的设备表以外，还可以有其他方式来管理多个设备。例如，每个设备可以被主机211指派唯一的设备ID，并且设备可以在从该设备发送的任何信息中包括其唯一设备ID。
当主机211想要向传感器231发送信息时，主机211可以将传感器231的唯一设备ID包括到要递送到聚合器201的信息中，从而使得聚合器201可以进一步将该信息传送到传感器231。当传感器231向聚合器201发送要传送到主机211的信息时，控制器202可以将传感器231的唯一设备ID包括到要递送到主机211的信息中。唯一设备ID可以被包括在图3中的(a)-(b)中论述的格式中。
在实施例中，控制器202可以促进将来自传感器231的基于协议234的格式的信息转换成基于协议214的格式(对于双工信道，例如链路212内的信道218)，或者转换成基于协议214的格式(对于单工信道，例如链路212内的信道219)。类似地，控制器202可以促进将来自主机211的基于协议214的格式的信息转换成基于协议234的格式以便传送到传感器231。基于协议214的信道218的示例格式的更多细节可以在图3中的(a)-(b)中示出。
例如，协议214可以是具有4个信道的MIPI-DSI协议，即MIPI-DSI-D0、MIPI-DSI-D1、MIPI-DSI-D2和MIPI-DSI-D3，其中MIPI-DSI-D0是双向双工信道。在被设计时，MIPI-DSI-D0用于在最初连接显示设备221时读取显示设备221上的扩展显示识别数据(EDID)信息。详细地说，EDID信息可以是由显示器(例如显示器227)提供来向视频源(例如，图形卡或机顶盒)描述其能力的数据结构。在实施例中，除了像原本设计的那样传送显示设备221的EDID信息以外，MIPI-DSI-D0还可以被扩展来将由聚合器201接收的来自传感器231的信息传送到主机211。控制器202可以促进将来自传感器231的基于协议234的格式的信息转换成用于MIPI-DSI协议中的MIPI-DSI-D0的格式，以将传感器231的唯一ID包括在传送到主机211的信息中。
图3中的(a)-(b)示出了根据各种实施例的用于虚拟现实系统中的设备和聚合器之间的共享链路的示例协议格式，即格式310和格式320。格式310和格式320可以是用于聚合器101和主机111之间的链路112的协议114的不同格式，如图1中所示。格式310和格式320可以是用于聚合器201和主机211之间的链路212的信道的协议214的不同格式，如图2中所示。格式310和格式320可以用于协议114或协议214的一层，例如网络层。对于协议114或协议214的其他层，例如物理层、通道管理层或应用层，可以有不同的规则和格式。
如图3中的(a)中所示，在实施例中，例如协议114或协议214的协议的格式310可以包括各种字段，例如SoT、DataID、Data 0、Data 1、ECC和EoT，其中SoT是传输开始，ECC是纠错码，并且EoT是传输结束。ECC可以是8比特纠错码，其可以允许纠正Data 0或Data 1内的一比特差错以及检测两比特差错。Data 0和Data 1可以是固定大小有效载荷，例如两个字节，以放置在两个设备之间传达的数据，这两个设备例如是主机111和聚合器101，或者主机211和聚合器201。
当协议214是具有4个信道的MIPI-DSI协议时，格式310可以用于协议214中。例如，格式310可以是用于信道MIPI-DSI-D0的格式。当最初被设计用于MIPI-DSI-D0时，DataID可以包含数据的源，以及数据类型信息，例如在应用层中生成数据的应用。在实施例中，DataID可以被扩展到包括信息所来自或者被发送到的设备的唯一设备ID。例如，当要被传送到主机111或主机211的信息来自传感器131、输入设备141或传感器231时，DataID可以包括图1中的传感器131或输入设备141或者图2中的传感器231的唯一设备ID。通过将来自传感器131或输入设备141的信息放置在Data 0或Data 1分组内，同时将传感器131或输入设备141的唯一设备ID放置在DataID中，聚合器101可以通过链路112将信息发送到主机111。因此，来自传感器131或输入设备141的信息被通过链路112的MIPI-DSI-D0信道发送。因此，除了在主机111和显示设备121之间通信以外，还对传感器131或输入设备141共享链路112。
如图3中的(b)中所示，在实施例中，例如协议114或协议214的协议的格式320可以包括各种字段，例如SoT、ECC、校验和以及EoT，其中SoT是传输开始，ECC是纠错码，并且EoT是传输结束。此外，格式320可以包括固定大小有效载荷，例如Data 0、Data 1及更多。因此，字计数(Wc)、Data Wc-2、Data Wc-1可以用于表达在有效载荷中有多少字(字节)以便接收机可以确定有效载荷的结束。有效载荷(例如Data0、Data 1及更多)可以用于放置在两个设备之间传达的信息，这两个设备例如是主机111和聚合器101，或者主机211和聚合器201。
当协议214是具有4个信道的MIPI-DSI协议时，格式320可以用于协议214中。例如，格式320可以是用于信道MIPI-DSI-D0的格式。当最初被设计用于MIPI-DSI-D0时，DataID可以包含数据的源，以及数据类型信息，例如在应用层中生成数据的应用。在实施例中，DataID可以被扩展到包括信息所来自或者被发送到的设备的唯一设备ID。例如，当要被传送到主机111或主机211的信息来自传感器131、输入设备141或传感器231时，数据ID可以包括图1中的传感器131或输入设备141或者图2中的传感器231的唯一设备ID。通过将来自传感器131或输入设备141的信息放置在Data 0、Data 1或其他灵活分组内，同时将传感器131或输入设备141的唯一设备ID放置在DataID中，聚合器101可以通过链路112将信息发送到主机111。因此，来自传感器131或输入设备141的信息被通过链路112的MIPI-DSI-D0信道发送。因此，除了在主机111和显示设备121之间通信以外，还对传感器131或输入设备141共享链路112。
在实施例中，格式310和格式320对于不同的信息可以用于同一协议114或同一协议214，这取决于信息的内容或信息的大小。例如，格式310和格式320可以是对MIPI-DSI协议标准的D0信道中的不同格式的例示。聚合器101可以对来自传感器131的要被传送到主机111的少量数据选择具有两字节数据的格式310。另一方面，当来自传感器131的数据的大小可以大于预定阈值时，聚合器可以选择具有灵活有效载荷的格式320来发送要被发送到主机111的来自传感器131的数据。
图4示出了根据各种实施例的另一示例虚拟现实系统400，该虚拟现实系统包括多个设备，例如显示设备421、传感器431和输入设备441，它们通过基于协议414的共享链路(例如主机411和聚合器401之间的链路412)经由聚合器(例如聚合器401)与主机(例如主机411)通信。系统400可以是图1所示的系统100的示例。例如，聚合器401可以是聚合器101的示例，主机411、显示设备421、传感器431和输入设备441可以分别是主机111、显示设备121、传感器131和输入设备441的示例。
在实施例中，聚合器401可以通过基于协议414的链路412与主机411通信，通过基于协议424的链路422与显示设备421通信，通过基于协议434的链路432与传感器431通信，并且通过基于协议444的链路442与输入设备441通信。聚合器401可以将来自传感器431或输入设备441的基于协议434或协议444的格式的信息转换成基于协议414的格式，并且进一步将这种信息传达到主机411。类似地，聚合器401可以将来自主机411的基于协议414的格式的信息转换成基于协议434或协议444的格式，并且将这种信息传达到传感器431或者输入设备441。在一些实施例中，协议424可以与协议414相同，并且聚合器401可以简单地在主机411和显示设备421之间基于协议414和协议424以相同格式传递信息。
在实施例中，聚合器401可以包括彼此耦合的接口403、接口405、接口407和接口409。类似地，主机411可以包括接口413，显示设备421可以包括接口425，传感器431可以包括接口437，并且输入设备441可以包括接口449。在实施例中，链路412可以在接口403和接口413之间。链路422可以在接口405和接口425之间。链路432可以在接口407和接口437之间。链路442可以在接口409和接口449之间。在实施例中，用于链路412的协议414、用于链路422的协议424、用于链路432的协议434或者用于链路442的协议444可以是一些通信或计算协议。
在实施例中，聚合器401可以包括控制器402来促进各种设备(例如主机411、设备421、传感器431或输入设备441)之间的通信。显示设备421可以包括显示器427和控制器423，其中控制器423可以管理从链路422接收的要在显示器427上显示的信息。
显示器427可以包括对其他设备的机械支撑。例如，传感器431、输入设备441和聚合器401可以被安放在显示器427上。包括安放在一起的传感器431、输入设备441和聚合器401的这种显示器427可以帮助用户对VR系统或者例如医疗系统的其他系统中的用户体验具有更好的控制。
图5示出了根据各种实施例的由管理多个设备的聚合器执行的操作的示例状态图500，该多个设备基于一些协议通过主机和聚合器之间的共享链路经由聚合器与主机通信。在实施例中，状态图500可以由图1中的聚合器101中的控制器102来管理或促进，以管理主机111、显示设备121、传感器131和输入设备141之间的通信。状态图500也可以由图2中的聚合器201中的控制器202来管理。
在实施例中，状态S0可以是初始状态。例如，当聚合器101空闲，并且在主机(例如主机111)、显示设备(例如显示设备121)和传感器(例如传感器131)或输入设备141之间没有进行通信时，聚合器101可以处于初始状态，例如状态S0。此外，控制器102例如可以注册连接到聚合器101的设备，以构建设备表，并且为每个设备，例如主机111、显示设备121、传感器131和输入设备141，指派唯一设备ID。
在实施例中，在交互551之后，聚合器可以在没有来自传感器(例如传感器131)或输入设备141的信息时移动到状态S1，同时聚合器101可以接收来自主机(例如主机111)的信息，并且将接收到的信息传递到显示设备，例如显示设备121。在交互553之后，聚合器101可以在没有来自传感器(例如传感器131)或输入设备141的信息时停留在状态S1。
在实施例中，当聚合器处于状态S0时在交互555之后，或者当聚合器处于状态S1时在交互557之后，聚合器可以在有从传感器(例如传感器131)或输入设备141接收的信息时移动到状态S2。当从传感器(例如传感器131)或输入设备141接收到信息时，聚合器101的控制器102可以将来自传感器的基于协议134或协议144的格式的信息转换成基于协议114或协议124的格式，以便传送到主机(例如主机111)或显示设备(例如显示设备121)。
在实施例中，在交互559之后，当来自传感器的信息已被处理时，聚合器可以从状态S2移动到状态S0。
图6示出了根据各种实施例的用于在虚拟现实系统中管理多个设备的示例过程600，该多个设备通过主机和聚合器之间的共享链路经由聚合器与主机通信。在实施例中，过程600可以由虚拟现实装置(例如图1中的聚合器101中的控制器102)来管理，以促进主机111、显示设备121、传感器131和输入设备141之间的通信。
过程600可以开始于交互601。在交互601期间，可以通过第一链路从主机以基于第一协议的第一格式接收与提供虚拟现实显示相关联的第一信息。例如，在交互601处，基于第一协议114的第一格式的第一信息可以例如由聚合器101通过第一链路(例如链路112)从主机111接收。
在交互603期间，第一信息可以通过耦合到显示设备的第二链路被发送到显示设备，以呈现虚拟现实显示。例如，在交互603处，第一信息可以例如由聚合器101通过耦合到显示设备121的第二链路(例如链路122)发送到第二设备，例如显示设备121。
在交互605期间，可以通过耦合到传感器的第三链路从传感器获得用于虚拟现实显示的第二信息，其中第二信息采取基于第二协议的第二格式。例如，在交互605处，可以例如由聚合器101通过耦合到传感器131的链路132从传感器131获得第二信息，其中第二信息采取基于协议134的第二格式。
在交互607期间，第二格式的第二信息可以被转换成基于第一协议的第一格式的第二信息。例如，在交互607处，第二信息可以例如被聚合器101从第二格式转换成基于协议114的第一格式的第二信息。
在交互609期间，可以基于第一协议通过第一链路以第一格式将第二信息发送到主机。例如，在交互609处，第二信息可以被聚合器101基于协议114通过链路114以第一格式发送到主机111。
图7示出了可以适合作为实现本公开的选定方面的设备的示例通信设备700。如图所示，设备700可以包括一个或多个处理器702，每个处理器具有一个或多个处理器核。设备700可以是如图1所示的控制器102或者如图2所示的控制器202的示例。此外，设备700可以包括存储器704，存储器可以是数种已知的永久存储介质中的任何一种。此外，设备700可以包括通信接口710和714，它们可以是如图1所示的接口103、接口105、接口107或接口109的示例。通信接口710和714可以是数种已知的通信接口中的任何一种。元素可以经由系统总线712彼此耦合，系统总线可以代表一个或多个总线。在多个总线的情况下，它们可由一个或多个总线桥(未示出)桥接。
这些元素的每一者可以执行本领域中已知的其传统功能。具体地，系统存储器704可以被用来存储编程指令的工作拷贝和永久拷贝，这些编程指令实现如结合图1-图6所描述的与管理多个设备基于协议通过主机和聚合器之间的共享链路经由聚合器与主机通信相关联的操作，和/或其他功能，统称为通信逻辑722。各种元素可由(一个或多个)处理器702所支持的汇编指令或者可以被编译成这种指令的诸如C的高级语言实现。
这些元素702-714的数目、能力和/或容量可以取决于设备700被配置为支持的其他设备的数目而变化。在其他方面，元素702-714的构成是已知的，并且因此将不被进一步描述。
本领域技术人员将会明白，本公开可实现为方法或计算机程序产品。因此，本公开除了如先前所述那样用硬件实现以外，还可以采取如下形式：完全软件的实施例(包括固件、常驻软件、微代码等等)，或者组合软件和硬件方面的实施例，这可以被概括统称为“电路”、“模块”或“系统”。
此外，本公开可以采取体现在任何有形或非暂时性表达介质中的计算机程序产品的形式，在该介质中体现有计算机可以使用程序代码。图8示出了可以适合用于存储指令的示例计算机可读非暂时性存储介质，响应于装置对该指令的执行，该指令使得该装置实现本公开的选定方面。如图所示，非暂时性计算机可读存储介质802可以包括多个编程指令804。编程指令804可以被配置为使得设备(例如设备700)能够响应于编程指令的执行而执行例如与图1所示的控制器102或图2所示的控制器202相关联的各种操作。
在替换实施例中，编程指令804可以改为被布置在多个计算机可读非暂时性存储介质802上。在替换实施例中，编程指令804可以被布置在计算机可读暂时性存储介质802上，例如信号。可以利用一个或多个计算机可使用或计算机可读介质的任何组合。计算机可使用或计算机可读介质可以例如但不限于是电的、磁的、光的、电磁的、红外的或半导体的系统、装置、设备或传播介质。计算机可读介质的更具体示例(非穷举列举)将包括以下内容：具有一个或多个导线的电连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储设备、传输介质(例如支持互联网或内联网的那些)或者磁存储设备。注意，计算机可使用或计算机可读介质甚至可以是其上打印有程序的纸或另一适当介质，因为程序可以经由例如对纸或其他介质的光学扫描被电子捕捉，然后在必要时被以适当的方式编译、解释或者以其他方式处理并随后被存储在计算机存储器中。在本文档的上下文中，计算机可使用或计算机可读存储介质可以是任何可包含、存储、传达、传播或传输程序供指令执行系统、装置或者设备使用或与之结合使用的介质。计算机可使用介质可以包括在基带中或者作为载波一部分传播的数据信号，其中体现了计算机可使用程序代码。可利用任何适当的介质来传输计算机可使用程序代码，包括但不限于无线的、有线的、光缆、RF等等。
可以以一种或多种编程语言的任何组合来编写用于执行本公开的操作的计算机程序代码，所述编程语言包括面向对象的编程语言，比如Java、Smalltalk、C++等，还包括传统的过程式编程语言，比如“C”编程语言或类似的编程语言。程序代码可以完全地在用户的计算机上执行、部分地在用户的计算机上执行、作为一个独立的软件包执行、部分在用户的计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在后一种场景中，远程计算机可以通过包括局域网(LAN)或广域网(WAN)在内的任何类型的网络连接到用户的计算机，或者可以与外部计算机进行连接(例如，利用互联网服务提供商通过互联网进行)。
参考根据本公开的实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本公开。应当理解，流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合可以由计算机程序指令实现。这些计算机程序指令可以被提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器，从而生产出一种机器，使得这些指令在经由计算机或其它可编程数据处理装置的处理器执行时，产生了用于实现流程图和/或框图的一个或多个方框中规定的功能/动作的装置。
也可以把计算机程序指令存储在计算机可读介质中，这些指令可以指引计算机或其他可编程数据处理装置以特定方式工作，从而使得存储在计算机可读介质中的指令产生出包括实现流程图和/或框图的一个或多个方框中规定的功能/动作的指令装置的制造品。
也可以把计算机程序指令加载到计算机或者其他可编程数据处理装置上以使得一系列操作步骤在该计算机或其他可编程装置上被执行来产生计算机实现的过程，使得在该计算机或其他可编程装置上执行的指令提供用于实现流程图和/或方框图的一个或多个方框中指定的功能/动作的过程。
附图中的流程图和框图示出了根据本公开的各种实施例的系统、方法和计算机程序产品的可能实现的体系结构、功能和操作。在这点上，流程图或框图中的每个方框可代表一模块、片段或代码的一部分，所述模块、片段或代码的一部分包括用于实现(一个或多个)规定的逻辑功能的一个或多个可执行指令。也应当注意，在一些替换实现方式中，方框中标注的功能也可以以不同于附图中标注的顺序发生。例如，取决于所涉及的功能，接连示出的两个方框实际上可以被基本同时执行，或者方框有时可以按相反顺序被执行。还要注意，框图和/或流程图的每个方框、以及框图和/或流程图中的方框的组合，可以由执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以由专用硬件和计算机指令的组合来实现。
实施例可以实现为计算机过程、计算系统或者实现为诸如计算机程序产品或计算机可读介质之类的制造品。计算机程序产品可以是可以被计算机系统读取并且编码了用于执行计算机过程的计算机程序指令的计算机存储介质。
所附权利要求中的所有装置或步骤加功能元素的对应结构、材料、动作和等同物意图包括用于如具体要求保护的那样与其他要求保护的元素结合执行该功能的任何结构、材料或动作。本公开的说明书是出于例示和描述的目的给出的，而并不意图是穷尽无遗的或者限于所公开形式的公开。在不脱离本公开的范围和精神的情况下，本领域普通技术人员将清楚许多修改和变化。选择和描述实施例是为了最好地说明本公开的原理和实际应用，并且使得本领域的其他普通技术人员能够理解本公开来实现具有适于所设想的特定用途的各种修改的实施例。
从而已描述了本公开的各种示例实施例，包括但不限于：
示例1可以包括一种用于在虚拟现实系统中通信的装置，包括：第一接口，用于基于第一协议通过与所述第一接口耦合的第一链路与主机通信；第二接口，与所述第一接口耦合，用于基于所述第一协议通过与所述第二接口耦合的第二链路与显示设备通信，其中，所述主机通过基于所述第一协议的第一链路和基于所述第一协议的第二链路与所述显示设备通信，其中，所述第一协议是被设计用于与所述显示设备通信以在所述显示设备上提供虚拟现实显示的显示协议；第三接口，与所述第一接口耦合，用于基于第二协议通过与所述第三接口耦合的第三链路与传感器通信来提供用于所述虚拟现实显示的传感器信息；以及控制器，与所述第一接口和第三接口耦合，用于促进所述传感器通过基于所述第二协议的第三链路和基于所述第一协议的第一链路与所述主机通信。
示例2可以包括示例1和/或这里的一些其他示例的装置，其中，所述控制器还与所述第二接口耦合以促进所述传感器通过基于所述第二协议的第三链路和基于所述第一协议的第二链路与所述显示设备通信。
示例3可以包括示例1和/或这里的一些其他示例的装置，还包括：第四接口，与所述第一接口耦合，用于基于第三协议通过与所述第四接口耦合的第四链路与输入设备通信，其中，所述控制器还与所述第四接口耦合以促进所述输入设备通过基于所述第三协议的第四链路和基于所述第一协议的第一链路与所述主机通信。
示例4可以包括示例1-3的任何一者和/或这里的一些其他示例的装置，其中，所述输入设备是以下各项中选定的一者：键盘、光标控制设备、指示杆、轨迹球或触摸板。
示例5可以包括示例1-3的任何一者和/或这里的一些其他示例的装置，其中，所述传感器是以下各项中选定的一者：磁强计、加速度计、陀螺仪、压力传感器、湿度传感器、接近传感器、位置传感器或温度传感器。
示例6可以包括示例1-3的任何一者和/或这里的一些其他示例的装置，其中，所述显示设备包括显示器，并且其中，所述显示器是以下各项中选定的一者：发光二极管(LED)显示器、阴极射线管(CRT)显示器、液晶显示器(LCD)、薄膜晶体管液晶显示器(TFT-LCD)、数字光处理(DLP)显示器、等离子显示器、电致发光面板、有机发光二极管(OLED)显示器或电子纸。
示例7可以包括示例6和/或这里的一些其他示例的装置，其中，所述传感器和所述装置被安放在所述显示设备的显示器上。
示例8可以包括示例1-3的任何一者和/或这里的一些其他示例的装置，其中，所述第一协议是以下各项中选定的一者：移动工业处理器接口显示串行接口(MIPI-DSI)协议、高清晰度多媒体接口(HDMI)协议、显示端口(DP)协议、无线传屏协议或无线显示(WiDi)协议。
示例9可以包括示例1-3的任何一者和/或这里的一些其他示例的装置，其中，所述第二协议是以下各项中选定的一者：串行外围接口(SPI)协议、可扩缩连贯接口(SCI)协议、小型计算机系统接口(SCSI)协议、通用串行总线(USB)协议、外围组件互连(PCI)协议或集成电路间(I2C)协议。
示例10可以包括示例1-3的任何一者和/或这里的一些其他示例的装置，其中，基于作为被设计用于与所述显示设备通信的显示协议的所述第一协议传达的信息采取被设计用于显示信息的第一格式，基于所述第二协议传达的信息采取第二格式，其中，所述控制器将基于所述第二协议通过所述第三链路来自所述传感器的所述第二格式的信息转换成所述第一协议的所述第一格式的信息，并且将基于所述第一协议通过所述第一链路从所述主机去往所述传感器的所述第一格式的信息转换成所述第二协议的所述第二格式的信息。
示例11可以包括示例1-3的任何一者和/或这里的一些其他示例的装置，其中，基于所述第三协议传达的信息采取第三格式，其中，所述控制器将基于所述第三协议通过所述第三链路来自所述输入设备的所述第三格式的信息转换成所述第一协议的所述第一格式的信息，并且将基于所述第一协议通过所述第一链路从所述主机去往所述输入设备的所述第一格式的信息转换成所述第三协议的所述第三格式的信息。
示例12可以包括示例1-3的任何一者和/或这里的一些其他示例的装置，其中，基于所述第一协议的第一链路包括双工信道和多个单工信道，并且其中，来自所述传感器的信息在所述第一链路的双工信道上被发送到所述主机。
示例13可以包括一种用于操作虚拟现实装置的方法，包括：通过第一链路从主机以基于第一协议的第一格式接收与提供虚拟现实显示相关联的第一信息；通过与显示设备耦合的第二链路将所述第一信息发送到所述显示设备以呈现所述虚拟现实显示；通过与传感器耦合的第三链路从所述传感器获得用于所述虚拟现实显示的第二信息，其中，所述第二信息采取基于第二协议的第二格式；将所述第二格式的第二信息转换成基于所述第一协议的第一格式的第二信息；并且基于所述第一协议通过所述第一链路将所述第一格式的第二信息发送到所述主机。
示例14可以包括示例13和/或这里的一些其他示例的方法，还包括：基于所述第一协议通过所述第二链路将所述第一格式的第二信息发送到所述显示设备。
示例15可以包括示例13和/或这里的一些其他示例的方法，还包括：通过与输入设备耦合的第四链路从所述输入设备获得第三信息，其中，所述第三信息采取基于第三协议的第三格式；将所述第三格式的第三信息转换成基于所述第一协议的第一格式的第三信息；并且基于所述第一协议通过所述第一链路将所述第一格式的第三信息发送到所述主机。
示例16可以包括示例13-15的任何一者和/或这里的一些其他示例的方法，其中，所述传感器是以下各项中选定的一者：磁强计、加速度计、陀螺仪、压力传感器、湿度传感器、接近传感器、位置传感器或温度传感器；并且所述输入设备是以下各项中选定的一者：键盘、光标控制设备、指示杆、轨迹球或触摸板。
示例17可以包括示例13-15的任何一者和/或这里的一些其他示例的方法，其中，所述显示设备包括显示器，并且其中，所述显示器是以下各项中选定的一者：发光二极管(LED)显示器、阴极射线管(CRT)显示器、液晶显示器(LCD)、薄膜晶体管液晶显示器(TFT-LCD)、数字光处理(DLP)显示器、等离子显示器、电致发光面板、有机发光二极管(OLED)显示器或电子纸。
示例18可以包括示例13-15的任何一者和/或这里的一些其他示例的方法，其中，所述第一协议是以下各项中选定的一者：移动工业处理器接口显示串行接口(MIPI-DSI)协议、高清晰度多媒体接口(HDMI)协议、显示端口(DP)协议、无线传屏协议或无线显示(WiDi)协议；并且所述第二协议是以下各项中选定的一者：串行外围接口(SPI)协议、可扩缩连贯接口(SCI)协议、小型计算机系统接口(SCSI)协议、通用串行总线(USB)协议、外围组件互连(PCI)协议或集成电路间(I2C)协议。
示例19可以包括示例13-15的任何一者和/或这里的一些其他示例的方法，其中，所述第一链路包括双工信道以及从所述主机到所述虚拟现实装置的多个单工信道，并且其中，发送所述第一格式的第二信息包括通过所述第一链路的双工信道发送所述第一格式的第二信息。
示例20可以包括示例19和/或这里的一些其他示例的方法，其中，当所述第二信息的大小大于预定阈值时，所述第二格式的第二信息被转换成基于所述第一协议的第四格式而不是所述第一格式的第二信息以通过所述第一链路的双工信道被发送到所述主机。
示例21可以包括一种用于虚拟现实的系统，包括：聚合器；与所述聚合器耦合的主机，其中，所述主机通过基于第一协议的第一链路与所述聚合器通信；与所述聚合器耦合的显示设备，其中，所述显示设备通过基于所述第一协议的第二链路与所述聚合器通信，并且其中，所述主机通过基于所述第一协议的第一链路和基于所述第一协议的第二链路与所述显示设备通信以提供虚拟现实显示；以及与所述聚合器耦合的传感器，其中，所述传感器通过基于第二协议的第三链路与所述聚合器通信，并且其中，所述传感器通过基于所述第二协议的第三链路和基于所述第一协议的第一链路与所述主机通信以提供用于所述虚拟现实显示的传感器信息。
示例22可以包括示例21和/或这里的一些其他示例的用于虚拟现实的系统，还包括：与所述聚合器耦合的输入设备，其中，所述输入设备通过基于第三协议的第四链路与所述聚合器通信，并且其中，所述输入设备通过基于所述第三协议的第四链路和基于所述第一协议的第一链路与所述主机通信。
示例23可以包括示例21-22的任何一者和/或这里的一些其他示例的用于虚拟现实的系统，其中，所述传感器是以下各项中选定的一者：磁强计、加速度计、陀螺仪、压力传感器、湿度传感器、接近传感器、位置传感器或温度传感器；并且所述输入设备是以下各项中选定的一者：键盘、光标控制设备、指示杆、轨迹球或触摸板。
示例24可以包括示例21-22的任何一者和/或这里的一些其他示例的用于虚拟现实的系统，其中，所述显示设备包括显示器，并且其中，所述显示器是以下各项中选定的一者：发光二极管(LED)显示器、阴极射线管(CRT)显示器、液晶显示器(LCD)、薄膜晶体管液晶显示器(TFT-LCD)、数字光处理(DLP)显示器、等离子显示器、电致发光面板、有机发光二极管(OLED)显示器或电子纸。
示例25可以包括示例21-22的任何一者和/或这里的一些其他示例的用于虚拟现实的系统，其中，所述第一协议是以下各项中选定的一者：移动工业处理器接口显示串行接口(MIPI-DSI)协议、高清晰度多媒体接口(HDMI)协议、显示端口(DP)协议、无线传屏协议或无线显示(WiDi)协议；并且所述第二协议是以下各项中选定的一者：串行外围接口(SPI)协议、可扩缩连贯接口(SCI)协议、小型计算机系统接口(SCSI)协议、通用串行总线(USB)协议、外围组件互连(PCI)协议或集成电路间(I2C)协议。
示例26可以包括一个或多个包括指令的非暂时性计算机可读介质，所述指令使得虚拟现实系统中的通信装置响应于所述通信装置对所述指令的执行而：基于第一协议通过与所述通信装置的第一接口耦合的第一链路与主机通信；基于所述第一协议通过与所述通信装置的第二接口耦合的第二链路与显示设备通信，其中，所述主机通过基于所述第一协议的第一链路和基于所述第一协议的第二链路与所述显示设备通信，并且其中，所述第一协议是被设计用于与所述显示设备通信以在所述显示设备上提供虚拟现实显示的显示协议；基于第二协议通过与所述通信装置的第三接口耦合的第三链路与传感器通信以提供用于所述虚拟现实显示的传感器信息；并且由控制器促进所述传感器和所述主机之间通过基于所述第二协议的第三链路和基于所述第一协议的第一链路的通信，其中，所述控制器耦合到所述第一接口、所述第二接口和所述第三接口。
示例27可以包括示例26和/或这里的一些其他示例的一个或多个非暂时性计算机可读介质，其中，所述通信装置还被使得：由所述控制器促进所述传感器和所述显示设备之间通过基于所述第二协议的第三链路和基于所述第一协议的第二链路的通信。
示例28可以包括示例26和/或这里的一些其他示例的一个或多个非暂时性计算机可读介质，其中，所述通信装置还被使得：基于第三协议通过与所述通信装置的第四接口耦合的第四链路与输入设备通信，并且由所述控制器促进所述输入设备和所述主机之间通过基于所述第三协议的第四链路和基于所述第一协议的第一链路的通信，其中，所述控制器耦合到所述第四接口。
示例29可以包括示例26-28的任何一者和/或这里的一些其他示例的一个或多个非暂时性计算机可读介质，其中，所述输入设备是以下各项中选定的一者：键盘、光标控制设备、指示杆、轨迹球或触摸板。
示例30可以包括示例26-28的任何一者和/或这里的一些其他示例的一个或多个非暂时性计算机可读介质，其中，所述传感器是以下各项中选定的一者：磁强计、加速度计、陀螺仪、压力传感器、湿度传感器、接近传感器、位置传感器或温度传感器。
示例31可以包括示例26-28的任何一者和/或这里的一些其他示例的一个或多个非暂时性计算机可读介质，其中，所述显示设备包括显示器，并且其中，所述显示器是以下各项中选定的一者：发光二极管(LED)显示器、阴极射线管(CRT)显示器、液晶显示器(LCD)、薄膜晶体管液晶显示器(TFT-LCD)、数字光处理(DLP)显示器、等离子显示器、电致发光面板、有机发光二极管(OLED)显示器或电子纸。
示例32可以包括示例26-28的任何一者和/或这里的一些其他示例的一个或多个非暂时性计算机可读介质，其中，所述第一协议是以下各项中选定的一者：移动工业处理器接口显示串行接口(MIPI-DSI)协议、高清晰度多媒体接口(HDMI)协议、显示端口(DP)协议、无线传屏协议或无线显示(WiDi)协议。
示例33可以包括示例26-28的任何一者和/或这里的一些其他示例的一个或多个非暂时性计算机可读介质，其中，所述第二协议是以下各项中选定的一者：串行外围接口(SPI)协议、可扩缩连贯接口(SCI)协议、小型计算机系统接口(SCSI)协议、通用串行总线(USB)协议、外围组件互连(PCI)协议或集成电路间(I2C)协议。
示例34可以包括示例26-28的任何一者和/或这里的一些其他示例的一个或多个非暂时性计算机可读介质，其中，基于作为被设计用于与所述显示设备通信的显示协议的所述第一协议传达的信息采取被设计用于显示信息的第一格式，基于所述第二协议传达的信息采取第二格式，其中，所述控制器将基于所述第二协议通过所述第三链路来自所述传感器的所述第二格式的信息转换成所述第一协议的所述第一格式的信息，并且将基于所述第一协议通过所述第一链路从所述主机去往所述传感器的所述第一格式的信息转换成所述第二协议的所述第二格式的信息。
示例35可以包括示例26-28的任何一者和/或这里的一些其他示例的一个或多个非暂时性计算机可读介质，其中，基于所述第一协议的第一链路包括双工信道和多个单工信道，并且其中，来自所述传感器的信息在所述第一链路的双工信道上被发送到所述主机。
示例36可以包括一种用于虚拟现实系统中的通信的装置，包括：用于通过基于第一协议的第一链路与主机通信的模块；用于通过基于所述第一协议的第二链路与显示设备通信的模块，其中，所述主机通过基于所述第一协议的第一链路和基于所述第一协议的第二链路与所述显示设备通信，其中，所述第一协议是被设计用于与所述显示设备通信以在所述显示设备上提供虚拟现实显示的显示协议；用于通过基于第二协议的第三链路与传感器通信以提供用于所述虚拟现实显示的传感器信息的模块；以及用于促进所述传感器通过基于所述第二协议的第三链路和基于所述第一协议的第一链路与所述主机通信的模块，其中，用于促进的模块耦合到用于与所述主机通信的模块、用于与所述显示设备通信的模块和用于与所述传感器通信的模块。
示例37可以包括示例36和/或这里的一些其他示例的装置，其中，用于促进所述传感器与所述主机通信的模块还促进所述传感器通过基于所述第二协议的第三链路和基于所述第一协议的第二链路与所述显示设备通信。
示例38可以包括示例36和/或这里的一些其他示例的装置，还包括：用于通过基于第三协议的第四链路与输入设备通信的模块，其中，用于促进的模块还耦合到用于与所述输入设备通信的模块以促进所述输入设备通过基于所述第三协议的第四链路和基于所述第一协议的第一链路与所述主机通信。
示例39可以包括示例36-38的任何一者和/或这里的一些其他示例的装置，其中，所述输入设备是以下各项中选定的一者：键盘、光标控制设备、指示杆、轨迹球或触摸板。
示例40可以包括示例36-38的任何一者和/或这里的一些其他示例的装置，其中，所述传感器是以下各项中选定的一者：磁强计、加速度计、陀螺仪、压力传感器、湿度传感器、接近传感器、位置传感器或温度传感器。
示例41可以包括示例36-38的任何一者和/或这里的一些其他示例的装置，其中，所述显示设备包括显示器，并且其中，所述显示器是以下各项中选定的一者：发光二极管(LED)显示器、阴极射线管(CRT)显示器、液晶显示器(LCD)、薄膜晶体管液晶显示器(TFT-LCD)、数字光处理(DLP)显示器、等离子显示器、电致发光面板、有机发光二极管(OLED)显示器或电子纸。
示例42可以包括示例41和/或这里的一些其他示例的装置，其中，所述传感器和所述装置被安放在所述显示设备的显示器上。
示例43可以包括示例36-38的任何一者和/或这里的一些其他示例的装置，其中，所述第一协议是以下各项中选定的一者：移动工业处理器接口显示串行接口(MIPI-DSI)协议、高清晰度多媒体接口(HDMI)协议、显示端口(DP)协议、无线传屏协议或无线显示(WiDi)协议。
示例44可以包括示例36-38的任何一者和/或这里的一些其他示例的装置，其中，所述第二协议是以下各项中选定的一者：串行外围接口(SPI)协议、可扩缩连贯接口(SCI)协议、小型计算机系统接口(SCSI)协议、通用串行总线(USB)协议、外围组件互连(PCI)协议或集成电路间(I2C)协议。
示例45可以包括示例36-38的任何一者和/或这里的一些其他示例的装置，其中，基于作为被设计用于与所述显示设备通信的显示协议的所述第一协议传达的信息采取被设计用于显示信息的第一格式，基于所述第二协议传达的信息采取第二格式，其中，用于促进所述传感器与所述主机通信的模块将基于所述第二协议通过所述第三链路来自所述传感器的所述第二格式的信息转换成所述第一协议的所述第一格式的信息，并且将基于所述第一协议通过所述第一链路从所述主机去往所述传感器的所述第一格式的信息转换成所述第二协议的所述第二格式的信息。
示例46可以包括示例36-38的任何一者和/或这里的一些其他示例的装置，其中，基于所述第一协议的第一链路包括双工信道和多个单工信道，并且其中，来自所述传感器的信息在所述第一链路的双工信道上被发送到所述主机。
虽然这里为了描述已图示和描述了某些实施例，但本申请意图覆盖这里论述的实施例的任何适应性修改或变化。因此，明确希望本文描述的实施例只由权利要求来限制。

Claims (25)

1.一种用于在虚拟现实系统中通信的装置，包括：
第一接口，用于基于第一协议通过与所述第一接口耦合的第一链路与主机通信；
第二接口，用于基于所述第一协议通过与所述第二接口耦合的第二链路与显示设备通信；
第三接口，用于基于第二协议通过与所述第三接口耦合的第三链路与传感器通信；以及
控制器，与所述第一接口、所述第二接口和所述第三接口耦合，用于促进所述主机基于所述第一协议通过第一链路和第二链路与显示设备通信，并且用于促进所述主机使用在基于第二协议的第三链路上的通信和使用在基于第一协议的第一链路上的通信与所述传感器通信，所述控制器为所述主机桥接第一协议和第二协议之间的差异，并允许所述主机在名义上使用相同的第一协议通过相同的第一链路与显示设备和传感器进行通信。
2.如权利要求1所述的装置，其中，所述控制器还与所述第二接口耦合以促进所述传感器通过基于所述第二协议的第三链路和基于所述第一协议的第二链路与所述显示设备通信。
3.如权利要求1所述的装置，还包括：
第四接口，与所述第一接口耦合，用于基于第三协议通过与所述第四接口耦合的第四链路与输入设备通信，其中，所述控制器还与所述第四接口耦合以促进所述输入设备通过基于所述第三协议的第四链路和基于所述第一协议的第一链路与所述主机通信。
4.如权利要求3所述的装置，其中，所述输入设备是以下各项中选定的一者：键盘、光标控制设备、指示杆、轨迹球或触摸板。
5.如权利要求1-3中任一项所述的装置，其中，所述传感器是以下各项中选定的一者：磁强计、加速度计、陀螺仪、压力传感器、湿度传感器、接近传感器、位置传感器或温度传感器。
6.如权利要求1-3中任一项所述的装置，其中，所述显示设备包括显示器，并且其中，所述显示器是以下各项中选定的一者：发光二极管(LED)显示器、阴极射线管(CRT)显示器、液晶显示器(LCD)、薄膜晶体管液晶显示器(TFT-LCD)、数字光处理(DLP)显示器、等离子显示器、电致发光面板、有机发光二极管(OLED)显示器或电子纸。
7.如权利要求6所述的装置，其中，所述传感器和所述装置被安放在所述显示设备的显示器上。
8.如权利要求1-3中任一项所述的装置，其中，所述第一协议是移动工业处理器接口显示串行接口(MIPI-DSI)协议。
9.如权利要求1-3中任一项所述的装置，其中，所述第二协议是以下各项中选定的一者：串行外围接口(SPI)协议、可扩缩连贯接口(SCI)协议、小型计算机系统接口(SCSI)协议、通用串行总线(USB)协议、外围组件互连(PCI)协议或集成电路间(I2C)协议。
10.如权利要求1-3中任一项所述的装置，其中，基于作为被设计用于与所述显示设备通信的显示协议的所述第一协议传达的信息采取被设计用于显示信息的第一格式，基于所述第二协议传达的信息采取第二格式，其中，所述控制器将基于所述第二协议通过所述第三链路来自所述传感器的所述第二格式的信息转换成所述第一协议的第一格式的信息，并且将基于所述第一协议通过所述第一链路从所述主机去往所述传感器的所述第一格式的信息转换成所述第二协议的第二格式的信息。
11.如权利要求3所述的装置，其中，基于所述第三协议传达的信息采取第三格式，其中，所述控制器将基于所述第三协议通过所述第三链路来自所述输入设备的所述第三格式的信息转换成所述第一协议的第一格式的信息，并且将基于所述第一协议通过所述第一链路从所述主机去往所述输入设备的所述第一格式的信息转换成所述第三协议的第三格式的信息。
12.如权利要求1-3中任一项所述的装置，其中，基于所述第一协议的第一链路包括双工信道和多个单工信道，并且其中，来自所述传感器的信息在所述第一链路的双工信道上被发送到所述主机。
13.一种用于操作虚拟现实装置的方法，包括：
通过第一链路从主机以基于第一协议的第一格式接收与提供虚拟现实显示相关联的第一信息；
通过与显示设备耦合的第二链路将所述第一信息发送到所述显示设备以呈现所述虚拟现实显示；
通过与传感器耦合的第三链路从所述传感器获得用于所述虚拟现实显示的第二信息，其中，所述第二信息采取基于第二协议的第二格式；以及
将所述第二格式的第二信息转换成基于所述第一协议的第一格式的第二信息，并且基于所述第一协议通过所述第一链路将所述第一格式的第二信息发送到所述主机，以为所述主机桥接第一协议和第二协议之间的差异，并允许所述主机在名义上使用相同的第一协议通过相同的第一链路与显示设备和传感器进行通信。
14.如权利要求13所述的方法，还包括：
基于所述第一协议通过所述第二链路将所述第一格式的第二信息发送到所述显示设备。
15.如权利要求13所述的方法，还包括：
通过与输入设备耦合的第四链路从所述输入设备获得第三信息，其中，所述第三信息采取基于第三协议的第三格式；
将所述第三格式的第三信息转换成基于所述第一协议的第一格式的第三信息；以及
基于所述第一协议通过所述第一链路将所述第一格式的第三信息发送到所述主机。
16.如权利要求15所述的方法，其中，所述传感器是以下各项中选定的一者：磁强计、加速度计、陀螺仪、压力传感器、湿度传感器、接近传感器、位置传感器或温度传感器；并且所述输入设备是以下各项中选定的一者：键盘、光标控制设备、指示杆、轨迹球或触摸板。
17.如权利要求13-15中任一项所述的方法，其中，所述显示设备包括显示器，并且其中，所述显示器是以下各项中选定的一者：发光二极管(LED)显示器、阴极射线管(CRT)显示器、液晶显示器(LCD)、薄膜晶体管液晶显示器(TFT-LCD)、数字光处理(DLP)显示器、等离子显示器、电致发光面板、有机发光二极管(OLED)显示器或电子纸。
18.如权利要求13-15中任一项所述的方法，其中，所述第一协议是以下各项中选定的一者：移动工业处理器接口显示串行接口(MIPI-DSI)协议、显示端口(DP)协议、无线传屏协议或无线显示(WiDi)协议；并且所述第二协议是以下各项中选定的一者：串行外围接口(SPI)协议、可扩缩连贯接口(SCI)协议、小型计算机系统接口(SCSI)协议、通用串行总线(USB)协议、外围组件互连(PCI)协议或集成电路间(I2C)协议。
19.如权利要求13-15中任一项所述的方法，其中，所述第一链路包括双工信道以及从所述主机到所述虚拟现实装置的多个单工信道，并且其中，发送所述第一格式的第二信息包括通过所述第一链路的双工信道发送所述第一格式的第二信息。
20.如权利要求19所述的方法，其中，当所述第二信息的大小大于预定阈值时，所述第二格式的第二信息被转换成基于所述第一协议的第四格式而不是所述第一格式的第二信息以通过所述第一链路的双工信道被发送到所述主机。
21.一种用于虚拟现实系统中的通信的装置，包括：
用于通过基于第一协议的第一链路与主机通信的模块；
用于通过基于所述第一协议的第二链路与显示设备通信的模块；
用于通过基于第二协议的第三链路与传感器通信的模块；以及
用于促进所述主机基于所述第一协议通过第一链路和第二链路与显示设备通信，并且用于促进所述主机使用在基于第二协议的第三链路上的通信和使用在基于第一协议的第一链路上的通信与所述传感器通信，以为所述主机桥接第一协议和第二协议之间的差异，并允许所述主机在名义上使用相同的第一协议通过相同的第一链路与显示设备和传感器进行通信的模块。
22.如权利要求21所述的装置，其中，用于促进所述传感器与所述主机通信的模块还用于促进所述传感器通过基于所述第二协议的第三链路和基于所述第一协议的第二链路与所述显示设备通信。
23.如权利要求22所述的装置，还包括：
用于通过基于第三协议的第四链路与输入设备通信的模块，其中，用于该促进的模块还耦合到用于与所述输入设备通信的模块以促进所述输入设备通过基于所述第三协议的第四链路和基于所述第一协议的第一链路与所述主机通信。
24.如权利要求23所述的装置，其中，所述输入设备是以下各项中选定的一者：键盘、光标控制设备、指示杆、轨迹球或触摸板。
25.如权利要求21-23中任一项所述的装置，其中，所述传感器是以下各项中选定的一者：磁强计、加速度计、陀螺仪、压力传感器、湿度传感器、接近传感器、位置传感器或温度传感器。
CN201780080989.3A 2016-12-28 2017-11-14 用户系统中的共享显示链路 Active CN110114823B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/393,159 2016-12-28
US15/393,159 US10652364B2 (en) 2016-12-28 2016-12-28 Shared display links in a user system
PCT/US2017/061628 WO2018125405A1 (en) 2016-12-28 2017-11-14 Shared display links in a user system

Publications (2)

Publication Number Publication Date
CN110114823A CN110114823A (zh) 2019-08-09
CN110114823B true CN110114823B (zh) 2022-06-21

Family

ID=62630130

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780080989.3A Active CN110114823B (zh) 2016-12-28 2017-11-14 用户系统中的共享显示链路

Country Status (4)

Country Link
US (1) US10652364B2 (zh)
EP (1) EP3563370B1 (zh)
CN (1) CN110114823B (zh)
WO (1) WO2018125405A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110767181A (zh) * 2019-10-12 2020-02-07 重庆爱奇艺智能科技有限公司 一种对双lcd屏幕的背光调节的方法与设备
CN113872782A (zh) * 2020-06-30 2021-12-31 漳州立达信光电子科技有限公司 一种设备组网方法、控制设备和物联网系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001065820A2 (en) * 2000-02-29 2001-09-07 3Com Corporation System and method for enabling a portable information device for use in a data network telephone system
WO2008057864A2 (en) * 2006-11-03 2008-05-15 University Of Georgia Research Foundation Interfacing with virtual reality
CN106209695A (zh) * 2012-05-22 2016-12-07 英特尔公司 给加载/存储通信协议提供低功率物理单元

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8384565B2 (en) * 2008-07-11 2013-02-26 Nintendo Co., Ltd. Expanding operating device and operating system
US8594467B2 (en) * 2008-12-19 2013-11-26 Microsoft Corporation Interactive virtual display system for ubiquitous devices
US8400548B2 (en) * 2010-01-05 2013-03-19 Apple Inc. Synchronized, interactive augmented reality displays for multifunction devices
US9316827B2 (en) 2010-09-20 2016-04-19 Kopin Corporation LifeBoard—series of home pages for head mounted displays (HMD) that respond to head tracking
US8838868B2 (en) * 2010-12-17 2014-09-16 Qualcomm Incorporated Communication port and connector
US9348614B2 (en) * 2012-03-07 2016-05-24 Salesforce.Com, Inc. Verification of shared display integrity in a desktop sharing system
US20130324236A1 (en) * 2012-06-04 2013-12-05 Techart Llc Protocol converter
US8764532B1 (en) 2012-11-07 2014-07-01 Bertec Corporation System and method for fall and/or concussion prediction
US9323057B2 (en) 2012-12-07 2016-04-26 Blackberry Limited Mobile device, system and method for controlling a heads-up display
US11826636B2 (en) * 2013-07-12 2023-11-28 Chris Argiro Depth sensing module and mobile device including the same
US9537903B2 (en) * 2013-10-29 2017-01-03 At&T Mobility Ii Llc Method and apparatus for communicating between communication devices
US9529200B2 (en) * 2014-03-10 2016-12-27 Ion Virtual Technology Corporation Method and system for reducing motion blur when experiencing virtual or augmented reality environments
US10203762B2 (en) 2014-03-11 2019-02-12 Magic Leap, Inc. Methods and systems for creating virtual and augmented reality
US9881422B2 (en) 2014-12-04 2018-01-30 Htc Corporation Virtual reality system and method for controlling operation modes of virtual reality system
US9934176B2 (en) * 2014-12-24 2018-04-03 Intel Corporation Transceiver multiplexing over USB type-C interconnects
US10073516B2 (en) * 2014-12-29 2018-09-11 Sony Interactive Entertainment Inc. Methods and systems for user interaction within virtual reality scene using head mounted display
US10613629B2 (en) * 2015-03-27 2020-04-07 Chad Laurendeau System and method for force feedback interface devices

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001065820A2 (en) * 2000-02-29 2001-09-07 3Com Corporation System and method for enabling a portable information device for use in a data network telephone system
WO2008057864A2 (en) * 2006-11-03 2008-05-15 University Of Georgia Research Foundation Interfacing with virtual reality
CN106209695A (zh) * 2012-05-22 2016-12-07 英特尔公司 给加载/存储通信协议提供低功率物理单元

Also Published As

Publication number Publication date
EP3563370A1 (en) 2019-11-06
WO2018125405A1 (en) 2018-07-05
CN110114823A (zh) 2019-08-09
EP3563370A4 (en) 2020-07-08
US20180183898A1 (en) 2018-06-28
EP3563370B1 (en) 2022-04-06
US10652364B2 (en) 2020-05-12

Similar Documents

Publication Publication Date Title
KR101335247B1 (ko) 원격의 싱크 장치를 표시하는 방법, 이를 위한 소스 장치 및 시스템
EP2873220B1 (en) Transmission of multiple protocol data elements via an interface utilizing a data tunnel
KR101576238B1 (ko) 디스플레이 인터페이스를 통한 시리얼 버스 지원의 유연한 구현
KR101179912B1 (ko) 복수의 휴대 단말을 연동시키는 더미 터치 스크린 시스템
KR102381433B1 (ko) 화각 가상 현실 스트리밍을 위한 세션 제어 지원을 위한 방법 및 장치
US20160323620A1 (en) Electronic device, adapter device, and video data processing method thereof
JP2015513805A (ja) 電子デバイス通信のための方法および装置
CN110114823B (zh) 用户系统中的共享显示链路
JP2006268025A (ja) 表示装置
EP3510770A1 (en) System and method to prevent boundary artifacts
JP2017525247A (ja) 効率的なフレームレンダリング
WO2018226080A1 (en) System and method for dynamic transparent scaling of content display
KR20170020776A (ko) Hdmi를 사용하여 데이터를 송수신하기 위한 방법 및 장치
US10684962B2 (en) Vendor-specific peripheral device class identifiers
JP2016177608A (ja) 印刷制御装置、印刷制御プログラム
TWI593287B (zh) 用於輸入／輸出（ｉｏ）及入站視聽（ａｖ）的拓撲和頻寬管理
US20180007428A1 (en) Wireless display implementation of applications
US9467546B2 (en) Projection keyboard for portable communication device
US9274692B2 (en) Remote control system for presentation
US10831680B2 (en) Communication system, communication device, and communication method for controlling information transfer when connecting an input device
US20150364110A1 (en) Display device
BR102012012868B1 (pt) Dispositivo de controle para mudança de imagens em um monitor de um smartphone

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant