CN114208219A - 通信设备与方法 - Google Patents

通信设备与方法 Download PDF

Info

Publication number
CN114208219A
CN114208219A CN202080054967.1A CN202080054967A CN114208219A CN 114208219 A CN114208219 A CN 114208219A CN 202080054967 A CN202080054967 A CN 202080054967A CN 114208219 A CN114208219 A CN 114208219A
Authority
CN
China
Prior art keywords
communication device
communication
motion information
parameters
beamforming
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080054967.1A
Other languages
English (en)
Inventor
纳比尔·斯文·洛金
费利克斯·费尔豪尔
达纳·乔基纳
丹尼尔·施奈德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Group Corp
Original Assignee
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Group Corp filed Critical Sony Group Corp
Publication of CN114208219A publication Critical patent/CN114208219A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/025Services making use of location information using location based information parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B7/00Radio transmission systems, i.e. using radiation field
    • H04B7/02Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas
    • H04B7/04Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas using two or more spaced independent antennas
    • H04B7/06Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas using two or more spaced independent antennas at the transmitting station
    • H04B7/0613Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas using two or more spaced independent antennas at the transmitting station using simultaneous transmission
    • H04B7/0615Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas using two or more spaced independent antennas at the transmitting station using simultaneous transmission of weighted versions of same signal
    • H04B7/0617Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas using two or more spaced independent antennas at the transmitting station using simultaneous transmission of weighted versions of same signal for beam forming
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B7/00Radio transmission systems, i.e. using radiation field
    • H04B7/02Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas
    • H04B7/04Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas using two or more spaced independent antennas
    • H04B7/06Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas using two or more spaced independent antennas at the transmitting station
    • H04B7/0686Hybrid systems, i.e. switching and simultaneous transmission
    • H04B7/0695Hybrid systems, i.e. switching and simultaneous transmission using beam selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W16/00Network planning, e.g. coverage or traffic planning tools; Network deployment, e.g. resource partitioning or cells structures
    • H04W16/24Cell structures
    • H04W16/28Cell structures using beam steering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/70Services for machine-to-machine communication [M2M] or machine type communication [MTC]

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

为了能够实现快速的波束跟踪和/或低延迟,第一通信设备包括:运动信息电路,被配置为获得表示第一通信设备的运动的运动信息;通信电路,被配置为与第二通信设备进行通信;以及参数化电路,被配置为基于运动信息设置由通信电路执行的通信的一个或多个通信参数。

Description

通信设备与方法
技术领域
本公开涉及通信设备与方法,具体地,涉及头戴显示器以及虚拟、增强或混合现实设备,诸如视频游戏控制台。
背景技术
无线通信提供许多优点。例如,一旦建立(模拟)波束,毫米波段的通信(例如,对于诸如IEEE802.11ad,ay以上的下一代WLAN系统,为60GHz)提供大带宽和低延迟。与诸如2.4GHz和5GHz的遗留频段(其中,单向发送与接收是可能的)相比,用于定向传输的初始波束训练及后续跟踪是挑战之一。对于诸如虚拟现实(VR)头盔(也被称为头戴显示器(HMD))与基站或接入点之间的通信的快速移动应用,这甚至可能更艰难。在移动HMD的情况下,初始选择的发送与接收波束可能不再是最佳的,其使性能下降,导致比特或数据包错误,并最终导致完全丢失的传输链路。
虚拟现实(VR)在被集成到HMD中的近眼显示器(通常为用于立体深度印象的两个显示器)上投射视频。除视频之外,经由扬声器或耳机的沉浸式3D音频也是可能的。VR具有有限的真实物理世界或与真实物理世界无关,并且能够显示计算机生成的图形(如游戏或模拟中)或所记录的360度视频。相反,增强现实(AR)丰富了真实世界的视图,例如,突出感兴趣的位置或出于导航目的而指示方向。显示器通常是半透明的并且使用波导覆盖虚拟对象。在VR与AR之间,许多混合形式以混合现实(MR)的名义存在,例如,与附接至HMD的相机一起使用不透明的HMD显示器。用户的手移动能够由相机检测并且能够被虚拟地投射到HMD显示器中。即使本公开涉及VR、AR、或MR,然而,大多数的阐明与VR领域有关。
VR的问题是延迟。如果VR观看者看向新的方向(旋转/平移),则需要以最小的延迟将新的内容发送至HMD,以使得观看体验与运动符合。任何偏移/滞后都可能产生VR观看者通常体验的晕动症。由此,所谓的“运动到光子延迟”(HMD运动与所显示的更新内容之间的时间)应低于20ms。
此处提供的“背景”描述用于整体呈现本公开的上下文之目的。在该背景部分中所描述的范围内,目前命名的发明人的作品以及在提交之时不可另行具有现有技术资格的描述的各方面既未明确、亦未默示地承认为本公开的现有技术。
发明内容
目标是提供通信设备与方法,其能够在通信设备之一快速移动情况下改善通信设备之间的无线通信。
根据一方面,提供第一通信设备,包括:
-运动信息电路,被配置为获得表示第一通信设备的运动的运动信息;通信电路,被配置为与第二通信设备进行通信;以及
参数化电路,被配置为基于运动信息设置由通信电路执行的通信的一个或多个通信参数。
根据又一方面,提供第二通信设备,包括:
-通信单元,被配置为从第一通信设备接收运动信息,该运动信息表示第一通信设备的运动;和
参数化电路,被配置为基于运动信息设置用于发送和/或接收内容的一个或多个通信参数。
根据其他方面,提供对应的通信方法。
在附属权利要求中限定了实施方式。应当理解的是,所公开的设备与方法具有所附权利要求中限定和/或此处公开的相似和/或相同的进一步实施方式。
本公开的一个方面在于,第一通信设备和/或第二通信设备可以根据从相应的其他通信设备所接收的运动信息而设置(即,确定和/或适配和/或更新)其通信参数(用于彼此通信,例如,包括交换运动信息、其他信令信息(信道状态反馈、…)、用于发送和/或接收内容的任意数据交换)。进一步地,通信设备可以跟踪信道变化。快速变化可能导致估计或预测信道与实际信道之间的失配,从而导致信道不稳定性。基于从运动信息推断的信道不稳定性的水平,能够决定数据包内的信道估计的重复次数。进一步地,能够基于运动信息进行波束成形与波束跟踪参数的请求与协商(例如,用于通信的波束的波束方向和用于通信的波束的波束宽度)。根据运动信息所设置或适配的其他通信参数可以是物理(PHY)层参数,如预编码器设置、纠错参数、调制参数、用于调制的星群的星群参数、交织参数、诸如其长度或其频率的训练序列参数、或可以是媒体接入控制(MAC)资源。
本公开的实施方式的另一方面是一种新的传输方案,具体地,用于WLAN情景,其中,将运动信息(例如,第一通信设备(例如,站(STA),具体地,HMA)的惯性测量单元(IMU)的测量数据)从第一通信设备传送至分级层模型的下层(即,比传输层更低的层)的第二通信单元(例如,接入点(AP),具体地,诸如视频游戏控制台的VR支持设备、或例如直接的设备到设备通信中使用的另一站)。对于WLAN情景,本公开进一步指出了在MAC层内传输这种运动信息(有时也被称为“运动数据”)的可选信令方案。这提供了两个关键的优点。一方面,这能够通过利用第一通信设备的运动(包括定向和/或移动)而实现增强(快速和/或更鲁棒)的波束跟踪。另一方面,这通过在诸如MAC或PHY层的下层内直接提供运动信息而提供第二通信设备处的低延迟接口。这可能导致第一设备处的位置/定向变化与第一通信设备处接收相应修改视频或图像信息之间的延迟减少。
应注意,一些系统(不一定必须是VR应用)可以根据诸如OSI模型的分级层模型通过下层(例如,仅通过MAC层)传输运动信息。该系统可能不由完整的OSI堆栈构成,例如,其可以仅使用PHY和MAC层(例如,连接至自行车车轮的IMU、将运动信息发送至其中存储该数据的运动设备)。
作为可以应用本公开的一个示例性情景,VR情景需要诸如应用层的上层的运动信息,其中,图形渲染器基于用户的运动计算新视频。在实施方式中,本公开可以使得运动信息在下层(诸如MAC层或网络层)可用,而无需等待其在高层(例如,传输层,其中,在成功接收并且组装来自下层的多个数据包之后,才能够对数据包进行解码)的最终解释。这允许根据运动信息快速适配通信以及从下层(诸如MAC层或网络层)快速绕过至实际上需要信息的高层(例如,应用层)。可以在高层上传输其他有效载荷信息。
作为其中可以应用本公开的另一示例性情景,在UAV(无人飞行器)情景中,可以根据终端用户与UAV的运动信息对AP、UAV、以及终端用户的发送和接收波束进行更新。由此,如优选实施方式中提供的,在下层提供运动信息对于该情景也是有利的。
应注意,本公开并不仅仅涉及毫米波通信(以及对应的波束跟踪,例如,根据IMU数据),而且所提出的解决方案更为通用并且允许根据运动信息的任意通信参数更新,诸如在较高移动性的情况下更频繁地请求或传输训练序列。
已经通过整体介绍提供了上述段落并且上述段落并不旨在限制下列权利要求的范围。通过参考结合所附附图展开的下列细节描述能够与进一步的优点一起很好地理解所描述的实施方式。
附图说明
当结合所附附图考虑时,由于通过参考下列细节描述而变得更易于理解,易于获得对本公开及许多附加优点的更为完整的认识,其中:
图1示出了根据本公开的第一通信设备与第二通信设备的第一实施方式的示意图;
图2示出了根据本公开的第一通信设备与第二通信设备的第二实施方式的示意图;
图3示出了根据本公开的第一通信方法的实施方式的流程图;
图4示出了根据本公开的第二通信方法的实施方式的流程图;
图5A与图5B示出了用于交换运动信息的运动子字段的示例性实现方式;
图6示出了示出AP不知道STA的位置的情况下的波束成形的示图;
图7示出了示出AP已知STA的位置的情况下的波束成形的示图;
图8示出了PHY与MAC的接口与管理实体的示例性实现方式;
图9示出了在发送波束之后、如何使用VR/无人机STA处的IMU数据来推断待使用的接收波束的示例性实现方式;
图10示出了运动信息辅助的波束测量与重新对准的示例性实现方式;
图11示出了在一频段内传送运动信息的示例性实现方式;
图12示出了由运动信息触发的多AP训练的示例性实现方式;并且
图13示出了RX波束改变之后的可靠传输的示例性实现方式。
具体实施方式
虚拟现实(VR)应用使用头戴式显示器(HMD)。经由线缆(诸如HDMI线缆)将高数据速率从游戏控制台发送至HMD。然而,线缆限制了VR用户的运动范围以及沉浸式的用户体验。一些VR应用提供6个DOF(6个自由度),即,观看(并且收听)内容并不仅仅取决于方向,用户观看(3维=自由度),包括俯仰、偏航和滚动,但是,也取决于HMD的位置(额外的三维),即,房间内的位置与高度(x-、y-、以及z-坐标)。为了承担用户运动,通常经由从HMD至控制台的同一线缆提供来自集成式IMU(惯性测量单元)的数据反馈。IMU通常整合了加速计传感器(检测平移运动)和陀螺仪传感器(检测旋转变化)。如果视频(或音频)内容仅相对于旋转变化而改变,则将设备表示为3DOF。
VR的常见3DOF HMD通常是基于蜂窝电话的解决方案(例如,智能手机用作显示器并且放置于HMD中,其包括诸如透镜的一些额外光学器件)并且提供360度的视频/游戏,其中,根据三个旋转的DOF而改变内容。另一方面,6DOF HMD不仅基于旋转变化,而且还根据三维移动(额外的3DOF平移),提供新的视频内容。通常,不显示所捕捉的360度视频,而是在诸如游戏或可视化中显示计算机生成影像(CGI)。
可以经由相机(例如,来自HMD内部,使用视觉SLAM(同步定位与地图构建),或来自HMD外部,从距HMD的位置与定向的一定距离捕捉)或其他定位技术获得额外的运动跟踪信息。还可以经由(HDMI)线缆或经由无线链路反馈通常被嵌入到其余上行链路数据中的该信息。
由于大量的带宽,大多数现有的无线VR解决方案当前使用毫米波通信,允许若干Gbps的数据速率用于流化高质量的视频。然而,这种毫米波链路对被集成到HMD中的通信设备或站(STA)的快速移动是敏感的。当定向毫米波通信中所使用的窄波束在接入点(AP;例如,内置于游戏控制台中)与STA之间不再适当地对准时,链路预算可能不足以进一步支持所需的数据速率。在使用高吞吐量的空间多路复用的情况下(然而,在利用空间分集的情况下,MIMO可以提供更大的鲁棒性),在STA与AP侧部署多个天线阵列(所谓的混合MIMO架构)进一步恶化了STA移动的效果。即使波束相对于新的STA位置的不对准允许充足的链路预算,然而,数字波束成形设置仍可能导致所预测与所观察的信道信息之间的失配。由此,移动的毫米波通信需要高速跟踪模拟波束(并且数字预编码器设置也需要潜在跟踪与校正)。移动性可以包括两个分量:平移分量(即,STA在x-、y-、和/或z-方向上移动)与旋转分量(即,STA相对于x-、y-、和/或z-轴旋转,被称为滚动、偏航、以及俯仰)。对于人类用户的正常移动,平移可能比旋转(例如,当HMD旋转180度时,导致自阻塞)的不利性更小(由于有限的速度/加速度能力)。然而,本公开并不解决用作移动反射体/散射体的移动性的其他来源,诸如周围环境中的移动对象。
由于模拟波束跟踪不充分,可能未将视频适当地(无差错并且低延迟)传输至HMD。由于低延迟约束,用于实时应用的重传不能解决数据丢失的问题。
另一问题是延迟:如果VR观看者看向新的方向(旋转/平移),则需要以最小的延迟将新的内容传输至HMD,以使得观看体验与运动符合。任何偏移/滞后都可能产生晕动症,这是VR观看者通常体验的。由此,所谓的“运动到光子延迟”(HMD运动变化与更新内容的显示之间的时间)应尽可能的低,具体地,低于20ms。
在常见的方案中,通过某一协议经由上行链路将运动信息传送至控制台/PC,例如,被嵌入到视频编解码器或IP(互联网协议)包的有效载荷中。信息不得不传递的层越多(例如,相对于开放式系统互连模型(OSI模型;本技术领域中通常已知的,例如,ISO/IEC标准7498-1:1994)),延迟则越长,直至能够对数据进行解译,例如,在层5(呈现层)或层7(应用层)的接口输出之后。因此,为了减少通信设备获得运动数据的时间,以使得能够更快地用于设置通信的一个或多个通信参数,所以在一些实施方式中提议减少所涉及的层的数量。这还能够用于减少运动到光子延迟。
使用用于交换运动信息的专属协议进一步使得难以在HMD供应商之间实现互操作性。在该(封闭式)系统的极端情况下,可能不能公开地指定如何对所传输的运动数据进行解译。
由此,在实施方式中,提议在运动传感设备(此处也被称为感测单元;包括例如IMU和/或其他传感器)与无线收发器(此处也被称为通信单元)之间建立链路,尤其对于定向的毫米波通信。在实施方式中,进一步提议在WLAN协议内直接发送移动STA(此处,通常被称为第一通信设备)的(平移和/或旋转)运动信息(具体地,包括指示旋转和/或定向的旋转信息;可选地,进一步包括指示平移的平移信息),在AP(此处,通常被称为第二通信设备)的这种情况下,WLAN协议定义协议堆中的层1和层2。应注意,通常还可以使用诸如蜂窝3GPP系统协议或蓝牙(对于具有较小数据速率的上行链路可能是足够的)的任意其他无线协议、或诸如以太网或USB的任意有线协议。
现参考附图,其中,贯穿若干幅图,类似参考标号表示相同或对应的零部件,图1示出了根据本公开的第一通信设备1与第二通信设备2的第一实施方式。
第一通信设备1(例如,表示被集成到HMD中的STA)包括获得表示第一通信设备1的运动的运动信息30的运动信息单元10。运动信息单元10可以包括感测单元(例如,IMU传感器),感测单元感测第一通信设备1的运动并且生成表示所感测的运动的运动信息30。在其他实施方式中,运动信息单元10可以包括从外部传感器接收或检索运动信息的接口(例如,蓝牙或WLAN接口,优选地,在诸如2.4GHz或5GHz的非毫米波频段中操作)。例如,HMD可以不直接而是经由外部设备(例如,外部3D相机或其他运动跟踪装置)跟踪其运动。
通信单元11(例如,WLAN或蓝牙收发器)与第二通信设备2进行通信。例如,可以将运动信息30发送至第二通信设备2,在实施方式中,这可以是在分级层模型(具体地,OSI模型)中比传输层更低的一层内进行,具体地,在物理层或MAC层(即,在该下层中,可以将运动信息30从第一通信设备1直接端到端地发送至第二通信设备2)。然而,通常,可以通过任意其他方式将运动信息30发送至第二通信设备2。
参数化单元12基于运动信息30设置由通信单元11执行的通信的一个或多个通信参数。参数化单元12(例如,在硬件和/或软件中实现的处理器或其他计算装置)可以被配置为设置物理层参数、预编码器设置、纠错参数、调制参数、用于调制的星群的星群参数、交织参数、训练序列频率、媒体接入控制MAC资源、用于通信的波束的波束方向、以及用于通信的波束的波束宽度中的一项或多项。
作为实施例,如果运动信息表明HMD设备1快速地移动,参数化单元12则可以将波束宽度设置成更宽的波束宽度。由此,降低发送器与接收器之间的连接由于波束转向至错误方向而丢失的可能性。这以潜在地减少波束成形的阵列增益为代价而实现。如后面阐明的,其他实施例根据运动对波束方向进行校正以实现精确跟踪。通常,当运动较快时(导致不可预测的信道,这可能产生严重的通信错误),可以由参数化单元12设置更鲁棒的通信参数(例如,FEC编码、调制、交织、…),并且反之亦然。
作为另一实施例,可以应用PHY协议数据单元(PPDU)重复。当VR STA检测其处于比特定阈值更大的水平的运动时,其能够启动以下模式,即,其中,对包传输进行复制并且通过跨预测扇区/相邻扇区的若干波束而传送(随后或并行(空间多路复用MIMO))。同样,基于运动信息,接入点或无线网络控制器(以下也被称为控制器)能够发起以下模式,即,其中,通过跨一个或多个预测扇区的若干波束而传送传输。
在进一步的实施例中(此外或可替代地使用),如果检测到其运动并且由此允许其他STA/AP对PPDU进行解码,则无论波束是否未对准,VR/无人机STA可能将所使用的MCS(调制与编码方案)改变成较少的数量(即,更鲁棒的MCS)。能够使用该PPDU模式适配作为PPDU重复的替代方案或附加于PPDU重复。
在进一步实施例中,可以提供前导码内的天线权重向量(AWV)变化。例如,服务管理实体(SME)可以使用运动信息来触发无源RX波束测量与重新对准,如果成功,其可能导致改变RX波束。在朝向其他STA的传输中能够进一步使用该波束(或MIMO情况下的波束)。然而,因为链路的参数可能具有明显的变化,所以可以采取若干预防措施来确保可靠性。
例如,能够以更稳定的估计序列执行新波束的传输,其允许接收器改变并且选择最佳的RX AWV。信道估计序列能够由重复的若干片段构成,并且在每个片段内,允许STA改变其波束,以使得在包解码之前直接对RX波束进行重新对准并且RX波束不位于前一帧的末端处。对于包的其余部分,使用最佳的RX波束。替代方案是通过定向波束训练帧(例如,具有若干训练字段的BRP帧)改变波束之后先于传输第一包,以允许找出最佳的RX AWV来接收包。然后,在较短的间隔内,数据包紧跟其后。
在另一实施方式中,基于运动信息,能够在多AP情景中实现位置跟踪。这允许可以快速地移交或允许相邻的AP为VR STA(或在基础设施AP之间移动的UAV/无人机)分配可能的资源单元而相关联。这可能需要一种或多种下列改变。
在VR/无人机情况下,不仅可以通过平移运动、而且还可以通过旋转(俯仰、滚动、偏转)激活InMotion(来自位置跟踪的标记)。
为了能够实现位置跟踪或快速的波束适配,应在若干方向上按照由AP或主AP指示的规定间隔传送位置通知帧的脉冲串,优选地具有附接训练单元,以允许相邻的AP在各个TRN上对其波束进行训练。此外,其可以包含允许AP减少训练开销的运动信息,即,待训练的波束/扇区的数量、待使用的时隙的数量/所需的训练类型(发送和/或接收)。
在实际实现方式中,可能需要主AP对其中将用于利用运动信息进行跟踪的帧传送至一个或多个AP的间隔进行调度或各个AP可以指示它们可以在其中接收这些类型的帧的时间间隔。这可以用于减少空中控制/波束训练消息的开销。
如果侦听到来自多个AP的信标,则应将关于最佳波束的RSSI信息包括在位置跟踪通知帧中。
一旦请求来自VR STA或无人机STA的VRMotionTrk,VR/无人机STA则可以接收相邻的AP信标传输的调度的指示,其与给出运动信息的当前位置有关。
基于运动信息,AP能够进一步将VR运动通知帧传送至具有位置和运动信息作为参数的相邻AP,以提高由其中至少一个AP接收VR STA的概率。此外,该帧能够请求相邻的AP对至少覆盖与新的VR STA对应的角度扇区的信标传输(或至少包含BSS信息的若干控制帧的传输)进行调度并且对与VR通知帧对应的收听时间进行调度。
能够通过与其中发生通信的一个频段(例如,能够通过7GHz子频段进行传送)不同的频段(频段外)传送运动信息。
在实施方式中,第一通信设备1可以进一步包括输出接口13,输出接口13能够接收包括用户所感知的信息的任意类型的多媒体数据31,诸如,视频数据、图像数据、音频信号、力反馈(例如,控制器或游戏套装(例如智能手套)中的振动)、人工气味、气味等。由此,输出接口可以被配置为使用所接收的多媒体数据并且将其转换成用户的感觉能够感知的对应“信号”(例如,视觉信号、声音、气味等)。由此,例如,输出接口13可以包括显示视频数据的显示器,例如,被集成到HMD设备中的显示器。由此,例如,响应运动信息30的传输,多媒体数据31可以包括从第二通信设备2接收的作为有效载荷的视频数据。换言之,响应运动子元素的一个信息而传送的帧内所包含的有效载荷信息可以包含例如取决于从运动信息推断的位置的视频数据。
第二通信设备2(例如,表示被集成到游戏控制台中的AP(或更一般地,虚拟增强或混合现实支持设备)或表示与第一通信设备1进行直接的设备到设备通信的另一STA)包括从第一通信设备1接收运动信息30的通信单元20(例如,WLAN或蓝牙收发器)。进一步地,参数化单元22(例如,在硬件和/或软件中实现的处理器或其他计算装置)基于运动信息设置用于发送和/或接收内容的一个或多个通信参数。
优选地,不将运动信息30嵌入到信号的有效载荷中(在高层上对包进行组装之后,其仅能够在接收器侧被解译);而是优选地,在下层(传输层以下)上接收运动信息30,在下层,易于通过第二通信设备2进行解译。然而,通常,可以通过任意其他的方式接收来自第一通信设备1的运动信息30。
第二通信设备2可以进一步包括被配置为基于运动信息生成多媒体数据(就上述所述意义而言)的多媒体生成单元21。在实施方式中,多媒体生成单元21可以包括基于运动信息30渲染视频和/或音频和/或其他数据(诸如用于触觉反馈的力反馈)的渲染单元(例如,图像处理器或视频编解码器)。然后,将所生成的多媒体数据31(例如,已渲染的视频数据)发送至(作为有效载荷数据)第一通信设备1,以供输出接口13输出(例如,用于在显示器上显示)。
更一般地,第一通信设备1和/或第二通信设备2可以根据从相应的另一通信设备接收的运动信息30对一个或多个通信参数或内容进行适配。例如,如果AP认识到STA移动地太快,AP(不一定必须在毫米波频段中操作)则可以请求信道估计。因此,第二通信设备2通常通过生成适配信息并且将适配信息发送回至第一通信设备1而对来自第一通信设备1的运动信息30的传输做出反应。具体地,基于运动信息,AP或STA可以向其通信对方请求在包内重复利用信道估计序列传送的PHY协议数据单元(PPDU),以允许其他通信设备跟踪信道变化。基于从运动信息推断的信道不稳定性的水平,能够决定信道估计在包内的这种重复的次数。可替代地,对于毫米波STA,能够基于运动信息完成波束成形与波束跟踪参数的请求与协商。
图2示出了根据本公开的第一通信设备1和第二通信设备2的第二实施方式。与图1中示出的第一实施方式不同,第一通信设备1额外包括波束成形单元14并且第二通信设备2额外包括波束成形单元23。
波束成形单元14基于运动信息30执行波束成形和/或波束跟踪。进一步地,波束成形单元14可以基于运动信息30预测第一通信设备的未来位置和/或可以基于运动信息和/或所预测的未来位置而适配波束的方向和/或宽度。同样,波束成形单元23基于运动信息30执行波束成形和/或波束跟踪,以形成通信单元20接收运动信息和/或发送有效载荷数据所使用的波束(双箭头指示图像信息“被封装”并且不再直接进行解译)。波束成形单元20可以进一步基于运动信息而预测第一通信单元的未来位置和/或可以基于运动信息和/或所预测的未来位置而适配波束的方向和/或宽度。进一步地,对于毫米波STA,可以基于运动信息进行波束成形与波束跟踪参数的请求与协商。
在实施方式中,信令通知平移与旋转作为运动信息。因为IMU因惯性力的测量而输出加速度,所以与速度相反,可以发出平移信息的信号作为加速度(加速度作为速度的导数)。通常,IMU输出相对于重力加速度g(在地球上,g约为9.8m/s2)的平移,例如,在x-方向上的加速度为2.4g。关于旋转,IMU通常从陀螺仪输出每秒度(dps)(或每秒弧度)的角度速率(角速度)。
图3示出了根据本公开的第一通信方法的实施方式的流程图,具体地,该方法被配置为由第一通信设备1执行。在第一步骤S10中,获得表示第一通信设备1的运动的运动信息。在第二步骤S11中,基于运动信息设置通信的一个或多个通信参数。在第三步骤S12中,第一通信设备1与第二通信设备2进行通信。
图4示出了根据本公开的第二通信方法的实施方式的流程图,具体地,该方法被配置为由第二通信设备2执行。该方法包括:第一步骤S20,从第一通信设备接收运动信息,运动信息表示第一通信设备的运动。在第二步骤S21中,基于运动信息,设置用于发送和/或接收内容的一个或多个通信参数。
在实施方式中,代替或除运动信息之外,第二通信设备2可以从第一通信设备1接收一个或多个通信参数和/或波束成形请求,波束成形请求请求第二通信设备执行波束成形训练和/或波束跟踪和/或波束切换和/或提供波束成形参数。这些波束成形参数可以包括以下中的一项或多项:接收训练单元,其中,响应器在波束成形程序期间训练或测量一个或多个接收波束;或发送波束成形单元,其中,波束成形训练的启动器训练一个或多个发送波束;或混合发送-接收单元,用于混合训练。对于TDD类型的波束成形,波束成形参数可以包括指定的发送扇区、或离开范围和分辨率的角度、或接收扇区、或应被测试的到达范围和分辨率的角度、以及应该进行测量的时间间隔。
图5A与图5B示出了使用可以从第一通信设备1发送至第二通信设备2的运动子元素的信令的示例性实现方式。在该实现方式中,可以包括下列信息作为运动信息(并非必须包括全部该信息;在其他实施方式中,仅提供这些元素中的一个或多个元素作为运动信息):
·子元素ID:该子元素的ID(来自WLAN规范的位置参数元素中的可选子元素ID)
·长度:该子元素在八位字节中的长度
·线性比例:定义加速度全比例选择,2比特(00:±2g;01:±16g;10:±4g;11:±8g)
·旋转比例:定义陀螺仪全比例选择,2比特(00:250dps;01:500dps;10:1000dps;11:2000dps)
·线性加速度X-轴16比特,二的补码
·线性加速度Y-轴16比特,二的补码
·线性加速度Z-轴16比特,二的补码
·俯仰角速率(横轴)16比特,二的补码
·滚动角速率(纵轴)16比特,二的补码
·横摆角速率(垂直轴)16比特,二的补码
·左眼水平位置16比特,二的补码
·左眼垂直位置16比特,二的补码
·右眼水平位置16比特,二的补码
·右眼垂直位置16比特,二的补码
·用于眼睛跟踪的保留比特,诸如瞳孔大小、眨眼、扫视
·用于未来使用并且保证子元素的长度是8比特的倍数的保留比特
通常,能够将运动信息包括在MAC帧中,在这种情况下,其可以包含上述阐明的信息,但是,其还可以是驻留在控制MAC和/或PHY层的管理实体中的原语。
一些IMU具有集成处理器,其允许进行滤波。该处理器还可以通过检测朝向地面的重心而估计z方向。但是,通常,仅输出基于周期性的时间(未滤波的)原始值(即使未检测到移动)。如果检测到运动然后仅发送IMU数据,则可以触发另一单元。进一步地,可以实现一些传感器融合,其中,诸如压力传感器(用于绝对高度检测)或磁性传感器(用于北向的(室外)检测)的额外传感器。
该新的子元素可能变成位置参数的一个新选项。该子元素的名称可以是通过平移(三个DOF)和旋转(另三个DOF)而描述的“6DOF运动子元素”,指六个自由度(DOF)。
关于该子元素的进一步实现方式可以包括:运动指示符字段,当检测到移动时,发出信号。IMU数据的反馈可以基于周期性的传输或可以是事件触发的(如果超过特定的加速度/旋转速度阈值)。如果该标记信号通知未检测到运动,则根本不需要信号通知平移和旋转。如果仅检测到旋转或如果仅检测到平移,则该标记也可以信号通知允许跳过其他信息(分别是平移或旋转)。如果平移速率保持恒定,则另一标记也可以信号通知(因为加速度将为0),从而再次允许跳过平移信息。
可以通过其原始形式发送IMU或其他运动数据或进行滤波。可以在若干侧应用滤波,例如,IMU处理器内部(通常是可选的)、一些专用的滤波块(IMU与STA之间)、AP侧(一些专用的滤波块)、或上处理层处。可以周期性地或通过事件触发而反馈数据。该6DOF数据的上行链路应遵循某些服务质量/体验(QoS/QoE)水平,以使得不超过最大(最糟情况)延迟。
应注意,反馈6DOF运动数据可以进一步包括关于观看者的眼睛位置的信息:若干VR应用考虑所谓“注视点渲染”,其中,仅在聚焦视野处(眼睛的中心=具有高密度圆锥体的中央凹,与周视图高相比,高出约200倍)显示高分辨率的视频(高比特速率)内容。需要眼睛跟踪来检测眼睛位置,例如,经由红外成像(朝向眼睛发送并且在相机中捕捉的不可见IR,全部位于HMD内)。可以精确地反馈(就像素位置而言)或仅相对地(例如,移至左上方、…)反馈眼睛在3D视频帧内的位置,这需要先前进行一些归一化/校准。
考虑到场景内的预期聚焦/深度,能够在渲染过程中利用眼睛的位置,例如,用于计算新的图像。此外,注视点渲染的概念允许注视点(其中,眼睛聚焦)之外的低分辨率视频传输,而仅在焦点周围的较小区域中发送高分辨率视频。当开始眼睛移动时,不得不在焦点的预期移动与非预期移动之间进行区分。眼睛的显著不可控移动被称为扫视,即,两个固定点之间的快速移动。进一步地,眼睛跟踪设备还可以反馈瞳孔的直径,即,指示用户的状态(清醒、厌倦、…)。
如上面示出的,通常,通过诸如应用层的高层端到端地发送运动信息。在发送器侧(第一通信设备1),运动信息遍历分级模型中的全部下层,通常产生包的不同片段。作为实施例,IMU数据可以分割成若干MAC协议数据单元(MPDU)并且被进一步传送至一个或多个PHY协议数据单元(PPDU)。在接收器侧(第二通信设备2),操作反向。由于包片段,一旦接收全部片段,高层才能够对运动信息进行解译,由此引起延迟。进一步地,尽管通常将运动信息30嵌入到高层的有效载荷中,然而,根据本公开,将运动信息30嵌入到传输层以下的一层中,诸如嵌入到MAC层或物理层中,并且第一通信设备1与第二通信设备2各自包括对应的下层接口。在该接口处,易于对运动信息进行解译。
本公开的实施方式提供一个或多个优点:一个优点在于,可以使得AP的连接单元(例如,经由进一步连接的图形卡)通过以下方式访问STA的运动信息,即,可以使得AP更快速地访问该信息。进一步地,通过将运动信息嵌入到802.11协议的MAC接口中,以使得可以在AP的通信单元处访问运动信息,能够在AP处使用STA的运动信息,以允许在例如仅覆盖PHY和MAC层的WLAN协议内对诸如快速波束跟踪的通信参数进行快速和可靠调整。
尤其对于毫米波通信,优选快速波束跟踪来维持高可靠性的高吞吐量。能够在AP处利用关于STA的移动(例如,6DOF)的信息,以对波束(模拟和/或数字)进行直接(基于某一先前的位置知识并且基于运动信息对新位置的精确计算)或间接(例如,通过基于运动信息的幅值而估计波束细化的新搜索空间(即,如果存在较大的值,则使用更大的搜索空间,并且反之亦然))地校正。
间接利用运动信息的简单并且直接的方式如下:如果旋转与加速度表明静态情形(朝向地球的重心,在全部三个维度上,旋转=0并且加速度=g;假设实际上,在长时间内不能实现绝对恒定的速度(具有摩擦和所需的再加速度)),在该静态情况下,一旦所建立的波束允许足够的数据速率与可靠性,则不需要波束跟踪。相反,如果旋转和/或加速度超过高幅值(即,某些预定义的阈值),则警告AP对波束进行更新。幅值越高,搜索空间越大(例如,在幅值大、但不太大的情况下,仅检查作为新的可替代方案的相邻波束扇区;使对应的阈值进行优化)。
迄今,假设AP不具有关于STA的绝对位置的信息(或甚至无关于其自身位置和定向的相对位置)。如下所述,如果该额外信息在AP处可用(例如,通过在额外交换角度信息或无额外交换角度信息的情况下应用精细时间测量(FTM)),则更精细的波束跟踪是可能的。
通常,将运动信息捎带至诸如游戏控制器命令的其他上行链路数据。通过从高层向下遍历至MAC并且最终遍历至PHY层进行物理传输而经由由PHY和MAC层构成的无线LAN接口进行发送。然后,通过其余的协议堆对来自MAC层的输出进行处理,并且在高层处分解之后,可以访问最终的内容(即,运动信息)。如果802.11MAC接口允许访问已经位于层2上的运动信息(标准形式),则可以允许更快速地访问(低延迟)。控制台(或PC)处需要运动信息来计算即将到来的帧的新内容。理想上,感测运动信息的感测速率高于视频的帧速率,例如,每秒90或120个(视频)帧(fps)。
进一步地,标准接口易于进行与其他HMD供应商的互操作性并且允许使用其他应用的信息,诸如波束成形和/或训练。
在下文中,将阐明当AP被集成到静态设备(控制台、PC、…)中并且允许STA移动时的毫米波波束跟踪可能出现的不同情况。
在图6示意性示出的第一主要情况下,第一通信设备(在下文中,简称STA 1)的位置对于第二通信设备(在下文中,简称AP 2)是未知的。
在第一主要情况的第一子情况中,仅假设图6A中示意性地示出的STA 1的旋转。假设在特定时间t0,已经使毫米波波束3、4(一个用于发送、另一个用于接收)进行适当地对准,以确保用于通信的最大数据速率。如果STA 1旋转(经由任意轴)角度α,则AP 2不需要知道STA 1的新定向,但是,如果旋转较大(α足够大,以使得更佳的波束更为适合),则STA 1自身需要对其波束4进行校正。在STA 1处无波束跟踪的情况下,有效的通信信道可能不允许所需的数据速率(在时间t1)。所提议的解决方案暗示位于STA 1内的IMU与通信单元之间存在链路,以使得STA 1的通信单元可以访问标准形式的IMU数据(即,运动信息)而进行波束校正(即使不需要向AP 2发出信令)。
理想上,来自STA 1的新波束4'(在互惠信道与硬件组件的情况下,用于上行链路和下行链路)仅旋转反角-α。将运动信息馈送至WLAN芯片集中允许STA 1直接利用该知识。当VR体验能够以相似的质量水平继续时,在图6A中示出了时间t2的该校正波束4'。
对于3DOF内容跟踪,需要向游戏控制台/PC信令通知旋转。即使AP 2并不需要出于波束跟踪之目的而获知该信息,也可以在所提议的6DOF运动子元素内(如图5中所示)信令通知该旋转信息。
在第一主要情况的第二子情况下,应仅假设图6B中示意性地示出的STA 1的平移,其中,指示向右平移。从非零加速度检测移动(例如,加速,然后,在新的位置处慢下来)。在时间t1,来自AP 2与STA 1的波束3、4不再适当地对准。由此,AP 2需要知道STA 1正在移动,以将其波束3校正成校正波束3'。
相比于STA 1远离AP 2的情况(由此,可能仍在同一波束扇区内),在STA 1位于AP2的附近的情况下,移动可能更为不利。因为AP端不知道STA位置,所以精确调整是不可能的。然而,加速度幅值已经提示向潜在的搜索空间更细化的波束训练:较小的幅值仅需要在相邻的扇区内搜索,而较大的加速度幅值指示应扩展搜索空间。在找出最佳的新波束之后(例如,在波束细化阶段(BRP)过程中),AP 2可以对新的波束方向进行解译(如果不需要调整或仅调整至相邻的扇区,即使加速度相对较高,则AP与STA之间的距离很可能较大;也是考虑到加速度方向(例如,朝向AP或远离AP移动),这可以存储为用于下一细化过程的先前信息)。
在6DOF应用的情况下,平移仅需要更新视频/音频内容。在3DOF应用中,体验保持不变(仍朝向360度视频中的同一方向观看)。
在第一主要情况的第三子情况中,假设STA 1的旋转与平移。由于其仅是图3A与图3B中示出的之前两个子情况的叠加,未在单独的图中示出这种情况。
在图7中示意性地示出的第二主要情况中,AP 2知道STA 1的位置。具体地,假设AP2知道STA 1在地球坐标中的位置(以及其在同一坐标系中的自身位置)或至少相对意义上的位置(相对于其自身位置与定向)。通过先前的定位方案能够实现此目的,诸如精细时间测量(FTM)、到达角度(AOA)、离开角度(AOD)测量、或其他方法。
在第二主要情况的第一子情况中,仅假设STA 1的旋转。未在具体的图中示出此目的。上面参考图6A进行阐明的同理基本适用。唯一的不同可能在于,视频内容还根据STA 1相对于AP 2的相对位置而改变(例如,如果STA远离AP,则显示远距离的对象(即,较小),并且反之亦然)。
在第二主要情况的第二子情况中,仅假设图7中示意性地示出的STA1的平移。现在,假设坐标系的原点在时间t0位于STA位置处(并且如图7中所示,对准),甚至能够计算AP2在时间t1的新位置。这就是指,STA 1在时间t0位于原点处(x,y)=(0,0),并且静态AP 2位于(x,y)=(0,yAp)处,即,距离d=yAP处(在实施例中,假设z-分量是零)。如果STA 1在时间t0之后以均匀的加速度a=(ax,ay,az)仅在例如x-方向(a=(ax,0,0))上开始直接移动,则时间t1的新位置为x1=1/2·a·(t1-t0)2。在图7中的右手侧示出了时间t2≌t1的情形:能够从其距离d=yAP以及新位置x1将AP 2操纵新波束4'的“校正角”β计算为β=arctan(x1/d)。
在第一主要情况中,其中,STA位置未知,一旦知道加速度的方向,还能够通过AP 2计算新的位置x1。如上面阐明的,通常,IMU仅能够从静态情况中估计z-分量(垂直于地平线),其中,仅重力对STA 1施加力。仍然,任意加速度的幅值允许估计在一定的时间跨度之后空间偏差,从而指示用于波束细化的搜索空间应多大。
进一步地,即使在反馈新的运动信息更新之前,反馈运动信息(具体地,加速度信息)也允许预测新的位置。例如,观察较长的周期(例如,若干100ms),一个方向上的均匀(即,恒定)加速度允许假设加速度在下一时间间隔内保持相同。由此,已经可以朝向所预测的位置操纵波束并且仅在失配的情况下(当反馈新的运动信息时,与假设冲突)进行更新。
关于波束成形,存在进一步的选项。在实施方式中,如果将该运动信息从(第一通信设备1的)服务管理实体(SME)发送至(第一通信设备1的)MAC,则能够通过运动信息触发波束成形或波束跟踪协议。进一步地,能够在两个通信设备的管理实体之间协商诸如起始、扇区的数量、扇区列表、角度数量、待测试的角度列表的波束成形参数,然后才开始传输。第一通信设备1可以基于运动信息内的指示(而无需SME之间的通信)请求从第二通信设备2接收所需的训练的量(即,训练单元,其中,第一通信设备1将改变其波束)。仍进一步地,第一通信设备1可以将运动信息与训练请求(如上面阐明的信息)一起发送至第二通信设备2,以允许第二通信设备2决定在训练/跟踪过程中使用哪些发送波束。然后,在这种情况下,可以在波束细化包中传送运动信息,在这种情况下,不需要涉及SME。甚至进一步地,第一通信设备1可以将其位置的估计(基于IMU数据)与训练/跟踪请求一起发送至第二通信设备,以允许第二通信设备决定在训练/跟踪过程中使用哪些波束,在规定波束训练包中传送哪些波束。
波束细化包可以位于BRP(波束细化阶段)帧、或通告帧、或附接至包并且承载控制信息的控制尾部中、或作为与数据帧进行聚合的控制帧。可替代地,能够通过与其中发生波束成形通信的频段不同的频段传送运动信息。
在该上下文中,应注意,波束细化包是用于请求并且实现波束训练的定向帧。其包含用于训练的必要参数,例如,待使用的扇区数量、待执行的训练类型(例如,发送/接收/混合)、所需的反馈类型、以及允许站对不同的波束组合测量信号质量的训练单元。通告帧是传送控制信息的管理帧。控制尾部是附接至包并且承载允许例如快速链路适配的信息的短控制帧。
应注意,即使之前的描述主要与VR有关,然而,上述同样能够适用于AR或MR。更一般地,本公开还涉及与利用其位置的移动设备的无线通信。作为实施例,可以与无人飞行器(UAV)建立无线回程,无线回程桥接端用户(使用STA)与AP之间的距离。UAV可以改变其位置,以对端用户的覆盖进行优化。此外,具有WLAN装备的气球能够建立无线回程或本地热点。另一情景仅包括使用WLAN或其他标准经由无线链路而控制的移动UAV。
在UAV情景中,作为其中可以应用本公开的另一示例性情景,可以根据端用户与UAV的运动信息对AP、UAV、以及端用户的发送和接收波束进行更新。由此,对于该情景,在下层提供运动信息也可能是有利的。
因为第二通信设备能够基于运动信息完美地适配参数并且因此能够确定在波束成形和/或波束跟踪和/或规律的传输过程中使用哪些发送波束,所以运动信息可能使得跟踪或训练不必要。
在下列示例性实现方式中,将描述基于运动的波束成形和定向通信的细节。
图8示出了所公开的解决方案的实施方式,其中,示出了PHY、MAC、以及对应接口之间的关系,具体地,示出了MAC子层管理实体(MLME)。由作为独立管理平面的站管理实体(SME)控制接口(实线),具体地,用于PHY和MAC的管理实体(分别为PLME和MLME),从而允许设置、获得、或修改原语。如图1中所示,通信单元11接受运动信息10,触发参数改变(参数化单元12中)。其可能的实现可以如下。
基于IMU信息,触发与旋转/平移扇区信息对应的指定扇区的RX波束测量。在图9中,示出了如何在VR/无人机STA处使用IMU数据来推断待使用的接收波束成形参数,以维持与AP的对准。更具体地,能够将IMU数据(与当前使用的波束信息一起)映射至由管理实体(具体地,MAC子层管理实体(MLME))作为参数传送至MAC的角度或扇区信息。映射单元能够被视为用于修改一个或多个波束参数的参数化单元12的一个实施方式。一旦接收该原语,MAC则触发对来自AP的定向波束/信标的测量并且指示PHY用于测量,RX波束与作为原语参数的一部分的RX扇区信息对应。此外,基于本地传感器可用的IMU运动信息以及来自AP调度的信息,时间戳信息可以与RX扇区信息相关。因此,如由原语参数指示的,对于来自AP的定向帧的测量,在给定的时间戳使用特定的RX波束。
在图10中描绘了该原语以及管理实体与VR/无人机STA的MAC的相互作用。将对所请求的扇区的测量报告报告回至管理实体,管理实体确定所需的进一步动作,例如,波束改变或触发与AP的波束重新对准。更进一步地,如果已经找出更好的接收波束,则能够进一步在AP的后续传输中使用这些波束。
当AP接收运动信息时(从带内或带外消息),其能够使用该运动信息对定向波束传输进行调度,从而允许进行训练以及以最小训练开销进行数据传输。例如,一旦知道VR/无人机STA的运动信息,AP则可以传送定向帧,例如,预测方向上的信标(例如,在无该知识的情况下使用的方向子集),以允许接收者对其接收波束进行恒定地训练。基于运动信息对定向帧传输的参数进行适配,例如,发送方向、发生该传输的频率、所包含的信息类型,以使得允许VR/无人机STA执行跟踪,并且当需要时,在介质不被过多控制信息占用的情况下,接收更新数据(基于新位置)。能够从运动信息推断其中应传送定向波束的发送扇区。基于VR/无人机STA的报告速度/加速度参数以及AP处的本地调度信息(当下一传输可能时),与对其各个应当进行测试的时间戳一起创建TX扇区/天线/AWV的列表。基于速度以及测量的不确定性,还能够创建各个扇区的时隙数量,其中,重复定向帧,以确保VR/无人机STA处的收到/接收波束训练。由AP的管理实体将这些参数作为原语传送至MAC,然后,构建定向帧并且指示PHY以所需的时间戳发送所需的波束。在图10中,将该原语称为MLME-VRBTrkReq。
在图11中,示出了运动信息的带内传输的情况。在这种情况下,VR STA的管理实体请求MAC与训练信息或请求一起传送定向帧(DirFrame),例如,BRP帧,或传送包含该信息的通告帧。可替代地,原语可以指示MAC将承载运动信息的某一控制帧与数据帧进行聚合并且在PPDU中将这些与跟踪请求及所附接的对应训练单元一起进行传送。如果之前发生波束成形训练,则能够与波束成形反馈信息一起或作为控制尾部的一部分传送运动信息,控制尾部附接至数据包,以给出待使用的未来波束的指示。在接收AP的MAC时,将该信息转发至其管理实体。
基于由上述所述一种方法接收的运动信息,AP确定所采取的动作,例如,利用在若干方向上的PPDU重复而请求波束跟踪、或波束改变、或可靠传输并且对MAC进行相应地指示。由管理实体基于运动信息确定待使用的波束方向,即,将运动信息转变成其中在特定时间执行波束成形传输或训练的扇区。然后,将方向与时间作为参数转发至MAC,以创建对应的帧并且指示PHY根据给定的参数开始传输。
进一步地,SME可以向并不作为第二通信设备中包括的通信单元的一部分的其他实体(例如,图1和图2中所示的接口30)提供对所接收的运动信息的直接存取,从而允许例如对作为VR/无人机运动/移动或位置改变的结果的图像/渲染数据进行适配。
来自管理实体的MLME-VRTrkResponse原语指示MAC创建向VR/无人机STA通知使用哪些发送波束的帧,此外,一旦接收原语,则在所创建的MAC帧中指示关于由PCP/AP接收来自STA的响应并且利用其接收波束的时间戳的信息。如请求中所指示的,来自VR/无人机STA的响应应包含关于一个或多个发送波束的已更新运动信息与定向测量。
图12示出了管理网络,其中,无线网络控制器(未示出)或一个AP负责移动性管理。在管理网络内,能够将关于多个AP的发送与接收周期的信息包含在MAC响应MLME-VRTrkResponse而发出的帧内。主AP或控制器能够基于运动信息而确定哪些AP正在参与。在这种情况下,可以将预期来自不同AP的信标传输的时间通知给VR/无人机STA,以使得前者能够利用此训练波束并且训练在什么时间向AP传送响应,例如,关联请求。这在图12中进行了示出。
如果VR/无人机STA检测其运动(InMotion标记),或者如果在定向测量之后,接收波束已改变,则应对AP的后续传输的参数进行相应地适配,以允许后者使其波束进行重新对准。这在图13中进行了示出。由此,在这种情况下,能够利用训练单元的重复传送数据包,以允许AP使其波束重新对准。可替代地,在由映射单元(将IMU数据映射至TX波束)指示的若干方向上传送的训练包能够领先于数据传输。
在上文中,已经描述了将各个实施方式应用于本公开中的各个情景与应用。因此,例如,所描述的移动STA可以是AR/VR头盔(也被称为HMD)或无人机(也被称为UAV)或任意其他随意的移动设备,诸如可以若干自由度(例如,6DOF)移动的机器人或机器人臂。
由此,上述讨论仅公开并且描述了本公开的示例性实施方式。本领域技术人员应当理解的是,在不偏离其实质或基本特征的情况下,本公开可以涵盖其他具体的形式。相应地,本公开的公开内容旨在是示出性的,而非限制本公开的范围以及其他权利要求。包括此处教导的任意易于辨别的变形的本公开部分限定了上述要求保护的术语的范围,以使得发明主体不是专用于公开的。
在权利要求中,词语“包括”并不排除其他元件或步骤,并且非限定性冠词“一”或“一个”不排除多个。单一元件或其他单元可以履行权利要求中阐述的若干项的功能。在互不相同的附属权利要求中阐述特定的措施的唯一事实并不表示不能有利地使用这些措施的组合。
迄今,在被描述为至少部分由软件控制的数据处理装置实现的本公开的实施方式中,应当认识到,诸如光盘、磁盘、半导体存储器等的承载该软件的非易失性机器可读介质也被视为表示本公开的实施方式。进一步地,还可以以其他形式分配该软件,诸如经由互联网或其他有线或无线电信系统。
可以由对应的硬件和/或软件元件实现所公开的设备、装置、以及系统中的元件,例如,适当的电路或线路。电路指向电子部件的结构组件,包括传统的电路元件、包括专用集成电路、标准集成电路的集成电路、专用标准产品、以及场可编程门阵列。进一步地,电路包括根据软件代码被编程或配置的中央处理单元、图形处理单元、以及微处理器。尽管电路包括上述所述硬件执行软件,然而,电路不包括纯软件。可以由单一设备或单元、或多个设备或单元、或芯片集、或处理器实现电路或线路。
其遵循所公开主体的进一步实施方式的列表;
1.一种第一通信设备,包括:
运动信息电路,被配置为获得表示第一通信设备的运动的运动信息;
通信电路,被配置为与第二通信设备进行通信;以及
参数化电路,被配置为基于运动信息设置由通信电路执行的通信的一个或多个通信参数。
2.根据实施方式1所述的第一通信设备,
其中,一个或多个通信参数指物理层参数、预编码器设置、纠错参数、调制参数、用于调制的星群的星群参数、交织参数、训练序列频率、媒体接入控制MAC资源、用于通信的波束的波束方向、以及用于通信的波束的波束宽度中的一项或多项。
3.根据前述实施方式中任一项所述的第一通信设备,进一步包括被配置为执行波束成形和/或波束跟踪的波束成形电路,
其中,参数化单元被配置为对用于波束成形和/或波束跟踪的波束的方向和/或宽度进行适配。
4.根据实施方式3所述的第一通信设备,
其中,波束成形电路被配置为执行因从服务管理实体接收运动信息而触发的波束成形和/或波束跟踪。
5.根据前述实施方式中任一项所述的第一通信设备,其中,通信电路被配置为将下列中的一项或多项发送至第二通信设备:
运动信息;
一个或多个通信参数;
波束成形请求,请求第二通信设备执行波束成形训练和/或波束跟踪和/或波束切换和/或提供波束成形参数。
6.根据实施方式3、4、或5所述的第一通信设备,
其中,通信电路被配置为请求第二通信设备提供起始扇区、多个扇区、扇区列表、多个角度、利用第二通信设备进行测试的角度列表、和/或对其执行测量的波束成形传输的时间表中的一项或多项。
7.根据前述实施方式中任一项所述的第一通信设备,其中,通信电路被配置为请求第二通信设备对训练间隔进行调度,其中,交换具体地包含已更新的运动信息的定向帧,以对波束进行适配。
8.根据前述实施方式中任一项所述的第一通信设备,其中,基于所接收的运动信息选择由第二通信设备在定向发送或接收过程中所使用的波束。
9.根据前述实施方式中任一项所述的第一通信设备,其中,通信电路被配置为将运动信息与波束成形请求一起发送至第二通信设备,以允许第二通信设备确定是否需要波束成形训练和/或波束跟踪和/或波束切换,并且如果需要,则确定在波束成形训练和/或波束跟踪过程中使用哪些发送波束。
10.根据实施方式9所述的第一通信设备,
其中,通信电路被配置为在波束细化包中发送运动信息。
11.根据前述实施方式中任一项所述的第一通信设备,其中,通信电路被配置为将位置估计与波束成形请求一起发送至第二通信设备,以允许第二通信设备确定在波束成形训练或波束跟踪过程中使用哪些波束,所述位置估计指示对第一通信设备的位置的绝对或相对位置和/或差分分量的估计。
12.根据前述实施方式中任一项所述的第一通信设备,其中,通信电路被配置为将运动信息发送至比传输层更低的分级层模型的一层内的第二通信设备。
13.根据前述实施方式中任一项所述的第一通信设备,其中,运行信息包括下列中的一项或多项:
-定义加速度全比例选择的线性比例;
-定义陀螺仪全比例选择的旋转比例;
-线性加速度X轴;
-线性加速度Y轴;
-线性加速度Z轴;
-俯仰角速率;
-滚动角速率;
-横摆角速率;
-左眼与右眼水平位置;
-左眼与右眼垂直位置;
-用于眼睛跟踪的保留比特,诸如瞳孔大小、眨眼、扫视;或
其中,运动信息进一步包括:地图构建,从一个或多个所述参数至指示信道不稳定性程度的一个或多个值;和/或请求,利用包内或包末端处的训练序列的重复以及所需的该重复次数通过信道估计序列在一个或多个包内的重复而传送包。
14.根据实施方式13所述的第一通信设备,
其中,参数化电路被配置为将运动信息中所包括的一个或多个参数地图构建至用于波束成形的扇区的列表或扇区与对应时间戳的列表,所述时间戳指示在波束成形训练和/或发送过程中使用特定扇区的时间。
15.根据前述实施方式中任一项所述的第一通信设备,其中,第一通信设备指头戴式显示设备。
16.一种第二通信设备,包括:
通信电路,被配置为从第一通信设备接收运动信息,运动信息表示第一通信设备的运动;和
参数化电路,被配置为基于运动信息设置用于发送和/或接收内容的一个或多个通信参数。
17.根据实施方式16所述的第二通信设备,
进一步包括:波束成形电路,被配置为基于运动信息执行波束成形和/或波束跟踪,以形成供通信电路接收运动信息和/或发送内容所使用的波束。
18.根据实施方式17所述的第二通信设备,
其中,波束成形电路被配置为基于运动信息对用于发送内容的波束的方向和/或宽度进行适配。
19.根据实施方式16至18中任一项所述的第二通信设备,
其中,通信电路被配置为从第一通信设备接收下列中的一项或多项:
一个或多个通信参数;
波束成形请求,请求第二通信设备执行波束成形训练和/或波束跟踪和/或提供波束成形参数;以及
训练请求,请求第一通信设备从第二通信设备接收的所需训练单元的量。
20.根据实施方式16至19中任一项所述的第二通信设备,
其中,通信电路被配置为与第一通信设备协商波束成形参数。
21.根据实施方式16至20中任一项所述的第二通信设备,
其中,第二通信设备指虚拟增强或混合现实设备。
22.根据实施方式16至21中任一项所述的第二通信设备,
其中,通信电路被配置为基于运动信息对定向帧的发送进行调度,以允许第一通信设备更新其接收和/或发送的波束。
23.根据实施方式16至22中任一项所述的第二通信设备,
其中,通信电路被配置为基于运动信息调度其中第一通信设备能够将定向帧传送至第二通信的时隙,具体地,用于确定待使用的扇区或到达角度的波束测量或波束更新。
24.根据实施方式16至23中任一项所述的第二通信设备,
其中,通信电路被配置为基于运动信息将其中第一通信设备能够将定向帧传送至相邻的第二通信设备的时隙或其中相邻的第二通信设备传送定向帧的时隙通知给第一通信设备,所述定向帧用于第一通信设备的波束测量。
25.根据实施方式24所述的第二通信设备,
其中,通信电路被配置为基于运动信息选择相邻的第一通信设备并且将其与可选地关于第二通信设备的位置的信息一起或与第一通信设备发送和/接收所使用的扇区或角度的列表一起指示给第一通信设备。
26.根据实施方式16至25中任一项所述的第二通信设备,
其中,通信电路被配置为基于运动信息将触发帧内的调度或随机存取资源单元通知给第一通信设备,以允许运动中的第一通信设备将其发送至与其不相关的第二通信设备。
27.一种第一通信方法,包括:
获得表示第一通信设备的运动的运动信息;
基于运动信息设置通信的一个或多个通信参数;并且
与第二通信设备进行通信。
28.一种第二通信方法,包括:
从第一通信设备接收运动信息,运动信息表示第一通信设备的运动;并且
基于运动信息设置用于发送和/或接收内容的一个或多个通信参数。
29.一种第一或第二通信设备或方法,
其中,通信与无线通信有关,具体地,与毫米波通信或根据IEEE802.11标准的通信有关。

Claims (20)

1.一种第一通信设备,包括:
运动信息电路,被配置为获得表示所述第一通信设备的运动的运动信息;
通信电路,被配置为与第二通信设备进行通信;以及
参数化电路,被配置为基于所述运动信息设置由所述通信电路执行的所述通信的一个或多个通信参数。
2.根据权利要求1所述的第一通信设备,
其中,所述一个或多个通信参数是以下各项中的一项或多项:物理层参数、预编码器设置、纠错参数、调制参数、用于调制的星群的星群参数、交织参数、训练序列频率、媒体接入控制MAC资源、用于通信的波束的波束方向、用于通信的波束的波束宽度。
3.根据权利要求1所述的第一通信设备,
进一步包括波束成形电路,所述波束成形电路被配置为执行波束成形和/或波束跟踪;
其中,所述参数化单元被配置为对用于波束成形和/或波束跟踪的波束的方向和/或宽度进行适配。
4.根据权利要求3所述的第一通信设备,
其中,所述波束成形电路被配置为执行由接收来自服务管理实体的所述运动信息所触发的波束成形和/或波束跟踪。
5.根据权利要求1所述的第一通信设备,
其中,所述通信电路被配置为将以下各项中的一项或多项发送至所述第二通信设备:
-所述运动信息;
-一个或多个通信参数;
-请求所述第二通信设备执行波束成形训练和/或波束跟踪和/或波束切换和/或提供波束成形参数的波束成形请求。
6.根据权利要求3所述的第一通信设备,
其中,所述通信电路被配置为请求所述第二通信设备提供以下各项中的一项或多项:起始扇区、多个扇区、扇区列表、多个角度、利用所述第二通信设备进行测试的角度列表和/或应当被执行测量的波束成形传输的时间调度。
7.根据权利要求1所述的第一通信设备,
其中,所述通信电路被配置为将所述运动信息与波束成形请求一起发送至所述第二通信设备,以允许所述第二通信设备决定是否需要波束成形训练和/或波束跟踪和/或波束切换,如果需要,则决定在波束成形训练和/或波束跟踪期间使用哪些发送波束。
8.根据权利要求7所述的第一通信设备,
其中,所述通信电路被配置为在波束细化包中发送所述运动信息。
9.根据权利要求1所述的第一通信设备,
其中,所述通信电路被配置为将位置估计与波束成形请求一起发送至所述第二通信设备,以允许所述第二通信设备决定在波束成形训练或波束跟踪期间使用哪些波束,所述位置估计表明对所述第一通信设备的位置的绝对或相对位置和/或差分分量的估计。
10.根据权利要求1所述的第一通信设备,
其中,所述通信电路被配置为将所述运动信息在分级层模型的比传输层低的一层内发送至第二通信设备。
11.根据权利要求1所述的第一通信设备,
其中,所述运动信息包括下列中的一项或多项:
-定义加速度全比例选择的线性比例;
-定义陀螺仪全比例选择的旋转比例;
-线性加速度X轴;
-线性加速度Y轴;
-线性加速度Z轴;
-俯仰角速率;
-滚动角速率;
-横摆角速率;
-左眼与右眼水平位置;
-左眼与右眼垂直位置;
-用于眼睛跟踪的保留比特,诸如瞳孔大小、眨眼、扫视;或
-从一个或多个所述参数至指示信道不稳定性程度的一个或多个值的映射;和/或请求利用包内或包的末端处的训练序列的重复以及所需的重复次数通过信道估计序列在一个或多个包内的重复传送包。
12.根据权利要求1所述的第一通信设备,
其中,所述第一通信设备是头戴式显示设备。
13.一种第二通信设备,包括:
-通信电路,被配置为从第一通信设备接收运动信息,所述运动信息表示所述第一通信设备的运动;和
-参数化电路,被配置为基于所述运动信息设置用于发送和/或接收内容的一个或多个通信参数。
14.根据权利要求13所述的第二通信设备,
进一步包括:波束成形电路,被配置为基于所述运动信息执行波束成形和/或波束跟踪,以形成供所述通信电路接收所述运动信息和/或发送内容所使用的波束。
15.根据权利要求14所述的第二通信设备,
其中,所述波束成形电路被配置为基于所述运动信息对用于发送内容的波束的方向和/或宽度进行适配。
16.根据权利要求13所述的第二通信设备,
其中,所述通信电路被配置为从第一通信设备接收下列中的一项或多项:
-一个或多个通信参数;
-请求所述第二通信设备执行波束成形训练和/或波束跟踪和/或提供波束成形参数的波束成形请求;以及
-向所述第二通信设备请求所述第一通信设备所需的接收训练单元的量的训练请求。
17.根据权利要求13所述的第二通信设备,
其中,所述通信电路被配置为与所述第一通信设备协商波束成形参数。
18.根据权利要求13所述的第二通信设备,
其中,所述第二通信设备是虚拟增强设备或混合现实设备。
19.一种第一通信方法,包括:
-获得表示第一通信设备的运动的运动信息;
-基于所述运动信息设置通信的一个或多个通信参数;并且
-与第二通信设备进行通信。
20.一种第二通信方法,包括:
-从第一通信设备接收运动信息,所述运动信息表示所述第一通信设备的运动;并且
-基于所述运动信息设置用于发送和/或接收内容的一个或多个通信参数。
CN202080054967.1A 2019-08-06 2020-08-06 通信设备与方法 Pending CN114208219A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP19190315.2 2019-08-06
EP19190315 2019-08-06
PCT/EP2020/072167 WO2021023830A1 (en) 2019-08-06 2020-08-06 Communication devices and methods

Publications (1)

Publication Number Publication Date
CN114208219A true CN114208219A (zh) 2022-03-18

Family

ID=67658486

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080054967.1A Pending CN114208219A (zh) 2019-08-06 2020-08-06 通信设备与方法

Country Status (4)

Country Link
US (1) US11984952B2 (zh)
EP (1) EP4010994A1 (zh)
CN (1) CN114208219A (zh)
WO (1) WO2021023830A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11489699B2 (en) * 2021-01-22 2022-11-01 Cisco Technology, Inc. Channel estimation for high-speed wireless clients
US20220256359A1 (en) * 2021-02-05 2022-08-11 Qualcomm Incorporated Updating beam or measurement configurations using antenna orientation information associated with user equipments
US11901985B2 (en) * 2021-07-29 2024-02-13 Qualcomm Incorporated Pose-based beamforming techniques for wireless communications

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10209771B2 (en) * 2016-09-30 2019-02-19 Sony Interactive Entertainment Inc. Predictive RF beamforming for head mounted display
US10743194B2 (en) * 2015-10-23 2020-08-11 Huawei Technologies Co., Ltd. Method and apparatus for performing association beamforming training in a wireless network
US20180132116A1 (en) * 2016-10-26 2018-05-10 Invensense Inc. Systems and methods for motion assisted communication
WO2018145153A1 (en) * 2017-02-08 2018-08-16 Immersive Robotics Pty Ltd Antenna control for mobile device communication
US9866286B1 (en) * 2017-02-15 2018-01-09 Oculus Vr, Llc Positional tracking assisted beam forming in wireless virtual reality systems
US10863399B2 (en) * 2017-05-04 2020-12-08 Qualcomm Incorporated Predictive beamforming and subarray selection
US10938503B2 (en) * 2017-12-22 2021-03-02 Advanced Micro Devices, Inc. Video codec data recovery techniques for lossy wireless links

Also Published As

Publication number Publication date
EP4010994A1 (en) 2022-06-15
WO2021023830A1 (en) 2021-02-11
US20220271810A1 (en) 2022-08-25
US11984952B2 (en) 2024-05-14

Similar Documents

Publication Publication Date Title
US11984952B2 (en) Communication devices and methods
US11899853B2 (en) Communication devices and methods
KR102659986B1 (ko) 무선통신시스템에서 피드백 정보를 전송하는 방법
JP7293395B2 (ja) 無線通信システムにおいてサイドリンク通信及びフィードバックに関連するueの動作方法
CN113303010B (zh) 在无线通信系统中与反馈信息发送定时相关的方法
KR102640665B1 (ko) 무선통신시스템에서 사이드링크 harq 피드백을 전송하는 방법
JP6891320B2 (ja) 無線通信システムにおいてRRCの再開後、RLFに関連するRRCメッセージを送信するサイドリンクTx UEの動作方法
KR102659985B1 (ko) 무선통신시스템에서 사이드링크 harq 피드백을 전송하는 방법
KR20210106000A (ko) 무선 통신 시스템에서 데이터를 송수신하는 방법 및 이에 대한 장치
TWI750619B (zh) 在無線通訊系統中操作與無線鏈路故障報告有關的傳送使用者設備的方法
CN112384880A (zh) 用于vr体验的基于物理接近度和/或姿势的链接的系统和方法
JP7136848B2 (ja) 無線通信システムにおけるrlf関連端末の動作方法
EP3591502B1 (en) Virtual reality image sending method and apparatus
TW202118339A (zh) 在無線通訊系統中與頻寬部分的單播鏈路上傳送訊號的使用者設備有關的操作方法
KR20210141295A (ko) 엣지 컴퓨팅 서비스를 이용한 영상 컨텐츠 전송 방법 및 장치
KR20210125586A (ko) 무선 통신 시스템에서 전송 블록 크기 결정 및 데이터를 송수신하는 방법 및 이에 대한 장치
EP4182044A1 (en) 5g optimized game rendering
KR20220001312A (ko) 무선 통신 시스템에서 데이터의 송수신을 제어하기 위한 방법 및 장치
US20230038033A1 (en) Systems and methods of wireless triggering buffer status reporting for transmission streams
US20230022424A1 (en) Systems and methods of buffer status reporting for transmission streams
WO2022204997A1 (zh) 无线通信方法、可移动平台、系统及计算机可读存储介质
KR20220153437A (ko) 통신 시스템에서 ar 서비스를 제공하는 방법 및 장치
WO2020175955A1 (ko) 무선 통신 시스템에서 신호 송수신 방법 및 이를 수행하는 장치
TW202324962A (zh) 橫跨訊框進行分段劃分的方法和系統
JP2023537733A (ja) スロット情報を記述するシステムおよび方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination