CN108028961A - 通信系统中发送和接收数据的方法和设备 - Google Patents

Abstract

公开了一种用于在通信系统中发送和接收数据的方法和设备，并且涉及第五代(5G)或者前5G通信系统，第五代(5G)或者前5G通信系统将被提供以在诸如长期演进(LTE)的4G通信系统之后支持更高的数据传输速率。在支持设备到设备(D2D)通信的无线通信系统中由发送设备发送数据的方法可以包括：从一段视频容器数据中分离视频数据和与一起输出的视频相关数据，输出视频数据以及将视频相关数据发送到接收设备。

Description

通信系统中发送和接收数据的方法和设备

技术领域

本公开涉及通信系统中通过使用设备到设备(D2D)通信来发送和接收数据的方法和设备。

背景技术

为了满足从第四代(4G)通信系统成为商用以来不断增长的无线电数据业务的需求，已经努力开发了改进的第五代(5G)通信系统或者前5G通信系统。为此，5G通信系统或者前5G通信系统被称为超4G网络通信系统或者后长期演进(LTE)系统。

为了获得高数据传输速率，5G通信系统被认为是以超高频(毫米波)频带(例如，60GHz的频带)实现的。为了衰减波的路径损耗，并且为了增加波在超高频带中的传输距离，在5G通信系统中讨论了波束成形、大规模多输入多输出(MIMO)、全维MIMO(FD-MIMO)、阵列天线、模拟波束成形和大规模天线技术。

此外，为了改善系统的网络，演进的小型小区、高级小型小区、云无线电接入网络(RAN)、超密集网络、设备到设备(D2D)通信、无线回传、移动网络、协作通信、协作多点(CoMP)和接收干扰消除等技术已经在5G通信系统中得到发展。

此外，在5G系统中正在开发的是：作为高级的编码调制(ACM)方案的混合FSK和QAM调制(FQAM)和滑动窗口叠加编码(SWSC)，和作为高级接入技术的滤波器组多载波(FBMC)、非正交多址(NOMA)和稀疏码多址(SCMA)等。

以上信息仅作为背景信息被呈现以帮助理解本公开。关于以上的任何一个可能是否适用于关于本公开的现有技术，没有做出决定，也没有断言。

发明内容

本公开的各方面至少解决上述问题和/或缺点，并至少提供下面描述的优点。相应地，本公开的一个方面是提供一种通过在通信系统中使用设备到设备(D2D)通信方案发送和接收数据的方法和设备。

本公开的另一方面是提供一种用于在通信系统中通过使用D2D通信方案发送和接收与视频有关的数据的方法和装置。

根据本公开的一个方面，提供了一种用于在支持D2D通信的通信系统中由发送设备发送数据的方法。该方法包括从视频容器数据中分离出视频数据和与视频数据一起输出的视频相关数据，输出视频数据，并将视频相关数据发送到接收设备。

根据本公开的另一方面，提供了一种用于在支持D2D通信的通信系统中由接收设备接收数据的方法。该方法包括：从发送设备接收与视频数据一起输出的视频相关数据，其中视频数据和视频相关数据从一段视频容器数据分离，并输出视频相关数据。

根据本公开的另一方面，提供了一种用于在支持D2D通信的通信系统中发送数据的发送设备。该设备包括控制单元，该控制单元进行控制以从视频容器数据中分离视频数据和与视频数据一起输出的视频相关数据并输出视频数据；以及发送单元，发送视频相关数据到接收设备。

根据本公开的另一方面，提供了一种用于在支持D2D通信的通信系统中接收数据的接收设备。该设备包括：接收单元，其接收与视频数据一起输出的视频相关数据，其中视频数据和视频相关数据从一段视频容器数据分离；以及控制单元，其进行控制以输出视频相关的数据。

根据以下结合附图公开了本公开的各种实施例的详细描述，本公开的其他方面、优点和显著特征对于本领域技术人员将变得显而易见。

附图说明

通过以下结合附图的描述，本公开的某些实施例的上述和其它方面、特征和优点将变得更加明显，其中：

附图说明

图1是示出根据本公开的实施例的通信系统的视图；

图2a、图2b、图2c和图2d是示出根据本公开的实施例的用于在通信系统的发送设备中发送视频相关数据的方法的示例的视图；

图3是图示根据本公开的实施例的通信系统的发送设备110发送信标帧的示例的视图；

图4是示出根据本公开的实施例的接收设备通过通信系统中的服务器接收数据的示例的图；

图5a和图5b是示出根据本公开的实施例的当通信系统包括多个接收设备时发送设备发送数据的示例的视图；

图6是示出根据本公开的实施例的当在发送/接收设备包括通信系统中的多个无线电接入技术(RAT)时发送数据的示例的视图；

图7是示出根据本公开的实施例的当发送/接收设备包括通信系统中的多个RAT时发送数据的另一示例的视图；

图8是示出根据本公开的实施例的用于在通信系统的发送设备中发送数据的方法的视图；

图9是示出根据本公开的实施例的通信系统的接收设备接收数据的方法的示例的图。

图10是表示根据本发明的实施例的使通信系统的发送设备和接收设备之间的绝对时间同步的方法的一个例子的图。

图11是表示根据本发明的实施例的通信系统的接收设备接收数据的方法的另一示例的图。

图12是表示根据本发明的实施例的通信系统的接收设备和中继设备接收数据的方法的一示例的图。

图13是表示根据本发明的实施例的通信系统的接收设备和中继设备接收数据的方法的另一示例的图。

图14a和图14b是示出根据本公开的实施例的其中通信系统的接收设备输出用户输入(UI)数据的示例的视图；

图15a和15b是示出根据本公开的实施例的通信系统的接收设备输出UI数据的另一示例的视图；

图16是示出根据本公开的实施例的通信系统的接收设备输出UI数据的另一示例的图。

图17是图示根据本公开的实施例的其中通信系统的接收设备执行图16的实施例的方法的示例的图。

图18是表示根据本发明的实施例的通信系统的接收设备输出UI数据的其他例子的图。

图19是图示根据本公开的实施例的其中通信系统的接收设备执行图18的实施例的方法的示例的图；

图20是示意性地示出根据本公开的实施例的用于在通信系统中发送数据的发送设备的内部结构的示例的图。

图21是示意性地示出根据本公开的实施例的用于在通信系统中接收数据的接收设备的内部结构的示例的图。和

图22是示意性地示出根据本公开的实施例的用于在通信系统中发送和接收数据的中继设备的内部结构的示例的图。

在整个附图中，应该注意的是，相似的附图标记用于描绘相同或相似的元件、特征和结构。

具体实施例

提供以下参照附图的描述以帮助全面理解由权利要求及其等同物限定的本公开的各种实施例。它包括各种具体细节以帮助理解，但是这些仅被视为示例性的。因此，本领域的普通技术人员将认识到，在不脱离本公开的范围和精神的情况下，可以对这里描述的各种实施例进行各种改变和修改。另外，为了清楚和简明，可以省略对公知功能和结构的描述。

在下面的描述和权利要求中使用的术语和词语不限于书面含义，而是仅被发明人用来使得能够清楚和一致地理解本公开。因此，本领域技术人员应该清楚，提供本公开的各种实施例的以下描述仅用于说明的目的，而不是为了限制由所附权利要求及其等同物限定的本公开的目的。

应当理解的是，除非上下文另外明确指出，否则单数形式“一个”，“一个”和“该”也包括复数指代。因此，例如，对“一个部件表面”的引用包括对一个或多个这样的表面的引用。

根据本公开的主题，通信系统的发送设备从视频容器数据分离视频数据和视频相关数据，从而将视频相关数据发送到接收设备，并且接收设备输出与在发送设备中输出的视频数据同步的视频相关数据。

为此，将详细描述根据本公开的实施例的用于在通信系统中发送和接收数据的方法和装置。

图1示出了根据本公开的实施例的通信系统。

参考图1，通信系统包括发送设备110和接收设备130(设备110和130可以是收发器)。另外，通信系统可以进一步包括以下中的至少一个：根据通信环境管理无线电资源的无线节点150；向接收设备130发送媒体数据和从发送设备110接收媒体数据的服务器170；支持天波广播的广播设备190。

这里，发送设备110例如可以是用于显示/提供视频的显示设备，并且接收设备130例如可以是用于再现视频、文本或声音中的至少一个的播放设备。另外，广播设备190例如可以是广播电台。

发送设备110与接收设备130或无线节点150进行通信。更具体地，发送设备110从服务器170或从广播设备190接收视频文件，或者具有存储在发送设备110中的视频文件。另外，发送设备110对与视频文件相对应的内容进行解码，从而将视频数据和与视频数据同步的视频相关数据(例如，要与视频数据同时输出的数据，诸如声音、文本或图像)分离。另外，发送设备110通过视频输出单元输出视频数据，并将视频相关数据发送到接收设备130或无线节点150。此时，在通信系统是宽带无线通信系统的情况下无线节点150可以是基站，或者在通信系统是无线局域网(LAN)系统的情况下无线节点150可以是接入点(AP)。

如下所述，发送设备110可以以至少三种方式向接收设备130或无线节点150发送视频相关数据。

首先，发送设备110可以通过使用广播技术将视频相关数据发送到其他设备。例如，在宽带通信系统中，发送设备110可以将视频相关数据发送到被运营商许可使用D2D通信方案的所有接收设备130。作为另一示例，发送设备110可以在Wi-Fi通信系统中借助于广播消息(诸如信标帧)发送视频相关数据。

其次，为了仅向包括在特定组中的接收设备130发送视频相关数据，发送设备110可以将其发送到预分组的接收设备130。

第三，发送设备110可以通过使用单播技术将视频相关数据发送到一个特定的接收设备130。例如，在宽带通信系统中，发送设备110可以将视频相关数据仅发送给被运营商允许使用D2D通信方案的接收设备中的特定接收设备130。作为另一示例，发送设备110可以仅将通过使用蓝牙功能在通信系统中已经执行配对的接收设备130发送视频相关数据。

将参照图2a、2b、2c、2d、3、4、5a、5b、6和7详细描述上述发送设备110发送视频相关数据的方法的一个示例。

参考图1，接收设备130与发送设备110或无线节点150进行通信。接收设备130从发送设备110或无线节点150接收将与视频数据同步的视频相关数据。另外，在视频相关数据是音频数据的情况下，接收设备130解码音频数据，并通过内部音频输出单元(例如，诸如头戴式耳机或耳机之类的音频设备，或者辅助输出设备)同时与视频数据同步地输出解码的音频数据。另外，在视频相关数据是文本数据(例如，字幕)的情况下，接收设备130在与视频数据同步的同时通过内部视频输出单元输出文本数据。接收设备130的详细操作将参照图9、10、11、12和13进行描述。

当在发送设备110和接收设备130之间发送和接收视频相关数据时，无线节点150起到管理和控制无线电资源的作用。例如，对于一恒定时间，无线节点150可以通过发送设备110的资源请求向发送设备110分配无线电资源。作为另一示例，无线节点150可以指定可用于发送设备110与接收设备130之间的通信的目的的无线电资源池，并且可以向发送设备110和接收设备130通知分配的无线电资源。

服务器170将视频数据或视频相关数据提供给发送设备110、接收设备130或无线节点150。

广播设备190可以指当前广播数字天波的站，并且可以通过诸如无线电天线或同轴电缆的单独的输出设备向发送设备110发送广播内容。

根据本公开的实施例的通信系统可以包括构成网络的其它实体以及图1中所示的设备。例如，在宽带通信系统的情况下，通信系统可以包括以下中的至少一个：用于支持移动性的移动性管理实体(MME)；扮演将发送设备110和接收设备130连接到外部网络的角色的服务网关；将服务网关连接到诸如应用服务器的网际协议(IP)网络的分组网关；归属用户服务器(HSS)，其管理发送设备110和接收设备130的订户简档并将其提供给MME；或者创建和管理分组网关与IP网络之间的移动通信业务的策略及其计费规则的节点。用于计费的节点可以管理对D2D通信中的数据的计费。

另外，在使用非许可频带的Wi-Fi通信系统的情况下，通信系统可以包括用于管理无线电资源的AP、蓝牙设备或具有各种类型的无线电接入技术的节点中的至少一个。

在下文中，将描述根据本公开的实施例的在通信系统中发送设备110将视频相关数据发送到接收设备130的示例。

图2a至2d是示出根据本公开的实施例的通信系统的发送设备发送视频相关数据的方法的示例的视图。尽管图2a至2d的实施例示出通信系统包括两个接收设备130-1和130-2，但是本公开的实施例可以应用于包括一个或多个接收设备的所有通信系统。

参考图2a，发送设备110可以将相同的视频相关数据直接发送到多个接收设备130-1和130-2(201)中的每一个。例如，发送设备110可以通过使用Wi-Fi直接通信或蓝牙(BT)通信将视频相关数据直接发送到多个接收设备130-1和130-2中的每一个。作为另一示例，发送设备110可以通过采用Wi-Fi-AP功能或者通过使用长期演进(LTE)-D2D通信来直接向多个接收设备130-1和130-2中的每一个发送视频相关数据。

参考图2b，发送设备110可以通过无线节点150将视频相关数据发送到多个接收设备130-1和130-2中的每一个。也就是说，当无线节点150从发送设备110接收到视频相关数据时(203)，无线节点150可以将视频相关数据发送到多个接收设备130-1和130-2中的每一个(205)。

这里，无线节点150可以是各种形式的无线电接入点(AP)。例如，无线节点150可以是Wi-Fi的AP、蓝牙设备或宽带无线电传输系统中的基站。另外，无线节点150可以具有单个或多个无线电接入技术(RAT)。在无线节点150具有多个RAT的情况下，并且例如在无线节点150具有LTE通信系统和Wi-Fi通信系统的情况下，发送设备110和无线节点150可以通过使用LTE技术发送并接收其间的视频相关数据，无线节点150和接收设备130可以通过使用Wi-Fi技术发送并接收其间的视频相关数据。

参考图2c，发送设备110可以通过服务器170直接与多个接收设备130-1和130-2进行通信。也就是说，发送设备110将视频相关数据发送到服务器170(207)。另外，发送设备110向多个接收设备130-1和130-2中的每一个发送提供视频相关数据的服务器170的服务器接入信息(例如，IP地址)(209)。然后，多个接收设备130-1和130-2中的每一个向服务器170请求视频相关数据(211)，并从服务器170接收视频相关数据(213)。此时，服务器170可以通过使用单播或广播方法将视频相关数据发送到多个接收设备130-1和130-2中的至少一个。

参考图2d，服务器170将视频相关数据发送到无线节点150(215)，并将视频数据发送到发送设备110(217)。另外，接收设备130从无线节点150接收视频相关数据(231)。此时，视频相关数据可以包含信道信息和音频数据(231)。另外，发送设备110可以将广播信息219发送到接收设备231。

这里，接收设备130可以通过使用与接收设备130和无线节点150之间的通信技术相同的通信技术来与发送设备110通信，或者接收设备130可以具有多个无线电接入系统使得接收设备130与发送设备110之间的通信技术可以不同于接收设备130与无线节点150之间的通信技术。例如，接收设备130可以通过使用LTE技术从发送设备110接收广播信息，并且可以通过使用Wi-Fi技术从无线节点150接收视频相关数据。

为了选择一段视频信息，根据本公开的实施例的发送设备110在视频相关数据被发送之前或同时将视频信息发送到接收设备130。也就是说，发送设备110可以将视频信息(即，广播信息)发送到接收设备130，并且如果接收设备130选择了一段视频信息，则发送设备110可以识别对应于所选的视频信息的视频内容。

这里，视频信息可以包含当前从发送设备110、广播信道(例如，MBC，KBS，SBS等)输出的或者可用的视频的标题以及广播标题(例如，“无限挑战”)，或者发送设备110的唯一ID。另外，接收设备130从发送设备110接收视频信息，以便由此通过视频输出单元将其输出。当基于视频信息选择一段视频信息的选择事件发生时，接收设备150将选择的视频信息传送到发送设备110。据此，接收设备150可以接收与所选择的视频信息相对应的视频内容的视频相关数据(例如，声音、字幕、广告等)，以便由此将其输出。

这里，发送设备110可以将视频信息发送给接收设备150，如下所述。

首先，发送设备110可以将视频信息插入到视频相关数据的前部，然后被发送到接收设备130。在这种情况下，当接收到视频相关数据时，接收设备130可以首先仅解码已被插入到视频相关数据的前部的视频信息，而不是解码所有接收的数据，然后通过视频输出单元输出视频信息。例如，发送设备可以将视频信息插入到视频相关数据的前部，然后被发送到图2a和2b中的接收设备130。

其次，发送设备110可以通过使用包括无线节点功能的无线节点的广播分组将视频信息发送到接收设备130。例如，在发送设备110采用Wi-Fi AP功能、蓝牙(BT)的主功能或BT功能的情况下，发送设备110可以将视频信息添加到无线节点的广播分组以便由此将其传送到接收设备130。

例如，在发送设备110采用Wi-Fi AP功能的情况下，发送设备110可以将视频信息插入到包含在信标分组中的服务集标识符(SSID)字段中，作为广播分组，并且可以将其发送到接收设备130。或者，在发送设备110采用其中设备信息被配对广播的BT的主功能的情况下，设备信息可以被替换为视频信息然后被发送到接收设备130。或者，在发送设备110采用BT功能的情况下，发送设备110可以将视频信息包括在BT信号中，然后被发送到接收设备。也就是说，在图2a中，发送设备110可以通过广播信道首先通过信标帧发送视频信息，或者可以首先通过蓝牙配对消息或蓝牙信号发送视频信息，然后可以通过数据信道将视频相关数据发送到接收设备130。或者，在图2c中，发送设备110可以通过广播信道首先通过信标帧发送视频信息，或者可以首先通过蓝牙配对消息或蓝牙信号发送视频信息，然后可以通过服务器170将视频相关数据发送到接收设备130。

发送信标帧的发送设备110的操作可以如图3所示执行。

图3图示了根据本公开的实施例的其中通信系统的发送设备110发送信标帧的示例。

参考图3，在发送设备110采用Wi-Fi AP功能的情况下，发送设备110可以通过使用信标帧发送视频信息，然后可以发送视频相关数据。发送设备110向多个接收设备130-1和130-2中的每一个发送包含SSID字段中的视频信息或设备信息的信标帧(301)。另外，发送设备110将视频相关数据发送到多个接收设备130-1和130-2中的每一个(303)。然后，多个接收设备130-1和130-2中的每一个可以从信标帧获得可以在发送设备110中输出的视频信息。

将参照图2b描述本公开的实施例中的通过无线节点150发送数据的方法。在图2b中，首先，发送设备110建立与无线节点150的通信链路。例如，如果无线节点150是Wi-FiAP，则发送设备110从信标帧中识别连接到无线节点150所需的信息，并进入与无线节点150的可通信状态。或者，如果无线节点150是蓝牙，则无线节点150执行主功能，并且发送设备110执行从功能。此时，发送设备110通过由无线节点150广播的配对信息来执行与无线节点150的配对。

以下将描述在发送设备110完成与无线节点150的连接之后通过无线节点150发送视频相关数据的方法。发送设备110记录并向无线节点150发送可以在本地转发的接收地址。例如，在无线节点150是Wi-Fi的情况下，发送设备110记录MAC地址的目的地地址作为广播地址，然后发送它。然后，无线节点150通过识别MAC地址识别目的地地址是广播地址，并且在无线节点150的区域内广播所接收的视频相关数据，而不通过外部互联网网络进一步转发数据。为此，发送设备110、无线节点150和接收设备130将同意广播地址的定义。在无线节点150是蓝牙(BT)的情况下，当作为从设备的发送设备110将视频相关数据发送到作为主设备的无线节点150时，无线节点150将视频相关数据发送到通过单播或广播方法与无线节点150配对的从属设备的其他接收设备。

下面将描述本公开的实施例中的图2c所示的通过服务器170发送数据的方法。图2c的发送设备110向接收设备130-1和130-2发送接入服务器170所需的信息。例如，在发送设备110采用Wi-Fi AP功能的情况下，发送设备110可以插入用于接入服务器170的信息(例如，互联网上的文件地址(统一资源定位符：URL))以及广播信息到信标帧的SSID字段中，并且可以将其发送到接收设备130。或者，可以预先在接收设备130中提供接入服务器的信息。因此，如果接收设备130期望接收对应的视频相关数据，则接收设备130可以接收信标帧(300)，并且然后可以接入服务器170以由此接收视频相关数据。作为另一示例，在发送设备110采用蓝牙(BT)功能的情况下，广播信息和接入服务器170的信息(例如，URL)可以被包括在蓝牙配对信息的唯一用户标识符(UUID)中。

下面将描述本公开的实施例中的图2d所示的通过服务器170发送数据的方法。图2d的实施例示出当服务器170具有视频和视频相关数据时通过服务器170发送数据的示例，其中服务器170，发送设备110，无线节点150和接收设备130可以在与图4相同的方式中操作。

图4是示出根据本公开的实施例的接收设备通过通信系统中的服务器接收数据的示例的图。

参考图4，服务器170发送视频数据和视频相关数据，如图2d的实施例中所示。因此，发送设备110向服务器170请求信息交换(401)。然后，服务器170将视频相关数据和视频相关数据的信道信息(例如，视频内容的名称信息或发送设备110的名称)发送到无线节点150(403)，将视频数据和视频数据的信道信息发送到发送设备110(405)。此时，服务器170可以通过目的地ID(例如，目的地的唯一ID或IP地址)来识别作为要发送的视频数据的目的地的发送设备110的地址，然后可以将视频数据发送到发送设备110。另外，服务器170可以在与发送设备110进行数据传输之前通过通信来获得发送设备110的设备名称。另外，从服务器170发送到无线节点150的视频相关数据的信道信息可以与从服务器170发送到发送设备110的视频数据的信道信息相同。

当接收到视频数据和视频数据的信道信息时，发送设备110将视频数据的信道信息发送到接收设备130(407)并输出视频数据(409)。

之后，无线节点150将接收到的视频相关数据和视频相关数据的信道信息发送到接收设备130(411,413)。

因此，接收设备130可以基于接收到的视频相关数据和接收到的视频相关数据的信道信息来输出与正在发送设备110中输出的视频数据有关的视频相关数据(例如，音频数据)(415)。

因此，根据本公开的实施例，使用发送设备110和接收设备130的用户可以通过发送设备110查看视频数据，并且可以被提供与用户正在通过接收设备130查看的视频数据相对应的音频数据。

图5a和图5b示出根据本公开的实施例的当通信系统包括多个接收设备时发送设备发送数据的示例。虽然图5a和图5b示出了其中通信系统包括三个接收设备130-1、130-2和130-3的示例，但是本公开的实施例可以应用于包括两个或更多个接收设备的通信系统的全部。

参考图5a，发送设备110可以通过使用不同的频率来将视频相关数据发送到多个接收设备130-1至130-3中的每一个。也就是说，发送设备110可以：通过使用频率f1将视频相关数据发送到接收设备130-1；通过使用频率f2将视频相关数据发送到接收设备130-2；并通过使用频率f3将视频相关数据发送到接收设备130-3。此时，发送设备110可以设置有三个发送块，用于将相同的视频相关数据发送到不同的接收设备。

如图5b所示，发送设备110可以通过使用单个频率将视频相关数据发送到多个接收设备130-1、130-2和130-3中的每一个。也就是说，发送设备110可以确定用于向多个接收设备130-1至130-3中的每一个发送视频相关数据的单个频率(f4)，并且通过使用所确定的频率可以将视频相关数据发送到多个接收设备130-1至130-3。例如，在LTE-D2D通信系统的情况下，发送设备110可以通过使用用于发送灾难信息的公共频率(用于公共安全)将视频相关数据发送到不同的接收设备。

图6示出根据本公开的实施例的其中在发送/接收设备包括通信系统中的多个无线电接入技术(RAT)时发送数据的示例。虽然图6示出了发送设备110和接收设备130分别包括两个RAT，但是本公开的实施例可以应用于包括两个或更多个RAT的所有通信系统。这里，多个RAT中的每一个可以是各种无线通信系统，诸如宽带通信系统、Wi-Fi系统或蓝牙(BT)系统。例如，发送设备110中包括的一个RAT可以是Wi-Fi通信系统，另一个RAT可以是LTE通信系统。

同时，尽管在图中没有示出，但是发送设备110和接收设备130中的每一个可以包括多个射频(RF)单元，而不是多个RAT。例如，多个RF单元可以由能够发送和接收2.4GHz的频率的单元和能够发送和接收5GHz的频率的单元组成。

参照图6，发送设备110包括第一RAT发送单元601和第二RAT发送单元603，并且接收设备130包括第一RAT接收单元605和第二RAT接收单元607。

发送设备110可以通过第一RAT发送单元601和第二RAT发送单元603分别发送视频相关数据(610和630)。另外，接收设备130选择第一RAT发送单元601或第二RAT发送单元603中的一个，以由此接收视频相关数据。接收设备130可以以各种方式选择一个RAT发送单元，诸如信号的强度或用户的选择。例如，如果从第二RAT发送单元603发送的信号的强度大于从第一RAT发送单元601发送的信号的强度，则接收设备130接收从第二RAT发送单元603发送的视频相关数据。之后，如果由于接收设备130的移动从第二RAT发送单元603发送的信号的强度小于从第一RAT发送单元601发送的信号的强度，则接收设备130可以接收从第一RAT发送单元601发送的视频相关数据。

图7是示出根据本公开的实施例的当在发送/接收设备包括通信系统中的多个RAT时发送数据的另一示例的视图。

参考图7，发送设备110包括第一RAT发送单元701和第二RAT发送单元703，并且接收设备130包括第一RAT接收单元705和第二RAT接收单元707。此时，包括在发送设备110中的第一RAT发送单元701可以发送具有比恒定阈值更高的服务质量(QoS)的视频相关数据(710)，并且第二RAT发送单元703可以发送具有比恒定阈值低的服务质量(QoS)的视频相关数据(730)。另外，接收设备130可以通过使用第一RAT接收单元705和第二RAT接收单元707来接收具有高QoS的视频相关数据和具有低QoS的视频相关数据。

例如，如上述实施例中所描述的那样操作的发送设备110可以是能够输出视频的终端，诸如数字标牌或媒体杆。另外，发送设备110根据包含在视频相关数据中的数据的类型来确定优先级，并且可以根据确定的优先级来选择用于发送数据的RAT发送单元。例如，如果视频相关数据包含音频数据，则发送设备110可以将要被发送的数据中的音频数据给予最高优先级，并且如果视频相关数据包含文本数据，则发送设备110可以对文本数据给予低于音频数据的优先级。因此，发送设备110可以基于所确定的优先级来选择用于发送音频数据和文本数据的RAT。例如，如果发送设备110确定要使用LTE通信系统发送最高优先级数据，则发送设备110选择对应于LTE通信系统的第一RAT发送单元701作为用于发送音频数据的RAT。然后，发送设备110选择第一RAT发送单元701作为用于发送音频数据的RAT，并通过第一RAT发送单元701发送音频数据。

另外，如果接收设备130确定最高优先级数据是要接收的视频相关数据中的音频数据，并且确定要使用LTE通信系统发送最高优先级数据，则接收设备130可以选择第二RAT接收单元707作为用于接收音频数据的RAT，并且可以通过所选择的第二RAT接收单元707来接收音频数据。

参考图1、2a、2b、2c、2d、3、4、5a、5b、6和7，上面的实施例已经描述了发送设备110从视频内容中分离出视频数据和视频相关数据，并根据通信系统的环境，将视频相关数据发送到接收设备130。在下文中，将描述根据本公开的实施例的在通信系统中由发送设备110和接收设备130实际发送和接收数据的方法。在下面的描述中，假定发送设备110已经将视频信息发送到接收设备130，并且接收设备130已经选择了要接收的一个视频信息。另外，虽然视频相关数据可以包含至少一个音频数据、文本数据或图像数据，但是在下文中，假设视频相关数据是音频数据。

图8示出了根据本公开的实施例的用于在通信系统的发送设备中发送数据的方法。

参考图8，发送设备110将用于输出视频的视频容器数据分离为视频数据和音频数据(801)。例如，在视频数据是音频视频交错(AVI)数据的情况下，通过分离视频数据和音频数据的操作(801)可以将AVI数据分离成对应于视频数据的视频x264和对应于音频数据的音频数字影院系统(DTS)。

另外，发送设备110识别从分离的视频数据输出视频数据的时间(T)(803)。发送设备110可以通过考虑在发送设备110中发送音频数据的处理时间、分配无线电资源的调度时间或者用于在接收设备130中以识别的视频输出时间(T)输出视频数据之前输出音频数据的处理时间中的至少一个来计算视频延迟时间(Vd)(805)。这里，分配无线电资源的调度时间例如可以是在Wi-Fi系统的情况下的争用时间，或者可以是在蓝牙系统的情况下的配对时间。操作805旨在更精确地同步视频数据和音频数据，并且可能不会根据系统情况执行。

另外，发送设备110通过使用所识别的视频输出时间(T)和计算出的视频延迟时间(Vd)来确定视频输出时间(Vt)信息(807)。这里，根据发送设备110和接收设备130的设置时间是绝对时间还是相对时间，可以确定视频输出时间(Vt)信息是不同的。也就是说，当发送设备110和接收设备130使用绝对时间信息(例如，从卫星接收的时间或网络的绝对时间)时，发送设备110确定包含从所识别的视频输出时间(T)延迟所计算的视频延迟时间(Vd)的时间(T')的视频输出时间(Vt)信息。例如，在通信系统是LTE系统的情况下，发送设备110和接收设备130可以通过由基站提供的系统信息块(SIB)的协调世界时(UTC)信息来同步绝对时间。相反，在发送设备110和接收设备130使用相对时间信息的情况下，发送设备110确定包含视频数据输出的有效时间(Tn，Tm或Tnm)或视频数据的延迟相对时间的视频输出时间(Vt)信息。这里，有效时间(Tn，Tm或Tnm)可以是：在输出视频数据的相对于绝对时间(T')的最小输出时间处的要求的Tn；在输出视频数据的相对于绝对时间(T')的最大输出时间处的要求的Tm；或者是Tn和Tm之间的时间Tnm。另外，相对时间(裕度时间)可以是通过考虑来自所识别的视频输出时间(T)的视频延迟时间(Vd)而输出视频的时间。

发送设备110通过使用所识别的视频输出时间(T)或视频输出时间(Vt)信息来确定是否将音频数据发送到接收设备130(809)。例如，当音频数据的发送时间晚于视频输出时间(T)时，发送设备110可以确定不发送音频数据，并且当音频数据的发送时间早于视频输出时间(T)时，可以确定发送音频数据。当发送设备110确定发送音频数据时，发送设备110将所确定的视频输出时间(Vt)信息和分离的音频数据发送到接收设备130(811)。此时，如参照图1至图7，发送设备110可以根据通信系统的环境，通过其他实体向接收设备130发送所确定的视频输出时间(Vt)信息和分离的音频数据。另外，发送设备110可以同时或分开地发送所确定的视频输出时间(Vt)信息和分离的音频数据。

另外，发送设备110在从视频输出时间(T)延迟了视频延迟时间(Vd)的时间(T')输出视频数据(813)。

图9示出了根据本公开的实施例的通信系统的接收设备接收数据的方法的示例。图9的实施例涉及在发送设备110和接收设备130使用绝对时间的情况下输出接收设备130中的音频数据的方法，假定发送设备110和接收设备130针对绝对时间彼此同步。

参考图9，接收设备130分别或同时从发送设备110接收音频数据和视频输出时间(Vt)信息(901)。这里，视频输出时间(Vt)信息包含视频数据输出时的时间(T')。

另外，接收设备130从接收到的音频数据中识别当音频数据将被输出时的音频数据输出时间(At)(903)。接收设备130基于视频输出时间(Vt)信息和音频数据输出时间(At)来确定是否输出音频数据(905)。例如，如果音频数据输出时间(At)和视频输出时间(Vt)信息之间的差小于预定阈值，则接收设备130可以确定输出音频数据。这里，预定阈值可以是用户认识到视频数据和音频数据彼此同步的最大时间间隔。

当接收设备130确定输出音频数据时，接收设备130在音频数据输出时间(At)输出所接收的音频数据(907)，并且当接收设备130确定不输出音频数据时，接收设备130去除音频数据。

同时，在发送设备110和接收设备130在绝对时间上彼此不同步的情况下，发送设备110和接收设备130可以通过使用图10的方法来同步它们之间的绝对时间，然后可以执行图9的操作。

图10示出根据本公开的实施例的使通信系统的发送设备和接收设备之间的绝对时间同步的方法的示例。

参考图10，为了使发送设备110的绝对时间与绝对时间一致，接收设备130向发送设备110发送用于请求绝对时间同步的消息(1001)。当从接收设备130接收到绝对时间同步请求消息时，发送设备110向接收设备130发送与接收到绝对时间同步请求消息的时间相对应的发送设备110的绝对时间(T_atx)和发送设备110的处理时间(T_dtx)(1003)。另外，接收设备130通过使用发送设备110的绝对时间(T_atx)和发送设备110的处理时间(T_dtx)来校正接收设备的绝对时间，并且将接收设备的校正的绝对时间(T_crx)发送给发送设备110(1005)。

此后，发送设备110通过接收设备130的当前绝对时间(T_crx)和接收设备130的处理时间(T_drx)来计算发送设备110与接收设备130之间的绝对时间的时间差(T_d)。另外，如果所计算的时间差(T_d)不在固定的持续时间内，则发送设备110可以向接收设备130发送和从接收设备130接收发送设备110和接收设备130的时间差(T_d)信息以及绝对时间信息(T_ctx或T_crx)固定次数(1007)。例如，发送设备110可以校正接收设备130的当前绝对时间(T_crx)和发送设备110的当前绝对时间(T_ctx)之间的差值以及接收设备130的处理时间(T_drx)以便由此计算接收设备130与发送设备110之间的绝对时间的差(T_d)。

另外，如果所计算的时间差(T_d)在恒定的持续时间内，则发送设备110或接收设备130发送同步完成消息(1009)。

图11示出根据本公开的实施例的其中通信系统的接收设备接收数据的方法的另一示例。图11的实施例涉及当发送设备110和接收设备130使用相对时间时在接收设备130中输出音频数据的方法。

参考图11，接收设备130分别或同时从发送设备110接收音频数据和视频输出时间(Vt)信息(1101)。这里，视频输出时间(Vt)信息包含视频数据输出的有效时间(Tn，Tm或Tnm)或视频数据的延迟相对时间。另外，接收设备130在接收到音频数据时记录接收时间(Rr1)(1103)。例如，由接收设备130记录的接收时间可以是在无线电层中接收音频数据的时间，或者可以是在上层中识别音频数据的时间。

接收设备130对接收到的音频数据进行解码，以便由此在输出音频数据时识别音频数据输出时间(At)(1105)。另外，接收设备130在接收到音频数据时，通过音频数据输出时间(At)和接收时间(Rr1)之间的差来计算接收设备130的处理时间(Rxt)(1107)。接收设备130基于所计算的接收设备130的处理时间(Rxt)和所接收的视频输出时间(Vt)信息来确定是否输出音频数据(1109)。例如，当接收设备130的处理时间(Rxt)小于接收到的视频输出时间(Vt)信息中包含的时间时，接收设备130可以确定输出音频数据，并且当接收设备130的处理时间(Rxt)大于接收到的视频输出时间(Vt)信息中包含的时间时，可以确定不输出音频数据。另外，接收设备130可以通过使用包含在接收的视频输出时间(Vt)信息中的裕度时间来校正音频输出时间之后确定输出音频数据。

作为校正的例子，接收设备比较发送设备的视频输出时间(Vt)信息中包含的发送设备的相对时间与接收设备的处理时间。如果接收设备的处理时间早于发送设备的相对时间，则接收设备的再现时间可能早于发送设备的视频再现时间。因此，接收设备将发送设备发送的裕度时间添加到发送设备的相对时间和接收设备的处理时间之间的时间差，从而再现声音。

当接收设备130确定输出音频数据时，接收设备130在音频数据输出时间(At)或在校正后的音频数据输出时间输出接收到的音频数据(1111)，并且当接收设备130确定不输出音频数据时，接收设备130去除音频数据。

以上参照图9和11描述的接收设备130执行的一些操作可以由用于中继发送设备110和接收设备130的中继设备1200来执行。这里，中继设备1200可以是图2b到2d中所示的无线节点150或服务器170中的至少一个。

在发送设备110和接收设备130使用如图9的实施例中所描述的绝对时间的情况下，中继设备1200可将从发送设备110接收的视频数据和视频输出时间(Vt)信息传送到接收设备130。另外，在发送设备110和接收设备130使用如图11的实施例中所述的相对时间的情况下，中继设备1200和发送设备110可以以与图12和13的实施例相同的方式操作。

图12图示了根据本公开的实施例的通信系统的接收设备和中继设备接收数据的方法的示例。图12的实施例涉及在发送设备110和接收设备130使用相对时间的情况下中继设备1200从发送设备110接收数据并且接收设备130确定是否输出音频数据的方法。

参照图12，中继设备1200分别或同时从发送设备110接收音频数据和视频输出时间(Vt)信息(1201)。这里，视频输出时间(Vt)信息包含视频数据输出的有效时间(Tn，Tm或Tnm)或视频数据的延迟相对时间。

另外，中继设备1200记录当接收到音频数据时的时间(R1)(1203)，并且记录当音频数据被发送到接收设备130时的时间(R2)(1205)。

中继设备1200可以通过使用当接收到音频数据时的时间(R1)和当音频数据被发送到接收设备130时的时间(R2)来计算中继处理时间(Rxt)(1207)。另外，中继设备1200可以通过从接收的视频输出时间(Vt)信息中减去中继处理时间(Rxt)获得的剩余时间来计算视频输出时间(Vt')信息(1209)。因此，中继设备1200将计算出的视频输出时间(Vt')信息和音频数据发送到接收设备130(1211)。

另外，接收设备130从中继设备1200接收音频数据和视频输出时间(Vt')信息，从而计算接收设备130的处理时间(R_Rxt)(1213)。另外，接收设备130基于所计算的接收设备130的处理时间(R_Rxt)和所接收的视频输出时间(Vt')信息来确定是否输出音频数据(1215)。当接收设备130确定输出音频数据时，接收设备130在音频数据输出时间(At)或者在校正后的音频数据输出时间输出所接收的音频数据(1217)，并且当接收设备130确定不输出音频数据时，接收设备130去除音频数据。

图13示出了根据本公开的实施例的通信系统的接收设备和中继设备接收数据的方法的另一示例。图13的实施例涉及在发送设备110和接收设备130使用相对时间的情况下中继设备1200从发送设备110接收数据并且确定是否输出音频数据的方法。

参考图13，中继设备1200从接收设备130接收接收处理时间(Trx)(1301)，并且分别地或同时地从发送设备110接收音频数据和视频输出时间(Vt)信息(1303)。这里，视频输出时间(Vt)信息包含视频数据输出的有效时间(Tn，Tm或Tnm)或视频数据的延迟相对时间。

另外，中继设备1200记录当接收到音频数据时的时间(R1)(1305)，并记录当音频数据被发送到接收设备130时的时间(R2)(1307)。

中继设备1200可以通过使用当接收到音频数据时的时间(R1)和当音频数据被发送到接收设备130时的时间(R2)来计算中继处理时间(Rxt)(1309)。另外，中继设备1200基于中继处理时间(Rxt)和视频输出时间(Vt)信息来确定是否发送音频数据(1311)。例如，如果中继处理时间(Rxt)比包含在视频输出时间(Vt)信息中的裕度时间短，则中继设备1200确定发送音频数据，而如果中继处理时间(Rxt)比视频输出时间(Vt)信息中包含的裕度时间长，则中继设备1200确定不发送音频数据。当中继设备1200确定发送音频数据时，中继设备1200将音频数据发送到接收设备130(1313)。

另外，当接收设备130从中继设备1200接收到音频数据时，接收设备130可以输出音频数据(1315)。

如参照图8、9、10、11和12所描述的，接收设备130可以输出要与在发送设备110中输出的视频数据同步的音频数据。

根据本公开的实施例，接收设备130可以通过使用上述通信系统通过以下UI方法向用户提供数据服务。

图14a和14b图示了根据本公开的实施例的其中通信系统的接收设备输出UI数据的示例。图14a和图14b的例子示出了接收设备130包括用于输出UI数据的视频输出单元(即，屏幕区域)。

参照图14a和图14b，根据本公开的实施例，接收设备130可以接收请求输出音频数据的事件。此时，可以通过用于执行相应应用程序的请求(a)或者通过在web浏览器中输入相应的URL(b)来接收事件。作为另一示例，当在外围检测到一个或多个发送设备110时，接收设备130可以显示(例如，在其屏幕区域上)指示已经在外围检测到一个或多个发送设备110的通知，以及如果通知被选择，则接收设备130可以识别该事件已经被接收。作为在接收设备130中显示通知的方法的示例，可以在屏幕区域中使用上部通知窗口。根据本公开的实施例，通知窗口可以显示包含检测到的发送设备110的数量的必要信息。作为另一个例子，通知可以通过弹出窗口显示在屏幕区域中，或者可以通过光或振动来输出。

当接收设备130接收到用于请求输出音频数据的事件时，根据本公开的实施例，接收设备130通过网络浏览器、锁定屏幕或特定的应用程序屏幕在屏幕区域中输出显示列表。此时，接收设备130基于从发送设备110接收到的视频信息来输出显示列表。显示列表可以根据到提供视频的发送设备110的距离、类别、最近输出列表、希望列表或用户配置中的至少一个被排序，并且可以包含视频数据的缩略图、显示器ID、视频数据的标题或其概要中的至少一个。

另外，当基于显示列表接收到用于选择一条内容的选择事件时，接收设备130可以在屏幕区域中显示用于输出内容的输出按钮。此时，可以通过用户触摸或滑动显示列表的动作来接收选择事件。另外，当用户希望快速收听音频数据时，输出按钮可以用于“快速播放”以立即输出音频数据。也就是说，当选择一个内容并且从发送设备110接收到音频数据时，接收设备130可以在屏幕区域中显示输出按钮。相反，如果接收设备130接收除了音频数据以外的数据，则接收设备130可以显示用于输出对应信息的其他装置而不是输出按钮。

作为另一个例子，尽管在图14a和图14b中没有示出，显示列表可以具有标记显示器位置的地图。此时，根据实施例，在接收设备130的屏幕区域中显示显示器的图标和地图的方法可以改变。地图可以以3D地图或街景的形式来显示，该3D地图或街景是实际街道图片的建模。此时，在3D地图的情况下，可以显示球形或半球形的地图。

在本公开中提出的接收设备130可以在屏幕区域中输出所接收的视频信息。另外，在所接收的视频相关数据包含至少一个文本数据或图像数据的情况下，接收设备130可以在屏幕区域中输出至少一个文本数据或图像数据。例如，接收设备130可以在屏幕区域中与视频数据一起输出视频的均衡器、广告或主图像。另外，接收设备130可以输出视频中的产品、场所或人物的信息列表，或者在屏幕区域中输出表演海报。另外，接收设备130可以为产品下订单，或者可以根据生成的请求事件来预订性能。

图15a和图15b示出了根据本公开的实施例的通信系统的接收设备输出UI数据的另一示例。图15a和15b的例子示出了接收设备130仅具有输入单元(即，输入区域)。

参照图15a和15b，接收设备130的输入区域可以通过电容型、压敏型、按钮型或拨号型进行各种配置，并且还可以包括根据实施例的附加传感器或装置。

例如，当接收设备130接收到用于请求输出音频数据的事件时，根据本公开的实施例，通过输入区域，接收设备130可以向音频输出单元输出通过使用距离信息从最近的发送设备110接收的音频数据。作为另一示例，在存在连接到接收设备130的外部辅助设备(例如，相机、红外传感器、陀螺仪传感器或磁性设备)的情况下，可以通过使用辅助设备输出显示列表。这里，事件可以通过用户的眼睛或触摸或者通过照相机进行拍摄来接收。

之后，接收设备130可以通过输入区域(a)接收用于请求输出当前输出的内容和其他内容的事件。通过输入区域接收的事件可以以各种方式检测。例如，接收设备130可以通过输入区域中的滑动运动来检测事件。也就是说，参照图15a，当在输入区域中检测到向右的滑动(1501)时，接收设备130输出下一个内容，并且当检测到向左的滑动(1503)时，接收设备130输出先前的内容。作为另一个例子，接收设备130可以通过在输入区域上的触摸(1505)的时间信息来检测事件。也就是说，当检测到触摸输入区域的动作的时间短于预定时间时，接收设备130可以输出下一个内容，并且当检测到触摸输入区域的动作的时间长于预定时间时，接收设备130可以输出先前的内容。作为另一个例子，接收设备130可以通过拨号型输入区域的旋转方向(1507)来检测事件，如图15a所示。也就是说，当检测到顺时针方向的旋转运动时，接收设备130可以输出下一个内容，并且当检测到逆时针方向的旋转运动时，接收设备130可以输出先前的内容。在上述实施例的内容搜索方法中，根据系统和用户配置，根据滑动方向、触摸持续时间或者拨号盘的旋转方向和速度的内容选择可以变化。另外，当内容被切换时，接收设备130可以以语音输出内容名称或显示名称。另外，接收设备130可以返回到原始状态，或者如果需要，如果不再有内容被切换，则可以输出嘟嘟声。

另外，参考图15b，接收设备130可以接收用于请求存储通过输入区域输出的内容的事件。例如，接收设备130可以通过触摸并保持输入区域一恒定时间或更长的动作(1509)来检测事件。作为另一示例，接收设备130可以通过触摸输入区域预定次数的动作(1511)来检测事件。

图16示出了根据本公开的实施例的通信系统的接收设备输出UI数据的另一示例。图16的实施例示出了发送设备110输出视频并且接收设备130输出声音的情况。然而，本公开的实施例可以应用于其他情况。

参考图16示，当为了在发送设备110中输出的视频(1601)中的场所、人物或对象之间捕获感兴趣的内容而发生事件时，包含相应的感兴趣内容的快照显示在接收设备130的视频输出单元(1603)。例如，捕获事件可以通过与接收设备130的捕获相对应的键输入按钮来执行。与捕获相对应的键输入按钮可以以接收设备130的屏幕中的单独图标的形式来提供或者可以通过接收设备130的屏幕区域中的滑动、接收设备130中提供的触摸、手势、物理按钮的组合或其组合来实现。

另外，当接收设备130检测到通过视频输出单元输出的快照的悬停事件时，接收设备130显示表明存在快照的附加信息的信息(1605)。显示表示存在附加信息的信息的方法可以包括闪烁、显示特定图案或图标或者改变颜色。

之后，当接收设备130检测到用于选择通过视频输出单元输出的快照中的特定部分的选择事件时，接收设备130输出与所选部分有关的信息(1607)。此时，接收设备130可以通过使用弹出窗口或者通过使用视频输出单元的上边界、下边界或侧边界来输出与所选部分有关的信息。例如，如果所选择的部分对应于人，则接收设备130可以输出关于该人的简档，并且如果所选择的部分对应于服装，则接收设备130可以输出诸如其型号名称或零售价格的信息。

更具体地，类似于图17所示的实施例，7可以通过接收设备130，发送设备110和服务器170之间的数据发送/接收来执行图16所示的实施例。

图17例示了根据本公开的实施例的通信系统的接收设备执行图16的实施例的方法的示例。这里，图16和图17中示出的例子可以应用于已经参照图2c和2d描述的通信环境。

参考图17，发送设备110输出视频数据并将包含音频数据的视频相关数据发送到接收设备130(1701)。当接收设备130在输出音频数据的同时接收在发送设备110中输出的视频中的场所、人物或对象之中的感兴趣内容的捕获事件时，接收设备130将捕获数据的请求消息发送到服务器170(1703)。

这里，捕获数据请求消息包含应用程序ID、显示器ID、内容ID、捕获命令被触发的时间或接收设备130的地址中的至少一个。应用程序ID、显示器ID、或者内容ID可以被包含在根据实施例的接收到的音频数据中。应用程序ID可以指代在应用程序区域中使用的分隔符，并且例如可以是GOM播放器、YouTube等。应用程序ID只有在根据服务器的策略进行注册和许可时才可用。本公开实施例提出的显示器ID是为了将发送设备110分离，可以是设备ID、用户ID或用户指定的ID。在本公开的实施例中提出的内容ID被用于分离从一个发送设备110发送的视频相关数据(例如，音频内容)。因此，捕获数据可以包含一个或多个内容ID。例如，如果一个视频数据支持三种语言的音频数据，则捕获数据可以包含根据该语言分离的三个内容ID。作为另一示例，从服务器170下载全部或部分音频数据，捕获数据可以包含用于获得音频数据的URL信息作为内容ID。作为另一示例，如果通过发送设备110正在输出多条视频数据，则可以通过内容ID来分离视频内容的音频数据。如上所述，捕获数据可以分离与音频内容有关的实际信息，并且可以根据应用程序ID、显示器ID和内容ID的管理策略具有分层结构。

参照图17，根据本实施例，捕获命令被触发的时间可以是接收音频数据时的绝对时间或相对时间。如果接收设备130能够知道视频数据的帧号，则帧号也可以用作捕捉命令被触发的时间。接收设备130的地址包含接收设备130以后可以通过其接收信息的响应的IP地址。

如果已经从接收设备130接收到捕捉数据的服务器170将应用程序ID、显示器ID或内容ID中的至少一个映射到视频/音频数据的原件，则将其存储为列表，包含视频数据的静止图像的捕获数据可以基于应用程序ID、显示器ID或内容ID中的至少一个以及捕获命令被触发的时间而被发送到接收设备130(1709)。此时，静止图像由(x，y)坐标构成，并且捕获数据可以包含通过其可以触发附加信息的坐标、事件名称、代码或URL。例如，如果坐标(6,4)可以在请求的静止图像时间触发服装的事件，则服务器170发送用于捕获消息的静止图像和坐标(6,4)。这里，另外，如果服务器170不具有原始视频/音频数据，则服务器170可以向发送设备110发送捕获数据请求消息，以获得关于所请求的捕获数据的信息(1705)，并且可以接收来自发送设备110的捕获数据响应消息(1707)。

之后，接收设备130通过视频输出单元输出对应于捕获数据的静止图像，并且当检测到选择事件以获得关于输出静止图像的特定部分的附加信息时，接收设备130向服务器170发送与特定部分有关的数据的请求消息(1711)。这里，数据请求消息包含应用程序ID、显示器ID、内容ID、捕获时间、事件坐标、事件名称或事件代码中的至少一个。

服务器170基于包含在数据请求消息中的信息向接收设备130传送关于特定部分的附加信息，并且如果包含该URL，则服务器170向接收设备130发送与URL或事件名称或代码信息匹配的附加信息(1713)。

图18示出了根据本公开的实施例的用于在通信系统的接收设备中输出UI数据的另一示例。图18的实施例涉及在接收设备130中发生用于触发视频数据的连续查看功能的事件的情况。例如，图18的实施例涉及在接收设备130中发生音频数据的中断、音频数据没有收到、或者因为接收设备130移动远离发送设备110所以不能从发送设备110接收音频数据的情况下的接收设备130中的视频数据的输出。

例如，当接收设备130检测到针对特定内容触发连续视频查看功能的事件时，接收设备130可以向服务器170请求与触发事件对应的数据，并且可以接收来自服务器170的特定内容的视频数据和音频数据。

这里，参考图18，可以在接收设备130的屏幕中以单独图标的形式提供连续视频查看功能，并且可以通过屏幕区域中的滑动，触摸、手势、在接收设备中提供的物理按钮的组合或者其组合来检测触发事件(1801)。另外，接收设备130可以制作已经通过发送设备110输出的视频数据和先前已经输出的音频数据的列表，然后将其存储。该列表可以包含诸如标题、缩略图或视频内容的最后查看时间的信息。因此，当接收设备130检测到针对列表中的内容的触发连续视频查看功能的事件时，接收设备130可以向服务器170请求与触发事件对应的数据，并且可以从服务器170接收特定内容的视频数据和音频数据。

此时，当在视频输出单元的左侧中检测到滑动事件时，接收设备130可以输出视频输出单元的左侧的列表，并且当检测到被提供在上部或下部中的按钮输入时，接收设备130可以输出列表(1803)。列表可以按时间、流派、事件或偏好的顺序排序。

作为另一个实施例，当接收设备130移动离开发送设备110的距离超过恒定的距离时，当信号衰减超过预定值或者不能被接收时，或者当接收设备130未能解码接收数据的次数达到恒定次数或更多时，则接收设备130可以触发连续视频查看功能。此时，当连续视频查看功能被触发时，接收设备130可以在视频输出单元的屏幕区域上以弹出窗口的形式显示“连续查看视频”以确认用户的意图(1805)。另外，当从弹出窗口检测到执行连续视频查看功能的肯定事件时，接收设备130可以连续显示跟随上次输出的数据的数据。

图19示出了根据本公开的实施例的通信系统的接收设备执行图18的实施例的方法的示例。

参考图19，发送设备110将包含音频数据的视频相关数据发送到接收设备130(1901)。此时，视频相关数据包含应用程序ID，显示器ID或内容ID中的至少一个。

另外，当通过视频输出单元检测到用于触发连续视频查看功能的事件时，接收设备130将视频和音频数据的请求消息发送到服务170(1903)。这里，请求消息包含应用程序ID、显示器ID、内容ID、连续视频观看功能被触发时的视频和音频数据的输出时间(即，最后输出时间)、或者接收设备130的地址中的至少一个。

如果服务器170不具有关于发送设备110的视频和音频数据的信息，则服务器170向发送设备110请求视频和音频数据(1905)，并且，从发送设备110接收所请求的视频和音频数据(1907)。

如果服务器170将应用程序ID、显示器ID或内容ID中的至少一个与视频和音频数据的原件相映射，然后将其存储为列表，则服务器170向接收设备130发送包含在请求消息中的最后输出时间的数据之后的视频和音频数据。因此，接收设备130可以通过视频输出单元和音频输出单元连续输出跟随从服务器170发送的最后输出时间的数据的视频和音频数据。也就是说，接收设备130可以基于存储在服务器170中的视频和音频数据执行连续视频查看功能(1915)。服务器170的操作可以在发送设备110中执行。

图20示意性地示出了根据本公开的实施例的用于在通信系统中发送数据的发送设备的内部结构的示例。

参考图20，发送设备110包括发送单元2001、接收单元2003、控制单元2005、输入单元2007、输出单元2009和存储单元2011。

首先，根据本公开的实施例，控制单元2005控制发送设备110的整体操作，并且具体地控制在通信系统中执行的与数据发送有关的操作。在图1、2a、2b、2c、2d、3、4、5a、5b、6和7中描述了根据本公开的实施例的在通信系统中执行的与数据传输有关的操作。如所示，因此这里将省略其详细描述。

发送单元2001根据控制单元2005的控制将各种信号和各种消息发送到通信系统中包括的其他实体(例如，广播设备、无线节点、网关或服务器)这里，由发送单元2001发送的各种信号和各种消息已经在图1、2a、2b、2c、2d、3、4、5a、5b、6和7中描述，因此这里将省略其详细描述。

另外，接收单元2003根据控制单元2005的控制接收来自通信系统中包括的其他实体(例如，广播设备、无线节点、网关或服务器)的各种信号和各种消息。这里，接收单元2003接收到的各种信号和各种消息已经在图1、2a至2d、3、4、5a、5b、6和7中描述，因此这里将省略其详细描述。

存储单元2011存储根据本公开的实施例的在控制单元2005的控制下在通信系统中执行的与发送数据的操作相关的程序和数据。另外，存储单元2011存储由接收单元2003从其他实体接收的各种信号和各种消息。

输入单元2007和输出单元2009根据本公开的实施例输入和输出在控制单元2005的控制下在通信系统中执行的与发送数据的操作有关的各种信号和各种消息。另外，输出单元2009包括用于输出视频数据的视频输出单元。

同时，虽然发送单元2001、接收单元2003、控制单元2005、输入单元2007、输出单元2009和存储单元2011被示出为在图20中彼此分开，发送设备110可以被实现为使得发送单元2001、接收单元2003、控制单元2005、输入单元2007、输出单元2009或存储单元2011中的至少两个被集成。另外，发送设备110可以由单个处理器来实现。

图21示意性地示出了根据本公开的实施例的用于在通信系统中接收数据的接收设备的内部结构的示例。

参考图21，接收设备130具有发送单元2101、接收单元2103、控制单元2105、输入单元2107、输出单元2109、存储单元2111。

首先，根据本公开的实施例，控制单元2105控制接收设备130的整体操作，并且特别地控制在通信系统中执行的与数据接收相关的操作。在图8、9、10、11、12、13、14a、14b、15a、15b、16、17、18和19中描述了根据本公开的实施例的在通信系统中执行的与数据接收有关的操作，因此这里将省略其详细描述。

发送单元2101根据控制单元2105的控制将各种信号和各种消息发送到通信系统中包括的其他实体(例如，广播设备、无线节点、网关或服务器)这里，由发送单元2101发送的各种信号和各种消息已经在图8、9、10、11、12、13、14a、14b、15a、15b、16、17、18和19中描述，因此这里将省略其详细描述。

另外，接收单元2103接收来自通信系统中包括的其他实体(例如，广播设备、无线节点、网关或服务器)的各种信号和各种消息，这些消息根据控制单元2105。这里，接收单元2103接收到的各种信号和各种消息已经在图8、9、10、11、12、13、14a、14b、15a、15b、16、17、18和19中描述，因此这里将省略其详细描述。

存储单元2111存储根据本公开的实施例的在控制单元2105的控制下在通信系统中执行的与接收数据的操作有关的程序和数据。另外，存储单元2111存储由接收单元2103从其他实体接收的各种信号和各种消息。

输入单元2107和输出单元2109根据本公开的实施例输入和输出在控制单元2105的控制下在通信系统中执行的与接收数据的操作有关的各种信号和各种消息。另外，输出单元2109包括用于输出视频数据的视频输出单元或用于输出音频数据的音频输出单元中的至少一个。

同时，尽管在图21中将发送单元2101、接收单元2103、控制单元2105、输入单元2107、输出单元2109和存储单元2111示出为彼此分开，但是接收设备130可以被实现为使得发送单元2101、接收单元2103、控制单元2105、输入单元2107、输出单元2109或存储单元2111中的至少两个被集成。另外，接收设备130可以由单个处理器来实现。

图22示意性地示出了根据本公开的实施例的用于在通信系统中发送和接收数据的中继设备的内部结构的示例。

参考图22，中继设备1200具备发送单元2201、接收单元2203、控制单元2205以及存储单元2207。

首先，根据本公开的实施例，控制单元2205控制中继设备1200的整体操作，并且特别地控制在通信系统中执行的与数据发送和接收有关的操作。在图1、2a到2d、4、12、13、17和19中已经描述了根据本公开的实施例的在通信系统中执行的与数据发送和接收有关的操作，因此这里将省略其详细描述。

发送单元2201根据控制单元2205的控制向通信系统中包括的其他实体(例如，发送设备、接收设备、广播设备、无线节点、网关或服务器)发送各种信号和各种消息。这里，已经在图1、2a到2d、4、12、13、17和19中描述了由发送单元2201发送的各种信号和各种消息，因此这里将省略其详细描述。

另外，接收单元2203根据控制单元2205的控制接收来自通信系统中包括的其他实体(例如，发送设备、接收设备、广播设备、无线节点、网关或服务器)的各种信号和各种消息。这里，接收单元2203接收的各种信号和各种消息已经在图1、2a到2d、4、12、13、17和19中描述，因此这里将省略其详细描述。

存储单元2207存储根据本公开的实施例的在控制单元2205的控制下在通信系统中执行的与发送和接收数据的操作有关的程序和数据。另外，存储单元2207存储由接收单元2203从其他实体接收的各种信号和各种消息。

同时，虽然发送单元2201、接收单元2203、控制单元2205和存储单元2207在图22中被示出为彼此分开，但是中继设备1200可以被实现为使得发送单元2201、接收单元2203、控制单元2205或存储单元2207中的至少两个被集成。另外，中继设备1200可以由单个处理器来实现。

尽管已经参考本公开的各种实施例描述了本公开，但是本领域技术人员将会理解，在不脱离本公开的精神和范围的情况下，可以在其中进行形式和细节上的各种改变如所附权利要求及其等同物所定义的。

Claims (14)

1.一种在支持设备到设备(D2D)通信的无线通信系统中由发送设备发送数据的方法，所述方法包括：

从一段视频容器数据中分离视频数据和与视频数据一起输出的视频相关数据；

输出视频数据；和

将视频相关数据发送到接收设备。

2.根据权利要求1所述的方法，

其中所述视频相关数据包含至少一个音频数据、文本数据或图像数据，以及

其中所述视频相关数据通过一个或多个频率被发送到一个或多个接收设备。

3.根据权利要求1所述的方法，其中，所述视频相关数据通过一个或多个实体被发送到所述接收设备。

4.根据权利要求1所述的方法，其中，所述视频数据的输出包括：

确定输出视频数据的时间；和

在确定的时间输出视频数据。

5.根据权利要求4所述的方法，

其中确定输出视频数据的时间包括：

从视频数据中识别何时输出视频数据的第一时间；

计算与输出视频数据的处理时间有关的延迟时间，并在发送设备输出视频数据之前发送视频相关数据；

确定从第一时间延迟了延迟时间的第二时间；和

发送与输出视频数据的时间有关的时间信息，和

其中所述时间信息包含所述第二时间、所述视频数据被输出时的有效时间或所述视频数据被延迟时的裕量时间中的至少一个。

6.根据权利要求5所述的方法，

其中在以下情况下发送视频相关数据：当前时间对应于第二时间；

其中当前时间被包括在输出视频数据的有效时间中；和

其中延迟时间不超过裕量时间。

7.一种用于在支持设备到设备(D2D)通信的无线通信系统中由接收设备接收数据的方法，所述方法包括：

从发送设备接收与视频数据一起输出的视频相关数据，其中视频数据和视频相关数据被从一段视频容器数据分离；和

输出视频相关数据。

8.根据权利要求7所述的方法，其中，所述视频相关数据包含音频数据、文本数据或图像数据中的至少一个。

9.根据权利要求8所述的方法，其中，所述视频相关数据的输出包括：

从视频相关数据中识别何时输出视频相关数据的第一时间；和

如果所接收的时间信息包含输出视频数据的时间，并且如果第一时间与输出视频数据的时间之间的差值小于预定阈值，则在第一时间输出视频相关数据。

10.根据权利要求8所述的方法，其中，所述视频相关数据的输出包括：

从视频相关数据中识别何时输出视频相关数据的第一时间；

识别何时接收到视频相关数据的第二时间；

基于第一时间和第二时间计算处理时间；

如果接收的时间信息包含输出视频数据的有效时间，并且如果处理时间没有超过有效时间，则在第一时间输出视频相关数据；和

如果接收的时间信息包含视频数据被延迟时的裕量时间，并且如果处理时间没有超过裕度时间，则在第一时间输出视频相关数据。

11.一种用于在支持设备到设备(D2D)通信的无线通信系统中发送数据的发送设备，所述发送设备包括：

收发器，被配置为发送和接收数据；和

至少一个处理器，被配置为：

进行控制以从视频容器数据中分离视频数据和与视频数据一起输出的视频相关数据；

输出视频数据；

发送视频相关数据。

12.根据权利要求11所述的发送设备，适于执行权利要求2至6之一。

13.一种用于在支持设备到设备(D2D)通信的无线通信系统中接收数据的接收设备，所述接收设备包括：

收发器，被配置为发送和接收数据；和

至少一个处理器，被配置为进行控制以输出与视频数据一起输出的视频相关数据，

其中视频数据和视频相关数据从一段视频容器数据分离。

14.根据权利要求13所述的接收设备，适于执行权利要求8至10之一。