CN105493508B - 信息处理设备和信息处理方法 - Google Patents

信息处理设备和信息处理方法 Download PDF

Info

Publication number
CN105493508B
CN105493508B CN201480047302.2A CN201480047302A CN105493508B CN 105493508 B CN105493508 B CN 105493508B CN 201480047302 A CN201480047302 A CN 201480047302A CN 105493508 B CN105493508 B CN 105493508B
Authority
CN
China
Prior art keywords
information processing
processing apparatus
information
control
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201480047302.2A
Other languages
English (en)
Other versions
CN105493508A (zh
Inventor
石见英辉
山浦智也
吉村司
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN105493508A publication Critical patent/CN105493508A/zh
Application granted granted Critical
Publication of CN105493508B publication Critical patent/CN105493508B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2385Channel allocation; Bandwidth allocation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2402Monitoring of the downstream path of the transmission network, e.g. bandwidth available
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2405Monitoring of the internal components or processes of the server, e.g. server load
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808Management of client data
    • H04N21/25833Management of client data involving client hardware characteristics, e.g. manufacturer, processing or storage capabilities

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Graphics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

执行适当的可扩展传输率控制。第一信息处理设备从另一信息处理设备无线地接收用于输出图像信息的流,该第一信息处理设备包括无线通信单元和控制单元。无线通信单元与另一信息处理设备进行通信,以便交换关于第一信息处理设备的能力信息和关于另一信息处理设备的能力信息。基于关于另一信息处理设备的能力信息和第一信息处理设备被使用的方式,上述控制单元执行用于另一信息处理设备的可扩展流传输率控制。

Description

信息处理设备和信息处理方法
技术领域
本技术涉及信息处理设备,而更具体而言,涉及使用无线通信交换各种信息的信息处理设备和信息处理方法。
背景技术
在现有技术中,已知使用无线通信交换各种数据的无线通信技术。例如,已经提出在两个无线通信设备之间通过无线通信互换各种数据的信息交换设备(例如,见专利文献1)。
引用列表
专利文献
专利文献1:JP 2008-278388A
发明内容
根据现有技术中的上述技术,即使当未通过有线线路建立连接时,也可以通过无线通信在两个信息处理设备之间交换各种数据。例如,基于从发送侧信息处理设备发送的图像数据的图像可以在接收侧信息处理设备的显示单元上显示。
这里,例如,假设在发送侧存在多个信息处理设备,而基于从这些信息处理设备发送的图像数据的多个图像被设置为在接收侧的信息处理设备的显示单元上显示。在这种情况下,根据通信状况来执行合适的可扩展性传输率控制是重要的。
本技术已被设想将这种状况考虑在内,并且目的在于执行合适的可扩展性传输率控制。
问题的解决方案
本技术是为了解决上述问题而作出的。根据本技术的第一方面,提供了通过使用无线通信从另一信息处理设备接收用于输出图像信息的流的信息处理设备、信息处理方法以及使计算机执行该方法的程序,该信息处理设备包括:无线通信单元,被配置为与所述另一信息处理设备执行用于交换关于所述信息处理设备的能力信息和关于所述另一信息处理设备的能力信息的通信;及控制单元,被配置为基于关于所述另一信息处理设备的能力信息和所述信息处理设备的使用来执行所述另一信息处理设备的流的可扩展性传输率控制。相应地,呈现出基于关于所述另一信息处理设备的能力信息和所述信息处理设备的使用来执行所述另一信息处理设备的流的可扩展性传输率控制的效果。
根据第一方面,所述信息处理设备和另一信息处理设备可以是可使用多个频率信道执行无线通信的信息处理设备,并且控制单元可以基于关于所述另一信息处理设备的能力信息、关于与所述另一信息处理设备的通信的无线电波传播测量信息以及所述信息处理设备的使用来执行在所述多个频率信道中设置一个频率信道的控制。相应地,呈现出基于关于所述另一信息处理设备的能力信息、关于与所述另一信息处理设备的通信的无线电波传播测量信息以及所述信息处理设备的使用来执行在所述多个频率信道中设置一个频率信道的效果。
根据第一方面,控制单元可以基于通过在所述多个频率信道被切换时测量来自所述另一信息处理设备的流而获得的无线电波传播测量信息以及所述信息处理设备的使用来执行设置所述一个频率信道的控制。相应地,呈现出基于通过在所述多个频率信道被切换时测量来自所述另一信息处理设备的流而获得的无线电波传播测量信息以及所述信息处理设备的使用来执行设置所述一个频率信道的效果。
根据第一方面,当由无线电波传播测量信息指定的通信质量降低从而需要限制可扩展性传输率控制时,控制单元可以基于无线电波传播测量信息和所述信息处理设备的使用来执行将待使用的频率信道改变为具有更快的数据传输速度的频率信道的控制。相应地,呈现出如下效果:当由无线电波传播测量信息指定的通信质量降低从而需要限制可扩展性传输率控制时,基于无线电波传播测量信息和所述信息处理设备的使用而将待使用的频率信道改变为更快的数据传输速度。
根据第一方面,当由无线电波传播测量信息指定的通信质量降低从而需要限制可扩展性传输率控制时,控制单元可以基于无线电波传播测量信息和所述信息处理设备的使用来执行将待使用的频率信道改变为具有更慢的数据传输速度的频率信道的控制。相应地,呈现出如下效果:当由无线电波传播测量信息指定的通信质量降低从而需要限制可扩展性传输率控制时,基于无线电波传播测量信息和所述信息处理设备的使用而将待使用的频率信道改变为更慢的数据传输速度。
根据第一方面,在被使用的频率信道被切换到另一频率信道之前,控制单元可以执行限制可扩展性传输率的控制。相应地,呈现出如下效果:在被使用的频率信道被切换到另一频率信道之前,限制可扩展性传输率。
根据第一方面,控制单元可以执行使关于是否断开被使用的频率信道的显示信息在显示单元上显示的控制。相应地,呈现出使关于是否断开被使用的频率信道的显示信息在显示单元上显示的效果。
根据第一方面,当接收到表示不允许断开被使用的频率信道的用户操作时,控制单元可以执行切换频率信道的控制。相应地,呈现出如下效果:当接收到表示不允许断开被使用的频率信道的用户操作时切换频率信道。
根据第一方面,无线通信单元可以通过在Wi-Fi显示规范中定义的能力协商或能力再协商来执行能力信息的交换。相应地,呈现出通过在Wi-Fi显示规范中定义的能力协商或能力再协商来交换能力信息的效果。
根据第一方面,能力信息可以通过能力协商或能力再协商中的RTSP M3消息来交换。相应地,呈现出使能力信息通过能力协商或能力再协商中的RTSP M3消息而被交换的效果。
根据第一方面,能力信息可以包括表示设备是否是移动设备的信息。相应地,呈现出使用表示设备是否是移动设备的信息的效果。
根据第一方面,能力信息可以包括表示信息处理设备的使用是否被改变的信息。因此,呈现出使用表示信息处理设备的使用是否被改变的信息的效果。
根据第一方面,能力信息可以包括表示是否包括多接收分集功能的信息。相应地,呈现出使用表示是否包括多接收分集功能的信息的效果。
根据第一方面,控制单元可以以在设置了低功耗模式时执行流的发送的停止或间歇发送的方式执行控制。相应地,呈现出在设置了低功耗模式时执行流的间歇发送或发送停止的效果。
根据第一方面,控制单元可以使对传输率的改变请求和对传输质量的改变请求中的至少一个被包括在从所述信息处理设备向所述另一信息处理设备发送的命令中。相应地,呈现出如下效果:使得对传输率的改变请求和对传输质量的改变请求中的至少一个被包括在从所述信息处理设备向所述另一信息处理设备发送的命令中。
根据第一方面,控制单元可以使用在HDCP会话被维持的状态下的命令作为所述命令。相应地,呈现出使用在HDCP会话被维持的状态下的命令的效果。
根据第一方面,控制单元可以以从传输层指定待使用的物理层的方式执行控制。相应地,呈现出从传输层指定待使用的物理层的效果。
根据第一方面,控制单元可以接收物理链路切换信息并以AVC/HEVC从I帧开始的方式执行控制。相应地,呈现出接收物理链路切换信息并从I帧开始AVC/HEVC的效果。
根据本技术的第二方面,提供了通过使用无线通信向另一信息处理设备发送用于输出图像信息的流的信息处理设备、信息处理方法和使计算机执行该方法的程序,该信息处理设备包括:无线通信单元,被配置为与所述另一信息处理设备执行用于交换关于所述信息处理设备的能力信息和关于所述另一信息处理设备的能力信息的通信;及控制单元,被配置为基于由所述另一信息处理设备执行的控制来执行所述另一信息处理设备的流的可扩展性传输率控制,由所述另一信息处理设备执行的控制基于关于所述信息处理设备的能力信息和所述另一信息处理设备的使用。相应地,呈现出基于关于所述信息处理设备的能力信息和所述另一信息处理设备的使用来执行所述另一信息处理设备的流的可扩展性传输率控制的效果。
发明的有益效果
根据本技术,可以呈现能够进行合适的可扩展性传输率控制的优异效果。应当指出的是,本文描述的效果不一定是限制性的,并且本公开内容中描述的任何效果都可以被呈现。
附图说明
图1是示出根据本技术第一实施例的通信系统100的系统配置例的框图。
图2是示出根据本技术第一实施例的信息处理设备200的功能配置例的框图。
图3是示出根据本技术第一实施例的信息处理设备300的功能配置例的框图。
图4是示意性地示出保持在根据本技术第一实施例的管理信息保持单元390中的内容例的图。
图5是示出在根据本技术第一实施例的信息处理设备300的显示单元351上显示的图像的过渡例的图。
图6是示出在根据本技术第一实施例的通信系统100中包括的设备之间的通信处理例子的序列图。
图7是示出在根据本技术第一实施例的通信系统100中包括的设备之间的通信处理例子的序列图。
图8是示出在根据本技术第一实施例的通信系统100中包括的设备之间的通信处理例子的序列图。
图9是示出在根据本技术第一实施例的通信系统100中包括的设备之间的通信处理例子的序列图。
图10是示出在根据本技术第一实施例的通信系统100中包括的设备之间的通信处理例子的序列图。
图11是示出在根据本技术第一实施例的通信系统100中包括的设备之间的通信处理例子的序列图。
图12是示出由根据本技术第一实施例的信息处理设备200执行的数据发送处理的处理过程的例子的流程图。
图13是示出由根据本技术第一实施例的信息处理设备300执行的数据传输速度控制处理的处理过程的例子的流程图。
图14是示出根据本技术第一实施例的源设备和接收设备之间的通信处理例子的序列图。
图15是示出根据本技术第一实施例的源设备和接收设备之间的通信处理例子的序列图。
图16是示出根据本技术第一实施例的源设备和接收设备之间的通信处理例子的序列图。
图17是示出根据本技术第二实施例的通信系统700的系统配置例的框图。
图18是用于描述用在根据本技术第二实施例的通信系统700中的空间可扩展性和SNR可扩展性的例子的图。
图19是示意性地示出利用用在根据本技术第二实施例的通信系统700中的SHVC的流传输量的图。
图20是示意性地示出利用用在根据本技术第二实施例的通信系统700中的SNR可扩展性缩减数据传输率的例子的图。
图21是示出在根据本技术第二实施例的通信系统700中包括的设备之间的通信处理例子的序列图。
图22是示出由根据本技术第二实施例的信息处理设备300执行的频率信道设置处理的处理过程的例子的流程图。
图23是示出根据本技术第二实施例的信息处理设备710的功能配置例的框图。
图24是示意性地示出在由根据本技术第二实施例的信息处理设备710执行的发送处理中生成的分组的图。
图25是示出由根据本技术第二实施例的信息处理设备710执行的优先级竞争访问控制方法的例子的图。
图26是示意性地示出当信息处理设备710执行根据本技术第二实施例的发送处理时媒体数据的流的图。
图27是示意性地示出由根据本技术第二实施例的信息处理设备710发送的无线分组的生成例的图。
图28是示意性地示出由根据本技术第二实施例的信息处理设备710生成的无线分组的互换例的图。
图29是示出由根据本技术第二实施例的信息处理设备710生成的PES的帧格式的例子的图。
图30是示意性地示出由根据本技术第二实施例的信息处理设备710生成的无线分组的互换例的图。
图31是示意性地示出由根据本技术第二实施例的信息处理设备710生成的无线分组的互换例的图。
图32是示出根据本技术第三实施例的通信系统1000的系统配置例的框图。
图33是示意性地示出根据本技术第三实施例的信息处理设备1020的层之间的数据的互换例的图。
图34是示意性地示出根据本技术第三实施例的信息处理设备1020的层之间的数据的互换例的图。
图35是示意性地示出根据本技术第三实施例的信息处理设备1020的层之间的数据的互换例的图。
图36是示意性地示出根据本技术第三实施例的信息处理设备1020的层之间的数据的互换例的图。
图37是示出由根据本技术第三实施例的信息处理设备1020执行的数据发送处理的处理过程的例子的流程图。
图38是示出由根据本技术第三实施例的信息处理设备1020执行的数据发送处理的处理过程的例子的流程图。
图39是示出由根据本技术第三实施例的信息处理设备1020执行的数据发送处理的处理过程的例子的流程图。
图40是示出由根据本技术第三实施例的信息处理设备1010执行的数据接收处理的处理过程的例子的流程图。
图41是示出由根据本技术第三实施例的信息处理设备1020执行的HDCP处理的处理过程的例子的流程图。
图42是示出由根据本技术第三实施例的信息处理设备1020执行的HDCP处理的处理过程的例子的流程图。
图43是示出根据本技术第三实施例的源设备和接收设备之间执行的密钥交换处理的例子的序列图。
图44是示出根据本技术第三实施例的源设备和接收设备之间执行的密钥交换处理的例子的序列图。
图45是示出包括在根据本技术第三实施例的通信系统中的每个信息处理设备的功能配置例的框图。
图46是示出智能电话的示意性配置的例子的框图。
图47是示出汽车导航设备的示意性配置的例子的框图。
具体实施方式
在下文中,将描述用于实现本技术的模式(下文中称为实施例)。描述将按以下次序进行:
1.第一实施例(基于用户信息或管理信息来执行与无线通信相关的控制的例子)
2.第二实施例(执行可扩展性传输率控制的例子)
3.第三实施例(执行多接收分集的设置和改变以及内容保护的设置的例子)
<1.第一实施例>
[通信系统的配置例]
图1是示出根据本技术第一实施例的通信系统100的系统配置例的框图。
通信系统100包括信息处理设备200、300和400。通信系统100是其中信息处理设备300接收从信息处理设备200和400中的至少一个发送的数据(例如,图像数据或音频数据)的通信系统。
信息处理设备200、300和400是具有无线通信功能的发送和接收设备。信息处理设备200、300和400是例如具有无线通信功能的显示设备(例如,个人计算机)或便携式信息处理设备(例如,智能电话或终端端子)。信息处理设备200、300和400是例如遵守电气和电子工程师协会(IEEE)802.11、802.15或802.16、3GPP规范(宽带码分多址(W-CDMA))、全球移动通信系统(GSM:注册商标)、全球微波接入互操作性(WiMAX)、WiMAX2、长期演进(LTE)、LTE-A(高级)等的无线通信设备。信息处理设备200、300和400可以使用无线通信功能互换各种信息。
在这里,将描述在信息处理设备200和300之间或者在信息处理设备400和300之间使用无线局域网(LAN)执行无线通信的情况的例子。
作为无线LAN,例如可以使用无线保真(Wi-Fi)直连、隧道直接链路建立(TDLS)、自组织(ad-hoc)网络或网状网络(mesh network)。作为通信系统100中使用的短程无线视听(AV)传输通信,例如可以使用Wi-Fi认证的Miracast。Wi-Fi认证的Miracast是用于利用Wi-Fi直连或TDLS的技术将利用一个终端再现的音频或显示图像向另一终端发送并与该另一终端类似地输出音频或图像数据。
在Wi-Fi认证的Miracast中,用户输入返回信道(UIBC)是在传输控制协议/互联网协议(TCP/IP)上实现的。UIBC是用于从一个终端向另一个终端发送诸如鼠标或的键盘的输入设备的操作信息的技术。代替Wi-Fi认证的Miracast,可以应用另一种远程桌面软件(例如,虚拟网络计算(VNC))。
在这里,在Wi-Fi认证的Miracast中,例如,确定利用H.264对图像(视频)进行压缩和解压。例如,在Wi-Fi认证的Miracast中,H.264可以在发送侧进行调整。本技术的实施例不限于H.264,而是也可以对应于各种编解码器,诸如H.265(例如,高效视频编码(HEVC)和高效视频编码的可扩展视频编码扩展(SHVC))和运动图片专家组(MPEG4)、联合图像专家组(JPEG)2000、基于行的编解码器。在基于行的编解码器中,例如,一行或多行被捆绑并压缩或两行或更多行被分成2x2或更多宏块以便被压缩和解压。作为基于行的编解码器,例如可以使用小波变换或离散余弦变换(DCT)。另外,可以在不压缩的情况下发送或接收图像(视频)。
在本技术的第一实施例中,将描述信息处理设备200将通过成像操作生成的图像数据和音频数据设置为发送目标的例子。在本技术的第一实施例中,信息处理设备400将存储在存储单元(例如,硬盘)中的内容(例如,由图像数据和音频数据形成的内容)设置为发送目标的例子。可以使用安装有照相机的电子设备(例如,PC、游戏设备、智能电话或平板终端)作为信息处理设备200。可以使用包括显示单元的另一电子设备(例如,成像设备、游戏设备、智能电话或平板终端)作为信息处理设备300。信息处理设备400还可以具有共享(tethering)功能并且信息处理设备400可以经由无线或有线网络获取存储在互联网服务提供商(IPS)中的内容并将该内容设置为发送目标。
例如,通过信息处理设备200的成像操作生成的图像数据被发送到信息处理设备300,并且基于该图像数据的图像11被显示在信息处理设备300的显示单元351上。另外,存储在信息处理设备400的存储单元(例如,硬盘)中的内容被发送到信息处理设备300,并且基于这个内容的图像12被显示在信息处理设备300的显示单元351上。
以这种方式,在本技术的第一实施例中,将描述信息处理设备200和400充当源侧信息处理设备(源设备)并且信息处理设备300充当接收侧信息处理设备(接收设备)的例子。
在图1中,信息处理设备300可以利用无线通信执行直接通信的范围(当信息处理设备300被设置为参考时的信息递送范围(服务范围))被表示为信息递送范围101。
[信息处理设备(源设备)的配置例]
图2是示出根据本技术第一实施例的信息处理设备200的功能配置例的框图。涉及无线通信的信息处理设备400的功能配置基本上与信息处理设备200的功能配置相同。因此,在本技术的第一实施例中,将只描述信息处理设备200,而信息处理设备400的描述将被省略。
信息处理设备200包括天线210、无线通信单元220、控制信号接收单元230、控制单元240、图像和音频信号生成单元250、图像和音频压缩单元260以及流发送单元270。
无线通信单元220在控制单元240的控制下利用无线通信经由天线210向另一信息处理设备(例如,信息处理设备300)发送并从另一信息处理设备接收每条信息(例如,图像数据和音频数据)。例如,当执行图像数据发送处理时,由图像和音频信号生成单元250生成的图像数据由图像和音频压缩单元260压缩,并且压缩的图像数据(图像流)经由无线通信单元220从天线210被发送。
无线通信单元220被假设为能够利用多个频率信道向另一信息处理设备(例如,信息处理设备300)发送和从该另一信息处理设备接收每条信息。在本技术的第一实施例中,将描述无线通信单元220具有发送和接收三种频率信道2.4GHz、5GHz和60GHz的功能的例子。以这种方式,当源设备具有发送和接收多个频率信道的功能时,接收设备(例如,信息处理设备300)可以控制被每个源设备使用的频率信道。
控制信号接收单元230从由无线通信单元220接收的多条信息中获取从另一信息处理设备(例如,信息处理设备300)发送的控制信号(例如,与信息处理设备300互换的信息),然后将所获取的控制信号输出到控制单元240。
控制单元240对要从信息处理设备200发送的每条信息执行控制。例如,控制单元240基于由控制信号接收单元230接收到的控制信号对图像和音频信号生成单元250以及图像和音频压缩单元260执行控制。例如,控制单元240执行控制使得作为发送目标的图像数据的分辨率或音频信道的数量被改变,或者执行控制使得作为发送目标的图像数据的图像区域被改变。即,控制单元240基于由控制信号接收单元230接收到的控制信号执行作为发送目标的流的传输控制。传输控制是例如数据传输速度控制、可扩展性传输率控制、多接收分集设置控制和内容保护设置控制。可扩展性传输率控制将在本技术的第二实施例中进行描述。多接收分集设置控制和内容保护设置控制将在本技术的第三实施例中进行描述。
控制单元240可以具有当利用无线通信将数据发送到接收设备和从接收设备接收到数据时测量无线电波传播状况(链路无线电波传播状况)的功能,并可以向接收设备发送测量结果(无线电波传播测量信息)。
在这里,无线电波传播测量信息是,例如,用来确定与接收设备的线路质量是否是图像数据和音频数据可以利用其被发送和接收的质量。例如,当执行流传输控制(例如,数据传输速度控制、可扩展性传输率控制、多接收分集设置控制以及内容保护设置控制)时,使用无线电波传播测量信息。将参考图4详细地描述无线电波传播测量信息。代替无线电波传播测量信息,控制单元240可以对相同分组的重发次数进行计数并基于所计数的重发次数执行流传输控制。
在这里,数据传输速度主要是指通信线路的占用率,并且被假设为包括通信速度或通信能力的含义。例如,分辨率被定义为图像质量的指标,该图像质量的指标被配置为包括诸如图像数据的图像框(垂直和水平像素的数量)或图像数据的比特率(压缩比)的成分。作为质量的指标,可以使用流的吞吐量。假设音频信道的数量包括音频记录和再现方法(诸如单声道(1.0ch)或立体声(2.0ch))的含义。音频信道的数量被定义为音频质量的指标,该音频质量的指标被配置为包括诸如音频数据的比特率(压缩率)或信道的数量的成分。作为音频质量的指标,可以使用流的吞吐量。
控制单元240执行控制使得数据速率控制不稳定的状态得以改善。例如,控制单元240通过与接收设备(例如,信息处理设备300)互换信息来理解该接收设备的系统性能信息。在这里,系统性能信息是例如关于接收设备的系统的性能信息。例如,该系统性能信息是可用的频率信道、分辨率、传输控制协议(TCP)和用户数据报协议(UDP)。系统性能信息是例如表示加密方法的对应性、标准清晰度(SD)/高清晰度(HD)的对应性以及低功耗模式的对应性中的每一个的信息。例如,控制单元240可以根据接收设备是否对应于低功耗模式来选择用于流传输控制(例如,数据传输速度控制和可扩展性传输率控制)的方法,以进一步提高通信系统100的整体系统稳定性。
例如,假设控制单元240在与信息处理设备300交互信息期间插入关于信息处理设备200是否是移动设备的信息。例如,关于信息处理设备200的能力信息可以包括关于信息处理设备200是否是移动设备的信息。当理解了信息处理设备200是移动设备时,信息处理设备300可以确定不需要基于与其它连接的信息处理设备的关联来操作信息处理设备200。以这种方式,当确定不需要操作信息处理设备200时,信息处理设备200从信息处理设备300接收发送停止命令。当控制单元240理解发送停止命令时,控制单元240可以使图像和音频信号生成单元250、图像和音频压缩单元260和流发送单元270中的每一个的功能断电给定的时间。控制单元240可以使无线通信单元220过渡到间歇接收(这是如下模式:无线通信单元220定期地起来使得无线通信单元220可以从信息处理设备300接收命令,并且设备在其它情况下被断电)。
图像和音频信号生成单元250在控制单元240的控制下生成作为输出目标的数据(图像数据和音频数据),并向图像和音频压缩单元260输出所生成的数据。例如,图像和音频信号生成单元250包括成像单元(未示出)和音频获取单元(未示出)。成像单元(例如,透镜、图像传感器或者信号处理电路)对被摄体成像并生成图像(图像数据)。音频获取单元(例如,麦克风)在生成图像数据时获取周围的音频。以这种方式生成的数据是待发送到另一信息处理设备(例如,信息处理设备300)的发送目标。
在控制单元240的控制下,图像和音频压缩单元260压缩(编码)由图像和音频信号生成单元250生成的数据(图像数据和音频数据)。然后,图像和音频压缩单元260向流发送单元270输出压缩数据(图像数据和音频数据)。在这种情况下,控制单元240可以基于源设备或接收设备是否是移动设备来确定图像和音频压缩单元260对数据执行压缩或非压缩。即,控制单元240可以基于源设备或接收设备是否是移动设备来确定是否在不转码的情况下发送压缩数据。例如,当源设备不是移动设备时,图像和音频压缩单元260可以不压缩而输出由图像和音频信号生成单元250生成的数据。图像和音频压缩单元260可以通过由软件执行编码来实现,或者可以通过由硬件执行编码来实现。如上所述,图像和音频压缩单元260被假设为充当编解码器,但是被假设为能够处理未压缩的图像或音频。另外,图像和音频压缩单元260也可以充当可扩展编解码器。在这里,可扩展编解码器意味着例如可以根据接收侧信息处理设备(接收设备)的分辨率、网络环境等等而自由地被应用的编解码器。将根据本技术的第二实施例详细地描述可扩展编解码器。
流发送单元270在控制单元240的控制下执行经由无线通信单元220从天线210将由图像和音频压缩单元260压缩的数据(图像数据和音频数据)作为流发送的发送处理。
除了上述单元,信息处理设备200还可以包括显示单元、音频输出单元以及操作接收单元,但是这些单元在图2中未示出。已经描述了信息处理设备200生成作为发送目标的图像数据和音频数据的例子。但是,信息处理设备200可以从外部设备获取作为发送目标的图像数据和音频数据。例如,信息处理设备200可以从配备有麦克风的web照相机获取作为发送目标的图像数据和音频数据。信息处理设备200可以设置存储在存储设备(例如硬盘)中的内容(例如,由图像数据和音频数据形成的内容)作为发送目标,而不管是在信息处理设备200的内部还是外部。在这种情况下,存储在存储设备中的内容也被假设为是压缩内容。在这种情况下,当压缩内容根据在通信系统100中采用的标准中定义的编码方案被压缩时,压缩内容可以在不被解密(解码)的情况下被发送。
信息处理设备200的显示单元(未示出)是例如显示由图像和音频信号生成单元250生成的图像的显示单元。作为显示单元,例如,可以使用诸如电致发光(EL)或晶体发光二极管(LED)显示器或液晶显示器(LCD)的显示面板。
信息处理设备200的音频输出单元(未示出)是例如输出由图像和音频信号生成单元250生成的音频的音频输出单元(例如扬声器)。图像可以从发送设备和接收设备这两者输出,但音频优选地只从发送设备和接收设备之一输出。
信息处理设备200的操作接收单元(未示出)是接收由用户执行的操作输入的操作接收单元,并且是例如键盘、鼠标、游戏手柄、触摸面板、照相机或麦克风。操作接收单元和显示单元可以利用能够在用户用他或她的手指触摸或接近显示面时执行操作输入的触摸面板而一体化地配置。
[信息处理设备(接收侧)的配置例]
图3是示出根据本技术第一实施例的信息处理设备300的功能配置例的框图。
信息处理设备300包括天线310、无线通信单元320、流接收单元330、图像和音频解压单元340、图像和音频输出单元350、用户信息获取单元360、控制单元370、控制信号发送单元380以及管理信息保持单元390。
无线通信单元320在控制单元370的控制下利用无线通信经由天线310向另一信息处理设备(例如,信息处理设备200)发送和从该另一信息处理设备接收每条信息(例如,图像数据和音频数据)。例如,当执行图像数据接收处理时,由天线310接收的图像数据经由无线通信单元320和流接收单元330而被图像和音频解压单元340解压(解码)。然后,解压的图像数据被提供给图像和音频输出单元350,并且根据该解压的图像数据的图像从图像和音频输出单元350输出。即,根据该解压的图像数据的图像被显示在显示单元351上。
无线通信单元320被假设为能够利用多个频率信道向另一信息处理设备(例如,信息处理设备200)发送和从该另一信息处理设备接收每条信息。在本技术的第一实施例中,将描述无线通信单元320具有发送和接收三种频率信道2.4GHz、5GHz和60GHz的功能的例子。即,无线通信单元320可以执行利用第一频带的通信并执行利用具有比第一频带高的数据传输速度的第二频带的通信。控制单元370在与每个源设备的无线通信中控制在多个频率信道中要使用的频率信道。
信息处理设备200和300之间的链路以及信息处理设备400和300之间的链路可以利用相同的频率信道来建立或者可以利用不同的频率信道来建立。
在本技术的第一实施例中,将描述无线通信单元320具有发送和接收三种频率信道2.4GHz、5GHz和60GHz的功能的例子,但本技术的实施例不限于此。例如,无线通信单元320可以具有发送和接收其它频率信道、两个频率信道、四个或更多个频率信道的功能。
流接收单元330在控制单元370的控制下接收流(例如,图像流和音频流)和由无线通信单元320接收的多条信息中与每个源设备的交换信息。然后,流接收单元330将接收到的命令信息输出到控制单元370,并将接收到的流输出到图像和音频解压单元340和控制单元370。
在这里,与每个源设备的互换信息是从源设备(例如,信息处理设备200)发送的信息,并且包括例如用于获取信息处理设备300的系统性能信息的请求。系统性能信息是例如表示可用频率信道、分辨率、TCP和UDP或者加密方法的对应性、SD/HD的对应性和低功耗模式的对应性中的每一个的信息。
流接收单元330具有利用无线通信将数据发送到接收设备和从接收设备接收到数据时测量无线电波传播状况(链路无线电波传播状况)的功能。流接收单元330将测量结果(无线电波传播测量信息)输出到控制单元370。将参照图4详细描述无线电波传播测量信息。
图像和音频解压单元340在控制单元370的控制下解压(解码)从另一个信息处理设备(例如,信息处理设备200)发送的流(图像数据和音频数据)。然后,图像和音频解压单元340将解压的数据(图像数据和音频数据)输出到图像和音频输出单元350。图像和音频解压单元340可以通过由软件执行解码来实现,或者可以通过由硬件执行解码来实现。如上所述,图像和音频解压单元340被假设为充当编解码器,但是被假设为能够处理未压缩的图像或音频。另外,图像和音频解压单元340也可以充当可扩展编解码器。
图像和音频输出单元350包括显示单元351和音频输出单元352。
显示单元351是显示基于由图像和音频解压单元340解压的图像数据的每个图像(例如,图1中所示的图像11和12)的显示单元。作为显示单元351,例如,可以使用诸如有机EL面板、晶体LED显示器、LCD面板的显示面板。作为显示单元351,可以使用能够在用户用他或她的手指触摸或接近显示面时执行操作输入的触摸面板。
音频输出单元352是输出基于由图像和音频解压单元340解压的音频数据的各种音频(与显示单元351上显示的图像相关的音频等)的音频输出单元(例如扬声器)。在这里,作为音频输出方法,例如,可以使用仅从扬声器再现分配给主图像的源设备的音频并且不再现分配给子图像的源设备的音频的方法。作为另一音频输出方法,例如,可以使用如下方法:设置分配给主图像的源设备的音频的音量为主要并且降低分配给子图像的源设备的音频的音量,并再现该音频。可以使用其它音频输出方法。
用户信息获取单元360获取关于用户的信息(用户信息)并将所获取的用户信息输出到控制单元370。例如,用户信息获取单元360可以通过从操作接收单元(键盘、鼠标、遥控器、游戏手柄或触摸面板)接收输入来获取用户信息,用户可以为该操作接收单元直接设置显示方法。操作接收单元是例如指定在显示单元351上显示的图像中的任何区域的操作构件。例如,用户信息获取单元360可以通过从能够领会用户意图的设备(诸如照相机、麦克风或各种传感器(例如,陀螺仪传感器和检测人体的传感器)中的任何一种)接收输入来获取用户信息。
例如,用户信息获取单元360获取当基于利用无线通信从另一信息处理设备(例如,信息处理设备200)接收的流的信息从图像和音频输出单元350输出时通过用户运动生成的用户信息。用户信息是例如通过与图像单元351上显示的图像相关的用户运动生成的用户信息。例如,用户信息是基于与图像单元351上显示的图像相关的用户操作生成的信息。
控制单元370使管理信息保持单元390保持由流接收单元330获取的每条信息,并基于保持在管理信息保持单元390中的管理信息管理每个源设备。控制单元370执行流传输控制(例如,数据传输速度控制、可扩展性传输率控制和多接收分集设置控制),使得在整个系统中对于从多个源设备发送的流,稳定性得以提高。
例如,控制单元370基于由用户信息获取单元360获取的用户信息和保持在管理信息保持单元390中的管理信息执行流传输控制(例如,数据传输速度控制、可扩展性传输率控制、多接收分集设置控制以及内容保护设置控制)。具体而言,控制单元370基于保持在管理信息保持单元390中的管理信息,为每个源设备生成控制信号以执行流传输控制(例如,数据传输速度控制、可扩展性传输率控制、多接收分集设置控制以及内容保护设置控制),并将所生成的控制信号输出到控制信号发送单元380。例如,控制单元370基于用户信息和管理信息改变显示在显示单元351上的图像的分辨率,并生成控制信号以向每个源设备请求等效于该分辨率的传输率。例如,控制单元370基于用户信息和管理信息生成控制信号,以改变显示单元351上的图像的显示区域。例如,控制单元370基于用户信息和管理信息生成控制信号,以改变显示单元351上的图像的尺寸。
控制单元370基于用户信息和管理信息执行控制,使得待使用的频率信道和分辨率被设置。例如,控制单元370在无线通信单元320的多个频率信道中对每个源设备设置待使用的频率信道。当功耗模式对每个频率信道不同时,控制单元370理解每种模式并且设置用于照顾移动设备的功耗的频率信道。即,控制单元370可以单独设置与第一频带相关的第一功耗模式和与具有比第一频带高的数据传输速度的第二频带相关的第二功耗模式。
控制信号发送单元380经由无线通信单元320和天线310执行将从控制单元370输出的控制信号发送到另一无线通信设备的发送处理。
管理信息保持单元390是保持信息(管理信息)以管理利用无线通信连接到信息处理设备300的每个源设备的表。将参照图4详细地描述保持在管理信息保持单元390中的内容。
[管理信息保持单元中保持的内容例]
图4是示意性地示出保持在根据本技术的第一实施例的管理信息保持单元390中的内容例的图。
管理信息保持单元390是保持信息(管理信息)以管理利用无线通信连接到信息处理设备300的每个源设备的表。例如,在管理信息保持单元390中,终端标识信息391、频率信道392、无线电波传播测量信息393、设备信息394、频带使用水平395、输出形式396、待机或唤醒397和多接收分集对应性398被相互关联地保持。
在终端标识信息391中,存储标识信息以识别利用无线通信连接到信息处理设备300的源设备。
在频率信道392中,存储利用无线通信连接到信息处理设备300的源设备实际使用的频率信道。
在无线电波传播测量信息393中,存储关于利用无线通信连接到信息处理设备300的源设备的无线电波传播测量信息。针对利用无线通信连接到信息处理设备300的每个源设备,由流接收单元330测量无线电波传播测量信息。
作为无线电波传播测量信息393,例如存储分组错误率(PER)、误比特率(BER)、分组重传次数以及吞吐量。作为无线电波传播测量信息393,例如存储丢帧、信号对干扰比(SIR)和接收信号强度指示器(RSSI)。在这里,代替SIR,也可以使用信号对干扰加噪声比(SINR)。图4中所示的无线电波传播测量信息393是个例子。多条信息中的至少一条信息可以被存储,或者另一条无线电波传播测量信息可以由流接收单元330测量以被存储。可以获取并存储由源设备测量出的无线电波传播测量信息。由接收侧接收的分组延迟可以被确定并且关于分组延迟的信息可以被用作无线电波传播测量信息。分组延迟充当与无线电波传播相关的一个指标,因为在错误发生时在通过层2中的重发处理向接收侧的发送中发生延迟。分组延迟充当例如表示多个设备共享无线频带的无线系统中链路特性在何处恶化的指标。
在设备信息394中,存储利用无线通信连接到信息处理设备300的源设备的类别(源设备的属性)。例如,移动设备和固定设备中的任意一个被存储为源设备的类别。电源被插入其中的设备和另一设备中的任意一个可以被存储为源设备的类别。电池驱动的设备和另一设备中的任意一个可以被存储为源设备的类别。
在频带使用水平395中,存储利用无线通信连接到信息处理设备300的源设备的频带使用水平。作为频带使用水平,例如,可以使用分辨率或吞吐量。例如,在频带使用水平中,可以存储使用期间的吞吐量,可以准备预决定的表,并且可以存储并管理表示表的范围的对应性的编号。
在输出形式396中,存储基于从利用无线通信连接到信息处理设备300的源设备发送的流的数据输出形式。例如,存储在显示单元351上显示并且基于从源设备发送的流的图像数据的显示形式(主图像或子图像)。例如,存储从音频输出单元352输出并且基于从源设备发送的流的音频数据的输出形式(主音频或子音频)。可以根据显示形式来实现不显示子图像的格式。
在待机或唤醒397中,存储利用无线通信连接到信息处理设备300的源设备的模式(待机模式或唤醒模式)。将参照图6至8详细描述待机模式和唤醒模式。
在多接收分集对应性398中,存储表示利用无线通信连接到信息处理设备300的源设备是否对应于多接收分集的信息。将根据本技术的第三实施例详细描述多接收分集。
以这种方式,保持在管理信息保持单元390中的管理信息是用于将用来标识其它信息处理设备的标识信息(终端标识信息391)与关于其它信息处理设备的能力信息进行关联以便管理的信息。保持在管理信息保持单元390中的管理信息至少包括关于与和其它信息处理设备的通信相关的无线电波传播测量的信息(无线电波传播测量信息393)和关于功耗的信息(待机或唤醒信息397),作为关于其它信息处理设备的能力信息。保持在管理信息保持单元390中的管理信息包括用于显示图像信息的关于输出形式的信息(输出形式396),作为关于其它信息处理设备的能力信息。关于输出形式的信息是例如表示图像信息作为主信息或子信息被显示的信息。
[图像的过渡例]
图5是示出在根据本技术的第一实施例的信息处理设备300的显示单元351上显示的图像的过渡例的图。
图5a示出了通过将图像11设置为主图像并将图像12设置为子图像而图像11和12在信息处理设备300的显示单元351上显示的显示形式的例子。
图5b示出了通过将图像11设置为子图像并将图像12设置为主图像而图像11和12在信息处理设备300的显示单元351上显示的显示形式的例子。
例如,假设信息处理设备200和400中的每一个向信息处理设备300发送具有标准分辨率的流(图像数据和音频数据)的情况。在这种情况下,如在图1中所示,基于来自信息处理设备200的图像数据的图像11和基于来自信息处理设备400的图像数据的图像12可以在信息处理设备300的显示单元351上显示,使得图像11和12的尺寸相同。在这个例子中,给定的分辨率和显示区域被定义为相同,但缩放器(scaler)功能可以被添加到显示单元351,使得图像11和12被重新缩放并显示在显示单元351上。但是,在本技术的实施例中,为了便于描述,假设这个功能未在描述中使用。
在图像11和12的显示形式中,例如,在先前通信时设置的显示形式可以被保持,并且可以根据该显示形式在信息处理设备300的显示单元351上显示图像11和12。
图像11和12的显示形式可以基于连接到信息处理设备300的次序来决定。例如,假设信息处理设备200首先连接到信息处理设备300并且信息处理设备400在该连接之后连接到信息处理设备300的情况。在这种情况下,通过将图像11设置为主图像并将图像12设置为子图像,图像11和12在信息处理设备300的显示单元351上显示。即,可以基于连接到信息处理设备300的次序,以主图像和子图像的过程显示图像。
如图5a中所示,当通过将图像11设置为主图像并将图像12设置为子图像而图像11和12在显示单元351上显示时,用于将图像12设置为主图像的用户信息被假设为由用户信息获取单元360获取。例如,当观众利用诸如遥控器或手势的指示器执行将图像12设置为主图像的操作时,由用户信息获取单元360获取用于将图像12设置为主图像的用户信息。在这种情况下,如图5b中所示,通过将图像12设置为主图像并将图像11设置为子图像,图像11和12显示在显示单元351上。另外,显示单元351的显示面上的图像11和12的显示位置是基于由用户信息获取单元360获取的用户信息(例如,手动操作或视线)决定的。
[通信例]
图6至8是示出在根据本技术的第一实施例的通信系统100中包括的设备之间的通信处理例子的序列图。图6至8示出了信息处理设备200和300之间的通信处理的例子。
在图6至8中,包括在信息处理设备200中的单元中的图像和音频信号生成单元250、图像和音频压缩单元260以及流发送单元270被示为数据发送系统201。天线210、无线通信单元220、控制信号接收单元230和控制单元240被示为线路控制系统202。
在图6至8中,信息处理设备300的配置中的天线310、无线通信单元320、流接收单元330、控制单元370和控制信号发送单元380被示为线路控制系统301。图像和音频解压单元340、图像和音频输出单元350以及用户信息获取单元360被示为输入和输出系统302。
在图6至8中,首先,示出了如下例子:基于来自信息处理设备200的图像数据的图像作为子图像显示在信息处理设备300的显示单元351上,并且在图像信息处理设备200中设置低功耗模式。随后,示出了如下例子:基于来自信息处理设备200的图像数据的图像作为主图像显示在显示单元351上,并且在图像信息处理设备200中设置正常功耗模式。即,在图6至8中,示出了信息处理设备200和300的连接设置例以及信息处理设备200中的功耗模式的过渡例。
首先,当信息处理设备300被通电时,前一输出形式(这是当信息处理设备300被断电时的输出形式)被设置为信息处理设备300的输出形式(这是图像显示形式和音频输出形式)(501)。信息处理设备300的控制单元370使管理信息保持单元390保持利用无线通信连接到信息处理设备300的每个源设备的管理信息(图4中所示)。如图5中所示,信息处理设备300的控制单元370基于前一输出形式使显示单元351显示对应于分别从信息处理设备200和400发送的两个流的图像11和12。
随后,假设用户执行设置输出形式的操作(改变操作)的情况(502)。在这种情况下,与设置操作相关的控制信号作为用户信息由用户信息获取单元360获取,而用户信息被输出到控制单元370。然后,控制单元370基于用户信息改变保持在管理信息保持单元390(在图4中示出)中的内容(503和504)。例如,如图5b中所示,假设执行设置操作(改变操作)以将基于来自信息处理设备200的图像数据的图像11设置为子图像的情况。在这种情况下,控制单元370将管理信息保持单元390中的信息处理设备200的输出形式396(在图4中示出)改变为“子”(503和504)。
信息处理设备200定期或不定期(还包括仅开始时间)地向信息处理设备300发送模式表请求(分辨率、音频质量、低功耗模式等的查询请求)(505和506)。模式表请求是用于发送在信息处理设备300中管理的每条信息(这是被用来利用关于信息处理设备300的管理信息(例如,可以由信息处理设备200显示的分辨率信息等)来与信息处理设备200通信的信息)的请求。
当信息处理设备300接收到模式表请求时(506),信息处理设备300根据该模式表请求发送命令信息(507和508)。命令信息是,例如,用于由信息处理设备300向信息处理设备200给出设置要求的关于信息处理设备200的信息以及无线电波传播环境和显示形式。例如,命令信息是包括分辨率和音频质量的输出形式信息(例如,主图像和子图像)、是否对应于低功耗模式、制造商名称以及多接收分集功能的存在或不存在的信息。例如,命令信息是包括如下内容的信息:分辨率和音频质量、图像和音频编解码器的种类、3D功能的存在或不存在、内容保护的存在或不存在、显示设备的显示尺寸、拓扑信息、可使用的协议、协议的设置信息(端口信息等)、连接接口信息(连接器的类型等)、水平同步和垂直同步位置、源设备的性能优先请求信息、响应于是否对应于低功耗模式的模式控制表、无线传输的最大发送吞吐量或可接收的最大吞吐量、中央处理单元(CPU)功率、电池剩余电量和电源信息。每条信息包括在能力信息的一部分中。在这里,关于信息处理设备200的分辨率和音频质量的输出形式信息是例如表示来自信息处理设备200的数据的输出形式是主形式还是子形式的信息。信息处理设备300从信息处理设备300的观点看,发送包括用于分辨率和音频质量或低功耗模式的设置的要求作为参数的命令信息。除关于信息处理设备200的每条信息之外,信息处理设备300还可以发送关于所有源设备的每条信息作为命令信息。在这种情况下,信息处理设备200仅选择并使用专用于自己的信息处理设备的信息。当设备遵守Wi-Fi认证的Miracast时,该设备对应于被定义为RTSP消息的wfd-audio-codecs、wfd-video-formats、wfd-content-protection、wfd-displayedid、wfd-coupledsink、wfd-client-rtpports、wfd-I2C、wfd-uibccapability、wfd-connectortype、wfd-standby-resume-capability等,但假设待发送的消息内容不限于这些命令。
当信息处理设备200接收到命令信息时(508),信息处理设备200的控制单元240基于该命令信息指定来自信息处理设备200的数据的输出形式是主形式还是子形式。基于该命令信息,信息处理设备200的控制单元240确定信息处理设备300是否具有对应于功耗操作模式的功能。随后,信息处理设备200的控制单元240向信息处理设备300发送表示指定的输出形式被设置的模式设置信息(509和510)。在这里,假设子形式被指定为来自信息处理设备200的数据的输出形式。假设信息处理设备300具有对应于低功耗模式的功能。相应地,信息处理设备200的控制单元240向信息处理设备300发送模式设置信息,该模式设置信息用于通知信息处理设备300指定的输出形式(子形式)被设置并且低功耗模式被设置(509和510)。
在这个例子中,已经描述了基于命令信息而将图像指定为主图像或子图像并设置低功耗模式的例子,但也可以在不利用主图像或子图像的确定作为参考的情况下设置低功耗模式。例如,可以通过在源设备和接收设备之间互换表示模式可以过渡到低功耗模式的许可标志来设置低功耗模式。
随后,信息处理设备200的控制单元240将子模式设置为发送模式(511)。相应地,在数据发送系统201中,设置音频质量以输出用于显示子图像的分辨率和子音频(512)。在线路控制系统202中,设置低功耗模式(513)。
在这里,当以这种方式设置低功耗模式时,假设接收设备和源设备都具有该功能。例如,移动设备(例如,蜂窝电话、智能电话或平板终端)由电池驱动,以在许多情况下操作。因此,当来自自己的信息处理设备的数据的输出形式不是主形式时(当输出形式是子形式时),期望尽可能多地降低自己的信息处理设备的电池消耗。相应地,在接收设备中的输出形式被设置为子形式的源设备中,期望设置低功耗模式。另外,在设置处理中(512),只有被分配给主图像的源设备的音频可以被设置为从扬声器再现,而被分配给子图像的源设备的音频可以被设置为不再现。被分配给主图像的源设备的音频的音量可以被设置为主要,而被分配给子图像的源设备的音频的音量可以被设置为降低并被再现。
以这种方式,信息处理设备300的控制单元370执行控制,使得当输出形式被设置为子图像(子显示)时信息处理设备200中的低功耗模式被设置。即,信息处理设备300的控制单元370执行控制,使得根据基于流输出图像信息的显示单元351的输出形式而在信息处理设备200中设置功耗模式。
当以这种方式设置低功耗模式时(513),信息处理设备200的控制单元240开始间歇发送(514至522)。
具体而言,信息处理设备200停止发送处理仅给定的时间并使每个单元休眠(514)。随后,当经过给定的时间时(514),信息处理设备200唤醒信息处理设备200的每个单元以执行发送处理,并对信息处理设备300执行发送处理(515至520)。
例如,信息处理设备200的控制单元240向信息处理设备300发送用于确认在信息处理设备300中是否进行了任何改变(例如,输出形式的改变)的查询消息(515和516)。
当接收到查询消息时(516),信息处理设备300的控制单元370向信息处理设备200发送响应消息,以通知是否进行了任何改变(例如,输出形式的改变)(517和518)。在这里,假设在信息处理设备300中没有改变(例如,输出形式的改变)。因此,信息处理设备300的控制单元370向信息处理设备200发送用于通知没有进行改变(例如,输出形式的改变)的响应消息(517和518)。
当响应消息以这种方式表示没有进行改变时(例如,输出形式的改变)(518),不需要改变信息处理设备200中的设置。因此,信息处理设备200的控制单元240向信息处理设备300发送用于输出子图像和子音频的流(519和520)。当信息处理设备300以这种方式接收到流时(520),信息处理设备300输出基于接收到的流的图像和音频(521)。例如,如图5b中所示,基于来自信息处理设备200的流的图像11作为子图像显示在显示单元351上。
当发送处理结束时(519),信息处理设备200停止发送处理仅给定的时间,并使每个单元休眠(522)。持续执行间歇发送,直到从信息处理设备300给出改变请求为止。
在这里,在间歇发送中,出现不从信息处理设备200发送流的期间。因此,信息处理设备300优选地执行插值并显示与最后从信息处理设备200接收的流对应的图像的显示处理。但是,还假设信息处理设备300不具有插值处理功能。在这种情况下,在休眠期间,来自信息处理设备200的图像不能被显示在显示单元351上。因此,当信息处理设备300不具有插值处理功能时,可以连续地发送来自信息处理设备200的图像数据。例如,在来自信息处理装置200的作为发送目标的流中,在发送停止时的最后的图像数据被保持在发送缓存中。在休眠期间中,停止信息处理设备200的图像处理,但是在无线链路中持续执行发送处理,并持续地发送保持在发送缓存中的图像数据。
在休眠期间中,只有与从信息处理设备400发送的流对应的图像可以显示在显示单元351上。例如,与从信息处理设备400发送的流对应的图像可以显示在显示单元351的整个面上。
接下来,将描述用户执行设置输出形式的操作(改变操作)的情况的例子。
如上所述,当用户执行设置输出形式的操作(改变操作)时(531),控制单元370基于与设置操作相关的用户信息来改变保持在管理信息保持单元390(示于图4)中的内容(532和533)。例如,如图5a所示,假设用户执行设置基于来自信息处理设备200的图像数据的图像11为主图像的设置操作(改变操作)的情况。在这种情况下,控制单元370将管理信息保持单元390中的信息处理设备200的输出形式396(示于图4)改变为“主”(532和533)。
在这里,如上所述,当在信息处理设备200中设置低功耗模式时,信息处理设备200被假设为休眠。以这种方式,当信息处理设备200休眠时,不能对信息处理设备200通知用户执行设置输出形式的操作(改变操作)。
相应地,当用户执行设置输出形式的操作(改变操作)531并且保持在管理信息保持单元390(图4所示)中的内容被改变时(532和533),信息处理设备300的控制单元370设置改变触发器(534)。改变触发器是用于在从信息处理设备200接收到查询消息时向信息处理设备200通知用户执行设置输出形式的操作(改变操作)的触发器。通过改变触发器,信息处理设备200取消待机模式的状态并向信息处理设备200通知用户执行设置输出形式的操作(改变操作)。
在这里,假设唤醒信息处理设备200的每个单元并开始到信息处理设备300的发送处理的情况。在这种情况下,信息处理设备300的控制单元370向信息处理设备200发送待机取消消息(535和536)。
当接收到待机取消消息时(536),信息处理设备200的控制单元240向信息处理设备300发送响应消息(537和538)。
以这种方式,需要根据来自接收设备的待机模式取消请求来查询信息处理设备200中的设置(535至538)。因此,信息处理设备200的控制单元240向信息处理设备300发送模式表请求(539和540)。如上所述,模式表请求是用于发送在信息处理设备300中管理的每条信息(关于信息处理设备200的管理信息)的请求。在上述处理中(535至538),改变(例如,输出形式的改变)的消息(例如,对处理(515至518)中的查询消息的响应消息)可以互换。
当信息处理设备300接收到模式表请求时(540),信息处理设备300根据该模式表请求发送命令信息(541和542)。在这里,当命令信息已经从信息处理设备300发送到信息处理设备200时,信息处理设备200已经获取包括在命令信息中的信息。因此,信息处理设备300可以仅发送差异信息作为根据模式表请求的命令信息(541和542)。差异信息是关于改变的信息并且是例如关于信息处理设备200的分辨率和音频质量的输出形式信息。
当接收到命令信息时(542),信息处理设备200的控制单元240基于该命令信息指定来自信息处理设备200的数据的输出形式是主形式还是子形式。随后,信息处理设备200的控制单元240向信息处理设备300发送表示指定的输出形式的设置的模式设置信息(543和544)。在这里,假设主形式被指定为来自信息处理设备200的数据的输出形式。相应地,信息处理设备200的控制单元240向信息处理设备300发送模式设置信息,该模式设置信息用于向信息处理设备300通知指定的输出形式(主形式)被设置并且正常功耗模式被设置(543和544)。当设备遵守Wi-Fi认证的Miracast时,可以利用能力再协商来执行处理(539至544)。在能力再协商的情况下,不需要对在处理(534)中输出形式未改变的设置值再次执行协商。例如,可以例示wfd-displayedid、wfd-client-rtpports、wfd-I2C和wfd-connectortype。
随后,信息处理设备200的控制单元240设置主模式作为发送模式(545)。相应地,在数据发送系统201中,设置用于显示主图像的分辨率和用于输出主音频的音频质量(546)。在线路控制系统202中,设置正常功耗模式(547)。
当以这种方式设置正常功耗模式时(547),信息处理设备200的控制单元240开始正常发送处理(548和549)。即,信息处理设备200向信息处理设备300发送用于输出主图像和主音频的流(548和549)。当以这种方式接收到流时(549),信息处理设备300输出基于接收到的流的图像和音频(550)。例如,如图5a所示,基于来自信息处理设备200的流的图像11作为主图像被显示在显示单元351上。
在这个例子中,已经描述了如下例子:当信息处理设备300被通电时,前一输出形式(当信息处理设备300被断电时的输出形式)被设置为显示单元351的显示形式。但是,当信息处理设备300被通电时,可以设置另一输出形式。例如,当信息处理设备300被通电时,可以通常设置缺省的输出形式。作为替代,可以基于到信息处理设备300的连接次序来决定显示形式。
在图6至8中,已经描述了如下例子:信息处理设备200查询关于信息处理设备300的设置信息,并基于接收到的参数信息设置发送参数。但是,信息处理设备200可以向信息处理设备300要求期望设置的参数的设置请求,并可以在信息处理设备200接收到表示信息处理设备300没问题的响应时设置参数。这个例子将在图9和10中示出。
[通信例]
图9至11是示出在根据本技术的第一实施例的通信系统100中包括的设备之间的通信处理的例子的序列图。在图9和10中,修改了在图6至8中示出的通信处理例的一部分。因此,在图9和10中,相同的参考标号给予与图6至8中示出的通信处理例的共同部分并且其描述将部分被省略。在图11中,修改了在图9中示出的通信处理例的一部分。因此,在图11中,相同的参考标号给予与图9中示出的通信处理例的共同部分并且其描述将部分被省略。
图9中示出的处理(561至564)对应于图6中所示的处理(501至504)。
随后,信息处理设备300的控制单元370向信息处理设备200发送用于通知信息处理设备200由用户设置的输出形式的模式状态通知(565和566)。模式状态通知是用于通知如下内容的信息:可以由信息处理设备200设置的电源信息、分辨率和音频质量、图像和音频编解码器的种类、3D功能的存在或不存在、内容保护的存在或不存在、显示设备的显示尺寸、拓扑信息、可使用的协议、协议的设置信息(端口信息等)、连接接口信息(连接器的类型等)、水平同步和垂直同步位置、源设备的性能优先请求信息、响应于是否对应于低功耗模式的模式控制表、无线传输的最大发送吞吐量或可接收的最大吞吐量、中央处理单元(CPU)功率、电池剩余电量以及由用户设置的输出形式(例如,主形式或子形式)。
以这种方式,在由用户对输出形式的设置操作在信息处理设备300中执行之后紧接着,用于向信息处理设备200通知与设置操作相关的输出形式的模式状态通知可以发送到信息处理设备200。因此,能够缩短利用无线通信连接的信息处理设备200与300之间的设置时间(改变时间)。
当接收到模式状态通知时(566),信息处理设备200的控制单元240比较由接收到的模式状态通知指定的状态参数与自己的信息处理设备的状态参数。随后,信息处理设备200的控制单元240基于比较结果决定设置内容(例如,分辨率和音频以及功耗模式)。随后,信息处理设备200的控制单元240向信息处理设备300发送用于通知所决定的设置内容(例如,分辨率和音频以及功耗模式)的模式设置请求(567和568)。
当接收到模式设置请求时(568),信息处理设备300的控制单元370确定是否允许由接收到的模式设置请求指定的设置内容(例如,分辨率和音频以及功耗模式)。然后,信息处理设备300的控制单元370向信息处理设备200发送用于通知确定结果的模式设置可用性命令(569和570)。
当接收到模式设置可用性命令时(570),信息处理设备200的控制单元240确认模式设置可用性的内容。例如,当接收到表示允许由信息处理设备200发送的模式设置请求相关的设置内容的模式设置可用性命令时,信息处理设备200的控制单元240将子模式设置为发送模式(571)。另外,图9中所示的处理(571至574)对应于图6中所示的处理(511至514)。另外,图10中所示的处理(575至578)对应于图7中所示的处理(519至522)。
当接收到表示不允许与由信息处理设备200发送的模式设置请求相关的设置内容的模式设置可用性命令时,信息处理设备200的控制单元240新决定设置内容(例如,分辨率和音频以及功耗模式)。然后,信息处理设备200的控制单元240向信息处理设备300发送用于向信息处理设备300通知新决定的设置内容(例如,分辨率和音频以及功耗模式)的模式设置请求。
图10中所示的处理(581至583)对应于图7中所示的处理(531至533)。
随后,信息处理设备300的控制单元370向信息处理设备200发送模式状态改变通知,用于向信息处理设备200通知由用户改变的输出形式(584和585)。模式状态改变通知是用于通知可以由信息处理设备200设置的分辨率和音频质量和是否对应于低功耗模式的信息以及由用户改变的输出形式(例如,主形式或子形式)。
当接收到模式状态改变通知时(585),信息处理设备200的控制单元240决定设置内容(例如,分辨率和音频以及功耗模式)。决定设置内容的处理与上述决定处理相同。随后,信息处理设备200的控制单元240向信息处理设备300发送用于向信息处理设备300通知所决定的设置内容(例如,分辨率和音频以及功耗模式)的模式改变请求(586和587)。
当接收到模式改变请求时(587),信息处理设备300的控制单元370确定是否允许由接收到的模式改变请求指定的设置内容(例如,分辨率和音频以及功耗模式)。然后,信息处理设备300的控制单元370向信息处理设备200发送用于通知确定结果的模式设置可用性命令(588和589)。
当接收到模式设置可用性命令时(589),信息处理设备200的控制单元240确认模式设置可用性命令的内容并设置发送模式(590)。这个确认处理与上述确认处理相同。图10中所示的处理(590至595)对应于图8中所示的处理(545至550)。
在这里,当源设备执行子图像与主图像之间的切换时,表示切换的定时的信息(例如,用于理解一组图片(GOP)的开始的信息或者用于理解图片的开始的信息)可以包括在待发送的流中。换句话说,当源设备执行主显示与子显示之间的切换时,表示切换的定时的信息可以被发送到接收设备。在这种情况下,接收流的接收设备可以基于表示定时的信息在适当的定时在子图像与主图像之间切换。即,当接收到物理链路切换信息时,源设备的控制单元可以执行控制,使得AVC/HEVC从I帧开始。以这种方式,VC/HEVC从I帧开始的环境是例如无线链路由FST改变的定时或者切换多样性(switching diversity)被切换的定时。相应地,分组丢失发生在无线链路的切换的定时。因此,通过随后发送I帧,分组丢失可以成为不可见。但是,需要能够接收切换信息并输出I帧的编解码器。
在这里,图6至10示出了控制连接到接收设备的源设备的待机和唤醒的例子。在这里,可以基于连接到接收设备的源设备的待机和唤醒来控制接收设备的待机和唤醒。例如,当所有连接到接收设备的源设备都待机时,可以执行控制使得接收设备待机。当连接到接收设备的源设备中的至少一个唤醒时,可以执行控制使得接收设备唤醒。
在图11中示出接收设备通知源设备在图9中所示的处理(565至570)中改变在处理(564)中保持的内容并且源设备发送模式表请求的情况的修改例。
如图11中所示,信息处理设备300发送模式状态通知,以通知信息处理设备200输出形式已改变(564)并提示从信息处理设备200发送模式设置请求(565和566)。当能够对应时,接收模式状态通知的信息处理设备200向信息处理设备300发送表示模式状态通知的认可的模式状态通知认可(851和852)。
以这种方式,在模式状态通知认可被发送之后(851),执行处理(853至858)。处理(853至858)对应于图6中所示的处理(505至510)。以这种方式,通过在发送模式状态通知认可(851)之后执行处理(853至858),可以在状态改变(输出形式的改变(564))中适当地执行流传输控制(例如,数据传输速度控制、可扩展性传输率控制、多接收分集设置控制和内容保护设置控制)。
在这里,例如,在Wi-Fi认证的Miracast中准备的命令中,包括wfd-triggered-method的RTSPM5消息当前被定义为由信息处理设备200发送到信息处理设备300的命令。但是,当包括wfd-triggered-method的RTSPM5消息被扩展为由信息处理设备300发送到信息处理设备200的命令时,包括wfd-triggered-method的RTSPM5消息可以由信息处理设备200接收,并且信息处理设备200可以开始与信息处理设备300的能力再协商。即,可以利用包括wfd-triggered-method的RTSPM5消息来交换管理信息。例如,当管理信息被改变时,信息处理设备300的控制单元370可以执行控制,使得包括在Wi-Fi认证的Miracast规范中定义的wfd-triggered-method的RTSPM5消息作为用于向信息处理设备200通知改变的命令被发送到信息处理设备200。除该命令之外,可以新定义命令,以充当等同物。例如,信息处理设备300的控制单元370可以在要从信息处理设备300发送到信息处理设备200的命令中包括传输率改变请求和传输质量改变请求当中至少一个,并将命令发送到信息处理设备200。作为命令,例如,可以使用维持HDCP(这将在本技术的第三实施例中描述)会话的状态下的命令(例如,M5的wfd-triggered-method或M4或更高的命令)。
[信息处理设备(源设备)的操作例]
图12是示出由根据本技术第一实施例的信息处理设备200执行的数据发送处理的处理过程的例子的流程图。图12示出了信息处理设备200首先用标准分辨率向信息处理设备300发送流(图像数据和音频数据)的情况的例子。在这种情况下,假设执行向信息处理设备300的基于流的输出。
首先,控制单元240向信息处理设备300发送模式表请求(步骤S901)。随后,控制单元240确定是否从信息处理设备300接收到命令信息(步骤S902)。当没有接收到命令信息时,连续执行监视。当尽管等待了给定的时间也无法接收到命令信息时,该处理可以由于超时而结束。例如,在Wi-Fi认证的Miracast中,根据情况设置从5秒到9秒的超时。
当从信息处理设备300接收到命令信息时(步骤S902),控制单元240向信息处理设备300发送表示基于接收到的命令信息设置模式的模式设置信息(步骤S903)。
随后,控制单元240基于接收到的命令信息来设置模式(步骤S904)。当用于增加分辨率的改变请求包括在命令信息中时,控制单元240响应于该改变请求而设置图像和音频的分辨率。当用于降低分辨率的改变请求包括在命令信息中时,控制单元240响应于该改变请求而设置图像的分辨率和音频的音频质量。
随后,控制单元240根据该设置执行将流发送到信息处理设备300的发送处理(步骤S905)。
随后,控制单元240确定是否设置了低功耗模式(步骤S906)。当未设置低功耗模式时(即,正常功耗模式被设置),处理前进到步骤S911。相反,当设置了低功耗模式时(步骤S906),控制单元240休眠给定的时间(步骤S907)。
随后,控制单元240向信息处理设备300发送查询消息(步骤S908)。随后,控制单元240确定是否从信息处理设备300接收到响应消息(步骤S909)。当没有接收到响应消息时,持续地执行监视。当尽管等待了给定的时间也无法接收到响应消息时,该处理可以由于超时而结束。例如,在Wi-Fi认证的Miracast中,根据情况设置从5秒到9秒的超时。
当从信息处理设备300接收到响应消息时(步骤S909),控制单元240确定改变请求是否包括在响应消息中(步骤S910)。当改变请求包括在响应消息中时(步骤S910),处理返回到步骤S901。
当改变请求不包括在响应消息中时(步骤S910),控制单元240确定是否接收到改变请求(步骤S911)。当接收到改变请求时(步骤S911),处理返回到步骤S901。相反,当未接收到改变请求时(步骤S911),控制单元240确定是否执行了发送停止操作(步骤S912)。当执行了发送停止操作时(步骤S912),数据发送处理的操作结束。相反,当未执行发送停止操作时(步骤S912),处理返回到步骤S905。
[信息处理设备(源设备)的操作例]
图13是示出由根据本技术的第一实施例的信息处理设备300执行的数据传输速度控制处理的处理过程的例子的流程图。图13示出了当信息处理设备300接收到流(图像数据和音频数据)时决定与源设备相关的设置内容(例如,分辨率和功耗模式)的例子。
例如,信息处理设备300的控制单元370可以根据用于设置主图像的用户信息或信息处理设备300与每个源设备之间的链路无线电波传播环境来决定待使用的分辨率和频率信道。
例如,假设在图5a所示的状态下执行选择图像12的用户操作的情况。在这种情况下,期望增加图像12的分辨率并减小图像11的分辨率。另外,期望根据时间的经过并基于每个源设备的链路无线电波传播环境来选择图像11和12的最佳分辨率。
例如,信息处理设备300可以在使与对应的吞吐量对应的数据流到多个频率信道时理解无线电波传播特性。例如,信息处理设备300保持表来理解多个频率信道中的每一个的理想吞吐量。然后,信息处理设备300可以基于同时使用的源设备的数量和PER来理解待使用的频率信道的可用数据传输速度,并为每个频率信道选择最佳频率信道。
例如,控制单元370从管理信息保持单元390获取管理信息,并从用户信息获取单元360获取用户信息(步骤S921)。随后,控制单元370基于所获取的管理信息和用户信息决定输出形式(步骤S922)。基于所决定的输出形式,与从多个源设备中的每一个发送来的两个流对应的图像被显示在显示单元351上。
随后,控制单元370确定是否存在包括在管理信息中的PER小于阈值的源设备(步骤S923)。当存在包括在管理信息中的PER小于或等于阈值的源设备时(步骤S923),控制单元370决定用于增加源设备的分辨率的改变请求(步骤S924)。控制单元370执行控制,使得根据基于用户信息的输出形式而将高数据传输速度分配给主图像。例如,改变请求包括在待发送到该源设备的命令信息(例如,在图6中示出的命令信息)中。可以确定在源设备的分辨率增加之后的吞吐量是否小于阈值,并可以基于确定结果来控制流的速率。
当不存在包括在管理信息中的PER小于或等于阈值的源设备时(步骤S923),控制单元370基于管理信息确定每个源设备的吞吐量是否小于或等于阈值(步骤S925)。即,确定每条链路的吞吐量是否即使对于当前的频率信道也不存在问题(步骤S925)。
当每个源设备的吞吐量不小于或等于阈值时(步骤S925),处理返回到S921。相反,当每个源设备的吞吐量小于或等于阈值时(步骤S925),控制单元370基于管理信息确定是否存在对应于低功耗模式的源设备(步骤S926)。
当存在对应于低功耗模式的源设备时(步骤S926),控制单元370决定用于在对应于低功耗模式的源设备中设置低功耗模式的改变请求(步骤S928)。例如,改变请求包括在待发送到该源设备的命令信息(例如,在图6中示出的命令信息)中。
当不存在对应于低功耗模式的源设备时(步骤S926),控制单元370决定用于减小源设备(PER小于或等于阈值的源设备)的分辨率的改变请求(步骤S927)。例如,改变请求包括在待发送到该源设备的命令信息(例如,在图6中示出的命令信息)中。
确定是否执行了接收停止操作(步骤S929)。当执行了接收停止操作时,数据传输速度控制处理的操作结束。当未执行接收停止操作时,处理返回到步骤S921。当存在通过低功耗模式的设置而进入休眠状态的源设备时,连接到信息处理设备300的源设备的数量减小。在这种情况下,可以改变步骤S925中的吞吐量的阈值。在以这种方式改变了吞吐量的阈值之后,可以进一步执行对应于步骤S925的步骤。
以这种方式,能够实现如下控制协议:接收设备训练线路环境给定的时间并通知源设备可以利用其执行稳定的视频通信的分辨率。还可以实现如下控制协议:源设备在线路环境中执行训练给定的时间,并请求可以利用其执行稳定的视频通信的分辨率,并且接收设备对该请求作出响应。
以这种方式,信息处理设备300的控制单元370可以基于管理信息保持单元390的管理信息和由用户信息获取单元360获取的用户信息来执行从各源设备发送的两个流的传输控制(例如,数据传输速度控制)。
另外,可以执行控制使得从信息处理设备200和400中的每一个发送的两个流的总数据传输速度最小化。例如,总数据传输速度的最大允许值在接收侧信息处理设备300的控制单元370中设置。在控制单元370向信息处理设备200发送用于降低比特率的改变请求后,控制单元370从流接收单元330获取从信息处理设备200和400发送的两个流的比特率。随后,控制单元370计算所获取的两个流的总数据传输速度。随后,控制单元370在不大于所设置的最大允许值的范围内决定从信息处理设备400发送的流的比特率,并向信息处理设备400发送用于增加比特率的改变请求。当PER大从而尽管设置了最小比特率但仍然不能容纳于同一频率信道中时,可以使用不同的频率信道。当图像(主图像和子图像)被暂停给定的时间或更多时,只要用户不执行操作(例如,指点),图像数据就可以停止。
以这种方式,根据本技术的第一实施例,即使当接收设备接收从多个源设备发送的多个流时,也可以根据用户的操作、状况和意图来执行适当的流传输控制(例如,数据传输速度控制)。例如,能够根据用户的操作、状况和意图降低多个图像和音频流中的一些的数据传输速度并增加剩余的流的数据传输速度。
例如,当接收设备接收并显示多个流时,可以享受由用户及时设置的具有高质量的重要的图像和音频。对于另外的图像和音频,数据传输速度可以自动被调整到最佳频率信道、功耗和传输率。
在这里,对于保持在管理信息保持单元390中的管理信息,在Wi-Fi认证的Miracast中准备的命令可以被用于交换管理信息。在这种情况下,可以使用在Wi-Fi显示规范中定义的能力协商或能力再协商。在这里,作为能力协商或能力再协商,例如,可以例示RFC5939或Wi-Fi认证的Miracast规范。但是,能力协商或能力再协商不限于此,而是被定义为设备性能信息的互换。在图14至16中示出利用Wi-Fi认证的Miracast规范的命令的互换的通信例。
[利用Wi-Fi认证的Miracast规范命令进行互换的通信例]
图14至16是示出根据本技术第一实施例的源设备和接收设备之间的通信处理例子的序列图。图14至16示出了利用RTSP协议进行互换的通信例。源设备820对应于信息处理设备200和400,而接收设备830对应于信息处理设备300。
首先,将参考图14进行描述。例如,如由图14的虚线矩形840所表示的,可以使用从源设备发送到接收设备的“RTSP M3请求”(RTSP GET_PARAMETER请求)消息和响应于“RTSPM3请求”(RTSP GET_PARAMETER请求)消息而从接收设备发送到源设备的“RTSP M3响应”(RTSP GET_PARAMETER响应)消息。这种交换处理对应于例如图6中所示的处理(505至508)和图8中所示的处理(539至542)。另一方面,该消息可以适当地从源设备向接收设备发送。例如,可以省略“RTSP M3请求”(RTSP GET_PARAMETER请求)消息和“RTSP M3响应”(RTSPGET_PARAMETER响应)消息的互换,管理信息可以包括在从源设备向接收设备发送的消息中,管理信息可以从源设备发送到接收设备,并且接收设备可以选择信息并在管理信息保持单元390中保持信息。例如,当执行了内容保护设置时,在M3响应之后执行链路保护设置。因此,期望通过只发送M4或更高的消息而在确保一次设置的链路的保密能力的同时执行通信。
关于功耗模式的信息的互换可以通过利用RTSP协议的预定的消息来执行。例如,可以交换以下(1)至(3)的三种管理信息:
(1)“设置为待机模式,”
(2)“当源设备取消待机模式时或者当源设备取消接收设备的待机模式时,”及
(3)“当接收设备取消待机模式时或者当接收设备取消源设备的待机模式时。”
首先,将参考图15进行描述。例如,当使用在Wi-Fi认证的Miracast中准备的命令时,从源设备820发送到接收设备830的“RTSP M12请求”(RTSP SET_PARAMETER(具有WFD-standby))消息和响应于“RTSP M12请求”(RTSP SET_PARAMETER(具有WFD-standby))消息而从接收设备830发送到源设备820的“RTSP M12响应”(RTSP OK)消息可以在如上所述(1)“设定为待机模式,”的互换中使用。另一方面,同样的也适用于从接收设备830到源设备820的待机模式的设置。
接下来,将参考图16进行描述。例如,如上所述,(2)“当源设备取消待机模式时或者当源设备取消接收设备的待机模式时,”源设备820互换发送到接收设备830的“RTSP M5请求”(RTSP SET_PARAMETER(请求(wfd-trigger-method:PLAY))消息与响应于“RTSP M5请求”(RTSP SET_PARAMETER(请求((wfd-trigger-method:PLAY))消息而从接收设备830向源设备820发送的“RTSP M5响应”(RTSP OK)消息。接收设备830可以使用发送到源设备820的“RTSP M7请求”(RTSP PLAY请求)消息和响应于“RTSP M7请求”(RTSP PLAY请求)消息而从源设备820发送到接收设备830的“RTSP M7响应”(RTSP OK)消息。
例如,如上所述,(3)“当接收设备取消待机模式时或者当接收设备取消源设备的待机模式时,”接收设备830可以使用发送到源设备820的“RTSP M7请求”(RTSP PLAY请求)消息和响应于“RTSP M7请求”(RTSP PLAY请求)消息而从源设备820发送到接收设备830的“RTSP M7响应”(RTSP OK)消息。互换对应于例如图7中所示的处理(515至518)和图7中所示的处理(535至538)。
例如,在图9所示的处理(565至570)的互换中,可以使用从接收设备830发送到源设备820的“RTSP M12请求”(RTSP SET_PARAMETER(具有WFD-standby))消息和响应于“RTSPM12请求”(RTSP SET_PARAMETER(具有WFD-standby))消息而从源设备820发送到接收设备830的“RTSP M12响应”(RTSP OK)消息。
另外,例如,在图10中所示的处理(584至589)的互换中,可以使用从接收设备830发送到源设备820的“RTSP M7请求”(RTSP PLAY请求)消息和响应于“RTSP M7请求”(RTSPPLAY请求)消息而从源设备820发送到接收设备830的“RTSP M7响应”(RTSP OK)消息。
以这种方式,无线通信单元320可以通过Wi-Fi显示规范中定义的能力协商或能力再协商来执行能力信息的交换。例如,通过能力协商或能力再协商中的RTSP M3消息交换能力信息。
以这种方式,例如,信息处理设备300的无线通信单元320执行与源设备的通信,以交换关于信息处理设备300的能力信息与关于信息处理设备200的能力信息。信息处理设备200的无线通信单元220执行与信息处理设备300的通信,以交换关于信息处理设备200的能力信息与关于信息处理设备300的能力信息。在这种情况下,无线通信单元220和320可以通过能力协商或能力再协商交换能力信息。
信息处理设备300的控制单元370基于关于信息处理设备200的能力信息、关于与信息处理设备200的通信的无线电波传播测量信息以及信息处理设备300的使用来执行与信息处理设备200的流传输控制(例如,数据传输速度控制、可扩展性传输率控制、多接收分集设置控制以及内容保护设置控制)。流传输方法与本技术的实施例中不同,但是信息处理设备200的控制单元240还可以基于从信息处理设备300执行的控制来执行与信息处理设备300的流传输控制(例如,数据传输速度控制、可扩展性传输率控制、多接收分集设置控制以及内容保护设置控制),该从信息处理设备300执行的控制基于关于信息处理设备200的能力信息和关于与信息处理设备300的流的通信的无线电波传播测量信息。
信息处理设备300的控制单元370基于关于信息处理设备200的能力信息(例如,表示设备是否是移动设备的信息)来执行控制,使得在信息处理设备200中设置功耗模式。在这种情况下,控制单元370可以基于关于信息处理设备200的能力信息和用于管理信息处理设备200的管理信息来执行控制,使得在信息处理设备200中设置低功耗模式。信息处理设备200的控制单元240根据基于关于信息处理设备200的能力信息的从信息处理设备300执行的控制来设置功耗模式。在本技术的实施例中,已经描述了使用两个源设备的拓扑的例子,但是本技术的实施例不限于本技术的该实施例。例如,当设备的数量为2个或更多时,需要控制与设备的数量对应的数据传输速度控制,并且状态过渡是可观的。因此,控制是困难的,但是可以获得益处。还可以对应于连接两个或更多个源设备的拓扑。
<2.第二实施例>
在本技术的第二实施例中,将主要描述利用可扩展编解码器执行可扩展性传输率控制的例子。
在这里,将描述当障碍物位于源设备和接收设备之间时的源设备和接收设备之间的传输率控制的目标速率精度的粗糙度以及传输率控制方法。
[当障碍物位于源设备和接收设备之间时]
例如,将考虑有造成源设备和接收设备的连接环境的不稳定性的障碍物(例如,人)的情况。例如,当人阻挡源设备和接收设备时,尽管是暂时的但连接环境被瞬时中断。瞬时中断根据状况而有所不同。但是,例如,存在应用传输受影响的的问题。例如,当从源设备到接收设备的端至端延迟时间是大约几十毫秒时,存在瞬时中断时间影响应用传输的问题。
[传输率控制的目标速率精度的粗糙度]
近年来,主要在电视会议中,已开始使用可扩展编解的码器,以便从MCU(多点连接)向多个位置发送相同的图像和音频。当可扩展编解码器与正常编解码器比较时,编码器和解码器二者的硬件规模都增加。但是,鉴于多播使用,存在发送侧可以不考虑接收侧的显示能力或解码能力而执行发送的优点。接收侧可以依赖于接收能力自由地选择显示分辨率或时间可扩展性,从而所有的接收设备可以不必匹配相同的设置。
另外,可扩展编解码器被认为在传输率的高动态范围环境中是技术有效的。例如,可以通过在显示甚至可以利用无线可接收的分组生成的视频的同时,向编码器侧通知接收特性来缩减数据传输率。但是,在实际使用中,接收侧显示设备具有SD、HD或4K的分辨率。因此,在空间可扩展性或时间可扩展性中,难以有效地设置具有几Mbps的粒度的传输率。出于这个原因,一般设置具有诸如1/2、1/4或1/16的粒度的数据传输率的减少。在无线网络的单播环境中,存在需要在接收侧的丢失不引人注意的范围内调整信噪比(SNR)可扩展性和空间可扩展性或时间可扩展性的要求。
[传输率控制方法]
在这里,将考虑可扩展编解码器用在由IEEE802.11ad为代表的60GHz的无线网络系统上的情况。
例如,在使用IEEE802.11a/B/g/n的无线视频传输中,数据传输率的动态范围不大(例如,在视频传输中无分组丢失的情况下可允许的吞吐量的范围是1Mbps至20Mbps)并且在链路之间还存在无线电波干扰。因此,当形成网络时,主要执行控制使得通过缩减编码速率而尽可能不使用无线频带。
但是,当在60GHz使用无线网络时,数据传输率大于或等于最大值2Gbps。与2.4GHz频带或5GHz频带相比,链路之间的干扰减少,因为可以在波束成形环境中执行空间划分。即,减少了同一信道中存在并且由另一网络造成的干扰。例如,当以1Gbps的传输率使用1至2网络时,两个单元可以无干扰地相互使用对应于500Mbps的传输率。因此,不需要不必要地减小视频和音频数据传输率。因此,视频和音频数据可以以对应于500Mbps的速率被发送,并且接收侧的图像数据可以以能接收该图像数据的层的分辨率被显示。
另外,能够测量对应于500Mbps的错误率。例如,假设干扰波进入并且传输率突然减小到约1/10的情况。在这种情况下,当执行控制以瞬时减小速率使得没有错误发生时,通常从接收侧获得链路质量作为反馈信息并确定链路质量。但是,不能在传输率的突然降低中理解反馈信息,就像在干扰波中那样,并且,发送侧除了例如发送缓存量或发送分组的重传次数之外不能处理传输率的降低。出于这个原因,需要更快地理解无线电波传播环境。当干扰波消失并且链路质量变得更好时,期望增加直至现在缩减的视频和音频数据传输率而返回到高图像质量。但是,最初,由于传输率被缩减,因此不能理解传输率增加到什么程度。当在60GHz使用无线网络时,传输率高为1Gbps。因此,即使当执行500Mbps的图像传输时,剩余的500Mbps也可以返回到错误测量。即,在执行图像传输时可以假设对应于500Mbps的错误率。因此,在传输率差异大的链路环境的链路环境中,重要的是适当地执行视频和音频数据的传输率控制。相应地,在本技术的第二实施例中,将描述适当地执行传输率控制的例子。
[通信系统的配置例]
图17是示出根据本技术第二实施例的通信系统700的系统配置例的框图。
通信系统700的配置与图1中所示的通信系统100的配置相同。因此,相同的参考标号给予与图1中所示通信系统100的共同部分并且其描述将被部分地省略。
但是,图17与图1的区别在于两种不同的频率信道的无线电波到达范围由虚线椭圆701和702表示为信息处理设备300的无线电波到达范围(服务范围)。例如,第一频率信道被设置为60GHz并且第一频率信道的无线电波到达范围由椭圆701表示。第二频率信道被设置为2.4GHz并且第二频率信道的无线电波到达范围由椭圆702表示。
在这里,无线电波到达范围701意味着,例如信息处理设备200和400可以利用第一频率信道向信息处理设备300发送流的范围(服务范围)。无线电波到达范围702意味着,例如信息处理设备200和400可以利用第二频率信道向信息处理设备300发送流的范围(服务范围)。
图17示出了信息处理设备200是移动设备并且障碍物(例如,人)703位于信息处理设备200和300之间的情况的例子。在这里,将描述当信息处理设备300和400发送流时信息处理设备200和300执行连接处理的例子。
如上所述,信息处理设备200存在于无线电波到达范围701内。当障碍物703不存在时,可以执行与信息处理设备300的正常连接。但是,在图17中所示,当障碍物703存在于信息处理设备200和300之间时,信息处理设备200和300之间互换的无线电波可能被障碍物703吸收或从障碍物703反射。因此,尽管在无线电波到达范围701内存在,但仍然假设信息处理设备200和300之间的瞬时中断或者信息处理设备200和300之间数据传输率的显著下降。
在这里,当信息处理设备200和300之间的瞬时中断是暂时的时候,假设可以在60GHz由线路恢复机制等恢复连接的情况(以下简称为情况1)。作为连接恢复机制,例如,可以例示控制波束成形、波束跟踪等的无线电波的方向性的方法。另一方面,还假设障碍物703在所有方向都阻挡信息处理设备200的无线电波并且60GHz的线路持续被断开的情况(以下简称为情况2)。在情况2中,执行与无线电波到达范围701移动到无线电波到达范围702的情况相同的操作。另外,流传输的视频在情况1和情况2下都被干扰。
相应地,为了对应于图17中所示的连接环境,在情况2中优选地在两个频率信道之间使用服务区大的频率范围。例如,在本技术的第二实施例中,将描述在两个频率信道之间使用服务区大的第二频率信道(2.4GHz频带)的例子。
即,当由无线电波传播测量信息指定的通信质量下降并且需要限制流传输控制(例如,数据传输速度控制和可扩展性传输率控制)时,控制单元370可以基于无线电波传播测量信息和信息处理设备300的使用来执行控制使得所使用的频率信道被改变为具有更快的数据传输速度的频率信道。信息处理设备300的使用的例子包括显示单元351的显示形式和信息处理设备300的移动状态。假设信息处理设备300的使用包括瞬时中断发生在信息处理设备200和300之间的情况。当由无线电波传播测量信息指定的通信质量下降并且需要限制流传输控制(例如,数据传输速度控制和可扩展性传输率控制)时,控制单元370可以基于无线电波传播测量信息和信息处理设备300的使用来执行控制,使得所使用的频率信道被改变为具有更慢的数据传输速度的频率信道。例如,当由无线电波传播测量信息指定的通信质量下降并且需要限制流传输控制(例如,数据传输速度控制和可扩展性传输率控制)时,基于无线电波传播测量信息和信息处理设备300的使用,通过在使用第二频率信道时将频率信道改变为第一频率信道,对应地数据传输速度可以变得更快。相反,通过在使用第一频率信道时将频率信道改变为第二频率信道,对应地数据传输速度可以变得更慢。本技术的实施例不限于仅频率信道的切换,而是可以使用另一种方法。例如,通过改变带宽,能够执行流传输控制(例如,数据传输速度控制和可扩展性传输率控制)。例如,在802.11中,支持多个带宽,并且存在20MHz频带、40MHz频带、80MHz频带、160MHz频带等。当带宽增加时,数据传输速度变快。当由无线电波传播测量信息指定的通信质量下降并且需要限制流传输控制(例如,数据传输速度控制和可扩展性传输率控制)时,控制单元370可以执行控制使得带宽被放大或减小。以这种方式,通过基于信息处理设备300的使用和无线电波传播环境来综合地设置信息处理设备200的能力,能够提高整个系统的稳定性。
在情况1中,根据信息处理设备200的瞬时中断时间,连接可以继续而不改变信息处理设备200的频率信道,或者信息处理设备200的频率信道可以改变。作为是否继续信息处理设备200的连接的确定基准,例如,有控制无线电波的方向性的控制实验的数量。
在情况2中,当信息处理设备200从无线电波到达范围701移动到无线电波到达范围702时,用户可以被指示是断开信息处理设备200并提高另一链路的图像质量和音频质量、还是改变信息处理设备200的频率信道而不断开信息处理设备200。例如,通过使信息处理设备300显示用于指示是否断开信息处理设备200的弹出窗口并允许另一链路的图像质量和音频质量的增加,能够利用该弹出窗口指示用户。例如,当由信息处理设备300显示是否使信息处理设备200显示弹出窗口并且给出使信息处理设备200显示弹出窗口的指示时,可以使信息处理设备200显示弹出窗口。在这种情况下,信息处理设备200的用户可以给出指示。为确保更稳定的链路,期望在连接处理开始时选择具有比具有快速传输速度的通信方案慢的传输速度的通信方案并开始通信。
例如,当在弹出窗口上允许断开时,信息处理设备300执行停止与信息处理设备200的流传输的处理,直到链路无线电波传播状况得到改善为止。在这种情况下,保持在管理信息保持单元390中的关于信息处理设备200的管理信息被擦除。
例如,当在弹出窗口上不允许断开时,信息处理设备300执行改变信息处理设备200的频率信道的处理。
以这种方式,控制单元370可以执行控制,使得使显示单元351显示关于是否断开所使用的频率信道的显示信息(例如,弹出窗口)。当接收到表示不允许断开所使用的频率信道的用户操作时,控制单元370执行控制使得新改变频率信道。
例如,在利用信息处理设备400和300的链路传输流的情况下,需要执行处理使得另一链路的流传输不受影响。因此,期望在信息处理设备200的移动定时执行初步设置,而不是指示用户。在这种情况下,当链路被自动切换时,图像质量由于分辨率的改变而降低。因此,作为通知用户链路改变状态的方法,可以执行“2.4GHz”、“60GHz”等的显示。
在这里,还假设信息处理设备200在无线电波到达范围701和702之间频繁移动的操作环境。相应地,图22示出了以高速切换第一和第二频率信道的例子。
[图像压缩例]
接下来,将描述即使在编码速率的动态范围大的环境中也使分组丢失对用户不可见的图像压缩方法的例子。在本技术的第二实施例中,将作为例子描述利用可扩展编解码器的传输率控制。首先,将描述可扩展编解码器。
[空间可扩展性和SNR可扩展性的例子]
图18是用于描述用在根据本技术第二实施例的通信系统700中的空间可扩展性和SNR可扩展性的例子的图。
图18a是用于描述空间可扩展性的例子的图。具体而言,示出了要接受可扩展编码的三层L1、L2和L3。
层L1是基础层,而层L2和L3是增强层。层L2与层L1的空间分辨率之比为2:1。层L3与层L1的空间分辨率之比为4:1。即使当分辨率以这种方式相互不同时,也存在出现在层L1内部的预测单元B1中的运动也类似地出现在层L2内部的对应的预测单元B2中和层L3内部的对应的预测单元B3中的高可能性。这是在空间可扩展性中层之间的运动相关性。
图18b是用于描述SNR可扩展性的例子的图。具体而言,示出了要接受可扩展编码的三层L1、L2和L3。
层L1是基础层,而层L2和L3是增强层。层L1、L2和L3的空间分辨率相互相同。
但是,例如,层L1的最小量化尺度是25,并且编码流的比特率通过正交变换系数的量化被抑制为大约2Mbps。另一方面,例如,层L2的最小量化尺度是12,并且编码流的比特率大约为5Mbps。例如,层L3的最小量化尺度为0,并且编码流的比特率大约为10Mbps。即使当比特率以这种方式相互不同时,也存在出现在层L1内部的预测单元B1中的运动还类似地出现在层L2内部的对应的预测单元B2中和层L3内部的对应的预测单元B3中的高可能性。这是在SNR可扩展性中层之间的运动相关性。
[利用高效视频编码(SHVC)的可扩展视频编码扩展的流传输量的例子]
图19是示意性地示出利用用在根据本技术第二实施例的通信系统700中的SHVC的流传输量的图。
如图19中所示,对应于HD的高质量视频用高效视频编码(HEVC)进行图像压缩并假设等同于100Mbps的图像质量。例如,当使用空间可扩展性时,在SHVC中,图像质量用可扩展性进行编码,以对应于基础层的25Mbps并对应于增强层的100Mbps。
例如,当仅基础层的25Mbps的等同物可以被接收设备接收时,视频显示得以实现。另外,当增强层的100Mbps的等同物被接收时,更高质量得以实现。
当数据传输率从数据传输率控制的观点出发进一步被缩减时,可以通过使用时间可扩展性将数据传输率设置为1/2或1/4。
例如,假设原始图像是60fps并且允许至多30fps的应用的情况。在这种情况下,如图19中所示,对于具有HD 100Mbps的图像,可以利用空间可扩展性和时间可扩展性将数据传输率缩减至13Mbps(100Mbps×(1/2)×(1/4))。
[利用SNR可扩展性缩减数据传输率的例子]
图20是示意性地示出利用用在根据本技术第二实施例的通信系统700中的SNR可扩展性缩减数据传输率的例子的图。具体而言,将描述利用SNR可扩展性将数据传输率从1000Mbps缩减至125Mbps的例子。
在这里,假设图2和3中所示的无线通信单元220和320使用60GHz的情况。在这种情况下,作为HD 100Mbps的10倍的1000Mbps的数据传输率可以利用1/2时间可扩展性和1/4时间可扩展性缩减到500Mbps或250Mbps。例如,当由接收设备接收到的数据传输率大于或等于250Mbps时,视频不停止。因此,例如,接收侧不能在1000Mbps接收视频。但是,当接收侧可以在高达500Mbps接收视频时,能够输出接收设备的显示质量为500Mbps的高质量的视频。
假设如下情况:能够在高达500Mbps接收视频的接收设备向源设备通知数据传输率,并且源设备将SNR可扩展性的数据传输率降低至500Mbps。在这种情况下,SNR小于为1000Mbps的目标编码的视频的SNR,但是接收侧可以无缝地切换并再现没有fps的恶化的视频。
在图19和20中,已使用简单的数值以方便描述。但是,这些数值仅仅是例子并且同样的也可以适用于其它数值。在图20中,示出了数据传输率的缩减宽度被设置为两个阶段的例子,但同样的也可以适用于缩减宽度被设置为三个阶段的情况。例如,随着阶段的数量增加,就像在三个或更多个阶段中,最小数据传输率可以被缩减,从而数据传输率的动态范围可以变宽。另外,即使当传输率从低传输率返回到高传输率时,也是在500Mbps的数据传输率到1000Mbps的数据传输率执行通信,并理解接收到的来自信息处理设备的接收传输率。相应地,可以使分组丢失不可见,从而可以设置最佳的SNR。
[管理信息的获取例]
图21是示出包括在根据本技术的第二实施例的通信系统700中的设备之间的通信处理例子的序列图。图21示出了信息处理设备300获取关于信息处理设备200和400中的每一个的管理信息的例子。
图21中所示的处理(801至806)和处理(807至812)对应于图6中所示的处理(505至510)。
在图21中,示出了与本技术第一实施例相同的管理信息的获取例,但是可以根据另一方法获取关于每个信息处理设备的管理信息。
[信息处理设备(源设备)的操作例]
图22是示出由根据本技术第二实施例的信息处理设备300执行的频率信道设置处理的处理过程的例子的流程图。
图22示出了信息处理设备300与信息处理设备200执行链路(第一链路)连接,并与信息处理设备400执行链路(第二链路)连接的情况的例子。图22示出了当处理过程开始时利用第一链路中的第一频率信道执行内容传输和利用第二链路中的第二频率信道执行内容传输的例子。图22示出了如下例子:确定在两个频率信道这二者的数据传输速度中是否存在问题,并执行连接设置使得在意识到另一链路的数据传输速度状态时以高速度切换两个频率信道。为了方便,图22示出了通过将第一链路设置为60GHz并且将第二链路设置为2.4GHz来开始操作的例子。由于两个频率信道的数据传输速度被假设为10倍或更多,因此,为了图22中所示的例子的描述,在2.4GHz的数据传输率被假定为100Mbps,而在60GHz的数据传输率被假定为1Gbps。
首先,控制单元370获取关于第一源设备(信息处理设备200)的管理信息(步骤S951)。随后,控制单元370获取关于第二源设备(信息处理设备400)的管理信息(步骤S952)。每条管理信息被保持在管理信息保持单元390中。获取管理信息的方法在图21中示出。
随后,控制单元370考虑显示设置(显示面上的图像的显示位置、尺寸等)来决定链路(第一和第二链路)的数据传输率(步骤S953)。
可以利用图4所示的参数来决定链路(第一和第二链路)的数据传输率。例如,链路(第一和第二链路)的数据传输率可以被决定为考虑了主图像和子图像的面积的设置值。
在这里,将描述主图像与子图像的数据传输率之间的关系。例如,假设主图像的面积是子图像的面积的N倍的情况。在这种情况下,当使用60GHz时主图像的数据传输率可以被设置为1Gbps×(N/(N+1))。当使用2.4GHz时主图像的数据传输率可以被设置为100Mbps×(N/(N+1))。
当使用60GHz时子图像的数据传输率可以被设置为1Gbps×(1/(N+1))。当使用2.4GHz时子图像的数据传输率可以被设置为100Mbps×(1/(N+1))。
随后,控制单元370确定连接到信息处理设备300的每个源设备是否不稳定(步骤954)。在这里,源设备不稳定的事实意味着,例如,在显示单元351上显示的图像受到干扰。相反,当所有源设备都不稳定时(步骤S954),处理返回到步骤S951。
当任何源设备都不稳定时(步骤S954),执行基于不稳定的源设备(目标源设备)的链路的稳定性的确定(步骤S955)。例如,控制单元370确定源设备的PER是否大于或等于阈值(步骤S955)。当源设备的PER小于阈值时(步骤S955),源的链路可以被确定为是稳定的。因此,频率信道设置处理的操作结束。
在这个例子中,已经描述了当链路的稳定性被确定时PER被用作指标的例子,但也可以使用另一指标。例如,可以利用BER、RSSI、PER、分组重发的次数、吞吐量、丢帧、SIR等作为指标来确定链路的稳定性。可以确定由接收侧接收的分组延迟,并且关于分组延迟的信息可以被用作无线电波传播测量信息。分组延迟充当与无线电波传播相关的一个指标,因为例如在错误发生时,延迟发生在通过层2中的重发处理向接收侧的发送中。分组延迟充当例如表示多个设备共享无线频带的无线系统中链路特性在何处恶化的指标。
当源设备的PER大于或等于阈值时(步骤S955),控制单元370确认不稳定的链路(步骤S956)。即,控制单元370确定源设备是否是第一源设备(步骤S956)。然后,理解与当前被源设备使用的频率信道不同的频率信道的空状况(步骤S957和S958)。
例如,当源设备是第二源设备时(步骤S956),理解与当前被第二源设备使用的频率信道不同的频率信道的空状况(步骤S957)。当源设备是第一源设备时(步骤S956),理解与当前被第一源设备使用的频率信道不同的频率信道的空状况(步骤S958)。
在这里,图22示出了主图像和子图像具有相同面积的情况的例子(其中,N=1)。示出了在第一源中频率信道为60GHz且数据传输率为1Gbps并且在第二源中频率信道为2.4GHz且源的数据传输率为100Mbps的例子。
例如,当第二源被改变时(步骤S956),第一链路的频率信道维持在60GHz并且数据传输率从1Gbps降到500Mbps(步骤S957)。第二链路的频率信道从2.4GHz改变为60GHz并且数据传输率从100Mbps改变为500Mbps(步骤S957)。以这种方式,当第二链路的频率信道从2.4GHz改变为60GHz时,两条链路(第一链路和第二链路)对于60GHz是必需的。在这里,例如,假设60GHz的最大数据传输率是1Gbps并且主图像和子图像的面积相同的情况。在这种情况下,对于主图像和子图像需要相同的传输速度。在这种情况下,为了利用两条链路(第一链路和第二链路)执行传输,需要设置500Mbps(1Gbps/2)作为数据传输率。因此,当第二链路的频率信道从2.4GHz改变为60GHz时,数据传输率从100Mbps改变为500Mbps(步骤S957)。
例如,当第一源改变时(步骤S956),第一链路的频率信道从60GHz改变为2.4GHz并且数据传输速度从1Gbps降到50Mbps(步骤S958)。对于第二链路,频率信道维持在2.4GHz并且数据传输率从100Mbps降到50Mbps(步骤S958)。当第二链路的频率信道维持在2.4GHz时,将数据传输率从100Mbps降到500Mbps的原因与第二链路的频率信道从2.4GHz改变为60GHz(步骤S957)的情况的原因相同。
以这种方式,在理解了数据传输速度的空状况(步骤S957和S958)之后,控制单元370对于不稳定的链路向目标源设备通知关于频率信道和编码速率的改变信息(步骤S959)。
随后,控制单元370确定是否从发送改变信息的目标源设备接收到设置请求(步骤S960)。当没有接收到设置请求时,继续执行监视。相反,当接收到设置请求时(步骤S960),控制单元370向目标源设备发送对设置请求的响应(步骤S961)。在对设置请求的响应被发送之后,源设备设置编码速率。即,对于待使用的每个频率信道,目标源设备在考虑了连接到网络的设备的数量的情况下设置编码速率以控制图像或音频的流生成。
本技术的实施例不限于此。例如,可以生成在60GHz和2.4GHz的单独吞吐量的流,并且可以在被同步的同时执行切换。例如,可以通过使用低延迟编解码器来进行这种处理。
随后,控制单元370根据通信状况参照关于是60GHz的特性更好还是2.4GHz的特性更好的每条信息来决定待使用的编码速率或频率信道(步骤S962)。在这里,每条被参考的信息是例如诸如PER、数据传输率和稳定性的信息或图4中所示的管理信息。
随后,控制单元370选择60GHz和2.4GHz之间的稳定的频率信道(步骤S963)。然后,控制单元370利用所选择的频率信道向目标源设备(例如,信息处理设备200)发送用于发送流的请求(步骤S963)。相应地,稳定的链路被选择并且稳定的流通信可以被执行。
可以根据源设备是否是移动设备而改变每个阈值。相应地,当源设备是移动设备时,切换被配置为容易地发生并且稳定化得以实现,从而可以实现传输。
在这里,当目标在于改变频率信道的源设备(目标源设备)是移动设备并且两个频率信道同时被使用时,电池容易消耗。相应地,信息处理设备200可以基于从信息处理设备300接收的信息执行确定。为了执行确定,需要在来自信息处理设备300的信息(例如,在图6中示出的命令信息)中包括关于连接到信息处理设备300的所有源设备的链路的信息,并且信息处理设备200需要获取每条这种信息。然后,信息处理设备200可以基于关于以这种方式获取的所有源设备的信息来选择稳定的频率。信息处理设备200可以确定另一链路是否受影响。信息处理设备300可以预先被通知表示信息处理设备200是移动站的管理信息,并且信息处理设备300可以基于关于整个系统的流传输控制(例如,数据传输速度控制和可扩展性传输率控制)的信息确定流的传输稳定的频率信道。
以这种方式,信息处理设备200和300是能够利用多个频率信道执行无线通信的信息处理设备。信息处理设备300的控制单元370基于关于信息处理设备200的能力信息、无线电波传播测量信息和信息处理设备300的使用来执行控制,使得在信息处理设备200中从多个频率信道设置一个频率信道。信息处理设备300的控制单元370可以基于关于信息处理设备200的能力信息、使缓存待机时间自动固定(生存时间功能)并在固定时间之后从不稳定的链路传输缓存删除流数据的功能、通过重发次数等确定链路不稳定的功能以及信息处理设备的使用来执行控制,使得从多个频率信道更稳定地设置一个频率信道。在这种情况下,信息处理设备300的控制单元370可以基于通过在切换多个频率信道的同时测量来自信息处理设备200的流所获得的无线电波传播测量信息来执行控制,使得一个频率信道被设置。
以这种方式,在本技术的第二实施例中,将从多个源设备发送的图像聚集为一个的接收设备(例如,多视图监视器)可以适当地显示从源设备发送的图像。例如,能够关于具有大动态范围的数据传输率根据接收设备的显示形式或连接形式提供可扩展编解码器的目标速率,并执行传输率的粒度小的数据传输率控制。例如,能够利用SNR可扩展性、空间可扩展性和时间可扩展性执行数据传输率控制。
在本技术的第二实施例中,已经描述了第一频率信道被设置为60GHz并且第二频率信道被设置为2.4GHz以供使用的例子,但本技术不限于此。例如,第一频率信道可以被用作5GHz频带并且第二频率信道可以被用作2.4GHz频带。
在本技术的第二实施例中,已经描述了使用两种频率信道的例子,但本技术的实施例不限于此。例如,同样的也可以适用于使用两种不同的频率信道的情况(例如,LTE-A和2.4GHz或LTE-A和60GHz)。例如,同样的也可以适用于使用三种或更多种频率信道的情况。例如,同样的也可以适用于使用三种频率信道2.4GHz、5GHz和60GHz的信息处理设备。在本技术的第二实施例中,已经描述了相同的频率在第一和第二链路中使用的例子。但是,在2.4GHz、5GHz和60GHz,信息处理设备300可以具有接入点(AP)PCP或组所有者(GO:GroupOwner)功能,并且可以由信息处理设备300执行基于任一功能的操作。信息处理设备200和400可以操作为GO,并且信息处理设备300可以操作为客户端。
[源设备和接收设备之间的分组的互换例]
接下来,将参照附图详细描述源设备(发送侧信息处理设备)与接收设备(接收侧信息处理设备)之间的分组的互换例。
[信息处理设备(源设备)的配置例]
图23是示出根据本技术第二实施例的信息处理设备710的功能配置例的框图。信息处理设备710是源设备的例子并且对应于图17所示的信息处理设备200和400。在图23中,只示出了信息处理设备710的配置中的与数据发送相关的配置并且其它剩余配置没有示出并且将不进行描述。
图24是示意性地示出在由根据本技术第二实施例的信息处理设备710执行的发送处理中生成的分组的图。将具体地参考图23来描述分组。
信息处理设备710包括图像数据生成单元711、补充增强信息(SEI)生成单元712、网络抽象层(NAL)生成单元713、分组化化基本流(PES)生成单元714、传输流(TS)生成单元715、实时传输协议(RTP)生成单元716和天线718。这些单元由控制单元(其对应于图2中所示的控制单元240)控制。
信息处理设备710是获取由成像单元719生成的图像数据并利用无线通信发送图像数据的信息发送设备(源设备)的例子。成像单元719是例如对被摄体成像并生成图像数据的成像设备,并且是例如数字静态照相机或数字摄像机(例如,集成照相机的记录器)。在图23中,描述了成像单元719在信息处理设备710的外部提供的例子,但是成像单元719可以在信息处理设备710的内部提供。
图像数据生成单元711对从成像单元719供给的图像数据(具有高帧率的图像数据)执行各种图像处理,以生成作为发送目标的图像数据。例如,图像数据生成单元711根据高级视频编码(AVC)方案编码对从成像单元719供给的图像数据(具有高帧率的图像数据)进行编码。然后,图像数据生成单元711向NAL生成单元713供给编码图像数据(编码数据)。图像数据生成单元711向SEI生成单元712供给关于当前编码目标的控制信息。
SEI生成单元712生成SEI并将生成的SEI供给每个单元。例如,SEI生成单元712生成从图像数据生成单元711供给的控制信息、编码单位以及关于图像数据的发送指定(接收设备)的控制信息。例如,SEI生成单元712生成用于AVC方案的SEI并将生成的用于AVC方案的SEI供给NAL生成单元713。SEI生成单元712生成控制信息标记并将生成的控制信息标记供给TS生成单元715和RTP生成单元716。
NAL生成单元713向从图像数据生成单元711供给的图像数据(编码数据)、从SEI生成单元712供给的SEL等添加NAL头。即,NAL生成单元713生成压缩图像数据、SEI等的NAL单元。以这种方式,NAL生成单元713充当发送数据生成单元,从生成的NAL单元生成访问单元(AU)作为发送数据,并将发送数据供给PES生成单元714。由NAL生成单元713生成的NAL单元的例子在图24的顶部示出。
PES生成单元714对从NAL生成单元713供给的AU执行PES分组化并将通过PES分组化获得的PES分组供给TS生成单元715。在PES生成单元714中生成的PES分组的例子在从图24的上侧起第二个中示出。
TS生成单元715对包括从PES生成单元714供给的PES分组和从SEI生成单元712供给的显示控制信息标记的数据执行TS分组化,以生成TS分组。然后,TS生成单元715多路复用TS分组以生成TS,并将生成的TS供给RTP生成单元716。由TS生成单元715生成的TS分组的例子在从图24的上侧起第三个中示出。
RTP生成单元716生成从TS生成单元715供给的TS作为RTP分组,并将生成的RTP分组供给分组生成单元717。由RTP生成单元716生成的RTP分组的例子在图24的底部示出。
分组生成单元717添加UDP头或TCP头和互联网协议(IP)头,并生成无线分组(IEEE802.11分组)以执行无线传输。然后,分组生成单元717将生成的无线分组供给天线718。
分组生成单元717设置无线发送的分组的优先级。相应地,即使当无线无线电波环境中发生改变时,信息处理设备710也可以将具有高重要性的分组发送到另一信息处理设备(接收设备)。将参照图25详细描述设置优先级的方法。
天线718是充当发送单元的天线,并利用无线电波将从分组生成单元717供给的无线分组发送到另一信息处理设备(接收设备)。
[优先级竞争访问控制的例子]
图25是示出由根据本技术第二实施例的信息处理设备710执行的优先级竞争访问控制方法的例子的图。图25中所示的优先级竞争访问控制方案是在遵守IEEE802.11e的无线通信系统中的优先级竞争访问控制方案。优先级竞争访问控制方案被称为增强型分布式信道访问(EDCA)。
在EDCA中,根据在待发送的数据的访问类别(以下称为AC)中描述的优先级(访问类别0至7),在发送退避定时中产生差异。另外,在发送开始的仲裁帧间间隔(AIFS)的设置值中产生差异。当贯穿整个AIFS而没有开始另一通信时,数据可以被发送。即,具有高优先级的访问类别的数据利用短AIFS的设置发送,而具有低优先级的访问类别的数据利用长AIFS的设置发送。
当以这种方式执行发送时,发送具有低优先级的数据的信息处理设备由于在AIFS设置时间内具有高优先级的其它数据的通信而等待发送。即,实现了允许存储具有高发送优先级的数据的信息处理设备优先将数据发送到无线介质的访问控制方法。
图25示出了访问类别0具有最高优先级并且优先级被设置成直至访问类别7的例子。具有最高优先级的访问类别0的数据可以在AIFS[0]经过之后被发送。具有次最高优先级的访问类别1的数据可以在“AIFS[1]=AIFS[0]+退避1个单位”(对应于1个退避时隙)经过之后被发送。
在下文中,类似地,访问类别2的数据可以在“AIFS[2]=AIFS[0]+退避2个单位”经过之后被发送,并且访问类别3的数据可以在“AIFS[3]=AIFS[0]+退避3个单位”经过之后被发送。另外,访问类别4的数据可以在“AIFS[4]=AIFS[0]+退避4个单位”经过之后被发送,并且访问类别5的数据可以在“AIFS[5]=AIFS[0]+退避个5单位”经过之后被发送。此外,访问类别6的数据可以在“AIFS[6]=AIFS[0]+退避6个单位”经过之后被发送,并且访问类别7的数据可以在“AIFS[7]=AIFS[0]+退避7个单位”经过之后被发送。
[EDCA的优先级设置的例子]
接下来,将描述利用多个PES对由图像数据生成单元711或NAL生成单元713生成的NAL执行分组分类以及对每个分类设置EDCA的优先级的方法。
图26是示意性地示出当信息处理设备710执行根据本发明技术的第二实施例的发送处理时媒体数据的流的图。
图27是示意性地示出由根据本技术第二实施例的信息处理设备710发送的无线分组的生成例的图。具体而言,在图27的底部示出利用可扩展视频编码(SVC)生成的基础层的无线分组的生成例。在图27的中间,示出了从SVC生成的增强层的无线分组的生成例。在图27的顶部,示出了由频编解码器编码的音频数据的无线分组的生成例。
如图27中所示,从SVC生成的基础层和增强层以及由音频编解码器编码的音频数据被映射到不同的PES。PES生成单元714关于每个PES多路复用多个分组,并且TS生成单元715将多路复用的分组分割成TS分组。图27中示出的H.222是用于生成TS分组的标准,但也可以使用另一种生成方法。
RTP生成单元716对由TS生成单元715生成的TS分组执行RTP分组化并执行多路复用的处理。分组生成单元717形成RTP分组作为IP分组。分组生成单元717执行对IP分组的IP头的服务类型(TOS)字段写入优先级信息的处理。通过写入处理,在生成无线分组的处理中,分组生成单元717的EDCA功能可以被通知来自IP分组的IP头的TOS字段的优先级信息。相应地,在无线传输中,具有高优先级的分组以高概率被发送。
[无线分组的处理例]
接下来,将描述当由信息处理设备710生成的无线分组互换时的处理方法。
[根据每个PES的序列号的重新排列处理例]
图28是示意性地示出由根据本技术第二实施例的信息处理设备710生成的无线分组的互换例的图。发送侧信息处理设备(信息处理设备710)的处理内容被示意性地示出在图28的左侧,并且接收侧信息处理设备的处理内容被示意性地示出在图28的右侧。
图29是示出由根据本技术第二实施例的信息处理设备710生成的PES的帧格式的例子的图。
图28示出了如下例子:根据无线电波传播环境,在无线物理层处理的重发处理中的分组接收次序与在从信息处理设备710的RTP生成单元716输出时不同。
在接收侧信息处理设备的MAC层中,通常执行操作使得同一PES中的分组次序正常。另一方面,PES之间的分组次序即使在同一个流中也无法确保。因此,接收侧信息处理设备执行重新排列(按顺序号的重新排列处理(ReOrder(重新排序)处理)),使得PES之间的分组次序变为原始过程。需要执行重新排列处理(按顺序号重新排列),以便在PES的分配中向NAL生成单元713返回发送优先级。
在重新排列处理(按顺序号重新排列)中,可以利用RTP分组的顺序号字段中存在的编号或PES分组的DTS信息(例如,图29中所示的参考标号770内的信息)来确定次序。
[QoS传输中发送和接收的互换例(每个PES的缓存的例子)]
图30是示意性地示出由根据本技术第二实施例的信息处理设备710生成的无线分组的互换例的图。发送侧信息处理(信息处理设备710)的处理内容示意性地示出在图30左侧,并且接收侧信息处理设备的处理内容示意性地示出在图30右侧。
图28示出了执行一次重新排列处理(按顺序号的重新排列处理)的例子。但是,在图30中,重新排列处理(按顺序号的重新排列处理)不是执行一次,而示出分步执行的处理方法。
在这里,为了执行图30中所示的处理,接收侧信息处理设备具有针对每个PES的PES管理存储区域。以这种方式,通过包括针对每个PES的PES管理存储区域,当分组被写在存储区域上时,每个分组被写在每个对应的存储区域上。因此,可以返回PES之间的分组次序。因此,例如,即使当PES之间的分组次序被调换时,可以自然地返回PES之间的分组次序也。当执行从每个存储区的读取处理并向解码器发送分组时,期望从PES分组的DTS头(例如,图29中所示的参考标号770内的信息)确定读取次序或时间。
[发送和接收之间控制分组的互换例]
图31是示意性地示出由根据本技术第二实施例的信息处理设备710生成的无线分组的互换例的图。发送侧信息处理(信息处理设备710)的处理内容示意性地示出在图31的左侧,并且接收侧信息处理设备的处理内容示意性地示出在图31的右侧。
图31示出了如下例子:在移动到发送侧信息处理设备和接收侧信息处理设备之间的随后的PES之前从接收侧信息处理设备向发送侧信息处理设备发送接收确认(应答)分组的处理。
当接收侧信息处理设备执行解码PES分组的处理时,分组次序在相同的PES内返回,然后分组被接收。因此,在所有相同的PES分组被接收的定时,接收侧信息处理设备向发送侧信息处理设备发送接收确认(应答)分组。
接收接收确认(应答)分组的发送侧信息处理设备开始发送具有紧挨着的较低优先级的PES。发送侧信息处理设备预先保持具有最高优先级的PES给定的时间,以发送这个PES。即使当发送侧信息处理设备在给定时间过去之后不发送具有最低优先级的分组时,发送侧信息处理设备也从发送缓存中删除所有随后的分组,并从具有最高优先级的PES开始发送处理。
例如,在SVC方案的无线视频传输的情况下,给定的时间可以被定义为图像数据的基础层发送间隔。在基础层可以被发送的定时,可以执行停止增强层或音频数据的发送并优先基础层的发送的处理。
例如,在AVC方案的无线视频传输的情况下,给定的时间可以被定义为图像数据的I画面发送间隔。在I画面可以被发送的定时,可以执行停止P画面或B画面的发送并优先I画面的发送的处理。
<3.第三实施例>
在本技术的第三实施例中,将主要描述多接收分集设置方法、多接收分集改变方法和内容保护设置方法。
[在拓扑和多频带操作环境下的多接收分集设置方法和多接收分集改变方法]
例如,在毫米波段的通信(例如,60GHz)中,可以确保宽的带宽。因此,数据传输率对于传输可以相当快。由于波长短,因此可以减小所安装的设备(包括天线)的尺寸。
但是,在毫米波段的通信中,在降雨或大气中衰减大。相应地,存在用于使天线具有方向性并获得距离的技术,诸如波束形成。但是,在由于人的阻挡而使得链路不能被确保的环境中,不能确保作为毫米波段的特性的快速数据传输率。相应地,存在以接收侧信息处理设备包括多个无线通信单元(接收单元)的方式回避阻挡的方法。这种技术被称为多接收分集。
例如,假设多个图像(例如,主图像和子图像)显示在大规模监视器上的使用形式。以这种使用形式,监视器具有大屏幕。因此,通过使用上述技术(多接收分集),多个无线通信单元被安装的位置的间隔(安装间隔)可以被放大,因此能够进一步改进优点。
但是,即使在这种使用形式的情况下,也需要基于整个拓扑执行设置,诸如将多个源设备中的链路作为多接收分集的设置。因此,例如,在一个聚集监视器上显示多个源设备的系统中,重要的是如何设置多接收分集和如何改变多接收分集。
[在拓扑和多频带操作环境下设置内容保护的方法]
接下来,将考虑内容保护设置方法。例如,假设如下情况:添加以IEEE802.11ad为代表的60GHz无线网络系统并且在多频带操作环境下需要链路控制。在这种情况下,控制针对在接收设备中显示的多个图像设置显示位置和频带的操作的控制方法是重要的。在如在多接收分集中那样预先准备回避链路的拓扑中,用于设置内容保护的控制方法(还包括用于设置内容保护的切换方法)是重要的。
相应地,在本技术的第三实施例中,将描述对源设备和接收设备之间的通信执行适当的控制的例子。
[通信系统的配置例]
图32是示出根据本技术第三实施例的通信系统1000的系统配置例的框图。
通信系统1000包括信息处理设备1010、1020和1030。通信系统1000对应于图1中所示的通信系统100。例如,信息处理设备1010对应于作为接收设备的信息处理设备300,信息处理设备1020对应于作为源设备的信息处理设备200,并且信息处理设备1030对应于作为源设备的信息处理设备400。因此,下文将部分地省略与通信系统100共同的部分的描述。
在本技术的第三实施例中,将作为例子描述如图5中所示主图像的显示面积大于子图像的显示面积的情况。在这种情况下,由于主图像具有比子图像更大的分辨率,因此期望执行主图像的高质量视频传输并执行子图像的标准质量视频传输。
在本技术的第三实施例中,将描述使用能够同时利用三种频率信道2.4GHz、5GHz和60GHz中的多个频率信道来执行并行操作的信息处理设备。
例如,为了执行主图像的高质量视频传输,需要选择能够执行快速数据传输率的通信方案。相应地,在本技术的第三实施例中,将描述使用遵守以60GHz为代表的IEEE802.11ad标准的无线通信单元(例如,图32中所示的无线通信单元1011和1012)的例子。另一方面,当执行子图像的标准质量视频传输时,使用2.4GHz或5GHz的无线通信单元(例如,图32中所示的无线通信单元1013)。
在这里,由于可以在用于主图像的IEEE802.11ad中执行最大几Gbps的快速传输,因此作为分辨率不限于HD而可以执行4K传输,从而IEEE802.11ad适于高质量视频传输。但是,如上所述,IEEE802.11ad采用用于使天线具有方向性并获得距离的技术。因此,还假设由于人的阻挡而使得链路不能被确保的环境。相应地,在本技术的第三实施例中,将描述多接收分集被适当地在环境中设置的例子(适当地对应于拓扑的改变的例子)。
具体而言,假设信息处理设备1010包括三个无线通信单元1011至1013。如上所述,假设无线通信单元1011和1012是遵守以60GHz为代表的IEEE802.11ad标准的无线通信单元。假设无线通信单元1013为2.4GHz或5GHz的无线通信单元。
以这种方式,在本技术的第三实施例中,假设包括接收设备(信息处理设备1010)的两个无线接口(60GHz的无线通信单元1011和1012)。即,接收设备(信息处理设备1010)包括利用多接收分集执行接收的多个接收单元(60GHz的无线通信单元1011和1012)。当使用多接收分集时,使用多个接收单元(60GHz的无线通信单元1011和1012)。相应地,例如,即使当障碍物位于信息处理设备1010和无线通信单元1011之间(由虚线1015表示)并且链路断开发生时,也可以在信息处理设备1010与无线通信单元1012之间(由虚线1016表示)回避链路。即,能够防止信息处理设备1010与1020之间的视频传输被中断。
以这种方式,当利用多接收分集执行从信息处理设备1020到信息处理设备1010的发送时,信息处理设备1020拷贝与发送到无线通信单元1011的图像数据相同的图像数据并将分组发送到无线通信单元1012。
信息处理设备1010可以从由无线通信单元1012接收到的图像数据插入在由无线通信单元1011接收到的图像数据中丢失的分组。通过以这种方式插入分组,能够使接收到的数据尽可能多地接近由信息处理设备1020发送的图像数据。信息处理设备1010基于受到插值处理的图像数据生成主图像并使显示单元显示主图像。
信息处理设备1030可以连接到无线通信单元1013,以将图像数据发送到无线通信单元1013。在这种情况下,信息处理设备1010基于由无线通信单元1013接收到的图像数据生成子图像并在显示单元上显示子图像。
以这种方式,例如,当信息处理设备1020执行主图像向信息处理设备1010的高质量视频传输时,信息处理设备1010和1020之间的连接可以被设置为1对2(由虚线1015和1016表示)。例如,当信息处理设备1030执行子图像向信息处理设备1010的标准质量视频传输时,信息处理设备1010和1030之间的连接可以被设置为1对1(由虚线1018表示)。
[信息处理设备(源设备)的层之间的互换例]
图33至36是示意性地示出根据本技术第三实施例的信息处理设备1020的层之间的数据的互换例的图。图33至36示出了在包括在信息处理设备1020中的存储器1101至1104之间的数据的互换例。
假设应用存储器1101为包括在信息处理设备1020中的应用存储器。假设存储器1102和1103为包括在60GHz的无线通信单元220(图2中所示)的两个端口中的存储器。假设存储器1104为包括在2.4GHz或5GHz的无线通信单元220的端口中的存储器。
[源设备是组所有者(GO)并且接收设备是客户端的例子]
图33和34示出了源设备(信息处理设备1020)是GO并且接收设备(信息处理设备1010)是客户端的情况的例子。图33和34示出了通过改变主图像和子图像而改变拓扑的例子。以下要描述的每个例子即使在用AP代替GO并且用站代替客户端时也成立。图33和34示出了通过改变主图像和子图像而改变拓扑的例子。在图33中,使用在切换多接收分集时将分组发送到任何一个的切换控制方法。在图34中,使用如上所述拷贝发送分组的控制方法。首先,将描述切换控制方法。
[在连接到60GHz的两个无线通信单元的状态下执行链路切换控制的例子]
首先,将参照图33描述源设备(信息处理设备1020)在连接到接收设备(信息处理设备1010)的60GHz的两个无线通信单元的状态下执行链路切换控制的例子。
首先,假设源设备(信息处理设备1020)中的2.4GHz或5GHz的无线通信单元220发送数据(1111)。即,假设执行从源设备(信息处理设备1020)的无线通信单元220(2.4GHz或5GHz)到接收设备(信息处理设备1010)的无线通信单元1013(2.4GHz或5GHz)的数据发送。例如,如由图32的虚线1017所表示的,执行数据发送。在这种情况下,当接收设备(信息处理设备1010)的显示单元351上显示的子图像改变为主图像时,拓扑切换通知从接收设备(信息处理设备1010)发送到源设备(信息处理设备1020)。
以这种方式,当子图像改变为主图像并且拓扑切换通知从接收设备(信息处理设备1010)发送时,源设备(信息处理设备1020)中的60GHz的无线通信单元220开始数据发送。即,从源设备(信息处理设备1020)的无线通信单元220(60GHz)到接收设备(信息处理设备1010)的无线通信单元1011和1012(60GHz)的数据发送开始。在这种情况下,源设备(信息处理设备1020)在连接到接收设备(信息处理设备1010)的两个无线通信单元1011和1012(60GHz)的状态下,在顺序地切换链路的同时执行数据发送(1112和1113)。例如,在图32的虚线1015和1016切换的同时执行数据传输。
以这种方式,源设备(信息处理设备1020)可以在连接到接收设备(信息处理设备1010)的两个无线通信单元1011和1012(60GHz)的状态下执行切换控制,因此可以快速地执行链路切换。
还假设不能在接收设备(信息处理设备1010)的两个无线通信单元1011和1012(60GHz)中的任何一个中进行数据发送的情况(两个无线通信单元都被中断的情况)。在这种情况下,可以通过IP传输来执行到无线通信单元1013(2.4GHz或5GHz)的回退。
当显示在接收设备(信息处理设备1010)的显示单元351上的主图像改变为子图像时,拓扑切换通知从接收设备(信息处理设备1010)发送到源设备(信息处理设备1020)。
以这种方式,当主图像改变为子图像并且拓扑切换通知从接收设备(信息处理设备1010)发送时,源设备(信息处理设备1020)中的2.4GHz或5GHz的无线通信单元220开始数据发送。即,从源设备(信息处理设备1020)的无线通信单元220(2.4GHz或5GHz)到接收设备(信息处理设备1010)的无线通信单元1013(2.4GHz或5GHz)开始(1114)。例如,如由图32的虚线1017所表示的,执行数据发送。
[执行到60GHz的两个无线通信单元的同时发送的例子]
接下来,将参照图34描述源设备(信息处理设备1020)执行到接收设备(信息处理设备1010)的60GHz的两个无线通信单元的同时发送。
由于直到拓扑切换通知从接收设备(信息处理设备1010)到源设备(信息处理设备1020)的发送为止的处理(1115:拓扑切换通知)与图33中所示的例子相同,因此在这里将省略其描述。
以这种方式,当子图像改变为主图像并且拓扑切换通知从接收设备(信息处理设备1010)发送时,源设备(信息处理设备1020)中的60GHz的无线通信单元220开始数据发送。即,从源设备(信息处理设备1020)的无线通信单元220(60GHz)到接收设备(信息处理设备1010)的无线通信单元1011和1012(60GHz)的数据发送开始。在这种情况下,源设备(信息处理设备1020)执行到接收设备(信息处理设备1010)的两个无线通信单元1011和1012(60GHz)的数据的同时发送。例如,如在图32的虚线1015和1016中,同时执行数据发送。
以这种方式,源设备(信息处理设备1020)执行到接收设备(信息处理设备1010)的两个无线通信单元1011和1012(60GHz)的数据的同时发送,因此可以在不考虑传输特性的情况下执行发送处理。
当不能在接收设备(信息处理设备1010)的两个无线通信单元1011和1012(60GHz)中的任何一个中执行数据发送时,如在图33中所示的例子,可以通过IP传输来执行到无线通信单元1013的回退。
由于显示在接收设备(信息处理设备1010)的显示单元351上的主图像改变为子图像的情况与图33中所示的例子相同,因此在这里将省略其描述。为了确定链路之一或两者都被断开,可以提供确认发送缓存的累积剩余量的功能。可以更自动地控制发送缓存的待机时间,当已经经过给定的时间或更多时可以删除数据,并且可以基于删除的数量来确定断开或不稳定的链路。
[接收设备是GO并且源设备是客户端的例子]
图35和36示出了接收设备(信息处理设备1010)是GO并且源设备(信息处理设备1020)是客户端的例子。在这里,当接收设备是GO时,客户端的源设备不能连接到接收设备的两个无线通信单元。相应地,图35和36示出了当执行到60GHz的无线通信单元1011和1012的数据发送时执行链路切换控制的例子。
首先,将参照图35描述源设备(信息处理设备1020)执行到接收设备(信息处理设备1010)的60GHz的两个无线通信单元的数据发送的例子。
首先,假设源设备(信息处理设备1020)中的2.4GHz或5GHz的无线通信单元220发送数据(1121)。即,假设执行从源设备(信息处理设备1020)的无线通信单元220(2.4GHz或5GHz)到接收设备(信息处理设备1010)的无线通信单元1013(2.4GHz或5GHz)的数据发送。例如,如由图32的虚线1017所表示的,执行数据发送。在这种情况下,假设在接收设备(信息处理设备1010)的显示单元351上显示的子图像改变为主图像。
以这种方式,当子图像改变为主图像时,源设备(信息处理设备1020)中的60GHz的无线通信单元220开始数据发送(1122和1123)。即,从源设备(信息处理设备1020)的无线通信单元220(60GHz)到接收设备(信息处理设备1010)的无线通信单元1011和1012(60GHz)的数据发送开始(1122和1123)。在这种情况下,源设备(信息处理设备1020)执行数据发送,同时在接收设备(信息处理设备1010)的两个无线通信单元1011和1012之间通过60GHz的服务集标识符(SSID)来顺序地执行切换(1122和1123)。例如,在切换图32的虚线1015和1016的同时发送数据。
以这种方式,在图35所示的例子中,2.4GHz或5GHz或者60GHz的所有接收设备都是GO,因此能够在子图像改变为主图像时减少状态过渡。通过在切换成主图像后不改变使用频率并且不执行扫描,可以缩短GO的切换时间。
将假设在接收设备(信息处理设备1010)的显示单元351上显示的主图像改变为子图像的情况。以这种方式,当主图像改变为子图像时,源设备(信息处理设备1020)中的2.4GHz或5GHz的无线通信单元220开始数据发送(1124)。即,从源设备(信息处理设备1020)的无线通信单元220(2.4GHz或5GHz)向接收设备(信息处理设备1010)的无线通信单元1013(2.4GHz或5GHz)的数据发送开始(1124)。例如,如由图32的虚线1017所表示的,执行数据发送。
接下来,将参照图36描述源设备(信息处理设备1020)执行到接收设备(信息处理设备1010)的60GHz的两个无线通信单元的数据发送的例子。
由于直到从子图像到主图像的改变为止的处理(1125)都与图35中所示例子的处理相同,因此将省略其描述。
以这种方式,当子图像改变为主图像时,源设备(信息处理设备1020)中的60GHz的无线通信单元220开始数据发送(1126和1128)。即,从源设备(信息处理设备1020)的无线通信单元220(60GHz)到接收设备(信息处理设备1010)的无线通信单元1011和1012(60GHz)的数据发送开始(1126和1128)。在这里,在图36所示的例子中,假设执行在2.4GHz或5GHz和60GHz的透明连接。以这种方式,在60GHz的链路的切换期间,执行在2.4GHz或5GHz的回退(1127)。以这种方式,通过在60GHz的链路的切换期间执行到2.4GHz或5GHz的回退,即使GO的切换时间延长,图像也可以在接收设备(信息处理设备1010)的显示单元351上显示而不停止。
在图36所示的例子中,就像在图35所示的例子中那样,2.4GHz或5GHz或者60GHz的所有接收设备都是GO,因此能够在子图像改变为主图像时减少状态过渡。
由于在接收设备(信息处理设备1010)的显示单元351上显示的主图像改变为子图像的情况与图35中所示的例子相同,因此在这里将省略其描述。
以这种方式,在图33至36所示的例子中,已经作为例子描述了源设备和接收设备是GO和客户端的情况。但是,即使当源设备和接收设备是PCP和站(STA)时,也可以应用图33至36中所示的例子。可以执行从应用存储器1101到存储器1103和1104的同时发送。例如,如参考图20所描述的,当存在两条链路(从应用存储器1101到存储器1103的链路和从应用存储器1101到存储器1104的链路)时,传输率是不同的。因此,如图19中所示,可以通过将增强层分布到应用存储器1101至存储器1103并将基础层分布到从应用存储器1101至存储器1104来执行同时发送。当执行了同时发送时,可以在拷贝之后执行视频压缩处理,具有低压缩比的视频可以从应用存储器1101发送到存储器1103,并且具有高压缩比的视频可以从应用存储器1101发送到存储器1104。
[信息处理设备(源设备)的操作例]
图37是示出由根据本技术第三实施例的信息处理设备1020执行的数据发送处理的处理过程的例子的流程图。在处理过程中,将描述对应于图36的数据发送处理的例子。
首先,假设在信息处理设备1010(源设备)中显示的图像从子图像改变为主图像(步骤S2051)。在这种情况下,通过60GHz的链路开始操作,并且分组发送到IP#1L2存储器1102(步骤S2052)。随后,确定IP#1L2存储器1102的60GHz的链路是否不稳定(步骤S2053)。当链路稳定时,处理前进到步骤S2057。
当IP#1L2存储器1102的60GHz的链路不稳定时(步骤S2053),确认2.4GHz或5GHz的链路的吞吐量(步骤S2054)。随后,视频速率下降到这个吞吐量(步骤S2055)。随后,IP#1L2存储器1102的链路断开(步骤S2056)。
随后,进行到IP#2L2存储器1103的连接(步骤S2057)。随后,确定IP#2L2存储器1103的60GHz的链路是否不稳定(步骤S2058)。当链路不稳定时,处理返回到步骤S2052。即,再次进行连接并连续执行试验,直到任何60GHz的链路稳定。
当IP#2L2存储器1103的60GHz的链路稳定时(步骤S2058),分组被发送到IP#2L2存储器1103(步骤S2059)。随后,测量60GHz的链路的吞吐量(步骤S2060)。随后,数据传输从2.4GHz或5GHz改变为IP#2L2存储器1103的60GHz的链路(步骤S2061)。随后,视频速率增加到通过测量获得的吞吐量(步骤S2062)。
[信息处理设备(源设备)的操作例]
接下来,将描述信息处理设备的操作例。在这里,将描述接收设备(信息处理设备1010)是GO并且源设备(信息处理设备1020)是客户端的情况的例子。
在这里,作为在遵守以60GHz为代表的IEEE802.11ad标准的两个无线通信单元1011和1012之间执行的数据发送处理的操作例,将描述以下两类((a)和(b))操作例:
(a)设置对于每条链路不同的介质访问控制(MAC)地址的情况的操作例:MAC地址是用于识别利用无线通信执行通信的设备的标识例的例子;及
(b)MAC层管理实体(MLME)是单个并且无论链路的数量如何都只有一个MAC地址可见的情况的操作例。
首先,将参考图38来描述(a)设置对于每条链路不同的MAC地址的情况的操作例。将参照图41至44详细描述在这种情况下的内容保护的设置(链路内容保护设置)。
图38是示出由根据本技术第三实施例的信息处理设备1020执行的数据发送处理的处理过程的例子的流程图。图38中所示的处理过程是图12中所示的处理过程的修改例。因此,与图12中所示处理过程共同的处理过程的描述将被部分省略。在图38中所示的处理过程中,将如上所述那些描述在遵守以60GHz为代表的IEEE802.11ad标准的两个无线通信单元1011和1012之间执行的数据发送处理的例子。
第一处理(步骤S971至S975)对应于图12中所示的处理(步骤S901至S905)。在这里,信息处理设备1020与两个无线通信单元1011和1012执行数据发送处理。因此,信息处理设备1020与一个无线通信单元(例如,无线通信单元1011)执行处理(步骤S971至S975),随后与另一个无线通信单元(例如,无线通信单元1012)执行处理(步骤S971至S975)。
在步骤S975中,代替流发送而执行完成源设备(信息处理设备1020)与接收设备(信息处理设备1010)的两个无线通信单元1011和1012之间的视频和音频传输设置的处理。即,步骤S975指可以准备流传输的状态。
在这里,当源设备发送内容保护所需的源信息时,源设备请求WFD_content_protection作为M3(RTSP请求)。当源设备接收可以用RTSP响应对应于该请求的信息时,源设备执行高带宽数字内容保护系统(HDCP)2.2的加密。
当可以准备流发送时(步骤S975),信息处理设备1020与信息处理设备1010的无线通信单元1011执行与内容加密相关的密钥生成和密钥交换(步骤S976)。以这种方式,通过在源设备(信息处理设备1020)和接收设备的一个无线通信单元(无线通信单元1011)之间执行与内容加密相关的密钥生成和密钥交换,能够改善无线链路的保密能力。
随后,信息处理设备1020与信息处理设备1010的无线通信单元1011执行与内容加密相关的密钥生成和密钥交换(步骤S977)。以这种方式,通过在源设备(信息处理设备1020)和接收设备的另一个无线通信单元(无线通信单元1012)之间执行与内容加密相关的密钥生成和密钥交换,能够改善无线链路的保密能力。
以这种方式,在图32中所示的例子中,存在每条链路的往返行程时间(RTT)不同的可能性,对每条链路执行内容加密。作为执行内容加密的方案,可以使用HDCP、数字传输内容保护(DTCP)-IP等。
随后,信息处理设备1020执行对信息处理设备1010的两个无线通信单元1011和1012的多接收分集设置请求(步骤S978)。即,源设备向接收设备的两个无线通信单元发送多接收分集设置请求(步骤S978)。
随后,信息处理设备1020确定是否从信息处理设备1010接收到对多接收分集设置请求的响应(步骤S979)。当没有接收到对多接收分集请求的响应时,持续地执行监视。
当信息处理设备1020从信息处理设备1010接收到对多接收分集设置请求的响应时(步骤S979),信息处理设备1020准备多接收分集设置。准备完成之后,信息处理设备1020向信息处理设备1010的两个无线通信单元1011和1012发送多接收分集设置模式的设置结束请求(步骤S980)。
随后,信息处理设备1020确定是否从信息处理设备1010接收到对多接收分集设置模式的设置结束请求的响应(步骤S981)。当没有接收到对多接收分集设置模式的设置结束请求的响应时,持续地执行监视。
当从接收设备接收到对多接收分集设置模式的设置结束请求的响应时(步骤S981),可以确定多接收分集设置在源设备和接收设备之间结束。因此,信息处理设备1020拷贝用于多接收分集的图像数据和音频数据,并开始发送分组(步骤S982)。即,信息处理设备1020向信息处理设备1010的无线通信单元1011和1012发送相同数据(图像数据和音频数据)的分组(步骤S982)。
在这里,假设在数据发送处理期间发生拓扑的改变的情况(例如,中间信道的源设备改变的情况)。以这种方式,当发生拓扑的改变时(步骤S983),发生源设备和接收设备之间频率信道的改变以及多接收分集设置拓扑的改变,从而处理返回到步骤S974(再协商处理)。相反,当没有发生拓扑的改变时(步骤S983),信息处理设备1020确定是否执行发送停止操作(步骤S984)。当执行了发送停止操作时(步骤S984),数据发送处理的操作结束。相反,当未执行发送停止操作时(步骤S984),处理返回到步骤S983。
接下来,例将参照图39来描述(b)MAC层管理实体(MLME)是单个并且无论链路的数量如何都只有一个MAC地址可见的情况的操作例。
图39是示出由根据本技术第三实施例的信息处理设备1020执行的数据发送处理的处理过程的例子的流程图。图39中所示的处理过程是在图38中所示的处理过程的修改例。因此,相同的参考标号被给予与在图38中所示处理过程共同的处理过程,并且其描述将被部分省略。
当可以准备流发送时(步骤S975),信息处理设备1020通过对应于一个MAC地址的内容加密与信息处理设备1010执行密钥生成和密钥交换(步骤S985)。相应地,能够改善无线链路的保密能力。
随后,信息处理设备1020开始发送图像数据和音频数据的分组(步骤S986)。对于随后的处理(步骤S978至S982),作为比MLME低层的处理,执行与图38中所示的处理(步骤S978至S982)相同的处理。
[信息处理设备(接收设备)的操作例]
接下来,将描述接收侧接收设备(信息处理设备1010)的操作例。
图40是示出由根据本技术第三实施例的信息处理设备1010执行的数据接收处理的处理过程的例子的流程图。在图40所示的处理过程中,将描述如上所述利用遵守以60GHz为代表的IEEE802.11ad标准的两个无线通信单元1011和1012的数据接收处理的例子。
首先,当接收到模式表请求时(步骤S2001),信息处理设备1010向发送模式表请求的源设备发送命令信息(步骤S2002)。例如,该命令信息被发送到信息处理设备1020。
随后,信息处理设备1010确定是否从发送命令信息的源设备接收到模式设置信息(步骤S2003)。当未接收到模式设置信息时,持续地执行监视。
当信息处理设备1010从源设备接收到模式设置信息时(步骤S2003),信息处理设备1010结束关于与源设备的图像数据和音频数据的传输的设置。在这里,如上所述,信息处理设备1010利用两个无线通信单元1011和1012执行数据接收处理。因此,信息处理设备1010在一个无线通信单元(例如,无线通信单元1011)中执行处理(步骤S2001至S2003),并随后在另一个无线通信单元(例如,无线通信单元1012)中执行处理。
以这种方式,当通过处理(步骤S2001至S2003)在两个无线通信单元1011和1012中执行连接设置时,连接两个GO(两个无线通信单元1011和1012)的拓扑被构造。由于一个站连接到两个AP的功能存在于当前状态,因此假设在GO和客户端之间实现相同的功能。以这种方式,在拓扑的构造之后,信息处理设备1010利用两个无线通信单元1011和1012接收图像数据和音频数据(步骤S2004)。
在这里,当信息处理设备1010利用多接收分集与源设备执行通信时,与源设备执行与内容加密相关的密钥生成和密钥交换、关于多接收分集设置的信息的互换等等。例如,执行对应于图38中所示的步骤S976至S981的处理。但是,这些处理未在图40中示出并且其描述将被省略。
当信息处理设备1010接收图像数据和音频数据时(步骤S2004),信息处理设备1010对接收到的图像数据和音频数据执行插值处理(步骤S2005)。例如,利用由另一无线通信单元(例如,无线通信单元1012)接收的数据,信息处理设备1010对不能由一个无线通信单元(例如,无线通信单元1011)接收的图像数据和音频数据执行插值处理。重新排列处理(ReOrder重复分组删除)可以连同插值处理一起执行。例如,公共的接收缓存包括在两个无线通信单元1011和1012中,使得可以执行重新排列处理。
随后,信息处理设备1010基于接收到的数据获取链路特性信息(步骤S2006)。在这里,链路特性信息是例如存储在图4中所示的无线电波传播测量信息393中的每条信息。链路特性信息是例如PER、BER、分组重发的次数、吞吐量、帧丢失、SIR、RSSI或SINR(例如,代替SIR使用)。以这种方式,通过理解链路特性信息,当信息处理设备1010对源设备响应消息时,信息处理设备1010可以确定在两个无线通信单元1011和1012之间哪条路径是稳定的。
信息处理设备1010可以向源设备发送所获取的链路特性信息(步骤S2007)。即,信息处理设备1010可以通过比较所获取的链路特性信息来确保返回路径(步骤S2007)。
随后,信息处理设备1010基于接收到的图像数据和音频数据开始图像显示和音频输出(步骤S2008)。
以这种方式,信息处理设备1010的控制单元(对应于图3中所示的控制单元370)基于关于源设备的能力信息、关于与源设备的通信的无线电波传播测量信息以及信息处理设备1010的使用来执行控制,使得与源设备相关的流的多接收分集被设置。在这里,当源设备(例如,信息处理设备1020)利用多接收分集发送流时,优选尽管一条或多条不稳定的链路存在于多条链路中,但其它链路不受影响。相应地,源设备的控制单元(例如,信息处理设备1020的控制单元(对应于图2中所示的控制单元240))执行待发送的流的缓存管理。源设备的控制单元可以使缓存的待机时间自动地固定(生存时间函数)并在该固定时间之后从用于不稳定的链路的发送缓存删除流数据。源设备的控制单元可以在可以基于重发次数等确认链路变得不稳定的定时主动从缓存删除不稳定的链路发送缓存。相应地,能够在不影响不稳定的链路的情况下操作流的多接收分集。
当源设备利用多接收分集发送流时,信息处理设备1010的控制单元执行控制,使得执行同时向多个接收单元发送流的第一操作和在切换多个接收单元的同时顺序向每个接收单元发送流的第二操作中的某一个。当源设备利用多接收分集发送流时,信息处理设备1010的控制单元执行控制,使得执行在与多个接收单元相关的多条链路中的每一条中设置标识信息(例如,MAC地址)的第一操作和无论链路的数量如何都仅在一条标识信息中设置标识信息的第二操作中的某一个。信息处理设备1010的控制单元执行控制,使得在第一和第二操作之间设置不同的内容保护。
信息处理设备1020的控制单元(对应于图2中所示的控制单元240)基于从接收设备执行的控制来执行控制,使得与接收设备相关的流的多接收分集被设置,从接收设备执行的控制基于关于信息处理设备1020的能力信息、关于与接收设备的通信的无线电波传播测量信息和接收设备的使用。
在本技术的第三实施例中,已经描述了当主图像的显示面积比子图像的显示面积大时使用多接收分集的例子。但是,在其它情况下(除了显示面积的大小之外的情况),也可以使用多接收分集。例如,当由用户指定的显示图像被显示为高质量图像时,可以使用多接收分集。
在本技术的第三实施例中,已经描述了当使用多接收分集时使用60GHz的数据传输方案的例子,但是也可以使用其它数据传输方案。例如,由于以IEEE802.11ac为代表的快速数据传输方案也在5GHz存在,因此可以使用快速数据传输方案。除Wi-Fi之外的无线方案也可以使用。
在图38中,已经描述了在步骤S976和S977的处理中对每条链路单独执行内容加密的例子,但是链路不限于60GHz。例如,本技术的第三实施例也可以应用到为源设备和接收设备的一个无线通信单元设置60GHz并为源设备和接收设备的另一个无线通信单元设置2.4GHz或5GHz的情况。
在本技术的第三实施例中,已经描述了两种操作(a)和(b)被定义为用于两个无线通信单元1011和1012的处理方法并且在(a)和(b)二者中针对每条链路生成并发送相同的分组的例子。但是,本技术的实施例不限于分组的生成,而是不使用多条链路而选择具有良好特性的任何一条链路并可以利用该链路发送图像数据和音频数据。例如,在分组接收时,接收设备用诸如PER的特性信息对源设备进行响应,并且源设备可以选择具有良好特性的链路并发送分组。以这种方式,当源设备选择具有良好特性的链路并发送分组时,能够降低源设备和接收设备中的任一个中的功耗。
[多接收分集中的HDCP的例子]
在本技术的第三实施例中,如上所述,能够设置两条链路通过使用多接收分集而可连接的环境。相应地,以下将描述HDCP用在两条链路可连接的环境中的情况。
[信息处理设备(源设备)的操作例]
图41是示出由根据本技术第三实施例的信息处理设备1020执行的HDCP处理的处理过程的例子的流程图。在处理过程中,将描述对应于图38的HDCP处理的例子。
首先,针对每个HDCP保护的接口端口独立地执行认证协议(步骤S2011到S2015)。具体而言,确定从现在开始要使用的接口端口是否在规定数量内(步骤S2011)。即,确定跳数(发送次数)是否在规定数量内(步骤S2011)。
当接口端口在规定数量内时(步骤S2011),确定针对所有接口端口的认证处理是否结束(步骤S2012)。例如,当针对每个接口端口处理(步骤S2013至S2015)结束时,对端口的数量加1,并且确定接口端口是否在规定数量内。
相反,当针对所有的接口端口认证处理未结束时(步骤S2012),执行接口端口的认证和密钥交换(AKE)处理(步骤S2013)。将参照图43详细描述AKE。随后,执行接口端口的配对(步骤S2014)。将参照图43详细描述配对。随后,执行接口端口的局部性检查(步骤S2015)。将参照图44详细描述局部性检查。
当针对所有的接口端口认证处理结束时(步骤S2012),确定会话密钥是否可以公用化(步骤S2016)。即,确定会话密钥是否针对每个接口端口再现(步骤S2016)。例如,这个确定是基于与作为发送对象的内容关联的附带信息(元信息)执行的。
当会话密钥可以公用化时(步骤S2016),设置多播密钥(步骤S2017)。相应地,该多播密钥在源设备和接收设备之间互换。例如,当对于多播密钥不存在问题并且原始内容不被拷贝并且执行多接收分集时,情况被认为是良好的。
相反,当会话密钥不能公用化时(步骤S2016),设置单播密钥(步骤S2018)。即,当多播密钥不被允许时(步骤S2016),单独地生成单播密钥(步骤S2018)。相应地,该单播密钥在源设备和接收设备之间互换。
随后,确定针对所有的接口端口的认证处理(HDCP保护的接口端口的认证处理)是否结束(步骤S2019)。当针对所有的接口端口认证处理没有结束时(步骤S2019),执行接口端口的会话密钥交换(SKE)(步骤S2020)。将参照图44详细描述SKE。
相反,当针对所有的接口端口认证处理都结束时(步骤S2019),图像和音频传输开始(步骤S2021)。
随后,确定当前连接的链路是否不稳定(步骤S2022)。在当前连接的链路不稳定时(步骤S2022),该链路被改变到不同的链路(步骤S2023)。相反,在当前连接的链路不是不稳定时(步骤S2022),HDCP处理的操作结束。
[信息处理设备(源设备)的操作例]
接下来,将描述在两条链路可连接的环境中针对每条链路使内容保护方案(版本(version))公用化的例子。
图42是示出由根据本技术第三实施例的信息处理设备1020执行的HDCP处理的处理过程的例子的流程图。在处理过程中,将描述对应于图39的HDCP处理的例子。即,将描述与在多接收分集中相同的频带的内容保护相关的处理的例子。
首先,确定两条链路的HDCP版本是否一致(步骤S2031)。当版本一致时(步骤S2031),利用该版本执行加密。相反,当版本不一致时(步骤S2031),利用低版本执行加密。因此,版本被调整为两条链路的HDCP版本之间的低版本(步骤S2032)。
随后,确定两条链路的频率是否是相同的频率(步骤S2033)。例如,确定诸如2.4GHz、5GHz和60GHz波段的频带是否相同,并且具有相同频带的不同信道在这个处理中被调整。
当两条链路的频率是相同的频率时(步骤S2033),确定多个信道是否被同时连接(步骤S2034)。当多个信道被同时连接时(步骤S2034),设置多播密钥(步骤S2035)。相应地,多播密钥在源设备和接收设备之间互换。相反,当多个信道不同时连接时(步骤S2034),设置单播密钥(步骤S2036)。相应地,单播密钥在源设备和接收设备之间互换。
以这种方式,由于两条链路之间的内容保护的互换结束并且链路被加密,因此图像和音频传输开始(步骤S2037)。
随后,确定当前连接的链路是否不稳定(步骤S2038)。在当前连接的链路不稳定时(步骤S2038),该链路改变到不同的链路(步骤S2039)。相反,在当前连接的链路不是不稳定时(步骤S2038),HDCP处理的操作结束。
当两条链路的频率不是相同的频率(步骤S2033)并且不同的频带被用作另一链路时,确定内容保护是否可以由两条链路拷贝(步骤S2040)。例如,这个确定是基于与作为发送目标的内容关联的附带信息(元信息)来执行的。
在这里,例如,在本技术的第三实施例中,已经描述了分组被两条链路拷贝并被同时发送到无线通信单元的例子。但是,当频带不同时,可以使用在第一链路中测量出的局部性检查结果。因此,需要这样的处理。
当内容保护不能由两条链路拷贝时(步骤S2040),最近的版本被用在使用链路的内容保护中(步骤S2042)。相反,当内容保护可以被两条链路拷贝时(步骤S2040),在每个链路中设置单播密钥(步骤S2041和S2042)。在图42所示的处理过程中,例如,发送侧的设备密钥和接收侧的设备密钥可被设置为一个,但公用秘密密钥或会话密钥可以针对每个链路不同。
[与HDCP的链路加密相关的密钥交换例]
接下来,将描述与用于HDCP的链路加密的密钥交换相关的处理例。
图43和44是示出根据本技术第三实施例的源设备和接收设备之间执行的密钥交换处理的例子的序列图。
在这里,当执行链路加密时,在以下(1)至(4)处理中执行密钥交换:
(1)认证和密钥交换(AKE);
(2)配对;
(3)局部性检查;及
(4)会话密钥交换(SKE)。
相应地,将在下面参照图43和44描述根据上述(1)至(4)处理的密钥交换处理的例子。
[AKE和配对]
将参照图43描述AKE和配对。图43a示出了未存储128比特主密钥(km)的情况的例子,并且43b示出了存储了128比特主密钥(km)的情况的例子。
AKE是认证协议的第一步。即使在认证交换在之前完成时,HDCP发送器(设备A)也可以在任何时间发起认证。
HDCP发送器向HDCP接收器(设备B)发送新的64比特伪随机值(rtx),作为认证启动消息AKE_Init的一部分(751)。相应地,新HDCP会话的认证被启动。
随后,HDCP发送器从HDCP接收器接收包括REPEATER的AKE_Send_Cert和certrx值(752)。REPEATER表示连接的HDCP接收器是否为HDCP中继器(repeater)。
在这里,将参照图43a描述未存储128比特主密钥(km)的情况的例子。
HDCP发送器使用Kpubdcp验证证书上的签名。签名验证的失败意味着认证的失败并且HDCP发送器中断认证协议。HDCP发送器生成128比特主密钥(km)并向HDCP接收器发送AKE_No_Stored_km消息(753)。
随后,HDCP发送器从HDCP接收器接收包括64比特伪随机值的(rrx)的AKE_Send_rrx消息(754)。HDCP发送器从HDCP接收器接收包括256比特H'的AKE_Send_H_prime消息(755)。这个消息必须在Ekpub(km)(AKE_No_Stored_km)被发送到HDCP接收器之后1秒内被接收。
接下来,将参照图43b描述存储了128比特主密钥(km)的情况的例子。
HDCP发送器向HDCP接收器发送包括与HDCP接收器的接收器ID关联的128比特m和128比特Ekh(km)的AKE_Stored_km消息(757)。
随后,HDCP发送器从HDCP接收器接收包括64比特伪随机值(rrx)的AKE_Send_rrx消息(758)。HDCP发送器从HDCP接收器接收包括256比特H'的AKE_Send_H_prime消息(759)。这个消息必须在AKE_Stored_km被发送到HDCP接收器之后200ms内被接收。
当这个消息不能在200ms内被接收或者H和H'不一致时,认证被确定为失败并且认证协议被中断。
[配对]
为了加快AKE处理,配对必须在HDCP接收期与具有AKE的HDCP发送器并行进行。
[局部性检查]
将参照图44a来描述局部性检查。
通过生成64比特暂时随机数(nounce random)r_n并向下游的HDCP接收器发送临时64比特伪随机数r_n来启动HDCP发送器(761)。在这种情况下,HDCP发送器根据临时64比特伪随机数r_n的发送开始计时器。
HDCP接收器利用接收到的临时64比特伪随机数r_n计算“L'=HMAC-SHA 256”(r_n,k_d XOR r_rx)。然后,HDCP接收器向HDCP发送器发送LC_Send_L_prime消息(762)。
当HDCP发送器接收到LC_Send_L_prime消息时(762),HDCP发送器利用与右边的L'相同的公式计算L,并且将L与接收到的L'核对。当L和L'不一致时,HDCP发送器确定局部性验证失败。
[SKE]
将参照图44b来描述会话密钥交换(SKE)。
会话密钥交换(SKE)由HDCP发送器在局部性验证成功之后启动。
HDCP发送器HW生成128比特伪随机数的会话密钥k_S并且HW生成64比特伪随机数的r_iv。HDCP发送器利用滑动#6块HW生成128比特dkey_2作为ctr=2。HDCP发送器利用dkey_2加密k_S(E_dkey(k_S)=k_S XOR(dkey_2XOR r_rx))。
然后,HDCP发送器向HDCP接收器发送被加密为SKE_Send_Eks消息的一部分的r_iv和会话密钥E_dkey(k_S)。HDCP发送器向HDCP接收器发送加密的会话密钥并使得HDCP加密能够在加密的会话密钥的发送之后200ms后执行。
HDCP接收器利用滑动#6块生成128比特dkey_2作为ctr=2。HDCP接收器解码k_S(k_S=E_dkey(k_S)OR(dkey_2XOR r_rx))。
用会话密钥ks加密的内容开始从HDCP发送器发送到HDCP接收器(764)。
在这里,HDCP加密必须仅在AKE、局部性验证和SKE阶段结束的成功后成为可能。
HDCP发送器可以通过多个HDCP保护的接口端口对应于与HDCP接收器的同时连接。相同的会话密钥和riv可以贯穿所有HDCP保护的接口端口而被共享(3.8ks和rtx的唯一性)。
但是,假设HDCP发送器确保连接的HDCP接收器之间的不同km和rtx值。
以这种方式,信息处理设备1010的控制单元(对应于图3中所示的控制单元307)基于关于源设备的能力信息、关于与源设备的通信的无线电波传播测量信息以及信息处理设备1010的使用来执行控制,使得设置与源设备相关的流的内容保护。在这种情况下,当用在被用来利用多接收分集发送流的多个频率信道中的内容保护的版本不同时,信息处理设备1010的控制单元执行控制,使得设置与版本之间的低版本相关的内容保护。信息处理设备1010的控制单元(对应于图3中所示的控制单元307)可以基于关于源设备的管理信息(图4中所示)来执行控制,使得选择源设备的HDCP设置方法。
[通信系统的配置例]
图45是示出包括在根据本技术第三实施例的通信系统中的每个信息处理设备的功能配置例的框图。图45示出了充当发送侧信息处理设备(源设备)的信息处理设备720和充当接收侧信息处理设备(接收设备)的信息处理设备730。
信息处理设备720是当图23中所示的信息处理设备710的一部分被修改时的信息处理设备。因此,相同的参考标号给予与信息处理设备710共同的部分并且其描述将被省略。
包括在信息处理设备730中的单元(天线731至SEI生成单元744)对应于包括在信息处理设备720中的单元(天线728至图像数据生成单元711)。例如,包括在信息处理设备730中的生成单元(图像数据生成单元711至无线分组生成单元726)对应于包括在信息处理设备720中的解码单元(图像数据解码单元743至无线分组解码单元734)。因此,信息处理设备730的描述将被省略。
显示单元745是例如显示基于由图像数据解码单元743解码的图像数据的图像的显示设备。作为显示单元745,例如,可以使用诸如有机EL显示器、晶体LED显示器或LCD的显示面板。图45示出了显示单元745在信息处理设备730外部提供的例子,但显示单元745可以在信息处理设备730的内部提供。
图45示出了分组生成单元722对应于两个无线方案的例子(对2.4GHz、5GHz和60GHz设置一个IP地址的一个例子)。即,图45示出了除了对2.4GHz或5GHz设置一个IP地址并且对60GHz设置一个IP地址的例子之外的方案的例子。图45中所示的例子对应于图39中所示的例子。
信息处理设备720包括加密生成单元721、分组生成单元722以及天线727和728。这些单元由控制单元(对应于图2所示的控制单元240)进行控制。分组生成单元722包括UDP生成单元723、TCP生成单元724、IP生成单元725和无线分组生成单元726。两个天线727和728被连接到无线分组生成单元726。在这里,天线727被假设为对应于60GHz的天线并且天线728被假设为对应于2.4GHz或5GHz的天线。
以这种方式,即使当两个天线727和728都被包括在内时,至IP生成单元725的处理也可以被理解为一个块。无线分组生成单元726对应于两个频率信道。
这种配置被定义为IEEE802.11ad中的快速会话转移(FST)的透明功能。在比IP生成单元725更高的层中,可以在不理解两个天线727和728的特性的情况下执行无线视频传输。
无线分组生成单元726的切换确定的细节在IEEE802.11ad中未描述。因此,例如,可以基于PER、BER、分组重发的次数、吞吐量等来执行确定。例如,可以基于丢帧、SIR、RSSI等来执行确定,或者可以使用SINR代替SIR。
在这里,假设在任何一个无线线路被连接的环境中传输需要内容保护的图像数据的情况。在这里,为了描述,将假设经由天线727进行连接的情况。天线727和728的连接次序没有限制并且任一天线都可以首先被连接。当发送需要内容保护的图像数据时,可以连接任何无线线路。
如在图41中所示的例子中,加密生成单元721对经由天线727连接的无线线路仅执行一次加密处理。在加密处理中,完成发送侧信息处理设备720和接收侧信息处理设备730之间的密钥交换,从而可以发送利用该密钥加密的图像数据。在本技术的第三实施例中,即使当无线线路从天线727改变到天线728时,也可使用在密钥交换中改变的密钥,直到IP生成单元725的端口的断开。
另一方面,在无线分组生成单元726的处理中,比IP生成单元725更高的层可能不理解在物理层(第一层)中是使用了60GHz还是使用了2.4GHz或5GHz。如上所述,流传输频带在60GHz与2.4GHz或5GHz之间相差大约10倍。因此,当使用2.4GHz或5GHz时,需要增加图像数据的压缩比。相应地,在本技术的第三实施例中,执行控制使得无线分组生成单元726至图像数据生成单元711(或SEI生成单元712)被实时地通知信道改变信息或当前状态下的信道集合。即,信息处理设备720的控制单元(对应于图2中所示的控制单元240)执行控制,使得比与IP分组生成相关的层更高的层被通知关于多个频率信道中用来传输流的频率信道的信息。
例如,对于由SEI生成单元712生成的信息,尽管数据传输速度低,但也需要稳定性。因此,由SEI生成单元712生成的信息优选地在2.4GHz或5GHz发送,而不是在60GHz发送。相应地,无线分组生成单元726使用IP分组的IP头的服务类型(TOS)字段在具有高稳定性的频率发送由SEI生成单元712生成的信息。即,无线分组生成单元726执行在IP分组的IP头的TOS字段上写入频率信道设置信息的写入处理。通过该写入处理,可以在生成无线分组的处理中基于IP分组的IP头的TOS字段来设置向其反映较高层的意图的频率信道。即,信息处理设备720的控制单元(对应于图2中所示的控制单元240)执行控制,使得关于被用来传输流的频率信道的设置的设置信息被写在IP分组的IP头的TOP字段上。相应地,能够从传输层指定待使用的物理层。即,信息处理设备720的控制单元(对应于图2中所示的控制单元240)可以执行控制,使得待使用的物理层从传输层被指定。
本技术的实施例不限于图45中所示的例子。例如,在图45中,已经描述了只有两个天线连接到无线分组生成单元726的例子,但天线的数量不限于对应的频带。例如,当利用使用多输入多输出(MIMO)方案的IEEE802.11n/ac执行传输时,通过一个信道使用多个天线。除了两个频率信道以外,还可以搭载用于连接到公共线路的协议,诸如Bluetooth(蓝牙,注册商标)或LTE。
在图45中,已经描述了IP生成单元725设置一个IP地址的例子,但本技术的实施例不限于此。例如,可以设置一个MAC地址,或可以设置另一个固定的IP。
在图45中,已经描述了无线分组生成单元726使用IP头的TOS字段以利用具有高稳定性的频率信道发送由SEI生成单元712生成的信息的例子,但本技术的实施例不限于此。例如,即使当使用快速会话转移(FST)的透明功能时,也可以利用TCP分组或UDP分组来设置频率信道。可以根据连接端口设置频率信道或者可以在分组头的一部分中提供频率设置字段。
在本技术的第三实施例中,为了描述,图35和36被假设为执行内容保护处理的拓扑,但本技术的实施例不限于此。最初,如图33和34中所示,在内容保护中设置1:N(其中N是2或更大)的多接收环境中执行处理存在优点。例如,优选执行内容发送的信息处理设备具有AP或PCP功能或者GO功能的拓扑环境。例如,当发送侧信息处理设备1020充当GO时,无线通信单元1011和无线通信单元1012可以作为客户端连接。因此,这种拓扑是即使当使用非并行设备时也可以构造的拓扑。虽然依赖于设备,但是存在一个信息处理设备仅可以连接到一个GO的设备。因此,在这种情况下,在图33或34所示的拓扑中执行内容保护处理。
基于源设备或接收设备是否是移动设备,可以确定是在执行切换时设置发送(切换分集)还是设置多接收分集。即,可以确定是仅通过一个PHY减少功耗还是使用了多个PHY。当设备是移动设备时,可以在子图像时进行暂停。
以这种方式,在本技术的第三实施例中,根据连接形式,多接收分集可以被适当设置或切换,以改善需要高质量视频传输的链路中的鲁棒容限。以这种方式,通过控制设置或切换,能够稳定地发送和接收高质量视频。在就像在多接收分集中那样准备回避链路的拓扑中,内容保护可以被适当设置或切换。以这种方式,通过控制设置和切换,能够针对需要内容保护的视频执行改善了鲁棒容限的通信。
根据本技术的实施例,执行基于来自多个源设备的流的输出的接收设备可以通过执行流的分辨率的调整、发送停止、频率信道的改变等来减少不必要的功耗。相应地,能够对移动设备实现适当的通信。通过改善频率信道的频带利用效率,能够实现鲁棒特性得到改善的通信。
即,管理多条链路的接收设备可以通过执行调度来降低移动设备的电池消耗。整个系统可以被调度,使得能够使用多个频率信道的移动设备仅使用一个频率信道。即使在需要完全切换频率信道之间的差异的拓扑中,也可以根据设备信息(例如,设备是否是移动设备)促进切换从而稳定地实现传输。即使当频率信道之间存在差异时,每条信息(管理信息和用户信息)也可以适当地互换。在本技术的实施例中,已经描述了关于两个源设备给出两条链路的拓扑的例子,但本技术的实施例不限于此。例如,当设备的数量是2时,需要执行与对应于设备的数量的链路相关的流传输控制(例如,数据传输速度控制和可扩展性传输率控制),并且状态过渡很可观。因此,控制是困难的,但可以获得好处。例如,本技术的实施例也可以应用到连接了两个或更多个源设备的拓扑。
显示从多个源设备发送的图像的接收设备(例如,显示器)可以适当地显示从每个源设备发送的图像。例如,通过设置从每个源设备发送的图像的鲁棒容限(多接收分集),能偶适当地显示每个图像。例如,通过执行内容保护设置或者具有大动态范围的无线层或多频带操作中的流传输控制(例如,数据传输速度控制和可扩展性传输率控制),能够适当地显示每个图像。
即,例如,当多个源设备连接到一个聚集的监视器(例如,具有80英寸大屏幕的监视器或捆绑了多个小监视器的监视器)时,可以根据每个拓扑执行适当的设置。
本技术的实施例可以应用到具有无线通信功能的其它设备。例如,本技术的实施例可以应用到具有无线通信功能的成像设备(例如,数字静止照相机和数字摄像机(例如,集成照相机的录像机))。例如,本技术的实施例也可以应用到具有无线通信功能的显示设备(例如,电视机、投影仪和个人计算机),或便携式信息处理设备(例如,智能电话和平板终端)。
<4。应用例>
本公开内容的技术可以应用到各种产品。例如,信息处理设备200、300、400等可以被实现为移动终端(诸如智能电话、平板型个人计算机(PC)、笔记本PC、便携式游戏终端或数码照相机)、固定型终端(诸如电视接收机、打印机、数字扫描仪或网络存储器)或车载终端(诸如汽车导航设备)。此外,信息处理设备200、300、400等可以被实现为执行机器对机器(M2M)通信的终端(也称为机器型通信(MTC)终端),诸如智能电表、自动售货机、远程监视设备或销售点(POS)终端。此外,信息处理设备200、300、400等可以是搭载在这些终端中的无线通信模块(例如,在一个管芯中配置的集成电路模块)。
[4-1.第一应用例]
图48是示出本公开内容的技术可以应用的智能电话900的示意性配置的例子的框图。智能电话900包括处理器901、存储器902、储存器903、外部连接接口904、照相机906、传感器907、麦克风908、输入设备909、显示设备910、扬声器911、无线通信接口913、天线开关914、天线915、总线917、电池918和辅助控制器919。
处理器901可以是例如中央处理单元(CPU)或片上系统(SoC),并控制智能电话900的应用层和另外的层的功能。存储器902包括随机存取存储器(RAM)和只读存储器(ROM),并存储由处理器901执行的程序以及数据。储存器903可以包括诸如半导体存储器或硬盘的存储介质。外部连接接口904是用于将诸如存储卡或通用串行总线(USB)设备的外部设备连接到智能电话900的接口。
照相机906包括诸如电荷耦合器件(CCD)和互补金属氧化物半导体(CMOS)的图像传感器,并生成捕获的图像。传感器907可包括一组传感器,诸如测量传感器、陀螺仪传感器、地磁传感器和加速度传感器。麦克风908将输入到智能电话900的声音转换成音频信号。输入设备909包括例如被配置为检测显示设备910的屏幕上的触摸的触摸传感器、小键盘、键盘、按钮或开关,并接收来自用户的操作或信息输入。显示设备910包括诸如液晶显示器(LCD)和有机发光二极管(OLED)显示器的屏幕,并显示智能电话900的输出图像。扬声器911将从智能电话900输出的音频信号转换成声音。
无线通信接口913支持一种或多种无线LAN标准,诸如IEEE802.11a、11b、11g、11n、11ac和11ad,以执行无线通信。无线通信接口913可以在基础设施模式(infrastructuremode)下经由无线LAN接入点与另一设备进行通信。此外,无线通信接口913可以在自组织模式下直接与另一设备进行通信。无线通信接口913通常可以包括基带处理器、射频(RF)电路以及功率放大器。无线通信接口913可以是集成了存储通信控制程序的存储器、执行程序的处理器以及相关电路的单芯片模块。无线通信接口913除无线LAN方案之外可以支持其它类型的无线通信方案,诸如近场无线通信方案、接近性无线通信方案或蜂窝通信方案。天线开关914在包括在无线通信接口913中的多个电路(例如,用于不同的无线通信方案的电路)之间切换天线915的连接目的地。天线915具有单个或多个天线元件(例如,构成MIMO天线的多个天线元件),这些天线元件被无线通信接口913用于无线电信号的发送和接收。
应当指出的是,智能电话900不限于图46所示的例子,并且可以包括多个天线(例如,用于无线LAN的天线、用于接近性无线通信方案的天线等)。在这种情况下,天线开关914可以从智能电话900的结构中被省略。
总线917将处理器901、存储器902、储存器903、外部连接接口904、照相机906、传感器907、麦克风908、输入设备909,显示设备910、扬声器911、无线通信接口913以及辅助控制器919彼此连接。电池918经由馈线(在图中部分地作为虚线示出)将电力提供给图46中示出的智能电话900的块。辅助控制器919例如在休眠模式下操作智能电话900的最低限度的必要功能。
在图46中所示的智能电话900中,可以由无线通信接口913实现利用图2和3描述的无线通信单元220和320、控制单元240和370等。此外,可以由处理器901或辅助控制器919实现这些功能中至少一些。
[4-2.第二应用例]
图47是示出本公开内容的技术可以应用的汽车导航设备920的示意性配置的例子的框图。汽车导航设备920包括处理器921、存储器922、全球定位系统(GPS)模块924、传感器925、数据接口926、内容播放器927、存储介质接口928、输入设备929、显示设备930、扬声器931、无线通信接口933、天线开关934、天线935以及电池938。
处理器921可以是例如CPU或SoC,并控制汽车导航设备920的导航功能和另外的功能。存储器922包括RAM和ROM,并存储由处理器921执行的程序以及数据。
GPS模块924使用从GPS卫星接收的GPS信号来测量汽车导航设备920的位置(诸如纬度、经度和海拔)。传感器925可以包括一组传感器,诸如陀螺仪传感器、地磁传感器和空气压力传感器。数据接口926经由未示出的终端连接到例如车载网络941,并获取由车辆生成的数据,诸如车辆速度数据。
内容播放器927再现插入到存储介质接口928中的存储介质(诸如CD和DVD)中所存储的内容。输入设备929包括例如被配置为检测显示设备930的屏幕上的触摸的触摸传感器、按钮或开关,并接收来自用户的操作或信息输入。显示设备930包括诸如LCD或OLED显示器的屏幕,并显示导航功能的图像或再现的内容。扬声器931输出导航功能或者被再现的内容的声音。
无线通信接口933支持一种或多种无线LAN标准,诸如IEEE802.11a、11b、11g、11n、11ac和11ad,以执行无线通信。无线通信接口933可以在基础设施模式下经由无线LAN接入点与另一设备进行通信。此外,无线通信接口933可以在自组织模式下直接与另一设备进行通信。无线通信接口933通常可以包括基带处理器、RF电路和功率放大器。无线通信接口933可以是集成了存储通信控制程序的存储器、执行程序的处理器以及相关的电路的单芯片模块。无线通信接口933除无线LAN方案之外可以支持其它类型的无线通信方案,诸如近场无线通信方案、接近性无线通信方案或蜂窝通信方案。天线开关934在包括在无线通信接口933中的多个电路之间切换天线935的连接目的地。天线935具有单个或多个天线元件,这些天线元件被无线通信接口933用于无线电信号的发送和接收。
此外,汽车导航设备920可以包括多个天线,并不限于图47所示的例子。在那种情况下,天线开关934可以从汽车导航设备920的配置中被省略。
电池938经由馈线(在图中部分地作为虚线示出)将电力提供给图47中示出的汽车导航设备920的块。电池938累积从车辆供给的电力。
在图47中所示的汽车导航设备920中,可以通过无线通信接口933来实现已经参照图2和3描述的无线通信单元220和320、控制单元240和370等。也可以由处理器921实现至少一部分功能。
本公开内容的技术也可以被实现为包括汽车导航设备920的一个或多个块、车载网络941和车辆模块942的车载系统(或车辆)940。车辆模块942生成车辆数据,诸如车辆速度、引擎速度和故障信息,并将所生成的数据输出到车载网络941。
上述实施例是用于体现本技术的例子,并且实施例中的每个事项与权利要求中特定于公开内容的事项具有对应关系。同样地,实施例中的事项和权利要求中由相同名称表示的特定于公开内容的事实彼此具有对应关系。但是,本技术不限于实施例,并且在不背离本技术的精神的情况下,实施例的各种修改可以体现在本技术的范围内。
在上述实施例中描述的处理序列可以作为具有一系列序列的方法被处理,或者可以作为用于使计算机执行该一系列序列的程序以及存储该程序的记录介质来处理。作为记录介质,可以使用硬盘、CD(光盘)、MD(迷你盘)和DVD(数字多功能盘)、存储卡和蓝光盘(Blu-ray disc,注册商标)。
本说明书中所述的效果仅仅是例子,效果不受限并且可以有其它效果。
此外,本技术也可以如下配置。
(1)一种信息处理设备,通过使用无线通信从另一信息处理设备接收用于输出图像信息的流,该信息处理设备包括:
无线通信单元,被配置为与所述另一信息处理设备执行用于交换关于所述信息处理设备的能力信息和关于所述另一信息处理设备的能力信息的通信;及
控制单元,被配置为基于关于所述另一信息处理设备的能力信息和所述信息处理设备的使用来执行所述另一信息处理设备的流的可扩展性传输率控制。
(2)根据(1)所述的信息处理设备,
其中所述信息处理设备和所述另一信息处理设备是能够利用多个频率信道执行无线通信的信息处理设备,及
其中控制单元基于关于所述另一信息处理设备的能力信息、关于与所述另一信息处理设备的通信的无线电波传播测量信息以及所述信息处理设备的使用,来执行在所述多个频率信道中设置一个频率信道的控制。
(3)根据(2)所述的信息处理设备,其中控制单元基于通过在所述多个频率信道被切换时测量来自所述另一信息处理设备的流而获得的无线电波传播测量信息以及所述信息处理设备的使用来执行设置所述一个频率信道的控制。
(4)根据(2)所述的信息处理设备,其中,当由无线电波传播测量信息指定的通信质量降低从而需要限制可扩展性传输率控制时,控制单元基于无线电波传播测量信息和所述信息处理设备的使用来执行将待使用的频率信道改变为具有更快的数据传输速度的频率信道的控制。
(5)根据(2)所述的信息处理设备,其中,当由无线电波传播测量信息指定的通信质量降低从而需要限制可扩展性传输率控制时,控制单元基于无线电波传播测量信息和所述信息处理设备的使用来执行将待使用的频率信道改变为具有更慢的数据传输速度的频率信道的控制。
(6)根据(2)所述的信息处理设备,其中,在被使用的频率信道被切换到另一频率信道之前,控制单元执行限制可扩展性传输率的控制。
(7)根据(2)至(6)中任何一项所述的信息处理设备,其中,控制单元执行使关于是否断开被使用的频率信道的显示信息在显示单元上显示的控制。
(8)根据(2)至(7)中任何一项所述的信息处理设备,其中,当接收到表示不允许断开被使用的频率信道的用户操作时,控制单元执行切换频率信道的控制。
(9)根据(1)至(8)中任何一项所述的信息处理设备,其中无线通信单元通过在Wi-Fi显示规范中定义的能力协商或能力再协商来执行能力信息的交换。
(10)根据(9)所述的信息处理设备,其中能力信息是通过能力协商或能力再协商中的RTSP M3消息来交换的。
(11)根据(1)至(10)中任何一项所述的信息处理设备,
其中能力信息包括表示设备是否是移动设备的信息。
(12)根据(1)至(11)中任何一项所述的信息处理设备,
其中能力信息包括表示所述信息处理设备的使用是否被改变的信息。
(13)根据(1)至(12)中任何一项所述的信息处理设备,
其中能力信息包括表示是否包括多接收分集功能的信息。
(14)根据(1)至(13)中任何一项所述的信息处理设备,
其中控制单元以在设置低功耗模式时执行流的发送的停止或间歇发送的方式执行控制。
(15)根据(1)至(14)中任何一项所述的信息处理设备,其中控制单元使对传输率的改变请求和对传输质量的改变请求中的至少一个被包括在从所述信息处理设备向所述另一信息处理设备发送的命令中。
(16)根据(15)所述的信息处理设备,其中控制单元使用在HDCP会话被维持的状态下的命令作为所述命令。
(17)根据(1)至(16)中任何一项所述的信息处理设备,
其中控制单元以从传输层指定待使用的物理层的方式执行控制。
(18)根据(1)至(17)中任何一项所述的信息处理设备,
其中控制单元接收物理链路切换信息并以AVC/HEVC从I帧开始的方式执行控制。
(19)一种信息处理设备,通过使用无线通信向另一信息处理设备发送用于输出图像信息的流,该信息处理设备包括:
无线通信单元,被配置为与所述另一信息处理设备执行用于交换关于所述信息处理设备的能力信息和关于所述另一信息处理设备的能力信息的通信;及
控制单元,被配置为基于由所述另一信息处理设备执行的控制来执行所述另一信息处理设备的流的可扩展性传输率控制,由所述另一信息处理设备执行的控制基于关于所述信息处理设备的能力信息和所述另一信息处理设备的使用。
(20)一种信息处理方法,用于通过使用无线通信从另一信息处理设备接收用于输出图像信息的流,该信息处理方法包括:
无线通信步骤,与所述另一信息处理设备执行用于交换关于所述信息处理设备的能力信息和关于所述另一信息处理设备的能力信息的通信;及
控制步骤,基于关于所述另一信息处理设备的能力信息和所述信息处理设备的使用来执行所述另一信息处理设备的流的可扩展性传输率控制。
参考标号列表
100 通信系统
200 信息处理设备
210 天线
220 无线通信单元
230 控制信号接收单元
240 控制单元
250 图像和音频信号生成单元
260 图像和音频压缩单元
270 流发送单元
300 信息处理设备
310 天线
320 无线通信单元
330 流接收单元
340 图像和音频解压单元
350 图像和音频输出单元
351 显示单元
352 音频输出单元
360 用户信息获取单元
370 控制单元
380 控制信号发送单元
390 管理信息保持单元
400 信息处理设备
700 通信系统
710 信息处理设备
711 图像数据生成单元
712 SEI生成单元
713 NAL生成单元
714 PES生成单元
715 TS生成单元
716 RTP生成单元
717 分组生成单元
718 天线
719 成像单元
720 信息处理设备
721 加密生成单元
722 分组生成单元
723 UDP生成单元
724 TCP生成单元
725 IP生成单元
726 无线分组生成单元
727,728 天线
730 信息处理设备
731,732 天线
733 分组解码单元
734 无线分组解码单元
735 IP解码单元
736 UDP解码单元
737 TCP解码单元
738 RTP解码单元
739 TS解码单元
740 加密解码单元
741 PES解码单元
742 NAL解码单元
743 图像数据解码单元
744 SEI生成单元
745 显示单元
1000 通信系统
1010,1020,1030 信息处理设备
1011至1013 无线通信单元
1101 应用存储器
1102至1104 存储器

Claims (17)

1.一种信息处理设备,通过使用无线通信从另一信息处理设备接收用于输出图像信息的流,该信息处理设备包括:
无线通信单元,被配置为与所述另一信息处理设备执行用于交换关于所述信息处理设备的能力信息和关于所述另一信息处理设备的能力信息的通信,其中所述信息处理设备和所述另一信息处理设备是能够利用多个频率信道执行无线通信的信息处理设备;及
控制单元,被配置为基于关于所述另一信息处理设备的能力信息和所述信息处理设备的使用来执行可扩展性传输率控制,和基于关于所述另一信息处理设备的能力信息、关于与所述另一信息处理设备的通信的无线电波传播测量信息以及所述信息处理设备的使用,来执行在所述多个频率信道中设置一个频率信道的控制,通过所述可扩展性传输率控制来控制所述另一信息处理设备的流的空间、时间或信噪比SNR可扩展性编码,
其中,所述能力信息包括指示设备信息的信息,所述设备信息对源设备进行分类,以及
其中所述控制单元基于通过在所述多个频率信道被切换时测量来自所述另一信息处理设备的流而获得的无线电波传播测量信息以及所述信息处理设备的使用来执行设置所述一个频率信道的控制以从所述多个频率信道中选择并设置稳定的一个频率信道。
2.如权利要求1所述的信息处理设备,其中,当由无线电波传播测量信息指定的通信质量降低从而需要限制可扩展性传输率控制时,控制单元基于无线电波传播测量信息和所述信息处理设备的使用来执行将待使用的频率信道改变为具有更快的数据传输速度的频率信道的控制。
3.如权利要求1所述的信息处理设备,其中,当由无线电波传播测量信息指定的通信质量降低从而需要限制可扩展性传输率控制时,控制单元基于无线电波传播测量信息和所述信息处理设备的使用来执行将待使用的频率信道改变为具有更慢的数据传输速度的频率信道的控制。
4.如权利要求1所述的信息处理设备,其中,在被使用的频率信道被切换到另一频率信道之前,控制单元执行限制可扩展性传输率的控制。
5.如权利要求1所述的信息处理设备,其中,控制单元执行使关于是否断开被使用的频率信道的显示信息在显示单元上显示的控制。
6.如权利要求1所述的信息处理设备,其中,当接收到表示不允许断开被使用的频率信道的用户操作时,控制单元执行切换频率信道的控制。
7.如权利要求1所述的信息处理设备,其中无线通信单元通过在Wi-Fi显示规范中定义的能力协商或能力再协商来执行能力信息的交换。
8.如权利要求7所述的信息处理设备,其中能力信息是通过能力协商或能力再协商中的RTSP M3消息来交换的。
9.如权利要求1所述的信息处理设备,
其中能力信息还包括表示所述信息处理设备的使用是否被改变的信息。
10.如权利要求1所述的信息处理设备,
其中能力信息还包括表示是否包括多接收分集功能的信息。
11.如权利要求1所述的信息处理设备,
其中控制单元以在设置低功耗模式时执行流的发送的停止或间歇发送的方式执行控制。
12.如权利要求1所述的信息处理设备,其中控制单元使对传输率的改变请求和对传输质量的改变请求中的至少一个被包括在从所述信息处理设备向所述另一信息处理设备发送的命令中。
13.如权利要求12所述的信息处理设备,其中控制单元使用在HDCP会话被维持的状态下的命令作为所述命令。
14.如权利要求1所述的信息处理设备,
其中控制单元以从传输层指定待使用的物理层的方式执行控制。
15.如权利要求1所述的信息处理设备,
其中控制单元接收物理链路切换信息并以AVC/HEVC从I帧开始的方式执行控制。
16.一种信息处理设备,通过使用无线通信向另一信息处理设备发送用于输出图像信息的流,该信息处理设备包括:
无线通信单元,被配置为与所述另一信息处理设备执行用于交换关于所述信息处理设备的能力信息和关于所述另一信息处理设备的能力信息的通信,其中所述信息处理设备和所述另一信息处理设备是能够利用多个频率信道执行无线通信的信息处理设备;及
控制单元,被配置为基于由所述另一信息处理设备执行的、基于关于所述信息处理设备的能力信息和所述另一信息处理设备的使用的控制来执行可扩展性传输率控制和基于由所述另一信息处理设备执行的、基于关于所述信息处理设备的能力信息、关于与所述信息处理设备的通信的无线电波传播测量信息以及所述另一信息处理设备的使用的控制来执行在所述多个频率信道中设置一个频率信道的控制,通过所述可扩展性传输率控制来控制所述信息处理设备的流的空间、时间或信噪比SNR可扩展性编码,
其中,所述能力信息包括指示设备信息的信息,所述设备信息对源设备进行分类,以及
其中基于通过在所述多个频率信道被切换时由所述另一信息处理设备测量来自所述信息处理设备的流而获得的无线电波传播测量信息以及所述另一信息处理设备的使用来执行设置所述一个频率信道的控制以从所述多个频率信道中选择并设置稳定的一个频率信道。
17.一种信息处理方法,用于通过使用无线通信从另一信息处理设备接收用于输出图像信息的流,该信息处理方法包括:
无线通信步骤,与所述另一信息处理设备执行用于交换关于所述信息处理设备的能力信息和关于所述另一信息处理设备的能力信息的通信,其中所述信息处理设备和所述另一信息处理设备是能够利用多个频率信道执行无线通信的信息处理设备;及
控制步骤,基于关于所述另一信息处理设备的能力信息和所述信息处理设备的使用来执行可扩展性传输率控制,和基于关于所述另一信息处理设备的能力信息、关于与所述另一信息处理设备的通信的无线电波传播测量信息以及所述信息处理设备的使用,来执行在所述多个频率信道中设置一个频率信道的控制,通过所述可扩展性传输率控制来控制所述另一信息处理设备的流的空间、时间或信噪比SNR可扩展性编码,
其中,所述能力信息包括指示设备信息的信息,所述设备信息对源设备进行分类,以及
其中基于通过在所述多个频率信道被切换时测量来自所述另一信息处理设备的流而获得的无线电波传播测量信息以及所述信息处理设备的使用来执行设置所述一个频率信道的控制以从所述多个频率信道中选择并设置稳定的一个频率信道。
CN201480047302.2A 2013-09-05 2014-08-18 信息处理设备和信息处理方法 Expired - Fee Related CN105493508B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013184520A JP2015053565A (ja) 2013-09-05 2013-09-05 情報処理装置および情報処理方法
JP2013-184520 2013-09-05
PCT/JP2014/071570 WO2015033763A1 (ja) 2013-09-05 2014-08-18 情報処理装置および情報処理方法

Publications (2)

Publication Number Publication Date
CN105493508A CN105493508A (zh) 2016-04-13
CN105493508B true CN105493508B (zh) 2020-05-05

Family

ID=52628243

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480047302.2A Expired - Fee Related CN105493508B (zh) 2013-09-05 2014-08-18 信息处理设备和信息处理方法

Country Status (7)

Country Link
US (1) US10869069B2 (zh)
EP (1) EP3043566A4 (zh)
JP (1) JP2015053565A (zh)
CN (1) CN105493508B (zh)
SG (1) SG11201601366PA (zh)
TW (1) TWI654888B (zh)
WO (1) WO2015033763A1 (zh)

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10972536B2 (en) 2004-06-04 2021-04-06 Apple Inc. System and method for synchronizing media presentation at multiple recipients
JP6294062B2 (ja) * 2013-12-02 2018-03-14 三星電子株式会社Samsung Electronics Co.,Ltd. コンテンツ受信装置およびコンテンツ配信システム
JP6516480B2 (ja) * 2015-01-19 2019-05-22 キヤノン株式会社 表示装置、表示システム及び表示方法
US10979900B2 (en) 2015-03-17 2021-04-13 Sony Corporation Information processing device and information processing method
WO2016158772A1 (ja) * 2015-03-31 2016-10-06 シャープ株式会社 動画像配信システム、送信装置、端末装置、および動画像配信方法
WO2016159076A1 (ja) * 2015-03-31 2016-10-06 シャープ株式会社 動画像配信システム、および動画像配信方法
DE112015006294T5 (de) 2015-04-08 2017-11-30 Olympus Corporation Bildkommunikationssystem, Bildempfangsvorrichtung, Bildsendevorrichtung, Bildempfangsverfahren, Bildsendeverfahren und Programm
CN107432001B (zh) 2015-04-09 2021-05-11 奥林巴斯株式会社 图像通信系统、图像接收装置、图像发送装置、图像接收方法、图像发送方法和记录介质
JP6423523B2 (ja) * 2015-04-09 2018-11-14 オリンパス株式会社 画像通信システム、画像送信装置、画像送信方法、およびプログラム
JP2016220149A (ja) * 2015-05-25 2016-12-22 キヤノン株式会社 通信装置、制御方法、及びプログラム
CN107637112B (zh) * 2015-06-09 2022-02-22 索尼公司 服务器装置、通信设备和方法
US10228740B2 (en) * 2015-06-24 2019-03-12 Intel Corporation Sensor device and method
CN105100829B (zh) * 2015-06-29 2019-07-02 小米科技有限责任公司 视频内容截取方法及装置
KR102380322B1 (ko) * 2015-09-30 2022-03-30 삼성전자 주식회사 전자 장치 및 그의 무선 통신 수행 방법
US9756385B1 (en) * 2016-02-16 2017-09-05 Samsung Electronics Co., Ltd. Source device and method of transmitting content
GB2547442B (en) * 2016-02-17 2022-01-12 V Nova Int Ltd Physical adapter, signal processing equipment, methods and computer programs
CN106454981B (zh) * 2016-08-31 2019-10-11 天津远翥科技有限公司 一种随机跳频方法、通讯设备及随机跳频系统
US10349259B2 (en) 2016-09-23 2019-07-09 Apple Inc. Broadcasting a device state in a wireless communication network
US20180278947A1 (en) * 2017-03-24 2018-09-27 Seiko Epson Corporation Display device, communication device, method of controlling display device, and method of controlling communication device
US10292045B2 (en) * 2017-08-24 2019-05-14 Nanning Fugui Precision Industrial Co., Ltd. Information obtaining method and information obtaining device
US11297369B2 (en) * 2018-03-30 2022-04-05 Apple Inc. Remotely controlling playback devices
US10783929B2 (en) 2018-03-30 2020-09-22 Apple Inc. Managing playback groups
US10993274B2 (en) 2018-03-30 2021-04-27 Apple Inc. Pairing devices by proxy
WO2019239470A1 (ja) * 2018-06-11 2019-12-19 三菱電機株式会社 操作端末および設備機器制御システム
US11856442B2 (en) 2019-04-12 2023-12-26 Sony Group Corporation Control device, wireless communication device, and method of controlling wireless communication system
CN110636232B (zh) * 2019-09-05 2020-06-23 北方工业大学 视频播放内容选择系统及方法
US11094580B2 (en) 2019-10-01 2021-08-17 International Business Machines Corporation Structure and method to fabricate fully aligned via with reduced contact resistance
US20210288781A1 (en) * 2020-03-16 2021-09-16 Sony Semiconductor Solutions Corporation Communication device, communication system and communication method
KR20210123927A (ko) * 2020-04-06 2021-10-14 엘지전자 주식회사 무선 디바이스
WO2021227075A1 (zh) * 2020-05-15 2021-11-18 深圳市汇顶科技股份有限公司 节点控制方法、系统、芯片、电子设备和存储介质
WO2022259432A1 (ja) * 2021-06-09 2022-12-15 三菱電機株式会社 通信システムおよび機器

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101668137A (zh) * 2008-09-05 2010-03-10 株式会社日立制作所 电视接收机
CN102111771A (zh) * 2009-12-24 2011-06-29 英特尔公司 用于多带速率缩放的方法和系统
CN102858002A (zh) * 2006-06-16 2013-01-02 三菱电机株式会社 移动通信系统和移动终端

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3466639B2 (ja) 1992-05-01 2003-11-17 キヤノン株式会社 画像通信装置及び方法
US5537150A (en) 1992-05-01 1996-07-16 Canon Kabushiki Kaisha Image processing apparatus and image communicating apparatus
JP3743796B2 (ja) 2000-06-20 2006-02-08 松下電器産業株式会社 放送受信システム
KR100893863B1 (ko) * 2006-09-05 2009-04-20 엘지전자 주식회사 무선 통신 시스템에서의 링크 적응적 데이터 전송 방법
JP2008278388A (ja) 2007-05-07 2008-11-13 Sony Corp 情報交換装置および情報交換方法
JP4990067B2 (ja) 2007-08-22 2012-08-01 シャープ株式会社 無線データ通信システム
US7895629B1 (en) 2007-11-07 2011-02-22 At&T Mobility Ii Llc Video service buffer management in a mobile rate control enabled network
JP5106275B2 (ja) 2008-06-30 2012-12-26 株式会社東芝 無線通信装置及び無線通信方法
CN101729874B (zh) 2008-10-20 2013-06-19 清华大学 一种可分级视频传输处理方法及装置
US8289997B2 (en) 2009-02-02 2012-10-16 Novara Technology, LLC Bandwidth sharing in a distributed wireless client application using inverse multiplexing termination
JP5428695B2 (ja) 2009-09-16 2014-02-26 富士通株式会社 バッテリー動作可能無線基地局装置
US9071395B2 (en) 2009-11-06 2015-06-30 Samsung Electronics Co., Ltd. Method and apparatus for changing frequency band used for communication between devices supporting multiple frequency bands
WO2012004944A1 (ja) 2010-07-06 2012-01-12 パナソニック株式会社 無線伝送装置
US20120327851A1 (en) 2011-05-27 2012-12-27 Qualcomm Incorporated Method and apparatus for tunneled direct link setup (tdls) for establishing basic service set
US8817722B2 (en) * 2011-06-07 2014-08-26 Qualcomm Incorporated Preemptive direct link channel switching
US9288430B2 (en) * 2011-08-10 2016-03-15 Panasonic Intellectual Property Management Co., Ltd. Recording medium, playback device, recording device, playback method and recording method for recording progressive pictures at high frame rate
US11089343B2 (en) * 2012-01-11 2021-08-10 Microsoft Technology Licensing, Llc Capability advertisement, configuration and control for video coding and decoding
US8396983B1 (en) 2012-03-13 2013-03-12 Google Inc. Predictive adaptive media streaming

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102858002A (zh) * 2006-06-16 2013-01-02 三菱电机株式会社 移动通信系统和移动终端
CN101668137A (zh) * 2008-09-05 2010-03-10 株式会社日立制作所 电视接收机
CN102111771A (zh) * 2009-12-24 2011-06-29 英特尔公司 用于多带速率缩放的方法和系统

Also Published As

Publication number Publication date
WO2015033763A1 (ja) 2015-03-12
US10869069B2 (en) 2020-12-15
EP3043566A4 (en) 2017-04-05
TWI654888B (zh) 2019-03-21
TW201521474A (zh) 2015-06-01
JP2015053565A (ja) 2015-03-19
SG11201601366PA (en) 2016-03-30
US20160198198A1 (en) 2016-07-07
CN105493508A (zh) 2016-04-13
EP3043566A1 (en) 2016-07-13

Similar Documents

Publication Publication Date Title
CN105493508B (zh) 信息处理设备和信息处理方法
AU2014316299B2 (en) Information processing device and information processing method
JP6406249B2 (ja) 情報処理装置および情報処理方法
US10979900B2 (en) Information processing device and information processing method
US10805672B2 (en) Information processing device, information processing system, and information processing method
US10085068B2 (en) Information processing apparatus and information processing method
US10499200B2 (en) Information processing device and information processing method
US10582376B2 (en) Information processing apparatus, information processing method, and source apparatus
KR102569477B1 (ko) 무선 av 시스템에서 적응적으로 rf 전송전력을 제어하는 장치 및 방법
US11778264B2 (en) Device and method for processing and transmitting image data in wireless AV system
US20220255601A1 (en) Device and method for performing channel selection in wireless av system

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20200505

CF01 Termination of patent right due to non-payment of annual fee