CN105830457A

CN105830457A - 信息处理设备和信息处理方法

Info

Publication number: CN105830457A
Application number: CN201580002780.6A
Authority: CN
Inventors: 石见英辉
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2014-11-27
Filing date: 2015-10-06
Publication date: 2016-08-03
Anticipated expiration: 2035-10-06
Also published as: AU2015351677B2; WO2016084485A1; US10004061B2; US20160353425A1; CN105830457B; AU2015351677A1; EP3091747A1; EP3091747A4; US20180263028A1; JPWO2016084485A1; US10383098B2; JP6729372B2

Abstract

为了提高操纵能力。信息处理设备包括无线通信单元和控制单元。无线通信单元根据Wi?Fi认证的Miracast规范与至少一个信宿设备执行实时图像传输。控制单元基于用于根据Wi?Fi认证的Miracast规范控制信息处理设备的控制信息执行与实时图像传输相关的控制，控制信息是从至少一个信宿设备接收的。控制单元执行控制，使得UIBC的开?关切换在接收到多条控制信息时被执行，其中UIBC用于发送已经发送控制信息的信宿设备中的操纵信息。

Description

信息处理设备和信息处理方法

技术领域

本技术涉及信息处理设备。更具体而言，本技术涉及信息处理设备、通信系统、信息处理方法，以及使计算机执行其中各种信息利用无线通信进行交换的方法的程序。

背景技术

在相关领域中，利用无线通信交换各种数据的无线通信技术是已知的。例如，用于通过无线通信在两个信息处理设备之间交换各种信息的无线通信技术已经被提出(例如，见专利文献1)。

引用列表

专利文献

专利文献1：JP 2008-278388A

发明内容

根据相关领域的上述技术，即使当连接未通过有线线路建立时，各种信息也可以在两个信息处理设备之间通过无线通信互换。例如，基于从发送侧信息处理设备发送的图像数据的图像可以在接收侧信息处理设备的显示单元上显示。

当接收侧信息处理设备如上所述基于从发送侧信息处理设备发送的图像数据通过显示单元显示图像时，用户被认为在发送侧或接收侧信息处理设备中执行操纵。在这方面，提高用户的操纵能力是重要的。

本技术是鉴于以上所述而作出的，并且本技术的目标是提高操纵能力。

问题的解决方案

本技术是为了解决所述问题而产生的，并且其第一方面是信息处理设备、其信息处理方法，以及用于使计算机执行该信息处理方法的程序，信息处理设备包括：无线通信单元，被配置为根据无线保真(Wi-Fi)认证的Miracast规范与至少一个信宿设备执行实时图像传输；以及控制单元，被配置为基于用于根据Wi-Fi认证的Miracast规范控制信息处理设备的控制信息执行与实时图像传输相关的控制，所述控制信息是从所述至少一个信宿设备接收的。控制单元执行控制，使得用户输入返回信道(UIBC)的开-关切换在接收到多条控制信息时被执行，其中UIBC用于发送已经发送控制信息的信宿设备中的操纵信息。因此，存在其中用户输入返回信道(UIBC)的开-关切换在接收到多条控制信息时被执行的操作，其中UIBC用于发送已经发送控制信息的信宿设备中的操纵信息。

根据第一方面，无线通信单元可以在信息处理设备与信宿设备之间生成的传输控制协议(TCP)会话上接收控制信息。因此，存在其中在信息处理设备与信宿设备之间生成的传输控制协议(TCP)会话上接收控制信息的操作。

根据第一方面，开-关切换的控制可以是连接、断开、开始、停止、验证和失效当中任何一个的控制。因此，存在其中开-关切换的控制是连接、断开、开始、停止、验证和失效当中任何一个的控制的操作。

根据第一方面，控制单元可以执行控制，使得UIBC对至少一个信宿设备当中的第一信宿设备被验证，并且UIBC对第二信宿设备失效。因此，存在其中UIBC对至少一个信宿设备当中的第一信宿设备被验证并且UIBC对第二信宿设备失效的操作。

根据第一方面，无线通信单元可以给出指示UIBC对于第一信宿设备被设置为有效的通知，并且可以给出指示UIBC对于第二信宿设备被设置为无效的通知。因此，存在其中指示UIBC被设置为有效的通知被提供给第一信宿设备并且指示UIBC被设置为无效的通知被提供给第二信宿设备的操作。

根据第一方面，控制信息可以是GET_PARAMETER响应。通知可以作为SET_PARAMETER被发送。因此，存在其中控制信息是GET_PARAMETER响应并且通知作为SET_PARAMETER被发送的操作。

根据第一方面，控制单元可以执行控制，使得UIBC对至少一个信宿设备当中的第一信宿设备被验证，并且UIBC对已经发送控制信息的信宿设备中除第一信宿设备之外的所有信宿设备失效。因此，存在其中UIBC对至少一个信宿设备当中的第一信宿设备被验证并且UIBC对已经发送控制信息的信宿设备中除第一信宿设备之外的所有信宿设备失效的操作。

根据第一方面，无线通信单元可以接收与ID信息关联的多条操纵信息，作为UIBC信息。控制单元可以参照包括在ID信息中的ID报头来识别对应的操纵信息。因此，存在其中与ID信息关联的多条操纵信息作为UIBC信息被接收并且对应的操纵信息参照包括在ID信息中的ID报头来识别的操作。

根据第一方面，至少一个信宿设备可以包括多个输入设备。多条操纵信息可以经由至少一个信宿设备从多个输入设备被发送。因此，存在其中多条操纵信息经由至少一个信宿设备从多个输入设备被发送的操作。

根据第一方面，无线通信单元可以为一批多条UIBC信息设置一个端口，并且可以执行通信。因此，存在其中为一批多条UIBC信息设置一个端口并且通信被执行的操作。

根据第一方面，无线通信单元可以作为源设备执行通信。因此，存在其中作为源设备的通信被执行的操作。

本技术的第二方面是信息处理设备、其信息处理方法，以及用于使计算机执行该信息处理方法的程序，信息处理设备包括：无线通信单元，被配置为根据无线保真(Wi-Fi)认证的Miracast规范与至少一个源设备执行实时图像传输；以及显示单元，被配置为显示通过实时图像传输接收到的图像。当至少一个源设备当中的第一源设备与至少一个信宿设备执行实时图像传输时无线通信单元从第一源设备接收与用户输入返回信道(UIBC)的开或关相关的控制信息，其中用户输入返回信道(UIBC)用于发送至少一个信宿设备当中的信息处理设备中的操纵信息。因此，存在其中第一源设备与至少一个信宿设备执行实时图像传输时与用户输入返回信道(UIBC)的开或关相关的控制信息从第一源设备被接收的操作，其中用户输入返回信道(UIBC)用于发送至少一个信宿设备当中的信息处理设备中的操纵信息。

发明的有利效果

根据本技术，可以获得操纵能力可提高的优异效果。本文所描述的效果不一定是限制性的，并且本公开内容中所描述的任何效果都可以被包括。

附图说明

图1是示出根据本技术第一实施例的通信系统100的系统配置例的框图。

图2是示出根据本技术第一实施例的信息处理设备200的功能配置例的框图。

图3是示出根据本技术第一实施例的信息处理设备300的功能配置例的框图。

图4是示意性地示出根据本技术第一实施例、保留在管理信息保留单元390中的内容例的图。

图5是示出根据本技术第一实施例、在信息处理设备300的显示单元351上显示的图像的转变例的图。

图6是示出根据本技术第一实施例、在通信系统100中包括的设备之间的通信过程例的序列图。

图7是示出根据本技术第一实施例、在通信系统100中包括的设备之间的通信过程例的序列图。

图8是示出根据本技术第一实施例、在通信系统100中包括的设备之间的通信过程例的序列图。

图9是示出根据本技术第一实施例、当信宿设备执行模式请求的开-关控制时的配置例的图。

图10是示出根据本技术第一实施例、当信宿设备执行模式请求的开-关控制时的配置例的图。

图11是示出根据本技术第一实施例、当信宿设备执行UIBC的开-关控制时的配置例的图。

图12是示出根据本技术第一实施例、当信宿设备执行UIBC的开-关控制时的配置例的图。

图13是示出根据本技术第一实施例、当信宿设备执行UIBC的开-关控制时的配置例的图。

图14是示出根据本技术第一实施例、当信宿设备执行UIBC的开-关控制时的配置例的图。

图15是示出包括在根据本技术第一实施例的通信系统100中的设备之间的通信过程例的序列图。

图16是示出包括在根据本技术第一实施例的通信系统100中的设备之间的通信过程例的序列图。

图17是示出根据本技术第一实施例、在源设备410与信宿设备420之间的通信过程例的序列图。

图18是示出根据本技术第一实施例、在源设备410与信宿设备420之间的通信过程例的序列图。

图19是示出根据本技术第一实施例、在源设备410与信宿设备420之间的通信过程例的序列图。

图20是示出根据本技术第一实施例、在源设备410与信宿设备420之间的通信过程例的序列图。

图21是示出根据本技术第一实施例、在源设备410与信宿设备420之间的通信过程例的序列图。

图22是示出根据本技术第一实施例、在源设备410与信宿设备420之间的通信过程例的序列图。

图23是示出根据本技术第一实施例、在源设备410与信宿设备420之间的通信过程例的序列图。

图24是示出根据本技术第一实施例、在源设备410与信宿设备420之间的通信过程例的序列图。

图25示出了根据本技术第一实施例、在源设备410与信宿设备420之间的UIBC互换的帧格式示例。

图26是示出根据本技术第一实施例、在源设备410与信宿设备420之间的通信过程例的序列图。

图27是示出由根据本技术第一实施例的信息处理设备300执行的端口设置过程的处理过程的例子的流程图。

图28是示出根据本技术第一实施例、在源设备410与信宿设备420之间利用WebSocket的图像数据或音频数据的通信例的图。

图29是示出根据本技术第二实施例的通信系统600的系统配置例的图。

图30是示出由根据本技术第二实施例的信息处理设备610执行的数据传输过程的处理过程的例子的流程图。

图31是示出由根据本技术第二实施例的信息处理设备610执行的数据传输过程的处理过程的例子的流程图。

图32是示出由根据本技术第二实施例的信息处理设备610执行的数据传输过程的处理过程的例子的流程图。

图33是示出由根据本技术第三实施例的信息处理设备610执行的数据传输过程的处理过程的例子的流程图。

图34是示出由根据本技术第三实施例的信息处理设备610执行的数据传输过程的处理过程的例子的流程图。

图35是示出根据本技术第四实施例的通信系统700的系统配置例的图。

图36是示出由根据本技术第四实施例的接收器710(源设备)执行的非显示区域通知过程的处理过程的例子的流程图。

图37是示出智能电话的示意性配置的例子的框图。

图38是示出汽车导航设备的示意性配置的例子的框图。

具体实施方式

在下文中，将描述用于执行本技术的模式(下文中称为“实施例”)。描述将按以下次序进行：

1.第一实施例(其中UIBC和WebSocket在源设备与信宿设备之间设置的例子)

2.第二实施例(其中源设备与信宿设备之间经由接入点的连接和源设备与信宿设备之间的直接连接被切换(或同时使用)的例子)

3.第三实施例(其中源设备通过用户的操纵或用户的操作连接到信宿设备或接入点的例子)

4.第四实施例(其中一个源设备连接到多个信宿设备的例子)

5.应用例

<1.第一实施例>

[通信系统的配置例子]

图1是示出根据本技术第一实施例的通信系统100的系统配置例的框图。图1示出了能够通过对等(P2P)直接通信执行无线连接的通信系统的例子。

通信系统100包括信息处理设备200、300和400。通信系统100是其中信息处理设备300接收从信息处理设备200和400当中至少一个发送的数据(例如，图像数据或音频数据)的通信系统。

信息处理设备200、300和400是具有无线通信功能的发送和接收设备。信息处理设备200、300和400是，例如，具有无线通信功能的显示设备(例如，个人计算机)或便携式信息处理设备(例如，智能电话或平板终端)。信息处理设备200、300和400是，例如，遵守电气和电子工程师协会(IEEE)802.11、802.15或802.16、第三代合作伙伴计划(3GPP)规范(例如，宽带码分多址(W-CDMA))、全球移动通信系统(GSM：注册商标)、全球微波互联接入(WiMAX)、WiMAX2、长期演进(LTE)、LTE-A(高级)等的无线通信设备。信息处理设备200、300和400可以利用无线通信功能互换各种信息。

在这里，将描述在信息处理设备200和300之间或者信息处理设备400和300之间利用无线局域网(LAN)执行无线通信的情况的例子。

作为无线LAN，例如，无线保真(Wi-Fi)Direct、隧道直接链路建立(TDLS)、特设网络或网格网络可以被使用。作为通信系统100中使用的短程无线视听(AV)传输通信，例如，Wi-Fi认证的Miracast(技术规范标题：Wi-Fi Display)可以被使用。Wi-Fi认证的Miracast是用于利用Wi-Fi Direct或TDLS的技术向另一终端发送利用一个终端再现的音频或显示图像并且类似地利用该另一终端输出音频或图像数据的镜像技术。

在Wi-Fi认证的Miracast中，用户输入返回通道(UIBC)是在传输控制协议/互联网协议(TCP/IP)上实现的。UIBC是用于从一个终端到另一个终端发送诸如鼠标或键盘的输入设备的操纵信息的技术。代替Wi-Fi认证的Miracast，另一种远程桌面软件(例如，虚拟网络计算(VNC))可以被应用。

在这里，在Wi-Fi认证的Miracast中，例如，确定图像(视频)利用H.264被压缩和解压。例如，在Wi-Fi认证的Miracast中，H.264可以在发送侧进行调整。本技术的实施例不限于H.264，而是也可以对应于各种编解码器，诸如H.265(例如，高效视频编码(HEVC)和高效视频编码的可扩展视频编码扩展(SHVC))和运动图像专家组(MPEG4)、联合图像专家组(JPEG)2000。另外，它还可以对应于基于行的编解码器，其中一行或多行被捆绑并压缩或两行或更多行被分成2x2或更多宏块以便被压缩和解压。例如，通过获得与特定代码量区域(诸如图片、一批多行，或者宏块)的前一代码量区域的差值，有可能对应于降低传输速率而不执行压缩的编解码器，诸如DCT或Wavelet(小波变换)。另外，图像(视频)可以在不压缩的情况下被发送或接收。

在本技术的第一实施例中，将描述其中信息处理设备200设置通过成像操作生成的图像数据和音频数据作为发送对象的例子。在本技术的第一实施例中，其中信息处理设备400设置存储在存储单元(例如，硬盘)中的内容(例如，由图像数据和音频数据形成的内容)作为发送对象的例子。可以使用相机安装在其上的电子设备(例如，PC、游戏设备、智能电话或平板终端)，作为信息处理设备200。可以使用包括显示单元的另一电子设备(例如，成像设备、游戏设备、智能电话或平板终端)，作为信息处理设备300。如果信息处理设备400具有网络共享(tethering)功能，则信息处理设备400可以经由无线或有线网络获取存储在互联网服务提供商(IPS)中的内容并且将该内容设置为发送对象。

例如，通过信息处理设备200的成像操作生成的图像数据被发送到信息处理设备300并且基于该图像数据的图像11被显示在信息处理设备300的显示单元351上。另外，存储在信息处理设备400的存储单元(例如，硬盘)中的内容被发送到信息处理设备300并且基于这个内容的图像12被显示在信息处理设备300的显示单元351上。

以这种方式，在本技术的第一实施例中，将描述其中信息处理设备200和400充当源侧信息处理设备(源设备)并且信息处理设备300充当接收侧信息处理设备(信宿设备)的例子。

在图1中，其中信息处理设备300可以利用无线通信经由对等(P2P)直接连接执行直接通信的范围被指示为信息传送范围101。信息传送范围101是基于信息处理设备300的信息传送范围(服务范围)。

[信息处理设备(源设备)的配置例]

图2是示出根据本技术第一实施例的信息处理设备200的功能配置例的框图。与无线通信相关的信息处理设备400的功能配置基本上与信息处理设备200的相同。因此，在本技术的第一实施例中，将只描述信息处理设备200并且信息处理设备400的描述将被省略。

信息处理设备200包括天线210、无线通信单元220、控制信号接收单元230、控制单元240、图像和音频信号生成单元250、图像和音频压缩单元260，以及流发送单元270。

无线通信单元220在控制单元240的控制下利用无线通信经由天线210向另一信息处理设备(例如，信息处理设备300)发送和从其接收每条信息(例如，图像数据和音频数据)。例如，当执行图像数据发送过程时，由图像和音频信号生成单元250生成的图像数据由图像和音频压缩单元260压缩并且压缩的图像数据(图像流)经由无线通信单元220从天线210被发送。

无线通信单元220被假设为能够利用多个频率信道向另一信息处理设备(例如，信息处理设备300)发送和从其接收每条信息。在本技术的第一实施例中，将描述其中无线通信单元220具有发送和接收三种频率信道，2.4GHz、5GHz和60GHz，的功能的例子。以这种方式，当源设备具有发送和接收多个频率信道的功能时，信宿设备(例如，信息处理设备300)可以控制由每个源设备使用的频率信道。

控制信号接收单元230从由无线通信单元220接收的多条信息中获取从另一信息处理设备(例如，信息处理设备300)发送的控制信号(例如，与信息处理设备300互换的信息)。然后控制信号接收单元230将所获取的控制信号输出到控制单元240。

控制单元240对要从信息处理设备200发送的每条信息执行控制。例如，控制单元240基于由控制信号接收单元230接收到的控制信号对图像和音频信号生成单元250以及图像和音频压缩单元260执行控制。例如，控制单元240执行控制，使得音频信道的数目和作为发送对象的图像数据的分辨率被改变，或者执行控制，使得作为发送对象的图像数据的图像区域被改变。即，控制单元240基于由控制信号接收单元230接收到的控制信号执行作为发送对象的流的传输控制。流的传输控制是，例如，数据传输速度控制、可扩展性传输率控制。

控制单元240可以具有当数据利用无线通信发送到信宿设备和从其接收时测量无线电波的传播状况(链路无线电波传播状况)的功能并且可以向信宿设备发送测量结果(无线电波传播测量信息)。

在这里，无线电波传播测量信息是，例如，用来确定关于信宿设备的线路质量是否是图像数据和音频数据可以利用其发送和接收的质量的信息。无线电波传播测量信息被使用，例如，当执行流传输控制时。无线电波传播测量信息将参照图4详细地描述。代替无线电波传播测量信息，控制单元240可以计数同一分组的重发次数并对应于所计数的重发次数执行流传输控制。

在这里，数据传输速度主要是指通信线路的占用率并且被假设为包括通信速度或通信能力的含义。例如，分辨率被定义为图像质量的指标，这被配置为包括诸如图像数据的图像帧(垂直和水平像素的数目)或图像数据的位速率(压缩比)的成分。作为质量的指标，可以使用流的吞吐量。假设音频信道的数目包括音频记录和再现方法的含义，诸如单声道(1.0声道)、立体声(2.0声道)、5.1声道、9.1声道，或者更高分辨率的音频。音频信道数目被定义为音频质量的指标，这被配置为包括诸如音频数据的位速率(压缩率)或信道的数目的成分。作为音频质量的指标，可以使用流的吞吐量。

控制单元240执行控制，使得数据速率控制不稳定的状态得以改善。例如，通过与接收设备互换信息，控制单元240理解信宿(sink)设备(例如，信息处理设备300)的系统性能信息。在这里，系统性能信息是，例如，关于信宿设备的系统的性能信息。例如，该系统性能信息是可用的频率信道、分辨率、传输控制协议(TCP)和用户数据报协议(UDP)。系统性能信息是，例如，指示加密方法的对应性、标准清晰度(SD)/高清晰度(HD)的对应性以及低功耗模式的对应性当中每一个的信息。例如，控制单元240可以选择用于流传输控制的方法，以根据信宿设备是否对应于低功耗模式来进一步提高通信系统100的整体系统稳定性。

例如，控制单元240被假设为在与信息处理设备300交换信息期间插入关于信息处理设备200是否是移动设备的信息。例如，关于信息处理设备200的能力信息可以包括关于信息处理设备200是否是移动设备的信息。当理解信息处理设备200是移动设备时，信息处理设备300可以确定没有必要基于与其它连接的信息处理设备的关联来操作信息处理设备200。以这种方式，当确定没有必要操作信息处理设备200时，信息处理设备200从信息处理设备300接收发送停止命令。当控制单元240理解发送停止命令时，控制单元240可以将图像和音频信号生成单元250、图像和音频压缩单元260和流发送单元270当中每一个的功能断电给定的时间。控制单元240可以将无线通信单元220过渡到间歇接收(这是其中无线通信单元220周期性地工作使得无线通信单元220可以从信息处理设备300接收命令并且设备在其它情况下被断电的模式)。

图像和音频信号生成单元250在控制单元240的控制下生成作为输出对象的数据(图像数据和音频数据)并且向图像和音频压缩单元260输出所生成的数据。例如，图像和音频信号生成单元250包括成像单元(未示出)和音频获取单元(未示出)。成像单元(例如，透镜、图像传感器或者信号处理电路)将被摄对象成像并生成图像(图像数据)。音频获取单元(例如，麦克风)在生成图像数据时获取周围的音频。以这种方式生成的数据是要被发送到另一信息处理设备(例如，信息处理设备300)的发送对象。

在控制单元240的控制下，图像和音频压缩单元260压缩(编码)由图像和音频信号生成单元250生成的数据(图像数据和音频数据)。然后，图像和音频压缩单元260向流发送单元270输出压缩数据(图像数据和音频数据)。图像和音频压缩单元260可以通过由软件执行编码来实现，或者可以通过由硬件执行编码来实现。图像和音频压缩单元260被假设为充当编解码器，但是被假设能够处理未压缩的图像或音频。另外，图像和音频压缩单元260也可以充当可扩展编解码器。在这里，可扩展编解码器意味着，例如，可以根据接收侧信息处理设备(信宿设备)的分辨率、网络环境等等自由地被应用的编解码器。

流发送单元270在控制单元240的控制下经由无线通信单元220从天线210执行以流的形式发送由图像和音频压缩单元260压缩的数据(图像数据和音频数据)的发送过程。

除了上述单元，信息处理设备200还可以包括显示单元、音频输出单元以及操纵接收单元，但是这些单元在图2中未示出。已经描述了其中信息处理设备200生成作为发送对象的图像数据和音频数据的例子。但是，信息处理设备200可以从外部设备获取作为发送对象的图像数据和音频数据。例如，信息处理设备200可以从配备有麦克风的web相机获取作为发送对象的图像数据和音频数据。信息处理设备200可以设置存储在存储设备(例如，硬盘)中的内容(例如，由图像数据和音频数据构成的内容)作为发送对象，而不管是在信息处理设备200的内部还是外部。在这种情况下，存储在存储设备中的内容也被假设为压缩内容。在这种情况下，当压缩内容根据在通信系统100中采用的标准中定义的编码方案被压缩时，压缩内容可以在不被解密(解码)的情况下被发送。

信息处理设备200的显示单元(未示出)是，例如，显示由图像和音频信号生成单元250生成的图像的显示单元。作为显示单元，可以使用各种显示面板。例如，可以使用诸如电致发光(EL)或晶体发光二极管(LED)显示器或液晶显示器(LCD)的显示面板。

信息处理设备200的音频输出单元(未示出)是，例如，输出由图像和音频信号生成单元250生成的音频的音频输出单元(例如，扬声器)。图像可以从发送设备和接收设备输出，但音频优选地只从发送设备和接收设备之一当中输出。

信息处理设备200的操纵接收单元(未示出)是接收由用户执行的操纵输入的操纵接收单元并且是，例如，键盘、鼠标、游戏垫、触摸面板、相机或麦克风。操纵接收单元和显示单元可以利用能够在用户用他或她的手指触摸或接近显示表面时执行操纵输入的触摸面板一体化配置。

[信息处理设备(接收侧)的配置例]

信息处理设备300包括天线310、无线通信单元320、流接收单元330、图像和音频解压单元340、图像和音频输出单元350、用户信息获取单元360、控制单元370、控制信号发送单元380，以及管理信息保留单元390。

无线通信单元320在控制单元370的控制下经由天线310利用无线通信向另一信息处理设备(例如，信息处理设备200)发送和从其接收每条信息(例如，图像数据和音频数据)。例如，当执行图像数据接收过程时，由天线310接收的图像数据经由无线通信单元320和流接收单元330由图像和音频解压单元340解压(解码)。然后，解压的图像数据被提供给图像和音频输出单元350，并且与该解压的图像数据相应的图像从图像和音频输出单元350输出。即，与该解压的图像数据相应的图像被显示在显示单元351上。

无线通信单元320被假设为能够利用多个频率信道向另一信息处理设备(例如，信息处理设备200)发送和从其接收每条信息。在本技术的第一实施例中，将描述其中无线通信单元320具有发送和接收三种频率信道，2.4GHz、5GHz和60GHz，的功能的例子。即，无线通信单元320可以利用第一频带执行通信并利用具有比第一频带更高数据传输速度的第二频带执行通信。控制单元370控制多个频率信道中在与每个源设备进行无线通信当中要使用的频率信道。

信息处理设备200和300之间的链路以及信息处理设备400和300之间的链路可以利用相同的频率信道来建立或者可以利用不同的频率信道来建立。

在本技术的第一实施例中，将描述其中无线通信单元320具有发送和接收三种频率信道，2.4GHz、5GHz和60GHz，的功能的例子，但本技术的实施例不限于此。例如，无线通信单元320可以具有发送和接收其它频率信道、两个频率信道、四个或更多个频率信道的功能。

流接收单元330在控制单元370的控制下接收流(例如，图像流和音频流)以及在由无线通信单元320接收的信息中的与每个源设备的互换信息。然后，流接收单元330将接收到的命令信息输出到控制单元370并且将接收到的流输出到图像和音频解压单元340和控制单元370。

在这里，与每个源设备的互换信息是从源设备(例如，信息处理设备200)发送的信息并且包括，例如，用于获取信息处理设备300的系统性能信息的请求。系统性能信息是，例如，指示可用频率信道、分辨率、TCP和UDP或者加密方法的对应性、SD/HD的对应性和低功耗模式的对应性当中每一个的信息。

流接收单元330具有在数据利用无线通信被发送到信宿设备和从其接收时测量无线电波传播状况(链路无线电波传播状况)的功能。流接收单元330将测量结果(无线电波传播测量信息)输出到控制单元370。无线电波传播测量信息将参照图4详细描述。

图像和音频解压单元340在控制单元370的控制下解压(解码)从另一个信息处理设备(例如，信息处理设备200)发送的流(图像数据和音频数据)。然后，图像和音频解压单元340将解压的数据(图像数据和音频数据)输出到图像和音频输出单元350。图像和音频解压单元340可以通过由软件执行解码来实现，或者可以通过由硬件执行解码来实现。图像和音频解压单元340被假设为充当编解码器，但是被假设为能够处理未压缩的图像或音频。另外，图像和音频解压单元340也可以充当可扩展编解码器。

图像和音频输出单元350包括显示单元351和音频输出单元352。

显示单元351是基于由图像和音频解压缩单元340解压的图像数据显示每个图像(例如，图1中所示的图像11和12)的显示单元。作为显示单元351，例如，可以使用诸如有机EL面板、晶体LED显示器、LCD面板的显示面板。作为显示单元351，可以使用能够在用户用他或她的手指触摸或接近显示表面时执行操纵输入的触摸面板。

音频输出单元352是基于由图像和音频解压单元340解压的音频数据输出各种音频(与显示单元351上显示的图像相关的音频等)的音频输出单元(例如，扬声器)。在这里，作为音频输出方法，例如，仅再现从扬声器分配给中间信道(主图像)的源设备的音频并且不再现分配给外围信道(子图像)的源设备的音频的方法可以被使用。作为另一音频输出方法，例如，设置分配给中间信道的源设备的音频的音量为主并且降低分配给外围信道的源设备的音频的音量并再现该音频的方法可以被使用。其它音频输出方法可以被使用。

用户信息获取单元360获取关于用户的信息(用户信息)并且将所获取的用户信息输出到控制单元370。例如，用户信息获取单元360可以通过从操纵接收单元(键盘、鼠标、遥控器、游戏垫或触摸面板)接收输入来获取用户信息，用户可以为其直接设置显示方法。操纵接收单元是，例如，指定在显示单元351上显示的图像中任何区域的操纵构件。例如，用户信息获取单元360可以通过从能够领会用户意图的设备，诸如照相机、麦克风或各种传感器(例如，陀螺仪传感器和检测人体的传感器)当中任何一种，接收输入来获取用户信息。

例如，当基于利用无线通信从另一信息处理设备(例如，信息处理设备200)接收的流的信息从图像和音频输出单元350输出时，用户信息获取单元360获取通过用户运动生成的用户信息。用户信息是，例如，通过与显示单元351上显示的图像相关的用户运动生成的用户信息。例如，用户信息是基于与显示单元351上显示的图像相关的用户操纵生成的信息。

例如，用户信息获取单元360可以获取由成像单元361(图1中示出)生成的图像数据并生成用户信息。例如，用户信息获取单元360可以获取由外部设备(例如，每个传感器或可穿戴设备)获取的信息(例如，位置信息和标识信息)并生成用户信息。

控制单元370使管理信息保留单元390保留由流接收单元330获取的信息并且基于保留在管理信息保留单元390中的管理信息管理每个源设备。控制单元370执行流传输控制，使得对于从整个系统中多个源设备发送的流，稳定性得以提高。

例如，控制单元370基于由用户信息获取单元360获取的用户信息和保留在管理信息保留单元390中的管理信息执行流传输控制。具体而言，控制单元370为每个源设备生成控制信号，以基于保留在管理信息保留单元390中的管理信息执行流传输控制并且将所生成的控制信号输出到控制信号发送单元380。例如，控制单元370基于用户信息和管理信息改变显示在显示单元351上的图像的分辨率，并且生成控制信号，以请求等效于每个源设备的分辨率的传输率。例如，控制单元370生成控制信号，以基于用户信息和管理信息决定显示单元351上的图像的显示区域。例如，控制单元370生成控制信号，以基于用户信息和管理信息决定显示单元351上的图像的大小。

控制单元370执行控制，使得要使用的频率信道和分辨率是基于用户信息和管理信息来设置的。例如，控制单元370在无线通信单元320的多个频率信道中设置要对每个源设备使用的频率信道。当功耗模式对每个频率信道不同时，控制单元370理解每种模式并且为了照顾移动设备的功耗而设置频率信道。即，控制单元370可以单独设置与第一频带相关的第一功耗模式和与具有比第一频带更高数据传输速度的第二频带相关的第二功耗模式。

控制信号发送单元380经由无线通信单元320和天线310执行将从控制单元370输出的控制信号发送到另一无线通信设备的发送过程。

管理信息保留单元390是保留信息(管理信息)的表，以管理利用无线通信连接到信息处理设备300的每个源设备。保留在管理信息保留单元390中的内容将参照图4详细地描述。

[管理信息保留单元中保留的内容例]

管理信息保留单元390是保留信息(管理信息)的表，以管理利用无线通信连接到信息处理设备300的每个源设备。例如，在管理信息保留单元390中，终端标识信息391、频率信道392、无线电波传播测量信息393、设备信息394、频带使用水平395、显示形式396、待机或唤醒397和多接收分集对应性398相互关联地保留。

在终端标识信息391中，标识信息被存储，以识别利用无线通信连接到信息处理设备300的源设备。

在频率信道392中，存储利用无线通信连接到信息处理设备300的源设备实际使用的频率信道。

在无线电波传播测量信息393中，关于利用无线通信连接到信息处理设备300的源设备的无线电波传播测量信息被存储。无线电波传播测量信息是由流接收单元330为利用无线通信连接到信息处理设备300的每个源设备测量的。

作为无线电波传播测量信息393，例如，分组错误率(PER)、误码率(BER)、分组重发次数以及吞吐量被存储。作为无线电波传播测量信息393，例如，丢帧、信号对干扰比(SIR)和接收信号强度指标(RSSI)被存储。在这里，代替SIR，也可以使用信号对干扰加噪声比(SINR)。图4中所示的无线电波传播测量信息393是个例子。多条信息当中至少一条信息可以被存储或者另一条无线电波传播测量信息可以由流接收单元330测量以便被存储。由源设备测得的无线电波传播测量信息可以被获取并存储。由接收侧接收的分组延迟可以被确定并且关于分组延迟的信息可以被用作无线电波传播测量信息。分组延迟充当与无线电波传播相关的一个指标，因为延迟发生在错误发生时通过层2中的重发过程到接收侧的发送中。分组延迟充当，例如，指示其中多个设备共享无线频带的无线系统中链路特性恶化的指标。

在设备信息394中，存储利用无线通信连接到信息处理设备300的源设备的类别(源设备的属性)。例如，移动设备和固定设备当中任意一种作为源设备的类别被存储。电源被插入其中的设备和其他设备当中任意一个可以作为源设备的类别被存储。电池驱动的设备和其他设备中的任一种可以作为源设备的类别被存储。

在频带使用水平395中，利用无线通信连接到信息处理设备300的源设备的频带使用水平被存储。作为频带使用水平，例如，可以使用分辨率或吞吐量。例如，在频带使用水平中，使用过程中的吞吐量可以被存储、预决定的表可以准备，并且指示表的范围的对应性的数字可以被存储并管理。

在显示形式396中，基于从利用无线通信连接到信息处理设备300的源设备发送的流的数据显示形式(输出形式)被存储。例如，存储在显示单元351上显示并且基于从源设备发送的流的图像数据的显示形式(主图像(中间信道)或者子图像(外围信道))。例如，存储从音频输出单元352输出并且基于从源设备发送的流的音频数据的输出形式(主音频或子音频)。其中外围信道不被显示的格式可以根据该显示形式来实现。

在待机或唤醒397中，利用无线通信连接到信息处理设备300的源设备的模式(待机模式或唤醒模式)被存储。

在多接收分集对应性398中，指示利用无线通信连接到信息处理设备300的源设备是否对应于多接收分集的信息被存储。

以这种方式，保留在管理信息保留单元390中的管理信息是用于关联用来识别其它信息处理设备的标识信息(终端标识信息391)与关于要管理的其它信息处理设备的能力信息的信息。管理信息包括至少关于与和其它信息处理设备的通信相关的无线电波传播测量的信息(无线电波传播测量信息393)和作为关于其它信息处理设备的能力信息的、关于功耗的信息(待机或唤醒信息397)。保留在管理信息保留单元390中的管理信息包括作为关于其它信息处理设备的能力信息的、关于用于显示图像信息的显示形式的信息(显示形式396)。关于显示形式的信息是，例如，指示图像信息作为主信息或子信息被显示的信息。

如上所述，由于信宿设备侧管理与源设备相关的信息，因此有可能显示由信宿设备可检测的与源设备相关的信息(例如，终端标识信息391或源设备的名称)。另外，有可能与源设备的显示屏关联地显示由信宿设备可检测的与源设备相关的信息(例如，终端标识信息391或源设备的名称)。换句话说，控制单元370可以使源设备的图像与指示要在显示单元351上显示的该源设备的信息彼此关联。在这种情况下，通过使与源设备相关的信息(例如，终端标识信息或名称)在源设备的图像的一部分上(或附近)显示，有可能容易地检测用户和被用户提到的显示屏。因此，其他用户可以认识到可操纵的源设备。在这种情况下，例如，信宿设备可以按操纵被接收到的次序执行每个控制。

[图像的过渡例]

图5a示出了其中，通过将图像11设置为中间信道并将图像12设置为外围信道，图像11和12在信息处理设备300的显示单元351上显示的显示形式的例子。

图5b示出了其中，通过将图像11设置为外围信道并将图像12设置为中间信道，图像11和12在信息处理设备300的显示单元351上显示的显示形式的例子。

例如，假设其中信息处理设备200和400当中每一个向信息处理设备300发送具有标准分辨率的流(图像数据和音频数据)的情况。在这种情况下，如在图1中所示，基于来自信息处理设备200的图像数据的图像11和基于来自信息处理设备400的图像数据的图像12可以在信息处理设备300的显示单元351上显示，使得图像11和12的大小相同。在这个例子中，给定的分辨率和显示区域被定义为相同，但标尺功能可以被添加到显示单元351，使得图像11和12被重新缩放并在显示单元351上显示。但是，在本技术的实施例中，为了便于描述，假设这个功能未在描述中使用。

在图像11和12的显示形式中，例如，在先前通信时设置的显示形式可以被保留并且图像11和12可以根据该显示形式在信息处理设备300的显示单元351上显示。

图像11和12的显示形式可以基于到信息处理设备300的连接次序来决定。例如，假设其中信息处理设备200首先连接到信息处理设备300并且信息处理设备400在该连接之后连接到信息处理设备300的情况。在这种情况下，通过将图像11设置为中间信道并将图像12设置为外围信道，图像11和12在信息处理设备300的显示单元351上显示。即，基于到信息处理设备300的连接次序，图像可以在中间信道和外围信道的过程中被显示。

如图5a中所示，当通过将图像11设置为中间信道并将图像12设置为外围信道，图像11和12在显示单元351上显示时，用于将图像12设置为中间信道的用户信息被假设为由用户信息获取单元360获取。例如，当观众利用诸如遥控器或手势的指示方式执行将图像12设置为中间信道的操纵时，用于将图像12设置为中间信道的用户信息由用户信息获取单元360获取。在这种情况下，如图5b中所示，通过将图像12设置为中间信道并且将图像11设置为外围信道，图像11和12显示在显示单元351上。另外，显示单元351的显示表面上图像11和12的显示位置是基于由用户信息获取单元360获取的用户信息(例如，手动操纵或视线)决定的。

[通信例]

图6是示出根据本技术第一实施例、在通信系统100中包括的设备之间的通信过程例的序列图。图6示出了当通过能力协商(Capability Negotiation)在信息处理设备200(源设备)与信息处理设备300(信宿设备)之间执行对信息处理设备300(信宿设备)的显示位置的请求时的通信过程的例子。

例如，当每个请求在从信息处理设备200到信息处理设备300的能力协商的时候被执行时，信息处理设备300发送与其自己的信息处理设备相关的能力。例如，信息处理设备200向信息处理设备300发送确认请求(501和502)。确认请求被用来发送对于信息处理设备200的显示区域大小、对应于多个源的显示区域大小(但它不是传输分辨率)、信息处理设备200的显示位置(例如，坐标)和与显示图像的旋转相关的信息的请求，以及对与分辨率/音频质量/功耗性能相关的确认的请求。确认请求是一个例子，并且其它内容可以同时被请求。每条信息可同时被发送或者可以顺序地被发送。

当确认请求被接收时(502)，信息处理设备300向信息处理设备200发送确认响应(503和504)。确认响应被用来发送信息处理设备200的显示区域大小、对应于多个源的显示区域大小(但它不是传输分辨率)和信息处理设备200的显示位置的响应，以及显示屏的旋转信息和与分辨率/音频质量/功耗性能相关的确认的响应。确认响应是一个例子，并且其它内容可以同时作为响应被发送。

当确认响应被接收时(504)，信息处理设备200向信息处理设备300发送模式请求(包括显示位置的指定)(505和506)。因此，信息处理设备200可以为信息处理设备300指定显示位置。

当模式请求被接收时(506)，信息处理设备300向信息处理设备200发送模式设置完成通知(包括显示位置的指定)(507和508)。因此，信息处理设备200可以使图像在指定的显示位置显示。

当模式设置完成通知被接收时(508)，信息处理设备200向信息处理设备300发送充当显示对象的图像(图像数据)(509，510)。在这种情况下，信息处理设备200基于接收到的模式设置完成通知向信息处理设备300发送充当显示对象的图像(图像数据)。然后，信息处理设备300使接收到的图像在显示单元351上显示(511)。

如上所述，在源设备与信宿设备之间的能力的互换中，信宿设备可以请求显示区域大小、对应于多个源的显示区域大小(但它不是传输分辨率)、显示位置以及显示屏的旋转信息。因此，有可能实时地通知源设备有关信宿设备的显示位置，并且有可能从源设备控制该显示位置。换句话说，即使是在多源环境中，也有可能在适当的位置布置合适的显示窗口(源设备的图像显示区域)。

[通信例]

图7和8是示出包括在根据本技术第一实施例的通信系统100中的设备之间的通信过程例的序列图。图7和8示出了当图6中所示的互换在图1所示的拓扑结构中被执行时的通信例。

在图7和8中，包括在信息处理设备200中的单元当中的图像和音频信号生成单元250、图像和音频压缩单元260以及流发送单元270被示为数据发送系统201。天线210、无线通信单元220、控制信号接收单元230和控制单元240被示为线路控制系统202。甚至在信息处理设备400中，类似地，它们被示为数据发送系统401和线路控制系统402。

在图7和8中，信息处理设备300的配置中的天线310、无线通信单元320、流接收单元330、控制单元370和控制信号发送单元380被示为线路控制系统301。图像和音频解压单元340、图像和音频输出单元350以及用户信息获取单元360被示为输入和输出系统302。

首先，当信息处理设备300通电时，先前的显示形式(这是当信息处理设备300被断电时的显示形式)被设置为信息处理设备300的显示形式(这是图像显示形式和音频显示形式)(1001)。信息处理设备300的控制单元370使管理信息保留单元390保留利用无线通信(图4中所示)连接到信息处理设备300的每个源设备的管理信息。如图5中所示，信息处理设备300的控制单元370使显示单元351基于先前的显示形式显示对应于分别从信息处理设备200和400发送的两个流的图像11和12。

随后，假设其中用户执行设置显示形式的操纵(改变操纵)的情况(1002)。在这种情况下，与设置操纵相关的控制信号作为用户信息由用户信息获取单元360获取并且用户信息被输出到控制单元370。然后，控制单元370基于该用户信息改变保留在管理信息保留单元390(在图4中示出)中的内容(1003和1004)。例如，如图5b中所示，假设其中执行设置操纵(改变操纵)以便将基于来自信息处理设备200的图像数据的图像11设置为外围信道的情况。在这种情况下，控制单元370在管理信息保留单元390中将信息处理设备200的显示形式396(在图4中示出)改变为“SUB”(1003和1004)。

在从信息处理设备200到信息处理设备300的能力协商时，每个请求可以被发送，并且信息处理设备300可以发送与它自己的信息处理设备相关的能力。例如，信息处理设备200向信息处理设备300发送第一确认请求(1005和1006)。第一确认请求被用来请求信息处理设备200的显示区域大小、对应于多个源的显示区域大小(但它不是传输分辨率)、信息处理设备200的显示位置，以及与显示图像的旋转相关的信息。

当第一确认请求被接收时(1006)，信息处理设备300向信息处理设备200发送第一确认响应(1007至1010)。第一确认响应被用来发送信息处理设备200的显示区域大小、对应于多个源的显示区域大小(但它不是传输分辨率)、信息处理设备200的显示位置以及与显示图像的旋转相关的信息的响应。

当第一确认响应被接收时(1008)，信息处理设备200向信息处理设备300发送模式请求(包括显示位置的指定)(1011和1012)。因此，信息处理设备200可以为信息处理设备300指定显示位置。

当模式请求被接收时(1012)，信息处理设备300向信息处理设备200发送模式设置完成通知(包括显示位置的指定)(1013至1016)。因此，信息处理设备200可以使图像在指定的显示位置显示。

信息处理设备300可以被通电，并且信息处理设备300与信息处理设备400之间的互换可以被执行。在这种情况下，类似于过程(1001至1016)，过程(1017至1032)在信息处理设备300与信息处理设备400之间被执行。

第一确认请求和第一确认响应是一个例子，并且第一确认请求和第一确认响应可以同时互换，或者可以以不同的次序互换。另外，其它内容可以同时或顺序地被发送。

如图7和8中所示，存在多个源设备(信息处理设备200和信息处理设备400)将发送模式请求(图7中所示的模式请求(1011和1012)和图8中所示的模式请求(1027和1028))的可能性。在这种情况下，存在多个源设备将同时发送模式请求的可能性。在这方面，描述当同时(或者基本上同时)从多个源设备接收到模式请求时信宿设备的控制例。

例如，当从源设备接收到模式请求时，信宿设备(例如，信息处理设备300)可以根据显示单元的显示内容决定优先被处理的源设备的模式请求。在这种情况下，考虑下列两种类型的决定方法(R1)和(R2)：

(R1)其中信宿设备并行地从源设备接收模式请求并基于接收到的信息执行选择的方法；及

(R2)其中信宿设备捆绑从源设备发送的模式请求并利用ID将一批模式请求作为一条信息来管理的方法。

在方法(R1)中，信宿设备可以直接检测从源设备发送的模式请求。因此，信宿设备可以控制，使得从源设备发送的模式请求被打开或关闭。另外，信宿设备可以决定给予从某个源设备发送的模式请求的内容优先级。但是，在方法(R1)中，随着源设备数目的增加，信宿设备的处理负荷增加。

在方法(R2)中，信宿设备捆绑从多个源设备发送的模式请求，然后切换模式请求的内容。出于这个原因，信宿设备的处理负荷可被减少。但是，在方法(R2)中，从源设备发送的模式请求被捆绑，利用一个ID进行管理。因此，为了使信宿设备执行控制，使得从源设备发送的模式请求被打开或关闭，识别每个源设备的报头是必要的。

在这里，在图像传输标准中，常常由根据标准切换模式请求的内容的模式请求内容切换单元(在图9至14中示出)决定。为此，例如，考虑准备和管理用于传输控制协议(TCP)、用户数据报协议(UDP)和实时流协议(RTSP)以及WebSocket的端口。

[正向信道的开-关控制例]

图9示出了其中根据决定方法(R1)在一个信宿设备1100与多个源设备1211至1214之间执行模式请求的开-关控制的例子。换句话说，描述其中信宿设备1100为多个源设备1211至1214准备多个端口并且基于来自上层的请求和显示屏的状态选择源设备的例子。例如，信宿设备1100可以基于来自上层的关请求设置源设备的关操作。另外，例如，信宿设备1100可以基于信宿设备1100中显示屏的显示状态设置源设备的关操作。

源设备1211至1214当中每一个向信宿设备1100发送正向信道信息(例如，模式请求)(1215至1218)。

信宿设备1100包括显示控制单元1110和模式请求内容切换单元1120。显示控制单元1110和模式请求内容切换单元1120对应于图3中所示的流接收单元330和控制单元370。

显示控制单元1110基于要在显示单元上显示的图像(从源设备发送的图像)的显示位置决定来自要被执行切换的源设备的输入。显示控制单元1110通知模式请求内容切换单元1120所决定的内容(1111)。

显示控制单元1110基于显示位置决定来自被开启的源设备的输入和来自被关闭的源设备的输入。在信宿设备1100和源设备链接之后，停止操作、再现操作、断开操作、开始操作等等可以通过信宿设备1100与源设备之间的互换适当地执行。

显示控制单元1110可以通过忽略对源设备1211至1214的端口的正向信道信息来实现排他的控制。显示控制单元1110可以通过向端口输出传输停止消息来实现排他的控制。

模式请求内容切换单元1120基于由显示控制单元1110决定的内容切换并接收从源设备发送的正向信道信息，并将接收到的信息输出到显示控制单元1110。例如，模式请求内容切换单元1120仅接收从由显示控制单元1110决定的源设备发送的正向信道信息，并将该信息输出到显示控制单元1110。

图10示出了其中模式请求的开-关控制根据决定方法(R2)在一个信宿设备1300与多个源设备1211至1214之间执行的例子。换句话说，信宿设备1300为一批正向信道信息准备一个端口，并且基于插入分组中的ID报头管理源设备。源设备1211至1214与图9中所示的源设备1211至1214相同。

信宿设备1300包括显示控制单元1310、模式请求内容切换单元1320，以及公共输入切换单元1330。显示控制单元1310、模式请求内容切换单元1320和公共输入切换单元1330对应于图3中所示的流接收单元330和控制单元370。

显示控制单元1310基于要在显示单元上显示的图像(从源设备发送的图像)的显示位置决定来自要被执行切换的源设备的输入。显示控制单元1310通知模式请求内容切换单元1320所决定的内容(1311)。

显示控制单元1310基于显示位置决定来自被开启的源设备的输入和来自被关闭的源设备的输入。在信宿设备1300和源设备链接之后，停止操作、再现操作、断开操作、开始操作等等可以通过信宿设备1300与源设备之间的互换适当地执行。

模式请求内容切换单元1320基于由显示控制单元1310决定的内容接收从由公共输入切换单元1330切换的源设备发送的正向信道信息。然后，模式请求内容切换单元1320将接收到的信息输出到显示控制单元1310。

公共输入切换单元1330接收对应于预定标准的信息并将接收到的信息输出到模式请求内容切换单元1320。例如，公共输入切换单元1330接收，例如，每个源设备的ID信息以及控制数据。

公共输入切换单元1330基于事先决定的每个源设备的ID信息和从模式请求内容切换单元1320发送的请求执行关于来自被开启的源设备的输入与来自被关闭的源设备的输入的切换。

[UIBC的开-关控制例]

所述决定方法可以应用到UIBC。在这方面，UIBC的开-关控制例将在下面进行描述。

图11是示出根据本技术第一实施例当信宿设备执行UIBC的开-关控制时的配置例的图。

图11示出了其中UIBC的开-关控制根据决定方法(R1)在一个信宿设备1100与多个源设备1211至1214之间执行的例子。换句话说，其中信宿设备1100为多个源设备1211至1214准备多个端口并且基于来自上层的请求或显示屏的状态选择UIBC的例子。例如，信宿设备1100可以基于来自上层的关请求设置UIBC的关状态。另外，例如，信宿设备1100可以基于在信宿设备1100中的显示屏的显示状态设置UIBC的关状态。

源设备1211至1214当中每一个向信宿设备1100发送UIBC信息。信宿设备1100向源设备1211至1214当中每一个发送UIBC信息(1225至1228)。

显示控制单元1110基于要在显示单元上显示的图像(从源设备发送的图像)的显示位置决定来自要被执行切换的源设备的输入。显示控制单元1110通知模式请求内容切换单元1120所决定的内容(在1112)。

显示控制单元1110可以通过忽略对源设备1211至1214的端口的UIBC信息来实现排他的控制。显示控制单元1110可以通过向端口输出传输停止消息来实现排他的控制。

模式请求内容切换单元1120基于由显示控制单元1110决定的内容切换并接收从源设备发送的UIBC信息，并将接收到的信息输出到显示控制单元1110。例如，模式请求内容切换单元1120仅接收从由显示控制单元1110决定的源设备发送的UIBC信息，并将该信息输出到显示控制单元1110。

图12示出了其中UIBC的开-关控制根据决定方法(R2)在一个信宿设备1300与多个源设备1211至1214之间执行的例子。换句话说，信宿设备1300为一批UIBC信息准备一个端口，并且基于插入分组中的ID报头管理源设备。

显示控制单元1310基于要在显示单元上显示的图像(从源设备发送的图像)的显示位置决定来自要被执行切换的源设备的输入。显示控制单元1310通知模式请求内容切换单元1320所决定的内容(1312)。

模式请求内容切换单元1320基于由显示控制单元1310决定的内容接收从由公共输入切换单元1330切换的源设备发送的UIBC信息。然后，模式请求内容切换单元1320将接收到的信息输出到显示控制单元1310。

公共输入切换单元1330接收对应于预定标准的信息并将接收到的信息输出到模式请求内容切换单元1320。例如，公共输入切换单元1330接收，例如，每个源设备的ID信息以及控制数据。公共输入切换单元1330基于事先决定的每个源设备的ID信息和从模式请求内容切换单元1320发送的请求决定来自被开启的源设备的输入和来自被关闭的源设备的输入。例如，模式请求内容切换单元1320仅接收从由显示控制单元1310决定的源设备发送的UIBC信息，并将该信息输出到显示控制单元1310。

[在多信宿时UIBC的开-关控制例]

接下来，将描述当多个信宿设备与源设备连接时UIBC的开-关控制例。

图13是示出根据本技术的第一实施例、当信宿设备执行UIBC的开-关控制时的配置例的图。

图13示出了其中UIBC的开-关控制根据决定方法(R1)在多个信宿设备1501至1504与一个源设备1400之间执行的例子。换句话说，示出了其中源设备1400为多个信宿设备1501至1504准备多个端口并且基于来自上层的请求或显示屏上用户的操纵来选择UIBC的例子。例如，源设备1400可以基于来自上层的关请求执行对UIBC的关请求。另外，例如，源设备1400可以基于在信宿设备1100中的显示屏上的用户操纵执行对UIBC的关请求。

信宿设备1501至1504当中每一个向源设备1400发送UIBC信息(1505至1508)。

显示控制单元1410基于要在信宿设备1501至1504当中每一个的显示单元上显示的图像(从源设备发送的图像)的显示位置决定来自要被执行切换的信宿设备的输入。显示控制单元1110通知模式请求内容切换单元1420所决定的内容(在1411)。

显示控制单元1410基于显示位置决定来自被开启的信宿设备的输入和来自被关闭的信宿设备的输入。在源设备1400和信宿设备链接之后，停止操作、再现操作、断开操作、开始操作等等可以通过源设备1400与信宿设备之间的互换适当地执行。

显示控制单元1410可以通过忽略对信宿设备1501至1504的端口的UIBC信息来实现排他的控制。显示控制单元1410可以通过向端口输出传输停止消息来实现排他的控制。

模式请求内容切换单元1420基于由显示控制单元1410决定的内容切换并接收从信宿设备发送的UIBC信息，并将接收到的信息输出到显示控制单元1410。例如，模式请求内容切换单元1420仅接收从由显示控制单元14110决定的信宿设备发送的UIBC信息，并将该信息输出到显示控制单元1410。

图14示出了其中UIBC的开-关控制根据决定方法(R2)在多个信宿设备1501至1504与一个源设备1600之间执行的例子。换句话说，源设备1600为一批UIBC信息准备一个端口，并且基于插入分组中的ID报头管理信宿设备。

显示控制单元1610基于要在每个信宿设备的显示单元上显示的图像(从源设备发送的图像)的显示位置决定来自要被执行切换的信宿设备的输入。显示控制单元1610通知模式请求内容切换单元1620所决定的内容(1611)。

显示控制单元1610基于显示位置决定来自被开启的信宿设备的输入和来自被关闭的信宿设备的输入。在源设备1600和信宿设备链接之后，停止操作、再现操作、断开操作、开始操作等等可以通过源设备1600与信宿设备之间的互换适当地执行。

模式请求内容切换单元1620基于由显示控制单元1610决定的内容接收从由公共输入切换单元1630切换的信宿设备发送的UIBC信息。然后，模式请求内容切换单元1620将接收到的信息输出到显示控制单元1610(1611)。

公共输入切换单元1630接收对应于预定标准的信息并将接收到的信息输出到模式请求内容切换单元1620(1621)。例如，公共输入切换单元1630接收，例如，每个信宿设备的ID信息以及控制数据。公共输入切换单元1630基于事先决定的每个信宿设备的ID信息和从模式请求内容切换单元1620发送的请求决定来自被开启的信宿设备的输入和来自被关闭的信宿设备的输入。例如，模式请求内容切换单元1620仅接收从由显示控制单元1610决定的信宿设备发送的UIBC信息，并将该信息输出到显示控制单元1610。

如上所述，控制数据和UIBC信息可以在信宿设备与源设备之间互换。另外，例如，由于控制数据和UIBC信息可以在信宿设备与源设备之间高效地互换，因此，例如，有可能共享端口或使用WebSocket。在这方面，其中每条信息在源设备与信宿设备之间利用WebSocket互换的例子将参照图20和21进行描述。

本技术不限于这个例子。例如，在本技术的实施例中，已经描述了正向信道、控制数据和UIBC信息的开-关控制例，但本技术不限于此。例如，相同的开-关控制甚至可以在图18和19中所示的RTSP命令(播放/暂停、待机/恢复、IDR刷新请求，等等)中执行。协调操作也可以在设备之间执行，使得开-关控制在短时段内被执行，因此开-关控制不是从用户的角度被认识的。开-关控制可以是控制连接、断开、开始、停止、验证(接收)和失效(忽略)的技术。

例如，除源设备和信宿设备之外的其它设备(例如，显示位置控制客户端)可被添加，并且该设备可以通过信宿设备操纵源设备。这个例子在图15和16中示出。换句话说，图15和16示出了其中信息处理设备203(显示位置控制客户端)被添加并且信息处理设备203通过信息处理设备300(信宿设备)操纵信息处理设备200(源设备)的例子。

在这里，所添加的设备(除源设备和信宿设备之外的其它设备)可以是一个或多个输入设备，诸如键盘、鼠标、操纵杆或者可以以有线或无线方式与信宿设备连接。多个输入设备可以固定地或可拆卸地安装在信宿设备中。如上所述，当信宿设备包括多个输入设备时(例如，包括可拆卸的、有线或无线连接)。多个输入设备的操纵信息被包括在UIBC信息中并通过一个或多个信宿设备被发送。在这个时候，插入到UIBC信息的分组中的ID信息可以作为与多个输入设备相关的多条ID信息被插入。

[通信例]

图15和16是示出包括在根据本技术第一实施例的通信系统100中的设备之间的通信过程例的序列图。

图15和16示出了当除信息处理设备200(源设备)和信息处理设备300(信宿设备)之外的显示位置控制客户端(信息处理设备(源设备)203)检测信宿设备的显示位置时的通信过程的例子。显示位置控制客户端(信息处理设备203)是检测信息处理设备300(信宿设备)的显示位置并且使信息处理设备300(信宿设备)的显示位置图像在显示设备(未示出)上显示的控制客户端。例如，在信息处理设备300(信宿设备)上显示的每个图像的显示位置和大小在每个源设备的显示设备上显示。因此，源设备的用户可以辨别出每个图像。

在图15和16中，信息处理设备200中所包括的单元当中的图像和音频信号生成单元250、图像和音频压缩单元260以及流传输单元270被示为数据发送系统201。天线210、无线通信单元220、控制信号接收单元230以及控制单元240被示为线路控制系统202。

在图15和16中，在信息处理设备300的配置中的天线310、无线通信单元320、流接收单元330、控制单元370以及控制信号传输设备380被示为线路控制系统301。图像和音频解压缩单元340、图像和音频输出单元350以及用户信息获取单元360被示为输入和输出系统302。

首先，当信息处理设备300通电时，先前的显示形式(这是当信息处理设备300被断电时的显示形式)被设置为信息处理设备300的显示形式(这是图像显示形式和音频显示形式)(521)。信息处理设备300的控制单元370使管理信息保持单元390利用无线通信保持连接到信息处理设备300的每个源设备的管理信息(图4中示出)。如图5中所示，信息处理设备300的控制单元370使显示单元351基于先前的显示形式显示对应于分别从信息处理设备200和400发送的两个流的图像11和12。

随后，假设其中用户执行设置显示形式的操纵(改变操纵)的情况(522)。在这种情况下，与设置操纵相关的控制信号作为用户信息被用户信息获取单元360获取并且用户信息被输出到控制单元370。然后，控制单元370基于用户信息改变保留在管理信息保持单元390(在图4中示出)中的内容(523和524)。例如，如图5b中所示，假设其中设置操纵(改变操纵)被执行以将基于来自信息处理设备200的图像数据的图像11设置为外围信道的情况。在这种情况下，控制单元370将管理信息保持单元390中信息处理设备200的显示形式396(在图4中示出)改变成“SUB”(523和524)。

另外，在从信息处理设备200到信息处理设备300的能力协商的时间，每个请求可被执行，并且信息处理设备300可以发送与它自己的信息处理设备相关的能力。例如，信息处理设备200向信息处理设备300发送第一确认请求(525和526)。该第一确认请求被用来请求信息处理设备200的显示区域大小、对应于多个源的显示区域大小(但它不是传输分辨率)，以及信息处理设备200的显示位置。

当第一确认请求被接收时(526)，信息处理设备300向信息处理设备200发送第一确认响应(527至530)。第一确认响应被用来发送信息处理设备200的显示区域大小、对应于多个源的显示区域大小(但它不是传输分辨率)以及信息处理设备200的显示位置的响应。信息处理设备300向信息处理设备203发送第一确认响应(531和532)。在这种情况下，信息处理设备300可以在第一确认响应中包括除信息处理设备200之外的另一源设备的每条信息(另一源设备的显示区域大小、对应于多个源的显示区域大小，以及另一源设备的显示位置)并且将结果产生的第一确认响应发送到信息处理设备203。因此，信息处理设备203可以在信宿设备中快速检测每个源设备的显示位置。

信息处理设备200向信息处理设备300发送模式请求(包括显示位置的指定)(533，534)。因此，信息处理设备200可以为信息处理设备300指定显示位置。

当模式请求被接收时(534)，信息处理设备300向信息处理设备200发送模式设置完成通知(包括显示位置的指定)(535至538)。信息处理设备300向信息处理设备203发送模式设置完成通知(包括显示位置的指定)(539和540)。因此，信息处理设备203可以使图像在指定的显示位置显示。

信息处理设备200向信息处理设备300发送第二确认请求(541和542)。第二确认请求被用来请求与分辨率/音频质量/功耗性能相关的确认，并且例如，第一确认请求可以是Wi-Fi标准(例如，Wi-Fi认证的Miracast)的未来标准的操作，并且第二确认请求可以是目前Wi-Fi标准(例如，Wi-Fi认证的Miracast)中的操作。

当第二确认请求被接收时(542)，信息处理设备300向信息处理设备200发送第二确认响应(543和544)。第二确认响应被用来发送与分辨率/音频质量/功耗性能相关的确认的响应。

第一和第二确认请求以及第一和第二确认响应是一个例子，并且第一和第二确认请求以及第一和第二确认响应可以同时被互换，或者可以按不同的次序被互换。另外，其它内容可以同时或顺序地被发送。

当第二确认响应被接收时(544)，信息处理设备200的线路控制系统202向数据发送系统201输出模式设置(包括显示位置的指定)(545和546)。信息处理设备200的线路控制系统202向信息处理设备300发送模式设置(包括显示位置的指定)(547和548)。模式设置被用来执行与分辨率/音频质量/功耗性能相关的设置。

在这里，假设从信息处理设备200发送的图像的显示位置从中间画面(主画面)改变到外围画面(子画面)(549)。在这种情况下，在信息处理设备200中，执行用于改变到外围画面(子画面)的设置(550和551)。信息处理设备203显示在作为子画面的信息处理设备300中的显示位置的图像(信息处理设备200的图像)。信息处理设备203向信息处理设备300发送用于操纵信息处理设备200的显示位置的命令(显示位置操纵命令)(552和553)。

信息处理设备300从信息处理设备200接收流(554和555)，并使得基于流的图像在显示单元351上显示(556)。然后，当执行由显示位置操纵命令请求的、对显示位置的改变时，信息处理设备300执行设置改变，使得对信息处理设备300最佳的分辨率、音频和功耗被设置。另外，当由用户执行显示形式的设置操纵(改变操纵)时(557)，每个过程根据该设置操纵被执行(558和559)。然后，信息处理设备300向信息处理设备200和203发送用于执行设置改变的设置改变请求(560到563)。

信息处理设备300从信息处理设备200接收流(564和565)。

如上所述，有可能实时地通知源设备关于信宿设备的显示位置，并且有可能从源设备控制该显示位置。

在图15和16所示的例子中，多个源设备连接到信宿设备，但本技术的实施例不限于这个例子。例如，有可能甚至对应于其中仅一个源设备连接到信宿设备(信息处理设备300)的连接环境。

作为由信宿设备(信息处理设备300)显示的画面，信宿设备(信息处理设备300)可以接收和显示不仅从源设备(信息处理设备200)接收的图像而且还有从信宿设备(信息处理设备300)配备的另一连接线路接收的图像信息。例如，有可能甚至对应于当符合Hybridcast(混合广播)标准的信息处理设备被用作信宿设备时。例如，符合Hybridcast标准的设备(例如，视频观看设备)可以在从广播波接收图像(视频)的同时从通信线路接收辅助信息(包括运动图像)。在这点上，源设备(信息处理设备200)的图像可以在符合Hybridcast标准的环境的一部分中显示。这个例子将在本技术的第四实施例中描述。

另外，信息处理设备300可以执行控制，使得从信息处理设备200和400当中每一个发送的两个流的总数据传输速度被最小化。例如，该总数据传输速度的最大允许值在接收侧信息处理设备300的控制单元370中设置。在控制单元370发送用于降低到信息处理设备200的位速率的改变请求后，控制单元370从流接收单元330获取从信息处理设备200和400发送的两个流的位速率。随后，控制单元370计算所获取的两个流的总数据传输速度。随后，控制单元370决定在不大于所设置的最大允许值的范围内从信息处理设备400发送的流的位速率并且向信息处理设备400发送用于增加位速率的改变请求。当分组错误率(PER)大并且因此尽管设置了最小位速率但仍然在同一频率信道内不可接收时，可以使用不同的频率信道。当图像(中间信道和外围信道)暂停给定的时间或更多时，只要用户未执行操纵(例如，指向)，图像数据就可以被停止。

以这种方式，根据本技术的第一实施例，即使当信宿设备接收从多个源设备发送的多个流时，适当的流传输控制(例如，数据传输速度控制)也可以根据用户的操纵、情况和意图被执行。例如，有可能根据用户的操纵、情况和意图降低多个图像和音频流当中一些的数据传输速度并增加其余流的数据传输速度。

例如，当信宿设备接收和显示多个流时，由用户及时设置的具有高质量的重要图像和音频可以被享受。对于另外的图像和音频，数据传输速度可以自动被调整到最佳频率信道、功耗和传输率。另外，有可能在稳定地操作图像传输模式的同时实时地操纵连接控制。

在这里，对于保留在管理信息保留单元390中的管理信息，在Wi-Fi认证的Miracast中准备的命令可以被用于交换管理信息。在这种情况下，可以使用在Wi-FiDisplay规范中定义的能力协商或能力重新协商。在这里，能力协商或能力重新协商，例如，RFC5939或Wi-Fi认证的Miracast规范可以作为例证。但是，能力协商或能力重新协商不限于此，而是被定义为设备性能信息的互换。利用Wi-Fi认证的Miracast规范的命令的互换的通信例在图17至19中示出。

[利用Wi-Fi认证的Miracast规范命令进行互换的通信例]

图17至19是示出根据本技术第一实施例的源设备410与信宿设备420之间的通信过程例的序列图。图17至19示出了利用RTSP协议进行互换的通信例。源设备410对应于信息处理设备200和400并且信宿设备420对应于信息处理设备300。

首先，将参照图17进行描述。例如，如由图17的虚线矩形430指示的，可以使用从源设备410发送到信宿设备420的“RTSP M3请求”(RTSP GET_PARAMETER请求)消息和响应于“RTSP M3请求”(RTSP GET_PARAMETER请求)消息而从信宿设备420发送到源设备410的“RTSP M3响应”(RTSP GET_PARAMETER响应)消息。

另一方面，该消息可以适当地从源设备410向信宿设备420发送。例如，“RTSP M3请求”(RTSP GET_PARAMETER请求)消息和“RTSP M3响应”(RTSP GET_PARAMETER响应)消息的互换可以被省略，管理信息可以被包括在从源设备410向信宿设备420发送的消息中，管理信息可以从源设备410发送到信宿设备420，并且信宿设备可以选择信息并在管理信息保留单元390中保留该信息。例如，当内容保护设置被执行时，链路保护设置是在M3响应之后执行的。因此，期望通过只发送M4或更高的消息在确保链路的保密能力被设置一次的同时执行通信。

关于功耗模式的信息的互换可以利用RTSP协议利用预定的消息来执行。例如，以下(1)至(3)的三种管理信息可以被交换：

(1)“设置为待机模式，”

(2)“当源设备取消待机模式时或者当源设备取消信宿设备的待机模式时，”及

(3)“当信宿设备取消待机模式时或者当信宿设备取消源设备的待机模式时。”

现在，将参照图18进行描述。例如，当使用在Wi-Fi认证的Miracast中准备的命令时，从源设备410发送到信宿设备420的“RTSP M12请求”(RTSP SET_PARAMETER(具有WFD-待机))消息和响应于“RTSP M12请求”(RTSP SET_PARAMETER(具有WFD-待机))消息而从信宿设备420发送到源设备410的“RTSP M12响应”(RTSP OK)消息可以在如上所述(1)“设定为待机模式”的互换中使用。另一方面，这也适用于从信宿设备420到源设备410设置为待机模式。

接下来，将参照图19进行描述。例如，如上所述，(2)“当源设备取消待机模式时或者当源设备取消信宿设备的待机模式时”，源设备410互换发送到信宿设备420的“RTSP M5请求”(RTSP SET_PARAMETER(请求(wfd-trigger-method:PLAY))消息与响应于“RTSP M5请求”(RTSP SET_PARAMETER(请求((wfd-trigger-method:PLAY))消息从信宿设备420向源设备410发送的“RTSP M5响应”(RTSP OK)消息。信宿设备420可以使用发送到源设备410的“RTSP M7请求”(RTSP PLAY请求)消息和响应于“RTSP M7请求”(RTSP PLAY请求)消息而从源设备410发送到信宿设备420的“RTSP M7响应”(RTSP OK)消息。

例如，如上所述，(3)“当信宿设备取消待机模式时或者当信宿设备取消源设备的待机模式时，”信宿设备420可以使用发送到源设备410的“RTSP M7请求”(RTSP PLAY请求)消息和响应于“RTSP M7请求”(RTSP PLAY请求)消息而从源设备410发送到信宿设备420的“RTSP M7响应”(RTSP OK)消息。

以这种方式，无线通信单元320可以执行能力信息与在Wi-Fi Display规范中定义的能力协商或能力重新协商的交换。例如，能力信息与能力协商或能力重新协商中的RTSPM3消息交换。

以这种方式，例如，信息处理设备300的无线通信单元320执行与信息处理设备200的通信，以交换关于信息处理设备300的能力信息与关于信息处理设备200的能力信息。信息处理设备200的无线通信单元220执行与信息处理设备300的通信，以交换关于信息处理设备200的能力信息与关于信息处理设备300的能力信息。在这种情况下，无线通信单元220和320可以利用能力协商或能力重新协商交换能力信息。

信息处理设备300的控制单元370基于关于信息处理设备200的能力信息、关于与信息处理设备200的通信的无线电波传播测量信息以及信息处理设备300的使用来执行与信息处理设备200的流传输控制。流传输方法与本技术的实施例中不同，但是信息处理设备200的控制单元240还可以基于关于信息处理设备200的能力信息和关于与信息处理设备300的流通信的无线电波传播测量信息，基于从信息处理设备300执行的控制来与信息处理设备300执行流传输控制。

信息处理设备300的控制单元370执行控制，使得功耗模式在信息处理设备200中基于关于信息处理设备200的能力信息(例如，指示设备是否是移动设备的信息)来设置。在这种情况下，控制单元370可以执行控制，使得低功耗模式在信息处理设备200中基于关于信息处理设备200的能力信息和用于管理信息处理设备200的管理信息来设置。信息处理设备200的控制单元240基于关于信息处理设备200的能力信息基于从信息处理设备300执行的控制设置功耗模式。在本技术的实施例中，已经描述了其中两个源设备被使用的拓扑结构的例子，但是本技术的实施例不限于此。例如，当设备的数目为2或更多时，有必要控制对应于设备数目的数据传输速度控制并且状态转变是可考虑的。因此，控制是困难的，但是可以获得益处。有可能还对应于其中两个或更多个源设备被连接的拓扑结构。

[源设备与信宿设备之间利用WebSocket的通信例]

接下来，将描述其中每条信息在源设备与信宿设备之间利用WebSocket互换的例子。

在这里，WebSocket是通信标准，其中，如果在服务器与客户端之间曾经建立过一次连接，则数据互换可以通过套接字通信被执行，而不会意识到通信过程，除非明确地断开。在WebSocket中，在之间建立连接的服务器和所有客户端可以共享数据并且实时地执行发送和接收。换句话说，在WebSocket中，有可能维持端口，并且有可能实时地进行图像传输和音频传输。

在这里，在Wi-Fi认证的Miracast中，存在如上所述从信宿设备到源设备的UIBC。就像在从源设备到信宿设备的控制中那样，假设与控制线相关的请求在多个源或多个信宿的拓扑环境中增加。

在这方面，在本技术的第一实施例中，每条信息在源设备与信宿设备之间利用WebSocket互换。例如，在能力协商中，有可能互换用于在源设备与信宿设备之间设置WebSocket的每条信息并执行用于WebSocket的新的附加设置。

[分开设置UIBC和WebSocket的例子]

首先，将描述分开设置UIBC和WebSocket的例子。

[UIBC的设置例]

图20和21是示出根据本技术第一实施例在源设备410与信宿设备420之间的通信过程例的序列图。图20和21示出了用于在能力协商中设置UIBC的通信例(UIBC的设置例)。UIBC设置方法在Wi-Fi认证的Miracast标准中规定。

当UIBC被设置时，Wfd-uibc-Capability在源设备410与信宿设备420之间通过M3消息(RTSP GET_PARAMETER)互换。这个互换的目的是为了使源设备410能够确认信宿设备420中是否具有UIBC功能。

如在图20的a中所示出的，源设备410从信宿设备420接收信宿设备420的能力信息，并且通过M4消息向信宿设备420发送UIBC线路设置请求。代替通过M4消息发送该UIBC线路设置请求，连接请求可以在图像传输开始后通过M14消息被发送。当M14消息被发送时，不仅来自源设备410的请求还有从信宿设备420到源设备410的UIBC线路设置请求都可被执行。这个例子在图21的a中示出。

UIBC很难只通过M4/M14消息的互换被启用。出于这个原因，如在图20的b和图21的b中所示，在接收到对UIBC线路设置请求的响应之后M15消息被互换。因此，UIBC线路被启用。

[WebSocket的设置例]

图22和23是示出根据本技术第一实施例、在源设备410与信宿设备420之间的通信过程例的序列图。图22和23示出了用于在能力协商中设置WebSocket的通信例(WebSocket的设置例)。

当WebSocket被设置时，Wfd-websocket-Capability在源设备410与信宿设备420之间通过M3消息(RTSP GET_PARAMETER)被互换。这个互换的目的是为了使源设备410能够确认信宿设备420中是否具有WebSocket功能。

如在图22的a中所示出的，源设备410从信宿设备420接收信宿设备420的能力信息，并且通过M4消息向信宿设备420发送WebSocket线路设置请求。代替通过M4消息发送WebSocket线路设置请求，连接请求可以在图像传输开始之后通过M14消息被发送。当M14消息被发送时，不仅来自源设备410的请求还有从信宿设备420到源设备410的WebSocket线路设置请求都可被执行。这个例子在图23的a中示出。

WebSocket很难只通过M4/M14消息的互换被启用。出于这个原因，如在图22的b和图23的b中所示，在接收到对WebSocket线路设置请求的响应之后M15消息被互换。因此，WebSocket线路被启用。

[UIBC和WebSocket的设置例]

图24是示出根据本技术第一实施例、在源设备410与信宿设备420之间的通信过程例的序列图。图24示出了用于在能力协商中设置UIBC和WebSocket的通信例(UIBC和WebSocket的设置例)。

换句话说，图24示出了其中执行图20和21中所示的UIBC连接请求/响应以及图22和23中所示的WebSocket连接请求/响应的通信例。例如，wfd-websocket-Capability被定义为WebSocket线路，并且在源设备410与信宿设备420之间执行关于WebSocket线路是否被实现的能力协商。

另外，图24示出了其中用于WebSocket的端口号被设置为与用于UIBC的端口号不同的端口号的例子。如上所述，通过对WebSocket使用不同的端口，有可能使用UIBC和WebSocket二者的连接链路，并且有可能执行具有高实时特性的过程。

另外，图24示出了其中，当新命令和UIBC被指定为TCP上的不同端口时，该新命令和UIBC互换实时数据，并且因此UIBC和WebSocket被确定为不同类别的例子。

具体而言，Wfd-uibc-Capability在源设备410与信宿设备420之间通过M3消息(Req.GET_PARAMETER_REQUEST)被互换。另外，Wfd-websocket-Capability在源设备410与信宿设备420之间通过M3消息(Req.GET_PARAMETER_REQUEST)被互换。这个互换的目的是为了使源设备410确认信宿设备420中是否具有UIBC功能和WebSocket功能。

UIBC的能力和WebSocket的能力是通过M3消息(Res.GET_PARAMETER_RESPONSE)从信宿设备420发送到源设备410的。例如，当为UIBC指定“GENERIC(coordinates(坐标))”时，以下内容被发送：

wfd_uibc_capability:input_category_list＝GENERIC；

generic_cap_list＝Mouse,SingleTouch；

hidc_cap_list＝无；port＝无

另外，例如，当为UIBC指定“HIDC(USB)”时，以下内容被发送：

wfd_uibc_capability:input_category_list＝HIDC；

generic_cap_list＝无；

hidc_cap_list＝Mouse/BT,RemoteControl/Infrared；port＝无

例如，对于WebSocket，以下内容被发送：

wfd-websocket-capability＝

“wfd_websocket_capability:”SP(“无”/(input-category-val

“；xxxx；”tcp-port))CRLF；“无”如果不被支持

另外，用于指定UIBC和WebSocket的信息通过M4/M14消息(Req.GET_PARAMETER_REQUEST)从源设备410发送到信宿设备420。例如，当为UIBC指定“GENERIC(coordinates)”时，以下内容被发送。当该内容被发送时的帧格式的例子在图25中示出。

wfd_uibc_capability:input_category_list＝GENERIC；

generic_cap_list＝Mouse,SingleTouch；

hidc_cap_list＝无；port＝1000

wfd_uibc_setting:启用

例如，当为UIBC指定“HIDC(USB)”时，以下内容被发送：

wfd_uibc_capability:input_category_list＝HIDC；

generic_cap_list＝无；

hidc_cap_list＝Mouse/BT,RemoteControl/Infrared；port＝1000

wfd_uibc_setting:启用

例如，对于WebSocket，以下内容被发送：

wfd-websocket-capability:连接控制终端功能；

xxxx；

port＝8000

Wfd_websocket_setting:启用

在这里，例如，CTRL(例如，对应于在本技术第二实施例中描述过的(B1)至(B3))在“连接控制功能”中描述。

图25示出了通过M4/M14消息(Req.SET_PARAMETER_REQUEST)从源设备410发送到信宿设备420的UIBC的帧格式的例子。

[UIBC的帧格式例]

图25示出了根据本技术第一实施例、在源设备410与信宿设备420之间互换的UIBC的帧格式的例子。图25示出了当通用输入(Generic Input)被指定时UIBC的帧格式的例子。

图25的b示出了存储在图25的a中所示的字段“通用输入类型ID”中的内容。

图25的c示出了存储在图25的a的字段“描述”中的内容。

在上面的例子中，与UIBC的连接方法相同的方法被用作WebSocket的连接方法，但是与UIBC的连接方法不同的方法可被用作WebSocket的连接方法。另外，已经描述了利用诸如wfd-WebSocket-Capability的属性的定义的例子，但本技术不限于这个例子。例如，不同的属性可以被使用，只要它具有等效的功能就可以。

在图24中所示的例子中，与用于UIBC的端口号不同的端口号被设置为用于WebSocket的端口号，但相同的端口可设置给UIBC和WebSocket。在这方面，图26示出了其中UIBC和WebSocket通过相同的端口被操作的连接例。

[当为UIBC和WebSocket设置同一端口时UIBC和WebSocket的设置例]

图26是示出根据本技术第一实施例、在源设备410与信宿设备420之间的通信过程例的序列图。图26示出了用于在能力协商中设置UIBC和WebSocket的通信例(UIBC和WebSocket的设置例)。

例如，它可以通过扩展Wi-Fi认证的Miracast标准来实现。例如，“WebSocket”被添加到类别，诸如M3消息(Req.GET_PARAMETER_REQUEST)的输入类别(input-cat)。例如，信宿设备420可以在GENERIC、HIDC和WebSocket当中选择GENERIC。

在这种情况下，例如，以下内容作为M3消息(Res.GET_PARAMETER_RESPONSE)从信宿设备420发送到源设备410：

wfd_uibc_capability:input_category_list＝WebSocket；

generic_cap_list＝连接控制功能；

hidc_cap_list＝无；port＝无

在这个例子中，已经描述了对应于一个类别的例子，但也有可能同时对应于两个或更多个类别。

例如，以下内容作为M4/M14消息(Req.SET_PARAMETER_REQUEST)从源设备410发送到信宿设备420：

wfd_uibc_capability:input_category_list＝WebSocket；

generic_cap_list＝连接控制功能；

hidc_cap_list＝无；port＝1000

wfd_uibc_setting:启用

如上所述，有可能在TCP上指定用于UIBC和WebSocket的同一端口。

已经描述了其中当设置相同的端口时WebSocket被添加到输入类别的例子，但是本技术不限于这个例子。例如，它可以被设置为任何其它类别。能力协商可以被执行两次，而不是同时设置两个输入类别。

上面已经描述了其中连接方法根据为UIBC和WebSocket设置相同的端口还是为UIBC和WebSocket设置不同的端口而改变的例子。但是，从相同端口到不同端口(或者从不同端口到相同端口)的切换可以在连接的中间(或者在连接之后)执行。例如，在UIBC和WebSocket中执行同一端口的能力协商之后，到不同端口的切换可以在UIBC的使用频率高的时候被执行。图27示出了如上所述切换端口的例子。

[信息处理设备的(信宿设备)的操作例]

图27是示出根据本技术第一实施例、由信息处理设备300执行的端口设置过程的处理过程的例子的流程图。

首先，信息处理设备300的控制单元370开始与源设备的能力协商(步骤S801)。然后，控制单元370确定是否已经从源设备接收到对UIBC和WebSocket的请求(步骤S802)。当请求尚未被接收时(步骤S802)，端口设置过程的操作结束。

当已经从源设备接收到对UIBC和WebSocket的请求时(步骤S802)，控制单元370基于显示单元351的显示区域确认是否为UIBC和WebSocket设置相同的端口(步骤S803)。

当即使为UIBC和WebSocket设置相同的端口也没有问题时(步骤S804)，控制单元370基于该同一端口执行连接控制设置(步骤S805)。例如，用于为UIBC和WebSocket设置相同的端口的互换如图26中所示那样被执行。

当如果为UIBC和WebSocket设置相同的端口那么会出现问题时(步骤S804)，控制单元370基于不同的端口执行连接控制设置(步骤S806)。例如，用于为UIBC和WebSocket设置不同端口的互换如图24中所示那样被执行。

然后，控制单元370改变显示单元351的、用于显示从源设备发送的图像的显示形式(步骤S807)。然后，在改变显示形式之后，控制单元370确定是否存在其端口设置必须改变的源设备(步骤S808)。当不存在其端口设置必须改变的源设备时(步骤S808)，端口设置过程的操作结束。

当存在其端口设置必须改变的源设备时(步骤S808)，控制单元370执行控制，使得为源设备(其中UIBC和WebSocket被设置到相同的端口)设置不同的端口(步骤S809)。

然后，控制单元370确定端口的数目是否必须减少(步骤S810)。当端口数不需要减少时(步骤S810)，端口设置过程的操作结束。

当端口数必须减少时(步骤S810)，控制单元370执行控制，使得为其中UIBC和WebSocket被设置到不同的端口的源设备设置同一端口(步骤S811)。步骤S802至S811是在权利要求中阐述的控制过程设置的例子。

如上所述，信息处理设备300的无线通信单元320根据Wi-Fi认证的Miracast规范执行与源设备的实时图像传输。控制单元370执行控制，使得基于从源设备发送的图像信息的图像显示在显示单元351上，并且在多个通信方案(UIBC和WebSocket)中用于与源设备互换与图像相关的控制信息的端口被设置。在这种情况下，例如，当端口在信息处理设备300与源设备之间生成的TCP会话上设置时，控制单元370向源设备发送用于利用该端口指定多个通信方案的信息(例如，上面参照图24和25描述的信息)。

控制单元370可以为多个通信方案设置多个端口，作为用于多个通信方案的端口。在这种情况下，控制单元370可以根据从源设备发送的请求设置多个端口。

另外，控制单元370可以为多个通信方案设置一个端口，作为用于多个通信方案的端口。

控制单元370可以利用多个通信方案当中任何一个向源设备发送与显示单元351中的源设备的图像的显示形式相关的信息并且基于从源设备发送的控制信息改变显示的显示形式。控制信息是，例如，与用于改变在源设备中接收到的源设备图像的显示形式的操纵相关的操纵信息。

源设备侧可以执行相同的操作。例如，信息处理设备200的控制单元240向信宿设备发送用于使图像在信宿设备侧的显示单元上显示的图像信息。控制单元240可以执行控制，使得对多个通信方案用于与信宿设备互换与图像相关的控制信息的端口被设置。

在这里，例如，当为UIBC和WebSocket设置不同的端口时，有必要为每个源设备设置两条不同的链路。换句话说，必需的源设备的端口的数目被增加至二。出于这个原因，例如，当数万个源设备被连接到信宿设备时，难以分配端口。在这种情况下，系统的响应有可能会变糟。在这方面，在本技术的第一实施例中，一个或多个端口根据使用环境被适当地设置。

信宿设备可以将UIBC的控制信道切换到在连接的中间发送请求的源设备，以便基于从源设备发送的请求发送与信宿设备的显示位置相关的信息。源设备可以将UIBC的控制信道切换到在连接的中间发送请求的信宿设备，以便基于从信宿设备发送的操纵发送源设备的显示位置信息。

在这里，有可能利用WebSocket的控制线路发送和接收图像数据或音频数据，以及文本。在这方面，其中图像数据或音频数据利用WebSocket的控制线路被发送和接收的例子将在下面描述。

[图像数据和音频数据利用WebSocket的传输例]

图28是示出根据本技术第一实施例、在源设备410与信宿设备420之间利用WebSocket的图像数据或音频数据的通信例的图。图28的a示出了在源设备410与信宿设备420之间的通信过程例。图28的b和c示出了在源设备410与信宿设备420之间互换的WebSocket的帧格式的例子。

在图28所示的例子中，Wi-Fi认证的Miracast的源设备410充当WebSocket的客户端，而信宿设备420充当WebSocket的服务器。

例如，源设备410向信宿设备420发送Host、Sec-WebSocket-Key和Sec-WebSocket-Version(441)。Host被用来指定WebSocket的连接目的地。Sec-WebSocket-Key被用来获得握手响应。Sec-WebSocket-Version被用来指定WebSocket的版本。

信宿设备420基于从源设备410接收的Sec-WebSocket-Key的值生成Sec-WebSocket-Accept的值。然后，信宿设备420向源设备410发送所生成的Sec-WebSocket-Accept(442)。在这里，Sec-WebSocket-Accept被用来维持与客户端的连接。

源设备410向信宿设备发送在图28的b中所示的帧格式(441)。在该帧格式中，充当发送对象的数据可以由WebSocket类型ID指定。WebSocket类型ID的例子在图28的c中示出。

另外，图像数据或音频数据在源设备410与信宿设备420之间作为WebSocket的二进制数据被互换(443)。

例如，当FIN为0x0时，它指示有效载荷继续，并且因此信宿设备420执行与紧挨着的前面的数据的连接。另外，当FIN为0x1时，它是指示有效载荷的结束的标志，并且因此信宿设备420处理有效载荷。

例如，RSV是扩展位。

例如，当opcode为0x0时，它指示有效载荷继续，并且信宿设备420执行与紧挨着前面的数据的连接。另外，当opcode为0x1时，它指示有效载荷是文本，并且当opcode为0x2时，它指示有效载荷是二进制的。

例如，MASK是指示消息是否是编码消息的位。从源设备410到信宿设备420的消息必然是编码消息。

如上所述，当使用opcode的二进制值时，图像数据或音频数据可以在源设备410与信宿设备420之间作为WebSocket的二进制数据被互换。换句话说，图像数据和音频数据可以利用WebSocket标准格式被发送。因此，先前的认证可以利用图像数据或音频数据来执行。另外，有可能对应于各种类型的其它用例。

在根据Wi-Fi认证的Miracast标准执行图像传输的同时，图像数据和音频数据可以在源设备与信宿设备之间利用WebSocket执行。

如上所述，信息处理设备300的控制单元370可以利用WebSocket获取从源设备发送的图像信息和音频信息。控制单元370可以使基于图像信息的图像在显示单元351上显示并且使基于音频信息的声音从音频输出单元352输出。

如上所述，在本技术的第一实施例中，信宿设备可以执行所有源设备的连接控制终端管理，并且从所有源设备接收连接控制操纵。例如，有可能甚至对应于其中，由于传输频带的限制，所有源设备被禁止进入图像传输模式的环境。换句话说，在其中从多个源设备发送的图像在信宿设备侧的显示单元上显示的环境中，有可能稳定地操作图像传输模式并执行实时连接控制操纵。

当从多个源设备发送的图像在一个信宿设备上显示时，有可能实时地通知源设备关于信宿设备中图像的显示位置，并且源设备可以控制该显示位置。另外，有可能利用UIBC和WebSocket互换与显示位置相关的信息。

因此，通过减少源设备的无用过程并且在信宿设备中执行这些过程，源设备的负担可以减小。有可能通过使用UIBC和WebSocket二者的连接链路来执行具有高实时特性的过程。例如，甚至在其中源设备的数量大的环境中，也有可能降低信宿设备的负担并执行位置信息过程和UIBC传输过程。

如上所述，与源设备相关的信息和源设备的图像可以彼此关联地在信宿设备侧的显示单元上显示。在这种情况下，有可能根据从源设备发送的请求按请求被接收的次序执行操纵。

<2.第二实施例>

在本技术的第二实施例中，将描述其中源设备与信宿设备之间经由接入点的连接和源设备与信宿设备之间的直接连接被切换(或同时使用)的例子。

[通信系统的配置例]

通信系统600包括接入点601、网络602、信息处理设备603、604、610、620和630，显示设备631，以及控制设备640。

接入点601是无线LAN(例如，Wi-Fi)的接入点。例如，接入点601具有IEEE 802.11标准的基础设施模式的功能。接入点601被连接到一个或多个信息处理设备(例如，发送侧信息处理设备(源设备)和接收侧信息处理设备(信宿设备))。

接入点601可以经由有线线路(例如，以太网(注册商标))与信息处理设备630连接。例如，接入点601可以经由网络602与信息处理设备630连接。接入点601可以与信息处理设备630的内部总线连接并执行过程。信息处理设备630的内部总线的例子包括通用串行总线(USB)、外围组件互连(PCI)和PCI Express。接入点601与信息处理设备630之间的连接可以是有线连接或无线连接(例如，无线LAN)。例如，在无线LAN的情况下，网络602被连接到信息处理设备630，并且信息处理设备630必须确定发送/接收过程是与接入点601的发送/接收过程还是与信息处理设备610的发送/接收过程。

在本技术的第二实施例中，将描述其中接入点601和信息处理设备603、604、610和620利用无线LAN(例如，无线LAN对应于IEEE 802.11a/b/g/n/ac/ad)连接的例子。将描述其中接入点601和信息处理设备630经由以太网线路连接的例子。

另外，将描述其中信息处理设备603、604、610和620被假设为发送侧信息处理设备(源设备)并且信息处理设备630被假设为接收侧信息处理设备(信宿设备)的例子。信息处理设备603、604、610和620对应于图2中所示的信息处理设备200，并且信息处理设备630对应于图3中所示的信息处理设备300。在下面的描述中，信息处理设备610将作为源设备被主要描述，并且描述类似地适用于信息处理设备603、604和620。

信息处理设备610是发送图像的发送侧信息处理设备(源设备)。信息处理设备610是可以在基础设施模式中与接入点601连接的信息处理设备。

在这里，将描述其中信息处理设备610在基础设施模式中与接入点601建立连接的连接例。信息处理设备610响应于从接入点601发送的信标信号而向接入点601发送连接请求信号。如上所述，信息处理设备610通过发送连接请求信号来开始用于与接入点601建立连接的操作(连接建立操作)。

连接建立操作是链接层2的层级(level)的操作。例如，除在无线LAN中执行的利用分组标识(PID)的密码认证之外，确定信息处理设备610是否作为应用被连接的连接认证过程也是必要的。

信息处理设备610可以通过P2P直接通信(例如，Wi-Fi Direct)与信息处理设备630建立连接。例如，信息处理设备610具有能够通过WiFi Direct与信息处理设备630建立连接并且启用诸如Wi-Fi认证的Miracast或数字生活网络联盟(DLNA)的图像通信的协议。

信息处理设备610可以是与接入点601建立连接并且经由接入点601与信息处理设备630互换各种信息的低速图像和音频传输设备(待机设备)。另外，当信息处理设备610仅被用作低速图像和音频传输设备时，信息处理设备610可以不具有能够启用高速图像音频传输的协议。

信息处理设备630具有用于与接入点601、信息处理设备603、604、610和620或控制设备640建立连接的通信功能。信息处理设备630具有与接入点601、信息处理设备603、604、610和620以及控制设备640建立连接并控制所有协议的功能。信息处理设备630具有与专用LAN或全局LAN建立连接的通信功能。

在这里，稳定化信息处理设备630与信息处理设备603、604、610和620之间的连接是重要的。因此，期望使用与接入点601所使用的无线电频率不同的频率用于信息处理设备630与信息处理设备603、604、610和620之间的连接。在本技术的第二实施例中，将描述其中诸如IEEE 802.11a/b/g/n/ac/ad的2.4GHz、5GHz或60GHz的频带被使用的例子。在这里，可以使用任何其它的无线标准或任何其它的频带。

信息处理设备630具有显示图像的显示功能。显示功能是执行电视或投影仪的画面显示的功能。信息处理设备630可以使图像在信息处理设备630配备的显示单元上显示或者可以使图像在外部显示设备上显示。在本技术的第二实施例中，将描述其中与信息处理设备630分开的显示设备631被安装的例子。

当与信息处理设备630分开的显示设备631如上所述被安装时，信息处理设备630和显示设备631可以通过有线连接或无线连接被连接。例如，当信息处理设备630和显示设备631通过有线连接被连接时，该连接可以利用有线电缆建立(例如，高清晰度多媒体接口(HDMI)(注册商标)、移动高清链路(MHL)、DisplayPort，或USB3.0)。另外，例如，当信息处理设备630和显示设备631通过无线连接被连接时，该连接可以利用无线LAN建立。多个显示设备可以连接到信息处理设备630。

控制设备640是管理包括在通信系统600中的信息处理设备(信息处理设备603、604、610、620和630)并且检测和控制信息处理设备的连接与显示状态的连接控制设备。例如，控制设备640管理并检测与信息处理设备相关的信息(例如，终端标识信息和能力信息)以及信息处理设备的操作状态(例如，通信模式和组参与状态)。控制设备640利用无线通信与信息处理设备630连接。例如，信息处理设备630所支持的通信方案(例如，无线LAN)可被用作无线通信。红外线方案、任何其它无线方案，或有线线路可被使用。控制设备640可以具有用于与接入点601建立连接并经由接入点601与信息处理设备630建立连接的协议。

例如，控制设备640可以通过检测信息处理设备是否正在参与组还是已经离开组来管理信息处理设备。参与组的每个源设备执行，例如，以功耗不受影响的水平向接入点601或信息处理设备630发送命令的过程。当命令被直接地或经由接入点601间接地接收时，信息处理设备630通知控制设备640与从其接收到命令的源设备相关的信息。因此，控制设备640可以确认源设备是否已经离开组。

例如，控制设备640使对应于参与组的源设备的图像(例如，图标)显示在输入和输出单元643上。例如，控制设备640确认参与组的源设备是否已经离开组，并且当检测到已经离开组的源设备时，控制设备640从输入和输出单元643删除对应于已经离开组的源设备的图像(例如，图标)。例如，当从某个信息处理设备发送的命令被确定为在预定的时间段内没有接收到时，控制设备640确定信息处理设备已经离开组。然后，控制设备640从输入和输出单元643删除对应于已经离开组的信息处理设备的图像(例如，图标)。

控制设备640可以使对应于参与组的信息处理设备的图像(例如，图标)根据信息处理设备存在于的位置显示在输入和输出单元643上。例如，每个信息处理设备的位置信息(例如，纬度和经度)可以被获取，并且信息处理设备的绝对位置可以基于该位置信息来决定。有可能基于如上所述决定的信息处理设备的位置来决定信息处理设备的相对位置并且安排学生。信息处理设备可以例如利用全球定位系统(GPS)获取位置信息。

例如，信息处理设备的相对位置可以利用无线电波来检测。例如，信息处理设备630可以从多个信息处理设备获取无线电波强度并且基于无线电波强度利用三角测量技术获取关于其它信息处理设备的相对位置(自身的信息处理设备的位置)。控制设备640可以获取如上所述获得的相对位置并且布置信息处理设备的图像。

描述其中控制设备640管理连接到信息处理设备630的一个或多个信息处理设备并且在控制设备640的输入和输出单元643上显示指示信息处理设备的图像的例子。但是，连接到信息处理设备630的一个或多个信息处理设备可以由信息处理设备630管理，并且指示信息处理设备的图像可以在信息处理设备630的显示单元或显示设备631上显示。

[源设备的通信模式的切换例]

在这里，将描述当源设备的通信模式(低速图像和音频传输模式(待机模式)，以及高速图像音频传输模式)被切换时的切换方法。

例如，以下(B1)至(B3)可以被用作用于源设备的通信模式的切换的触发器：

(B1)利用源设备的切换(例如，根据使用源设备的用户的操纵的主动切换)；

(B2)利用控制设备的切换(例如，根据使用控制设备640的用户的操纵的切换(远程操纵切换))；及

(B3)利用信宿设备的切换(例如，根据使用信宿设备(或与之相连的显示设备631)的用户的操纵的切换)。

每个设备当中用户的操纵(切换操纵)是，例如，用户利用每个设备配备的操纵接收单元(例如，操纵构件或触摸面板)的操纵或者用户利用每个设备配备的用户信息获取单元(例如，检测手势的检测单元)的操纵。

在(B1)中，例如，应用的操纵输入或事先安装在源设备中的操纵构件可被用作切换触发器。例如，当切换操纵在源设备中执行时，与通信模式的切换相关的命令被发送到信宿设备(信息处理设备630)。当命令被接收时，信宿设备(信息处理设备630)执行控制，使得，在执行对其它频带的控制的同时，发送该命令的源设备的频带增加或减小。信宿设备(信息处理设备630)向控制设备640发送指示发送该命令的源设备的通信模式被切换的信息。在这种情况下，控制设备640可以(通过显示器或音频输出)输出指示通信模式已切换的通知信息。

在(B2)中，例如，信宿设备(信息处理设备630)中用户的操纵可以被用作切换触发器。例如，当源设备的切换操纵在信宿设备(信息处理设备630)中执行时，执行控制，使得，在执行对其它频带的控制的同时，其中已执行切换操纵的源设备的频带增加或减小。信宿设备(信息处理设备630)向控制设备640发送指示其中已执行切换操纵的源设备的通信模式已被切换的信息。在这种情况下，类似于(B1)的情况，控制设备640可以输出指示通信模式已被切换的通知信息。

在(B3)中，例如，控制设备640中用户的操纵可被用作切换触发器。例如，当源设备的切换操纵在控制设备640中执行时，与在其中已执行切换操纵的源设备相关的信息(例如，终端标识信息)被发送到信宿设备(信息处理设备630)。当信息被接收时，信宿设备(信息处理设备630)执行控制，使得，在执行对其它频带的控制的同时，在其中已执行切换操纵的源设备的频带增加或减小。

控制设备640如上所述管理连接到控制设备640的设备。控制设备640确认每个设备是否已经离开组，并且当存在已离开组的设备时，控制设备640从输入和输出单元643删除对应于已脱离其自身的信息处理设备的控制的设备的图像(例如，图标)。

在这里，将描述控制设备640中用户的操纵。例如，控制设备640使对应于参与组的信息处理设备的图像(例如，图标)在输入和输出单元643上显示，因此图像根据信息处理设备存在于的位置被布置。在这种情况下，被设置为低速图像音频传输模式的信息处理设备被假设要执行到高速图像音频传输模式(外围信道)的切换。在这种情况下，执行将对应于充当切换对象的信息处理设备的图像移动到第一区域(例如，呈现区域)的操纵。例如，执行拖放操纵。因此，被设置为低速图像音频传输模式的信息处理设备可被切换到高速图像音频传输模式(外围信道)。

另外，例如，被设置为高速图像音频传输模式(中间信道或外围信道)的信息处理设备被假设要执行到低速图像音频传输模式的切换。在这种情况下，执行将对应于充当切换对象的信息处理设备的图像移动到第二区域(例如，待机区域)的操纵。例如，执行拖放操纵。因此，被设置为高速图像音频传输模式(中间信道或外围信道)的信息处理设备可被切换到低速图像音频传输模式。

类似于(B1)和(B2)的情况，控制设备640可以输出指示通信模式已被切换的通知信息。

控制设备640可以使指示信息处理设备的图像根据通信模式具有不同的显示状态。例如，指示被设置为高速图像音频传输模式(中间信道)的信息处理设备的图像的轮廓由粗线指示，并且指示被设置为高速图像音频传输模式(外围信道)的信息处理设备的图像的轮廓由细线指示。被设置为低速图像音频传输模式的信息处理设备可以由虚线指示。作为另一个例子，指示被设置为高速图像音频传输模式(中间信道)的信息处理设备的图像的颜色是红色，并且指示被设置为高速图像音频传输模式(外围信道)的信息处理设备的图像的颜色是蓝色。另外，指示被设置为低速图像音频传输模式的信息处理设备的图像的颜色可以是白色。

在本技术的第二实施例中，经由接入点间接地连接源设备与信宿设备的连接方案如上所述在低速图像音频传输模式中被采用。在高速图像音频传输模式中，采用直接连接源设备与信宿设备而没有接入点的介入的连接方案。

[信息处理设备(源设备)的操作例]

图30是示出由根据本技术第二实施例的信息处理设备610执行的数据发送过程的处理过程的例子的流程图。

图30示出了其中源设备(信息处理设备610)直接连接到接入点，然后缺省地开始每个过程的例子。换句话说，信息处理设备610激活事先安装的应用，并经由特定的接入点(接入点601)向信宿设备发送连接请求。另外，图30示出了其中源设备(信息处理设备610)连接到充当信宿设备的信息处理设备630并连接到充当特定接入点的接入点601的例子。

首先，信息处理设备610激活用于与信宿设备(信息处理设备630)执行通信的应用(步骤S821)。在激活后，充当连接对象的信宿设备(信息处理设备630)被选择(步骤S821)。

然后，信息处理设备610的控制单元经由接入点601(AP)向信息处理设备630发送连接请求(步骤S822)。然后，信息处理设备610的控制单元确定连接许可信息是否已经由接入点601从信息处理设备630接收(步骤S823)。当连接许可信息还未从信息处理设备630接收时(步骤S823)，数据发送过程的操作结束。在这种情况下，数据传输过程的操作可以在连接许可信息未在预定时段内被接收到时结束。

当连接许可信息已经从信息处理设备630接收到时(步骤S823)，信息处理设备610的控制单元经由接入点601向信息处理设备630发送信息处理装置610的能力信息(步骤S824)。

然后，信息处理设备610的控制单元确定设置请求信息是否已经经由接入点601从信息处理设备630接收(步骤S825)。当设置请求信息还未接收到时(步骤S825)，它被持续地监视。

当设置请求信息已接收到时(步骤S825)，在信息处理设备610中，待机模式被设置为初始状态。然后，信息处理设备610的控制单元确定待机模式是否已被设置(步骤S826)。然后，当待机模式已经在信息处理设备610中被设置时(步骤S826)，它被持续地监视。

当待机模式未被设置时(当图像传输模式已被设置时)(步骤S826)，信息处理设备610的控制单元确定信息处理设备610是否已经离开组(步骤S827)。在这里，当信息处理设备610已经离开组时，例如，当信息处理设备610已经移动到接入点的无线电波和信宿设备都无法到达的地点时，可以执行离开组的用户操纵。用户的这种操纵可以是，例如，按下离开按钮的操纵(例如，按压操纵构件的操纵或按压触摸面板的操纵)。假设用户的操纵在信息处理设备610、另一源设备、信宿设备和控制设备640当中任何一个中执行。

然后，当信息处理设备610已经离开组时(步骤S827)，数据发送过程的操作结束。当信息处理设备610还未离开组时(步骤S827)，信息处理设备610的控制单元断开经由接入点601与信息处理设备630的连接(步骤S828)。

然后，信息处理设备610的控制单元执行P2P连接过程，用于执行与信息处理设备630的直接连接(步骤S829)。在P2P连接过程完成之后(步骤S829)，信息处理设备610的控制单元基于从信息处理设备630接收到的设置请求信息向信息处理设备630发送连接请求(步骤S830)。

然后，信息处理设备610的控制单元确定指示用于对应于连接请求的图像的接收的许可的确认信息是否已经从信息处理设备630发送(步骤S831)。当确认信息还未从信息处理设备630发送时(步骤S831)，它被持续地监视。

当确认信息已从信息处理设备630发送时(步骤S831)，信息处理设备610的控制单元开始与信息处理设备630的直接P2P连接(步骤S832)。然后，信息处理设备610的控制单元基于对应于接收到的确认信息的连接请求与信息处理设备630执行图像参数和音频参数的协商，并发送图像数据(步骤S833)。

然后，信息处理设备610的控制单元确定图像传输模式是否已被设置(步骤S834)。然后，当图像传输模式已经在信息处理设备610中被设置时(步骤S834)，过程返回到步骤S833。

当图像传输模式还未设置时(当待机模式已被设置时)(步骤S834)，信息处理设备610的控制单元确定线路是否已经断开(步骤S835)。例如，当信息处理设备610已经离开组时，与接入点601或信息处理设备630的线路断开。然后，当线路已经断开时(步骤S835)，数据发送过程的操作结束。

当线路没有断开时(步骤S835)，信息处理设备610的控制单元断开与信息处理设备630的直接连接(步骤S836)。然后，信息处理设备610的控制单元开始与接入点601的连接(步骤S837)。

如上所述，信息处理设备610根据Wi-Fi认证的Miracast规范执行与信息处理设备630的实时图像传输。信息处理设备610的控制单元执行控制，使得经由接入点601从信息处理设备630接收用于使信息处理设备610执行与实时图像传输相关的设置的设置请求信息。另外，信息处理设备610的控制单元执行控制，使得用于基于设置请求信息执行设置的设置请求通过与信息处理设备630的直接通信被发送到信息处理设备630。设置请求信息是基于在信息处理设备610与信息处理设备610之间经由接入点601互换的(与信息处理设备610相关的)能力信息而生成的。

另外，当连接状态被切换时，信息处理设备610的控制单元可以执行控制，使得连接过程利用与切换之前的连接相关的端口信息和IP信息当中至少一个被执行。连接状态的切换是从经由接入点601与信息处理设备630的连接状态切换到通过直接通信与信息处理设备630的连接状态，或者反向切换。

在图像传输模式(外围信道)中，信息处理设备610的控制单元执行控制，使得要显示在显示设备631中的外围信道区域上的图像通过低频带的无线传输路径被发送。在图像传输模式(外围信道)中，信息处理设备610的控制单元执行控制，使得要在显示设备631中的中间信道区域上显示的图像通过高频带的无线传输路径被发送。

信息处理设备610的控制单元执行控制，使得设置请求基于任何一个设备中用户的操纵通过直接通信被发送到信息处理设备630。作为替代，信息处理设备610的控制单元执行控制，使得设置请求按预定次序(例如，在外围信道区域并排显示的图像的次序)通过直接通信被发送到信息处理设备630。

信息处理设备630的控制单元执行控制，使得用于使信息处理设备610执行与实时图像传输相关的设置的设置请求信息经由接入点601被发送到信息处理设备610。另外，信息处理设备630的控制单元执行控制，使得通过与信息处理设备610的直接通信从信息处理设备610接收用于基于设置请求信息执行设置的设置请求。

当接入点与直接连接之间的切换如上所述被执行时，切换时段可被缩短。例如，在其中对多个源设备执行频带控制的环境，基础设施环境，以及Wi-Fi Direct(或Wi-Fi认证的Miracast)环境中，切换时段可被缩短。因此，可以提供无缝连接切换。

在多源环境中，有可能设置连接次序并共享高质量图像的图像信息，同时使多个源设备参与组。例如，有可能通知信宿设备(或控制设备)参与基础设施环境的源设备。在WiFi Direct(或Wi-Fi认证的Miracast)环境中，有可能通过与基础设施环境中的频率信道不同的频率信道通过直接通信来执行图像传输。因此，即使当多个源设备连接到单个显示设备(信宿设备)时，也能执行稳定的图像通信。另外，即使当由于无线频带限制而几乎没有任何源设备被切换到图像传输模式时，所有的连接也可以稳定地建立。

随着组中连接设备的数量增加，连接控制的开销增加，频带利用效率恶化，并且因此难以稳定地执行图像传输。另一方面，在本技术的实施例中，有可能提供即使在其中所连接设备的数目大的环境中也能够执行稳定的图像传输的通信系统。换句话说，在本技术的实施例中，有可能当通信在多个信息处理设备之间执行时执行适当的控制。

在这里，信宿设备可以在其中包括WebSocket的服务器并执行所连接设备的状态管理。例如，当待机模式被设置时，WebSocket可以经由接入点通过用于所连接设备的状态管理所必需的WebSocket的连接线被操作。另外，当图像传输模式被设置时，WebSocket可以在Wi-Fi认证的Miracast上操作。通过这些操作，即使当WebSocket的客户端执行切换时，诸如上述(1)至(3)，切换信息也被实时地传送到信宿设备。信宿设备可以将管理结果实时地返回到WebSocket的客户端(源设备)。

[其中与除最初连接的接入点之外的公共线路的连接可以被建立的例子]

在上面的例子中，当源设备连接到信宿设备时，执行经由接入点与信宿设备的连接或者与信宿设备的直接连接。在这里，在源设备是便携式信息处理设备(例如，智能电话或平板终端)的时候，使用源设备的用户可以移动。在这种情况下，例如，使用源设备的用户也可能移动到在其中难以与接入点建立连接的地点。在这种情况下，用户可能期望持续地执行与信宿设备的连接。在这方面，将描述其中使用源设备的用户移动到在其中难以与接入点建立连接的地点的例子。

[信息处理设备(源设备)的操作例]

图31和32当中每一个是示出由根据本技术第二实施例的信息处理设备610执行的数据发送过程的处理过程的例子的流程图。

[信息处理设备(源设备)的操作例]

图31和32示出了其中，缺省地，在源设备(信息处理设备610)直接连接到接入点之后源设备(信息处理设备710)开始每个过程并且还可以连接到除该接入点之外的公共线路的例子。图31和32中所示的例子是图30的修改例，并且与图30公共的部分的描述被部分地省略。

首先，应用被激活(步骤S841)，并且连接请求经由接入点601(AP)被发送到信息处理设备630(步骤S842)。然后，信息处理设备610的控制单元确定连接许可信息是否已经经由接入点601从信息处理设备630接收(步骤S843)。当连接许可信息还未从信息处理设备630接收到时(步骤S823)，数据发送过程的操作结束。步骤S841至S843对应于图30中所示的步骤S821到S823。

当连接许可信息已经从信息处理设备630接收到时(步骤S843)，信息处理设备610的控制单元确定用于给予在室外使用的许可的信息(室外使用信息)是否包括在连接许可信息中(步骤S844)。室外使用信息是指示经由除接入点601或基站之外的其它接入点与信息处理设备630的连接是否被允许的许可信息。另外，当信息处理设备630响应于经由接入点601(AP)接收的连接请求而发送连接许可信息时，信息处理设备630从控制设备640获取室外使用信息(许可或不许可)，在连接许可信息中包括所获取的室外使用信息(许可或不许可)，并发送结果所得的连接许可信息。另外，虽然“许可”被存储为室外使用信息，但是，当它是与被设置为可用的组参与时间的时区不同的时区时，信息处理设备630在连接许可信息中包括不许可的室外使用信息并且发送结果所得的连接许可信息。换句话说，控制设备640可以执行调度(日程管理)，管理被调度的参与时间，并且只在该时区内允许室外使用。室外使用信息可以包括在能力信息中并从信宿设备向源设备发送。

另外，当许可的室外使用信息被包括在连接许可信息中并发送时，信息处理设备630在连接许可信息中包括用于在接入点601的无线电波无法到达的地点使用公共网络的设置信息。

在这个例子中，对于室外使用的许可或不许可被事先设置，但是许可或不许可可以在每次存在来自源设备的连接请求时在每个设备中设置。例如，用于设置许可或不许可的操纵可以利用其它源设备(例如，信息处理设备603、604和620)、信宿设备(信息处理设备630)以及控制设备640当中至少一个来执行。

例如，信息处理设备630可以使用于选择许可或不许可的显示画面在控制设备640的输入和输出单元643上显示，并且接收在显示画面上执行的许可或不许可的选择操纵。

另外，例如，信息处理设备630可以使用于选择许可或不许可的显示画面在显示设备631的显示单元632上显示并且利用显示画面接收许可或不许可的选择操纵。例如，许可或不许可的选择操纵可以通过利用操纵构件的操纵输入或基于手势的操纵输入来接收。

另外，例如，信息处理设备630使用于选择许可或不许可的显示画面(例如，弹出)在另一源设备(例如，信息处理设备620)的显示单元621上显示。然后，信息处理设备630可以接收在显示画面上执行的许可或不许可的选择操纵。

如上所述，许可或不许可可以在每次存在来自源设备的连接请求时被设置。因此，例如，即使当保密性或重要性程度不同时，许可或不许可也可以适当地设置。

在这个例子中，信宿设备充当组认证服务器，并且执行确定信宿设备是否给予室外使用的许可的管理。但是，与源设备关联地管理室外使用的许可和不许可的管理设备(例如，管理服务器)可以重新安装，并且确定是否给予室外使用的许可的管理可以通过管理设备来执行。

当用于给予室外使用的许可的室外使用信息被包括在连接许可信息中时(步骤S844)，信息处理设备610的控制单元使指示室外使用的信息被允许在显示单元611上显示(步骤S845)。例如，指示在同一楼层内(接入点601的无线电波达到的范围)的使用和室外使用被允许的信息可以以弹出方式显示，并且可以向用户通知它。

然后，信息处理设备610中的控制单元经由接入点601向信息处理设备630发送与信息处理设备610相关的能力信息以及公共网络服务信息(步骤S846)。在这里，公共网络服务信息是使得信息处理设备610能够使用公共网络服务的信息，并且包括，例如，连接目的地电话号码(信息处理设备610的电话号码)、认证密码，等等。

然后，信息处理设备610的控制单元执行通信过程(步骤S847)。在通信过程中，执行图30中示出的过程(步骤S825至S837)。

然后，信息处理设备610的控制单元确定用户是否已经移动到接入点601的无线电波传送范围之外(步骤S848)。然后，当用户还没有移动到接入点601的无线电波传送范围之外时(步骤S848)，过程返回到步骤S847。

当用户已经移动到接入点601的无线电波传送范围之外时(步骤S848)，信息处理设备610的控制单元确认用户是否持续地期望室外使用(步骤S849)。例如，用户可以执行断开与信宿设备的连接的操作(例如，通信结束操纵)。因此，确认用户是否持续地期望室外使用。

例如，信息处理设备610的控制单元使包括指示用户已经移动到接入点601的无线电波传送范围之外的信息和用于选择用户是否期望持续的室外使用的选择按钮的弹出画面在显示单元611上显示。然后，信息处理设备610的控制单元确定用于选择持续的室外使用的选择按钮是否在弹出画面上被按下(步骤S849)。换句话说，信息处理设备610的控制单元确定在移动之后的地点的持续使用是否已被选择(步骤S849)。当在移动之后的地点的持续使用还未被选择时(步骤S849)，数据发送过程的操作结束。

如上所述，当用于给出对室外使用的许可的室外使用信息(许可信息)已被接收到时，信息处理设备610的控制单元执行控制，使得经由除接入点601或基站之外的接入点与信息处理设备630的互换被执行。在这种情况下，信息处理设备610的控制单元可以执行控制，使得图像数据和音频数据当中至少一个经由除接入点601或基站之外的接入点从信息处理设备630接收并输出。

在这个例子中，持续室外使用的确认是在每次检测到移动到接入点601的无线电波传送范围之外时执行的，但持续室外使用的存在或不存在可以被事先设置。通过以上所述事先设置持续室外使用的存在或不存在，在同一楼层内的使用与室外使用之间的切换可以无缝地自动执行。

当在移动后的地点的持续使用被选择时(步骤S849)，信息处理设备630经由安装在移动后的地点的基站执行连接过程(步骤S850)。例如，信息处理设备630的控制单元确定信息处理设备610是否已经移动到接入点601的无线电波传送范围之外。然后，当信息处理设备610已经移动到接入点601的无线电波传送范围之外时，信息处理设备630的控制单元经由安装在移动后的地点的基站执行用于与信息处理设备610建立连接的连接过程。例如，当电话号码包括在从信息处理设备610接收的公共线路服务信息中时，信息处理设备630的控制单元经由基于该电话号码的公共网络发起对信息处理设备610的呼叫。然后，信息处理设备610的控制单元经由该公共网络执行与信息处理设备630的连接过程。

在这里，当用户已经移动到接入点601的无线电波传送范围之外时，拥有信息处理设备610的用户不能观看显示设备631的显示单元632并且从显示设备631输出的音频可能几乎听不见。在这方面，信息处理设备630执行用于确认信息处理设备610是否可以在与信息处理设备610的连接经由公共网络建立的时间点接收图像和音频的互换。然后，信息处理设备630确定信息处理设备610是否可以接收图像和音频二者或者任一个。

基于确定结果，信息处理设备630执行与信息处理设备610的数据通信(图像数据和音频数据)。换句话说，信息处理设备610的控制单元经由公共网络执行与信息处理设备630的数据通信(图像数据和音频数据)。在数据通信中，双向互换在信息处理设备610与信息处理设备630之间执行。

例如，信息处理设备630的控制单元发送在显示设备631的显示单元632上显示的显示画面和从显示设备631输出的音频当中至少一个。在室外地点的情况下，可能难以观看在信息处理设备610的显示单元611上显示的显示画面。在这种情况下，只有音频可以被发送。要发送的数据可被配置为由信息处理设备610的用户修改。

另外，当双向数据互换在信息处理设备610与信息处理设备630之间执行时，信息处理设备630可以确认经由公共网络到信息处理设备610的传输路径(例如，频带或通信状态)。然后，信息处理设备630可以基于确认结果将数据切换成被发送。例如，当确保了大容量传输路径时，信息处理设备630发送图像数据和音频数据两者。另外，例如，当大容量传输路径没有被确保时，信息处理设备630通过代码转换减少图像数据的量或者仅发送音频数据。

然后，信息处理设备610的控制单元确定经由公共网络与信息处理设备630的连接是否被持续地使用(步骤S852)。例如，信息处理设备610的控制单元使用于选择经由公共网络与信息处理设备630的连接是否被持续使用的显示画面在显示单元611上(始终或定期)显示。然后，基于在显示画面中的选择操纵，信息处理设备610的控制单元可以确定经由公共网络与信息处理设备630的连接是否被持续使用。

当经由公共网络与信息处理设备630的连接被持续使用时(步骤S852)，过程返回到步骤S851。当经由公共网络与信息处理设备630的连接不被持续使用时(步骤S852)，信息处理设备610的控制单元断开经由公共网络与信息处理设备630的连接(步骤S853)。

当指示室外使用不被允许的室外使用信息被包括在连接许可信息中时(步骤S844)，信息处理设备610的控制单元使指示室外使用不被允许的信息在显示单元611上显示(步骤S854)。

然后，信息处理设备610的控制单元经由接入点601向信息处理设备630发送与信息处理设备610相关的能力信息(步骤S855)。

然后，信息处理设备610的控制单元执行通信过程(步骤S856)。在通信过程中，执行图30中示出的过程(步骤S825至S837)。

然后，信息处理设备610的控制单元确定用户是否已经移动到接入点601的无线电波传送范围之外(步骤S857)。然后，当用户还没有移动到接入点601的无线电波传送范围之外时(步骤S857)，过程返回到步骤S856。当用户已经移动到接入点601的无线电波传送范围之外时(步骤S857)，过程前进到步骤S853。

如上所述，当信宿设备和多个源设备共享信息时，该信息可以被互换，而不考虑源设备的位置。例如，即使当拥有信息处理设备610的学生已经移动到接入点601的无线电波到达范围605之外时，信息处理设备610也可以经由基站连接到信息处理设备630。例如，学生可以从在其中给出演示的教室移动到实验室或大学以外的地点。另外，例如，当通信系统600被安装在办公室中时，推销员可以走出在其中给出演示的会议室。在这种情况下，推销员可以在外面(例如，在火车上)收听会议的细节。

在图31和32中所示的例子中，基于WebSocket的管理不限于接入点和Wi-Fi认证的Miracast，并且甚至可以在利用公共线路的切换中被执行。例如，当使用公共线路时，可以是在公共线路上执行基于WebSocket的管理。

<3.第三实施例>

在本技术的第二实施例中，已经描述了其中源设备通过用户的操纵或用户的操作连接到信宿设备或接入点的例子。

在这里，源设备可以利用无线LAN连接到接入点或信宿设备，然后该连接可以被断开。在这种情况下，即使在连接被断开之后，无线LAN的连接设置也可以存储在源设备中。在这种情况下，即使拥有源设备的用户不执行用于连接的设置操纵等等，源设备也可以自动连接到接入点或信宿设备。

在这方面，在本技术的第三实施例中，将描述其中源设备被自动连接到接入点或信宿设备的例子。在其中源设备自动连接到接入点或信宿设备的环境中，可以存在连接到各种信宿设备的多个接入点。因此，通过持续地维护源设备通过软移交(handover)到多个接入点的连接，这种环境得以实现。

首先，将描述其中源设备自动地连接到接入点的例子。例如，假设其中它被持续地自动连接到专用无线LAN的情况。

[信息处理设备(源设备)的操作例]

图33是示出由根据本技术第三实施例的信息处理设备610执行的数据发送过程的处理过程的例子的流程图。图33中所示的例子是图30的修改例，与图30公共的部分用相同的标号表示，并且因此其描述被部分地省略。

首先，信息处理设备610被自动移交并连接到安装在信息处理设备610所在地点的接入点(步骤S861)。例如，拥有信息处理设备610的用户可以移动到特定的楼层去参与组。在这种环境中，信息处理设备610激活应用(步骤S862)。在激活之后，信息处理设备610的控制单元对期望要连接的信宿设备尝试设备发现过程。

对应于被激活的应用的多个信宿设备可以通过设备发现过程被发现。在这种情况下，用于从多个被发现的信宿设备中选择期望的信宿设备的选择画面可以在信息处理设备610的显示单元611上显示，并且期望的信宿设备可以通过用户的操纵在选择画面上被选择(步骤S863)。多个被发现的信宿设备中最靠近源设备的设备可以被自动选择并连接(步骤S863)。

接下来，将描述其中源设备自动连接到信宿设备和接入点的例子。例如，假设信宿设备的连接设置存储在源设备中，并且假设源设备移动到信宿设备的无线电波到达范围内并自动连接到该信宿设备。

[信息处理设备(源设备)的操作例]

图34是示出由根据本技术的第三实施例的信息处理设备610执行的数据发送过程的处理过程的例子的流程图。图34中所示的例子是图30的修改例，与图30公共的部分用相同的标号表示，并且因此其描述被部分地省略。

首先，信息处理设备610的控制单元确定信息处理设备610是否具有并发功能(时分并发功能或同时使用并发功能)作为无线LAN功能(步骤S871)。当信息处理设备610具有并发功能时，信息处理设备610可以与接入点和信宿设备二者都建立时分连接或同时连接，而无需执行接入点和信宿设备的断开切换。

当信息处理设备610具有并发功能时(步骤S871)，信息处理设备610的控制单元通过自动连接执行至层3的设置(至IP地址的获取的设置)(步骤S872)。然后，信息处理设备610的控制单元进行经由接入点与信宿设备建立连接的尝试(步骤S873)。在这里，当与信宿设备的连接基于经由接入点的连接和直接P2P连接二者的链路建立时，期望设备发现过程仅通过经由接入点的连接和直接P2P连接当中的一个来执行。例如，优先级可以赋予经由接入点的连接，可以只为直接P2P连接维持链路连接，并且根据Wi-Fi认证的Miracast的图像发送可以被停止。在这种情况下，在图像传输模式中，高速操作可以在下一个切换时段期间被执行，而不浪费在Wi-Fi认证的Miracast中使用的频带。

当信息处理设备610不具有并发功能时(步骤S871)，信息处理设备610的控制单元确认与信宿设备的连接状态(步骤S874)。在这里，例如，当与信宿设备的连接是直接P2P连接时，直接P2P连接首先被断开，并且执行到经由接入点的连接的切换。另外，当与信宿设备的连接是经由接入点的连接时，连接被维持。另外，当信息处理设备610不具有并发功能时，连接状态的端口信息和IP信息保留在信息处理设备710中并被转移(diverted)。

然后，信息处理设备610的控制单元经由接入点执行设备发现过程(步骤S875)。在设备发现过程之后，信息处理设备610的控制单元确定连接许可信息是否已经经由接入点从信宿设备接收(步骤S876)。

在这里，在其中参与的设备的数目小的环境中，直接P2P连接可以维持不变。在这种情况下，当连接许可信息已经由接入点从信宿设备接收到时(步骤S876)，过程前进到步骤S828。

如上所述，能够适当地检测当前设置信息，而无需用户担心连接设置。另外，有可能执行关联，使得与本技术第二实施例中相同的操作被执行。

如上所述，即使在设备连接管理中，由于经由接入点的线路持续被连接，因此也没有必要基于接入点与Wi-Fi认证的Miracast之间的WebSocket切换管理。因此，有可能持续地通过经由接入点的链路执行管理。

<4.第四实施例>

本技术的第一至第三实施例已经联系其中多个源设备与一个信宿设备连接的例子进行了描述。但是，即使当一个源设备与多个信宿设备连接时，本技术的第一至第三实施例也可以应用。另外，即使当多个源设备与多个信宿设备连接时，本技术的第一至第三实施例也可以应用。

在这方面，本技术的第四实施例将联系其中一个源设备与多个信宿设备连接的例子进行描述。

[通信系统的配置例]

通信系统700包括互联网701、基站702和703、成像设备704和705、接收器710，以及信息处理设备720和730。

基站702和703是使接收器710以及信息处理设备720和730能够利用无线通信被连接到互联网701的基站。

成像设备704和705是拍摄被摄对象并生成图像数据的成像设备。成像设备704和705可以经由互联网701将生成的图像数据发送到接收器710以及信息处理设备720和730。

接收器710是从每个广播站接收广播波并显示图像(立体图像或平面图像)的电视接收器(例如，具有视频录制功能的电视接收器)。接收器710被假设为能够提供其中广播和通信融合为混合广播的显示环境的信息处理设备。

接收器710可以利用无线通信向信息处理设备720和730发送各种图像(例如，从外部设备输入的图像、基于广播波的图像、存储在内部存储单元中的图像，以及显示在显示单元711上的图像)。

接收器710被假设为发送侧信息处理设备(源设备)，并且信息处理设备720和730被假设为接收侧信息处理设备(信宿设备)。接收器710被假设为对应于图2中所示的信息处理设备200，并且信息处理设备720和730被假设为对应于图3中所示的信息处理设备300。

例如，信息处理设备720可以接收经由基站702从成像设备704和705发送的图像数据(例如，通过拍摄风景所获得的图像数据)，并使基于每条图像数据的图像被显示在显示单元721上。类似地，信息处理设备730可以接收经由基站702从成像设备704和705发送的图像数据(例如，通过拍摄风景所获得的图像数据)，并使基于每条图像数据的图像被显示在显示单元731上。

接收器710可以使基于从每个广播站接收的广播波的图像被显示在显示单元711上。接收器710可以向信息处理设备720和730发送基于从每个广播站接收的广播波的图像数据。在这种情况下，信息处理设备720和730可以使基于广播波的图像分别显示在显示单元721和731上。

由于版权问题，基于广播波的图像不能同时显示在源设备和信宿设备上。在这方面，当源设备(接收器710)发送基于广播波的图像数据以便在信宿设备(信息处理设备720和730)上显示时，图像在被发送之前从源设备擦除。防止另一图像覆盖到在信宿设备上显示的图像(基于广播波的图像)上。

基于广播波的图像可以是对应于高带宽数字内容保护系统(HDCP)的图像。出于这个原因，当基于广播波的图像(HDCP使用图像)在显示单元721上显示时，信息处理设备720使另一图像不会交叠基于广播波的图像。例如，信息处理设备720使得从成像设备704和705发送的图像不会覆盖在基于广播波的图像(HDCP使用图像)上并且被显示。

另外，当从一个源设备发送的图像显示在多个信宿设备上时，类似于本技术的第一至第三实施例，有可能实时地通知信宿设备关于源设备的显示位置并且从信宿设备控制该显示位置。例如，当从接收器710发送的图像在信息处理设备720和730上显示时，有可能通知信息处理设备720和730关于接收器710的显示位置并且从信息处理设备720和730控制该显示位置。

例如，信息处理设备720和730可以设置期望的图像并从接收器710获取该图像。例如，假设信息处理设备720设置关键字信息(例如，日本国家足球队)。在这种情况下，与关键字信息(例如，日本国家足球队)相关的图像在接收器710中被提取，并且提取出的图像被从接收器710发送到信息处理设备720。然后，与关键字信息(例如，日本国家足球队)相关的图像可以在信息处理设备720的显示单元721上显示。

[当非显示区域被通知时的操作例]

如上所述，防止另一图像交叠HDCP使用图像。在这方面，将描述其中不交叠另一图像的区域(非显示区域)被决定并报告给另一设备的例子。

首先，将描述多信宿环境中源设备的操作例。

图36是示出由根据本技术的第四实施例的接收器710(源设备)执行的非显示区域通知过程的处理过程的例子的流程图。

首先，接收器710的控制单元检测该新参与的信宿设备是否具有能够在连接到接收器710的信宿设备的能力协商的时候解码HDCP作为连接信息的能力(步骤S881)。

然后，接收器710的控制单元执行控制，使得，当新参与的信宿设备在能力协商时解码并显示HDCP时，除接收器710的图像之外的另一图像不被覆盖(步骤S882)。

然后，接收器710的控制单元基于能力信息确定HDCP是否用于接收器710与信宿设备之间的连接(步骤S883)。当HDCP不用于接收器710与信宿设备之间的连接时(步骤S883)，过程返回到步骤S881。

当HDCP被用于接收器710与信宿设备之间的连接时(步骤S883)，接收器710的控制单元决定其中防止从多个源设备接收的图像被显示为交叠的区域(非显示区域)(步骤S884)。

然后，接收器710的控制单元确定是否存在连接到接收器710的另一信宿设备(步骤S885)。当存在连接到接收器710的另一信宿设备时(步骤S885)，过程返回到步骤S881。

当存在连接到接收器710的另一信宿设备时(步骤S885)，接收器710的控制单元通知该信宿设备所决定的非显示区域(步骤S886)。

接下来，将描述多源环境中信宿设备的操作例。这个操作例也将参照图36来描述。

首先，信息处理设备720的控制单元检测到新参与的源设备在连接到信息处理设备720的源设备的能力协商时使用HDCP作为连接信息(步骤S881)。

然后，当新参与的源设备在连接到信息处理设备720的源设备的能力协商时使用HDCP时，信息处理设备720的控制单元显示图像，而不交叠(步骤S882)。

然后，信息处理设备720的控制单元基于能力信息确定HDCP是否用于信息处理设备720与源设备之间的连接(步骤S883)。当HDCP不被用于信息处理设备720与源设备之间的连接时(步骤S883)，过程返回到步骤S881。

当HDCP用于信息处理设备720与源设备之间的连接时(步骤S883)，信息处理设备720的控制单元决定其中防止从多个源设备接收的图像被显示为交叠的区域(非显示区域)(步骤S884)。

然后，信息处理设备720的控制单元确定是否存在连接到信息处理设备720的另一源设备(步骤S885)。当存在连接到信息处理设备720的另一个源设备时(步骤S885)，过程返回到步骤S881。

当不存在连接到信息处理设备720的另一源设备时(步骤S885)，信息处理设备720的控制单元通知该源设备所决定的非显示区域(步骤S886)。

如上所述，当从一个源设备发送的图像在多个信宿设备上显示时，有可能实时地通知信宿设备关于该源设备的显示位置。因此，有可能从信宿设备控制该显示位置。

<5.应用例>

本公开内容的技术可以应用到各种产品。例如，信息处理设备200、300、400、603、604、610、620、630、720、730和接收器710可以被实现为移动终端，诸如智能电话、平板型个人计算机(PC)、笔记本PC、便携式游戏终端或数码相机，固定终端，诸如电视接收器套件、打印机、数字扫描仪或网络存储器，或车载终端，诸如汽车导航设备。此外，信息处理设备200、300、400、603、604、610、620、630、720、730和接收器710可以被实现为执行机器对机器(M2M)通信的终端(也称为机器型通信(MTC)终端)，诸如智能仪表、自动售货机、远程监视设备或销售点(POS)终端。此外，信息处理设备200、300、400、603、604、610、620、630、720、730和接收器710可以是安装在这些终端中的无线通信模块(例如，在一个管芯中配置的集成电路模块)。

[5-1.第一应用例]

图37是示出本公开内容的技术可以应用到其的智能电话900的示意性配置的例子的框图。智能电话900包括处理器901、存储器902、储存器903、外部连接接口904、相机906、传感器907、麦克风908、输入设备909、显示设备910、扬声器911、无线通信接口913、天线开关914、天线915、总线917、电池918和辅助控制器919。

处理器901可以是，例如，中央处理单元(CPU)或片上系统(SoC)，并且控制智能电话900的应用层和另一层的功能。存储器902包括随机存取存储器(RAM)和只读存储器(ROM)，并且存储由处理器901执行的程序以及数据。储存器903可以包括诸如半导体存储器或硬盘的存储介质。外部连接接口904是用于将诸如存储卡或通用串行总线(USB)设备的外部设备连接到智能电话900的接口。

相机906包括诸如电荷耦合器件(CCD)和互补金属氧化物半导体(CMOS)的图像传感器，并且生成捕获的图像。传感器907可包括一组传感器，诸如测量传感器、陀螺仪传感器、地磁传感器和加速度传感器。麦克风908将输入到智能电话900的声音转换成音频信号。输入设备909包括，例如，被配置为检测显示设备910上的触摸的触摸传感器、小键盘、键盘、按钮或开关，并且接收从用户输入的操作或信息。显示设备910包括诸如液晶显示器(LCD)和有机发光二极管(OLED)显示器的屏幕，并且显示智能电话900的输出图像。扬声器911将从智能电话900输出的音频信号转换成声音。

无线通信接口913支持一种或多种无线LAN标准，诸如IEEE802.11a、11b、11g、11n、11ac和11ad，以执行无线通信。无线通信接口913可以经由基础设施模式中的无线LAN接入点与另一设备进行通信。此外，无线通信接口913可以以特设模式或诸如Wi-Fi Direct等等的直接通信模式直接与另一设备进行通信。在Wi-Fi Direct中，不像特设模式，两个终端之一作为接入点操作，但是通信直接在终端之间执行。无线通信接口913通常可以包括基带处理器、射频(RF)电路以及功率放大器。无线通信接口913可以是一芯片模块，其中存储通信控制程序的存储器和执行该程序的处理器以及相关电路集成在一起。除无线LAN方案之外，无线通信接口913可以支持其它类型的无线通信方案，诸如近场无线通信方案、邻近无线通信方案或蜂窝通信方案。天线开关914在包括在无线通信接口913中的多个电路(例如，用于不同无线通信方案的电路)之间切换天线915的连接目的地。天线915具有单个或多个天线元件(例如，构成MIMO天线的多个天线元件)，这些天线元件被无线通信接口913用于无线电信号的发送和接收。可以提供用于与符合IEEE 802.16、3GPP规范(例如，W-CDMA、GSM、WiMAX、WiMAX2、LTE和LTE-A)等的公共线路建立连接的无线通信接口功能，使得与公共线路的通信得以执行。

应当指出，智能电话900不限定于图46所示的例子，并且可以包括多个天线(例如，用于无线LAN的天线、用于接近性无线通信方案的天线、用于公共线路的天线，等等)。在这种情况下，天线开关914可以从智能电话900的结构中被省略。

总线917彼此连接处理器901、存储器902、储存器903、外部连接接口904、相机906、传感器907、麦克风908、输入设备909，显示设备910、扬声器911、无线通信接口913以及辅助控制器919。电池918经由馈线将电力提供给图46中示出的智能电话900的块，馈线在图中部分地作为虚线示出。辅助控制器919操作智能电话900的最低限度的必要功能，例如，在睡眠模式下。

在图37中所示的智能电话900中，利用图3描述的控制单元240和控制单元370可以由无线通信接口913实现。此外，这些功能中至少一些可以由处理器901或辅助控制器919实现。

通过在应用级通过处理器901执行接入点功能，智能电话900可以作为无线接入点(软件AP)来操作。无线通信接口913可以具有无线接入点功能。

[5-2.第二应用例]

图38是示出本公开内容的技术可以应用到其的汽车导航设备920的示意性配置的例子的框图。汽车导航设备920包括处理器921、存储器922、全球定位系统(GPS)模块924、传感器925、数据接口926、内容播放器927、存储介质接口928、输入设备929、显示设备930、扬声器931、无线通信接口933、天线开关934、天线935以及电池938。

处理器921可以是，例如，CPU或SoC，并且控制汽车导航设备920的导航功能和另一功能。存储器922包括RAM和ROM，并且存储由处理器921执行的程序以及数据。

GPS模块924使用从GPS卫星接收的GPS信号来测量汽车导航设备920的位置(诸如纬度、经度和高度)。传感器925可以包括一组传感器，诸如陀螺仪传感器、地磁传感器和空气压力传感器。数据接口926经由未示出的终端连接到，例如，车载网络941，并且获取由车辆生成的数据，诸如车辆速度数据。

内容播放器927再现插入到存储介质接口928的存储介质(诸如CD和DVD)中所存储的内容。输入设备929包括，例如，被配置为检测显示设备930的屏幕上的触摸的触摸传感器、按钮或开关，并且接收从用户输入的操作或信息。显示设备930包括诸如LCD或OLED显示器的屏幕，并且显示导航功能的图像或再现的内容。扬声器931输出导航功能的声音或者被再现的内容。

无线通信接口933支持一种或多种无线LAN标准，诸如IEEE802.11a、11b、11g、11n、11ac和11ad，以执行无线通信。无线通信接口933可以在基础设施模式下经由无线LAN接入点与另一设备进行通信。此外，无线通信接口933可以在特设模式或诸如Wi-Fi Direct的直接通信模式下直接与另一设备进行通信。无线通信接口933通常可以包括基带处理器、RF电路和功率放大器。无线通信接口933可以是一芯片模块，其中存储通信控制程序的存储器和执行该程序的处理器以及相关的电路集成在一起。除无线LAN方案之外，无线通信接口933可以支持其它类型的无线通信方案，诸如近场无线通信方案、邻近无线通信方案或蜂窝通信方案。天线开关934在无线通信接口933中所包括的多个电路之间切换天线935的连接目的地。天线935具有单个或多个天线元件，这些天线元件被无线通信接口933用于无线电信号的发送和接收。

此外，汽车导航设备920可以包括多个天线，并不限于图38所示的例子。在那种情况下，天线开关934可以从汽车导航设备920的配置中被省略。

电池938经由馈线将电力提供给图38中示出的汽车导航设备920的块，馈线在图中部分地作为虚线示出。电池938积累从车辆供给的电力。

在图38中所示的汽车导航设备920中，利用图2描述的控制单元240和利用图3描述的控制单元370可以通过无线通信接口933来实现。至少一部分功能也可以由处理器921实现。

本公开内容的技术也可以被实现为车载系统(或车辆)940，包括汽车导航设备920、车载网络941和车辆模块942的一个或多个块。车辆模块942生成车辆数据，诸如车辆速度、引擎速度和故障信息，并且将所生成的数据输出到车载网络941。

上述实施例是用于体现本技术的例子，并且实施例中的每个事实(matter)与权利要求中特定于公开内容的事实具有对应关系。同样地，在实施例中的事实和权利要求中由相同名字表示的特定于公开内容的事实彼此具有对应关系。但是，本技术不限于实施例，并且在不背离本技术的精神的情况下，实施例的各种修改可以在本技术的范围内体现。

在上述实施例中描述的处理序列可以作为具有一系列序列的方法被处理或者可以作为用于使计算机执行该系列序列的程序以及存储该程序的记录介质来处理。作为记录介质，可以使用硬盘、CD(致密盘)、MD(迷你盘)和DVD(数字多功能盘)、存储卡和Blu-ray盘(注册商标)。

本描述中所述的效果仅仅是例子，其效果不受限，并且可以有其它效果。

此外，本技术也可以如下配置。

(1)一种信息处理设备，包括：

无线通信单元，被配置为根据无线保真(Wi-Fi)认证的Miracast规范与至少一个信宿设备执行实时图像传输；及

控制单元，被配置为基于用于根据Wi-Fi认证的Miracast规范控制信息处理设备的控制信息执行与实时图像传输相关的控制，控制信息是从至少一个信宿设备接收的，

其中控制单元执行控制，使得用户输入返回信道(UIBC)的开-关切换在接收到多条控制信息时被执行，其中UIBC用于发送已经发送控制信息的信宿设备中的操纵信息。

(2)根据(1)的信息处理设备，

其中无线通信单元在信息处理设备与接收设备之间生成的传输控制协议(TCP)会话上接收控制信息。

(3)根据(1)或(2)的信息处理设备，

其中开-关切换的控制是连接、断开、开始、停止、验证和失效当中任何一个的控制。

(4)根据(3)的信息处理设备，

其中控制单元执行控制，使得UIBC对至少一个信宿设备当中的第一信宿设备被验证，并且UIBC对第二信宿设备失效。

(5)根据(4)的信息处理设备，

其中无线通信单元给出指示UIBC对于第一信宿设备被设置为有效的通知，并且给出指示UIBC对于第二信宿设备被设置为无效的通知。

(6)根据(5)的信息处理设备，

其中控制信息是GET_PARAMETER响应，及

通知作为SET_PARAMETER被发送。

(7)根据(3)的信息处理设备，

其中控制单元执行控制，使得UIBC对至少一个信宿设备当中的第一信宿设备被验证，并且UIBC对已经发送控制信息的信宿设备中除第一信宿设备的所有信宿设备失效。

(8)根据(1)至(7)中任何一项的信息处理设备，

其中无线通信单元接收与ID信息关联的多条操纵信息，作为UIBC信息，及

控制单元参照包括在ID信息中的ID报头来识别对应的操纵信息。

(9)根据(8)的信息处理设备，

其中至少一个信宿设备包括多个输入设备，及

多条操纵信息经由至少一个信宿设备从多个输入设备被发送。

(10)根据(8)或(9)的信息处理设备，

其中无线通信单元为一批多条UIBC信息设置一个端口，并且执行通信。

(11)根据(1)至(10)中任何一项的信息处理设备，

其中无线通信单元作为源设备执行通信。

(12)一种信息处理方法，包括：

根据无线保真(Wi-Fi)认证的Miracast规范与至少一个信宿设备执行实时图像传输的无线通信过程；及

基于用于根据Wi-Fi认证的Miracast规范控制信息处理设备的控制信息执行与实时图像传输相关的控制的控制过程，控制信息是从至少一个信宿设备接收的，

其中控制过程包括执行控制，使得用户输入返回信道(UIBC)的开-关切换在接收到多条控制信息时被执行，其中UIBC用于发送已经发送控制信息的信宿设备中的操纵信息。

(13)一种信息处理设备，包括：

无线通信单元，被配置为根据无线保真(Wi-Fi)认证的Miracast规范与至少一个源设备执行实时图像传输；及

显示单元，被配置为显示通过实时图像传输接收到的图像，

其中，当至少一个源设备当中的第一源设备与至少一个信宿设备执行实时图像传输时，无线通信单元从第一源设备接收与用于发送至少一个信宿设备当中的信息处理设备中的操纵信息的用户输入返回信道(UIBC)的打开或关闭相关的控制信息。

此外，本技术还可以如下配置。

(C1)一种信息处理设备，包括：

无线通信单元，被配置为根据无线保真(Wi-Fi)认证的Miracast规范与另一信息处理设备执行实时图像传输；及

控制单元，被配置为执行控制，使得基于从所述另一信息处理设备发送的图像信息的图像在显示单元上显示，并且用于多个通信方案的用来与所述另一信息处理设备互换与该图像相关的控制信息的端口被设置。

(C2)根据(C1)的信息处理设备，

其中，当端口在所述信息处理设备与所述另一信息处理设备之间生成的传输控制协议(TCP)会话上被设置时，控制单元利用该端口向所述另一信息处理设备发送指定多个通信方案的信息。

(C3)根据(C2)的信息处理设备，

其中控制单元向所述另一信息处理设备发送指定用户输入返回信道(UIBC)和WebSocket作为多个通信方案的信息。

(C4)根据(C3)的信息处理设备，

其中控制单元利用WebSocket获取从所述另一信息处理设备发送的图像信息和音频信息，使基于图像信息的图像在显示单元上显示，并且使基于音频信息的音频从音频输出单元输出。

(C5)根据(C1)至(C4)中任何一项的信息处理设备，

其中控制单元为多个通信方案设置多个端口，作为用于多个通信方案的端口。

(C6)根据(C5)的信息处理设备，

其中控制单元根据从所述另一信息处理设备发送的请求设置多个端口。

(C7)根据(C1)至(C4)中任何一项的信息处理设备，

其中控制单元为多个通信方案设置一个端口，作为用于多个通信方案的端口。

(C8)根据(C1)至(C7)中任何一项的信息处理设备，

其中控制单元利用多个通信方案当中任何一个向所述另一信息处理设备发送与显示单元中的图像的显示形式相关的信息，并且基于从所述另一信息处理设备发送的控制信息改变图像的显示形式。

(C9)根据(C8)的信息处理设备，

其中控制信息是与用于改变在所述另一信息处理设备中接收的图像的显示形式的操纵相关的操纵信息。

(C10)根据(C1)至(C9)中任何一项的信息处理设备，

其中控制单元使指示所述另一信息处理设备的图像和信息彼此关联地在显示单元上显示。

(C11)一种信息处理设备，包括：

控制单元，被配置为执行控制，使得用于使图像在所述另一信息处理设备配备的显示单元或连接到所述另一信息处理设备的显示单元上显示的图像信息被发送到所述另一信息处理设备，并且用于多个通信方案的用来与所述另一信息处理设备互换与该图像相关的控制信息的端口被设置。

(C12)一种信息处理设备，包括：

无线通信单元，被配置为根据无线保真(Wi-Fi)认证的Miracast规范与多个信息处理设备执行实时图像传输；及

控制单元，被配置为执行控制，使得基于从多个信息处理设备发送的图像信息的图像在显示单元上显示，并且当为多个信息处理设备设置用于互换与该图像相关的控制信息的多个端口时，在所述多个信息处理设备当中选择互换控制信息的信息处理设备，并且执行用于与选定的信息处理设备互换控制信息的端口的切换。

(C13)一种信息处理设备，包括：

控制单元，被配置为执行控制，使得用于使图像在多个信息处理设备配备的显示单元或连接到多个信息处理设备的显示单元上显示的图像信息被发送到所述多个信息处理设备，并且当为所述多个信息处理设备设置用于互换与该图像相关的控制信息的多个端口时，在所述多个信息处理设备当中选择互换控制信息的信息处理设备，并且执行用于与选定的信息处理设备互换控制信息的端口的切换。

(C14)一种信息处理设备，包括：

无线通信单元，被配置为与多个其它信息处理设备执行数据传输；及

控制单元，被配置为从多个其它信息处理设备接收用于控制信息处理设备的控制信息并且选择从适当设备发送的控制信息。

(C15)根据(C14)的信息处理设备，

其中控制单元在所述信息处理设备与其他信息处理设备之间生成的传输控制协议(TCP)会话上接收控制信息。

(C16)一种通信系统，包括：

第一和第二信息处理设备，被配置为根据无线保真(Wi-Fi)认证的Miracast规范执行实时图像传输，

其中第一信息处理设备向第二信息处理设备发送图像信息，及

第二信息处理设备包括被配置为执行控制使得基于从第一信息处理设备发送的图像信息的图像在显示单元上显示的控制单元，并且用于多个通信方案的用来与第一信息处理设备互换与该图像相关的控制信息的端口被设置。

(C17)一种信息处理方法，包括：

使基于从另一信息处理设备发送的图像信息的图像根据无线保真(Wi-Fi)认证的Miracast规范在显示单元上显示的显示过程；及

设置用于多个通信方案的用来与所述另一信息处理设备互换与该图像相关的控制信息的端口的控制过程。

(C18)一种程序，使计算机执行：

标号列表

100 通信系统

200 信息处理设备

201 数据传输系统

202 线路控制系统

203 信息处理设备

210 天线

220 无线通信单元

230 控制信号接收单元

240 控制单元

250 图像和音频信号生成单元

260 图像和音频压缩单元

270 流发送单元

300 信息处理设备

301 线路控制系统

302 输入和输出系统

310 天线

320 无线通信单元

330 流接收单元

340 图像和音频解压单元

350 图像和音频输出单元

351 显示单元

352 音频输出单元

360 用户信息获取单元

361 成像单元

370 控制单元

380 控制信号发送单元

390 管理信息保留单元

400 信息处理设备

410 源设备

420 信宿设备

600 通信系统

601 接入点

602 网络

603，604，610，620，630 信息处理设备

611 显示单元

621 显示单元

631 显示设备

632 显示单元

640 控制设备

643 输入和输出单元

700 通信系统

701 互联网

702，703 基站

704，705 成像设备

710 接收器

711 显示单元

720，730 信息处理设备

721，731 显示单元

901 处理器

902 存储器

903 储存器

904 外部连接接口

905 相机

907 传感器

908 麦克风

909 输入设备

910 显示设备

911 扬声器

913 无线通信接口

914 天线开关

915 天线

917 总线

918 电池

919 辅助控制器

920 汽车导航设备

921 处理器

922 存储器

924 GPS模块

925 传感器

926 数据接口

927 内容播放器

928 存储介质接口

929 输入设备

930 显示设备

931 扬声器

933 无线通信接口

934 天线开关

935 天线

938 电池

941 车载网络

942 车辆模块

1100，1300，1501至150 信宿设备

1110，1310，1410，1610 显示控制单元

1120，1320，1420，1620 模式请求内容切换单元

1211至1214，1400，1600 源设备

1330，1630 共同输入切换单元

Claims

1.一种信息处理设备，包括：

控制单元，被配置为基于用于根据Wi-Fi认证的Miracast规范控制信息处理设备的控制信息执行与实时图像传输相关的控制，所述控制信息是从所述至少一个信宿设备接收的，

其中控制单元执行控制，使得在接收到多条控制信息时执行用户输入返回信道(UIBC)的开-关切换，其中UIBC用于发送已经发送控制信息的信宿设备中的操纵信息。

2.如权利要求1所述的信息处理设备，

其中无线通信单元在信息处理设备与信宿设备之间生成的传输控制协议(TCP)会话上接收控制信息。

3.如权利要求1所述的信息处理设备，

4.如权利要求3所述的信息处理设备，

其中控制单元执行控制，使得对于所述至少一个信宿设备当中的第一信宿设备验证UIBC，并且对于第二信宿设备使UIBC失效。

5.如权利要求4所述的信息处理设备，

6.如权利要求5所述的信息处理设备，

其中所述控制信息是GET_PARAMETER响应，及

所述通知是作为SET_PARAMETER被发送的。

7.如权利要求3所述的信息处理设备，

其中控制单元执行控制，使得对于所述至少一个信宿设备当中的第一信宿设备验证UIBC，并且对于已经发送所述控制信息的信宿设备之中的除第一信宿设备之外的所有信宿设备使UIBC失效。

8.如权利要求1所述的信息处理设备，

控制单元参照包括在所述ID信息中的ID报头来识别对应的操纵信息。

9.如权利要求8所述的信息处理设备，

其中所述至少一个信宿设备包括多个输入设备，及

所述多条操纵信息是经由所述至少一个信宿设备从所述多个输入设备发送的。

10.如权利要求8所述的信息处理设备，

其中无线通信单元为一批多条UIBC信息设置一个端口，并执行通信。

11.如权利要求1所述的信息处理设备，

其中无线通信单元作为源设备执行通信。

12.一种信息处理方法，包括：

根据无线保真(Wi-Fi)认证的Miracast规范与至少一个信宿设备执行实时图像传输的无线通信步骤；及

基于用于根据Wi-Fi认证的Miracast规范控制信息处理设备的控制信息执行与实时图像传输相关的控制的控制步骤，所述控制信息是从所述至少一个信宿设备接收的，

其中控制步骤包括执行控制，使得在接收到多条控制信息时执行用户输入返回信道(UIBC)的开-关切换，其中UIBC用于发送已经发送控制信息的信宿设备中的操纵信息。

13.一种信息处理设备，包括：

显示单元，被配置为显示通过实时图像传输接收到的图像，

其中，当所述至少一个源设备当中的第一源设备与至少一个信宿设备执行实时图像传输时，无线通信单元从第一源设备接收与用于发送所述至少一个信宿设备当中的所述信息处理设备中的操纵信息的用户输入返回信道(UIBC)的打开或关闭相关的控制信息。