CN109121127A - 信息处理设备、信息处理系统和信息处理方法 - Google Patents

信息处理设备、信息处理系统和信息处理方法 Download PDF

Info

Publication number
CN109121127A
CN109121127A CN201810945036.5A CN201810945036A CN109121127A CN 109121127 A CN109121127 A CN 109121127A CN 201810945036 A CN201810945036 A CN 201810945036A CN 109121127 A CN109121127 A CN 109121127A
Authority
CN
China
Prior art keywords
information processing
processing equipment
information
equipment
connection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810945036.5A
Other languages
English (en)
Other versions
CN109121127B (zh
Inventor
石见英辉
伊东克俊
池长庆彦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN109121127A publication Critical patent/CN109121127A/zh
Application granted granted Critical
Publication of CN109121127B publication Critical patent/CN109121127B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W48/00Access restriction; Network selection; Access point selection
    • H04W48/18Selecting a network or a communication service
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W40/00Communication routing or communication path finding
    • H04W40/02Communication route or path selection, e.g. power-based or shortest path routing
    • H04W40/04Communication route or path selection, e.g. power-based or shortest path routing based on wireless node resources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W76/00Connection management
    • H04W76/10Connection setup
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W76/00Connection management
    • H04W76/10Connection setup
    • H04W76/14Direct-mode setup
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W76/00Connection management
    • H04W76/10Connection setup
    • H04W76/15Setup of multiple wireless link connections
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W84/00Network topologies
    • H04W84/02Hierarchically pre-organised networks, e.g. paging networks, cellular networks, WLAN [Wireless Local Area Network] or WLL [Wireless Local Loop]
    • H04W84/10Small scale networks; Flat hierarchical networks
    • H04W84/12WLAN [Wireless Local Area Networks]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W84/00Network topologies
    • H04W84/18Self-organising networks, e.g. ad-hoc networks or sensor networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W92/00Interfaces specially adapted for wireless communication networks
    • H04W92/16Interfaces between hierarchically similar devices
    • H04W92/18Interfaces between hierarchically similar devices between terminal devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Computer Security & Cryptography (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本公开涉及信息处理设备、信息处理系统和信息处理方法。为了在多个信息处理设备之间进行通信时,进行适当的控制,信息处理设备按照Wi‑Fi认证的Miracast规范,进行往来于另一个信息处理设备的实时图像传输。所述信息处理设备具备控制单元。所述控制单元进行控制,以便经由接入点,从所述另一个信息处理设备接收用于进行与实时图像传输相关的设定的设定请求信息。此外,所述控制单元进行控制,以便通过直接通信,把根据所述请求信息,进行所述设定的设定请求传送给所述另一个信息处理设备。

Description

信息处理设备、信息处理系统和信息处理方法
本申请是2014年12月2日提交的发明名称为“信息处理设备、信息处理系统和信息处理方法”的中国专利申请201480075025.6的分案申请。
技术领域
本技术涉及信息处理设备,更具体地,涉及利用无线通信,交换各种信息的信息处理设备,信息处理系统和信息处理方法。
背景技术
现有技术中,已知利用无线通信,交换各种数据的无线通信技术。例如,提出了通过两个无线通信设备之间的无线通信,交换各种信息的信息交换设备(例如参见专利文献1)。
引文列表
专利文献
专利文献1:JP 2008-278388 A
发明内容
技术问题
按照现有技术中的上述技术,即使当未利用有线线路建立连接时,也能够通过无线通信,在两个信息处理设备之间交换各种信息。例如,基于从传输侧信息处理设备传送的图像数据的图像可被显示在接收侧信息处理设备的显示单元上。
这里,例如,当利用无线通信,在两个信息处理设备之间交换各种信息时,假定其中在两个信息处理设备之间直接进行通信的情况,和其中在两个信息处理设备之间间接进行通信的情况。此外,其中在两个信息处理设备之间间接进行通信的情况例如包括其中通过另一个通信设备(例如,接入点或基站),在两个信息处理设备之间间接进行通信的情况。
例如,当在两个信息处理设备之间直接进行通信时,假定进行迁移,以致在所述两个信息处理设备之间间接进行通信。此外,当在两个信息处理设备之间间接进行通信时,假定进行迁移,以致在所述两个信息处理设备之间直接进行通信。当如上所述进行通信的切换时,重要的是进行适当的控制。
鉴于上面所述,产生了本技术,本技术的目的是当在多个信息处理设备之间进行通信时,进行适当的控制。
针对技术问题的技术方案
为了解决上述问题,产生了本技术,本技术的第一方面是一种信息处理设备,信息处理设备的信息处理方法,和使计算机执行所述信息处理方法的程序,所述信息处理设备按照无线保真(Wi-Fi)认证的Miracast规范(技术规范名称:Wi-Fi Display),进行与另一个信息处理设备的实时图像传输,包括:控制单元,所述控制单元被配置成进行控制,以致经由接入点,从所述另一个信息处理设备接收用于进行与实时图像传输相关的设定的设定请求信息,和通过直接通信,把根据所述设定请求信息,进行所述设定的设定请求传送给所述另一个信息处理设备。从而,存在其中经由接入点,从另一个信息处理设备接收设定请求信息,和通过直接通信,把设定请求传送给另一个信息处理设备的操作。
按照第一方面,控制单元可经由接入点,与所述另一个信息处理设备交换与所述信息处理设备相关的能力信息。所述另一个信息处理设备可根据能力信息,生成设定请求信息。从而,存在其中经由接入点,与另一个信息处理设备交换与所述信息处理设备相关的能力信息,和所述另一个信息处理设备根据所述能力信息,生成设定请求信息的操作。
按照第一方面,控制单元可进行控制,以致当进行经由接入点,与所述另一个信息处理设备的连接状态,和通过直接通信,与所述另一个信息处理设备的连接状态之间的切换时,利用与切换之前的连接相关的端口信息和IP信息至少之一,进行连接处理。从而,存在其中当进行经由接入点,与所述另一个信息处理设备的连接状态,和通过直接通信,与所述另一个信息处理设备的连接状态之间的切换时,利用与切换之前的连接相关的端口信息和IP信息至少之一,进行连接处理的操作。
按照第一方面,控制单元可进行控制,以致在设定请求被传送给所述另一个信息处理设备之后,通过直接通信,进行按照Wi-Fi认证的Miracast规范的图像传输。从而,存在其中在设定请求被传送给另一个信息处理设备之后,通过直接通信,进行按照Wi-Fi认证的Miracast规范的图像传输的操作。
按照第一方面,控制单元可进行控制,以致通过低频带的无线传输路径,传送显示在显示单元中的预定区域上的图像,通过高频带的无线传输路径,传送显示在比显示单元中的预定区域大的区域上的图像。从而,存在其中通过低频带的无线传输路径,传送显示在显示单元中的预定区域上的图像,通过高频带的无线传输路径,传送显示在比显示单元中的预定区域大的区域上的图像的操作。
按照第一方面,控制单元可进行控制,以致根据用户的操作,设定请求通过直接通信,被传送给所述另一个信息处理设备。从而,存在根据用户的操作,把设定请求通过直接通信,传送给另一个信息处理设备的操作。
按照第一方面,控制单元可进行控制,以致当存在配置成通过直接通信,进行图像传输的多个信息处理设备时,根据预定顺序,通过直接通信把设定请求传送给所述另一个信息处理设备。从而,存在其中当存在配置成通过直接通信,进行图像传输的多个信息处理设备时,根据预定顺序,通过直接通信把设定请求传送给另一个信息处理设备的操作。
按照第一方面,控制单元可进行控制,以致经由接入点,交换指示是否允许经由除所述接入点以外的接入点或基站,与所述另一个信息处理设备的连接的许可信息,当收到指示允许所述连接的许可信息时,进行经由除所述接入点以外的接入点或基站,与所述另一个信息处理设备的交换。从而,存在其中经由所述接入点,交换许可信息,当收到指示允许所述连接的许可信息时,进行经由另一个接入点或基站,与另一个信息处理设备的交换的操作。
按照第一方面,控制单元可进行控制,以致当收到指示允许所述连接的许可信息时,经由除所述接入点以外的接入点或基站,从所述另一个信息处理设备接收图像数据和音频数据至少之一,并输出所述图像数据和音频数据至少之一。从而,存在其中当收到指示允许所述连接的许可信息时,经由另一个接入点或基站,从另一个信息处理设备接收图像数据和音频数据至少之一,并输出所述图像数据和音频数据至少之一的操作。
按照第一方面,控制单元可进行控制,以致利用近场通信,交换用于进行直接通信的信息。从而,存在其中利用近场通信,交换用于进行直接通信的信息的操作。
本技术的第二方面是一种信息处理设备,信息处理设备的信息处理方法,和使计算机执行所述信息处理方法的程序,所述信息处理设备按照Wi-Fi认证的Miracast规范,进行与另一个信息处理设备的实时图像传输,包括:控制单元,所述控制单元被配置成进行控制,以致经由接入点,把用于进行与实时图像传输相关的设定的设定请求信息传送给所述另一个信息处理设备,通过直接通信,从所述另一个信息处理设备接收根据所述设定请求信息,进行所述设定的设定请求。从而,存在其中经由接入点,把设定请求信息传送给另一个信息处理设备,和通过直接通信,从另一个信息处理设备接收设定请求的操作。
本技术的第三方面是一种信息处理设备,信息处理设备的信息处理方法,和使计算机执行所述信息处理方法的程序,所述信息处理设备包括:控制单元,所述控制单元被配置成进行控制,以致当按照Wi-Fi认证的Miracast规范,在接收端设备和多个发送端设备之间进行实时图像传输时,在发送端设备中设定经由接入点,连接接收端设备和发送端设备的待机模式,和通过直接通信,连接接收端设备和发送端设备的图像传输模式中的任意一种通信模式。从而,存在其中在发送端设备中,设定待机模式和图像传输模式中的任意一种通信模式的操作。
按照第三方面,控制单元可进行控制,以致指示多个发送端设备的图像显示在输入和输出单元上,根据输入和输出单元中的操作输入,在发送端设备中设定所述通信模式。从而,存在其中指示多个发送端设备的图像显示在输入和输出单元上,根据输入和输出单元中的操作输入,在发送端设备中设定所述通信模式的操作。
按照第三方面,控制单元可进行控制,以致根据预定顺序,在发送端设备中设定所述通信模式。从而,存在其中根据预定顺序,在发送端设备中设定通信模式的操作。
本技术的第四方面是一种信息处理系统,信息处理系统的信息处理方法,和使计算机执行所述信息处理方法的程序,所述信息处理系统包括:接收端设备,所述接收端设备被配置成按照Wi-Fi认证的Miracast规范,进行与发送端设备的实时图像传输,并进行控制,以致使发送端设备进行与实时图像传输相关的设定的设定请求信息经由接入点被传送给发送端设备,通过与发送端设备的直接通信,从发送端设备接收根据所述设定请求信息,进行所述设定的设定请求;和控制设备,所述控制设备被配置成进行控制,以致当在接收端设备和多个发送端设备之间进行实时图像传输时,在发送端设备中设定经由接入点,连接接收端设备和发送端设备的待机模式,和通过直接通信,连接接收端设备和发送端设备的图像传输模式中的任意一种通信模式。从而,存在其中接收端设备经由接入点,把设定请求信息传送给发送端设备,和通过直接通信,从发送端设备接收设定请求,控制设备在发送端设备中,设定待机模式和图像传输模式中的任意一种通信模式的操作。
发明的有益效果
按照本技术,能够获得当在多个信息处理设备之间进行通信时,可进行适当控制的极好效果。这里说明的优点未必是限制性的,可包括在本公开中记载的任何效果。
附图说明
图1是图解说明按照本技术的第一实施例的通信系统100的系统结构例子的方框图。
图2是图解说明按照本技术的第一实施例的信息处理设备200的功能结构例子的方框图。
图3是图解说明按照本技术的第一实施例的信息处理设备300的功能结构例子的方框图。
图4是示意图解说明按照本技术的第一实施例,保持在管理信息保持单元390中的内容例子的示图。
图5是图解说明按照本技术的第一实施例,显示在信息处理设备300的显示单元351上的图像的转变例子的示图。
图6是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图7是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图8是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图9是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图10是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图11是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图12是图解说明按照本技术的第一实施例,由信息处理设备200进行的数据传输处理的处理过程的例子的流程图。
图13是图解说明按照本技术的第一实施例,由信息处理设备300进行的数据传输速度控制处理的处理过程的例子的流程图。
图14是图解说明按照本技术的第一实施例,发送端设备和接收端设备之间的通信处理例子的序列图。
图15是图解说明按照本技术的第一实施例,发送端设备和接收端设备之间的通信处理例子的序列图。
图16是图解说明按照本技术的第一实施例,发送端设备和接收端设备之间的通信处理例子的序列图。
图17是图解说明按照本技术的第二实施例的通信系统700的系统结构例子的图。
图18是图解说明按照本技术的第二实施例的通信系统700的安装例子的示图。
图19是图解说明按照本技术的第二实施例的控制设备740的功能结构例子的方框图。
图20是示意图解说明按照本技术的第二实施例,保持在群组管理信息保持单元750中的内容例子的示图。
图21是图解说明按照本技术的第二实施例,显示在控制设备740的输入和输出单元743上的显示画面的例子的示图。
图22是图解说明按照本技术的第二实施例,显示在显示设备731上的显示画面的转变例子的示图。
图23是图解说明作为本技术的基础的发送端设备和接收端设备之间的通信模式的切换例子的示图。
图24是图解说明按照本技术的第二实施例,发送端设备和接收端设备之间的连接处理例子的序列图。
图25是图解说明按照本技术的第二实施例,在包含在通信系统700中的各个设备之间的通信处理例子的序列图。
图26是图解说明按照本技术的第二实施例,在包含在通信系统700中的各个设备之间的通信处理例子的序列图。
图27是图解说明按照本技术的第二实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。
图28是图解说明按照本技术的第二实施例,信息处理设备710的使用例子的示图。
图29是图解说明按照本技术的第二实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。
图30是图解说明按照本技术的第二实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。
图31是图解说明按照本技术的第三实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。
图32是图解说明按照本技术的第四实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。
图33是图解说明按照本技术的第四实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。
图34是图解说明按照本技术的第二实施例,在包含在通信系统700中的各个设备之间交换的WFD IE格式的例子的示图。
图35是图解说明按照本技术的第二实施例,在包含在通信系统700中的各个设备之间交换的WFD IE格式的例子的示图。
图36是图解说明按照本技术的第二实施例,在包含在通信系统700中的各个设备之间交换的WFD IE格式的例子的示图。
图37是图解说明按照本技术的第二实施例,在包含在通信系统700中的各个设备之间交换的WFD IE格式的例子的示图。
图38是图解说明按照本技术的第二实施例,在包含在通信系统700中的各个设备之间交换的WFD IE格式的例子的示图。
图39是图解说明按照本技术的第二实施例,在包含在通信系统700中的各个设备之间交换的应用服务平台(ASP)用新消息的例子的示图。
图40是图解说明智能电话机的示意结构的例子的方框图。
图41是图解说明车载导航设备的示意结构的例子的方框图。
具体实施方式
下面说明实现本技术的模式(下面称为“实施例”)。将按照以下顺序进行说明。
1.第一实施例(根据用户信息或管理信息,控制无线通信的例子)
2.第二实施例(切换经由接入点的发送端设备和接收端设备之间的连接,和发送端设备和接收端设备之间的直接连接的例子)
3.第三实施例(利用近场通信,开始发送端设备和接收端设备之间的群组认证的例子)
4.第四实施例(其中发送端设备自动连接到接入点或接收端设备的例子)
5.应用例
<1.第一实施例>
[通信系统的结构例子]
图1是图解说明按照本技术的第一实施例的通信系统100的系统结构例子的方框图。
通信系统100包括信息处理设备200、300和400。通信系统100是其中信息处理设备300接收从信息处理设备200和400至少之一传送的数据(例如图像数据或音频数据)的通信系统。
信息处理设备200、300和400是具有无线通信功能的收发设备。例如,信息处理设备200、300和400是具有无线通信功能的显示设备(例如,个人计算机),或者便携式信息处理设备(例如智能电话机或平板终端)。信息处理设备200、300和400是例如遵从电气和电子工程师协会(IEEE)802.11、802.15或802.16,第三代合作伙伴计划(3GPP)规范(例如,宽带码分多址接入(W-CDMA)),全球移动通信系统(GSM:注册商标),微波存取全球互通(WiMAX),WiMAX2,长期演进(LTE),LTE-A(高级)等的无线通信设备。信息处理设备200、300和400可利用无线通信功能,交换各种信息。
这里,说明在信息处理设备200和300之间,或者在信息处理设备400和300之间,进行利用无线局域网(LAN)的无线通信的情况的例子。
作为所述无线LAN,例如可以使用无线保真(Wi-Fi)Direct、隧穿直接链路设置(Tunneled Direct Link Setup)(TDLS)、ad-hoc网络或网状网络。作为在通信系统100中使用的短程无线视听(AV)传输通信,例如可以使用Wi-Fi认证的Miracast(技术规范名称:Wi-Fi Display)。Wi-Fi认证的Miracast是利用Wi-Fi Direct或TDLS的技术,把用一个终端再现的音频或显示图像传送给另一个终端,并类似地用所述另一个终端输出所述音频或图像数据的镜像技术。
在Wi-Fi认证的Miracast中,利用传输控制协议/网际协议(TCP/IP),实现用户输入反向通道(UIBC)。UIBC是把诸如鼠标或键盘之类输入设备的操作信息从一个终端传送给另一个终端的技术。代替Wi-Fi认证的Miracast,可以应用另一种远程桌面软件(例如虚拟网络计算(VNC))。
这里,例如,在Wi-Fi认证的Miracast中,规定利用H.264压缩和解压缩图像(视频)。例如,在Wi-Fi认证的Miracast中,可在传输侧调整H.264。本技术的实施例不限于H.264,而是也可对应于各种编解码器,比如H.265(例如,高效视频编码(HEVC)和高效视频编码的可缩放视频编码扩展(SHVC)),和运动图像专家组(MPEG4),联合图像专家组(JPEG)2000。此外,它还可对应于行基编解码器,在行基编解码器中,一行或多行被打包或和压缩,或者两行或更多行被分成2×2或更多的宏块,以便被压缩和解压缩。例如,通过获得特定代码量区域(比如画面、一束的多行、或者宏块)与前一个代码量区域的差分,能够对应于不进行诸如DCT或小波变换之类压缩地降低传输速率的编解码器。此外,可以不压缩地传送或接收图像(视频)。
在本技术的第一实施例中,将说明其中信息处理设备200把通过成像操作生成的图像数据和音频数据设定为传输对象的例子。在本技术的第一实施例中,将说明其中信息处理设备400把保存在存储单元(例如硬盘)中的内容(例如由图像数据和音频数据构成的内容)设定为传输对象的例子。可以使用安装有摄像头的电子设备(例如个人计算机、游戏机、智能电话机或平板终端),作为信息处理设备200。可以使用包括显示单元的另一个电子设备(例如成像设备、游戏机、智能电话机或平板终端),作为信息处理设备300。如果信息处理设备400具有网络共享(tethering)功能,那么信息处理设备400可经无线或有线网络,获得保存在因特网服务提供商(IPS)中的内容,并把所述内容设定为传输对象。
例如,通过信息处理设备200的成像操作生成的图像数据被传送给信息处理设备300,基于所述图像数据的图像11被显示在信息处理设备300的显示单元351上。此外,保存在信息处理设备400的存储单元(例如硬盘)中的内容被传送给信息处理设备300,基于所述内容的图像12被显示在信息处理设备300的显示单元351上。
这样,在本技术的第一实施例中,将说明其中信息处理设备200和400充当发送端侧的信息处理设备(发送端设备),信息处理设备300充当接收端侧的信息处理设备(接收端设备)的例子。
图1中,其中信息处理设备300能够利用无线通信,经对等(P2P)直接连接,进行直接通信的范围被表示成信息传输范围101。信息传输范围101是基于信息处理设备300的信息传输范围(服务范围)。
[信息处理设备(发送端设备)的结构例子]
图2是图解说明按照本技术的第一实施例的信息处理设备200的功能结构例子的方框图。与无线通信相关的信息处理设备400的功能结构和信息处理设备200的功能结构实质相同。于是,在本技术的第一实施例中,只说明信息处理设备200,信息处理设备400的说明被省略。
信息处理设备200包括天线210、无线通信单元220、控制信号接收单元230、控制单元240、图像和音频信号生成单元250、图像和音频压缩单元260和流传输单元270。
在控制单元240的控制下,无线通信单元220利用无线通信,通过天线210,往来于另一个信息处理设备(例如,信息处理设备300)传送和接收各项信息(例如,图像数据和音频数据)。例如,当进行图像数据传输处理时,图像和音频信号生成单元250生成的图像数据由图像和音频压缩单元260压缩,压缩的图像数据(图像流)经无线通信单元220从天线210传送。
无线通信单元220被假定能够利用多个频道,往来于另一个信息处理设备(例如,信息处理设备300)传送和接收各项信息。在本技术的第一实施例中,将说明其中无线通信单元220具有传送和接收3种频道,2.4GHz、5GHz和60GHz的功能的例子。这样,当发送端设备具有传送和接收多个频道的功能时,接收端设备(例如,信息处理设备300)能够控制将由各个发送端设备使用的频道。
控制信号接收单元230获得无线通信单元220接收的各项信息之中,从另一个信息处理设备(例如,信息处理设备300)传送的控制信号(例如,与信息处理设备300交换的信息)。随后,控制信号接收单元230把获得的控制信号输出给控制单元240。
控制单元240对将从信息处理设备200传送的各项信息进行控制。例如,控制单元240根据控制信号接收单元230接收的控制信号,对图像和音频信号生成单元250及图像和音频压缩单元260进行控制。例如,控制单元240进行变更声道的数目,或者作为传输对象的图像数据的分辨率的控制,或者进行变更作为传输对象的图像数据的图像区域的控制。即,控制单元240根据控制信号接收单元230接收的控制信号,进行作为传输对象的流的传输控制(例如,数据传输速度控制,可缩放传输速率控制)。
控制单元240可具有测量在利用无线通信,往来于接收端设备传送和接收数据时的无线电波传播状况(链路无线电波传播状况)的功能,并可把测量结果(无线电波传播测量信息)传送给接收端设备。
这里,例如,无线电波传播测量信息是用于判定与接收端设备的线路质量是否是能够传送和接收图像数据和音频数据的质量的信息。例如,当进行流传输控制(例如,数据传输速度控制,可缩放传输速率控制)时,使用所述无线电波传播测量信息。无线电波传播测量信息将参考图4详细说明。代替无线电波传播测量信息,控制单元240可计数相同分组的重传次数,并进行与计数的重传次数对应的流传输控制。
这里,数据传输速度主要意味通信线路占用率,被认为包括通信速度或通信容量的含意。例如,分辨率被定义为配置成包括诸如图像数据的图像帧(垂直像素和水平像素的数目),或者图像数据的比特率(压缩率)之类要素的画质指标。作为所述画质指标,可以使用流的吞吐量。音频的通道数被认为包括诸如单声道(1.0ch)或立体声(2.0ch)之类的音频记录和再现方法的含意。音频的通道数被定义为配置成包括诸如音频数据的比特率(压缩率)或者通道数之类要素的音质指标。作为所述音质指标,可以使用流的吞吐量。
控制单元240进行改善数据速率控制中不稳定的状态的控制。例如,控制单元240通过与接收端设备(例如,信息处理设备300)交换信息,了解所述接收端设备的系统性能信息。这里,例如,系统性能信息是关于接收端设备的系统的性能信息。例如,系统性能信息是可用频道、分辨率、传输控制协议(TCP)和用户数据报协议(UDP)。例如,系统性能信息是指示加密方法的对应、标准清晰度(SD)/高清晰度(HD)的对应和低电力消耗模式的对应中的每一个的信息。例如,控制单元240可按照接收端设备是否对应于低电力消耗模式,选择进一步提高通信系统100的整个系统稳定性的流传输控制(例如,数据传输速度控制和可缩放传输速率控制)的方法。
例如,假定控制单元240在与信息处理设备300的信息交换期间,插入关于信息处理设备200是否是移动设备的信息。例如,关于信息处理设备200的能力信息可包括关于信息处理设备200是否是移动设备的信息。当了解信息处理设备200是移动设备时,信息处理设备300可根据与其它连接的信息处理设备的关联,判断不必使信息处理设备200工作。这样,当判断不必使信息处理设备200工作时,信息处理设备200从信息处理设备300接收传输停止命令。当控制单元240领会传输停止命令时,控制单元240可使图像和音频信号生成单元250、图像和音频压缩单元260和流传输单元270每一个的功能断电给定时间。控制单元240可使无线通信单元220转变成间歇接收(间歇接收是无线通信单元220定期启动,以致无线通信单元200能够从信息处理设备300接收命令,而在其它情况下,该设备被断电的模式)。
在控制单元240的控制下,图像和音频信号生成单元250生成作为输出对象的数据(图像数据和音频数据),并把生成的数据输出给图像和音频压缩单元260。例如,图像和音频信号生成单元250包括成像单元(未图示)和音频获取单元(未图示)。成像单元(例如,镜头、图像传感器或信号处理电路)对被摄对象成像,从而生成图像(图像数据)。音频获取单元(例如,麦克风)获得生成图像数据时的环境音频。按照这种方式生成的数据是待传送给另一个信息处理设备(例如,信息处理设备300)的传输对象。
在控制单元240的控制下,图像和音频压缩单元260压缩(编码)图像和音频信号生成单元250生成的数据(图像数据和音频数据)。随后,图像和音频压缩单元260把压缩数据(图像数据和音频数据)输出给流传输单元270。图像和音频压缩单元260可通过利用软件进行编码来实现,或者可通过利用硬件进行编码来实现。图像和音频压缩单元260被认为起编解码器作用,不过,认为能够处理未压缩的图像或音频。此外,图像和音频压缩单元260也可起可缩放编解码器的作用。这里,可缩放编解码器例如意味能够按照接收侧信息处理设备(接收端设备)的分辨率,网络环境等,被自由应用的编解码器。
在控制单元240的控制下,流传输单元270进行通过无线通信单元220,从天线210以流的形式,传送图像和音频压缩单元260压缩的数据(图像数据和音频数据)的传输处理。
除上述单元之外,信息处理设备200还可包括显示单元、音频输出单元和操作接收单元,不过图2中未图示这些单元。上面说明了其中信息处理设备200生成作为传输对象的图像数据和音频数据的例子。不过,信息处理设备200可从外部设备获得作为传输对象的图像数据和音频数据。例如,信息处理设备200可从具备麦克风的web摄像头获得作为传输对象的图像数据和音频数据。信息处理设备200可把保存在存储设备(例如硬盘)中的内容(例如由图像数据和音频数据形成的内容)设定为传输对象,而不管在信息处理设备200的内部或外部。这种情况下,保存在存储设备中的内容也被假定是压缩内容。这种情况下,当压缩内容按照在通信系统100中采用的标准中定义的编码方式被压缩时,可以不解密(解码)地传送所述压缩内容。
信息处理设备200的显示单元(未图示)例如是显示由图像和音频信号生成单元250生成的图像的显示单元。作为所述显示单元,例如可以使用诸如电致发光(EL)或晶体发光二极管(LED)显示器或液晶显示器(LCD)之类的显示面板。
信息处理设备200的音频输出单元(未图示)例如是输出由图像和音频信号生成单元250生成的音频的音频输出单元(例如,扬声器)。图像可从传输设备和接收设备输出,不过,音频优选只从传输设备和接收设备之一输出。
信息处理设备200的操作接收单元(未图示)是接收用户进行的操作输入的操作接收单元,例如是键盘、鼠标、游戏垫(pad)、触摸面板、摄像头或麦克风。通过利用当用户用他或她的手指触摸或接近显示面时,能够进行操作输入的触摸面板,可以一体地构成操作接收单元和显示单元。
[信息处理设备(接收侧)的结构例子]
图3是图解说明按照本技术的第一实施例的信息处理设备300的功能结构例子的方框图。
信息处理设备300包括天线310、无线通信单元320、流接收单元330、图像和音频解压缩单元340、图像和音频输出单元350、用户信息获取单元360、控制单元370、控制信号传输单元380和管理信息保持单元390。
在控制单元370的控制下,无线通信单元320利用无线通信,通过天线310,往来于另一个信息处理设备(例如,信息处理设备200)传送和接收各项信息(例如图像数据和音频数据)。例如,当进行图像数据接收处理时,天线310接收的图像数据经无线通信单元320和流接收单元330,被图像和音频解压缩单元340解压缩(解码)。随后,解压缩的图像数据被提供给图像和音频输出单元350,从图像和音频输出单元350输出与解压缩图像数据相应的图像。即,与解压缩图像数据相应的图像被显示在显示单元351上。
无线通信单元320被认为能够利用多个频道,往来于另一个信息处理设备(例如,信息处理设备200)传送和接收各项信息。在本技术的第一实施例中,将说明其中无线通信单元320具有传送和接收3种频道,2.4GHz、5GHz和60GHz的功能的例子。即,无线通信单元320可进行利用第一频带的通信,和利用数据传输速度比第一频带高的第二频带的通信。控制单元370控制多个频道之中的将在与各个发送端设备的无线通信中使用的频道。
信息处理设备200和300之间的链路,以及信息处理设备400和300之间的链路可用相同频道建立,或者可用不同频道建立。
在本技术的第一实施例中,将说明其中无线通信单元320具有传送和接收3种频道,2.4GHz、5GHz和60GHz的功能的例子,不过本技术的实施例不限于此。例如,无线通信单元320可具有传送和接收其它频道,2个频道,4个或更多频道的功能。
在控制单元370的控制下,流接收单元330在利用无线通信单元320接收的各项信息之中,接收流(例如,图像流和音频流)和与各个发送端设备的交换信息。随后,流接收单元330把接收的命令信息输出给控制单元370,并把接收的流输出给图像和音频解压缩单元340及控制单元370。
这里,与各个发送端设备的交换信息是从发送端设备(例如,信息处理设备200)传送的信息,例如包括获得信息处理设备300的系统性能信息的请求。例如,系统性能信息是指示可用频道、分辨率、TCP和UDP,或者加密方法的对应、SD/HD的对应、及低电力消耗模式的对应中的每一个的信息。
流接收单元330具有测量在利用无线通信,往来于接收端设备传送和接收数据时的无线电波传播状况(链路无线电波传播状况)的功能。流接收单元330把测量结果(无线电波传播测量信息)输出给控制单元370。无线电波传播测量信息将参考图4详细说明。
在控制单元370的控制下,图像和音频解压缩单元340解压缩(解码)从另一个信息处理设备(例如,信息处理设备200)传送的流(图像数据和音频数据)。随后,图像和音频解压缩单元340把解压缩的数据(图像数据和音频数据)输出给图像和音频输出单元350。图像和音频解压缩单元340可通过利用软件进行解码来实现,或者可通过利用硬件进行解码来实现。图像和音频解压缩单元340被认为起编解码器作用,不过假定能够处理未压缩的图像或音频。此外,图像和音频解压缩单元340还可起可缩放编解码器的作用。
图像和音频输出单元350包括显示单元351和音频输出单元352。
显示单元351是显示基于由图像和音频解压缩单元340解压缩的图像数据的各个图像(例如,图1中图解所示的图像11和12)的显示单元。作为显示单元351,例如,可以使用诸如有机EL面板、晶体LED显示器、LCD面板之类的显示面板。作为显示单元351,可以使用当用户用他或她的手指触摸或接近显示面时,能够进行操作输入的触摸面板。
音频输出单元352是输出基于由图像和音频解压缩单元340解压缩的音频数据的各种音频(与显示在显示单元351上的图像相关的音频等)的音频输出单元(例如,扬声器)。这里,作为音频输出方法,例如可以使用从扬声器只再现分配给中间通道(主图像)的发送端设备的音频,而不再现分配给周边通道(副图像)的发送端设备的音频的方法。作为另一种音频输出方法,例如可以使用把分配给中间通道的发送端设备的音频的音量设定为主要部分,并降低分配给周边通道的发送端设备的音频的音量,并再现音频的方法。可以使用其它的音频输出方法。
用户信息获取单元360获得关于用户的信息(用户信息),并把获得的用户信息输出给控制单元370。例如,用户信息获取单元360可通过接收来自操作接收单元(键盘、鼠标、遥控器、游戏垫或触摸面板)的输入,获得用户信息,通过所述操作接收单元,用户能够直接设定显示方法。例如,操作接收单元是指定显示在显示单元351上的图像中的任意区域的操作部件。例如,用户信息获取单元360可通过接收来自能够了解用户的意图的设备,比如摄像头、麦克风、或者任意各种传感器(例如陀螺传感器或检测人体的传感器)的输入,获得用户信息。
例如,当从图像和音频输出单元350输出基于利用无线通信,从另一个信息处理设备(例如,信息处理设备200)接收的流的信息时,用户信息获取单元360获得通过用户动作生成的用户信息。所述用户信息例如是通过与显示在显示单元351上的图像相关的用户动作生成的用户信息。例如,用户信息是根据与显示在显示单元351上的图像相关的用户操作生成的信息。
控制单元370使管理信息保持单元390保持流接收单元330获得的各项信息,并根据管理信息保持单元390保持的管理信息,管理各个发送端设备。控制单元370进行流传输控制(例如,数据控制速度控制和可缩放传输速率控制),以致对于从整个系统中的多个发送端设备传送的流,改善稳定性。
例如,控制单元370根据用户信息获取单元360获得的用户信息,和保持在管理信息保持单元390中的管理信息,进行流传输控制(例如,数据传输速度控制和可缩放传输速率控制)。具体地,控制单元370根据保持在管理信息保持单元390中的管理信息,对于各个发送端设备生成用于进行流传输控制(例如,数据传输速度控制和可缩放传输速率控制)的控制信号,并把生成的控制信号输出给控制信号传输单元380。例如,控制单元370根据用户信息和管理信息,变更显示在显示单元351上的图像的分辨率,并生成向各个发送端设备请求与所述分辨率等同的传输速率的控制信号。例如,控制单元370根据用户信息和管理信息,生成用于变更显示单元351上的图像的显示区域的控制信号。例如,控制单元370根据用户信息和管理信息,生成用于变更显示单元351上的图像的大小的控制信号。
控制单元370根据用户信息和管理信息,进行设定要使用的频道和分辨率的控制。例如,控制单元370在无线通信单元320的多个频道之中,设定用于各个发送端设备的频道。当各个频道的电力消耗模式不同时,控制单元370了解每种模式,并设定频道,以便关心移动设备的电力消耗。即,控制单元370可分别设定与第一频带相关的第一电力消耗模式,和与数据传输速度高于第一频带的第二频带相关的第二电力消耗模式。
控制信号传输单元380进行通过无线通信单元320和天线310,把从控制单元370输出的控制信号传送给另一个无线通信设备的传输处理。
管理信息保持单元390是保持用于管理利用无线通信,连接到信息处理设备300的各个发送端设备的信息(管理信息)的表格。保持在管理信息保持单元390中的内容将参考图4详细说明。
[保持在管理信息保持单元中的内容例子]
图4是示意图解说明按照本技术的第一实施例的保持在管理信息保持单元390中的内容例子的示图。
管理信息保持单元390是保持用于管理利用无线通信,连接到信息处理设备300的各个发送端设备的信息(管理信息)的表格。例如,在管理信息保持单元390中,彼此关联地保持终端标识信息391、频道392、无线电波传播测量信息393、设备信息394、频带使用水平395、输出形式396、待机或唤醒397,和多接收分集对应398。
在终端标识信息391中,保存用于识别利用无线通信,连接到信息处理设备300的发送端设备的识别信息。
在频道392中,保存利用无线通信,连接到信息处理设备300的发送端设备实际使用的频道。
在无线电波传播测量信息393中,保存与利用无线通信,连接到信息处理设备300的发送端设备相关的无线电波传播测量信息。所述无线电波传播测量信息是由流接收单元330对于利用无线通信,连接到信息处理设备300的每个发送端设备测量的。
作为无线电波传播测量信息393,例如,保存分组差错率(PER)、误码率(BER)、分组重传次数和吞吐量。作为无线电波传播测量信息393,例如,保存丢帧、信号-干扰比(SIR)和接收信号强度指示(RSSI)。这里,代替SIR,可以使用信号-干扰加噪声比(SINR)。图4中图解所示的无线电波传播测量信息393是例子。可以保存所述各项信息中的至少一项信息,或者流接收单元330可以测量另一项无线电波传播测量信息,以便保存。可以获得并保存由发送端设备测量的无线电波传播测量信息。可以确定接收侧接收的分组延迟,关于所述分组延迟的信息可用作无线电波传播测量信息。所述分组延迟充当与无线电波传播相关的一个指标,因为当发生错误时,在通过层2中的重传处理,向接收侧的传输中发生延迟。例如,分组延迟充当指示其中多个设备共用无线频带的无线系统中,何处链路特性恶化的指标。
在设备信息394中,保存利用无线通信,连接到信息处理设备300的发送端设备的分类(发送端设备的属性)。例如,作为发送端设备的分类,保存移动设备或固定设备。作为发送端设备的分类,可以保存其电源被插入的设备,或者另一个设备。作为发送端设备的分类,可以保存电池驱动设备,或者另一种设备。
在频带使用水平395中,保存利用无线通信,连接到信息处理设备300的发送端设备的频带使用水平。例如,作为频带使用水平,可以使用分辨率或吞吐量。例如,在频带使用水平中,可以保存使用期间的吞吐量,可以准备预先决定的表格,可以保存并管理指示表格的范围的对应的编号。
在输出形式396中,保存基于从利用无线通信,连接到信息处理设备300的发送端设备传送的流的数据显示形式(输出形式)。例如,保存以从发送端设备传送的流为基础,显示在显示单元351上的图像数据的显示形式(主图像(中间通道)或副图像(周边通道))。例如,保存以从发送端设备传送的流为基础,从音频输出单元352输出的音频数据的输出形式(主音频或副音频)。按照显示形式,可以实现其中不显示周边通道的格式。
在待机或唤醒397中,保存利用无线通信,连接到信息处理设备300的发送端设备的模式(待机模式或唤醒模式)。待机模式和唤醒模式将参考图6-8详细说明。
在多接收分集对应398中,保存指示利用无线通信,连接到信息处理设备300的发送端设备是否对应于多接收分集的信息。
这样,保持在管理信息保持单元390中的管理信息是联系用于识别另一个信息处理设备的识别信息(终端标识信息391)和关于所述另一个信息处理设备的能力信息以便管理的信息。保持在管理信息保持单元390中的管理信息至少包括关于与和另一个信息处理设备的通信有关的无线电波传播测量的信息(无线电波传播测量信息393),和关于电力消耗的信息(待机或唤醒397),作为关于另一个信息处理设备的能力信息。保持在管理信息保持单元390中的管理信息包括关于显示图像信息的显示形式的信息(显示形式396),作为关于另一个信息处理设备的能力信息。关于显示形式的信息例如是指示图像信息被显示成主信息或者副信息的信息。
[图像的转变例子]
图5是图解说明按照本技术的第一实施例,显示在信息处理设备300的显示单元351上的图像的转变例子的示图。
图5a图解说明其中通过把图像11设定为中间通道,把图像12设定为周边通道,在信息处理设备300的显示单元351上,显示图像11和12的显示形式的例子。
图5b图解说明其中通过把图像11设定为周边通道,把图像12设定为中间通道,在信息处理设备300的显示单元351上,显示图像11和12的显示形式的例子。
例如,设想其中信息处理设备200和400都向信息处理设备300传送具有标准分辨率的流(图像数据和音频数据)的情况。这种情况下,如图1中图解所示,可以图像11和图像12的大小相同地在信息处理设备300的显示单元351上,显示基于来自信息处理设备200的图像数据的图像11,和基于来自信息处理设备400的图像数据的图像12。在本例中,给定分辨率和显示区域被定义成相同,不过可向显示单元351增加缩放器功能,以致图像11和12被重新缩放后显示在显示单元351上。不过,在本技术的实施例中,为了易于说明,在说明中假定不使用这种功能。
在图像11和12的显示形式中,例如,可以保持在先前通信时设定的显示形式,图像11和12可按照所述显示形式,被显示在信息处理设备300的显示单元351上。
可根据与信息处理设备300的连接顺序,决定图像11和12的显示形式。例如,设想其中信息处理设备200首先连接到信息处理设备300,在该连接之后,信息处理设备400连接到信息处理设备300的情况。这种情况下,通过把图像11设定为中间通道,把图像12设定为周边通道,在信息处理设备300的显示单元351上显示图像11和12。即,可根据与信息处理设备300的连接顺序,按照中间通道和周边通道的顺序显示图像。
如图5a中图解所示,当通过把图像11设定为中间通道,把图像12设定为周边通道,在显示单元351上显示图像11和12时,假定用户信息获取单元360获得把图像12设定为中间通道的用户信息。例如,当观看者利用诸如遥控器或手势之类的指示器,进行把图像12设定为中间通道的操作时,用户信息获取单元360获得用于把图像12设定为中间通道的用户信息。这种情况下,如在图5b中图解所示,通过把图像12设定为中间通道,把图像11设定为周边通道,在显示单元351上显示图像11和12。此外,根据用户信息获取单元360获得的用户信息(例如,手动操作或视线),决定图像11和12在显示单元351的显示面上的显示位置。
[通信例子]
图6-8是图解说明按照本技术的第一实施例的包含在通信系统100中的设备之间的通信处理例子的序列图。图6-8图解说明信息处理设备200和300之间的通信处理的例子。
在图6-8中,包含在信息处理设备200中的各个单元之中的图像和音频信号生成单元250、图像和音频压缩单元260及流传输单元270被例示成数据传输系统201。天线210、无线通信单元220、控制信号接收单元230和控制单元240被例示成线路控制系统202。
在图6-8中,信息处理设备300的结构中的天线310、无线通信单元320、流接收单元330、控制单元370和控制信号传输单元380被例示成线路控制系统301。图像和音频解压缩单元340、图像和音频输出单元350及用户信息获取单元360被例示成输入和输出系统302。
在图6-8中,首先图解说明其中基于来自信息处理设备200的图像数据的图像作为周边通道,被显示在信息处理设备300的显示单元351上,并在信息处理设备200中设定低电力消耗模式的例子。随后,图解说明其中基于来自信息处理设备200的图像数据的图像作为中间通道,被显示在显示单元351上,并在信息处理设备200中设定通常电力消耗模式的例子。即,在图6-8中,图解说明信息处理设备200和300的连接建立例子,和信息处理设备200中的电力消耗模式的转变例子。
首先,当信息处理设备300被通电时,先前的输出形式(当信息处理设备300被断电时的输出形式)被设定为信息处理设备300的输出形式(图像显示形式和音频输出形式)(501)。信息处理设备300的控制单元370使管理信息保持单元390(图4中所示)保持利用无线通信,连接到信息处理设备300的各个发送端设备的管理信息。如图5中所示,根据先前的输出形式,信息处理设备300的控制单元370使显示单元351显示与分别传送自信息处理设备200和400的两个流对应的图像11和12。
随后,设想其中用户进行设定输出形式的操作(变更操作)的情况(502)。这种情况下,用户信息获取单元360获得与设定操作相关的控制信号,作为用户信息,所述用户信息被输出给控制单元370。随后,控制单元370根据所述用户信息,变更保持在管理信息保持单元390(图4中所示)中的内容(503和504)。例如,如在图5b中所示,设想其中进行把基于来自信息处理设备200的图像数据的图像11设定为周边通道的设定操作(变更操作)的情况。这种情况下,控制单元370把管理信息保持单元390中的信息处理设备200的输出形式396(图4中所示)变更成“副”(503和504)。
信息处理设备200定期或不定期地(还包括只在开始时)向信息处理设备300传送模式表格请求(分辨率、音质、低电力消耗模式等的查询请求)(505和506)。所述模式表格请求是传送在信息处理设备300中管理的各项信息(所述各项信息是借助关于信息处理设备300的管理信息,用于与信息处理设备200通信的信息(例如,可由信息处理设备200显示的分辨率信息等))的请求。
当信息处理设备300收到模式表格请求时(506),信息处理设备300按照所述模式表格请求,传送命令信息(507、508)。所述命令信息是供信息处理设备300用于把设定命令连同无线电波传播环境和显示形式一起,发给信息处理设备200的关于信息处理设备200的信息。例如,所述命令信息是包括分辨率和音质的输出形式信息(例如,中间通道和周边通道),是否对应于低电力消耗模式,制作者姓名,和多接收分集功能的有无的信息。例如,所述命令信息是包括分辨率和音质,图像和音频编解码器的种类,3D功能的有无,内容保护的有无,显示设备的显示大小,拓扑信息,可用协议,协议的设定信息(端口信息等),连接接口信息(连接器种类等),水平同步和垂直同步位置,发送端设备的性能优先级请求信息,是否对应于低电力消耗模式的模式控制表格响应,无线传输的最大传输吞吐量或可接收的最大吞吐量,中央处理器(CPU)功率,电池剩余电量,和电源信息的信息。每项信息包含在能力信息的一部分中。这里,关于信息处理设备200的分辨率和音质的输出形式信息例如是指示来自信息处理设备200的数据的显示形式是主形式(中间通道)还是副形式(周边通道)的信息。信息处理设备300从信息处理设备300的视点,传送以参数的形式,包含关于分辨率和音质或低电力消耗模式的设定的要求的命令信息。除了关于信息处理设备200的各项信息之外,信息处理设备300还可以命令信息的形式,传送关于所有发送端设备的各项信息。这种情况下,信息处理设备200只选择和使用专用于自身信息处理设备的信息。当设备遵从Wi-Fi认证的Miracast时,该设备对应于定义为RTSP消息的wfd-audio-codecs、wfd-video-formats、wfd-content-protection、wfd-displayedid、wfd-coupledsink、wfd-client-rtpports、wfd-I2C、wfd-uibccapability、wfd-connectortype、wfd-standby-resume-capability等,不过在这些命令中,待传送的消息内容不受限制。
当信息处理设备200收到命令信息时(508),信息处理设备200的控制单元240根据命令信息,指定来自信息处理设备200的数据的输出形式是主形式还是副形式。根据命令信息,信息处理设备200的控制单元240判定信息处理设备300是否具有与电力消耗工作模式对应的功能。随后,信息处理设备200的控制单元240向信息处理设备300传送指示指定的输出形式被设定的模式设定信息(509和510)。这里,假定副形式被指定为来自信息处理设备200的数据的输出形式。假定信息处理设备300具有与低电力消耗模式对应的功能。因而,信息处理设备200的控制单元240向信息处理设备300传送模式设定信息,用于向信息处理设备300通知指定的输出形式(副形式)被设定,并且低电力消耗模式被设定(509和510)。
在本例中,说明了其中根据命令信息,图像被指定为中间通道或者周边通道,然后设定低电力消耗模式的例子,不过,可以不使用中间通道或周边通道的判断作为基准地设定低电力消耗模式。例如,通过在发送端设备和接收端设备之间,交换指示模式可转变到低电力消耗模式的许可标记,可以设定低电力消耗模式。
随后,信息处理设备200的控制单元240把图像传输模式(周边通道)设定为传输模式(511)。因而,在数据传输系统201中,音质被设定,以输出用于显示周边通道的分辨率和副音频(512)。在线路控制系统202中,设定低电力消耗模式(513)。
这里,当按照这种方式设定低电力消耗模式时,接收端设备和发送端设备都被认为具有该功能。例如,移动设备(例如蜂窝电话机、智能电话机或平板终端)在许多情况下是由电池驱动工作的。于是,当来自自身信息处理设备的数据的输出形式不是主形式时(当输出形式为副形式时),理想的是尽可能降低自身信息处理设备的电池消耗。因而,在使接收端设备中的输出形式被设定为副形式的发送端设备中,理想的是设定低电力消耗模式。此外,在设定处理(512)中,可以只有分配给中间通道的发送端设备的音频被设定从扬声器再现,而分配给周边通道的发送端设备的音频可被设定成不被再现。分配给中间通道的发送端设备的音频的音量可被设定成主要部分,而分配给周边通道的发送端设备的音频的音量可被设定成降低后再现。
这样,当输出形式被设定为周边通道(副显示)时,信息处理设备300的控制单元370进行设定信息处理设备200中的低电力消耗模式的控制。即,信息处理设备300的控制单元370根据其中基于流,输出图像信息的显示单元351的输出形式,进行在信息处理设备200中设定电力消耗模式的控制。
当按照这种方式,设定低电力消耗模式时(513),信息处理设备200的控制单元240开始间歇传输(514-522)。
具体地,信息处理设备200仅仅使传输处理停止给定时间,并使各个单元睡眠(514)。随后,当所述给定时间过去时(514),信息处理设备200唤醒信息处理设备200的各个单元,以便进行传输处理,然后进行相对于信息处理设备300的传输处理(515-520)。
例如,信息处理设备200的控制单元240向信息处理设备300传送查询消息,以确认在信息处理设备300中是否产生任何变动(例如输出形式的变动)(515和516)。
当收到查询消息时(516),信息处理设备300的控制单元370向信息处理设备200传送响应消息,以通知是否产生任何变动(例如输出形式的变动)(517和518)。这里,假定在信息处理设备300中未产生变动(例如输出形式的变动)。于是,信息处理设备300的控制单元370向信息处理设备200传送用于通知未产生变动(例如输出形式的变动)的响应消息(517和518)。
当按照这种方式收到指示未产生变更(例如输出形式的变更)的响应消息时(518),不需要变更信息处理设备200中的设定。于是,信息处理设备200的控制单元240向信息处理设备300传送用于输出周边通道和副音频的流(519和520)。当信息处理设备300按照这种方式收到所述流时(520),信息处理设备300输出以接收的流为基础的图像和音频(521)。例如,如在图5b中图解所示,基于来自信息处理设备200的流的图像11作为周边通道被显示在显示单元351上。
当传输处理结束时(519),信息处理设备200仅仅使传输处理停止给定时间,使各个单元睡眠(522)。继续执行间歇传输,直到从信息处理设备300发出变更请求为止。
这里,在间歇传输中,存在其中不从信息处理设备200传送流的时间段。于是,信息处理设备300最好进行插值,并显示与最后从信息处理设备200接收的流对应的图像的显示处理。不过,假定信息处理设备300也不具有插值处理功能。这种情况下,在睡眠期间,来自信息处理设备200的图像可不被显示在显示单元351上。于是,当信息处理设备300不具有插值处理功能时,可以继续传送来自信息处理设备200的图像数据。例如,在作为来自信息处理设备200的传输对象的流中,传输停止时的最后图像数据被保存在传输缓冲器中。在睡眠期间,信息处理设备200的图像处理被停止,但是在无线链路中继续进行传输处理,从而继续传送保存在传输缓冲器中的图像数据。
在睡眠期间,只有与从信息处理设备400传送的流对应的图像可被显示在显示单元351上。例如,与从信息处理设备400传送的流对应的图像可被显示在显示单元351的整个表面上。
下面,说明其中用户进行设定输出形式的操作(变更操作)的情况的例子。
当用户进行设定输出形式的操作(变更操作)时(531),如上所述,控制单元370根据与设定操作相关的用户信息,变更保持在管理信息保持单元390(图4中所示)中的内容(532和533)。例如,如在图5a中所示,假定其中用户进行把基于来自信息处理设备200的图像数据的图像11设定为中间通道的设定操作(变更操作)的情况。这种情况下,控制单元370把管理信息保持单元390中的信息处理设备200的输出形式396(示于图4中)变更成“主”(532和533)。
这里,如上所述,当在信息处理设备200中设定低电力消耗模式时,假定信息处理设备200进入睡眠状态。这样,当信息处理设备200睡眠时,不能向信息处理设备200通知用户进行了设定输出形式的操作(变更操作)。
因而,当用户进行设定输出形式的操作(变更操作)531,从而保持在管理信息保持单元390(图4中所示)中的内容被变更时(532和533),信息处理设备300的控制单元370设定变更触发(534)。所述变更触发是当从信息处理设备200收到查询消息时,用于向信息处理设备200通知用户进行了设定输出形式的操作(变更操作)的触发。通过该变更触发,信息处理设备200取消待机模式的状态,并通知信息处理设备200,用户进行了设定输出形式的操作(变更操作)。
这里,设想其中信息处理设备200的各个单元唤醒,从而开始向信息处理设备300的传输处理的情况。这种情况下,信息处理设备300的控制单元370向信息处理设备200传送待机解除消息(535和536)。
当收到待机解除消息时(536),信息处理设备200的控制单元240向信息处理设备300传送响应消息(537和538)。
这样,按照来自接收端设备的待机模式解除请求(535-538),需要询问信息处理设备200中的设定。于是,信息处理设备200的控制单元240向信息处理设备300传送模式表格请求(539和540)。如上所述,所述模式表格请求是传送在信息处理设备300中管理的各项信息(关于信息处理设备200的管理信息)的请求。在上述处理(535-538)中,可以交换变更(比如输出形式的变更)的消息(例如,对于处理(515-518)中的查询消息的响应消息)。
当信息处理设备300收到模式表格请求时(540),信息处理设备300传送与模式表格请求相应的命令信息(541和542)。这里,当命令信息已从信息处理设备300被传送给信息处理设备200时,信息处理设备200已获得包含在命令信息中的信息。于是,信息处理设备300可以只传送差分信息,作为与模式表格请求相应的命令信息(541和542)。所述差分信息是与变更相关的信息,例如,是关于信息处理设备200的分辨率和音质的输出形式信息。
在收到命令信息时(542),信息处理设备200的控制单元240根据命令信息,指定来自信息处理设备200的数据的输出形式是主形式还是副形式。随后,信息处理设备200的控制单元240把指示指定的输出形式的设定的模式设定信息传送给信息处理设备300(543和544)。这里,假定主形式被指定为来自信息处理设备200的数据的输出形式。因而,信息处理设备200的控制单元240向信息处理设备300传送用于向信息处理设备300通知指定的输出形式(主形式)被设定,并且通常电力消耗模式被设定的模式设定信息(543和544)。当设备遵从Wi-Fi认证的Miracast时,可借助能力再协商,进行各个处理(539-544)。在能力再协商的情况下,不需要关于在处理(534)中输出形式未变更的设定值再次进行协商。例如,可以例示的是wfd-displayedid、wfd-client-rtpports、wfd-I2C和wfd-connectortype。
随后,信息处理设备200的控制单元240把图像传输模式(中间通道)设定为传输模式(545)。因而,在数据传输系统201中,设定用于显示中间通道的分辨率,和用于输出主音频的音质(546)。在线路控制系统202中,设定通常电力消耗模式(547)。
当按照这种方式设定通常电力消耗模式时(547),信息处理设备200的控制单元240开始通常的传输处理(548和549)。即,信息处理设备200向信息处理设备300传送用于输出中间通道和主音频的流(548和549)。当按照这种方式收到所述流时(549),信息处理设备300输出以接收的流为基础的图像和音频(550)。例如,如在图5a中所示,基于来自信息处理设备200的流的图像11作为中间通道被显示在显示单元351上。
在本例中,说明了其中当信息处理设备300被通电时,先前的输出形式(当信息处理设备300被断电时的输出形式)被设定为显示单元351的显示形式的例子。不过,当信息处理设备300被通电时,可以设定另一种输出形式。例如,当信息处理设备300被通电时,可以通常设定默认输出形式。或者,可根据与信息处理设备300的连接的顺序,决定输出形式。
在图6-8中,说明了其中信息处理设备200询问关于信息处理设备300的设定信息,并根据接收的参数信息,设定传输参数的例子。不过,信息处理设备200可向信息处理设备300要求对于期望被设定的参数的设定请求,并在信息处理设备200从信息处理设备300收到指示没问题的响应时,可以设定所述参数。图9和10中图解说明了该例子。
[通信例子]
图9-11是图解说明按照本技术的第一实施例的包含在通信系统100中的设备之间的通信处理例子的序列图。在图9和10中,在图6-8中图解所示的通信处理例子的一部分被修改。于是,在图9和10中,与图6-8中所示的通信处理例子相同的部分被赋予相同的附图标记,其说明将被部分省略。在图11中,在图9中图解所示的通信处理例子的一部分被修改。于是,在图11中,与图9中图解所示的通信处理例子相同的部分被赋予相同的附图标记,其说明将被部分省略。
图9中图解所示的处理(561-564)对应于图6中图解所示的处理(501-504)。
随后,信息处理设备300的控制单元370向信息处理设备200传送用于把用户设定的输出形式通知信息处理设备200的模式状态通知(565和566)。所述模式状态通知是用于通知可由信息处理设备200设定的分辨率和音质,图像和音频编解码器的种类,3D功能的有无,内容保护的有无,显示设备的显示大小,拓扑信息,可用协议,协议的设定信息(端口信息等),连接接口信息(连接器的种类等),水平同步和垂直同步位置,发送端设备的性能优先级请求信息,是否对应于低电力消耗模式的模式控制表格响应,无线传输的最大传输吞吐量或可接收的最大吞吐量,中央处理器(CPU)功率,电池剩余电量,和电源信息,以及由用户设定的输出形式(例如,主形式或副形式)的信息。
这样,紧接在进行信息处理设备300中,用户进行的输出形式的设定操作之后,用于把与设定操作相关的输出形式通知信息处理设备200的模式状态通知可被传送给信息处理设备200。于是,能够缩短利用无线通信连接的信息处理设备200和300之间的设定时间(变更时间)。
当收到模式状态通知时(566),信息处理设备200的控制单元240比较由接收的模式状态通知指定的状态参数和自身信息处理设备的状态参数。随后,信息处理设备200的控制单元240根据比较结果,决定设定内容(例如,分辨率和音频,以及电力消耗模式)。随后,信息处理设备200的控制单元240向信息处理设备300传送用于通知决定的设定内容(例如,分辨率和音频,以及电力消耗模式)的模式设定请求(567和568)。
当收到模式设定请求时(568),信息处理设备300的控制单元370判定是否允许由收到的模式设定请求指定的设定内容(例如分辨率和音频,以及电力消耗模式)。随后,信息处理设备300的控制单元370向信息处理设备200传送用于通知判定结果的模式设定可行性命令(569和570)。
当收到模式设定可行性命令时(570),信息处理设备200的控制单元240确认模式设定可行性命令的内容。例如,当收到指示与由信息处理设备200传送的模式设定请求相关的设定内容的许可的模式设定可行性命令时,信息处理设备200的控制单元240把图像传输模式(周边通道)设定为传输模式(571)。此外,图9中图解所示的处理(571-574)对应于图6中图解所示的处理(511-514)。此外,图10中图解所示的处理(575-578)对应于图7中图解所示的处理(519-522)。
当收到指示与由信息处理设备200传送的模式设定请求相关的设定内容的不许可的模式设定可行性命令时,信息处理设备200的控制单元240重新决定设定内容(例如,分辨率和音频,以及电力消耗模式)。随后,信息处理设备200的控制单元240向信息处理设备300传送用于把新决定的设定内容(例如,分辨率和音频,以及电力消耗模式)通知信息处理设备300的模式设定请求。
图10中图解所示的处理(581-583)对应于图7中图解所示的处理(531-533)。
随后,信息处理设备300的控制单元370向信息处理设备200传送用于把用户变更的输出形式通知信息处理设备200的模式状态变更通知(584和585)。所述模式状态变更通知是用于通知可由信息处理设备200设定的分辨率和音质,和是否对应于低电力消耗模式,以及用户变更的输出形式(例如,主形式或副形式)的信息。
当收到模式状态变更通知时(585),信息处理设备200的控制单元240决定设定内容(例如,分辨率和音频,以及电力消耗模式)。决定设定内容的处理和上面说明的决定处理相同。随后,信息处理设备200的控制单元240向信息处理设备300传送用于把决定的设定内容(例如,分辨率和音频,以及电力消耗模式)通知信息处理设备300的模式变更请求(586和587)。
当收到模式变更请求时(587),信息处理设备300的控制单元370判定是否允许收到的模式变更请求指定的设定内容(例如,分辨率和音频,以及电力消耗模式)。随后,信息处理设备300的控制单元370向信息处理设备200传送用于通知判定结果的模式设定可行性命令(588和589)。
当收到模式设定可行性命令时(589),信息处理设备200的控制单元240确认模式设定可行性命令的内容,并设定传输模式(590)。该确认处理和上面说明的确认处理相同。图10中图解所示的处理(590-595)对应于图8中图解所示的处理(545-550)。
这里,当发送端设备进行周边通道和中间通道的切换时,指示切换的时刻的信息(例如,指示图像组(GOP)的开始的信息,或者指示图像的开始的信息)可被包含在待传送的流中。换句话说,当发送端设备进行主显示和副显示的切换时,指示切换的时刻的信息可被传送给接收端设备。这种情况下,收到流的接收端设备可根据指示时刻的信息,在适当时刻进行周边通道和中间通道的切换。
这里,图6-10图解说明其中控制连接到接收端设备的发送端设备的待机和唤醒的例子。这里,可根据连接到接收端设备的发送端设备的待机和唤醒,控制接收端设备的待机和唤醒。例如,当连接到接收端设备的所有发送端设备都待机时,可以进行控制,以致接收端设备待机。当连接到接收端设备的发送端设备至少之一唤醒时,可以进行控制,以致该接收端设备唤醒。
图11中图解说明其中在图9中所示的处理(565-570)中,接收端设备通知发送端设备在处理(564)中保持的内容被变更,发送端设备传送模式表格请求的情况的变形例。
如图11中图解所示,信息处理设备300传送通知信息处理设备200输出形式被变更(564),并促成从信息处理设备200传送模式设定请求的模式状态通知(565和566)。当对应可能时,收到模式状态通知的信息处理设备200向信息处理设备300传送指示模式状态通知的认可的模式状态通知认可(851和852)。
这样,在传送模式状态通知认可之后(851),进行各个处理(853-858)。所述各个处理(853-858)对应于图6中图解所示的处理(505-510)。这样,通过在模式状态通知认可的传输之后(851),进行各个处理(853-858),能够在状态变更(输出形式的变更(564))下,适当地进行流传输控制(例如,数据传输速度控制和可缩放传输速率控制)。
这里,例如,在按照Wi-Fi认证的Miracast准备的命令中,包括wfd-triggered-method的RTSPM5消息目前被定义为由信息处理设备200传送给信息处理设备300的命令。不过,当包括wfd-triggered-method的RTSPM5消息被扩展为由信息处理设备300传送给信息处理设备200的命令时,包括wfd-triggered-method的RTSPM5消息可被信息处理设备200接收,从而信息处理设备200能够与信息处理设备300开始能力再协商。即,利用包括wfd-triggered-method的RTSPM5消息,能够交换管理信息。例如,当管理信息被变更时,信息处理设备300的控制单元370能够进行控制,以致在Wi-Fi认证的Miracast规范中定义的包括wfd-triggered-method的RTSPM5消息,作为向信息处理设备200通知所述变更的命令被传送给信息处理设备200。除该命令之外,可以新定义充当等同物的命令。
[信息处理设备(发送端设备)的操作例子]
图12是图解说明按照本技术的第一实施例,由信息处理设备200进行的数据传输处理的处理过程的例子的流程图。图12图解说明其中信息处理设备200首先向信息处理设备300传送具有标准分辨率的流(图像数据和音频数据)的情况的例子。这种情况下,假定进行向信息处理设备300的基于所述流的输出。
首先,控制单元240向信息处理设备300传送模式表格请求(步骤S901)。随后,控制单元240判定是否从信息处理设备300收到命令信息(步骤S902)。当未收到命令信息时,继续进行监视。当即使等待给定时间,仍未收到命令信息时,处理因超时而结束。例如,在Wi-Fi认证的Miracast中,取决于状况,设定5秒-9秒的超时。
当从信息处理设备300收到命令信息时(步骤S902),控制单元240向信息处理设备300传送指示根据接收的命令信息,设定模式的模式设定信息(步骤S903)。
随后,控制单元240根据接收的命令信息,设定模式(步骤S904)。当命令信息中包含增大分辨率的变更请求时,控制单元240响应该变更请求,设定图像和音频的分辨率。当命令信息中包含降低分辨率的变更请求时,控制单元240响应该变更请求,设定图像的分辨率和音频的音质。
随后,控制单元240进行按照设定,把流传送给信息处理设备300的传输处理(步骤S905)。
随后,控制单元240判定是否设定了低电力消耗模式(步骤S906)。当未设定低电力消耗模式(即,设定了通常电力消耗模式)时,处理进入步骤S911。相反,当设定了低电力消耗模式时(步骤S906),控制单元240睡眠给定时间(步骤S907)。
随后,控制单元240向信息处理设备300传送查询消息(步骤S908)。随后,控制单元240判定是否从信息处理设备300收到响应消息(步骤S909)。当未收到响应消息时,继续进行监视。当尽管等待给定时间,仍未收到响应消息时,处理因超时而终止。例如,在Wi-Fi认证的Miracast中,取决于状况,设定5秒-9秒的超时。
当从信息处理设备300收到响应消息时(步骤S909),控制单元240判定响应消息是否包括变更请求(步骤S910)。当响应消息包括变更请求时(步骤S910),处理返回步骤S901。
当响应消息不包括变更请求时(步骤S910),控制单元240判定是否收到变更请求(步骤S911)。当收到变更请求时(步骤S911),处理返回步骤S901。相反,当未收到变更请求时(步骤S911),控制单元240判定是否进行了传输停止操作(步骤S912)。当进行了传输停止操作时(步骤S912),数据传输处理的操作结束。相反,当未进行传输停止操作时(步骤S912),处理返回步骤S905。
[信息处理设备(接收端设备)的操作例子]
图13是图解说明按照本技术的第一实施例,由信息处理设备300进行的数据传输速度控制处理的处理过程的例子的流程图。图13图解说明其中当信息处理设备300收到流(图像数据和音频数据)时,决定与发送端设备相关的设定内容(例如分辨率和电力消耗模式)的例子。
例如,信息处理设备300的控制单元370可按照用于设定中间通道的用户信息,或者信息处理设备300与各个发送端设备之间的链路无线电波传播环境,决定要使用的分辨率和要使用的频道。
例如,假定其中进行在图5a中图解所示的状态下选择图像12的用户操作的情况。这种情况下,理想的是增大图像12的分辨率,并降低图像11的分辨率。此外,理想的是随着时间的过去,根据各个发送端设备的链路无线电波传播环境,选择图像11和12的最佳分辨率。
例如,信息处理设备300可使对应于对应吞吐量的数据流向多个频道的同时,了解无线电波传播特性。例如,信息处理设备300保持以便了解所述多个频道中的每个频道的理想吞吐量的表格。随后,信息处理设备300可根据同时使用的发送端设备的数目,和PER,了解待使用的频道的可用数据传输速度,并为每个频道选择最佳频道。
例如,控制单元370从管理信息保持单元390获得管理信息,从用户信息获取单元360获得用户信息(步骤S921)。随后,控制单元370根据获得的管理信息和用户信息,决定输出形式(步骤S922)。根据决定的输出形式,与从多个发送端设备中的每个发送端设备传送的两个流对应的图像被显示在显示单元351上。
随后,控制单元370判定是否存在对其来说,包含在管理信息中的PER小于阈值的发送端设备(步骤S923)。当存在对其来说,包含在管理信息中的PER等于或小于阈值的发送端设备时(步骤S923),控制单元370决定增大发送端设备的分辨率的变更请求(步骤S924)。按照基于用户信息的输出形式,控制单元370进行向中间通道分配高数据传输速度的控制。例如,变更请求被包含在待传送给发送端设备的命令信息(例如,图6中所示的命令信息)中。可判定在增大发送端设备的分辨率之后的吞吐量是否小于阈值,并可根据判定结果,控制流的速率。
当不存在对其来说,包含在管理信息中的PER等于或小于阈值的发送端设备时(步骤S923),控制单元370根据管理信息,判定各个发送端设备的吞吐量是否等于或小于阈值(步骤S925)。即,判定每个链路的吞吐量即使对于当前频道是否也没有问题(步骤S925)。
当各个发送端设备的吞吐量不等于或小于阈值时(步骤S925),处理返回步骤S921。相反,当各个发送端设备的吞吐量等于或小于阈值时(步骤S925),控制单元370根据管理信息,判定是否存在对应于低电力消耗模式的发送端设备(步骤S926)。
当存在对应于低电力消耗模式的发送端设备时(步骤S926),控制单元370决定在对应于低电力消耗模式的发送端设备中,设定低电力消耗模式的变更请求(步骤S928)。例如,该变更请求被包含在待传送给该发送端设备的命令信息(例如,图6中所示的命令信息)中。
当不存在对应于低电力消耗模式的发送端设备时(步骤S926),控制单元370决定降低发送端设备(对其来说,PER等于或小于阈值的发送端设备)的分辨率的变更请求(步骤S927)。例如,该变更请求被包含在待传送给该发送端设备的命令信息(例如,图6中所示的命令信息)中。
判定是否进行接收停止操作(步骤S929)。当进行接收停止操作时,数据传输速度控制处理的操作结束。当未进行接收停止操作时,处理返回步骤S921。当存在通过低电力消耗模式的设定,进入睡眠状态的发送端设备时,连接到信息处理设备300的发送端设备的数目减小。这种情况下,步骤S925中的吞吐量的阈值可被变更。在按照这种方式变更吞吐量的阈值之后,可以进一步进行和步骤S925对应的步骤。
这样,能够实现其中接收端设备持续给定时间,训练线路环境,并把能够进行稳定的视频通信的分辨率通知发送端设备的控制协议。还能够实现其中发送端设备持续给定时间,在线路环境中进行训练,并请求能够进行稳定的视频通信的分辨率,而接收端设备响应所述请求的控制协议。
这样,信息处理设备300的控制单元370可根据管理信息保持单元390的管理信息,和用户信息获取单元360获得的用户信息,进行从各个发送端设备传送的两个流的传输控制(例如,数据传输速度控制和可缩放传输速率控制)。
此外,可以进行使从信息处理设备200和400每一个传送的两个流的总数据传输速度降至最小的控制。例如,在接收侧信息处理设备300的控制单元370中,设定总数据传输速度的最大容许值。在控制单元370向信息处理设备200传送降低比特率的变更请求之后,控制单元370从流接收单元330获得从信息处理设备200和400传送的两个流的比特率。随后,控制单元370计算获得的两个流的总数据传输速度。随后,控制单元370在不大于设定的最大容许值的范围内,决定从信息处理设备400传送的流的比特率,并向信息处理设备400传送增大比特率的变更请求。当尽管比特率被设定为最小比特率,但PER较高,从而在相同频道中不能接收时,可以使用不同的频道。当图像(中间通道和周边通道)被暂停给定时间或更长时,图像数据可被停止,只要用户未进行操作(比如指示操作)。
这样,按照本技术的第一实施例,即使当一个接收端设备接收从多个发送端设备传送的多个流时,也能够按照用户的操作、状况和意图,进行适当的流传输控制(例如,数据传输速度控制)。例如,可按照用户的操作、状况和意图,降低多个图像和音频流中的一些流的数据传输速度,并增大剩余流的数据传输速度。
例如,当接收端设备接收并显示多个流时,可以欣赏具有由用户及时设定的高质量的重要图像和音频。对于另外的图像和音频,数据传输速度可被自动调整到最佳的频道,电力消耗和传输速率。
这里,对于保持在管理信息保持单元390中的管理信息,按照Wi-Fi认证的Miracast准备的命令可用于交换所述管理信息。这种情况下,可以使用在Wi-Fi Display规范中定义的能力协商或能力再协商。这里,作为能力协商或能力再协商,例如,可以例示的是RFC5939或Wi-Fi认证的Miracast规范。不过,能力协商或能力再协商不限于此,而是被定义为设备性能信息的交换。图14-16中图解说明利用Wi-Fi认证的Miracast规范的命令的交换的通信例子。
[利用Wi-Fi认证的Miracast规范命令的交换的通信例子]
图14-16是图解说明按照本技术的第一实施例,发送端设备和接收端设备之间的通信处理例子的序列图。图14-16图解说明利用RTSP协议的交换的通信例子。发送端设备820对应于信息处理设备200和400,而接收端设备830对应于信息处理设备300。
首先参考图14进行说明。例如,如用图14的虚线矩形840所示,可以使用从发送端设备传送给接收端设备的“RTSP M3请求”(RTSP GET_PARAMETER请求)消息,和响应“RTSPM3请求”(RTSP GET_PARAMETER请求)消息,从接收端设备传送给发送端设备的“RTSP M3响应”(RTSP GET_PARAMETER响应)消息。这种交换处理例如对应于图6中所示的处理(505-508),和图8中所示的处理(539-542)。另一方面,消息可酌情从发送端设备传送给接收端设备。例如,“RTSP M3请求”(RTSP GET_PARAMETER请求)消息和“RTSP M3响应”(RTSP GET_PARAMETER响应)消息的交换可被省略,可把管理信息包含在将从发送端设备传送给接收端设备的消息中,所述管理信息可从发送端设备被传送给接收端设备,接收端设备可选择信息,并把该信息保持在管理信息保持单元390中。例如,当进行内容保护设定时,在M3响应之后,进行链路保护设置。于是,理想的是在通过只传送M4以上的消息,确保一次设定的链路的保密性的时候进行通信。
借助利用RTSP协议的预定消息,可以进行关于电力消耗模式的信息的交换。例如,可以交换下述(1)-(3)的3种管理信息:
(1)“待机模式的设定”,
(2)“当发送端设备解除待机模式时,或者当发送端设备解除接收端设备的待机模式时”,和
(3)“当接收端设备解除待机模式时,或者当接收端设备解除发送端设备的待机模式时”。
首先参考图15进行说明。例如,当使用在Wi-Fi认证的Miracast中准备的命令时,在如上所述的(1)“待机模式的设定”的交换中,可以使用从发送端设备820传送给接收端设备830的“RTSP M12请求”(RTSP SET_PARAMETER(带有WFD-standby))消息,和响应“RTSPM12请求”(RTSP SET_PARAMETER(带有WFD-standby))消息,从接收端设备830传送给发送端设备820的“RTSP M12响应”(RTSP OK)消息。另一方面,这也适用于从接收端设备830到发送端设备820的待机模式的设定。
接下来参考图16进行说明。例如,如上所述的(2)“当发送端设备解除待机模式时,或者当发送端设备解除接收端设备的待机模式时”,发送端设备820交换传送给接收端设备830的“RTSP M5请求”(RTSP SET_PARAMETER(请求(wfd-trigger-method:PLAY))消息,和响应“RTSP M5请求”(RTSP SET_PARAMETER(请求(wfd-trigger-method:PLAY))消息,从接收端设备830传送给发送端设备820的“RTSP M5响应”(RTSP OK)消息。接收端设备830可利用传送给发送端设备820的“RTSP M7请求”(RTSP PLAY请求)消息,和响应“RTSP M7请求”(RTSP PLAY请求)消息,从发送端设备820传送给接收端设备830的“RTSP M7响应”(RTSPOK)消息。
例如,如上所述的(3)“当接收端设备解除待机模式时,或者当接收端设备解除发送端设备的待机模式时”,接收端设备830可利用传送给发送端设备820的“RTSP M7请求”(RTSP PLAY请求)消息,和响应“RTSP M7请求”(RTSP PLAY请求)消息,从发送端设备820传送给接收端设备830的“RTSP M7响应”(RTSP OK)消息。所述交换例如对应于图7中所示的处理(515-518),和图7中所示的处理(535-538)。
例如,在图9中所示的处理(565-570)的交换中,可以利用从接收端设备830传送给发送端设备820的“RTSP M12请求”(RTSP SET_PARAMETER(带有WFD-standby))消息,和响应“RTSP M12请求”(RTSP SET_PARAMETER(带有WFD-standby))消息,从发送端设备820传送给接收端设备830的“RTSP M12响应”(RTSP OK)消息。
此外,例如,在图10中所示的处理(584-589)的交换中,可以利用从接收端设备830传送给发送端设备820的“RTSP M7请求”(RTSP PLAY请求)消息,和响应“RTSP M7请求”(RTSP PLAY请求)消息,从发送端设备820传送给接收端设备830的“RTSP M7响应”(RTSPOK)消息。
这样,无线通信单元320可借助在Wi-Fi Display规范中定义的能力协商或能力再协商,进行能力信息的交换。例如,借助能力协商或能力再协商中的RTSP M3消息,交换能力信息。
这样,例如,信息处理设备300的无线通信单元320进行与发送端设备的通信,以便交换关于信息处理设备300的能力信息,和关于信息处理设备200的能力信息。信息处理设备200的无线通信单元220进行与信息处理设备300的通信,以便交换关于信息处理设备200的能力信息,和关于信息处理设备300的能力信息。这种情况下,无线通信单元220和320可借助能力协商或能力再协商,交换能力信息。
信息处理设备300的控制单元370根据关于信息处理设备200的能力信息,关于与信息处理设备200的通信的无线电波传播测量信息,和信息处理设备300的使用,进行与信息处理设备200的流传输控制(例如,数据传输速度控制和可缩放传输速率控制)。流传输方法和本技术的实施例中的不同,不过,信息处理设备200的控制单元240也可根据以关于信息处理设备200的能力信息,和关于与信息处理设备300的流通信的无线电波传播测量信息为基础,从信息处理设备300进行的控制,进行与信息处理设备300的流传输控制(例如,数据传输速度控制和可缩放传输速率控制)。
信息处理设备300的控制单元370根据关于信息处理设备200的能力信息(例如,指示信息处理设备200是否是移动设备的信息),进行在信息处理设备200中设定电力消耗模式的控制。这种情况下,控制单元370可根据关于信息处理设备200的能力信息,和用于管理信息处理设备200的管理信息,进行在信息处理设备200中设定低电力消耗模式的控制。信息处理设备200的控制单元240根据以关于信息处理设备200的能力信息为基础,从信息处理设备300进行的控制,设定电力消耗模式。在本技术的实施例中,说明了其中使用两个发送端设备的拓扑的例子,不过本技术的实施例不限于本技术的该实施例。例如,当发送端设备的数目为2或更大时,必须控制与设备的数目对应的数据传输速度控制,状态转移相当多。于是,控制困难,但是能够获得好处。也可对应于其中连接两个或更多发送端设备的拓扑。
<2.第二实施例>
在本技术的第二实施例中,说明切换发送端设备与接收端设备之间经接入点的连接,和发送端设备与接收端设备之间的直接连接的例子。
[通信系统的结构例子]
图17是图解说明按照本技术的第二实施例的通信系统700的系统结构例子的示图。
通信系统700包括接入点701、网络702、信息处理设备703、704、710、720和730、显示设备731和控制设备740。
接入点701是无线LAN(例如,Wi-Fi)的接入点。例如,接入点701具有IEEE802.11标准的基础结构模式的功能。接入点701连接到一个或多个信息处理设备(例如,传输侧信息处理设备(发送端设备)和接收侧信息处理设备(接收端设备))。
接入点701可经有线线路(例如,以太网(注册商标)),与信息处理设备730连接。例如,接入点701可经网络702,与信息处理设备730连接。接入点701可与信息处理设备730的内部总线连接,并进行处理。信息处理设备730的内部总线的例子包括通用串行总线(USB)、外围组件互连(PCI)和PCI Express。接入点701和信息处理设备730之间的连接可以是有线连接或无线连接(例如,无线LAN)。例如,在无线LAN的情况下,网络702连接到信息处理设备730,信息处理设备730必须判定传输/接收处理是与接入点701的传输/接收处理,还是与信息处理设备710的传输/接收处理。
在本技术的第二实施例中,将说明其中利用无线LAN(例如,对应于IEEE 802.11a/b/g/n/ac/ad的无线LAN),连接接入点701和信息处理设备703、704、710和720的例子。将说明其中经以太线,连接接入点701和信息处理设备730的例子。
此外,将说明其中信息处理设备703、704、710和720被假定是传输侧信息处理设备(发送端设备),而信息处理设备730被假定是接收侧信息处理设备(接收端设备)的例子。信息处理设备703、704、710和720对应于图2中图解所示的信息处理设备200,信息处理设备730对应于图3中图解所示的信息处理设备300。在下面的说明中,作为发送端设备,将主要说明信息处理设备710,所述说明类似地适用于信息处理设备703、704和720。
信息处理设备710是传送图像的传输侧信息处理设备(发送端设备)。信息处理设备710是能够按基础结构模式,与接入点701相连的信息处理设备。
这里,将说明其中信息处理设备710按基础结构模式,建立与接入点701的连接的连接例子。信息处理设备710响应从接入点701传送的信标信号,向接入点701传送连接请求信号。如上所述,信息处理设备710通过传送连接请求信号,开始与接入点701建立连接的操作(连接建立操作)。
连接建立操作是链接层2的层级的操作。例如,除了在无线LAN中进行的利用分组标识(PID)的密码认证之外,还需要判定信息处理设备710是否是作为应用被连接的连接认证处理。
信息处理设备710可通过P2P直接通信(例如,WiFi Direct),建立与信息处理设备730的连接。例如,信息处理设备710具有能够通过WiFi Direct,建立与信息处理设备730的连接,从而实现诸如Wi-Fi认证的Miracast或数字生活网络联盟(DLNA)之类图像通信的协议。
信息处理设备710可以是与接入点701建立连接,并通过接入点701,与信息处理设备730交换各种信息的待机设备。此外,当信息处理设备710只被用作待机设备时,信息处理设备710可不具有能够实现图像通信的协议。
信息处理设备730具有与接入点701、信息处理设备703、704、710和720或者控制设备740建立连接的通信功能。信息处理设备730具有与接入点701、信息处理设备703、704、710和720和控制设备740建立连接,并控制所有协议的功能。信息处理设备730具有与专用LAN或全局LAN建立连接的通信功能。
这里,重要的是稳定化信息处理设备730与信息处理设备703、704、710和720之间的连接。从而,理想的是把与接入点701使用的射频不同的频率用于信息处理设备730与信息处理设备703、704、710和720之间的连接。在本技术的第二实施例中,将说明其中使用诸如IEEE 802.11a/b/g/n/ac/ad的2.4GHz、5GHz或60GHz之类频带的例子。这里,可以使用任何其它无线标准或任何其它频带。
信息处理设备730具有显示图像的显示功能。显示功能是进行电视机或投影仪的屏幕显示的功能。信息处理设备730可使图像被显示在信息处理设备730被配备的显示单元上,或者可使图像被显示在外部显示设备上。在本技术的第二实施例中,将说明其中安装与信息处理设备730分离的显示设备731的例子。
当如上所述,安装与信息处理设备730分离的显示设备731时,可通过有线连接或无线连接,连接信息处理设备730和显示设备731。例如,当通过有线连接,连接信息处理设备730和显示设备731时,可以利用电缆(例如,高清多媒体接口(HDMI)(注册商标)、移动高清链路(MHL)、DisplayPort或USB3.0),建立连接。此外,例如,当通过无线连接,连接信息处理设备730和显示设备731时,可以利用无线LAN,建立连接。多个显示设备可被连接到信息处理设备730。
控制设备740是管理包含在通信系统700中的信息处理设备(信息处理设备703、704、710、720和730),并控制信息处理设备的连接的连接控制设备。例如,控制设备740管理和检测与信息处理设备相关的信息(例如,终端标识信息和能力信息),和信息处理设备的工作状态(例如,通信模式和群组参与状态)。控制设备740利用无线通信,与信息处理设备730连接。例如,信息处理设备730支持的通信方式(例如,无线LAN)可以用作无线通信。可以使用红外方式、任何其它无线方式或者有线线路。控制设备740可具有用于建立与接入点701的连接的协议,经接入点701,建立与信息处理设备730的连接。
[通信系统的安装例子]
图18是图解说明按照本技术的第二实施例的通信系统700的安装例子的示图。
图18图解说明其中在大学中的教室30中,安装通信系统700的例子。在图18中,人物用圆示意表示,指示每个人物的名称记录在对应于该人物的圆中。例如,假定存在位于教室30的讲台侧(图18的上侧)的教师1,并且假定教师1在使用控制设备740。假定学生1坐在教室30的前侧的座位31,并且假定学生1在使用信息处理设备710。类似地,假定学生2-20坐在座位32-35,在使用信息处理设备703-705和720。假定入口36安装在教室30的后侧(图18的下侧)。
例如,在教室30中,显示设备731安装在讲台侧,以便坐在座位31-35的学生1-20易于看见。考虑到教室30的空间,在教室30之内或之外适当地安装接入点701、网络702和信息处理设备730。这种情况下,接入点701优选被安装在其中能够进行与坐在座位31-35的学生使用的信息处理设备的无线通信的场所中。
例如,设想其中学生一个接一个在教室30中作演讲的情况。这种情况下,每个学生可在使与演讲相关的图像被显示在显示设备731上,从而其他学生看得见的时候进行演讲。
通过操作控制设备740,教师1能够顺序选择已使图像被显示在显示设备731的显示单元732上的学生的信息处理设备。信息处理设备的选择例子将参考图21详细说明。
在教室30的入口36附近,安装读/写器设备37。读/写器设备37利用近场通信(例如,NFC),与信息处理设备交换各种信息。读/写器设备37利用无线线路或有线线路,把在信息处理设备之间交换的信息传送给信息处理设备730。利用读/写器设备37的例子将在本技术的第三实施例中说明。
[控制设备的结构例子]
图19是图解说明按照本技术的第二实施例的控制设备740的功能结构例子的方框图。
控制设备740包括天线741、无线通信单元742、输入和输出单元743、操作接收单元746、控制单元747和群组管理信息保持单元750。
在控制单元747的控制下,无线通信单元742利用无线通信,经天线741往来于信息处理设备730传送和接收各项信息。
操作接收单元746是接收用户进行的操作输入,并按照接收的操作输入,把操作信息输出给控制单元747的操作接收单元。操作接收单元746例如用键盘或鼠标实现。
输入和输出单元743使各种图像被显示在显示单元744上,并根据接近或触摸显示单元744的显示面的物体的检测状态,通过输入单元745接收用户输入的操作。输入单元745把与接收的操作输入相应的控制信息输出给控制单元747。
如上所述,输入和输出单元743与显示单元744和输入单元745一体地构成。利用通过用他或她的手指,触摸或接近显示面,用户能够在上面进行操作输入的触摸面板,可以一体地构成输入和输出单元743。此外,例如,通过对显示在显示单元744上的图像进行触摸操作(或者接近操作),用户能够操作控制设备740。
例如,根据电容的变化,检测具有导电性的物体(例如,人类的手指)的触摸或接近的电容式(静电电容式)触摸面板可以用作输入单元745。此外,可以使用除静电式(静电电容式)触摸面板外的任何触摸面板。例如,可以使用压敏式(电阻式)触摸面板或光学触摸面板。
控制单元747根据控制程序,控制控制设备740的各个单元。例如,当按照Wi-Fi认证的Miracast规范,在接收端设备和多个发送端设备之间进行实时图像传输时,控制单元747进行以致在发送端设备中,设定通信模式的控制。这种情况下,控制单元747使指示多个发送端设备的图像被显示在输入和输出单元743上,并进行控制,以致根据输入和输出单元743中的操作输入,在发送端设备中设定通信模式。或者,控制单元747进行控制,以致根据预定顺序,在发送端设备中设定通信模式。这里,预定顺序例如可以是并排显示在图22中图解所示的周边通道区域734上的图像的顺序。此外,当存在多个显示设备时,控制单元747可进行控制,以致所有画面被显示在各个显示设备上,或者进行切换显示。
群组管理信息保持单元750是保持用于以群组为单位,管理利用无线通信连接到信息处理设备730的发送端设备的信息(群组管理信息)的表格。保持在群组管理信息保持单元750中的内容将参考图20详细说明。
[保持在群组管理信息保持单元中的内容例子]
图20是示意图解说明按照本技术的第二实施例,保持在群组管理信息保持单元750中的内容例子的示图。
在群组管理信息保持单元750中,彼此关联地保持终端标识信息751、用户信息752、通信模式753、群组参与状态754、室外使用755和可用群组参与时间756。
在终端标识信息751中,保存用于识别利用无线通信,连接到信息处理设备300的发送端设备的标识信息。
在用户信息752中,保存与利用无线通信,连接到信息处理设备300的用户拥有的发送端设备相关的信息(用户信息)。例如,用户的姓名、昵称、标识信息(例如,学生ID号、雇员ID号或者会员号)或者图像(例如,用户面部的图像或者用户面部的图画)可被保存为用户信息。保存在用户信息752中的用户信息被显示在输入和输出单元743上。用户信息可由例如拥有发送端设备的用户登记在控制设备740中。每次建立与信息处理设备300的连接时,用户信息可被登记在控制设备740中。
在利用无线通信,连接到信息处理设备300的发送端设备中设定的通信模式被保存在通信模式753中。例如,待机模式、图像传输模式(中间通道)和图像传输模式(周边通道)任意之一被保存为通信模式。通信模式将参考图22详细说明。
指示信息处理设备300是否是利用无线通信连接的信息被保存在群组参与状态754中。例如,事先登记在控制设备740中的发送端设备也不被认为连接到信息处理设备300。从而,参照群组参与状态754,能够检测登记在控制设备740中,但未连接到信息处理设备300的发送端设备。
指示利用无线通信,连接到信息处理设备300的发送端设备是否能够利用除特定接入点外的基站,进行通信的信息被保存在室外使用755中。换句话说,指示即使当发送端设备移动到除特定场所外的场所时,通过使用利用无线通信连接到信息处理设备300的发送端设备是否能够进行通信的信息被保存在室外使用755中。
指示其中利用无线通信,连接到信息处理设备300的发送端设备能够参加群组的时间带的信息被保存在可用群组参与时间756中。例如,在其中进行高度机密的发言或会议、重要度高的发言或会议(的时间带中)、不能外泄的聚会等的时间带中,可不向一些用户给予许可。
[控制设备的显示例子]
图21是图解说明按照本技术的第二实施例,显示在控制设备740的输入和输出单元743上的显示画面的例子的示图。
指示由控制设备740管理的一个或多个信息处理设备的图像(教师1和学生1-20)被显示在输入和输出单元743上。在输入和输出单元743上,设置呈现区域748和待机区域749。
图21图解说明其中如图18中图解所示,在大学的教室30中安装通信系统700的例子。这种情况下,例如,显示指示存在于教室30中的教师1和学生1-20的图像(例如,图标)。在图21中,在与指示教师的图像对应的矩形中,记录文本“教师”和识别教师的数字。此外,在与指示学生的图像对应的矩形中,记录文本“学生”和识别学生的数字。可以显示具有识别学生的其它信息(例如,学生ID号、ID、面部图像、姓名或昵称)的图标。
在图21中,图解说明其中按照分配给学生的编号的顺序,格子状地排列指示学生1-20的图像的例子,不过,指示学生1-20的图像可具有任何其它排列。例如,可按照各个学生的位置,排列指示学生1-20的图像。例如,可以获得每个学生拥有的信息处理设备的位置信息(例如,纬度和经度),根据位置信息,可以确定信息处理设备的绝对位置。可根据如上所述确定的信息处理设备的位置,确定信息处理设备的相对位置,并排列各个学生。例如,信息处理设备可利用全球定位系统(GPS),获得位置信息。
例如,可利用无线电波,检测信息处理设备的相对位置。例如,信息处理设备730可获得来自多个信息处理设备的无线电波强度,并利用三角测量技术,根据无线电波强度,获得与其它信息处理设备的相对位置(自己的信息处理设备的位置)。控制设备740可获得如上所述得到的相对位置,并排列学生。
这里,参加群组的每个发送端设备进行例如在电力消耗不受影响的程度,向接入点701或信息处理设备730传送命令的处理。当直接或者经接入点701间接收到命令时,信息处理设备730把从其收到命令的发送端设备相关的信息通知控制设备740。从而,控制设备740可确认发送端设备是否已离开群组。
例如,控制设备740确认参加群组的发送端设备是否已离开群组,并且当检测到已离开的发送端设备时,从输入和输出单元743删除与已离开的发送端设备对应的图像(例如,图标)。例如,当确定持续预定一段时间或更长,未收到从与图21中图解所示的学生17对应的信息处理设备传送的命令时,控制设备740判定对应于学生17的信息处理设备已离开群组。随后,控制设备740从输入和输出单元743,删除与已离开的信息处理设备对应的图像(学生17)。
呈现区域748是当进行从待机模式到图像传输模式(中间通道或周边通道)的切换时使用的区域。
待机区域749是当进行从图像传输模式到待机模式的切换时使用的区域。
在本技术的第二实施例中,说明其中控制设备740管理连接到信息处理设备730的一个或多个信息处理设备,指示信息处理设备的图像被显示在控制设备740的输入和输出单元743上的例子。不过,连接到信息处理设备730的一个或多个信息处理设备可由信息处理设备730管理,指示信息处理设备的图像可被显示在信息处理设备730的显示单元或显示设备731上。
[显示设备的显示例子]
图22是图解说明按照本技术的第二实施例,显示在显示设备731上的显示画面的转变例子的示图。图22图解说明按照发送端设备的通信模式切换的显示画面的转变例子。
如上所述,在其中发送端设备与接收端设备相连的状态下(当允许群组的参加时),在发送端设备中设定待机模式或图像传输模式的通信模式。
这里,图像传输模式是其中进行从发送端设备到接收端设备的图像传输的通信模式,发送端设备和接收端设备按P2P方式直接相连。图像传输模式包括其中传送中间通道的图像的图像传输模式(中间通道),和其中传送周边通道的图像的图像传输模式(周边通道)。
图像传输模式(中间通道)是其中传送使图像被显示在接收端设备的显示单元中的中间通道(中间通道区域733)上的图像数据的通信模式。在图像传输模式(中间通道)下,例如,通过高频带的无线传输路径,传送图像数据。
图像传输模式(周边通道)是其中传送使图像被显示在接收端设备的显示单元中的中间通道(周边通道区域734)上的图像数据的通信模式。在图像传输模式(周边通道)下,例如,通过低频带的无线传输路径,传送图像数据。
待机模式是其中不进行从发送端设备到接收端设备的图像传输的情况下,维持发送端设备和接收端设备之间经接入点的连接状态的通信模式。换句话说,待机模式是当发送端设备被接收端设备和控制设备740识别成网络参与者时设定的模式。
如上所述,在图像传输模式下,认为允许从发送端设备到接收端设备的图像传输,但是在待机模式下,认为不允许从发送端设备到接收端设备的图像传输。然而,即使在待机模式下,例如,当存在简单的消息接发时,也认为允许从发送端设备到接收端设备的传输。
在发送端设备中,例如,假定像按待机模式→图像传输模式(周边通道)→图像传输模式(中间模式)→待机模式似地顺序切换通信模式。
在图22中,a图解说明当在信息处理设备710中,设定待机模式时的显示例子。例如,在图17中图解所示的例子中,假定在信息处理设备710中设定待机模式。这种情况下,信息处理设备710经接入点701,与信息处理设备730相连。这种情况下,不进行从信息处理设备710到信息处理设备730的图像传输。从而,显示在信息处理设备710上的图像(奔跑的马)不被显示在显示设备731的显示单元732上。
在图22中,b图解说明当在信息处理设备710中,设定图像传输模式(周边通道)时的显示例子。例如,在图17中图解所示的例子中,假定在信息处理设备710中设定图像传输模式(周边通道)。这种情况下,信息处理设备710在无接入点701介入的情况下,与信息处理设备730相连。这种情况下,进行从信息处理设备710到信息处理设备730的图像传输。显示在信息处理设备710上的图像(奔跑的马)被显示在显示设备731的显示单元732中的周边通道区域734上。
这里,发送端设备的图像按照图像被显示在中间通道区域733上的顺序,被显示在周边通道区域734上。例如,传送显示在周边通道区域734的最低位置处的图像的发送端设备充当下次使图像被显示在中间通道区域733上的发送端设备。此外,例如,传送显示在周边通道区域734的次低位置处的图像的发送端设备充当在次之后的时间,使图像被显示在中间通道区域733上的发送端设备。换句话说,图像(副图像)可按呈现的顺序,被并排显示在周边通道区域734上。
在图22中,c图解说明当在信息处理设备710中,设定图像传输模式(中间通道)时的显示例子。例如,在图17中图解所示的例子中,假定在信息处理设备710中设定图像传输模式(中间通道)。这种情况下,信息处理设备710在无接入点701介入的情况下,与信息处理设备730相连。这种情况下,进行从信息处理设备710到信息处理设备730的图像传输。显示在信息处理设备710上的图像(奔跑的马)被显示在显示设备731的显示单元732中的中间通道区域733上。
[发送端设备的通信模式的切换例子]
这里,将说明当切换发送端设备的通信模式(待机模式和图像传输模式)时的切换方法。
例如,下述(B1)-(B3)可以用作切换发送端设备的通信模式的触发:
(B1)利用发送端设备的切换(例如,按照利用发送端设备的用户的操作的主动切换);
(B2)利用控制设备的切换(例如,按照利用控制设备740的用户的操作的切换(远程操作切换));和
(B3)利用接收端设备的切换(例如,按照利用接收端设备的用户的操作的切换)。
各个设备中的用户的操作(切换操作)例如是利用各个设备装备的操作接收单元(例如,操作部件或触摸面板)的用户的操作,或者利用各个设备装备的用户信息获取单元(例如,检测手势的检测单元)的用户的操作。
在(B1)中,例如,预先安装在发送端设备中的应用或操作部件的操作输入可以用作切换触发。例如,当在发送端设备中进行切换操作时,与通信模式的切换相关的命令被传送给接收端设备(信息处理设备730).当收到命令时,接收端设备(信息处理设备730)进行控制,以致已传送命令的发送端设备的频带被增大或减小,同时进行对于其它频带的控制。接收端设备(信息处理设备730)向控制设备740传送指示已传送该命令的发送端设备的通信模式已被切换的信息。这种情况下,控制设备740可输出指示通信模式已被切换的通知信息(通过显示器或音频输出)。
在(B2)中,例如,接收端设备(信息处理设备730)中的用户的操作可以用作切换触发。例如,当在接收端设备(信息处理设备730)中进行发送端设备的切换操作时,进行控制,以致其中已进行切换操作的发送端设备的频带被增大或减小,同时进行对于其它频带的控制。接收端设备(信息处理设备730)向控制设备740传送指示其中已进行切换操作的发送端设备的通信模式已被切换的信息。这种情况下,类似于(B1)的情况,控制设备740可输出指示通信模式已被切换的通知信息。
在(B3)中,例如,控制设备740中的用户的操作可被用作切换触发。例如,当在控制设备740中进行发送端设备的切换操作时,与其中进行了切换操作的发送端设备相关的信息(例如,终端标识信息)被传送给接收端设备(信息处理设备730)。当收到该信息时,接收端设备(信息处理设备730)进行控制,以致其中已进行切换操作的发送端设备的频带被增大或减小,同时进行对于其它频带的控制。
这里,将说明控制设备740中的用户的操作。例如,在图21中图解所示的显示画面中,假定设定到待机模式的信息处理设备(学生17)被切换到图像传输模式(周边通道)。这种情况下,进行把对应于信息处理设备(学生17)的图像移动到呈现区域748的操作。例如,进行拖放操作。结果,设定到待机模式的信息处理设备(学生17)可被切换到图像传输模式(周边通道)。
此外,例如,在图21中图解所示的显示画面中,假定设定到图像传输模式(中间通道、周边通道)的信息处理设备(学生13)被切换到待机模式。这种情况下,进行把对应于信息处理设备(学生13)的图像移动到待机区域749的操作。例如,进行拖放操作。结果,设定到图像传输模式(中间通道、周边通道)的信息处理设备(学生13)可被切换到待机模式。
类似于(B1)和(B2)的情况,控制设备740可输出指示通信模式已被切换的通知信息。
控制设备740可按照通信模式,使指示信息处理设备的图像(例如,图21中图解所示的学生1-20)具有不同的显示状态。例如,指示设定到图像传输模式(中间通道)的信息处理设备的图像的轮廓用粗线表示,而指示设定到图像传输模式(周边通道)的信息处理设备的图像的轮廓用细线表示。设定到待机模式的信息处理设备可用虚线表示。再例如,指示被设定成图像传输模式(中间通道)的信息处理设备的图像的颜色为红色,而指示被设定成图像传输模式(周边通道)的信息处理设备的图像的颜色为蓝色。此外,指法设定为待机模式的信息处理设备的图像的颜色可为白色。
[通信模式的切换例子]
图23是图解说明作为本技术的基础的发送端设备和接收端设备之间的通信模式的切换例子的示图。
在本技术的第二实施例中,如上所述,在待机模式下,采用经接入点611,间接连接发送端设备610和接收端设备612的连接方式。在图像传输模式下,采用无接入点611的介入地直接连接发送端设备610和接收端设备612的连接方式。
例如,假定进行从待机模式的连接(613)到图像传输模式的连接(614)的切换。换句话说,假定进行从其中经接入点611建立连接的待机模式(613)到其中无接入点611的介入地建立连接的图像传输模式(614)的切换。
当如上所述进行切换时,必须进行图24中图解所示的Wi-Fi直接控制(P2P设备发现(Device Discovery)、P2P服务发现(Service Discovery)和GO协商(Negociation)),用于进行无线LAN的安全认证的4-路握手(Handshake)、用于获得网际协议(IP)地址的动态主机配置协议(DHCP)接入、实时流媒体协议(RTSP)的端口设定的交换等。从而,当进行从待机模式的连接(613)到图像传输模式的连接(614)的切换时,发生数秒时间的连接时段D1。
这里,假定接入点611和发送端设备610在相同的群组认证中,假定发送端设备610和接收端设备612在相同的群组认证中。这种情况下,在接入点611和发送端设备610之间进行安全认证。因此,即使接入点611和发送端设备610之间的设定值被用于发送端设备610和接收端设备612之间的连接处理,也认为不存在任何问题。
在这方面,在本技术的第二实施例中,说明其中发送端设备和接收端设备之间的安全认证被省略,进行更加无缝的连接切换的例子。例如,能够转移诸如高带宽数字内容保护系统(HDCP)的IP获取,和实时传输协议(RTP)的端口设定之类的处理。从而,即使当进行到具有不同连接方式的通信模式的切换(从待机模式到图像传输模式的切换,和从图像传输模式到待机模式的切换)时,也能够进行快速连接处理。从而,能够使用户感觉到好像连接一直被维持似的。
此外,当发送端设备和接收端设备支持隧道直接链路建立(TDLS)功能时,可以使用TDLS协议。
[连接处理例子]
图24是图解说明按照本技术的第二实施例,发送端设备和接收端设备之间的连接处理例子的序列图。图24图解说明信息处理设备(发送端设备)710和信息处理设备(接收端设备)730之间的连接处理例子。
首先,信息处理设备710进行设备发现(615)。当通过设备发现,检测到信息处理设备730时,信息处理设备710与信息处理设备730进行基于形成(Formation)的主-从关系的决定,和认证处理(620)。当各个处理完成时,在信息处理设备710和信息处理设备730之间建立连接。随后,信息处理设备710与信息处理设备730进行直接通信(操作)(616)。
这里,将说明形成(Formation)(620)。
首先,在信息处理设备710和信息处理设备730之间进行GO_Negotiation。在GO_Negotiation中,信息处理设备710和信息处理设备730交换起群组所有者(GO)作用的优先级,优先级较高的信息处理设备被确定起群组所有者(GO)的作用。图24图解说明其中信息处理设备730的优先级较高,从而信息处理设备730被确定为群组所有者(GO)的例子。
具体地,信息处理设备710把GO_Negotiation_请求传送给信息处理设备730(621)。当收到GO_Negotiation_请求时(621),信息处理设备730向信息处理设备710传送GO_Negotiation_响应(622)。当收到GO_Negotiation_响应(622)时,信息处理设备710向信息处理设备730传送GO_Negotiation_Confirmation(623)。
通过这些交换(621-623),信息处理设备730被确定为群组所有者(GO),而信息处理设备710被确定为客户端。
随后,信息处理设备710和信息处理设备730执行Wi-Fi受保护接入(WPS)_exchange(624)。通过WPS_exchange的执行,信息处理设备710和信息处理设备730共享凭证(例如,服务集标识符(SSID)和Wi-Fi受保护接入2(WPS2)-pre-shared密钥(PSK))。
随后,信息处理设备710和信息处理设备730执行4-way_handshake(625)。
[通信例子]
图25和26是图解说明按照本技术的第二实施例,包含在通信系统700中的设备之间的通信处理例子的序列图。图25和26图解说明信息处理设备(发送端设备)710、信息处理设备(接收端设备)730和接入点701之间的通信处理例子。
在图25和26的例子中,信息处理设备(接收端设备)730起群组认证服务器的作用。换句话说,信息处理设备(接收端设备)730被假定具有群组认证功能。
图34-38是图解说明按照本技术的第二实施例,在包含在通信系统700中的设备之间交换的WFD IE格式的例子的示图。
图39是图解说明按照本技术的第二实施例,在包含在通信系统700中的设备之间交换的用于应用服务平台(ASP)的新消息的例子的示图。
首先,信息处理设备710启动用于与信息处理设备730进行通信的应用(预先安装在信息处理设备710中的应用)(631)。例如按照用户的操作(例如,按下应用按钮的操作),进行应用的启动。
这里,在图25和26的例子中,发送端设备默认直接连接到接入点,随后开始各个处理。换句话说,信息处理设备710启动预先安装的应用,经特定的接入点(接入点701),把连接请求传送给接收端设备(信息处理设备730)。
具体地,在建立与接入点701的连接之后,信息处理设备710进行设备发现(对应于图24中图解所示的设备发现(615)),使可连接的接收端设备被显示在显示单元711上。
这里,例如,接收诸如探测请求(Probe请求)之类的消息,并进行设备发现,以致可经由接入点701进行WiFi Direct协议的方法可以用作设备发现方法。此外,例如,可以使用交换由连接到接入点701的站之间的通用即插即用(UPnP)表示的设备服务类型,并进行设备发现的方法。
这里,将说明设备发现或服务发现的控制方法的例子。
信息处理设备710(发送端设备)经接入点701,向信息处理设备730(接收端设备)传送探测请求,搜索支持P2P连接的设备。
例如,当信息处理设备730(接收端设备)是支持P2P连接的设备,那么能够经接入点701,接收探测响应(Probe响应),并检测在P2P连接中使用的频道。这里,将在假定信息处理设备730(接收端设备)是支持P2P连接的设备,并且收到了探测响应的情况下进行说明。
通过上面的处理,信息处理设备710(发送端设备)检测用于P2P连接的频道,并与信息处理设备730(接收端设备)建立P2P连接。
在建立P2P连接之后,信息处理设备710(发送端设备)建立与信息处理设备730(接收端设备)的TCP连接或RTSP连接的链路,随后与信息处理设备730交换下述(C1)-(C4)中的一个或多个:
(C1)P2P信息元素(IE);
(C2)WFD IE;
(C3)ASP(例如,按照ASP的格式命令的新格式);和
(C4)UPnP标准中的协议。
例如,将说明把WFD IE封装在探测请求或探测响应的有效负载部分中,并交换WFDIE的方法。
图34-38中图解说明利用上面说明的(C2)的WFD IE的格式例子。图34-36图解说明已分配在Miracast版本1中的格式。然而,新的比特被分配给图36中图解所示的子元素ID(11)。具体地,图37和38中图解说明了对应于子元素ID(11)的新字段。
在图38中,新设备信息字段的[5:0]是使信息处理设备730(接收端设备)能够确定P2P连接中的最佳频道的信息。
在利用上面说明的(C1)-(C3)任意之一的序列的过程中,信息处理设备710(发送端设备)能够检测所有信息,并确定与信息处理设备730(接收端设备)的P2P连接中的最佳频道。例如,可以使用接入点701和信息处理设备730(接收端设备)之间的相关频率信息(图38中图解说明的[23:14]的字段)。此外,例如,可以使用信息处理设备730(接收端设备)的无线线路的并发信息(图38中图解所示的[5:2]的字段)。并发信息是指示诸如相同频道的时分连接,不同频道的时分连接,相同频道的同时连接,和不同频道的同时连接之类的连接形式是否可能的信息(图38中图解说明的[5:2]的字段)。例如,可以使用充当无线电功能的终端能力(图38中图解所示的[13:8]的字段)。
存在其中按照有线的方式,或者利用诸如以太网电缆或USB电缆/连接器之类的连接器,连接接入点701和信息处理设备730(接收端设备)的情况。这种情况下,信息处理设备730(接收端设备)发出指示与接入点701的连接是有线连接(图38中图解所示的[1:0]),和信息处理设备710(发送端设备)是否支持无线P2P连接的通知。从而,信息处理设备710(发送端设备)能够确定最佳频道。例如,当信息处理设备730(接收端设备)只支持有线线路时,信息处理设备730(接收端设备)不转变到P2P连接,无变化地建立与接入点701的连接。另一方面,当信息处理设备730(接收端设备)也支持无线线路时,信息处理设备730(接收端设备)可选择支持的频道之一,并建立连接。
上面说明了把WFD IE封装在探测请求或探测响应的有效负载部分中的例子,不过本技术不限于该例子。
例如,当使用Wi-Fi直接服务的显示服务时,可通过ASP标准的消息,在设备之间交换服务能力信息。具体地,包含在WFD IE中的信息以4比特为单位定界,转换成16进制数,并转换成文本串,所述文本串被传送和接收。此外,包含在WFD IE中的信息不限于当前规范。例如,图39中图解所示的服务能力信息可包含在有效负载中。
作为设备发现或服务发现的一系列处理,可以进行相关的频率信息和设备的并发信息的协商。此外,当在传输期间,需要变更频道时,可以再次进行相关频率信息和设备的并发信息的协商。此外,当协商开始时,在信息处理设备710(发送端设备)和信息处理设备730(接收端设备)之间,协商能够被交换的(C1)-(C4)任意之一,可以选择交换信息的方法。
在上述各个处理中,说明了其中信息处理设备710(发送端设备)接收探测响应,随后建立P2P连接链路的TCP连接或RTSP连接,随后交换(C1)-(C4)的例子。然而,通过利用其中在建立P2P连接链路之前,经接入点701连接信息处理设备710(发送端设备)和信息处理设备730(接收端设备)的TCP连接或RTSP连接,可以交换包括WFD IE的探测请求和探测响应。在这个例子中,该处理由信息处理设备710(发送端设备)发起,不过,该处理也可由信息处理设备730(接收端设备)发起。
此外,与上述处理无关,在探测请求中,可以描述建立P2P连接的频率,用于从信息处理设备730(接收端设备)传送探测响应的频道可以不是探测请求使用的频道。可通过P2P连接,进行接收。
在本技术的实施例中,说明了其中在应用被启动之后,立即进行设备发现的例子,不过本技术不限于这个例子。例如,发送端设备和接收端设备至少之一可以具有NFC标签功能或读/写器功能。在这种情况下,可在通过NFC,接触利用NFC的任意一个设备的时刻,开始设备发现或服务发现的控制方法。此外,可以判定与接入点的连接是否开始于通过NFC接触该接入点的时刻。此外,可通过NFC,在信息处理设备710(发送端设备)和信息处理设备730(接收端设备)之间进行用于选择上述(C1)-(C4)的标准。例如,NFC接触时刻可用于以下(D1)和(D2)的切换:
(D1)在接触时刻,断开接入点,并建立直接连接;和
(D2)在接触时刻,利用TDLS,建立连接。
通过设备发现处理,也可发现与启动的应用对应的多个接收端设备。这种情况下,用于从多个发现的接收端设备中,选择期望的接收端设备的选择画面可被显示在发送端设备的显示单元上,可利用用户的操作,在选择画面上选择期望的接收端设备。可自动选择和连接多个发现的接收端设备之中的最接近发送端设备的设备。当自动选择最接近的设备时,例如,可以使用各个设备获得的位置信息。
如上所述,信息处理设备710启动应用,并选择接收端设备(631)。图25和26图解说明其中选择信息处理设备730的例子。
当如上所述选择接收端设备(信息处理设备730)时(631),信息处理设备710的控制单元(对应于图2中图解所示的控制单元240)经接入点701(632-635),向接收端设备(信息处理设备730)传送连接请求。连接请求例如包括识别信息处理设备710的标识信息(例如,图4中图解说明的终端标识信息391),和识别待启动的应用的标识信息(应用信息)。
当从信息处理设备710收到连接请求时(635),信息处理设备730的控制单元(对应于图3中图解所示的控制单元370)进行群组认证处理(636)。在群组认证处理中,判定信息处理设备710是否参加由信息处理设备710启动的应用操作的群组(636)。换句话说,信息处理设备730的控制单元进行判定对于信息处理设备710,是否许可用于操作由信息处理设备710启动的应用的连接的群组认证处理(636)。
例如,在群组认证处理中,判定在属于相同群组,并且已处于连接状态的发送端设备、接收端设备和控制设备740任意之一中,是否进行了向信息处理设备710给予许可的用户操作。随后,在各个设备(发送端设备、接收端设备和控制设备740)任意之一中,进行了向信息处理设备710给予许可的用户操作的条件下,可以进行允许信息处理设备710加入该群组的判断。
例如,在各个设备(发送端设备、接收端设备和控制设备740)至少之一的显示单元上,显示用于进行向信息处理设备710给予许可的用户操作的显示画面(例如,弹出式窗口)。随后,当在显示画面上进行向信息处理设备710给予许可的用户操作时,信息处理设备730的控制单元判定允许信息处理设备710加入该群组(636)。
例如,可根据控制设备740中的登记的有无,进行群组认证处理。例如,信息处理设备730的控制单元判定允许其终端标识信息被保存在群组管理信息保持单元750的终端标识信息751(图20中图解所示)中的信息处理设备加入该群组(636)。然而,这种情况下,只有当在群组管理信息保持单元750的可用群组参与时间756(图20中图解所示)的时间段内时,信息处理设备730的控制单元才判定给予加入该群组的许可(636)。
当在群组认证处理中,判定允许信息处理设备710加入群组中时(636),信息处理设备730的控制单元经接入点701,向信息处理设备710传送连接许可信息(637-640)。这里,连接许可信息是指示允许信息处理设备710加入由信息处理设备710启动的应用操作的群组中的信息。
此外,当在群组认证处理中,判定不允许信息处理设备710加入群组(认证不被许可)时(636),信息处理设备730的控制单元经接入点701,向信息处理设备710传送连接不许可信息。这里,连接不许可信息是指示不允许信息处理设备710加入由信息处理设备710启动的应用操作的群组中的信息。当信息处理设备710收到连接不许可信息时,数据传输处理的操作终止。
当收到来自信息处理设备730的连接许可信息时(640),信息处理设备710的控制单元经接入点701,向信息处理设备730传送与信息处理设备710相关的能力信息(641-644)。能力信息是用于与信息处理设备730进行Wi-Fi认证的Miracast通信的能力信息。能力信息包括用于进行与信息处理设备730的直接P2P连接的信息。
当收到来自信息处理设备710的能力信息时(644),信息处理设备730的控制单元经接入点701,把设定请求信息传送给信息处理设备710(645-648)。设定请求信息是请求用于进行按照Wi-Fi认证的Miracast标准的图像传输的设定的信息。
这里,信息处理设备730进行与信息处理设备730相连的发送端设备的频带控制和显示画面控制。因此,必须要求新连接的信息处理设备710传送其中根据与其它发送端设备的关系,考虑群组共有的参数的设定。在这方面,在允许信息处理设备710加入群组中之后,信息处理设备730根据与和信息处理设备730相连的各个发送端设备相关的各项信息,传送与信息处理设备710相关的设定请求信息(645-648)。
此外,如上所述,在信息处理设备710中,根据来自信息处理设备730的指令,初始设定待机模式。换句话说,当收到来自信息处理设备730的设定请求信息时(648),在信息处理设备710中,设定待机模式,作为初始状态。
此外,根据来自信息处理设备730的指令,在信息处理设备710中,按照待机模式→图像传输模式(周边通道)→图像传输模式(中间通道)→待机模式的顺序,依次切换通信模式。
这里,假定按照上面说明的(B1)-(B3)任意之一的切换方法,切换信息处理设备710的通信模式。这里,说明其中信息处理设备710的通信模式从待机模式被切换到图像传输模式(周边通道)的例子。
当如上所述,设定图像传输模式时(649),信息处理设备710的控制单元断开经接入点701,到信息处理设备730的接入(650和651)。
随后,信息处理设备710的控制单元进行用于与信息处理设备730进行直接连接的P2P连接处理(652和653)。在完成P2P连接处理之后(652和653),信息处理设备710的控制单元根据从信息处理设备730接收的设定请求信息,向信息处理设备730传送连接请求(654和655)。换句话说,信息处理设备710的控制单元根据从信息处理设备730接收的设定请求信息,向信息处理设备730传送连接请求(654和655)。连接请求是与一直到层3的连接设定相关的连接请求。
当收到连接请求时(655),信息处理设备730的控制单元向信息处理设备710传送指示与该连接请求对应的图像的接收的许可的确认信息(656和657)。当收到确认信息(657)时,信息处理设备710的控制单元开始与信息处理设备730的直接P2P连接(658和659)。
换句话说,信息处理设备710的控制单元根据与接收的确认信息对应的连接请求,与信息处理设备730进行图像参数和音频参数的协商,并传送图像数据(658和659)。
这里,假定按照上面说明的(B1)-(B3)任意之一的切换方法,切换信息处理设备710的通信模式。这里,说明其中信息处理设备710的通信模式从图像传输模式(中间通道)被切换到待机模式的例子。
当如上所述设定待机模式时(660),信息处理设备710的控制单元断开与信息处理设备730的直接连接(661和662)。
随后,信息处理设备710的控制单元进行经接入点701,进行与信息处理设备730的连接的连接处理(663、664)。
此外,当进行直接连接和经接入点701的连接之间的切换时,可预先检测连接时间段,最后显示在显示设备731上的图像可无变化地保持在接收端设备(信息处理设备730)中。随后,接收端设备(信息处理设备730)在变更显示设备731中的显示位置的处理期间,进行连接切换。换句话说,接收端设备进行以致用户不会认识到断开的插值处理。从而,能够在避免用户感到物理发生的切换时间段的同时,进行切换。
[信息处理设备(发送端设备)的操作例子]
图27是图解说明按照本技术的第二实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。图27图解说明其中发送端设备(信息处理设备710)默认直接连接到接入点,随后开始各个处理的例子。换句话说,信息处理设备710启动预先安装的应用,经特定接入点(接入点701)向接收端设备传送连接请求。此外,图27图解说明其中发送端设备(信息处理设备710)连接到充当接收端设备的信息处理设备730,和连接到充当特定接入点的接入点701的例子。
首先,信息处理设备710启动用于与接收端设备(信息处理设备730)进行通信的应用(步骤S1031)。在该启动之后,选择充当连接对象的接收端设备(信息处理设备730)(步骤S1031)。
随后,信息处理设备710的控制单元经接入点701(AP),向信息处理设备730传送连接请求(步骤S1032)。随后,信息处理设备710的控制单元判定是否经接入点701,从信息处理设备730收到连接许可信息(步骤S1033)。当未从信息处理设备730收到连接许可信息时(步骤S1033),数据传输处理的操作终止。这种情况下,当在预定时间内,未收到连接许可信息时,数据传输处理的操作可终止。
当从信息处理设备730收到连接许可信息时(步骤S1033),信息处理设备710的控制单元经接入点701,向信息处理设备730传送信息处理设备710的能力信息(步骤S1034)。
随后,信息处理设备710的控制单元判定是否经接入点701,从信息处理设备730收到设定请求信息(步骤S1035)。步骤S1035是记载在权利要求书中的第二处理的例子。当未收到设定请求信息时(步骤S1035),继续进行监视。
当收到了设定请求信息时(步骤S1035),在信息处理设备710中,设定待机模式,作为初始状态。随后,信息处理设备710的控制单元判定是否设定了待机模式(步骤S1036)。随后,当在信息处理设备710中设定了待机模式时(步骤S1036),继续进行监视。
当未设定待机模式时(当设定了图像传输模式时)(步骤S1036),信息处理设备710的控制单元判定信息处理设备710是否离开了群组(步骤S1037)。这里,当信息处理设备710已离开群组时,例如,当信息处理设备710移动到接入点和接收端设备的无线电波都不能到达的场所时,可以进行用于脱离群组的用户操作。例如,这种用户操作可以是按下离开按钮的操作(例如,按下操作部件的操作,或者按下触摸面板的操作)。假定在信息处理设备710、另一个发送端设备、接收端设备和控制设备740任意之一中,进行这种用户操作。
随后,当信息处理设备710离开群组时(步骤S1037),数据传输处理的操作终止。当信息处理设备710未离开群组时(步骤S1037),信息处理设备710的控制单元断开经接入点701,与信息处理设备730的连接(步骤S1038)。
随后,信息处理设备710的控制单元进行用于与信息处理设备730进行直接连接的P2P连接处理(步骤S1039)。在P2P连接处理结束之后(步骤S1039),信息处理设备710的控制单元根据从信息处理设备730接收的设定请求信息,向信息处理设备730传送连接请求(步骤S1040)。步骤S1040是记载在权利要求书中的第三处理的例子。
随后,信息处理设备710的控制单元判定是否从信息处理设备730,传送了指示许可与连接请求对应的图像的接收的确认信息(步骤S1041)。当未从信息处理设备730传送确认信息时(步骤S1041),继续进行监视。
当从信息处理设备730传送了确认信息时(步骤S1041),信息处理设备710的控制单元开始与信息处理设备730的直接P2P连接(步骤S1042)。随后,信息处理设备710的控制单元根据与接收的确认信息对应的连接请求,与信息处理设备730进行图像参数和音频参数的协商(步骤S1043)。步骤S1043是记载在权利要求书中的第一处理的例子。
随后,信息处理设备710的控制单元判定是否设定了图像传输模式(步骤S1044)。随后,当在信息处理设备710中设定了图像传输模式时(步骤S1044),处理返回步骤S1043。
当未设定图像传输模式时(当设定了待机模式时)(步骤S1044),信息处理设备710的控制单元判定线路是否被断开(步骤S1045)。例如,当信息处理设备710离开了群组时,与接入点701或信息处理设备730的线路被断开。随后,当线路被断开时(步骤S1045),数据传输处理的操作终止。
当线路未被断开时(步骤S1045),信息处理设备710的控制单元断开与信息处理设备730的直接连接(步骤S1046)。随后,信息处理设备710的控制单元开始与接入点701的连接(步骤S1047)。
如上所述,信息处理设备710按照Wi-Fi认证的Miracast规范,与信息处理设备730进行实时图像传输。信息处理设备710的控制单元进行控制,以致经接入点701,从信息处理设备730接收使信息处理设备710进行与实时图像传输相关的设定的设定请求信息。此外,信息处理设备710的控制单元进行控制,以致通过与信息处理设备730的直接通信,根据设定请求信息进行设定的设定请求被传送给信息处理设备730。设定请求信息是根据经接入点701,在信息处理设备710和信息处理设备730之间交换的能力信息(与信息处理设备710相关)生成的。
此外,当连接状态被切换时,信息处理设备710的控制单元能够进行控制,以致利用与切换前的连接相关的端口信息和IP信息至少之一,进行连接处理。连接状态的切换是从经接入点701,与信息处理设备730的连接状态,到利用直接通信,与信息处理设备730的连接状态的切换,或者反向切换。
在图像传输模式(周边通道)下,信息处理设备710的控制单元进行控制,以致通过低频带的无线传输路径,传送待显示在显示设备731中的周边通道区域734上的图像。在图像传输模式(周边通道)下,信息处理设备710的控制单元进行控制,以致通过高频带的无线传输路径,传送待显示在显示设备731中的中间通道区域733上的图像。
信息处理设备710的控制单元进行控制,以致根据在各个设备任意之一中的用户操作,通过直接通信,向信息处理设备730传送设定请求。或者,信息处理设备710的控制单元进行控制,以致按照预定顺序(例如,并排显示在周边通道区域734上的图像的顺序),通过直接通信,向信息处理设备730传送设定请求。
信息处理设备730的控制单元进行控制,以致经接入点701,向信息处理设备710传送使信息处理设备710进行与实时图像传输相关的设定的设定请求信息。此外,信息处理设备730的控制单元进行控制,以致通过与信息处理设备710的直接通信,从信息处理设备710接收用于根据设定请求信息进行设定的设定请求。
当如上所述,进行接入点和直接连接之间的切换时,切换时间段可被缩短。例如,在其中在多个发送端设备上进行频带控制的环境,基础结构环境和WiFi Direct(或者Wi-Fi认证的Miracast)环境中,切换时间段可被缩短。从而,能够提供无缝连接切换。
在多发送端环境中,能够在使多个发送端设备加入群组的同时,设定连接顺序和共享高质量图像的图像信息。例如,能够把加入基础结构环境中的发送端设备通知接收端设备(或控制设备)。在WiFi Direct(或者Wi-Fi认证的Miracast)环境中,能够通过与基础结构环境中不同的频道,经直接通信进行图像传输。从而,即使当多个发送端设备连接到一个显示设备(接收端设备)时,也能够进行稳定的图像通信。此外,即使当归因于无线频带限制,几乎没有任何发送端设备被切换到图像传输模式时,也能够稳定地建立所有的连接。
当群组中的连接设备的数目增大时,连接控制的开销增大,带宽利用效率变差,从而难以稳定地进行图像传输。另一方面,在本技术的实施例中,能够提供即使在其中连接设备的数目较大的环境中,也能够进行稳定的图像传输的通信系统。换句话说,在本技术的实施例中,当在多个信息处理设备之间进行通信时,能够进行适当的控制。
[其中能够建立与除初始连接的接入点外的公共线路的连接的例子]
在上面的例子中,当发送端设备连接到接收端设备时,进行经接入点,与接收端设备的连接,或者与接收端设备的直接连接。这里,当发送端设备是便携式信息处理设备(例如,智能电话机或平板终端)时,使用发送端设备的用户可移动。这种情况下,例如,利用发送端设备的用户也可能移动到其中难以与接入点建立连接的场所。这种情况下,用户可能希望持续进行与接收端设备的连接。在这方面,下面将说明其中利用发送端设备的用户移动到其中难以与接入点建立连接的场所的例子。
[发送端设备的使用例子]
图28是图解说明按照本技术的第二实施例,信息处理设备710的使用例子的示图。
图28示意图解说明其中在图18中图解所示的教室30中,利用信息处理设备710的学生1如箭头40所示,移动到教室30的外部的例子。例如,学生1可从在其中进行发言的教室30移动到实验室或在大学之外的场所。此外,例如,在办公室的情况下,营业员可能走出已在其中进行发言的会议室。
在图28,其中可利用无线通信,进行与接入点701的直接通信的范围(从接入点701起的无线电波到达范围)被表示成无线电波到达范围705。其中可利用无线通信,进行与基站762的直接通信的范围(从基站762起的无线电波到达范围)被表示成无线电波到达范围763。
公共网络761是诸如电话网或因特网之类的公共线路网。网络702和基站762例如通过公共网络761相连。
基站762是由通信服务提供商运营的基站,利用无线通信,连接信息处理设备和公共网络761,并提供各种无线服务。例如,无线服务是IEEE 802.11的热点服务,或者遵守IEEE 802.15、IEEE 802.16、3GPP规范(例如,W-CDMA、GSM、WiMAX、WiMAX2、LTE和LTE-A)的线路服务。
[信息处理设备(发送端设备)的操作例子]
图29和30是图解说明按照本技术的第二实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。图29和30图解说明其中在发送端设备(信息处理设备710)直接连接到接入点之后,发送端设备(信息处理设备710)默认开始各个处理,也可连接到除接入点外的公共线路的例子。图29和30中图解说明的例子是图27的变形例,与图27相同的部分的说明被部分省略。
首先,启动应用(步骤S1051),经接入点701(AP),向信息处理设备730传送连接请求(步骤S1052)。随后,信息处理设备710的控制单元判定是否经接入点701,从信息处理设备730收到连接许可信息(步骤S1053)。当未从信息处理设备730收到连接许可信息时(步骤S1033),数据传输处理的操作终止。步骤S1051-S1053对应于图27中图解说明的步骤S1031-S1033。
当从信息处理设备730收到连接许可信息时(步骤S1053),信息处理设备710的控制单元判定用于许可室外使用的信息(室外使用信息)是否包含在连接许可信息中(步骤S1054)。室外使用信息是指示经除接入点701外的接入点或者基站,与信息处理设备730的连接是否被允许的许可信息,并保存在群组管理信息保持单元750的室外使用755(图20中图解所示)中。此外,当响应经接入点701(AP)接收的连接请求,信息处理设备730传送连接许可信息时,信息处理设备730从控制设备740获得室外使用信息(许可或不许可),把获得的室外使用信息(许可或不许可)包含在连接许可信息中,并传送作为结果的连接许可信息。此外,尽管在室外使用755中保存“许可”,不过当是除保存在可用群组参与时间756(图20中图解所示)中的时间带外的时间带时,信息处理设备730把不许可的室外使用信息包含在连接许可信息中,并传送作为结果的连接许可信息。换句话说,控制设备740可进行调度(调度管理),管理调度的参与时间,并且只在该时间带中,允许室外使用。室外使用信息可被包含在能力信息中,并从接收端设备被传送给发送端设备。
此外,当许可的室外使用信息被包含在连接许可信息中,并被传送时,信息处理设备730把用于在接入点701的无线电波未到达的场所中,使用公共网络的设定信息包含在连接许可信息中。
在这个例子中,室外使用的许可或不许可是预先设定的,不过,可在每次存在来自发送端设备的连接请求时,在各个设备中设定许可或不许可。例如,可利用其它发送端设备(例如,信息处理设备703、704和720)、接收端设备(信息处理设备730)和控制设备740至少之一,进行设定许可或不许可的操作。
例如,信息处理设备730可使用于选择许可或不许可的显示画面被显示在控制设备740的输入和输出单元743上,并接收在显示画面上进行的许可或不许可的选择操作。
此外,例如,信息处理设备730可使用于选择许可或不许可的显示画面被显示在显示设备731的显示单元732上,并利用该显示画面,接收许可或不许可的选择操作。例如,通过利用操作部件的操作输入,或者基于手势的操作输入,可以接收许可或不许可的选择操作。
此外,例如,信息处理设备730使用于选择许可或不许可的显示画面(例如,弹出式窗口)被显示在另一个发送端设备(例如,信息处理设备720)的显示单元721上。随后,信息处理设备730可接收在该显示画面上进行的许可或不许可的选择操作。
如上所述,每当存在来自发送端设备的连接请求时,可以设定许可或不许可。从而,例如,即使当机密性或重要度不同时,也能够适当地设定许可或不许可。
在这个例子中,接收端设备起群组认证服务器的作用,并进行判定接收端设备是否允许室外使用的管理。然而,可以新安装与发送端设备结合地管理室外使用的许可和不许可的管理设备(例如,管理服务器),可通过所述管理设备,进行判定是否允许室外使用的管理。
当连接许可信息中包括允许室外使用的室外使用信息时(步骤S1054),信息处理设备710的控制单元使指示允许室外使用的信息被显示在显示单元711上(步骤S1055)。例如,可弹出地显示指示允许在相同楼层内(接入点701的无线电波到达的范围)的使用和室外使用的信息,从而能够把该信息通知用户。
随后,信息处理设备710的控制单元经接入点701,向信息处理设备730传送与信息处理设备710相关的能力信息,和公共网络服务信息(步骤S1056)。这里,公共网络服务信息是使信息处理设备710能够利用公共网络服务的信息,例如包括连接目的地电话号码(信息处理设备710的电话号码)、认证密码等。
随后,信息处理设备710的控制单元进行通信处理(步骤S1057)。在通信处理中,进行图27中图解所示的处理(步骤S1035-S1047)。
随后,信息处理设备710的控制单元判定用户是否移动到接入点701的无线电波传送范围之外(步骤S1058)。随后,当用户未移动到接入点701的无线电波传送范围之外时(步骤S1058),处理返回步骤S1057。
当用户移动到接入点701的无线电波传送范围之外时(步骤S1058),信息处理设备710的控制单元确认用户是否继续期望室外使用(步骤S1059)。例如,用户可进行断开与接收端设备的连接的操作(例如,通信终止操作)。从而,确认用户是否继续期望室外使用。
例如,信息处理设备710的控制单元使包括指示用户已移动到接入点701的无线电波传送范围之外的信息,和用于选择用户是否继续期望室外使用的选择按钮的弹出画面被显示在显示单元711上。随后,信息处理设备710的控制单元判定在弹出画面上,用于选择继续室外使用的选择按钮是否被按下(步骤S1059)。换句话说,信息处理设备710的控制单元判定是否选择了在移动后的场所中的继续使用(步骤S1059)。当未选择在移动后的场所中的继续使用时(步骤S1059),数据传输处理的操作终止。
如上所述,当收到允许室外使用的室外使用信息(许可信息)时,信息处理设备710的控制单元进行控制,以致进行经除接入点701外的接入点或者基站,与信息处理设备730的交换。这种情况下,信息处理设备710的控制单元可进行控制,以致经除接入点701外的接入点或者基站,从信息处理设备730接收图像数据和音频数据至少之一。
在这个例子中,每当发现移动到接入点701的无线电波传送范围之外时,进行继续室外使用的确认,不过可以预先设定继续室外使用的有无。通过如上所述,预先设定继续室外使用的有无,可以无缝地自动进行在相同楼层内的使用和室外使用之间的切换。
当选择在移动后的场所中的继续使用时(步骤S1059),信息处理设备730通过安装在移动后的场所中的基站,进行连接处理(步骤S1060)。例如,信息处理设备730的控制单元判定信息处理设备710是否移动到接入点701的无线电波传送范围之外。随后,当信息处理设备710移动到接入点701的无线电波传送范围之外时,信息处理设备730的控制单元进行经安装在移动后的场所中的基站,与信息处理设备710建立连接的连接处理。例如,当电话号码包含在从信息处理设备710接收的公共线路服务信息中时,信息处理设备730的控制单元根据该电话号码,经公共网络发起对信息处理设备710的呼叫。随后,信息处理设备710的控制单元进行经公共网络,与信息处理设备730的连接处理。
这里,当用户移动到接入点701的无线电波传送范围之外时,拥有信息处理设备710的用户可能看不到显示设备731的显示单元732,并且可能难以听到从显示设备731输出的音频。在这方面,信息处理设备730进行用于确认在经公共网络,建立与信息处理设备710的连接的时刻,信息处理设备710是否能够接收图像和音频的交换。随后,信息处理设备730判定信息处理设备710是否能够接收图像和/或音频。
根据判定结果,信息处理设备730与信息处理设备710进行数据通信(图像数据和音频数据)。换句话说,信息处理设备710的控制单元经公共网络,与信息处理设备730进行数据通信(图像数据和音频数据)。在数据通信中,在信息处理设备710和信息处理设备730之间进行双向交换。
例如,信息处理设备730的控制单元传送显示在显示设备731的显示单元732上的显示画面和从显示设备731输出的音频至少之一。在室外场所的情况下,可能难以看到显示在信息处理设备710的显示单元711上的显示画面。这种情况下,可能只有音频被传送。待传送的数据可被配置成由信息处理设备710的用户变更。
此外,当在信息处理设备710和信息处理设备730之间进行双向数据交换时,信息处理设备730可确认经公共网络,到信息处理设备710的传输路径(例如,频带或通信状态)。随后,信息处理设备730可根据确认结果,切换待传送的数据。例如,当确保大容量传输路径时,信息处理设备730传送图像数据和音频数据两者。此外,例如,当未确保大容量传输路径时,信息处理设备730通过转码,减小图像数据的量,或者只传送音频数据。
随后,信息处理设备710的控制单元判定是否继续使用经公共网络,与信息处理设备730的连接(步骤S1062)。例如,信息处理设备710的控制单元使用于选择是否继续使用经公共网络,与信息处理设备730的连接的显示画面被(始终或定期)显示在显示单元711。随后,根据显示画面中的选择操作,信息处理设备710的控制单元可判定是否继续使用经公共网络,与信息处理设备730的连接。
当继续使用经公共网络,与信息处理设备730的连接时(步骤S1062),处理返回步骤S1061。当不继续使用经公共网络,与信息处理设备730的连接时(步骤S1062),信息处理设备710的控制单元断开经公共网络,与信息处理设备730的连接(步骤S1063)。
当在连接许可信息中,包括指示室外使用不被许可的室外使用信息时(步骤S1054),信息处理设备710的控制单元使指示室外使用不被许可的信息被显示在显示单元711上(步骤S1064)。
随后,信息处理设备710的控制单元经接入点701,把与信息处理设备710相关的能力信息传送给信息处理设备730(步骤S1065)。
随后,信息处理设备710的控制单元进行通信处理(步骤S1066)。在通信处理中,进行图27中图解所示的处理(步骤S1035-S1047)。
随后,信息处理设备710的控制单元判定用户是否移动到接入点701的无线电波传送范围之外(步骤S1067)。随后,当用户未移动到接入点701的无线电波传送范围之外时(步骤S1067),处理返回步骤S1066。当用户已移动到接入点701的无线电波传送范围之外时(步骤S1067),处理进入步骤S1063。
如上所述,当接收端设备和多个发送端设备共享信息时,可以不管发送端设备的位置地交换信息。例如,即使当拥有信息处理设备710的学生1移动到接入点701的无线电波到达范围705之外时,也可使信息处理设备710经基站,连接到信息处理设备730。例如,学生1可从已在其中进行发言的教室30移动到实验室或者在大学之外的场所。此外,例如,当在办公室中安装通信系统700时,营业员可走出已在其中进行发言的会议室。这种情况下,营业员可在室外(例如,在列车中)听会议的详情。
在本技术的第二实施例中,说明了其中当发送端设备连接到接入点或基站时,开始发送端设备和接收端设备之间的群组认证的例子。不过,具有NFC读/写器功能的设备可与接收端设备或另一个设备合作地开始发送端设备和接收端设备之间的群组认证。另一种这样的设备例如是遵守Wi-Fi认证的Miracast规范的设备。在本技术的第三实施例中,将说明其中利用NFC读/写器功能,开始发送端设备和接收端设备之间的群组认证的例子。
<3.第三实施例>
在本技术的第二实施例中,说明了其中当发送端设备最初连接到接入点或基站时,开始发送端设备和接收端设备之间的群组认证的例子。
在本技术的第三实施例中,将说明其中利用近场通信,开始发送端设备和接收端设备之间的群组认证的例子。例如,可以利用Wi-Fi Direct经NFC的协议,或者Wi-Fidirect使用NFC的协议,开始群组认证。例如,通过具有NFC功能的发送端设备直接接触具有NFC功能的接收端设备,可以开始群组认证。
Wi-Fi Direct经NFC的协议是利用发送端设备和接收端设备之间的接触,连接发送端设备和接收端设备的协议。例如,所述协议是通过使具有NFC标签的发送端设备接触(或接近)具备NFC读/写器功能的接收端设备,交换用于连接Wi-Fi Direct的信息的协议。
如上所述,利用使发送端设备直接接触接收端设备的用户操作,可以开始群组认证。从而,当用户打算加入群组中时,用户可主动进行加入群组的操作。此外,在发送端设备和接收端设备之间的直接连接之后,可以进行到与接入点的连接的切换。因而,能够提供用户友好的界面。
在本技术的第二实施例中,说明了其中当通过设备发现,发现了多个接收端设备,显示用于选择期望的接收端设备的选择画面,并且用户在选择画面上选择期时望的接收端设备的例子。另一方面,在本技术的第三实施例中,通过进行使发送端设备接触期望的接收端设备的操作,用户能够使发送端设备连接到期望的接收端设备。
通过使发送端设备接触另一个设备,而不是直接接触接收端设备,可以开始群组认证。例如,在图18中图解所示的例子中,通过使发送端设备接触安装在教室30的入口36附近的读/写器设备37,可以开始群组认证。这种情况下,读/写器设备37把与被接触的发送端设备相关的信息(例如,终端标识信息或者个人识别号(PIN)代码)传送给接收端设备。对于PIN代码,优选使用独立生成的唯一ID。
此外,例如,用于操作接收端设备(例如,信息处理设备730)或显示设备(例如,显示设备731)的遥控器可以用作接收端设备。例如,通过使发送端设备接触具备NFC读/写器功能的遥控器,可以开始群组认证。这种情况下,遥控器向接收端设备传送与被接触的发送端设备相关的信息(例如,终端标识信息或PIN码)。
[信息处理设备(发送端设备)的操作例子]
图31是图解说明按照本技术的第三实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。图31图解说明其中通过使信息处理设备710直接接触信息处理设备730,发起群组认证的例子。图31中图解所示的例子是图27的变形例,和图27相同的部分的说明被部分省略。
在图31中,假定信息处理设备710具有NFC标签功能,假定信息处理设备730具有NFC读/写器功能。然而,NFC标签功能和NFC读/写器功能可在发送端设备或接收端设备中实现。信息处理设备730起DHCP服务器的作用。
首先,信息处理设备710的控制单元判定信息处理设备710是否接触信息处理设备730(步骤S1071)。当信息处理设备710未接触信息处理设备730时(步骤S1071),继续进行监视。
当信息处理设备710接触信息处理设备730时(步骤S1071),信息处理设备710的控制单元开始与信息处理设备730的直接连接(步骤S1072)。换句话说,信息处理设备710起P2P客户端的作用,信息处理设备730起P2P GO的作用。随后,信息处理设备710的控制单元从信息处理设备730接收无线参数,并根据接收的无线参数,进行连接处理(步骤S1073)。
随后,信息处理设备710的控制单元从信息处理设备730(DHCP服务器),获得IP地址(步骤S1074)。
随后,信息处理设备710的控制单元判定是否从信息处理设备730收到连接许可信息(步骤S1075)。当未从信息处理设备730收到连接许可信息时(步骤S1075),数据传输处理的操作终止。
当从信息处理设备730收到连接许可信息时(步骤S1075),信息处理设备710的控制单元向信息处理设备730传送与信息处理设备710相关的能力信息(步骤S1076)。
随后,信息处理设备710的控制单元判定是否从信息处理设备730收到设定请求信息(步骤S1077)。当未收到设定请求信息时(步骤S1077),继续监视设定请求信息。
当收到设定请求信息时(步骤S1077),在信息处理设备710中,设定图像传输模式,作为初始状态。随后,信息处理设备710的控制单元根据从信息处理设备730接收的设定请求信息,向信息处理设备730传送连接请求(步骤S1078)。
随后,信息处理设备710的控制单元判定是否从信息处理设备730,收到指示允许与该连接请求对应的图像的接收的确认信息(步骤S1079)。当未从信息处理设备730收到确认信息时(步骤S1079),继续进行监视。
当从信息处理设备730收到确认信息时(步骤S1079),信息处理设备710的控制单元开始与信息处理设备730的直接P2P连接(步骤S1080)。随后,信息处理设备710的控制单元根据与接收的确认信息对应的连接请求,与信息处理设备730进行图像参数和音频参数的协商,并传送图像数据(步骤S1081)。
随后,信息处理设备710的控制单元判定图像传输模式是否已被设定(步骤S1082)。随后,当在信息处理设备710中,设定了图像传输模式时(步骤S1082),处理返回步骤S1081。
随后,信息处理设备710的控制单元判定信息处理设备710是否已离开该群组(步骤S1083)。随后,当信息处理设备710已离开该群组时(步骤S1083),数据传输处理的操作终止。
当信息处理设备710未离开群组时(步骤S1083),信息处理设备710的控制单元从信息处理设备730接收AP连接信息(步骤S1084)。AP连接信息是用于断开信息处理设备710和信息处理设备730之间的连接,和连接信息处理设备710与接入点701的信息。
随后,信息处理设备710的控制单元断开与信息处理设备730的直接连接(步骤S1085)。随后,信息处理设备710的控制单元进行经接入点710,建立与信息处理设备730的连接的连接处理(步骤S1086)。
随后,信息处理设备710的控制单元判定是否经该接入点,从信息处理设备730收到指示连接被允许的确认信息(步骤S1087)。当未从信息处理设备730收到确认信息时(步骤S1087),继续进行监视。
当从信息处理设备730收到确认信息时(步骤S1087),建立经接入点701,与信息处理设备730的连接。随后,信息处理设备710的控制单元判定待机模式是否已被设定(步骤S1088)。随后,当在信息处理设备710中设定了待机模式时(步骤S1088),继续进行监视。
当未设定待机模式时(当设定了图像传输模式时)(步骤S1088),信息处理设备710的控制单元判定线路是否已被断开(步骤S1089)。随后,当线路已被断开时(步骤S1089),数据传输处理的操作终止。
当线路未被断开时(步骤S1089),信息处理设备710的控制单元断开经接入点701,与信息处理设备730的连接(步骤S1090),处理返回步骤S1078。
如上所述,信息处理设备710的控制单元能够进行控制,以致利用近场通信(例如,NFC),交换用于进行直接通信的信息。
例如,根据接触操作是否被登记在控制设备740中,可以判定对信息处理设备730的接触操作是否有效。例如,对于其终端标识信息被保存在群组管理信息保持单元750的终端标识信息751(图20中图解所示)中的信息处理设备,信息处理设备730的控制单元判定接触操作有效,给予加入群组的许可。然而,在这种情况下,只有当在群组管理信息保持单元750的可用群组参与时间756(图20中图解所示)的时间段时,信息处理设备730的控制单元才判断给予加入群组的许可。接触操作之后的加入群组的时间段可局限于预定的时间段。例如,可以只在会议时间带中(例如,接触之后的1小时内),才加入群组中。在接触之后,过去预定时间段之后,可以使用另一个会话密钥。
如上所述,通过利用NFC,能够容易地进行发送端设备和接收端设备之间的连接设定。从而,例如,用户能够直观地启动会议参加触发,更简单地参加会议。
<4.第四实施例>
在本技术的第二和第三实施例中,说明了其中通过用户的操作,或者用户的动作,使发送端设备连接到接收端设备或接入点的例子。
这里,发送端设备可利用无线LAN,连接到接入点或接收端设备,随后连接可被断开。这种情况下,即使在连接被断开之后,无线LAN的连接设定也可被保存在发送端设备中。这种情况下,即使拥有发送端设备的用户不进行用于连接的设定操作等,发送端设备也可被自动连接到接入点或接收端设备。
在这方面,在本技术的第四实施例中,将说明其中使发送端设备自动连接到接入点或接收端设备的例子。在其中使发送端设备自动连接到接入点或接收端设备的环境中,可存在连接到各种接收端设备的多个接入点。从而,通过经软切换,继续维持发送端设备与多个接入点的连接,实现这种环境。
首先,说明其中发送端设备被自动连接到接入点的例子。例如,设想其中发送端设备被自动持续连接到专用无线LAN的情况。
[信息处理设备(发送端设备)的操作例子]
图32是图解说明按照本技术的第四实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。图32中图解所示的例子是图27的变形例,与图27相同的部分用相同的附图标记表示,从而其说明被部分省略。
首先,信息处理设备710被自动切换和连接到安装在信息处理设备710所位于的场所中的接入点(步骤S1100)。例如,拥有信息处理设备710的用户可移动到特定楼层,以加入群组。在该环境中,信息处理设备710启动应用(步骤S1101)。在该启动之后,信息处理设备710的控制单元尝试期望被连接的接收端设备的设备发现处理。
通过设备发现处理,可以发现与启动的应用对应的多个接收端设备。这种情况下,用于从多个发现的接收端设备中,选择期望的接收端设备的选择画面可被显示在信息处理设备710的显示单元711上,利用用户的操作,可在选择画面上选择期望的接收端设备(步骤S1102)。多个发现的接收端设备中的最靠近发送端设备的设备可被自动选择和连接(步骤S1102)。
下面,说明其中发送端设备自动连接到接收端设备和接入点的例子。例如,接收端设备的连接设定被假定保存在发送端设备中,发送端设备被假定移动到接收端设备的无线电波到达范围中,并且自动连接到接收端设备。
[信息处理设备(发送端设备)的操作例子]
图33是图解说明按照本技术的第四实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。图33中图解所示的例子是图27的变形例,和图27相同的部分用相同的附图标记表示,从而其说明被部分省略。
首先,信息处理设备710的控制单元判定信息处理设备710是否具有作为无线LAN功能的并发功能(时分并发功能或者同时使用并发功能)(步骤S1111)。当信息处理设备710具有并发功能时,信息处理设备710可在不进行接入点和接收端设备的断开切换的情况下,与接入点和接收端设备两者建立时分连接或者同时连接。
当信息处理设备710具有并发功能时(步骤S1111),信息处理设备710的控制单元通过自动连接,进行直到层3的设定(直到IP地址的获取的设定)(步骤S1112)。随后,信息处理设备710的控制单元尝试经接入点,建立与接收端设备的连接(步骤S1113)。这里,当根据经接入点的连接和直接P2P连接的两个链路,建立与接收端设备的连接时,理想的是只通过经接入点的连接和直接P2P连接之一,进行设备发现处理。例如,可以向经接入点的连接赋予优先级,可以只对于直接P2P连接,维持链路连接,按照Wi-Fi认证的Miracast的图像传输可被停止。这种情况下,在图像传输模式下,可在下一个切换时间段内,进行高速操作,而不浪费在Wi-Fi认证的Miracast中使用的频带。
当信息处理设备710不具有并发功能时(步骤S1111),信息处理设备710的控制单元确认与接收端设备的连接状态(步骤S1114)。这里,例如,当与接收端设备的连接是直接P2P连接时,该直接P2P连接首先被断开,并进行到经接入点的连接的切换。此外,当与接收端设备的连接是经接入点的连接时,该连接被维持。此外,当信息处理设备710不具有并发功能时,连接状态的端口信息和IP信息被保持在信息处理设备710中,并被转移。
随后,信息处理设备710的控制单元经接入点,进行设备发现处理(步骤S1115)。在设备发现处理之后,信息处理设备710的控制单元判定是否经接入点,从接收端设备收到连接许可信息(步骤S1116)。
这里,在其中参与设备的数目较小的环境中,可以无变化地维持直接P2P连接。这种情况下,当经接入点,从接收端设备收到连接许可信息时(步骤S1116),处理进入步骤S1038。
如上所述,可在用户不操心连接设定的情况下,适当地检测当前设定信息。此外,能够实现关联,以致进行和本技术的第二实施例中相同的操作。
本技术不限于本技术的各个实施例。例如,按照Wi-Fi基础结构模式连接的设备可使得只对连接到相同的IP子网络的设备(例如,遵守Wi-Fi认证的Miracast规范的设备)进行设备发现。此外,具有并发功能的设备,例如,按Wi-Fi基础结构模式连接的设备可以是按照P2P方式,进行相同通道的并发处理的设备。
在本技术的实施例中,未考虑经由接入点的图像(视频)或音频的传输,不过,本技术不限于这个例子。例如,本技术的实施例甚至可以适用于以下环境。例如,本技术的实施例可适用于其中发送端设备经Wi-Fi基础结构模式的IP网络,向按Wi-Fi基础结构模式连接到相同的IP子网络的接收端设备传送图像(视频)或音频的形式。此外,例如,本技术的实施例可适用于其中接收端设备经Wi-Fi基础结构模式的IP网络,从按Wi-Fi基础结构模式连接到相同的IP子网络的发送端设备,接收图像(视频)或音频的形式。
<5.应用例子>
本公开的技术可适用于各种产品。例如,信息处理设备200、300、400、703、704、710、720、730,和控制设备740可被实现成诸如智能电话机、平板个人计算机(PC)、笔记本PC、便携式游戏终端或数字照相机之类的移动终端,诸如电视接收机、打印机、数字扫描仪或网络存储器之类的固定终端,或者诸如车载导航设备之类的车载终端。另外,信息处理设备200、300、400、703、704、710、720、730,和控制设备740可被实现成进行机器间(M2M)通信的终端(这些终端也被称为机器式通信(MTC)终端),比如智能仪表、自动售货机、远程监视设备或销售点(POS)终端。此外,信息处理设备200、300、400、703、704、710、720、730,和控制设备740可以是安装在这些终端中的无线通信模块(例如,在一个小片中构成的集成电路模块)。
[5-1.第一应用例子]
图40是表示本公开的技术可适用于的智能电话机900的示意结构的例子的方框图。智能电话机900包括处理器901、内存902、存储器903、外部连接接口904、摄像头906、传感器907、麦克风908、输入设备909、显示设备910、扬声器911、无线通信接口913、天线开关914、天线915、总线917、电池918和辅助控制器919。
处理器901可以是例如中央处理器(CPU)或片上系统(SoC),控制智能电话机900的应用层和其它层的功能。内存902包括随机存取存储器(RAM)和只读存储器(ROM),保存由处理器901执行的程序,以及数据。存储器903可包括诸如半导体存储器或硬盘之类的存储介质。外部连接接口904是用于连接外部设备,比如存储卡或通用串行总线(USB)设备和智能电话机900的接口。
摄像头906包括诸如电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)之类的图像传感器,生成拍摄的图像。传感器907可包括诸如测量传感器、陀螺传感器、地磁传感器和加速度传感器之类的一组传感器。麦克风908把输入智能电话机900的声音转换成音频信号。输入设备909例如包括配置成检测显示设备910的屏幕上的触摸的触摸传感器、小键盘、键盘、按钮或开关,接收从用户输入的操作或信息。显示设备910包括诸如液晶显示器(LCD)和有机发光二极管(OLED)显示器之类的屏幕,显示智能电话机900的输出图像。扬声器911把从智能电话机900输出的音频信号转换成声音。
无线通信接口913支持诸如IEEE802.11a、11b、11g、11n、11ac和11ad之类无线LAN标准中的一种或多种,以进行无线通信。在基础结构模式下,无线通信接口913可通过无线LAN接入点,与另外的设备通信。另外,在ad-hoc模式或诸如Wi-Fi direct之类的直接通信模式下,无线通信接口913可直接与另外的设备通信。在Wi-Fi direct下,不同于ad-hoc模式,两个终端之一起接入点作用,不过在终端之间直接进行通信。无线通信接口913一般可包括基带处理器、射频(RF)电路和功率放大器。无线通信接口913可以是其中集成保存通信控制程序的存储器,执行所述程序的处理器,和相关电路的单片模块。除了无线LAN方式之外,无线通信接口913还可支持其它各种无线通信方式,比如近场无线通信方式,邻近无线通信方式和蜂窝通信方式。天线开关914在包含在无线通信接口913中的多个电路(例如用于不同无线通信方式的电路)之间,切换天线915的连接目的地。天线915具有无线通信接口913用于无线信号的传送和接收的一个或多个天线单元(例如,构成MIMO天线的多个天线单元)。
应注意智能电话机900不限于图40的例子,可包括多个天线(例如用于无线LAN的天线,用于邻近无线通信方式的天线等)。在这种情况下,可从智能电话机900的结构中,省略天线开关914。
总线917互连处理器901、内存902、存储器903、外部连接接口904、摄像头906、传感器907、麦克风908、输入设备909、显示设备910、扬声器911、无线通信接口913和辅助控制器919。电池918通过图中部分表示成虚线的馈电线,向图48中图解所示的智能电话机900的各个部件供电。辅助控制器919例如按睡眠模式运行智能电话机900的最低必要功能。
在图40中所示的智能电话机900中,可利用无线通信接口913,实现控制单元240,利用图3说明的控制单元370。另外,这些功能的至少一些可用处理器901或辅助控制器919实现。
通过经处理器901,在应用层执行接入点功能,智能电话机900可起无线接入点(软件AP)的作用。此外,无线通信接口913可具有无线接入点功能。
[5-2.第二应用例子]
图41是图解说明本公开的技术可适用于的车载导航设备920的示意结构的例子的方框图。车载导航设备920包括处理器921、存储器922、全球定位系统(GPS)模块924、传感器925、数据接口926、内容播放器927、存储介质接口928、输入设备929、显示设备930、扬声器931、无线通信接口933、天线开关934、天线935和电池938。
处理器921例如可以是CPU或SoC,控制车载导航设备920的导航功能和另外的功能。存储器922包括RAM和ROM,保存由处理器921执行的程序,以及数据。
GPS模块924利用从GPS卫星接收的GPS信号,测量车载导航设备920的位置(比如纬度、经度和高度)。传感器925可包括诸如陀螺传感器、地磁传感器和气压传感器之类的一组传感器。数据接口926通过未图示的终端,连接到例如车载网络941,获得车辆生成的数据,比如车速数据。
内容播放器927再现保存在插入存储介质接口928中的存储介质(比如CD和DVD)中的内容。输入设备929例如包括配置成检测在显示设备930的屏幕上的触摸的触摸传感器、按钮或开关,接收从用户输入的操作或信息。显示设备930包括诸如LCD或OLED显示器之类的屏幕,显示导航功能或者再现的内容的图像。扬声器931输出导航功能或再现的内容的声音。
无线通信接口933支持诸如IEEE802.11a、11b、11g、11n、11ac和11ad之类无线LAN标准中的一种或多种,以进行无线通信。在基础结构模式下,无线通信接口933可通过无线LAN接入点,与另外的设备通信。另外,在ad-hoc模式或诸如Wi-Fi Direct之类的直接通信模式下,无线通信接口933可直接与另外的设备通信。无线通信接口933一般可包括基带处理器、RF电路和功率放大器。无线通信接口933可以是其中集成保存通信控制程序的存储器,执行所述程序的处理器,和相关电路的单片模块。除了无线LAN方式之外,无线通信接口933还可支持其它各种无线通信方式,比如近场无线通信方式,邻近无线通信方式或蜂窝通信方式。天线开关934在包含在无线通信接口933中的多个电路之间,切换天线935的连接目的地。天线935具有由无线通信接口933用于无线信号的传送和接收的一个或多个天线单元。
另外,车载导航设备920可包括多个天线,不限于图41的例子。这种情况下,可从车载导航设备920的结构中省略天线开关934。
电池938通过图中部分表示成虚线的馈电线,向图41中所示的车载导航设备920的各个部件供电。电池938累积从车辆供给的电力。
在图41中图解所示的车载导航设备920中,可用无线通信接口933实现利用图2说明的控制单元240和利用图3说明的控制单元370。至少一部分的功能也可用处理器921实现。
本公开的技术也可被实现成包括车载导航设备920的一个或多个部件,车载网络941,和车辆模块942的车载系统(或车辆)940。车辆模块942生成车辆数据,比如车速、发动机速度和故障信息,并把生成的数据输出给车载网络941。
上述实施例是具体体现本技术的例子,实施例中的事项分别和权利要求书中的公开特定事项具有对应关系。同样地,用相同名称表示的实施例中的事项和权利要求书中的公开特定事项相互具有对应关系。不过,本技术不限于上述实施例,实施例的各种变形包含在本技术的范围内,而不脱离本技术的精神。
在上述实施例中说明的处理序列可被看作具有一系列的序列的方法,或者被看作使计算机执行所述一系列的序列的程序,和保存所述程序的记录介质。作为所述记录介质,可以使用硬盘、CD(光盘)、MD(微型光盘)、DVD(数字通用光盘)、存储卡和蓝光光盘(注册商标)。
在本说明中描述的效果仅仅是例子,效果不受限制,可以存在其它效果。
另外,也可如下构成本技术。
(1)一种信息处理设备,所述信息处理设备按照无线保真(Wi-Fi)认证的Miracast规范,进行与另一个信息处理设备的实时图像传输,所述信息处理设备包括:
控制单元,所述控制单元被配置成进行控制,以致经由接入点,从所述另一个信息处理设备接收用于进行与实时图像传输相关的设定的设定请求信息,和通过直接通信,把根据所述设定请求信息,进行所述设定的设定请求传送给所述另一个信息处理设备。
(2)按照(1)所述的信息处理设备,
其中控制单元经由接入点,与所述另一个信息处理设备交换与所述信息处理设备相关的能力信息,
所述另一个信息处理设备根据所述能力信息,生成设定请求信息。
(3)按照(1)或(2)所述的信息处理设备,
其中控制单元进行控制,以致当进行经由接入点,与所述另一个信息处理设备的连接状态,和通过直接通信,与所述另一个信息处理设备的连接状态之间的切换时,利用与切换之前的连接相关的端口信息和IP信息至少之一,进行连接处理。
(4)按照(1)-(3)任意之一所述的信息处理设备,
其中控制单元进行控制,以致在设定请求被传送给所述另一个信息处理设备之后,通过直接通信,进行按照Wi-Fi认证的Miracast规范的图像传输。
(5)按照(4)所述的信息处理设备,
其中控制单元进行控制,以致通过低频带的无线传输路径,传送显示在显示单元中的预定区域上的图像,通过高频带的无线传输路径,传送显示在比显示单元中的预定区域大的区域上的图像。
(6)按照(1)-(5)任意之一所述的信息处理设备,
其中控制单元进行控制,以致根据用户的操作,设定请求通过直接通信,被传送给所述另一个信息处理设备。
(7)按照(1)-(5)任意之一所述的信息处理设备,
其中控制单元进行控制,以致当存在配置成通过直接通信,进行图像传输的多个信息处理设备时,根据预定顺序,通过直接通信把设定请求传送给所述另一个信息处理设备。
(8)按照(1)-(7)任意之一所述的信息处理设备,
其中控制单元进行控制,以致经由接入点,交换指示是否允许经由除所述接入点以外的接入点或基站,与所述另一个信息处理设备的连接的许可信息,当收到指示允许所述连接的许可信息时,进行经由除所述接入点以外的接入点或基站,与所述另一个信息处理设备的交换。
(9)按照(8)所述的信息处理设备,
其中控制单元进行控制,以致当收到指示允许所述连接的许可信息时,经由除所述接入点以外的接入点或基站,从所述另一个信息处理设备接收图像数据和音频数据至少之一,并输出所述图像数据和音频数据至少之一。
(10)按照(1)-(9)任意之一所述的信息处理设备,
其中控制单元进行控制,以致利用近场通信,交换用于进行直接通信的信息。
(11)一种信息处理设备,所述信息处理设备按照Wi-Fi认证的Miracast规范,进行与另一个信息处理设备的实时图像传输,所述信息处理设备包括:
控制单元,所述控制单元被配置成进行控制,以致经由接入点,把用于进行与实时图像传输相关的设定的设定请求信息传送给所述另一个信息处理设备,通过直接通信,从所述另一个信息处理设备接收根据所述设定请求信息,进行所述设定的设定请求。
(12)一种信息处理设备,包括:
控制单元,所述控制单元被配置成进行控制,以致当按照Wi-Fi认证的Miracast规范,在接收端设备和多个发送端设备之间进行实时图像传输时,在发送端设备中设定经由接入点,连接接收端设备和发送端设备的待机模式,和通过直接通信,连接接收端设备和发送端设备的图像传输模式中的任意一种通信模式。
(13)按照(12)所述的信息处理设备,
其中控制单元进行控制,以致指示多个发送端设备的图像显示在输入和输出单元上,根据输入和输出单元中的操作输入,在发送端设备中设定所述通信模式。
(14)按照(12)所述的信息处理设备,
其中控制单元进行控制,以致根据预定顺序,在发送端设备中设定所述通信模式。
(15)一种信息处理系统,包括:
接收端设备,所述接收端设备被配置成按照Wi-Fi认证的Miracast规范,进行与发送端设备的实时图像传输,并进行控制,以致使发送端设备进行与实时图像传输相关的设定的设定请求信息经由接入点被传送给发送端设备,通过与发送端设备的直接通信,从发送端设备接收根据所述设定请求信息,进行所述设定的设定请求;和
控制设备,所述控制设备被配置成进行控制,以致当在接收端设备和多个发送端设备之间进行实时图像传输时,在发送端设备中设定经由接入点,连接接收端设备和发送端设备的待机模式,和通过直接通信,连接接收端设备和发送端设备的图像传输模式中的任意一种通信模式。
(16)一种信息处理方法,包括:
按照Wi-Fi认证的Miracast规范,进行与另一个信息处理设备的实时图像传输的第一处理;
经由接入点,从所述另一个信息处理设备接收用于进行与实时图像传输相关的设定的设定请求信息的第二处理;和
通过直接通信,把根据所述设定请求信息,进行所述设定的设定请求传送给所述另一个信息处理设备的第三处理。
附图标记列表
100 通信系统
200 信息处理设备
210 天线
220 无线通信单元
230 控制信号接收单元
240 控制单元
250 图像和音频信号生成单元
260 图像和音频压缩单元
270 流传输单元
300 信息处理设备
310 天线
320 无线通信单元
330 流接收单元
340 图像和音频解压缩单元
350 图像和音频输出单元
351 显示单元
352 音频输出单元
360 用户信息获取单元
370 控制单元
380 控制信号传输单元
390 管理信息保持单元
400 信息处理设备
610 发送端设备
612 接收端设备
700 通信系统
701 接入点
702 网络
703-705、710、720、730 信息处理设备
711、721 显示单元
731 显示设备
732 显示单元
740 控制设备
741 天线
742 无线通信单元
743 输入和输出单元
744 显示单元
745 输入单元
746 操作接收单元
747 控制单元
750 群组管理信息保持单元
900 智能电话机
901 处理器
902 内存
903 存储器
904 外部连接接口
906 摄像头
907 传感器
908 麦克风
909 输入设备
910 显示设备
911 扬声器
913 无线通信接口
914 天线开关
915 天线
917 总线
918 电池
919 辅助控制器
920 车载导航设备
921 处理器
922 存储器
924 GPS模块
925 传感器
926 数据接口
927 内容播放器
928 存储介质接口
929 输入设备
930 显示设备
931 扬声器
933 无线通信接口
934 天线开关
935 天线
938 电池
941 车载网络
942 车辆模块

Claims (20)

1.一种执行图像接收的信息处理设备,包括:
电路,被配置成
经由接入点建立与第一信息处理设备的第一连接,
经由接入点建立与第二信息处理设备的第二连接,
显示关于连接到所述信息处理设备的设备的信息,所述信息被显示在所述信息处理设备上,以及
经由第一连接和接入点从第一信息处理设备和/或经由第二连接和接入点从第二信息处理设备接收第一操作信息、第二操作信息以及第三操作信息,
其中,第一操作信息使信息处理设备在不断开第二连接的情况下显示基于经由第一连接和接入点从第一信息处理设备接收的第一图像数据的第一图像,
第二操作信息使信息处理设备在不断开第一连接的情况下显示基于经由第二连接和接入点从第二信息处理设备接收的第二图像数据的第二图像,以及
第三操作信息使信息处理设备在不断开第一连接和第二连接的情况下建立经由直接连接、到第一信息处理设备和第二信息处理设备中的至少一个的第三连接。
2.按照权利要求1所述的信息处理设备,其中,第一操作信息使信息处理设备不显示第二图像。
3.按照权利要求1所述的信息处理设备,其中,第二操作信息使信息处理设备不显示第一图像。
4.按照权利要求1所述的信息处理设备,其中,第三操作信息使信息处理设备显示基于经由第三连接从第一信息处理设备接收的第三图像数据的第三图像。
5.按照权利要求4所述的信息处理设备,其中,第三操作信息使信息处理设备不显示第一图像和第二图像。
6.按照权利要求1所述的信息处理设备,其中,第一连接和第二连接是在所述信息处理设备由于通过接入点的设备发现过程而被发现时建立的。
7.按照权利要求1所述的信息处理设备,其中,第三连接是在所述信息处理设备由于通过直接连接的设备发现过程而被发现时建立的。
8.按照权利要求1所述的信息处理设备,其中,第三连接是基于Wi-Fi认证的Miracast规范的对等(P2P)连接。
9.按照权利要求1所述的信息处理设备,其中,第一连接和第二连接被连接到Wi-Fi基础结构模式的网际协议(IP)网络。
10.按照权利要求1所述的信息处理设备,其中,所述信息与包括第一信息处理设备和第二信息处理设备在内的当前连接到所述信息处理设备的设备有关。
11.一种信息处理设备执行图像接收的方法,包括:
利用电路经由接入点建立与第一信息处理设备的第一连接;
利用电路经由接入点建立与第二信息处理设备的第二连接;
利用电路显示关于连接到所述信息处理设备的设备的信息,连接到所述信息处理设备的设备包括第一信息处理设备和第二信息处理设备,所述信息被显示在所述信息处理设备上;以及
利用电路经由第一连接和接入点从第一信息处理设备和/或经由第二连接和接入点从第二信息处理设备接收第一操作信息、第二操作信息以及第三操作信息,
其中,第一操作信息使信息处理设备在不断开第二连接的情况下显示基于经由第一连接和接入点从第一信息处理设备接收的第一图像数据的第一图像,
第二操作信息使信息处理设备在不断开第一连接的情况下显示基于经由第二连接和接入点从第二信息处理设备接收的第二图像数据的第二图像,以及
第三操作信息使信息处理设备在不断开第一连接和第二连接的情况下建立经由直接连接、到第一信息处理设备和第二信息处理设备中的至少一个的第三连接。
12.一种执行图像发送的信息处理设备,包括:
电路,被配置成
经由接入点建立与第一信息处理设备的第一连接,第一信息处理设备经由第二连接和接入点连接到第二信息处理设备,以及
经由第一连接和接入点向第一信息处理设备发送第一操作信息、第二操作信息以及第三操作信息,
其中,第一操作信息使第一信息处理设备在不断开第二连接的情况下显示基于经由第一连接和接入点发送的第一图像数据的第一图像,
第二操作信息使第一信息处理设备在不断开第一连接的情况下显示基于经由第二连接和接入点从第二信息处理设备接收的第二图像数据的第二图像,以及
第三操作信息使第一信息处理设备在不断开第一连接和第二连接的情况下建立经由直接连接、到所述信息处理设备和第二信息处理设备中的至少一个的第三连接。
13.按照权利要求12所述的信息处理设备,其中,第三连接是基于Wi-Fi认证的Miracast规范的对等(P2P)连接。
14.按照权利要求12所述的信息处理设备,其中,第一连接和第二连接被连接到Wi-Fi基础结构模式的网际协议(IP)网络。
15.按照权利要求12所述的信息处理设备,其中,所述电路还被配置成经由第一连接和接入点与第一信息处理设备交换能力信息。
16.按照权利要求15所述的信息处理设备,其中,所述能力信息包括高带宽数字内容保护系统(HDCP)的指示。
17.按照权利要求16所述的信息处理设备,其中,所述电路还被配置成发送基于与第一信息处理设备交换的能力信息的设定请求。
18.按照权利要求17所述的信息处理设备,其中,所述电路还被配置成经由第三连接发送所述设定请求。
19.按照权利要求17所述的信息处理设备,其中,所述电路还被配置成基于对用户操作的接收而发送所述设定请求。
20.一种信息处理设备执行图像发送的方法,包括:
利用电路经由接入点建立与第一信息处理设备的第一连接,第一信息处理设备经由第二连接和接入点连接到第二信息处理设备,以及
利用电路经由第一连接和接入点向第一信息处理设备发送第一操作信息、第二操作信息以及第三操作信息,
其中,第一操作信息使第一信息处理设备在不断开第二连接的情况下显示基于经由第一连接和接入点发送的第一图像数据的第一图像,
第二操作信息使第一信息处理设备在不断开第一连接的情况下显示基于经由第二连接和接入点从第二信息处理设备接收的第二图像数据的第二图像,以及
第三操作信息使第一信息处理设备在不断开第一连接和第二连接的情况下建立经由直接连接、到所述信息处理设备和第二信息处理设备中的至少一个的第三连接。
CN201810945036.5A 2014-02-12 2014-12-02 信息处理设备、信息处理系统和信息处理方法 Active CN109121127B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014024016 2014-02-12
JP2014-024016 2014-02-12
CN201480075025.6A CN105960826B (zh) 2014-02-12 2014-12-02 信息处理设备、信息处理系统和信息处理方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201480075025.6A Division CN105960826B (zh) 2014-02-12 2014-12-02 信息处理设备、信息处理系统和信息处理方法

Publications (2)

Publication Number Publication Date
CN109121127A true CN109121127A (zh) 2019-01-01
CN109121127B CN109121127B (zh) 2019-10-18

Family

ID=53799835

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201480075025.6A Active CN105960826B (zh) 2014-02-12 2014-12-02 信息处理设备、信息处理系统和信息处理方法
CN201810945036.5A Active CN109121127B (zh) 2014-02-12 2014-12-02 信息处理设备、信息处理系统和信息处理方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201480075025.6A Active CN105960826B (zh) 2014-02-12 2014-12-02 信息处理设备、信息处理系统和信息处理方法

Country Status (9)

Country Link
US (4) US9775107B2 (zh)
EP (2) EP3422730B1 (zh)
JP (1) JP6455447B2 (zh)
KR (2) KR101938539B1 (zh)
CN (2) CN105960826B (zh)
CA (1) CA2938653C (zh)
DE (1) DE202014011316U1 (zh)
TW (1) TWI665913B (zh)
WO (1) WO2015122080A1 (zh)

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6021089B2 (ja) * 2014-03-25 2016-11-02 パナソニックIpマネジメント株式会社 情報表示システム及び情報表示方法
JP6525771B2 (ja) * 2015-06-30 2019-06-05 キヤノン株式会社 情報処理装置、制御方法、およびプログラム
US10122801B2 (en) * 2015-07-02 2018-11-06 Qualcomm Incorporated Service discovery and topology management
US10223061B2 (en) * 2015-12-17 2019-03-05 International Business Machines Corporation Display redistribution between a primary display and a secondary display
JP2017158017A (ja) * 2016-03-01 2017-09-07 Necプラットフォームズ株式会社 無線通信装置、システム、方法およびプログラム
JP6737074B2 (ja) * 2016-08-30 2020-08-05 コニカミノルタ株式会社 情報処理装置および情報処理装置の制御プログラム
JP6769204B2 (ja) * 2016-09-21 2020-10-14 コニカミノルタ株式会社 画像形成装置、プログラム、および、画像形成システム
US10349259B2 (en) * 2016-09-23 2019-07-09 Apple Inc. Broadcasting a device state in a wireless communication network
KR102598082B1 (ko) * 2016-10-28 2023-11-03 삼성전자주식회사 영상 표시 장치, 모바일 장치 및 그 동작방법
WO2018101514A1 (ko) * 2016-12-01 2018-06-07 엘지전자 주식회사 영상표시장치, 및 이를 구비하는 영상표시 시스템
CN106792823A (zh) * 2016-12-28 2017-05-31 青岛海信电器股份有限公司 一种基于Miracast的终端连接方法和装置
EP3563614B1 (en) * 2016-12-29 2023-07-19 Koninklijke Philips N.V. Wireless communication system
US10206083B2 (en) * 2016-12-30 2019-02-12 Intel Corporation Using wireless display docking technology over infrastructure networks
KR102388049B1 (ko) * 2017-02-14 2022-04-19 삼성전자주식회사 무선 통신 시스템에서 통신을 수행하는 장치 및 이를 위한 방법
JP2018190040A (ja) * 2017-04-28 2018-11-29 キヤノン株式会社 通信装置、制御方法、およびプログラム
FR3067542A1 (fr) * 2017-06-29 2018-12-14 Orange Procede de gestion de transmission d'un contenu multimedia et equipements pour la mise en oeuvre du procede
JP7027769B2 (ja) 2017-09-29 2022-03-02 ブラザー工業株式会社 通信装置のためのコンピュータプログラム
JP6504292B1 (ja) * 2018-03-20 2019-04-24 日本電気株式会社 入出力装置、表示方法、及び端末装置
US10779054B2 (en) * 2018-12-20 2020-09-15 Arris Enterprises Llc System and method for authentication and login portability for multiscreen discovery and launch of first screen content
DE102019122728A1 (de) * 2019-08-23 2021-02-25 Bayerische Motoren Werke Aktiengesellschaft Extraktion von Informationen aus einem Datenstrom
JP7424004B2 (ja) * 2019-11-20 2024-01-30 株式会社デンソー 通信端末装置、及び通信管理サーバ装置
CN111314177B (zh) * 2020-02-21 2022-03-01 腾讯科技(深圳)有限公司 一种基于无线信号的作息时段识别方法以及相关装置
KR20210123927A (ko) * 2020-04-06 2021-10-14 엘지전자 주식회사 무선 디바이스
CN113691842B (zh) * 2020-05-18 2023-03-31 荣耀终端有限公司 一种跨设备的内容投射方法及电子设备
CN111522361B (zh) * 2020-05-27 2021-07-27 北京理工大学 主-从模式的多无人机编队一致性控制方法
CN111787377B (zh) * 2020-08-19 2022-06-28 青岛海信传媒网络技术有限公司 显示设备及投屏方法
CN114189946A (zh) * 2020-09-15 2022-03-15 华为技术有限公司 数据分享的方法、电子设备和系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102264151A (zh) * 2010-05-25 2011-11-30 索尼公司 信息处理装置、信息处理方法、以及信息处理程序
WO2013096678A2 (en) * 2011-12-22 2013-06-27 Qualcomm Incorporated Apparatus, systems, and methods of ip address discovery for tunneled direct link setup

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101330633B1 (ko) 2006-06-08 2013-11-18 삼성전자주식회사 무선 통신 방법 및 장치
US8135947B1 (en) * 2007-03-21 2012-03-13 Qurio Holdings, Inc. Interconnect device to enable compliance with rights management restrictions
JP2008278388A (ja) 2007-05-07 2008-11-13 Sony Corp 情報交換装置および情報交換方法
US7895442B1 (en) * 2007-06-18 2011-02-22 Qurio Holdings, Inc. Interconnect device to enable compliance with rights management restrictions
JP5216866B2 (ja) * 2007-12-07 2013-06-19 テレフオンアクチーボラゲット エル エム エリクソン(パブル) Ipメディアストリーミングサービスの配信
JP5613770B2 (ja) 2009-09-18 2014-10-29 インターデイジタル パテント ホールディングス インコーポレイテッド ピアツーピア直接リンク通信にネットワーク接続を提供する方法および装置
US9949305B2 (en) * 2009-10-02 2018-04-17 Blackberry Limited Methods and apparatus for peer-to-peer communications in a wireless local area network
JP5440123B2 (ja) * 2009-11-24 2014-03-12 ソニー株式会社 無線通信装置、無線通信システム、無線通信方法およびプログラム
US9749832B2 (en) 2010-09-24 2017-08-29 Qualcomm Incorporated Wireless display discovery and operation with TDLS
US9504069B2 (en) 2010-12-24 2016-11-22 Samsung Electronics Co., Ltd. Method and apparatus for content protection in Wi-Fi direct network
US20120178380A1 (en) * 2011-01-07 2012-07-12 Microsoft Corporation Wireless Communication Techniques
US8887222B2 (en) 2011-09-14 2014-11-11 Qualcomm Incorporated Multicasting in a wireless display system
JP2013150282A (ja) 2012-01-23 2013-08-01 Toshiba Corp 無線基地局装置、無線端末装置及び無線伝送システム
MX342724B (es) 2012-04-10 2016-10-10 Sony Corp Aparato de comunicación, método de control de comunicaciones y programa.
US9544931B2 (en) 2012-04-13 2017-01-10 Sony Corporation Wireless communication device, communication system, and communication method
JP5977612B2 (ja) 2012-07-24 2016-08-24 シャープ株式会社 ソース機器、シンク機器、システム、プログラム及び記憶媒体
US9306992B2 (en) * 2013-06-07 2016-04-05 Qualcomm Incorporated Method and system for using Wi-Fi display transport mechanisms to accomplish voice and data communications

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102264151A (zh) * 2010-05-25 2011-11-30 索尼公司 信息处理装置、信息处理方法、以及信息处理程序
WO2013096678A2 (en) * 2011-12-22 2013-06-27 Qualcomm Incorporated Apparatus, systems, and methods of ip address discovery for tunneled direct link setup

Also Published As

Publication number Publication date
KR102306258B1 (ko) 2021-09-30
US20170353920A1 (en) 2017-12-07
EP3422730A1 (en) 2019-01-02
KR20180098697A (ko) 2018-09-04
TWI665913B (zh) 2019-07-11
CN109121127B (zh) 2019-10-18
JP6455447B2 (ja) 2019-01-23
TW201543877A (zh) 2015-11-16
EP3107347A1 (en) 2016-12-21
JPWO2015122080A1 (ja) 2017-03-30
EP3422730B1 (en) 2020-02-19
CA2938653A1 (en) 2015-08-20
EP3107347B1 (en) 2021-03-10
US20160345254A1 (en) 2016-11-24
DE202014011316U1 (de) 2019-04-17
US9775107B2 (en) 2017-09-26
KR101938539B1 (ko) 2019-01-14
EP3107347A4 (en) 2017-08-16
US10667206B2 (en) 2020-05-26
KR20160122711A (ko) 2016-10-24
US20180310239A1 (en) 2018-10-25
US10172080B2 (en) 2019-01-01
CN105960826B (zh) 2020-04-03
WO2015122080A1 (ja) 2015-08-20
CA2938653C (en) 2023-04-11
CN105960826A (zh) 2016-09-21
US10034234B2 (en) 2018-07-24
US20190053149A1 (en) 2019-02-14

Similar Documents

Publication Publication Date Title
CN109121127B (zh) 信息处理设备、信息处理系统和信息处理方法
US10805672B2 (en) Information processing device, information processing system, and information processing method
US10383098B2 (en) Information processing device and information processing method
US10979900B2 (en) Information processing device and information processing method
US10462517B2 (en) Information processing apparatus, communication system, and information processing method
US10499200B2 (en) Information processing device and information processing method
US11068148B2 (en) Information processing device
CN108966182A (zh) 通信装置、通信方法和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant