CN105474691A - 信息处理设备和信息处理方法 - Google Patents

信息处理设备和信息处理方法 Download PDF

Info

Publication number
CN105474691A
CN105474691A CN201480047303.7A CN201480047303A CN105474691A CN 105474691 A CN105474691 A CN 105474691A CN 201480047303 A CN201480047303 A CN 201480047303A CN 105474691 A CN105474691 A CN 105474691A
Authority
CN
China
Prior art keywords
messaging device
information
control unit
wireless communication
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480047303.7A
Other languages
English (en)
Other versions
CN105474691B (zh
Inventor
石见英辉
山浦智也
吉村司
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN105474691A publication Critical patent/CN105474691A/zh
Application granted granted Critical
Publication of CN105474691B publication Critical patent/CN105474691B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43637Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2807Exchanging configuration information on appliance services in a home automation network
    • H04L12/2814Exchanging control software or macros for controlling appliance services in a home automation network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2816Controlling appliance services of a home automation network by calling their functionalities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2816Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/2821Avoiding conflicts related to the use of home appliances
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/22Parsing or analysis of headers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42607Internal components of the client ; Characteristics thereof for processing the incoming bitstream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/04Key management, e.g. using generic bootstrapping architecture [GBA]
    • H04W12/041Key generation or derivation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/04Key management, e.g. using generic bootstrapping architecture [GBA]
    • H04W12/043Key management, e.g. using generic bootstrapping architecture [GBA] using a trusted network node as an anchor
    • H04W12/0431Key distribution or pre-distribution; Key agreement
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W52/00Power management, e.g. TPC [Transmission Power Control], power saving or power classes
    • H04W52/02Power saving arrangements
    • H04W52/0209Power saving arrangements in terminal devices
    • H04W52/0225Power saving arrangements in terminal devices using monitoring of external events, e.g. the presence of a signal
    • H04W52/0235Power saving arrangements in terminal devices using monitoring of external events, e.g. the presence of a signal where the received signal is a power saving command
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W52/00Power management, e.g. TPC [Transmission Power Control], power saving or power classes
    • H04W52/02Power saving arrangements
    • H04W52/0209Power saving arrangements in terminal devices
    • H04W52/0261Power saving arrangements in terminal devices managing power supply demand, e.g. depending on battery level
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L2463/00Additional details relating to network architectures or network communication protocols for network security covered by H04L63/00
    • H04L2463/101Additional details relating to network architectures or network communication protocols for network security covered by H04L63/00 applying security measures for digital rights management
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/70Reducing energy consumption in communication networks in wireless communication networks

Abstract

在本发明中,多个信息处理终端之间的无线数据通信被适当控制。从另一个信息处理设备无线接收用于输出图像信息的流的第一信息处理设备具备无线通信单元和控制单元。所述无线通信单元与所述另一个信息处理设备通信,以便交换关于第一信息处理设备的能力信息,和关于所述另一个信息处理设备的能力信息。根据关于所述另一个信息处理设备的能力信息,和所述第一信息处理设备被使用的方式,所述控制单元执行为所述另一个信息处理设备设定流的多接收分集的控制例程。

Description

信息处理设备和信息处理方法
技术领域
本技术涉及信息处理设备,更具体地,涉及利用无线通信,交换各种信息的信息处理设备和信息处理方法。
背景技术
现有技术中,已知利用无线通信,交换各种数据的无线通信技术。例如,提出了通过两个无线通信设备之间的无线通信,交换各种数据的信息交换设备(例如参见专利文献1)。
引文列表
专利文献
专利文献1:JP2008-278388A
发明内容
按照现有技术中的上述技术,即使当未利用有线线路建立连接时,也能够通过无线通信,在两个信息处理设备之间交换各种数据。例如,基于从传输侧信息处理设备传送的图像数据的图像可被显示在接收侧信息处理设备的显示单元上。
这里,例如,还假定存在多个传输侧信息处理设备,基于从这些信息处理设备传送的图像数据的多个图像被显示在接收侧信息处理设备的显示单元上。这种情况下,重要的是按照通信状况,进行适当的控制。
理想的是适当控制利用无线通信的多个信息处理设备之间的数据通信。
为了解决上述问题,产生了本技术。按照本技术的第一方面,提供一种通过利用无线通信,从另一个信息处理设备接收用于输出图像信息的流的信息处理设备,信息处理方法,和使计算机执行所述方法的程序,所述信息处理设备包括:无线通信单元,所述无线通信单元被配置成与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息,和关于所述另一个信息处理设备的能力信息的通信;和控制单元,所述控制单元被配置成按照根据关于所述另一个信息处理设备的能力信息,和所述信息处理设备的使用方式,设定与所述另一个信息处理设备相关的流的多接收分集的方式,进行控制。因而,能够获得根据关于所述另一个信息处理设备的能力信息,和所述信息处理设备的使用方式,设定与所述另一个信息处理设备相关的流的多接收分集的效果。
按照第一方面,无线通信单元可包括配置成利用多接收分集,进行接收的多个接收单元。当所述另一个信息处理设备通过利用多接收分集,传送流时,控制单元可按照进行同时向多个接收单元传送所述流的第一操作,和在切换多个接收单元的时候,顺序向每个接收单元传送所述流的第二操作任意之一的方式,进行控制。因而,能够获得当所述另一个信息处理设备利用多接收分集,传送流时,进行同时向多个接收单元传送所述流的第一操作,和在切换多个接收单元的时候,顺序向每个接收单元传送所述流的第二操作任意之一的效果。
按照第一方面,无线通信单元可包括配置成利用多接收分集,进行接收的多个接收单元。当所述另一个信息处理设备通过利用多接收分集,传送流时,控制单元可按照进行在与所述多个接收单元相关的多个链路每一个之中,设定用于识别通过利用无线通信,与所述信息处理设备进行通信的设备的识别信息的第一操作,和不管链路的数目,把所述识别信息设定为仅仅一项识别信息的第二操作任意之一的方式,进行控制。因而,能够获得当所述另一个信息处理设备利用多接收分集,传送流时,进行在多个链路每一个之中设定所述识别信息的第一操作,和不管链路的数目,仅仅设定一项识别信息的第二操作任意之一的效果。
按照第一方面,控制单元可按照在第一操作和第二操作之间,设定不同的内容保护的方式进行控制。因而,能够获得在第一操作和第二操作中,设定不同的内容保护的效果。
按照第一方面,能力信息可包括指示设备是否是移动设备的信息。因而,能够获得利用指示设备是否是移动设备的信息的效果。
按照第一方面,能力信息包括指示信息处理设备的使用方式是否被变更的信息。因而,能够获得利用指示信息处理设备的使用方式是否被变更的信息的效果。
按照第一方面,能力信息可包括指示是否包含多接收分集功能的信息。因而,能够获得利用指示是否包含多接收分集功能的信息的效果。
按照第一方面,控制单元可按照当设定低电力消耗模式时,进行所述流的传输停止或者间歇传输的方式,进行控制。因而,能够获得当设定低电力消耗模式时,进行所述流的传输停止或者间歇传输的效果。
按照第一方面,控制单元可按照从传输层指定待使用的物理层的方式,进行控制。因而,能够获得从传输层指定待使用的物理层的效果。
按照第一方面,控制单元可接收物理链路切换信息,并按照AVC/HEVC从I帧开始的方式,进行控制。因而,能够获得接收物理链路切换信息,并从I帧开始AVC/HEVC的效果。
按照第一方面,控制单元可按照根据关于所述另一个信息处理设备的管理信息,选择HDCP设定方法的方式,进行控制。因而,能够获得根据关于所述另一个信息处理设备的管理信息,选择HDCP设定方法的效果。
按照本技术的第二方面,提供一种通过利用多接收分集,从另一个信息处理设备接收用于输出图像信息的流的信息处理设备,信息处理方法,和使计算机执行所述方法的程序,所述信息处理设备包括:无线通信单元,所述无线通信单元被配置成与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息,和关于所述另一个信息处理设备的能力信息的通信;和控制单元,所述控制单元被配置成按照根据关于所述另一个信息处理设备的能力信息,和所述信息处理设备的使用方式,设定与所述另一个信息处理设备相关的流的内容保护的方式,进行控制。因而,能够获得根据关于所述另一个信息处理设备的能力信息,和所述信息处理设备的使用方式,设定与所述另一个信息处理设备相关的流的内容保护的效果。
按照第二方面,当对于用于通过利用多接收分集,传送所述流的多个频道中的每个频道使用的内容保护的版本不同时,控制单元可按照设定与各个版本之中的低版本相关的内容保护的方式,进行控制。因而,能够获得当对于用于通过利用多接收分集,传送所述流的多个频道中的每个频道使用的内容保护的版本不同时,设定与各个版本之中的低版本相关的内容保护的效果。
按照本技术的第三方面,提供一种通过利用多接收分集,向另一个信息处理设备传送用于输出图像信息的流的信息处理设备,信息处理方法,和使计算机执行所述方法的程序,所述信息处理设备包括:无线通信单元,所述无线通信单元被配置成通过利用多个频道,与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息,和关于所述另一个信息处理设备的能力信息的通信;和控制单元,所述控制单元被配置成根据基于关于所述信息处理设备的能力信息,和所述另一个信息处理设备的使用方式,从所述另一个信息处理设备进行的控制,进行与所述另一个信息处理设备相关的流的传输控制,并按照把关于所述多个频道之中,用于传送所述流的频道的信息通知比与IP分组生成相关的层更高的层的方式,进行控制。因而,能够获得把关于所述多个频道之中,用于传送所述流的频道的信息通知比与IP分组生成相关的层更高的层的效果。
按照本技术的第四方面,提供一种通过利用多接收分集,向另一个信息处理设备传送用于输出图像信息的流的信息处理设备,信息处理方法,和使计算机执行所述方法的程序,所述信息处理设备包括:无线通信单元,所述无线通信单元被配置成通过利用多个频道,与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息,和关于所述另一个信息处理设备的能力信息的通信;和控制单元,所述控制单元被配置成根据基于关于所述信息处理设备的能力信息,和所述另一个信息处理设备的使用方式,从所述另一个信息处理设备进行的控制,进行与所述另一个信息处理设备相关的流的传输控制,并按照在IP分组的IP报头的TOP字段,写入关于用于传送所述流的频道的设定的设定信息的方式,进行控制。因而,能够获得在IP分组的IP报头的TOP字段,写入关于用于传送所述流的频道的设定的设定信息的效果。
按照本技术的第五方面,提供一种通过利用无线通信,把用于输出图像信息的流传送给另一个信息处理设备的信息处理设备,信息处理方法,和使计算机执行所述方法的程序,所述信息处理设备包括:无线通信单元,所述无线通信单元被配置成与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息,和关于所述另一个信息处理设备的能力信息的通信;和控制单元,所述控制单元被配置成根据基于关于所述信息处理设备的能力信息,和所述另一个信息处理设备的使用方式,从所述另一个信息处理设备进行的控制,设定与所述另一个信息处理设备相关的流的多接收分集的方式,进行控制。因而,能够获得根据基于关于所述信息处理设备的能力信息,和所述另一个信息处理设备的使用方式,从所述另一个信息处理设备进行的控制,设定与所述另一个信息处理设备相关的流的多接收分集的效果。
按照第五方面,当在其中切换和使用多个物理层的环境中,待使用的IP层是公共的,并且物理层被切换时,控制单元不必重试再次认证和局部性检查。因而,能够获得当在其中切换和使用多个物理层的环境中,待使用的IP层是公共的,并且物理层被切换时,不重试再次认证和局部性检查的效果。
按照第五方面,当在其中切换和使用多个物理层的环境中,对于两种流分别进行HDCP时,控制单元可把传输侧设备密钥和接收侧设备密钥设定为一个密钥。因而,能够获得当在其中切换和使用多个物理层的环境中,对于两种流分别进行HDCP时,把传输侧设备密钥和接收侧设备密钥设定为一个密钥的效果。
按照本技术的第六方面,提供一种通过利用无线通信,从另一个信息处理设备接收用于输出图像信息的流的信息处理设备,信息处理方法,和使计算机执行所述方法的程序,所述信息处理设备包括:无线通信单元,所述无线通信单元被配置成与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息,和关于所述另一个信息处理设备的能力信息的通信;和控制单元,所述控制单元被配置成按照根据关于所述另一个信息处理设备的能力信息,和所述信息处理设备的使用方式,设定与所述另一个信息处理设备相关的流的多接收的方式,进行控制。因而,能够获得根据关于所述另一个信息处理设备的能力信息,和所述信息处理设备的使用方式,设定与所述另一个信息处理设备相关的流的多接收的效果。
按照本技术,能够获得在利用无线通信的多个信息处理设备之间,可适当控制数据通信的优点。这里说明的优点未必是限制性的,相反也可获得在本公开中记载的任何优点。
附图说明
图1是图解说明按照本技术的第一实施例的通信系统100的系统结构例子的方框图。
图2是图解说明按照本技术的第一实施例的信息处理设备200的功能结构例子的方框图。
图3是图解说明按照本技术的第一实施例的信息处理设备300的功能结构例子的方框图。
图4是示意图解说明按照本技术的第一实施例,保持在管理信息保持单元390中的内容例子的示图。
图5是图解说明按照本技术的第一实施例,显示在信息处理设备300的显示单元351上的图像的转变例子的示图。
图6是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图7是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图8是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图9是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图10是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图11是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图12是图解说明按照本技术的第一实施例,由信息处理设备200进行的数据传输处理的处理过程的例子的流程图。
图13是图解说明按照本技术的第一实施例,由信息处理设备300进行的数据传输速度控制处理的处理过程的例子的流程图。
图14是图解说明按照本技术的第一实施例,发送端设备和接收端设备之间的通信处理例子的序列图。
图15是图解说明按照本技术的第一实施例,发送端设备和接收端设备之间的通信处理例子的序列图。
图16是图解说明按照本技术的第一实施例,发送端设备和接收端设备之间的通信处理例子的序列图。
图17是图解说明按照本技术的第二实施例的通信系统700的系统结构例子的方框图。
图18是说明按照本技术的第二实施例,在通信系统700中使用的空间可分级性和SNR可分级性的例子的示图。
图19是示意图解说明按照本技术的第二实施例,利用在通信系统700中使用的SHVC的流传输量的示图。
图20是示意图解说明按照本技术的第二实施例,利用在通信系统700中使用的SNR可分级性,缩小数据传输速率的例子的示图。
图21是图解说明按照本技术的第二实施例,在包含在通信系统700中的各个设备之间的通信处理例子的序列图。
图22是图解说明按照本技术的第二实施例,由信息处理设备300进行的频道设定处理的处理过程的例子的流程图。
图23是图解说明按照本技术的第二实施例的信息处理设备710的功能结构例子的方框图。
图24是示意图解说明按照本技术的第二实施例,在信息处理设备710进行的传输处理中生成的分组的示图。
图25是图解说明按照本技术的第二实施例,由信息处理设备710进行的优先级竞争接入控制方法的例子的示图。
图26是示意图解说明按照本技术的第二实施例,当信息处理设备710进行传输处理时的媒体数据的流动的示图。
图27是示意图解说明按照本技术的第二实施例,将由信息处理设备710传送的无线分组的生成例子的示图。
图28是示意图解说明按照本技术的第二实施例,由信息处理设备710生成的无线分组的交换例子的示图。
图29是图解说明按照本技术的第二实施例,由信息处理设备710生成的PES的帧格式的例子的示图。
图30是示意图解说明按照本技术的第二实施例,由信息处理设备710生成的无线分组的交换例子的示图。
图31是示意图解说明按照本技术的第二实施例,由信息处理设备710生成的无线分组的交换例子的示图。
图32是图解说明按照本技术的第三实施例的通信系统1000的系统结构例子的方框图。
图33是示意图解说明按照本技术的第三实施例,信息处理设备1020的各层之间的数据的交换例子的示图。
图34是示意图解说明按照本技术的第三实施例,信息处理设备1020的各层之间的数据的交换例子的示图。
图35是示意图解说明按照本技术的第三实施例,信息处理设备1020的各层之间的数据的交换例子的示图。
图36是示意图解说明按照本技术的第三实施例,信息处理设备1020的各层之间的数据的交换例子的示图。
图37是图解说明按照本技术的第三实施例,由信息处理设备1020进行的数据传输处理的处理过程的例子的流程图。
图38是图解说明按照本技术的第三实施例,由信息处理设备1020进行的数据传输处理的处理过程的例子的流程图。
图39是图解说明按照本技术的第三实施例,由信息处理设备1020进行的数据传输处理的处理过程的例子的流程图。
图40是图解说明按照本技术的第三实施例,由信息处理设备1010进行的数据接收处理的处理过程的例子的流程图。
图41是图解说明按照本技术的第三实施例,由信息处理设备1020进行的HDCP处理的处理过程的例子的流程图。
图42是图解说明按照本技术的第三实施例,由信息处理设备1020进行的HDCP处理的处理过程的例子的流程图。
图43是图解说明按照本技术的第三实施例,在发送端设备和接收端设备之间进行的密钥交换处理的例子的序列图。
图44是图解说明按照本技术的第三实施例,在发送端设备和接收端设备之间进行的密钥交换处理的例子的序列图。
图45是图解说明包含在按照本技术的第三实施例的通信系统中的各个信息处理设备的功能结构例子的方框图。
图46是图解说明按照本技术的第三实施例的通信系统1200的系统结构例子的方框图。
图47是图解说明按照本技术的第三实施例的通信系统1200的系统结构例子的方框图。
图48是图解说明智能电话机的示意结构的例子的方框图。
图49是图解说明车载导航设备的示意结构的例子的方框图。
具体实施方式
下面说明实现本技术的模式(下面称为实施例)。将按照以下顺序进行说明。
1.第一实施例(根据用户信息和管理信息,进行与无线通信有关的控制的例子)
2.第二实施例(进行可分级传输速率控制的例子)
3.第三实施例(进行多接收分集的设定及变更,和内容保护的设定的例子)
<1.第一实施例>
[通信系统的结构例子]
图1是图解说明按照本技术的第一实施例的通信系统100的系统结构例子的方框图。
通信系统100包括信息处理设备200、300和400。通信系统100是其中信息处理设备300接收从信息处理设备200和400至少之一传送的数据(例如图像数据或音频数据)的通信系统。
信息处理设备200、300和400是具有无线通信功能的收发设备。例如,信息处理设备200、300和400是具有无线通信功能的显示设备(例如,个人计算机),或者便携式信息处理设备(例如智能电话机或平板终端)。信息处理设备200、300和400是例如遵从电气和电子工程师协会(IEEE)802.11、802.15或802.16,3GPP规范(宽带码分多址接入(W-CDMA),全球移动通信系统(GSM:注册商标),微波存取全球互通(WiMAX),WiMAX2,长期演进(LTE),LTE-A(Advanced)等的无线通信设备。信息处理设备200、300和400可利用无线通信功能,交换各种信息。
这里,说明在信息处理设备200和300之间,或者在信息处理设备400和300之间,进行利用无线局域网(LAN)的无线通信的情况的例子。
作为所述无线LAN,例如可以使用无线保真(Wi-Fi)Direct、隧道直接链路设置(TDLS)、ad-hoc网络或网状网络。作为在通信系统100中使用的近场无线视听(AV)传输通信,例如可以使用Wi-FiCertifiedMiracast。Wi-FiCertifiedMiracast是利用Wi-FiDirect或TDLS的技术,把用一个终端再现的音频或显示图像传送给另一个终端,并类似地用所述另一个终端输出所述音频或图像数据的镜像技术。
在Wi-FiCertifiedMiracast中,利用传输控制协议/网际协议(TCP/IP),实现用户输入反向通道(UIBC)。UIBC是把诸如鼠标或键盘之类输入设备的操作信息从一个终端传送给另一个终端的技术。代替Wi-FiCertifiedMiracast,可以应用另一种远程桌面软件(例如虚拟网络计算(VNC))。
这里,在Wi-FiCertifiedMiracast中,规定利用H.264压缩和解压缩图像(视频)。例如,在Wi-FiCertifiedMiracast中,可在传输侧调整H.264。本技术的实施例不限于H.264,而且也可对应于各种编解码器,比如H.265(例如,高效视频编码(HEVC)和高效视频编码的可分级视频编码扩展(SHVC)),和运动图像专家组(MPEG4),联合图像专家组(JPEG)2000,行基编解码器(line-basecodec)。在行基编解码器中,例如,一行或多行被打包和压缩,或者两行或更多行被分成2×2或更多的宏块,以便被压缩和解压缩。作为行基编解码器,例如,可以使用小波变换或离散余弦变换(DCT)。此外,可以不压缩地传送或接收图像(视频)。
在本技术的第一实施例中,将说明其中信息处理设备200把通过成像操作生成的图像数据和音频数据设定为传输对象的例子。在本技术的第一实施例中,将说明其中信息处理设备400把保存在存储单元(例如硬盘)中的内容(例如由图像数据和音频数据构成的内容)设定为传输对象的例子。可以使用安装有摄像头的电子设备(例如个人计算机、游戏机、智能电话机或平板终端),作为信息处理设备200。可以使用包括显示单元的另一个电子设备(例如成像设备、游戏机、智能电话机或平板终端),作为信息处理设备300。信息处理设备400还可具有网络共享(tethering)功能,信息处理设备400可经无线或有线网络,获得保存在因特网服务提供商(IPS)中的内容,并把所述内容设定为传输对象。
例如,通过信息处理设备200的成像操作生成的图像数据被传送给信息处理设备300,基于所述图像数据的图像11被显示在信息处理设备300的显示单元351上。此外,保存在信息处理设备400的存储单元(例如硬盘)中的内容被传送给信息处理设备300,基于所述内容的图像12被显示在信息处理设备300的显示单元351上。
这样,在本技术的第一实施例中,将说明其中信息处理设备200和400充当发送端侧的信息处理设备(发送端设备),信息处理设备300充当接收端侧的信息处理设备(接收端设备)的例子。
图1中,其中信息处理设备300能够利用无线通信进行直接通信的范围(当信息处理设备300被设定为基准时的信息传输范围(服务范围))被表示成信息传输范围101。
[信息处理设备(发送端设备)的结构例子]
图2是图解说明按照本技术的第一实施例中的信息处理设备200的功能结构例子的方框图。与无线通信相关的信息处理设备400的功能结构和信息处理设备200的结构实质相同。于是,在本技术的第一实施例中,只说明信息处理设备200,信息处理设备400的说明被省略。
信息处理设备200包括天线210、无线通信单元220、控制信号接收单元230、控制单元240、图像和音频信号生成单元250、图像和音频压缩单元260和流传输单元270。
在控制单元240的控制下,无线通信单元220利用无线通信,通过天线210,往来于另一个信息处理设备(例如,信息处理设备300)传送和接收各项信息(例如,图像数据和音频数据)。例如,当进行图像数据传输处理时,图像和音频信号生成单元250生成的图像数据由图像和音频压缩单元260压缩,压缩的图像数据(图像流)经无线通信单元220从天线210传送。
无线通信单元220被假定能够利用多个频道,往来于另一个信息处理设备(例如,信息处理设备300)传送和接收各项信息。在本技术的第一实施例中,将说明其中无线通信单元220具有传送和接收3种频道,2.4GHz、5GHz和60GHz的功能的例子。这样,当发送端设备具有传送和接收多个频道的功能时,接收端设备(例如,信息处理设备300)能够控制将由各个发送端设备使用的频道。
控制信号接收单元230获得无线通信单元220接收的各项信息之中,从另一个信息处理设备(例如,信息处理设备300)传送的控制信号(例如,与信息处理设备300交换的信息),随后把获得的控制信号输出给控制单元240。
控制单元240对将从信息处理设备200传送的各项信息进行控制。例如,控制单元240根据控制信号接收单元230接收的控制信号,控制对图像和音频信号生成单元250及图像和音频压缩单元260进行控制。例如,控制单元240进行变更声道的数目,或者作为传输对象的图像数据的分辨率的控制,或者进行变更作为传输对象的图像数据的图像区域的控制。即,控制单元240根据控制信号接收单元230接收的控制信号,进行作为传输对象的流的传输控制。例如,传输控制是数据传输速度控制,可分级传输速率控制,多接收分集设定控制,和内容保护设定控制。可分级传输速率控制将在本技术的第二实施例中说明。多接收分集设定控制和内容保护设定控制将在本技术的第三实施例中说明。
控制单元240可具有测量在利用无线通信,往来于接收端设备传送和接收数据时的无线电波传播状况(链路无线电波传播状况)的功能,并可把测量结果(无线电波传播测量信息)传送给接收端设备。
这里,例如,无线电波传播测量信息是用于判定与接收端设备的线路质量是否是能够传送和接收图像数据和音频数据的质量的信息。例如,当进行流传输控制(例如,数据传输速度控制,可分级传输速率控制,多接收分集设定控制,和内容保护设定控制)时,使用所述无线电波传播测量信息。无线电波传播测量信息将参考图4详细说明。代替无线电波传播测量信息,控制单元240可计数相同分组的重传次数,并根据计数的重传次数,进行流传输控制。
这里,数据传输速度主要意味通信线路占用率,被认为包括通信速度或通信容量的含意。例如,分辨率被定义为配置成包括诸如图像数据的图像帧(垂直像素和水平像素的数目),或者图像数据的比特率(压缩率)之类要素的画质指标。作为所述画质指标,可以使用流的吞吐量。音频的通道数被认为包括诸如单声道方法(1.0ch)或立体声方法(2.0ch)之类的音频记录和再现方法的含意。音频的通道数被定义为配置成包括诸如音频数据的比特率(压缩率)或者通道数之类要素的音质指标。作为所述音质指标,可以使用流的吞吐量。
控制单元240进行改善数据速率控制中不稳定的状态的控制。例如,控制单元240通过与接收端设备(例如,信息处理设备300)交换信息,了解所述接收端设备的系统性能信息。这里,例如,系统性能信息是关于接收端设备的系统的性能信息。例如,系统性能信息是可用频道、分辨率、传输控制协议(TCP)和用户数据报协议(UDP)。例如,系统性能信息是指示加密方法的对应,标准清晰度(SD)/高清晰度(HD)的对应,和低电力消耗模式的对应中的每一个的信息。例如,控制单元240可按照接收端设备是否对应于低电力消耗模式,选择进一步提高整个通信系统100的系统稳定性的流传输控制(例如,数据传输速度控制和可分级传输速率控制)方法。
例如,假定控制单元240在与信息处理设备300的信息交换期间,插入关于信息处理设备200是否是移动设备的信息。例如,关于信息处理设备200的能力信息可包括关于信息处理设备200是否是移动设备的信息。当了解信息处理设备200是移动设备时,信息处理设备300可根据与其它连接的信息处理设备的关系,判断不必使信息处理设备200工作。这样,当判断不必使信息处理设备200工作时,信息处理设备200从信息处理设备300接收传输停止命令。当控制单元240领会传输停止命令时,控制单元240可使图像和音频信号生成单元250、图像和音频压缩单元260和流传输单元270每一个的功能断电给定时间。控制单元240可使无线通信单元220转变成间歇接收(间歇接收是无线通信单元220定期启动,以致无线通信单元200能够从信息处理设备300接收命令,而在其它情况下,该设备被断电的模式)。
在控制单元240的控制下,图像和音频信号生成单元250生成作为输出对象的数据(图像数据和音频数据),并把生成的数据输出给图像和音频压缩单元260。例如,图像和音频信号生成单元250包括成像单元(未图示)和音频获取单元(未图示)。成像单元(例如,镜头、图像传感器或信号处理电路)对被摄物体成像,从而生成图像(图像数据)。音频获取单元(例如,麦克风)获得生成图像数据时的环境音频。按照这种方式生成的数据是待传送给另一个信息处理设备(例如,信息处理设备300)的传输对象。
在控制单元240的控制下,图像和音频压缩单元260压缩(编码)图像和音频信号生成单元250生成的数据(图像数据和音频数据)。随后,图像和音频压缩单元260把压缩数据(图像数据和音频数据)输出给流传输单元270。这种情况下,控制单元240可根据发送端设备或接收端设备是否是移动设备,判断图像和音频压缩单元260是否进行数据的压缩或不压缩。即,控制单元240可根据发送端设备或接收端设备是否是移动设备,判断是否不转码地传送压缩数据。例如,当发送端设备不是移动设备时,图像和音频压缩单元260可不压缩地输出由图像和音频信号生成单元250生成的数据。图像和音频压缩单元260可通过利用软件进行编码来实现,或者可通过利用硬件进行编码来实现。如上所述,图像和音频压缩单元260被认为起编解码器作用,不过,认为也可处理未压缩的图像或音频。此外,图像和音频压缩单元260也可起可分级编解码器的作用。这里,可分级编解码器例如意味能够按照接收侧信息处理设备(接收端设备)的分辨率,网络环境等,被自由应用的编解码器。可分级编解码器将按照本技术的第二实施例详细说明。
在控制单元240的控制下,流传输单元270进行通过无线通信单元220,从天线210以流的形式,传送图像和音频压缩单元260压缩的数据(图像数据和音频数据)的传输处理。
除上述单元之外,信息处理设备200还可包括显示单元、音频输出单元和操作接收单元,不过图2中未图示这些单元。上面说明了其中信息处理设备200生成作为传输对象的图像数据和音频数据的例子。不过,信息处理设备200可从外部设备获得作为传输对象的图像数据和音频数据。例如,信息处理设备200可从具备麦克风的web摄像头获得作为传输对象的图像数据和音频数据。信息处理设备200可把保存在存储设备(例如硬盘)中的内容(例如由图像数据和音频数据形成的内容)设定为传输对象,而不管是在信息处理设备200的内部或外部。这种情况下,保存在存储设备中的内容也被假定是压缩内容。这种情况下,当压缩内容按照在通信系统100中采用的标准中定义的编码方式被压缩时,可以不解密(解码)地传送所述压缩内容。
信息处理设备200的显示单元(未图示)例如是显示由图像和音频信号生成单元250生成的图像的显示单元。作为所述显示单元,例如可以使用诸如电致发光(EL)或晶体发光二极管(LED)显示器或液晶显示器(LCD)之类的显示面板。
信息处理设备200的音频输出单元(未图示)例如是输出由图像和音频信号生成单元250生成的音频的音频输出单元(例如,扬声器)。图像可从传输设备和接收设备输出,不过,声音最好只从这两个设备之一输出。
信息处理设备200的操作接收单元(未图示)是接收用户进行的操作输入的操作接收单元,例如是键盘、鼠标、游戏手柄、触摸面板、摄像头或麦克风。通过利用当用户用他或她的手指触摸或接近显示面时,能够进行操作输入的触摸面板,可以一体地构成操作接收单元和显示单元。
[信息处理设备(接收侧)的结构例子]
图3是图解说明按照本技术的第一实施例的信息处理设备300的功能结构例子的方框图。
信息处理设备300包括天线310、无线通信单元320、流接收单元330、图像和音频解压缩单元340、图像和音频输出单元350、用户信息获取单元360、控制单元370、控制信号传输单元380和管理信息保持单元390。
在控制单元370的控制下,无线通信单元320利用无线通信,通过天线310,往来于另一个信息处理设备(例如,信息处理设备200)传送和接收各项信息(例如图像数据和音频数据)。例如,当进行图像数据接收处理时,天线310接收的图像数据经无线通信单元320和流接收单元330,被图像和音频解压缩单元340解压缩(解码)。随后,解压缩的图像数据被提供给图像和音频输出单元350,从图像和音频输出单元350输出与解压缩图像数据相应的图像。即,与解压缩图像数据相应的图像被显示在显示单元351上。
无线通信单元320被认为能够利用多个频道,往来于另一个信息处理设备(例如,信息处理设备200)传送和接收各项信息。在本技术的第一实施例中,将说明其中无线通信单元320具有传送和接收3种频道,2.4GHz、5GHz和60GHz的功能的例子。即,无线通信单元320可进行利用第一频带的通信,和利用数据传输速度比第一频带高的第二频带的通信。控制单元370控制在与各个发送端设备的无线通信中,多个频道之中的将被使用的频道。
信息处理设备200和300之间的链路,以及信息处理设备400和300之间的链路可用相同频道建立,或者可用不同频道建立。
在本技术的第一实施例中,将说明其中无线通信单元320具有传送和接收3种频道,2.4GHz、5GHz和60GHz的功能的例子,不过本技术的实施例不限于此。例如,无线通信单元320可具有传送和接收其它频道,2个频道,4个或更多频道的功能。
在控制单元370的控制下,流接收单元330在利用无线通信单元320接收的各项信息之中,接收流(例如,图像流和音频流)和与各个发送端设备的交换信息。随后,流接收单元330把接收的命令信息输出给控制单元370,并把接收的流输出给图像和音频解压缩单元340及控制单元370。
这里,与各个发送端设备的交换信息是从发送端设备(例如,信息处理设备200)传送的信息,例如包括获得信息处理设备300的系统性能信息的请求。例如,系统性能信息是指示可用频道、分辨率、TCP和UDP,或者加密方法的对应、SD/HD的对应、及低电力消耗模式的对应中的每一个的信息。
流接收单元330具有测量在利用无线通信,往来于接收端设备传送和接收数据时的无线电波传播状况(链路无线电波传播状况)的功能。流接收单元330把测量结果(无线电波传播测量信息)输出给控制单元370。无线电波传播测量信息将参考图4详细说明。
在控制单元370的控制下,图像和音频解压缩单元340解压缩(解码)从另一个信息处理设备(例如,信息处理设备200)传送的流(图像数据和音频数据)。随后,图像和音频解压缩单元340把解压缩的数据(图像数据和音频数据)输出给图像和音频输出单元350。图像和音频解压缩单元340可通过利用软件进行解码来实现,或者可通过利用硬件进行解码来实现。如上所述,图像和音频解压缩单元340被认为起编解码器作用,不过假定能够处理未压缩的图像或音频。此外,图像和音频解压缩单元340还可起可分级编解码器的作用。
图像和音频输出单元350包括显示单元351和音频输出单元352。
显示单元351是显示基于由图像和音频解压缩单元340解压缩的图像数据的各个图像(例如,图1中图解所示的图像11和12)的显示单元。作为显示单元351,例如,可以使用诸如有机EL面板、晶体LED显示器、LCD面板之类的显示面板。作为显示单元351,可以使用当用户用他或她的手指触摸或接近显示面时,能够进行操作输入的触摸面板。
音频输出单元352是输出基于由图像和音频解压缩单元340解压缩的音频数据的各种音频(与显示在显示单元351上的图像相关的音频等)的音频输出单元(例如,扬声器)。这里,作为音频输出方法,例如可以使用从扬声器只再现分配给主图像的发送端设备的音频,而不再现分配给副图像的发送端设备的音频的方法。作为另一种音频输出方法,例如可以使用把分配给主图像的发送端设备的音频的音量设定为主要部分,并降低分配给副图像的发送端设备的音频的音量,并再现音频的方法。可以使用其它的音频输出方法。
用户信息获取单元360获得关于用户的信息(用户信息),并把获得的用户信息输出给控制单元370。例如,用户信息获取单元360可通过接收来自操作接收单元(键盘、鼠标、遥控器、游戏手柄或触摸面板)的输入,获得用户信息,通过所述操作接收单元,用户能够直接设定显示方法。例如,操作接收单元是指定显示在显示单元351上的图像中的任意区域的操作部件。例如,用户信息获取单元360可通过接收来自能够了解用户的意图的设备,比如摄像头、麦克风、或者任意各种传感器(例如陀螺传感器和检测人体的传感器)的输入,获得用户信息。
例如,当从图像和音频输出单元350输出基于利用无线通信,从另一个信息处理设备(例如,信息处理设备200)接收的流的信息时,用户信息获取单元360获得通过用户动作生成的用户信息。所述用户信息例如是通过与显示在显示单元351上的图像相关的用户动作生成的用户信息。例如,用户信息是根据与显示在显示单元351上的图像相关的用户操作生成的信息。
控制单元370使管理信息保持单元390保持流接收单元330获得的各项信息,并根据管理信息保持单元390保持的管理信息,管理各个发送端设备。控制单元370进行流传输控制(例如,数据传输速度控制,可分级传输速率控制,和多接收分集设定控制),以致对于从整个系统中的多个发送端设备传送的流,改善稳定性。
例如,控制单元370根据用户信息获取单元360获得的用户信息,和保持在管理信息保持单元390中的管理信息,进行流传输控制(例如,数据传输速度控制,可分级传输速率控制,多接收分集设定控制,和内容保护设定控制)。具体地,控制单元370根据保持在管理信息保持单元390中的管理信息,对于各个发送端设备生成用于进行流传输控制(例如,数据传输速度控制,可分级传输速率控制,多接收分集设定控制,和内容保护设定控制)的控制信号,并把生成的控制信号输出给控制信号传输单元380。例如,控制单元370根据用户信息和管理信息,变更显示在显示单元351上的图像的分辨率,并生成向各个发送端设备请求与所述分辨率等同的传输速率的控制信号。例如,控制单元370根据用户信息和管理信息,生成用于变更显示单元351上的图像的显示区域的控制信号。例如,控制单元370根据用户信息和管理信息,生成用于变更显示单元351上的图像的大小的控制信号。
控制单元370根据用户信息和管理信息,进行设定要使用的频道和分辨率的控制。例如,控制单元370在无线通信单元320的多个频道之中,设定用于各个发送端设备的频道。当各个频道的电力消耗模式不同时,控制单元370了解每种模式,并考虑到移动设备的电力消耗地设定频道。即,控制单元370可分别设定与第一频带相关的第一电力消耗模式,和与数据传输速度高于第一频带的第二频带相关的第二电力消耗模式。
控制信号传输单元380进行通过无线通信单元320和天线310,把从控制单元370输出的控制信号传送给另一个无线通信设备的传输处理。
管理信息保持单元390是保持用于管理利用无线通信,连接到信息处理设备300的各个发送端设备的信息(管理信息)的表格。保持在管理信息保持单元390中的内容将参考图4详细说明。
[保持在管理信息保持单元中的内容例子]
图4是示意图解说明按照本技术的第一实施例的保持在管理信息保持单元390中的内容例子的示图。
管理信息保持单元390是保持用于管理利用无线通信,连接到信息处理设备300的各个发送端设备的信息(管理信息)的表格。例如,在管理信息保持单元390中,彼此关联地保持终端识别信息391、频道392、无线电波传播测量信息393、设备信息394、频带使用水平395、输出形式396、待机或唤醒397,和多接收分集对应398。
在终端识别信息391中,保存用于识别利用无线通信连接到信息处理设备300的发送端设备的识别信息。
在频道392中,保存利用无线通信连接到信息处理设备300的发送端设备实际使用的频道。
在无线电波传播测量信息393中,保存与利用无线通信,连接到信息处理设备300的发送端设备相关的无线电波传播测量信息。所述无线电波传播测量信息是由流接收单元330对于利用无线通信,连接到信息处理设备300的每个发送端设备测量的。
作为无线电波传播测量信息393,例如,保存分组差错率(PER)、误码率(BER)、分组重传次数和吞吐量。作为无线电波传播测量信息393,例如,保存丢帧、信号-干扰比(SIR)和接收信号强度指示(RSSI)。这里,代替SIR,可以使用信号-干扰加噪声比(SINR)。图4中图解所示的无线电波传播测量信息393是例子。可以保存所述各项信息中的至少一项信息,或者流接收单元330可以测量另一项无线电波传播测量信息,以便保存。可以获得并保存由发送端设备测量的无线电波传播测量信息。可以确定接收侧接收的分组延迟,关于所述分组延迟的信息可用作无线电波传播测量信息。所述分组延迟充当与无线电波传播相关的一个指标,因为当发生错误时,在通过层2中的重传处理向接收侧的传输中发生延迟。例如,分组延迟充当指示其中各个设备共用无线频带的无线系统中,何处链路特性恶化的指标。
在设备信息394中,保存利用无线通信,连接到信息处理设备300的发送端设备的种类(发送端设备的属性)。例如,作为发送端设备的种类,保存移动设备或固定设备。作为发送端设备的种类,可以保存其电源被插入的设备,或者另一种设备。作为发送端设备的种类,可以保存电池驱动设备,或者另一种设备。
在频带使用水平395中,保存利用无线通信,连接到信息处理设备300的发送端设备的频带使用水平。例如,作为频带使用水平,可以使用分辨率或吞吐量。例如,在频带使用水平中,可以保存使用期间的吞吐量,可以准备预先决定的表格,可以保存并管理指示表格的范围的对应的编号。
在输出形式396中,保存基于从利用无线通信,连接到信息处理设备300的发送端设备传送的流的数据输出形式。例如,保存以从发送端设备传送的流为基础,显示在显示单元351上的图像数据的显示形式(主图像或副图像)。例如,保存以从发送端设备传送的流为基础,从音频输出单元352输出的音频数据的输出形式(主音频和副音频)。按照显示形式,可实现副图像不被显示的格式。
在待机或唤醒397中,保存利用无线通信,连接到信息处理设备300的发送端设备的模式(待机模式或唤醒模式)。待机模式和唤醒模式将参考图6-8详细说明。
在多接收分集对应398中,保存指示利用无线通信,连接到信息处理设备300的发送端设备是否对应于多接收分集的信息。将按照本技术的第三实施例,详细说明多接收分集。
这样,保持在管理信息保持单元390中的管理信息是联系用于识别另一个信息处理设备的识别信息(终端识别信息391)和关于所述另一个信息处理设备的能力信息,以便管理的信息。保持在管理信息保持单元390中的管理信息至少包括关于与和另一个信息处理设备的通信有关的无线电波传播测量的信息(无线电波传播测量信息393),和关于电力消耗的信息(待机或唤醒397),作为关于另一个信息处理设备的能力信息。保持在管理信息保持单元390中的管理信息包括关于显示图像信息的输出形式的信息(输出形式396),作为关于另一个信息处理设备的能力信息。关于输出形式的信息例如是指示图像信息被显示成主信息或者副信息的信息。
[图像的转变例子]
图5是图解说明按照本技术的第一实施例,显示在信息处理设备300的显示单元351上的图像的转变例子的示图。
图5a图解说明其中通过把图像11设定为主图像,把图像12设定为副图像,在信息处理设备300的显示单元351上,显示图像11和图像12的显示形式的例子。
图5b图解说明其中通过把图像11设定为副图像,把图像12设定为主图像,在信息处理设备300的显示单元351上,显示图像11和图像12的显示形式的例子。
例如,假定信息处理设备200和400都向信息处理设备300传送具有标准分辨率的流(图像数据和音频数据)的情况。这种情况下,如图1中图解所示,可以图像11和图像12的大小相同地在信息处理设备300的显示单元351上,显示基于来自信息处理设备200的图像数据的图像11,和基于来自信息处理设备400的图像数据的图像12。在本例中,给定分辨率和显示区域被定义成相同,不过可向显示单元351增加缩放器功能,以致图像11和12被重新缩放后显示在显示单元351上。不过,在本技术的实施例中,为了易于说明,在说明中假定不使用这种功能。
在图像11和12的显示形式中,例如,可以保持在先前通信时设定的显示形式,图像11和12可按照所述显示形式,被显示在信息处理设备300的显示单元351上。
可根据与信息处理设备300的连接顺序,决定图像11和12的显示形式。例如,假定其中信息处理设备200首先连接到信息处理设备300,在该连接之后,信息处理设备400连接到信息处理设备300的情况。这种情况下,通过把图像11设定为主图像,把图像12设定为副图像,在信息处理设备300的显示单元351上显示图像11和12。即,可根据与信息处理设备300的连接顺序,按照主图像和副图像的顺序显示图像。
如图5a中图解所示,当通过把图像11设定为主图像,把图像12设定为副图像,在显示单元351上显示图像11和12时,假定用户信息获取单元360获得把图像12设定为主图像的用户信息。例如,当观看者利用诸如遥控器或手势之类的指示器,进行把图像12设定为主图像的操作时,用户信息获取单元360获得用于把图像12设定为主图像的用户信息。这种情况下,如在图5b中图解所示,通过把图像12设定为主图像,把图像11设定为副图像,在显示单元351上显示图像11和12。此外,根据用户信息获取单元360获得的用户信息(例如,手动操作或视线),决定图像11和12在显示单元351的显示面上的显示位置。
[通信例子]
图6-8是图解说明按照本技术的第一实施例的包含在通信系统100中的设备之间的通信处理例子的序列图。图6-8图解说明信息处理设备200和300之间进行的通信处理的例子。
在图6-8中,包含在信息处理设备200中的各个单元之中的图像和音频信号生成单元250、图像和音频压缩单元260及流传输单元270被例示成数据传输系统201。天线210、无线通信单元220、控制信号接收单元230和控制单元240被例示成线路控制系统202。
在图6-8中,信息处理设备300的结构中的天线310、无线通信单元320、流接收单元330、控制单元370和控制信号传输单元380被例示成线路控制系统301。图像和音频解压缩单元340、图像和音频输出单元350及用户信息获取单元360被例示成输入和输出系统302。
在图6-8中,首先图解说明其中基于来自信息处理设备200的图像数据的图像作为副图像,被显示在信息处理设备300的显示单元351上,并在信息处理设备200中设定低电力消耗模式的例子。随后,图解说明其中基于来自信息处理设备200的图像数据的图像作为主图像,被显示在显示单元351上,并在信息处理设备200中设定通常电力消耗模式的例子。即,在图6-8中,图解说明信息处理设备200和300的连接建立例子,和信息处理设备200中的电力消耗模式的转变例子。
首先,当信息处理设备300被通电时,先前的输出形式(当信息处理设备300被断电时的输出形式)被设定为信息处理设备300的输出形式(图像显示形式和音频输出形式)(501)。信息处理设备300的控制单元370使管理信息保持单元390(图4中所示)保持利用无线通信,连接到信息处理设备300的各个发送端设备的管理信息。如图5中所示,根据先前的输出形式,信息处理设备300的控制单元370使显示单元351显示与分别传送自信息处理设备200和400的两个流对应的图像11和12。
随后,假定其中用户进行设定输出形式的操作(变更操作)的情况(502)。这种情况下,用户信息获取单元360获得与设定操作相关的控制信号,作为用户信息,所述用户信息被输出给控制单元370。随后,控制单元370根据所述用户信息,变更保持在管理信息保持单元390(图4中所示)中的内容(503和504)。例如,如在图5b中所示,假定其中进行把基于来自信息处理设备200的图像数据的图像11设定为副图像的设定操作(变更操作)的情况。这种情况下,控制单元370把管理信息保持单元390中的信息处理设备200的输出形式396(图4中所示)变更成“副”(503和504)。
信息处理设备200定期或不定期地(还包括只在开始时)向信息处理设备300传送模式表格请求(分辨率、音质、低电力消耗模式等的查询请求)(505和506)。所述模式表格请求是传送在信息处理设备300中管理的各项信息(所述各项信息是借助关于信息处理设备300的管理信息,用于与信息处理设备200通信的信息(例如,可由信息处理设备200显示的分辨率信息等))的请求。
当信息处理设备300收到模式表格请求时(506),信息处理设备300按照所述模式表格请求,传送命令信息(507、508)。所述命令信息例如是供信息处理设备300用于把设定命令连同无线电波传播环境和显示形式一起,发给信息处理设备200的关于信息处理设备200的信息。例如,所述命令信息是包括分辨率和音质的输出形式信息(例如,主图像和副图像),是否对应于低电力消耗模式,制作者姓名,和多接收分集功能的有无的信息。例如,所述命令信息是包括分辨率和音质,图像和音频编解码器的种类,3D功能的有无,内容保护的有无,显示设备的显示大小,拓扑信息,可用协议,协议的设定信息(端口信息等),连接接口信息(连接器种类等),水平同步和垂直同步位置,发送端设备的性能优先级请求信息,是否对应于低电力消耗模式的模式控制表格响应,无线传输的最大传输吞吐量或可接收的最大吞吐量,中央处理器(CPU)功率,电池剩余电量,和电源信息的信息。每项信息包含在能力信息的一部分中。这里,关于信息处理设备200的分辨率和音质的输出形式信息例如是指示来自信息处理设备200的数据的输出形式是“主”形式还是“副”形式的信息。信息处理设备300从信息处理设备300的视点,传送以参数的形式,包含关于分辨率和音质或低电力消耗模式的设定的要求的命令信息。除了关于信息处理设备200的各项信息之外,信息处理设备300还可以命令信息的形式,传送关于所有发送端设备的各项信息。这种情况下,信息处理设备200只选择和使用专用于自身信息处理设备的信息。当设备遵从Wi-FiCertifiedMiracast时,该设备对应于定义为RTSP消息的wfd-audio-codecs、wfd-video-formats、wfd-content-protection、wfd-displayedid、wfd-coupledsink、wfd-client-rtpports、wfd-I2C、wfd-uibccapability、wfd-connectortype、wfd-standby-resume-capability等,不过在这些命令中,以为待传送的消息内容不受限制。
当信息处理设备200收到命令信息时(508)时,信息处理设备200的控制单元240根据命令信息,指定来自信息处理设备200的数据的输出形式是主形式还是副形式。根据命令信息,信息处理设备200的控制单元240判定信息处理设备300是否具有与电力消耗工作模式对应的功能。随后,信息处理设备200的控制单元240向信息处理设备300传送指示指定的输出形式被设定的模式设定信息(509和510)。这里,假定副形式被指定为来自信息处理设备200的数据的输出形式。假定信息处理设备300具有与低电力消耗模式对应的功能。因而,信息处理设备200的控制单元240向信息处理设备300传送模式设定信息,用于向信息处理设备300通知指定的输出形式(副形式)被设定,并且低电力消耗模式被设定(509和510)。
在本例中,说明了其中根据命令信息,图像被指定为主图像或副图像,然后设定低电力消耗模式的例子,不过,可以不使用主图像或副图像的判断作为基准地设定低电力消耗模式。例如,通过在发送端设备和接收端设备之间,交换指示模式可转变到低电力消耗模式的许可标记,可以设定低电力消耗模式。
随后,信息处理设备200的控制单元240把副模式设定为传输模式(511)。因而,在数据传输系统201中,音质被设定,以输出显示副图像的分辨率和副音频(512)。在线路控制系统202中,设定低电力消耗模式(513)。
这里,当按照这种方式设定低电力消耗模式时,接收端设备和发送端设备都被认为具有该功能。例如,移动设备(例如蜂窝电话机、智能电话机或平板终端)在许多情况下是由电池驱动工作的。于是,当来自自身信息处理设备的数据的输出形式不是主形式(当输出形式为副形式时),最好尽可能降低自身信息处理设备的电池消耗。因而,在使接收端设备中的输出形式被设定为副形式的发送端设备中,最好设定低电力消耗模式。此外,在设定处理(512)中,可以只有分配给主图像的发送端设备的音频被设定从扬声器再现,而分配给副图像的发送端设备的音频可被设定成不被再现。分配给主图像的发送端设备的音频的音量可被设定成主要部分,而分配给副图像的发送端设备的音频的音量被设定成降低后再现。
这样,当输出形式被设定为副图像(副显示)时,信息处理设备300的控制单元370进行设定信息处理设备200中的低电力消耗模式的控制。即,信息处理设备300的控制单元370根据其中基于流,输出图像信息的显示单元351的输出形式,进行在信息处理设备200中,设定电力消耗模式的控制。
当按照这种方式,设定低电力消耗模式时(513),信息处理设备200的控制单元240开始间歇传输(514-522)。
具体地,信息处理设备200仅仅停止传输处理给定时间,使各个单元睡眠(514)。随后,当所述给定时间过去时(514),信息处理设备200唤醒信息处理设备200的各个单元,以便进行传输处理,然后进行相对于信息处理设备300的传输处理(515-520)。
例如,信息处理设备200的控制单元240向信息处理设备300传送查询消息,以确认在信息处理设备300中是否产生任何变动(例如输出形式的变动)(515和516)。
当收到查询消息时(516),信息处理设备300的控制单元370向信息处理设备200传送响应消息,以通知是否产生任何变动(例如输出形式的变动)(517和518)。这里,假定在信息处理设备300中未产生变动(例如输出形式的变动)。于是,信息处理设备300的控制单元370向信息处理设备200传送用于通知未产生变动(例如输出形式的变动)的响应消息(517和518)。
当按照这种方式收到指示未产生变更(例如输出形式的变更)的响应消息时(518),不需要变更信息处理设备200中的设定。于是,信息处理设备200的控制单元240向信息处理设备300传送用于输出副图像和副音频的流(519和520)。当信息处理设备300按照这种方式收到所述流时(520),信息处理设备300输出以接收的流为基础的图像和音频(521)。例如,如在图5b中图解所示,基于来自信息处理设备200的流的图像11作为副图像被显示在显示单元351上。
当传输处理结束时(519),信息处理设备200仅仅停止传输处理给定时间,使各个单元睡眠(522)。继续间歇传输,直到从信息处理设备300发出变更请求为止。
这里,在间歇传输中,存在其中不从信息处理设备200传送流的时间段。于是,信息处理设备300最好进行插值,并显示与最后从信息处理设备200接收的流对应的图像的显示处理。不过,假定信息处理设备300不具有插值处理功能。这种情况下,在睡眠期间,来自信息处理设备200的图像可不被显示在显示单元351上。于是,当信息处理设备300不具有插值处理功能时,可以继续传送来自信息处理设备200的图像数据。例如,在作为来自信息处理设备200的传输对象的流中,传输停止时的最后图像数据被保存在传输缓冲器中。在睡眠期间,信息处理设备200的图像处理被停止,不过,在无线链路中继续进行传输处理,从而继续传送保存在传输缓冲器中的图像数据。
在睡眠期间,只有与从信息处理设备400传送的流对应的图像可被显示在显示单元351上。例如,与从信息处理设备400传送的流对应的图像可被显示在显示单元351的整个表面上。
下面,说明其中用户进行设定输出形式的操作(变更操作)的情况的例子。
当用户进行设定输出形式的操作(变更操作)时(531),如上所述,控制单元370根据与设定操作相关的用户信息,变更保持在管理信息保持单元390(图4中所示)中的内容(532和533)。例如,如在图5a中所示,假定其中用户进行把基于来自信息处理设备200的图像数据的图像11设定为主图像的设定操作(变更操作)的情况。这种情况下,控制单元370把管理信息保持单元390中的信息处理设备200的输出形式396(示于图4中)变更成“主”(532和533)。
这里,如上所述,当在信息处理设备200中设定低电力消耗模式时,假定信息处理设备200进入睡眠状态。这样,当信息处理设备200睡眠时,不能向信息处理设备200通知用户进行了设定输出形式的操作(变更操作)。
因而,当用户进行设定输出形式的操作(变更操作)531,从而保持在管理信息保持单元390(图4中所示)中的内容被变更时(532和533),信息处理设备300的控制单元370设定变更触发(534)。所述变更触发是当从信息处理设备200收到查询消息时,用于向信息处理设备200通知用户进行了设定输出形式的操作(变更操作)的触发。通过该变更触发,信息处理设备200取消待机模式的状态,并通知信息处理设备200,用户进行了设定输出形式的操作(变更操作)。
这里,假定其中信息处理设备200的各个单元唤醒,从而开始向信息处理设备300的传输处理的情况。这种情况下,信息处理设备300的控制单元370向信息处理设备200传送待机解除消息(535和536)。
当收到待机解除消息时(536),信息处理设备200的控制单元240向信息处理设备300传送响应消息(537和538)。
这样,按照来自接收端设备的待机模式解除请求(535-538),需要询问信息处理设备200中的设定。于是,信息处理设备200的控制单元240向信息处理设备300传送模式表格请求(539和540)。如上所述,所述模式表格请求是传送在信息处理设备300中管理的各项信息(关于信息处理设备200的管理信息)的请求。在上述处理(535-538)中,可以交换变更(比如输出形式的变更)的消息(例如,对于处理(515-518)中的查询消息的响应消息)。
当信息处理设备300收到模式表格请求时(540),信息处理设备300传送与模式表格请求相应的命令信息(541和542)。这里,当命令信息已从信息处理设备300被传送给信息处理设备200时,信息处理设备200已获得包含在命令信息中的信息。于是,信息处理设备300可以只传送差分信息,作为与模式表格请求相应的命令信息(541和542)。所述差分信息是与变更相关的信息,例如,是关于信息处理设备200的分辨率和音质的输出形式信息。
在收到命令信息时(542),信息处理设备200的控制单元240根据命令信息,指定来自信息处理设备200的数据的输出形式是主形式还是副形式。随后,信息处理设备200的控制单元240把指示指定的输出形式的设定的模式设定信息传送给信息处理设备300(543和544)。这里,假定主形式被指定为来自信息处理设备200的数据的输出形式。因而,信息处理设备200的控制单元240向信息处理设备300传送用于向信息处理设备300通知指定的输出形式(主形式)被设定,并且通常电力消耗模式被设定的模式设定信息(543和544)。当设备遵从Wi-FiCertifiedMiracast时,可借助能力再协商,进行各个处理(539-544)。在能力再协商的情况下,不需要关于在处理(534)中,输出形式未变更的设定值再次进行协商。例如,可以例示的是wfd-displayedid、wfd-client-rtpports、wfd-I2C和wfd-connectortype。
随后,信息处理设备200的控制单元240把主模式设定为传输模式(545)。因而,在数据传输系统201中,设定用于显示主图像的分辨率,和用于输出主音频的音质(546)。在线路控制系统202中,设定通常电力消耗模式(547)。
当按照这种方式设定通常电力消耗模式时(547),信息处理设备200的控制单元240开始通常的传输处理(548和549)。即,信息处理设备200向信息处理设备300传送用于输出主图像和主音频的流(548和549)。当按照这种方式收到所述流时(549),信息处理设备300输出以接收的流为基础的图像和音频(550)。例如,如在图5a中所示,基于来自信息处理设备200的流的图像11作为主图像被显示在显示单元351上。
在本例中,说明了其中当信息处理设备300被通电时,先前的输出形式(当信息处理设备300被断电时的输出形式)被设定为显示单元351的显示形式的例子。不过,当信息处理设备300被通电时,可以设定另一种输出形式。例如,当信息处理设备300被通电时,可以通常设定默认输出形式。另一方面,可根据与信息处理设备300的连接的顺序,决定显示形式。
在图6-8中,说明了其中信息处理设备200询问关于信息处理设备300的设定信息,并根据接收的参数信息,设定传输参数的例子。不过,信息处理设备200可向信息处理设备300要求对于期望被设定的参数的设定请求,当信息处理设备200从信息处理设备300收到指示没问题的响应时,可以设定所述参数。图9和10中图解说明了该例子。
[通信的例子]
图9-11是图解说明按照本技术的第一实施例的包含在通信系统100中的设备之间的通信处理例子的序列图。在图9和10中,在图6-8中图解所示的通信处理例子的一部分被修改。于是,在图9和10中,与图6-8中所示的通信处理例子相同的部分被赋予相同的附图标记,其说明将被部分省略。在图11中,在图9中图解所示的通信处理例子的一部分被修改。于是,在图11中,与图9中图解所示的通信处理例子相同的部分被赋予相同的附图标记,其说明将被部分省略。
图9中图解所示的处理(561-564)对应于图6中图解所示的处理(501-504)。
随后,信息处理设备300的控制单元370向信息处理设备200传送用于把用户设定的输出形式通知信息处理设备200的模式状态通知(565和566)。所述模式状态通知是用于通知可由信息处理设备200设定的分辨率和音质,图像和音频编解码器的种类,3D功能的有无,内容保护的有无,显示设备的显示大小,拓扑信息,可用协议,协议的设定信息(端口信息等),连接接口信息(连接器的种类等),水平同步和垂直同步位置,发送端设备的性能优先级请求信息,是否对应于低电力消耗模式的模式控制表格响应,无线传输的最大传输吞吐量或可接收的最大吞吐量,中央处理器(CPU)功率,电池剩余电量,和电源信息,以及由用户设定的输出形式(例如,主形式或副形式)的信息。
这样,紧接在进行信息处理设备300中,用户进行的输出形式的设定操作之后,用于把与设定操作相应的输出形式通知信息处理设备200的模式状态通知可被传送给信息处理设备200。于是,能够缩短利用无线通信连接的信息处理设备200和300之间的设定时间(变更时间)。
当收到模式状态通知时(566),信息处理设备200的控制单元240比较接收的模式状态通知指定的状态参数和自身信息处理设备的状态参数。随后,信息处理设备200的控制单元240根据比较结果,决定设定内容(例如,分辨率和音频,以及电力消耗模式)。随后,信息处理设备200的控制单元240向信息处理设备300传送用于通知决定的设定内容(例如,分辨率和音频,以及电力消耗模式)的模式设定请求(567和568)。
当收到模式设定请求时(568),信息处理设备300的控制单元370判定是否允许收到的模式设定请求指定的设定内容(例如分辨率和音频,以及电力消耗模式)。随后,信息处理设备300的控制单元370向信息处理设备200传送用于通知判定结果的模式设定可行性命令(569和570)。
当收到模式设定可行性命令时(570),信息处理设备200的控制单元240确认模式设定可行性命令的内容。例如,当收到指示与从信息处理设备200传送的模式设定请求相关的设定内容的许可的模式设定可行性命令时,信息处理设备200的控制单元240把副模式设定为传输模式(571)。此外,图9中图解所示的处理(571-574)对应于图6中图解所示的处理(511-514)。此外,图10中图解所示的处理(575-578)对应于图7中图解所示的处理(519-522)。
当收到指示与从信息处理设备200传送的模式设定请求相关的设定内容的不许可的模式设定可行性命令时,信息处理设备200的控制单元240重新决定设定内容(例如,分辨率和音频,以及电力消耗模式)。随后,信息处理设备200的控制单元240向信息处理设备300传送用于把新决定的设定内容(例如,分辨率和音频,以及电力消耗模式)通知信息处理设备300的模式设定请求。
图10中图解所示的处理(581-583)对应于图7中图解所示的处理(531-533)。
随后,信息处理设备300的控制单元370向信息处理设备200传送用于把用户变更的输出形式通知信息处理设备200的模式状态变更通知(584和585)。所述模式状态变更通知是用于通知可由信息处理设备200设定的分辨率和音质,和是否对应于低电力消耗模式,以及用户变更的输出形式(例如,主形式或副形式)的信息。
当收到模式状态变更通知时(585),信息处理设备200的控制单元240决定设定内容(例如,分辨率和音频,以及电力消耗模式)。决定设定内容的处理和上面说明的决定处理相同。随后,信息处理设备200的控制单元240向信息处理设备300传送用于把决定的设定内容(例如,分辨率和音频,以及电力消耗模式)通知信息处理设备300的模式变更请求(586和587)。
当收到模式变更请求时(587),信息处理设备300的控制单元370判定是否允许收到的模式变更请求指定的设定内容(例如,分辨率和音频,以及电力消耗模式)。随后,信息处理设备300的控制单元370向信息处理设备200传送用于通知判定结果的模式设定可行性命令(588和589)。
当收到模式设定可行性命令时(589),信息处理设备200的控制单元240确认模式设定可行性命令的内容,并设定传输模式(590)。该确认处理和上面说明的确认处理相同。图10中图解所示的处理(590-595)对应于图8中图解所示的处理(545-550)。
这里,当发送端设备进行副图像和主图像之间的切换时,指示切换的时刻的信息(例如,指示图像组(GOP)的开始的信息,或者指示图像的开始的信息)可被包含在待传送的流中。换句话说,当发送端设备进行主显示和副显示之间的切换时,指示切换的时刻的信息可被传送给接收端设备。这种情况下,收到流的接收端设备可根据指示时刻的信息,在适当时刻进行副图像和主图像之间的切换。即,当收到物理链路切换信息时,发送端设备的控制单元能够进行控制,以致AVC/HEVC从I帧开始。这样,其中从I帧开始VC/HEVC的环境例如是利用FST变更无线链路的时刻,或者切换分集被切换的时刻。因而,在无线链路的切换之时,发生分组丢失。于是,通过随后传送I帧,可使分组丢失不可见。不过,需要能够接收切换信息,并输出I帧的编解码器。
这里,图6-10图解说明其中控制连接到接收端设备的发送端设备的待机和唤醒的例子。这里,可根据连接到接收端设备的发送端设备的待机和唤醒,控制接收端设备的待机和唤醒。例如,当连接到接收端设备的所有发送端设备都待机时,可以进行控制,以致接收端设备待机。当连接到接收端设备的发送端设备至少之一唤醒时,可以进行控制,以致该接收端设备唤醒。
图11中图解说明其中在图9中所示的处理(565-570)中,接收端设备通知发送端设备在处理(564)中保持的内容被变更,发送端设备传送模式表格请求的情况的变形例。
如图11中图解所示,信息处理设备300传送通知信息处理设备200输出形式被变更(564),并促成从信息处理设备200传送模式设定请求的模式状态通知(565和566)。当对应可能时,收到模式状态通知的信息处理设备200向信息处理设备300传送指示对模式状态通知的认可的模式状态通知认可(851和852)。
这样,在传送模式状态通知认可之后(851),进行各个处理(853-858)。所述各个处理(853-858)对应于图6中图解所示的处理(505-510)。这样,通过在模式状态通知认可的传输之后(851),进行各个处理(853-858),能够在状态变更(输出形式的变更(564))下,适当地进行流传输控制(例如,数据传输速度控制,可分级传输速率控制,多接收分集设定控制,和内容保护设定控制)。
这里,例如,在按照Wi-FiCertifiedMiracast准备的命令中,包括wfd-triggered-method的RTSPM5消息目前被定义为由信息处理设备200传送给信息处理设备300的命令。不过,当包括wfd-triggered-method的RTSPM5消息被扩展为由信息处理设备300传送给信息处理设备200的命令时,包括wfd-triggered-method的RTSPM5消息可被信息处理设备200接收,从而信息处理设备200能够与信息处理设备300开始能力再协商。即,利用包括wfd-triggered-method的RTSPM5消息,能够交换管理信息。例如,当管理信息被变更时,信息处理设备300的控制单元370能够进行控制,以致在Wi-FiCertifiedMiracast规范中定义的包括wfd-triggered-method的RTSPM5消息,作为向信息处理设备200通知所述变更的命令被传送给信息处理设备200。除该命令之外,可以新定义充当等同物的命令。例如,信息处理设备300的控制单元370可把传输速率变更请求和传输质量变更请求至少之一包含在待从信息处理设备300传送给信息处理设备200的命令中,并把所述命令传送给信息处理设备200。作为所述命令,例如,可以使用在维持HDCP(将在本技术的第三实施例中说明)会话的状态下的命令(例如,M5的WFD-triggered-method,或者M4或以上的命令)。
[信息处理设备(发送端设备)的操作例子]
图12是图解说明按照本技术的第一实施例,由信息处理设备200进行的数据传输处理的处理过程的例子的流程图。图12图解说明其中信息处理设备200首先向信息处理设备300传送具有标准分辨率的流(图像数据和音频数据)的情况的例子。这种情况下,假定进行向信息处理设备300的基于所述流的输出。
首先,控制单元240向信息处理设备300传送模式表格请求(步骤S901)。随后,控制单元240判定是否从信息处理设备300收到命令信息(步骤S902)。当未收到命令信息时,继续进行监视。当即使等待给定时间,仍未收到命令信息时,处理可因超时而结束。例如,在Wi-FiCertifiedMiracast中,取决于状况,设定5秒-9秒的超时。
当从信息处理设备300收到命令信息时(步骤S902),控制单元240向信息处理设备300传送指示根据接收的命令信息,设定模式的模式设定信息(步骤S903)。
随后,控制单元240根据接收的命令信息,设定模式(步骤S904)。当命令信息中包含增大分辨率的变更请求时,控制单元240响应该变更请求,设定图像和音频的分辨率。当命令信息中包含降低分辨率的变更请求时,控制单元240响应该变更请求,设定图像的分辨率和音频的音质。
随后,控制单元240进行按照设定,把流传送给信息处理设备300的传输处理(步骤S905)。
随后,控制单元240判定是否设定了低电力消耗模式(步骤S906)。当未设定低电力消耗模式(即,设定了通常电力消耗模式)时,处理进入步骤S911。相反,当设定了低电力消耗模式时(步骤S906),控制单元240睡眠给定时间(步骤S907)。
随后,控制单元240向信息处理设备300传送查询消息(步骤S908)。随后,控制单元240判定是否从信息处理设备300收到响应消息(步骤S909)。当未收到响应消息时,继续进行监视。当尽管等待给定时间,仍未收到响应消息时,处理因超时而终止。例如,在Wi-FiCertifiedMiracast中,取决于状况,设定5秒-9秒的超时。
当从信息处理设备300收到响应消息时(步骤S909),控制单元240判定响应消息是否包括变更请求(步骤S910)。当响应消息包括变更请求时(步骤S910),处理返回步骤S901。
当响应消息不包括变更请求时(步骤S910),控制单元240判定是否收到变更请求(步骤S911)。当收到变更请求时(步骤S911),处理返回步骤S901。相反,当未收到变更请求时(步骤S911),控制单元240判定是否进行了传输停止操作(步骤S912)。当进行了传输停止操作时(步骤S912),数据传输处理的操作结束。相反,当未进行传输停止操作时(步骤S912),处理返回步骤S905。
[信息处理设备(接收端设备)的操作例子]
图13是图解说明按照本技术的第一实施例,由信息处理设备300进行的数据传输速度控制处理的处理过程的例子的流程图。图13图解说明其中当信息处理设备300收到流(图像数据和音频数据)时,决定与发送端设备相关的设定内容(例如分辨率和电力消耗模式)的例子。
例如,信息处理设备300的控制单元370可按照用于设定主图像的用户信息,或者信息处理设备300与各个发送端设备之间的链路无线电波传播环境,决定要使用的分辨率和要使用的频道。
例如,假定其中进行在图5a中图解所示的状态下,选择图像12的用户操作的情况。这种情况下,理想的是增大图像12的分辨率,并降低图像11的分辨率。此外,理想的是随着时间的过去,根据各个发送端设备的链路无线电波传播环境,选择图像11和12的最佳分辨率。
例如,信息处理设备300可使对应于对应吞吐量的数据流向多个频道的同时,了解无线电波传播特性。例如,信息处理设备300保持以便了解所述多个频道中的每个频道的理想吞吐量的表格。随后,信息处理设备300可根据同时使用的发送端设备的数目,和PER,了解待使用的频道的可用数据传输速度,并为每个频道选择最佳频道。
例如,控制单元370从管理信息保持单元390获得管理信息,从用户信息获取单元360获得用户信息(步骤S921)。随后,控制单元370根据获得的管理信息和用户信息,决定输出形式(步骤S922)。根据决定的输出形式,与从多个发送端设备中的每个发送端设备传送的两个流对应的图像被显示在显示单元351上。
随后,控制单元370判定是否存在对其来说,包含在管理信息中的PER小于阈值的发送端设备(步骤S923)。当存在对其来说,包含在管理信息中的PER等于或小于阈值的发送端设备时(步骤S923),控制单元370决定增大发送端设备的分辨率的变更请求(步骤S924)。按照基于用户信息的输出形式,控制单元370进行向主图像分配高数据传输速度的控制。例如,变更请求被包含在待传送给发送端设备的命令信息(例如,图6中所示的命令信息)中。可判定在增大发送端设备的分辨率之后的吞吐量是否小于阈值,并根据判定结果,控制流的速率。
当不存在对其来说,包含在管理信息中的PER等于或小于阈值的发送端设备时(步骤S923),控制单元370根据管理信息,判定各个发送端设备的吞吐量是否等于或小于阈值(步骤S925)。即,判定每个链路的吞吐量即使对于当前频道是否也没有问题(步骤S925)。
当各个发送端设备的吞吐量不等于或小于阈值时(步骤S925),处理返回到步骤S921。相反,当各个发送端设备的吞吐量等于或小于阈值时(步骤S925),控制单元370根据管理信息,判定是否存在对应于低电力消耗模式的发送端设备(步骤S926)。
当存在对应于低电力消耗模式的发送端设备时(步骤S926),控制单元370决定在对应于低电力消耗模式的发送端设备中,设定低电力消耗模式的变更请求(步骤S928)。例如,该变更请求被包含在待传送给该发送端设备的命令信息(例如,图6中所示的命令信息)中。
当不存在对应于低电力消耗模式的发送端设备时(步骤S926),控制单元370决定降低发送端设备(对其来说,PER等于或小于阈值的发送端设备)的分辨率的变更请求(步骤S927)。例如,该变更请求被包含在待传送给该发送端设备的命令信息(例如,图6中所示的命令信息)中。
判定是否进行接收停止操作(步骤S929)。当进行接收停止操作时,数据传输速度控制处理的操作结束。当未进行接收停止操作时,处理返回步骤S921。当存在通过低电力消耗模式的设定,进入睡眠状态的发送端设备时,连接到信息处理设备300的发送端设备的数目减小。这种情况下,步骤S925中的吞吐量的阈值可被变更。在按照这种方式变更吞吐量的阈值之后,可以进一步进行和步骤S925对应的步骤。
这样,能够实现其中接收端设备持续给定时间,训练线路环境,并把能够进行稳定的视频通信的分辨率通知发送端设备的控制协议。还能够实现其中发送端设备持续给定时间,在线路环境中进行训练,并请求能够进行稳定的视频通信的分辨率,而接收端设备响应所述请求的控制协议。
这样,信息处理设备300的控制单元370可根据管理信息保持单元390的管理信息,和用户信息获取单元360获得的用户信息,进行从各个发送端设备传送的两个流的传输控制(例如,数据传输速度控制)。
此外,可以进行使从信息处理设备200和400每一个传送的两个流的总数据传输速度降至最小的控制。例如,在接收侧信息处理设备300的控制单元370中,设定总数据传输速度的最大容许值。在控制单元370向信息处理设备200传送降低比特率的变更请求之后,控制单元370从流接收单元330获得从信息处理设备200和400传送的两个流的比特率。随后,控制单元370计算获得的两个流的总数据传输速度。随后,控制单元370在不大于设定的最大容许值的范围内,决定从信息处理设备400传送的流的比特率,并向信息处理设备400传送增大比特率的变更请求。当尽管比特率被设定为最小比特率,但PER较高,从而在相同频道中不能接收时,可以使用不同的频道。当图像(主图像和副图像)被暂停给定时间或更长时,图像数据可被停止,只要用户未进行操作(比如指示操作)。
这样,按照本技术的第一实施例,即使当一个接收端设备接收从多个发送端设备传送的多个流时,也能够按照用户的操作、状况和意图,进行适当的流传输控制(例如,数据传输速度控制)。例如,可按照用户的操作、状况和意图,降低多个图像和音频流中的一些流的数据传输速度,并增大剩余流的数据传输速度。
例如,当接收端设备接收并显示多个流时,可以欣赏具有由用户及时设定的高质量的重要图像和音频。对于另外的图像和音频,数据传输速度可被自动调整到最佳的频道,电力消耗和传输速率。
这里,对于保持在管理信息保持单元390中的管理信息,按照Wi-FiCertifiedMiracast准备的命令可用于交换所述管理信息。这种情况下,可以使用在Wi-FiDisplay规范中定义的能力协商或能力再协商。这里,作为能力协商或能力再协商,例如,可以例示的是RFC5939或Wi-FiCertifiedMiracast规范。不过,能力协商或能力再协商不限于此,而是被定义为设备性能信息的交换。图14-16中图解说明利用Wi-FiCertifiedMiracast规范的命令的交换的通信例子。
[利用Wi-FiCertifiedMiracast规范的命令的交换的通信例子]
图14-16是图解说明按照本技术的第一实施例,发送端设备和接收端设备之间的通信处理例子的序列图。图14-16图解说明利用RTSP协议的交换的通信例子。发送端设备820对应于信息处理设备200和400,而接收端设备830对应于信息处理设备300。
首先参考图14进行说明。例如,如用图14的虚线矩形840所示,可以使用从发送端设备传送给接收端设备的“RTSPM3Request”(RTSPGET_PARAMETERRequest)消息,和响应“RTSPM3Request”(RTSPGET_PARAMETERRequest)消息,从接收端设备传送给发送端设备的“RTSPM3Response”(RTSPGET_PARAMETERResponse)消息。这种交换处理例如对应于图6中所示的处理(505-508),和图8中所示的处理(539-542)。另一方面,消息可酌情从发送端设备传送给接收端设备。例如,“RTSPM3Request”(RTSPGET_PARAMETERRequest)消息和“RTSPM3Response”(RTSPGET_PARAMETERResponse)消息的交换可被省略,可把管理信息包含在将从发送端设备传送给接收端设备的消息中,所述管理信息可从发送端设备被传送给接收端设备,接收端设备可选择信息,并把该信息保持在管理信息保持单元390中。例如,当进行内容保护设定时,在M3响应之后,进行链路保护设置。于是,理想的是在通过只传送M4以上的消息,确保一次设定的链路的保密性的时候进行通信。
借助利用RTSP协议的预定消息,可以进行关于电力消耗模式的信息的交换。例如,可以交换下述(1)-(3)的3种管理信息。
(1)“待机模式的设定”
(2)“当发送端设备解除待机模式时,或者当发送端设备解除接收端设备的待机模式时”,以及
(3)“当接收端设备解除待机模式时,或者当接收端设备解除发送端设备的待机模式时”
首先参考图15进行说明。例如,当使用在Wi-FiCertifiedMiracast中准备的命令时,在如上所述的(1)“待机模式的设定”的交换中,可以使用从发送端设备820传送给接收端设备830的“RTSPM12Request”(RTSPSET_PARAMETER(带有WFD-standby))消息,和响应“RTSPM12Request”(RTSPSET_PARAMETER(带有WFD-standby))消息,从接收端设备830传送给发送端设备820的“RTSPM12Response”(RTSPOK)消息。另一方面,这也适用于从接收端设备830到发送端设备820的待机模式的设定。
接下来参考图16进行说明。例如,如上所述的(2)“当发送端设备解除待机模式时,或者当发送端设备解除接收端设备的待机模式时”,发送端设备820交换传送给接收端设备830的“RTSPM5Request”(RTSPSET_PARAMETER(Request(wfd-trigger-method:PLAY))消息,和响应“RTSPM5Request”(RTSPSET_PARAMETER(Request(wfd-trigger-method:PLAY))消息,从接收端设备830传送给发送端设备820的“RTSPM5Response”(RTSPOK)消息。接收端设备830可利用传送给发送端设备820的“RTSPM7Request”(RTSPPLAYRequest)消息,和响应“RTSPM7Request”(RTSPPLAYRequest)消息,从发送端设备820传送给接收端设备830的“RTSPM7Response”(RTSPOK)消息。
例如,如上所述的(3)“当接收端设备解除待机模式时,或者当接收端设备解除发送端设备的待机模式时”,接收端设备830可利用传送给发送端设备820的“RTSPM7Request”(RTSPPLAYRequest)消息,和响应“RTSPM7Request”(RTSPPLAYRequest)消息,从发送端设备820传送给接收端设备830的“RTSPM7Response”(RTSPOK)消息。所述交换例如对应于图7中所示的处理(515-518),和图7中所示的处理(535-538)。
例如,在图9中所示的处理(565-570)的交换中,可以利用从接收端设备830传送给发送端设备820的“RTSPM12Request”(RTSPSET_PARAMETER(带有WFD-standby))消息,和响应“RTSPM12Request”(RTSPSET_PARAMETER(带有WFD-standby))消息,从发送端设备820传送给接收端设备830的“RTSPM12Response”(RTSPOK)消息。
此外,例如,在图10中所示的处理(584-589)的交换中,可以利用从接收端设备830传送给发送端设备820的“RTSPM7Request”(RTSPPLAYRequest)消息,和响应“RTSPM7Request”(RTSPPLAYRequest)消息,从发送端设备820传送给接收端设备830的“RTSPM7Response”(RTSPOK)消息。
这样,无线通信单元320可借助在Wi-FiDisplay规范中定义的能力协商或能力再协商,进行能力信息的交换。例如,借助能力协商或能力再协商中的RTSPM3消息,交换能力信息。
这样,例如,信息处理设备300的无线通信单元320进行与发送端设备的通信,以便交换关于信息处理设备300的能力信息,和关于信息处理设备200的能力信息。信息处理设备200的无线通信单元220进行与信息处理设备300的通信,以便交换关于信息处理设备200的能力信息,和关于信息处理设备300的能力信息。这种情况下,无线通信单元220和320可借助能力协商或能力再协商,交换能力信息。
信息处理设备300的控制单元370根据关于信息处理设备200的能力信息,关于与信息处理设备200的通信的无线电波传播测量信息,和信息处理设备300的使用,进行与信息处理设备200的流传输控制(例如,数据传输速度控制,可分级传输速率控制,多接收分集设定控制,和内容保护设定控制)。流传输方法和本技术的实施例中的不同,不过,信息处理设备200的控制单元240也可根据以关于信息处理设备200的能力信息,和关于与信息处理设备300的流通信的无线电波传播测量信息为基础,从信息处理设备300进行的控制,进行与信息处理设备300的流传输控制(例如,数据传输速度控制,可分级传输速率控制,多接收分集设定控制,和内容保护设定控制)。
信息处理设备300的控制单元370根据关于信息处理设备200的能力信息(例如,指示信息处理设备200是否是移动设备的信息),进行在信息处理设备200中设定电力消耗模式的控制。这种情况下,控制单元370可根据关于信息处理设备200的能力信息,和用于管理信息处理设备200的管理信息,进行在信息处理设备200中设定低电力消耗模式的控制。信息处理设备200的控制单元240根据以关于信息处理设备200的能力信息为基础,从信息处理设备300进行的控制,设定电力消耗模式。在本技术的实施例中,说明了其中使用两个发送端设备的拓扑的例子,不过本技术的实施例不限于本技术的该实施例。例如,当发送端设备的数目为2或更大时,必须进行与设备的数目对应的数据传输速度控制,状态转移相当多。于是,控制困难,但是能够获得好处。也可对应于其中连接两个或更多发送端设备的拓扑。
<2.第二实施例>
在本技术的第二实施例中,主要说明其中利用可分级编解码器,进行可分级传输速率控制的例子。
这里,说明当障碍物位于发送端设备和接收端设备之间时,发送端设备和接收端设备之间的传输速率控制的目标速率精度的粗糙性,以及传输速率控制方法。
[当障碍物位于发送端设备和接收端设备之间时]
例如,将考虑其中存在导致发送端设备和接收端设备的连接环境的不稳定性的障碍物(例如,人)的情况。例如,当人阻断发送端设备和接收端设备时,连接环境瞬时被中断,尽管是临时性的。瞬时中断随情况而不同。不过,例如,存在应用传输受影响的担心。例如,当从发送端设备到接收端设备的端到端延迟时间约为几十毫秒时,存在瞬时中断时间影响应用传输的担心。
[传输速率控制的目标速率精度的粗糙性]
近年来,已开始使用可分级编解码器,以便主要在TV会议中,从MCU(多点连接)向多个场所传送相同的图像和音频。当比较可分级编解码器和通常的编解码器时,编码器和解码器两者的硬件规模都增大。不过,就组播用途来说,存在传输侧能够不管接收侧的显示能力或解码能力地进行传输的优点。接收侧能够取决于接收能力地自由选择显示分辨率或时间可分级性,从而所有接收设备不必匹配相同的设定。
此外,可分级编解码器被认为技术上在传输速率的高动态范围环境中有效。例如,在即使显示由可无线接收的分组生成的视频的时候,通过把接收特性通知编码器侧,也能够缩小数据传输速率。不过在实际使用中,接收侧显示设备具有SD、HD或4K分辨率。于是,在空间可分级性或时间可分级性中,难以用几Mbps的粒度有效地设定传输速率。因此,通常用诸如1/2、1/4或1/16之类的粒度,设定数据传输速率的缩减。在无线网络的单播环境中,存在要求在接收侧的损失不明显的范围中,调整信噪比(SNR)可分级性和空间可分级性或时间可分级性的必要性。
[传输速率控制方法]
这里,将考虑其中在由IEEE802.11ad代表的60GHz的无线网络系统上,使用可分级编解码器的情况。
例如,在其中使用IEEE802.11a/B/g/n的无线视频传输中,数据传输速率的动态范围不大(例如,其中视频传输中无分组丢失的可容许吞吐量为1Mbps-20Mbps的范围),并且在链路之间还存在无线电波干扰。于是,当形成网络时,主要进行通过缩小编码率,尽可能不使用无线频带的控制。
不过,当在60GHz下使用无线网络时,数据传输速率等于或大于最大2Gbps。与2.4GHz频带或5GHz频带相比,链路之间的干扰被减小,因为在波束成形环境中,能够进行空间分割。即,存在于相同频道中的由另外的网络引起的干扰被减小。例如,当在1Gbps的传输速率下,使用1对2的网络时,两个单元能够无干扰地相互使用对应于500Mbps的传输速率。于是,不需要不必要地降低视频和音频数据传输速率。从而,可按对应于500Mbps的速率传送视频和音频数据,可用能够接收图像数据的层的分辨率,显示接收侧的图像数据。
此外,能够测量对应于500Mbps的误码率。例如,假定其中使干扰波进入,从而传输速率突然被减小到约1/10的情况。这种情况下,当进行控制,以瞬时降低速率,以致不发生差错时,通常,从接收侧作为反馈信息地获得链路质量,并确定链路质量。不过,在如在干扰波中一样的传输速率的突然减小中,不能把握反馈信息,除例如传输缓冲量或传输分组的重传次数之外,传输侧不能处理传输速率的减小。因此,必须更快地了解无线电波传播环境。当干扰波消失,从而链路质量更好时,理想的是增大到目前为止缩小的视频和音频数据传输速率,从而恢复高的图像质量。不过,最初,由于传输速率被缩小,因此不能把握传输速率被增大到什么程度。当在60GHz下使用无线网络时,传输速率高达1Gbps。于是,即使当进行500Mbps的图像传输时,也可使剩余的500Mbps回到差错测量。即,在进行图像传输的时候,可以假定对应于500Mbps的误码率。于是,在其中传输速率的差异较大的链路环境中,重要的是适当地进行视频数据和音频数据的传输速率控制。因而,在本技术的第二实施例中,将说明其中适当地进行传输速率控制的例子。
[通信系统的结构例子]
图17是图解说明按照本技术的第二实施例的通信系统700的系统结构例子的方框图。
通信系统700的结构和图1中图解所示的通信系统100的结构相同。于是,与图1中图解所示的通信系统100相同的部分被赋予相同的附图标记,其说明将被部分省略。
不过,图17和图1的不同之处在于利用虚线椭圆701和702,表示两种不同频道的无线电波到达范围,作为信息处理设备300的无线电波到达范围(服务范围)。例如,第一频道被设定为60GHz,第一频道的无线电波到达范围用椭圆701指示。第二频道被设定为2.4GHz,第二频道的无线电波到达范围用椭圆702指示。
这里,无线电波到达范围701例如意味其中信息处理设备200和400能够利用第一频道,向信息处理设备300传送流的范围(服务范围)。无线电波到达范围702例如意味其中信息处理设备200和400能够利用第二频道,向信息处理设备300传送流的范围(服务范围)。
图17图解说明其中信息处理设备200是移动设备,障碍物(例如,人)703位于信息处理设备200和300之间的情况的示例。这里,将说明其中当信息处理设备300和400传送流时,信息处理设备200和300进行连接处理的例子。
如上所述,信息处理设备200存在于无线电波到达范围701内。当障碍物703不存在时,可以进行与信息处理设备300的正常连接。不过,如图17中图解所示,当障碍物703存在于信息处理设备200和300之间时,在信息处理设备200和300之间交换的无线电波可被障碍物703吸收或反射。于是,假定尽管位于无线电波到达范围701内,仍存在信息处理设备200和300之间的瞬时中断,或者信息处理设备200和300之间的数据传输速率的显著降低。
这里,当信息处理设备200和300之间的瞬时中断是临时性的时,设想其中在60GHz,利用线路复原机制等,能够恢复连接的情况(下面称为情况1)。作为所述连接复原机制,例如,可以例示的是控制波束形成,波束跟踪等的无线电波的指向性的方法。另一方面,还设想其中障碍物703在所有方向,都阻断信息处理设备200的无线电波,从而60GHz的线路持续被断开的情况(下面称为情况2)。在情况2下,进行和其中无线电波到达范围701移动到无线电波到达范围702的情况相同的操作。此外,在情况1和情况2下,流传输的视频都受到干扰。
因而,为了对应于图17中图解所示的连接环境,在情况2下,在两个频道之间,优先使用其中服务区域较大的频率范围。例如,在本技术的第二实施例中,将说明其中在两个频道之间,使用其中服务区域较大的第二频道(2.4GHz频带)的例子。
即,当无线电波传播测量信息指定的通信质量降低,从而必须限制流传输控制(例如,数据传输速度控制和可分级传输速率控制)时,控制单元370可根据无线电波传播测量信息和信息处理设备300的使用,进行以致使用的频道被变更成数据传输速度更快的频道的控制。信息处理设备300的使用的例子包括显示单元351的显示形式,和信息处理设备300的移动状态。假定信息处理设备300的使用包括其中在信息处理设备200和300之间发生瞬时中断的情况。当无线电波传播测量信息指定的通信质量降低,从而必须限制流传输控制(例如,数据传输速度控制和可分级传输速率控制)时,控制单元370可根据无线电波传播测量信息和信息处理设备300的使用,进行以致使用的频道被变更成数据传输速度较慢的频道的控制。例如,当无线电波传播测量信息指定的通信质量降低,从而必须限制流传输控制(例如,数据传输速度控制和可分级传输速率控制)时,通过根据无线电波传播测量信息和信息处理设备300的使用,在使用第二频道之时,把频道变更成第一频道,数据传输速度可对于对应来说更快。相反,通过在使用第一频道之时,把频道变更成第二频道,数据传输速度可被变更成对对应来说较慢。本技术的实施例并不仅仅限于频道的切换,也可使用另外的方法。例如,通过变更带宽,能够进行流传输控制(例如,数据传输速度控制和可分级传输速率控制)。例如,在802.11中,支持多种带宽,存在20MHz频带,40MHz频带,80MHz频带,160MHz频带等。当带宽增大时,数据传输速度变得更快。当无线电波传播测量信息指定的通信质量降低,从而必须限制流传输控制(例如,数据传输速度控制和可分级传输速率控制)时,控制单元370可进行增大或减小带宽的控制。这样,通过根据信息处理设备300的使用和无线电波传播环境,综合地设定信息处理设备200的能力,能够改善整个系统的稳定性。
在情况1下,按照信息处理设备200的瞬时中断时间,可不变更信息处理设备200的频道地继续连接,或者可以变更信息处理设备200的频道。作为是否继续信息处理设备200的连接的判断基准,例如,存在控制无线电波的指向性的控制试验的次数。
在情况2下,当信息处理设备200从无线电波到达范围701移动到无线电波到达范围702时,可向用户指示是断开信息处理设备200,并提高另一条链路的画质和音质,还是不断开信息处理设备200地变更信息处理设备200的频道。例如,通过使信息处理设备300显示用于指示是否断开信息处理设备200,并允许另一条链路的画质和音质的提高的弹窗,能够利用所述弹窗指示用户。例如,当信息处理设备300显示是否使信息处理设备200显示所述弹窗,并且发出使信息处理设备200显示所述弹窗的指示时,可使信息处理设备200显示所述弹窗。这种情况下,信息处理设备200的用户可发出所述指示。为了确保更稳定的链路,理想的是当开始连接处理时,选择传输速度比具有高传输速度的通信方式低的通信方式,开始通信。
例如,当在弹窗上允许断开时,信息处理设备300进行停止与信息处理设备200的流传输,直到链路无线电波传播状况改善为止的处理。这种情况下,保持在管理信息保持单元390中的关于信息处理设备200的管理信息被消除。
例如,当在弹窗上不允许断开时,信息处理设备300进行变更信息处理设备200的频道的处理。
这样,控制单元370可进行使显示单元351显示关于是否断开使用的频道的显示信息(例如,弹窗)的控制。当收到指示不允许使用的频道的断开的用户操作时,控制单元370进行重新变更频道的控制。
例如,在其中利用信息处理设备400和300的链路传送流的状况下,必须进行处理,以致另一条链路的流传输不受影响。于是,理想的是进行预先设定,而不是当信息处理设备200移动时,指示用户。这种情况下,当链路被自动切换时,归因于分辨率的变化,画质降低。于是,作为把链路变更状态通知用户的方法,可以进行“2.4GHz”、“60GHz”等的显示。
这里,还设想其中信息处理设备200频繁在无线电波到达范围701和702之间移动的工作环境。因而,图22图解说明其中高速切换第一频道和第二频道的例子。
[图像压缩例子]
下面,说明即使在其中编码率的动态范围较大的环境中,也使用户察觉不到分组丢失的图像压缩方法的例子。在本技术的第二实施例中,将举例说明利用可分级编解码器的传输速率控制。首先,说明可分级编解码器。
[空间可分级性和SNR可分级性的例子]
图18是说明按照本技术的第二实施例,在通信系统700中使用的空间可分级性和SNR可分级性的例子的示图。
图18a是说明空间可分级性的例子的示图。具体地,图解说明了将经历可分级编码的3层L1、L2和L3。
层L1是基本层,层L2和L3是增强层。层L2与层L1的空间分辨率之比为2:1。层L3与层L1的空间分辨率之比为4:1。即使当分辨率按照这种方式彼此不同时,出现在层L1内的预测单元B1中的运动类似地也出现在层L2内的对应预测单元B2,和层L3内的对应预测单元B3中的可能性高。这是空间可分级性中的各层之间的运动相关性。
图18b是说明SNR可分级性的例子的示图。具体地,图解说明了将经历可分级编码的3层L1、L2和L3。
层L1是基本层,层L2和L3是增强层。层L1、L2和L3的空间分辨率彼此相同。
然而,例如,层L1的最小量化位阶为25,利用正交变换系数的量化,编码流的比特率被抑制到约2Mbps。另一方面,例如,层L2的最小量化位阶为12,编码流的比特率约为5Mbps。例如,层L3的最小量化位阶为0,编码流的比特率约为10Mbps。即使当比特率按照这种方式相互不同时,出现在层L1内的预测单元B1中的运动类似地也出现在层L2内的对应预测单元B2,和层L3内的对应预测单元B3中的可能性高。这是SNR可分级性中的各层之间的运动相关性。
[利用高效视频编码的可分级视频编码扩展(SHVC)的流传输量的例子]
图19是示意图解说明按照本技术的第二实施例,利用在通信系统700中使用的SHVC的流传输量的示图。
如图19中图解所示,对应于HD的高质量视频经历利用高效视频编码(HEVC)的图像压缩,设想等同于100Mbps的画质。例如,利用可分级性编码所述画质,以当使用空间可分级性时,在SHVC中对应于基本层的25Mbps和对应于增强层的100Mbps。
例如,当接收端设备只能够接收基本层的25Mbps的相当值时,实现视频显示。此外,当接收增强层的100Mbps的相当值时,实现更高的质量。
当从数据传输速率控制的视点,进一步缩小数据传输速率时,通过利用时间可分级性,数据传输速率可被设定为1/2或1/4。
例如,设想其中原始图像为60fps,应用最高允许30fps的情况。这种情况下,如图19中图解所示,对于具有HD100Mbps的图像,通过利用空间可分级性和时间可分级性,数据传输速率可被缩小到13Mbps(100Mbps×(1/2)×(1/4))。
[其中利用SNR可分级性,缩小数据传输速率的例子]
图20是示意图解说明按照本技术的第二实施例,利用在通信系统700中使用的SNR可分级性,缩小数据传输速率的例子的示图。具体地,将说明其中利用SNR可分级性,把数据传输速率从1000Mbps缩小到125Mbps的例子。
这里,设想其中图2和3中图解所示的无线通信单元220和320利用60GHz的情况。这种情况下,通过利用1/2时间可分级性和1/4时间可分级性,10倍于HD100Mbps的1000Mbps的数据传输速率可被缩小到500Mbps或250Mbps。例如,当接收端设备接收的数据传输速率等于或大于250Mbps时,视频不停止。于是,例如,接收侧不可按1000Mbps接收视频。不过,当接收侧能够按高达500Mbps接收视频时,能够输出其中接收端设备的显示质量为500Mbps的高质量视频。
设想其中能够按高达500Mbps接收视频的接收端设备把数据传输速率通知发送端设备,发送端设备把SNR可分级性的数据传输速率降低到500Mbps的情况。这种情况下,SNR小于对于1000Mbps的目标编码的视频的SNR,不过,接收侧能够fps不恶化地无缝切换和再现视频。
在图19和20中,为了易于说明,使用了简单的数值。不过,这些数值仅仅是例子,也可适用于其它数值。在图20中,图解说明其中数据传输速率的缩小宽度被设定为两级的例子,不过也可适用于其中缩小宽度被设定为3级的情况。例如,随着级数增大(如分成3级或更多级那样),最小数据传输速率可被缩小,从而数据传输速率的动态范围能够被扩大。此外,即使当传输速率从低传输速率回到高传输速率时,也能够按500Mbps的数据传输速率到1000Mbps的数据传输速率进行通信,把握接收的来自信息处理设备的接收传输速率。因而,可以使分组丢失不可见,从而能够设定最佳SNR。
[管理信息的获取例子]
图21是图解说明按照本技术的第二实施例,包含在通信系统700中的设备之间的通信处理例子的序列图。图21图解说明其中信息处理设备300获得关于每个信息处理设备200和400的管理信息的例子。
图21中图解所示的处理(801-806)和处理(807-812)对应于图6中图解所示的处理(505-510)。
在图21中,图解说明了和本技术的第一实施例相同的管理信息的获取例子,不过可按照另一种方法,获得关于各个信息处理设备的管理信息。
[信息处理设备(发送端设备)的操作例子]
图22是图解说明按照本技术的第二实施例,由信息处理设备300进行的频道设定处理的处理过程的例子的流程图。
图22图解说明其中信息处理设备300进行与信息处理设备200的链路(第一链路)连接,并进行与信息处理设备400的链路(第二链路)连接的情况的例子。图22图解说明其中当处理过程开始时,在第一链路中,利用第一频道进行内容传输,在第二链路中,利用第二频道进行内容传输的例子。图22图解说明其中判定两个频道双方的数据传输速率是否存在问题,并进行连接设定,以致在知道另一条链路的数据传输速度状态的时候,高速切换两个频道的例子。图22图解说明其中为方便起见,通过把第一链路设定为60GHz,把第二链路设定为2.4GHz,开始操作的例子。由于两个频道的数据传输速度被假定为10倍或更多倍,因此在图22中图解所示的例子中,2.4GHz下的数据传输速率被假定为100Mbps,60GHz下的数据传输速率被假定为1Gbps,以便进行说明。
首先,控制单元370获得关于第一发送端设备(信息处理设备200)的管理信息(步骤S951)。随后,控制单元370获得关于第二发送端设备(信息处理设备400)的管理信息(步骤S952)。每项管理信息被保持在管理信息保持单元390中。图21中图解说明了获得管理信息的方法。
随后,控制单元370考虑到显示设定(例如,显示面上的图像的显示位置、大小等),决定链路(第一链路和第二链路)的数据传输速率(步骤S953)。
利用图4中图解所示的参数,可决定链路(第一链路和第二链路)的数据传输速率。例如,可决定链路(第一链路和第二链路)的数据传输速率,作为考虑到主图像和副图像的面积的设定值。
这里,将说明主图像和副图像的数据传输速率之间的关系。例如,设想其中主图像具有为副图像的面积的N倍的面积的情况。这种情况下,使用60GHz时的主图像的数据传输速率可被设定为1Gbps×(N/(N+1))。使用2.4GHz时的主图像的数据传输速率可被设定为100Mbps×(N/(N+1))。
使用60GHz时的副图像的数据传输速率可被设定为1Gbps×(1/(N+1))。使用2.4GHz时的副图像的数据传输速率可被设定为100Mbps×(1/(N+1))。
随后,控制单元370判定连接到信息处理设备300的各个发送端设备是否不稳定(步骤S954)。这里,发送端设备不稳定的事实例如意味显示在显示单元351上的图像受到干扰。相反,当所有发送端设备都不稳定时(步骤S954),处理返回步骤S951。
当任何发送端设备不稳定时(步骤S954),进行基于不稳定的发送端设备(对象发送端设备)的链路的不稳定性的判定(步骤S955)。例如,控制单元370判定发送端设备的PER是否等于或大于阈值(步骤S955)。当发送端设备的PER小于阈值时(步骤S955),发送端设备的链路被判断为稳定。于是,频道设定处理的操作结束。
在本例中,说明了其中当判断链路的稳定性时,使用PER作为指标的例子,不过,可以使用另外的指标。例如,通过利用BER、RSSI、PER、分组的重传次数、吞吐量、丢帧、SIR等作为指标,可以判断链路的稳定性。可以确定接收侧接收的分组延迟,关于分组延迟的信息可以用作无线电波传播测量信息。分组延迟充当与无线电波传播相关的一个指标,因为例如在发生错误之时,在通过层2中的重传处理,对于接收侧的传输中发生延迟。例如,分组延迟充当指示其中多个设备共享无线频带的无线系统中的链路特性恶化的指标。
当发送端设备的PER等于或大于阈值时(步骤S955),控制单元370确认不稳定的链路(步骤S956)。即,控制单元370判定发送端设备是否是第一发送端设备(步骤S956)。随后,了解与发送端设备当前使用的频道不同的频道的空状况(步骤S957和S958)。
例如,当发送端设备是第二发送端设备时(步骤S956),了解与第二发送端设备当前使用的频道不同的频道的空状况(步骤S957)。当发送端设备是第一发送端设备时(步骤S956),了解与第一发送端设备当前使用的频道不同的频道的空状况(步骤S958)。
这里,图22图解说明其中主图像和副图像具有相同面积的情况的例子(其中N=1)。图解说明了其中在第一发送端设备中,频道为60GHz,数据传输速率为1Gbps,在第二发送端设备中,频道为2.4GHz,发送端设备的数据传输速率为100Mbps的例子。
例如,当第二发送端设备被变更时(步骤S956),第一链路的频道保持在60GHz,数据传输速率从1Gbps降到500Mbps(步骤S957)。第二链路的频道从2.4GHz变更到60GHz,数据传输速率从100Mbps变更到500Mbps(步骤S957)。这样,当第二链路的频道从2.4GHz被变更到60GHz时,两条链路(第一链路和第二链路)对60GHz来说是必要的。这里,例如,设想其中60GHz的最大数据传输速率为1Gbps,主图像和副图像的面积相同的情况。这种情况下,对主图像和副图像来说,相同的传输速度是必要的。这种情况下,为了利用两条链路(第一链路和第二链路)进行传输,必须把500Mbps(1Gbps/2)设定为数据传输速率。于是,当第二链路的频道从2.4GHz被变更成60GHz时,数据传输速率从100Mbps被变更成500Mbps(步骤S957)。
例如,当第一发送端设备被变更时(步骤S956),第一链路的频道从60GHz被变更成2.4GHz,数据传输速度从1Gbps降低到50Mbps(步骤S958)。对于第二链路,频道保持在2.4GHz,数据传输速率从100Mbps降低到50Mbps(步骤S958)。当第二链路的频道保持在2.4GHz时,把数据传输速率从100Mbps降低到500Mbps的理由和其中第二链路的频道从2.4GHz被变更到60GHz的情况(步骤S957)的理由相同。
这样,在了解数据传输速度的空状况之后(步骤S957和S958)之后,控制单元370就不稳定的链路而论,把关于频道和编码率的变更信息通知对象发送端设备(步骤S959)。
随后,控制单元370判定是否从传送变更信息的对象发送端设备收到设定请求(步骤S960)。当未收到设定请求时,继续进行监视。相反,当收到设定请求时(步骤S960),控制单元370把对于设定请求的响应传送给对象发送端设备(步骤S961)。在对于设定请求的响应被传送之后,发送端设备设定编码率。即,对象发送端设备对于待使用的每个频道,考虑到连接到网络的设备的数目地设定编码率,以控制图像或音频的流生成。
本技术的实施例不限于此。例如,可以生成60GHz和2.4GHz下的独立吞吐量的流,可以同步地进行切换。例如,通过利用低延迟编解码器,这种处理是可能的。
随后,控制单元370参照关于按照通信状况60GHz的特性更好还是2.4GHz的特性更好的各项信息,决定待使用的编码率或频道(步骤S962)。这里,参照的各项信息例如是诸如PER、数据传输速率和稳定性之类的信息,或者图4中图解所示的管理信息。
随后,控制单元370在60GHz和2.4GHz之间,选择稳定的频道(步骤S963)。随后,控制单元370向对象发送端设备(例如,信息处理设备200)传送利用选定的频道,传送流的请求(步骤S963)。因而,选择稳定的链路,能够进行稳定的流通信。
可按照发送端设备是否是移动设备,变更各个阈值。因而,当发送端设备是移动设备时,切换被配置成易于进行,并实现稳定性,从而能够实现传输。
这里,当作为变更频道的对象的发送端设备(对象发送端设备)是移动设备,并且同时使用两个频道时,电池易于被消耗。因而,信息处理设备200可根据从信息处理设备300接收的信息进行判断。为了进行所述判断,需要把关于连接到信息处理设备300的所有发送端设备的链路的信息包含在来自信息处理设备300的信息(例如,图6中所示的命令信息)中,并且信息处理设备200需要获得各项这样的信息。随后,信息处理设备200可根据这样获得的关于所有发送端设备的信息,选择稳定的频率。信息处理设备200可判定另一条链路是否受影响。信息处理设备300可被预先告知指示信息处理设备200是移动站的管理信息,信息处理设备300可根据关于整个系统的流传输控制(例如,数据传输速度控制和可分级传输速率控制)的信息,确定流的传输稳定的频道。
这样,信息处理设备200和300是能够利用多个频道,进行无线通信的信息处理设备。信息处理设备300的控制单元370根据关于信息处理设备200的能力信息,无线电波传播测量信息和信息处理设备300的使用,进行以致从多个频道之中,在信息处理设备200中设定一个频道的控制。信息处理设备300的控制单元370可根据关于信息处理设备200的能力信息,使缓冲器待机时间自动恒定(存活时间功能),并在所述恒定时间之后,从不稳定的链路传输缓冲器中删除流数据的功能,依据重传次数等,判断链路不稳定的功能,和信息处理设备的使用,进行以致从多个频道中更稳定地设定一个频道的控制。这种情况下,信息处理设备300的控制单元370能够根据通过在切换多个频道的同时,测量来自信息处理设备200的流而获得的无线电波传播测量信息,进行以致设定一个频道的控制。
这样,在本技术的第二实施例中,把从多个发送端设备传送的图像聚为一体的接收端设备(例如,多视角监视器)能够适当地显示从发送端设备传送的图像。例如,能够关于具有较大动态范围的数据传输速率,按照接收端设备的显示形式或连接形式,提供可分级编解码器的目标速率,并进行其中传输速率的粒度微小的数据传输速率控制。例如,能够利用SNR可分级性、空间可分级性和时间可分级性,进行数据传输速率控制。
在本技术的第二实施例中,说明了其中第一频道被设定为60GHz,第二频道被设定为2.4GHz,以供使用的例子,不过,本技术并不局限于此。例如,第一频道可被用作5GHz频带,而第二频道可被用作2.4GHz频带。
在本技术的第二实施例中,说明了其中使用两种频道的例子,不过,本技术的实施例不限于此。例如,本技术也可适用于其中使用两种不同频道(例如,LTE-A和2.4GHz,或LTE-A和60GHz)的情况。例如,本技术也可适用于其中使用3种或更多种频道的情况。例如,本技术也可适用于利用3种频道2.4GHz、5GHz和60GHz的信息处理设备。在本技术的第二实施例中,说明了其中在第一链路和第二链路中使用相同频率的例子。不过,信息处理设备300可在2.4GHz、5GHz和60GHz,具有接入点(AP)PCP或群组所有者(GO)功能,信息处理设备300可进行基于所述功能任意之一的操作。信息处理设备200和400可起GO作用,信息处理设备300可起客户端作用。
[发送端设备和接收端设备之间的分组的交换例子]
下面参考附图,详细说明发送端设备(传输侧信息处理设备)和接收端设备(接收侧信息处理设备)之间的分组的交换例子。
[信息处理设备(发送端设备)的结构例子]
图23是图解说明按照本技术的第二实施例的信息处理设备710的功能结构例子的方框图。信息处理设备710是发送端设备的例子,对应于图17中图解所示的信息处理设备200和400。图23中,只例示了信息处理设备710的结构中,与数据传输相关的结构,未例示从而将不说明其它剩余结构。
图24是示意图解说明按照本技术的第二实施例,在信息处理设备710进行的传输处理中生成的分组的示图。将参考图23详细说明所述分组。
信息处理设备710包括图像数据生成单元711,补充增强信息(SEI)生成单元712,网络抽象层(NAL)生成单元713,打包基本流(PES)生成单元714,传输流(TS)生成单元715,实时传输协议(RTP)生成单元716和天线718。这些单元由控制单元(对应于图2中图解所示的控制单元240)控制。
信息处理设备710是获得成像单元719生成的图像数据,并利用无线通信,传送所述图像数据的信息处理设备(发送端设备)的例子。例如,成像单元719是对被摄物体成像,从而生成图像数据的成像设备,例如是数字静态照相机或数字摄像机(例如,摄像机一体式记录器)。在图23中,图解说明了其中成像单元719被设置在信息处理设备710外的例子,不过,成像单元719可被设置在信息处理设备710内。
图像数据生成单元711对从成像单元719供给的图像数据(高帧速率的图像数据)进行各种图像处理,从而生成作为传输对象的图像数据。例如,图像数据生成单元711按照高级视频编码(AVC)方式,对从成像单元719供给的图像数据(高帧速率的图像数据)编码。随后,图像数据生成单元711把编码的图像数据(编码数据)提供给NAL生成单元713。图像数据生成单元711把关于当前编码对象的控制信息提供给SEI生成单元712。
SEI生成单元712生成SEI,并把生成的SEI提供给各个单元。例如,SEI生成单元712生成从图像数据生成单元711供给的控制信息,编码单元,和关于图像数据的传输目的地(接收端设备)的控制信息。例如,SEI生成单元712生成AVC方式用的SEI,并把生成的AVC方式用的SEI提供给NAL生成单元713。SEI生成单元712生成控制信息标记,并把生成的控制信息标记提供给TS生成单元715和RTP生成单元716。
NAL生成单元713向从图像数据生成单元711供给的图像数据(编码数据),从SEI生成单元712供给的SEI等,添加NAL报头。即,NAL生成单元713生成压缩图像数据、SEI等的NAL单元。这样,NAL生成单元713起传输数据生成单元的作用,从生成的NAL单元生成存取单元(AU),作为传输数据,并把所述传输数据提供给PES生成单元714。在图24的顶部图解说明了NAL生成单元713生成的NAL单元的例子。
PES生成单元714对从NAL生成单元713供给的AU进行PES打包,并把通过PES打包获得的PES分组提供给TS生成单元715。在图24中从上方起的第二行中图解说明了在PES生成单元714中生成的PES分组的例子。
TS生成单元715对包括从PES生成单元714供给的PES分组,和从SEI生成单元712供给的显示控制信息标记的数据进行TS打包,从而生成TS分组。随后,TS生成单元715复用TS分组,从而生成TS,并把生成的TS提供给RTP生成单元716。在图24中从上方起的第三行中图解说明了由TS生成单元715生成的TS分组的例子。
RTP生成单元716生成从TS生成单元715供给的TS,作为RTP分组,并把生成的RTP分组提供给分组生成单元717。在图24的底部图解说明了由RTP生成单元716生成的RTP分组的例子。
分组生成单元717添加UDP报头或TCP报头和网际协议(IP)报头,生成用于进行无线传输的无线分组(IEEE802.11分组)。随后,分组生成单元717把生成的无线分组提供给天线718。
分组生成单元717设定无线传送的分组的优先级。因而,即使当发生无线电波环境的变化时,信息处理设备710也能够把重要性高的分组传送给另一信息处理设备(接收端设备)。设定优先级的方法将参考图25详细说明。
天线718是起传输单元作用的天线,利用无线电波,把从分组生成单元717供给的无线分组传送给另一个信息处理设备(接收端设备)。
[优先级竞争接入控制的例子]
图25是图解说明按照本技术的第二实施例,由信息处理设备710进行的优先级竞争接入控制方法的例子的示图。图25中图解所示的优先级竞争接入控制方式是遵守IEEE802.11e的无线通信系统中的优先级竞争接入控制方式。优先级竞争接入控制方式被称为增强分布式信道接入(EDCA)。
在EDCA中,在按照在待传送的数据的接入类别(下面称为AC)中说明的优先级(接入类别0-7)的传输退避定时方面,产生差异。此外,在其中开始传输的仲裁帧间间隔(AIFS)的设定值方面,产生差异。当在整个AIFS中,未开始另一个通信时,数据可被传送。即,用短AIFS的设定,传送高优先级的接入类别的数据,利用长AIFS的设定,传送低优先级的接入类别的数据。
当按照这种方式进行传输时,归因于AIFS设定时间内,高优先级的其它数据的通信,传送低优先级的数据的信息处理设备等待传输。即,实现允许保存传输优先级高的数据的信息处理设备优先向无线介质传送数据的接入控制方法。
图25图解说明其中接入类别0具有最高优先级,并且优先级被设定到接入类别7的例子。优先级最高的接入类别0的数据可在AIFS[0]过去之后被传送。优先级次高的接入类别1的数据可在“AIFS[1]=AIFS[0]+退避1个单位”(对应于1个退避时隙)过去之后被传送。
下面,类似地,接入类别2的数据可在“AIFS[2]=AIFS[0]+退避2个单位”过去之后被传送,接入类别3的数据可在“AIFS[3]=AIFS[0]+退避3个单位”过去之后被传送。此外,接入类别4的数据可在“AIFS[4]=AIFS[0]+退避4个单位”过去之后被传送,接入类别5的数据可在“AIFS[5]=AIFS[0]+退避5个单位”过去之后被传送。此外,接入类别6的数据可在“AIFS[6]=AIFS[0]+退避6个单位”过去之后被传送,接入类别7的数据可在“AIFS[7]=AIFS[0]+退避7个单位”过去之后被传送。
[EDCA的优先级设定的例子]
下面,说明利用多个PES,对图像数据生成单元711或NAL生成单元713生成的NAL进行分组分类,并对于每个分类设定EDCA的优先级的方法。
图26是示意图解说明按照本技术的第二实施例,当信息处理设备710进行传输处理时的媒体数据的流动的示图。
图27是示意图解说明按照本技术的第二实施例,将由信息处理设备710传送的无线分组的生成例子的示图。具体地,在图27的底部,图解说明了利用可分级视频编码(SVC)生成的基本层的无线分组的生成例子。在图27的中间,图解说明了从SVC生成的增强层的无线分组的生成例子。在图27的顶部,图解说明了利用音频编解码器编码的音频数据的无线分组的生成例子。
如图27中图解所示,从SVC生成的基本层和增强层,以及利用音频编解码器编码的音频数据被映射到独立的PES。PES生成单元714关于每个PES,复用多个分组,TS生成单元715把复用的分组分成TS分组。图27中例示的H.222是用于生成TS分组的标准,不过,可以使用另外的生成方法。
RTP生成单元716进行对TS生成单元715生成的TS分组进行RTP打包,并进行复用的处理。分组生成单元717作为IP分组地形成RTP分组。分组生成单元717进行在IP分组的IP报头的服务种类(TOS)字段,写入优先级信息的处理。通过所述写入处理,在生成无线分组的处理中,能够从IP分组的IP报头的TOS字段,把优先级信息通知分组生成单元717的EDCA功能。因而,在无线传输中,能够高概率地传送优先级高的分组。
[无线分组的处理例子]
下面说明当交换信息处理设备710生成的无线分组时的处理方法。
[依据每个PES的序列号的重排处理例子]
图28是示意图解说明按照本技术的第二实施例,由信息处理设备710生成的无线分组的交换例子的示图。在图28的左面,示意图解说明传输侧信息处理设备(信息处理设备710)的处理内容,在图28的右侧,示意图解说明接收侧信息处理设备的处理内容。
图29是图解说明按照本技术的第二实施例,由信息处理设备710生成的PES的帧格式的例子的示图。
图28图解说明其中按照无线电波传播环境,无线物理层处理的重传处理中的分组接收顺序和从信息处理设备710的RTP生成单元716的输出时间不同的例子。
在接收侧信息处理设备的MAC层中,通常进行以致相同PES中的分组顺序正常的操作。另一方面,即使在相同流中,也不能确保PES之间的分组顺序。于是,接收侧信息处理设备进行重排(依据序列号的重排处理(ReOrder处理)),以致PES之间的分组顺序变成原始次序。必须进行重排处理(依据序列号的重排),以把PES的分配中的传输优先级返回给NAL生成单元713。
在重排处理(依据序列号的重排)中,可以利用存在于RTP分组的序列号字段中的编号,或者PES分组的DTS信息(例如,图29中所示的附图标记770内的信息),确定顺序。
[QoS传输中的传输和接收的互换例子(各个PES的缓冲的例子)]
图30是示意图解说明按照本技术的第二实施例,由信息处理设备710生成的无线分组的互换例子的示图。在图30的左侧,示意图解说明传输侧信息处理设备(信息处理设备710)的处理内容,在图30的右侧,示意图解说明接收侧信息处理设备的处理内容。
图28图解说明其中一次进行重排处理(依据序列号的重排处理)的例子。不过在图30中,不一次进行重排处理(依据序列号的重排处理),而是图解说明逐步进行的处理方法。
这里,为了进行图30中图解所示的处理,接收侧信息处理设备具有用于每个PES的PES管理存储区域。这样,通过包括用于每个PES的PES管理存储区域,当在存储区域写入分组时,各个分组在各个对应的存储区域被写入。于是,能够恢复PES之间的分组顺序。于是,例如,即使当PES之间的分组顺序被调换时,也能够自然地恢复PES之间的分组顺序。当进行从各个存储区域的读取处理,并把分组传送给解码器时,理想的是从PES分组的DTS报头(例如,图29中所示的附图标记770内的信息)确定读取顺序或时间。
[传输和接收之间的控制分组的互换例子]
图31是示意图解说明按照本技术的第二实施例,由信息处理设备710生成的无线分组的交换例子的示图。在图31的左侧,示意图解说明传输侧信息处理设备(信息处理设备710)的处理内容,在图31的右侧,示意图解说明接收侧信息处理设备的处理内容。
图31图解说明其中在传输侧信息处理设备和接收侧信息处理设备之间,在移动到后续PES之前,把接收确认(Acknoledge)分组从接收侧信息处理设备传送给传输侧信息处理设备的处理的例子。
当接收侧信息处理设备进行解码PES分组的处理时,在相同PES内,使分组顺序恢复,随后接收分组。于是,在所有相同PES分组被接收的时刻,接收侧信息处理设备向传输侧信息处理设备传送接收确认(Acknoledge)分组。
收到接收确认(Acknoledge)分组的传输侧信息处理设备开始传送优先级低一级的PES。传输侧信息处理设备预先保持优先级最高的PES给定时间,以便传送该PES。即使当在所述给定时间过去之后,传输侧信息处理设备未传送优先级最低的分组时,传输侧信息处理设备也从传输缓冲器删除所有后续分组,然后从优先级最高的PES开始传输处理。
例如,在SVC方式的无线视频传输的情况下,给定时间可被定义为图像数据的基本层传输间隔。在能够传送基本层的时刻,可以进行停止增强层或者音频数据的传输,并优先基本层的传输的处理。
例如,在AVC方式的无线视频传输的情况下,给定时间可被定义为图像数据的I画面传输间隔。在能够传送I画面的时刻,可以进行停止P画面或B画面的传输,并优先I画面的传输的处理。
<3.第三实施例>
在本技术的第三实施例中,将主要说明多接收分集设定方法,多接收分集变更方法,和内容保护设定方法。
[拓扑和多频带工作环境下的多接收分集设定方法和多接收分集变更方法]
例如,在毫米波频带的通信(例如,60GHz)中,能够确保宽带宽。于是,就传输来说,数据传输速率可以相当快。由于波长较短,因此能够减小安装的设备(包括天线)的尺寸。
不过,在毫米波频带的通信中,降雨或大气中的衰减较大。因而,存在使天线具有指向性,和增加距离的技术,比如波束成形。不过,在像被人遮挡之类不能确保链路的环境中,不能确保作为毫米波频带的特征的高速数据传输速率。因而,存在按照接收侧信息处理设备包括多个无线通信单元(接收单元)的方式,避免所述遮挡的方法。这种技术被称为多接收分集。
例如,设想其中在一个大型监视器上,显示多个图像(例如,主图像和副图像)的使用形式。在这种使用形式中,监视器具有大屏幕。于是,通过利用上述技术(多接收分集),安装多个无线通信单元的位置的间隔(安装间隔)可被扩大,于是,能够进一步改善优点。
不过,即使在这种使用形式的情况中,也必须进行基于整个拓扑的设定,比如多个发送端设备之中的作为多接收分集的链路的设定。于是,例如,在把多个发送端设备显示在一个聚集监视器上的系统中,重要的是如何设定多接收分集,和如何变更多接收分集。
[拓扑和多频带工作环境下的内容保护设定方法]
下面将考虑内容保护设定方法。例如,设想其中增加由IEEE802.11ad代表的60GHz无线网络系统,在多频带工作环境下需要链路控制的情况。这种情况下,控制对于在接收端设备中显示的多个图像,设定显示位置和频带的操作的控制方法重要。在如在多接收分集中一样,预先准备回避链路的拓扑中,设定内容保护的控制方法(还包括其切换方法)重要。
因而,在本技术的第三实施例中,将说明其中对于发送端设备和接收端设备之间的通信,进行适当控制的例子。
[通信系统的结构例子]
图32是图解说明按照本技术的第三实施例的通信系统1000的系统结构例子的方框图。
通信系统1000包括信息处理设备1010、1020和1030。通信系统1000对应于图1中图解所示的通信系统100。例如,信息处理设备1010对应于作为接收端设备的信息处理设备300,信息处理设备1020对应于作为发送端设备的信息处理设备200,信息处理设备1030对应于作为发送端设备的信息处理设备400。于是,下面部分省略与通信系统100相同的部分的说明。
在本技术的第三实施例中,将举例说明其中如图5中图解所示,主图像的显示面积大于副图像的显示面积的情况。在这种情况下,由于主图像具有比副图像大的分辨率,因此理想的是进行主图像的高质量视频传输,并进行副图像的标准质量视频传输。
在本技术的第三实施例中,将说明其中使用能够进行同时利用3种频道2.4GHz、5GHz和60GHz之中的多个频道的并行操作的信息处理设备的例子。
例如,为了进行主图像的高质量视频传输,需要选择能够进行高速数据传输速率的通信方式。因而,在本技术的第三实施例中,将说明其中使用遵守由60GHz代表的IEEE802.11ad标准的无线通信单元(例如,图32中图解所示的无线通信单元1011和1012)的例子。另一方面,当进行子图像的标准质量视频传输时,使用2.4GHz或5GHz的无线通信单元(例如,图32中图解所示的无线通信单元1013)。
这里,由于在用于主图像的IEEE802.11ad中,能够进行最大几个Gbps的高速传输,因此能够进行4K传输,而不限于作为分辨率的HD,从而IEEE802.11ad适合于高质量视频传输。然而如上所述,IEEE802.11ad采用使天线具有指向性,和增大距离的技术。于是,还设想其中如被人遮挡一样,不能确保链路的环境。因而,在本技术的第三实施例中,将说明其中在所述环境中,适当地设定多接收分集的例子(适当地对应于拓扑的变化的例子)。
具体地,假定信息处理设备1010包括3个无线通信单元1011-1013。如上所述,无线通信单元1011和1012被假定是遵守由60GHz代表的IEEE802.11ad标准的无线通信单元。无线通信单元1013被假定是2.4GHz或5GHz的无线通信单元。
这样,在本技术的第三实施例中,假定包括接收端设备(信息处理设备1010)的两个无线接口(60GHz的无线通信单元1011和1012)。即,接收端设备(信息处理设备1010)包括利用多接收分集进行接收的多个接收单元(60GHz的无线通信单元1011和1012)。当使用多接收分集时,所述多个接收单元(60GHz的无线通信单元1011和1012)被使用。因而,例如,即使当障碍物位于信息处理设备1010和无线通信单元1011之间(用虚线1015指示),从而发生链路断开时,在信息处理设备1010和无线通信单元1012之间(用虚线1016指示),也可回避链路。即,能够防止信息处理设备1010和1020之间的视频传输被中断。
这样,当利用多接收分集,进行从信息处理设备1020到信息处理设备1010的传输时,信息处理设备1020复制和传送给无线通信单元1011的图像数据相同的图像数据,并把分组传送给无线通信单元1012。
信息处理设备1010可根据无线通信单元1012接收的图像数据,插入无线通信单元1011接收的图像数据中丢失的分组。通过按照这种方式插入分组,能够使接收的数据尽可能地接近于信息处理设备1020传送的图像数据。信息处理设备1010根据经过插值处理的图像数据,生成主图像,使显示单元显示所述主图像。
信息处理设备1030可被连接到无线通信单元1013,以把图像数据传送给无线通信单元1013。这种情况下,信息处理设备1010根据无线通信单元1013接收的图像数据,生成副图像,并把所述副图像显示在显示单元上。
这样,例如,当信息处理设备1020进行相对于信息处理设备1010的主图像的高质量视频传输时,信息处理设备1010和1020之间的连接可被设定为1对2(用虚线1015和1016指示)。例如,当信息处理设备1030进行相对于信息处理设备1010的副图像的标准质量视频传输时,信息处理设备1010和1030之间的连接可被设定为1对1(用虚线1018指示)。
[信息处理设备(发送端设备)的各层之间的互换例子]
图33-36是示意图解说明按照本技术的第三实施例,信息处理设备1020的各层之间的数据的交换例子的示图。图33-36图解说明包含在信息处理设备1020中的存储器1101-1104之间的数据的互换例子。
应用存储器1101被假定是包含在信息处理设备1020中的应用存储器。存储器1102和1103被假定是包含在60GHz的无线通信单元220(示于图2中)的两个端口中的存储器。存储器1104被假定是包含在2.4GHz或5GHz的无线通信单元220的端口中的存储器。
[其中发送端设备是群组所有者(GO),接收端设备是客户端的例子]
图33和34图解说明其中发送端设备(信息处理设备1020)是GO,而接收端设备(信息处理设备1010)是客户端的情况的例子。图33和34图解说明其中通过变更主图像和副图像,变更拓扑的例子。即使当GO被AP代替,客户端被站(station)代替,下面说明的各个例子仍然成立。图33和34图解说明其中通过变更主图像和副图像,变更拓扑的例子。在图33中,使用在切换多接收分集的时候,把分组传送给任意一方的切换控制方法。在图34中,使用如上所述的复制传输分组的控制方法。首先,说明切换控制方法。
[其中在与60GHz的两个无线通信单元的连接状态下,进行链路切换控制的例子]
首先参考图33,说明其中在与接收端设备(信息处理设备1010)的60GHz的两个无线通信单元的连接状态下,发送端设备(信息处理设备1020)进行链路切换控制的例子。
首先,假定发送端设备(信息处理设备1020)的2.4GHz或5GHz的无线通信单元220传送数据(1111)。即,假定进行从发送端设备(信息处理设备1020)的无线通信单元220(2.4GHz或5GHz)到接收端设备(信息处理设备1010)的无线通信单元1013(2.4GHz或5GHz)的数据传输。例如,如用图32的虚线1017所示,进行数据传输。这种情况下,当显示在接收端设备(信息处理设备1010)的显示单元351上的副图像被变更成主图像时,从接收端设备(信息处理设备1010)向发送端设备(信息处理设备1020)传送拓扑切换通知。
这样,当副图像被变更成主图像,并从接收端设备(信息处理设备1010)传送拓扑切换通知时,发送端设备(信息处理设备1020)中的60GHz的无线通信单元220开始数据传输。即,从发送端设备(信息处理设备1020)的无线通信单元220(60GHz)到接收端设备(信息处理设备1010)的无线通信单元1011和1012(60GHz)的数据传输开始。这种情况下,发送端设备(信息处理设备1020)在与接收端设备(信息处理设备1010)的两个无线通信单元1011和1012(60GHz)的连接状态下,在依次切换链路的同时进行数据传输(1112和1113)。例如,在切换图32的虚线1015和1016的同时,进行数据传输。
这样,发送端设备(信息处理设备1020)能够在与接收端设备(信息处理设备1010)的两个无线通信单元1011和1012(60GHz)的连接状态下,进行切换控制,于是能够快速进行链路切换。
还设想其中数据传输不在接收端设备(信息处理设备1010)的两个无线通信单元1011和1012(60GHz)任意之一中的情况(两个无线通信单元都被中断的情况)。这种情况下,可利用对于无线通信单元1013(2.4GHz或5GHz)的IP传输,实现后退(fallback)。
当显示在接收端设备(信息处理设备1010)的显示单元351上的主图像被变更成副图像时,从接收端设备(信息处理设备1010)向发送端设备(信息处理设备1020)传送拓扑切换通知。
这样,当主图像被变更成副图像,并且从接收端设备(信息处理设备1010)传送拓扑切换通知时,发送端设备(信息处理设备1020)中的2.4GHz或5GHz的无线通信单元220开始数据传输。即,从发送端设备(信息处理设备1020)的无线通信单元220(2.4GHz或5GHz)到接收端设备(信息处理设备1010)的无线通信单元1013(2.4GHz或5GHz)的数据传输开始(1114)。例如,如用图32的虚线1017所示,进行数据传输。
[其中进行对于60GHz的两个无线通信单元的同时传输的例子]
下面参考图34,说明其中发送端设备(信息处理设备1020)进行对于接收端设备(信息处理设备1010)的60GHz的两个无线通信单元的同时传输的例子。
由于直到从接收端设备(信息处理设备1010)到发送端设备(信息处理设备1020)的拓扑切换通知的传输的处理(1115:拓扑切换通知)都与图33中图解所示的例子相同,因此,这里省略其说明。
这样,当副图像被变更成主图像,并且从接收端设备(信息处理设备1010)传送拓扑切换通知时,发送端设备(信息处理设备1020)中的60GHz的无线通信单元220开始数据传输。即,从发送端设备(信息处理设备1020)的无线通信单元220(60GHz)到接收端设备(信息处理设备1010)的无线通信单元1011和1012(60GHz)的数据传输开始。这种情况下,发送端设备(信息处理设备1020)进行对于接收端设备(信息处理设备1010)的两个无线通信单元1011和1012(60GHz)的数据的同时传输(1116和1117)。例如,如图32的虚线1015和1016中一样,同时进行数据传输。
这样,发送端设备(信息处理设备1020)进行对于接收端设备(信息处理设备1010)的两个无线通信单元1011和1012(60GHz)的数据的同时传输,于是,能够不考虑传输特性地进行传输处理。
当未在接收端设备(信息处理设备1010)的两个无线通信单元1011和1012(60GHz)任意之一中进行数据传输时,和图33中图解所示的例子中一样,利用对于无线通信单元1013的IP传输,可实现后退。
由于其中显示在接收端设备(信息处理设备1010)的显示单元351上的主图像被变更成副图像的情况与图33中图解所示的例子相同,因此这里省略其说明。为了判断链路之一或两者被断开,可以提供确认传输缓冲器的累积剩余量的功能。可以更自动地控制传输缓冲器的待机时间,当给定时间或更长时间过去时,数据可被删除,根据删除次数,可以判断断开或不稳定的链路。
[其中接收端设备是GO,发送端设备是客户端的例子]
图35和36图解说明其中接收端设备(信息处理设备1010)是GO,而发送端设备(信息处理设备1020)是客户端的例子。这里,当接收端设备是GO时,客户端的发送端设备可不连接到接收端设备的两个无线通信单元。因而,图35和36图解说明其中当进行对于60GHz的无线通信单元1011和1012的数据传输时,进行链路切换控制的例子。
首先参考图35,说明其中发送端设备(信息处理设备1020)进行对于接收端设备(信息处理设备1010)的60GHz的两个无线通信单元的数据传输的例子。
首先,假定发送端设备(信息处理设备1020)中的2.4GHz或5GHz的无线通信单元220传送数据(1121)。即,假定进行从发送端设备(信息处理设备1020)中的无线通信单元220(2.4GHz或5GHz)到接收端设备(信息处理设备1010)的无线通信单元1013(2.4GHz或5GHz)的数据传输。例如,如用图32的虚线1017所示,进行数据传输。这种情况下,假定显示在接收端设备(信息处理设备1010)的显示单元351上的副图像被变更成主图像。
这样,当副图像被变更成主图像时,发送端设备(信息处理设备1020)中的60GHz的无线通信单元220开始数据传输(1122和1123)。即,从发送端设备(信息处理设备1020)的无线通信单元220(60GHz)到接收端设备(信息处理设备1010)的无线通信单元1011和1012(60GHz)的数据传输开始(1122和1123)。这种情况下,发送端设备(信息处理设备1020)在接收端设备(信息处理设备1010)的两个无线通信单元1011和1012之间,利用60GHz的服务集标识符(SSID)依次进行切换的同时,进行数据传输(1122和1123)。例如,在切换图32的虚线1015和1016的同时,传送数据。
这样,在图35中图解所示的例子中,2.4GHz或5GHz,或者60GHz的所有接收端设备都是GO,于是能够减少当副图像被变更成主图像时的状态转移。由于在到主图像的切换之后,不变更使用频率,并且不进行扫描,因此能够缩短GO的切换时间。
下面将设想其中显示在接收端设备(信息处理设备1010)的显示单元351上的主图像被变更成副图像的情况。这样,当主图像被变更成副图像时,发送端设备(信息处理设备1020)中的2.4GHz或5GHz的无线通信单元220开始数据传输(1124)。即,从发送端设备(信息处理设备1020)的无线通信单元220(2.4GHz或5GHz)到接收端设备(信息处理设备1010)的无线通信单元1013(2.4GHz或5GHz)的数据传输开始(1124)。例如,如用图32的虚线1017所示,进行数据传输。
下面参考图36,说明其中发送端设备(信息处理设备1020)进行对于接收端设备(信息处理设备1010)的60GHz的两个无线通信单元的数据传输的例子。
由于直到从副图像到主图像的变更的处理(1125)与图35中图解说明的例子相同,因此这里将省略其说明。
这样,当副图像被变更成主图像时,发送端设备(信息处理设备1020)中的60GHz的无线通信单元220开始数据传输(1126和1128)。即,从发送端设备(信息处理设备1020)的无线通信单元220(60GHz)到接收端设备(信息处理设备1010)的无线通信单元1011和1012(60GHz)的数据传输开始(1126和1128)。这里,在图36中图解所示的例子中,假定进行2.4GHz或5GHz和60GHz下的透明连接。这种情况下,在60GHz的链路的切换期间,进行到2.4GHz或5GHz的后退(1127)。这样,通过在60GHz的链路的切换期间,进行到2.4GHz或5GHz的后退,即使当GO的切换时间被延长时,也能够不停止地在接收端设备(信息处理设备1010)的显示单元351上显示图像。
在图36中图解所示的例子中,和图35中图解所示的例子中一样,2.4GHz或5GHz,或者60GHz的所有接收端设备都是GO,于是能够减少当副图像被变更成主图像时的状态转移。
由于其中显示在接收端设备(信息处理设备1010)的显示单元351上的主图像被变更成副图像的情况与图35中图解所示的例子相同,因此这里省略其说明。
这样,在图33-36中图解所示的例子中,举例说明了其中发送端设备和接收端设备是GO和客户端的情况。不过,即使当发送端设备和接收端设备是PCP和站(STA)时,也可应用图33-36中图解所示的例子。可以进行从应用存储器1101到存储器1103和1104的同时传输。例如,如参考图20所述,当存在两条链路,即,从应用存储器1101到存储器1103的链路,和从应用存储器1101到存储器1104的链路时,传输速率不同。于是,如图19中图解所示,通过把增强层从应用存储器1101分配给存储器1103,把基本层从应用存储器1101分配给存储器1104,可以进行同时传输。当进行同时传输时,在复制之后,可以进行视频压缩处理,压缩率低的视频可从应用存储器1101被传送给存储器1103,压缩率高的视频可从应用存储器1101被传送给存储器1104。
[信息处理设备(发送端设备)的操作例子]
图37是图解说明按照本技术的第三实施例,由信息处理设备1020进行的数据传输处理的处理过程的例子的流程图。在该处理过程中,将说明对应于图36的数据传输处理的例子。
首先,假定显示在信息处理设备1010(发送端设备)中的图像从副图像被变更成主图像(步骤S2051)。这种情况下,用60GHz的链路开始操作,分组被传送给IP#1L2存储器1102(步骤S2052)。随后,判定IP#1L2存储器1102的60GHz的链路是否不稳定(步骤S2053)。当所述链路稳定时,处理进入步骤S2057。
当IP#1L2存储器1102的60GHz的链路不稳定时(步骤S2053),确认2.4GHz或5GHz的链路的吞吐量(步骤S2054)。随后,视频速率被降到该吞吐量(步骤S2055)。随后,IP#1L2存储器1102的链路被断开(步骤S2056)。
随后,进行与IP#2L2存储器1103的链路的连接(步骤S2057)。随后,判断IP#2L2存储器1103的60GHz的链路是否不稳定(步骤S2058)。当所述链路不稳定时,处理返回步骤S2052。即,再次进行连接,并不断进行试验,直到60GHz的任意链路稳定为止。
当IP#2L2存储器1103的60GHz的链路稳定时(步骤S2058),分组被传送给IP#2L2存储器1103(步骤S2059)。随后,测量60GHz的链路的吞吐量(步骤S2060)。随后,数据传输从2.4GHz或5GHz被变更到IP#2L2存储器1103的60GHz的链路(步骤S2061)。随后,视频速率被增大到通过测量获得的吞吐量(步骤S2602)。
[信息处理设备(发送端设备)的操作例子]
下面,说明信息处理设备的操作例子。这里,将说明其中接收端设备(信息处理设备1010)是GO,而发送端设备(信息处理设备1020)是客户端的情况的例子。
这里,作为在遵守由60GHz代表的IEEE802.11ad标准的两个无线通信单元1011和1012之间进行的数据传输处理的操作例子,将说明下述两种((a)和(b))操作例子:
(a)其中设定对每条链路来说不同的媒体接入控制(MAC)地址的情况的操作例子:MAC地址是用于识别利用无线通信,进行通信的设备的标识信息的例子;和
(b)其中MAC层管理实体(MLME)单一,与链路的数目无关,只有一个MAC地址可见的情况的操作例子。
首先参考图38,说明(a)其中设定对每条链路来说不同的MAC地址的情况的操作例子。将参考图41-44,详细说明这种情况下的内容保护的设定(链路内容保护设置)。
图38是图解说明按照本技术的第三实施例,由信息处理设备1020进行的数据传输处理的处理过程的例子的流程图。图38中图解所示的处理过程是图12中图解所示的处理过程的变形例。于是,将部分省略与图12中图解所示的处理过程共同的处理过程的说明。在图38中图解所示的处理过程中,如上所述,将说明在遵守由60GHz代表的IEEE802.11ad标准的两个无线通信单元1011和1012之间进行的数据传输处理的例子。
最初的各个处理(步骤S971-S975)对应于图12中图解所示的处理(步骤S901-S905)。这里,信息处理设备1020与两个无线通信单元1011和1012进行数据传输处理。于是,信息处理设备1020与一个无线通信单元(例如,无线通信单元1011)进行各个处理(步骤S971-S975),随后与另一个无线通信单元(例如,无线通信单元1012)进行各个处理(步骤S971-S975)。
在步骤S975,进行完成发送端设备(信息处理设备1020)和接收端设备(信息处理设备1010)的两个无线通信单元1011和1012之间的视频和音频传输设定的处理,而不是流传输。即,步骤S975意味能够准备流传输的状态。
这里,当发送端设备传送为内容保护所需的源信息时,发送端设备以M3(RTSP请求)的形式,请求WFD_content_protection。当发送端设备收到可对应于所述请求的具有RTSP响应的信息时,发送端设备进行高带宽数字内容保护系统(HDCP)2.2的加密。
当能够准备流传输时(步骤S975),信息处理设备1020进行和信息处理设备1010的无线通信单元1011的与内容加密相关的密钥生成和密钥交换(步骤S976)。这样,通过在发送端设备(信息处理设备1020)和接收端设备的一个无线通信单元(无线通信单元1011)之间进行与内容加密相关的密钥生成和密钥交换,能够改善该无线链路的保密性。
随后,信息处理设备1020进行和信息处理设备1010的无线通信单元1012的与内容加密相关的密钥生成和密钥交换(步骤S977)。这样,通过在发送端设备(信息处理设备1020)和接收端设备的另一个无线通信单元(无线通信单元1012)之间进行与内容加密相关的密钥生成和密钥交换,能够改善该无线链路的保密性。
这样,在图32中图解所示的例子中,存在每条链路的往返时间(RTT)不同的可能性,对于每条链路进行内容加密。作为进行内容加密的方式,可以采用HDCP、数字传输内容保护(DTCP)-IP等。
随后,信息处理设备1020向信息处理设备1010的两个无线通信单元1011和1012进行多接收分集设定请求(步骤S978)。即,发送端设备向接收端设备的两个无线通信单元传送多接收分集设定请求(步骤S978)。
随后,信息处理设备1020判定是否从信息处理设备1010收到对于多接收分集设定请求的响应(步骤S979)。当未收到对多接收分集设定请求的响应时,继续进行监视。
当信息处理设备1020从信息处理设备1010收到对于多接收分集设定请求的响应时(步骤S979),信息处理设备1020准备多接收分集设定。在完成所述准备之后,信息处理设备1020向信息处理设备1010的两个无线通信单元1011和1012传送多接收分集设定模式的设定终止请求(步骤S980)。
随后,信息处理设备1020判定是否从信息处理设备1010收到对于多接收分集设定模式的设定终止请求的响应(步骤S981)。当未收到对于多接收分集设定模式的设定终止请求的响应时,继续进行监视。
当从接收端设备收到对于多接收分集设定模式的设定终止请求的响应时(步骤S981),可判定在发送端设备和接收端设备之间,多接收分集设定终止。于是,信息处理设备1020复制用于多接收分集的图像数据和音频数据,并开始传送分组(步骤S982)。即,信息处理设备1020把相同数据(图像数据和音频数据)的分组传送给信息处理设备1010的无线通信单元1011和1012(步骤S982)。
这里,设想其中在数据传输处理期间,发生拓扑的变更的情况(例如,其中中间信道的发送端设备被变更的情况)。这样,当发生拓扑的变更时(步骤S983),发生发送端设备和接收端设备之间的频道的变化,和多接收分集设定拓扑的变更,从而处理返回步骤S974(再协商处理)。相反,当未发生拓扑的变更时(步骤S983),信息处理设备1020判断是否进行传输停止操作(步骤S984)。当进行传输停止操作时(步骤S984),数据传输处理的操作结束。相反,当不进行传输停止操作时(步骤S984),处理返回步骤S983。
接下来参考图39,说明(b)其中MAC层管理实体(MLME)单一,与链路的数目无关,只有一个MAC地址可见的情况的操作例子。
图39是图解说明按照本技术的第三实施例,由信息处理设备1020进行的数据传输处理的处理过程的例子的流程图。图39中图解所示的处理过程是图38中图解所示的处理过程的变形例。于是,与图38中图解所示的处理过程相同的处理过程被赋予相同的附图标记,并部分省略其说明。
当能够准备流传输时(步骤S975),信息处理设备1020和信息处理设备1010进行通过对应于一个MAC地址的内容加密的密钥生成和密钥交换(步骤S985)。因而,能够改善该无线链路的保密性。
随后,信息处理设备1020开始传送图像数据和音频数据的分组(步骤S986)。对于后续处理(步骤S978-S982),进行和图38中图解所示的处理(S978-S982)相同的处理,作为比MLME低的层的处理。这样,当在其中切换和使用多个物理层的环境中,使用的IP层是公共的时,可以不管PHY的切换,不进行再认证或者局部性检查的重试。
[信息处理设备(接收端设备)的操作例子]
下面,说明接收侧的接收端设备(信息处理设备1010)的操作例子。
图40是图解说明按照本技术的第三实施例,由信息处理设备1010进行的数据接收处理的处理过程的例子的流程图。在图40中图解所示的处理过程中,如上所述,将说明利用遵守由60GHz代表的IEEE802.11ad标准的两个无线通信单元1011和1012的数据接收处理的例子。
首先,当收到模式表格请求时(步骤S2001),信息处理设备1010向传送模式表格请求的发送端设备传送命令信息(步骤S2002)。例如,所述命令信息被传送给信息处理设备1020。
随后,信息处理设备1010判断是否从传送所述命令信息的发送端设备,收到模式设定信息(步骤S2003)。当未收到模式设定信息时,继续进行监视。
当信息处理设备1010从发送端设备收到模式设定信息时(步骤S2003),信息处理设备1010终止和发送端设备的与图像数据和音频数据的传输相关的设定。这里,如上所述,信息处理设备1010利用两个无线通信单元1011和1012进行数据接收处理。于是,信息处理设备1010在一个无线通信单元(例如,无线通信单元1011)中进行各个处理(步骤S2001-S2003),随后在另一个无线通信单元(例如,无线通信单元1012)中进行所述各个处理。
这样,当通过所述各个处理(步骤S2001-S2003),在两个无线通信单元1011和1012中进行连接设定时,构成其中两个GO(两个无线通信单元1011和1012)被连接的拓扑。由于在当前状态下,存在一个站连接到两个AP的功能,因此假定在GO和客户端之间,实现相同的功能。这样,在拓扑的构筑之后,信息处理设备1010利用两个无线通信单元1011和1012,接收图像数据和音频数据(步骤S2004)。
这里,当信息处理设备1010与发送端设备进行利用多接收分集的通信时,与发送端设备进行和内容加密相关的密钥生成和密钥交换,关于多接收分集设定的信息的互换,等等。例如,进行与图38中图解所示的步骤S976-S981对应的处理。不过,图40中未例示这些处理,其说明将被省略。
当信息处理设备1010收到图像数据和音频数据时(步骤S2004),信息处理设备1010对接收的图像数据和音频数据进行插值处理(步骤S2005)。例如,信息处理设备1010利用另一个无线通信单元(例如,无线通信单元1012)接收的数据,对未被一个无线通信单元(例如,无线通信单元1011)接收的图像数据和音频数据进行插值处理。随同所述插值处理一起,可以进行重排处理(ReOrderDuplicate分组删除)。例如,在两个无线通信单元1011和1012中包含公共的接收缓冲器,以致能够进行重排处理。
随后,信息处理设备1010根据接收的数据,获得链路特性信息(步骤S2006)。这里,例如,链路特性信息是保存在图4中图解所示的无线电波传播测量信息393中的各项信息。例如,链路特性信息是PER、BER、分组的重传次数、吞吐量、丢帧、SIR、RSSI或SINR(例如,代替SIR使用)。这样,通过了解链路特性信息,当信息处理设备1010向发送端设备返回消息时,信息处理设备1010能够在两个无线通信单元1011和1012之间,确定哪条路径稳定。
信息处理设备1010可把获得的链路特性信息传送给发送端设备(步骤S2007)。即,信息处理设备1010可通过比较获得的链路特性信息,确保返回路径(步骤S2007)。
随后,信息处理设备1010根据接收的图像数据和音频数据,开始图像显示和音频输出(步骤S2008)。
这样,信息处理设备1010的控制单元(对应于图3中图解所示的控制单元370)进行以致根据关于发送端设备的能力信息,关于与发送端设备的通信的无线电波传播测量信息,和信息处理设备1010的使用,设定与发送端设备相关的流的多接收分集的控制。这里,当发送端设备(例如,信息处理设备1020)利用多接收分集传送流时,其它链路最好不受影响,即使事实是在多条链路之中,存在一条或多条不稳定的链路。因而,发送端设备的控制单元(例如,信息处理设备1020的控制单元(对应于图2中图解所示的控制单元240))进行待传送的流的缓冲管理。发送端设备的控制单元可使缓冲器的待机时间自动恒定(存活时间功能),并在恒定时间之后,从不稳定链路用传输缓冲器中删除流数据。发送端设备的控制单元可在根据重传次数等,能够确认链路变得不稳定的时刻,主动从缓冲器中删除不稳定链路用传输缓冲器。因而,能够不影响不稳定链路地操作流的多接收分集。
当发送端设备利用多接收分集,传送流时,信息处理设备1010的控制单元进行以致进行把所述流同时传送给多个接收单元的第一操作,或者在切换多个接收单元的同时,依次把所述流传送给每个接收单元的第二操作的控制。当发送端设备利用多接收分集传送流时,信息处理设备1010的控制单元进行以致进行在与多个接收单元相关的多条链路中的每条链路中,设定标识信息(例如,MAC地址)的第一操作,或者不管链路的数目,只在一项标识信息中设定标识信息的第二操作的控制。信息处理设备1010的控制单元进行以致在第一操作和第二操作之间,设定不同的内容保护的控制。
信息处理设备1020的控制单元(对应于图2中图解所示的控制单元240)进行以致根据基于关于信息处理设备1020的能力信息,关于与接收端设备的通信的无线电波传播测量信息,和接收端设备的使用,从接收端设备进行的控制,设定与接收端设备相关的流的多接收分集的控制。
在本技术的第三实施例中,说明了其中当主图像的显示面积大于副图像的显示面积时,使用多接收分集的例子。不过,在其它情况(除显示面积的大小以外的情况)下,也可以使用多接收分集。例如,当用户指定的显示图像被显示成高质量图像时,可以使用多接收分集。
在本技术的第三实施例中,说明了其中当使用多接收分集时,使用60GHz的数据传输方式的例子,不过,可以使用其它数据传输方式。例如,由于在5GHz,也存在由IEEE802.11ac代表的高速数据传输方式,因此可以使用该高速数据传输方式。可以使用除Wi-Fi以外的无线方式。
在图38中,说明了其中在步骤S976和S977的处理中,对于每条链路分别进行内容加密的例子,不过链路不局限于60GHz。例如,本技术的第三实施例也可适用于其中对于发送端设备,和接收端设备的一个无线通信单元,设定60GHz,并且对于发送端设备,和接收端设备的另一个无线通信单元,设定2.4GHz或5GHz的情况。
在本技术的第三实施例中,说明了其中作为用于两个无线通信单元1011和1012的处理方法,定义(a)和(b)的两种操作,在(a)和(b)两者中,对于每条链路生成并传送相同分组的例子。不过,本技术的实施例不限于分组的生成,而是选择具有良好特性的任意一条链路,而不使用多条链路,并利用所述链路传送图像数据和音频数据。例如,接收端设备用诸如接收分组时的PER之类的特性信息响应发送端设备,发送端设备可选择具有良好特性的链路,并传送分组。这样,当发送端设备选择具有良好特性的链路,并传送分组时,能够降低发送端设备和接收端设备任一中的电力消耗。
[多接收分集中的HDCP的例子]
在本技术的第三实施例中,如上所述,能够设定其中通过利用多接收分集,两条链路是可连接的环境。因而,下面将说明在其中两条链路是可连接的环境中,使用HDCP的情况的例子。
[信息处理设备(发送端设备)的操作例子]
图41是图解说明按照本技术的第三实施例,由信息处理设备1020进行的HDCP处理的处理过程的例子的流程图。在该处理过程中,将说明对应于图38的HDCP处理的例子。
首先,对于每个HDCP保护的接口端口,独立进行认证协议(步骤S2011-S2015)。具体地,判断从现在开始使用的接口端口是否在规定数之内(步骤S2011)。即,判断跳数(传输次数)是否在规定数之内(步骤S2011)。
当接口端口在规定数之内时(步骤S2011),判断对于所有接口端口的认证处理是否终止(步骤S2012)。例如,当对于每个接口端口,处理(步骤S2013-S2015)都终止时,把端口数加1,并判断接口端口是否在规定数之内。
相反,当对于所有接口端口,认证处理未终止时(步骤S2012),进行接口端口的认证和密钥交换(AKE)处理(步骤S2013)。AKE将参考图43详细说明。随后,进行接口端口的配对(步骤S2014)。所述配对将参考图43详细说明。随后,进行接口端口的局部性检查(步骤S2015)。所述局部性检查将参考图44详细说明。
当对于所有接口端口,认证处理都终止时(步骤S2012),判断会话密钥是否可被共同化(步骤S2016)。即,判断是否对于每个接口端口再生了会话密钥(步骤S2016)。例如,根据与作为传输对象的内容关联的附带信息(元信息),进行所述判断。
当会话密钥可被共同化时(步骤S2016),设定组播密钥(步骤S2017)。因而,在发送端设备和接收端设备之间互换组播密钥。例如,当在组播密钥方面不存在问题,原始内容未被复制,并且进行多接收分集时,情况被认为良好。
相反,当会话密钥不可被共同化时(步骤S2016),设定单播密钥(步骤S2018)。即,当不允许组播密钥时(步骤S2016),单独生成单播密钥(步骤S2018)。因而,在发送端设备和接收端设备之间互换单播密钥。
随后,判断对于所有接口端口的认证处理(HDCP保护的接口端口的认证处理)是否终止(步骤S2019)。当对于所有接口端口,认证处理未终止时(步骤S2019),进行接口端口的会话密钥交换(SKE)(步骤S2020)。SKE将参考图44详细说明。
相反,当对于所有接口端口,认证处理都终止时(步骤S2019),开始图像和音频传输(步骤S2021)。
随后,判断当前连接的链路是否不稳定(步骤S2022)。当当前连接的链路不稳定时(步骤S2022),链路被变更成不同的链路(步骤S2023)。相反,当当前连接的链路稳定时(步骤S2022),HDCP处理的操作结束。
[信息处理设备(发送端设备)的操作例子]
下面,说明对于其中两条链路是可连接的环境中的每条链路,使内容保护方式(版本)共同化的例子。
图42是图解说明按照本技术的第三实施例,由信息处理设备1020进行的HDCP处理的处理过程的例子的流程图。在该处理过程中,将说明对应于图39的HDCP处理的例子。即,将说明与在多接收分集中的相同频带下的内容保护相关的处理的例子。
首先,判断两条链路的HDCP版本是否一致(步骤S2031)。当所述版本一致时(步骤S2031),利用所述版本进行加密。相反,当版本不一致时(步骤S2031),利用低版本进行加密。于是,版本被调整到两条链路的HDCP版本之中的低版本(步骤S2032)。
随后,判断两条链路的频率是否是相同频率(步骤S2033)。例如,判断诸如2.4GHz、5GHz和60GHz频带之类的频带是否相同,在该处理中调整具有相同频带的不同信道。
当两条链路的频率是相同频率时(步骤S2033),判断多个信道是否同时被连接(步骤S2034)。当多个信道同时被连接时(步骤S2034),设定组播密钥(步骤S2035)。因而,在发送端设备和接收端设备之间互换组播密钥。相反,当多个信道未被同时连接时(步骤S2034),设定单播密钥(步骤S2036)。因而,在发送端设备和接收端设备之间互换单播密钥。
这样,由于关于两条链路的内容保护的互换终止,链路被加密,因此开始图像和音频传输(步骤S2037)。
随后,判定当前连接的链路是否不稳定(步骤S2038)。当当前连接的链路不稳定时(步骤S2038),链路被变更成不同的链路(步骤S2039)。相反,当当前连接的链路稳定时(步骤S2038),HDCP处理的操作结束。
当两条链路的频率不是相同频率(步骤S2033),并且不同的频带被用作另一条链路时,判断内容保护是否能够被两条链路复制(步骤S2040)。例如,根据与作为传输对象的内容关联的附带信息(元信息),进行所述判断。
这里,例如,在本技术的第三实施例中,说明了其中分组被两条链路复制,并被同时传送给无线通信单元的例子。不过,当频带不同时,可以使用在第一链路中测量的局部性检查结果。于是,这样的处理是必要的。
当内容保护不能被两条链路复制时(步骤S2040),利用使用链路的内容保护中的最新版本(步骤S2042)。相反,当内容保护能够被两条链路复制时(步骤S2040),在每条链路中设定单播密钥(步骤S2041和S2042)。在图42中图解所示的处理过程中,例如,传输侧的设备密钥和接收侧的设备密钥可被设定为一个,不过对于每条链路,公共秘密密钥或会话密钥可不同。
[与HDCP的链路加密相关的密钥交换例子]
下面说明与关于HDCP的链路加密的密钥交换相关的处理例子。
图43和44是图解说明按照本技术的第三实施例,在发送端设备和接收端设备之间进行的密钥交换处理的例子的序列图。
这里,当进行链路加密时,在以下(1)-(4)处理中,进行密钥交换:
(1)认证和密钥交换(AKE);
(2)配对;
(3)局部性检查;以及
(4)会话密钥交换(SKE)。
因而,下面参考图43和44,说明按照上述处理(1)-(4)的密钥交换处理的例子。
[AKE和配对]
下面参考图43,说明AKE和配对。图43a图解说明其中128位主密钥(km)不被保存的情况的例子,图43b图解说明其中128位主密钥(km)被保存的情况的例子。
AKE是认证协议的第一步骤。即使当以前完成了认证交换,HDCP发送器(设备A)也能够在任何时候发起认证。
HDCP发送器把新的64位伪随机值(rtx)作为认证起动消息AKE_Init的一部分传送给HDCP接收器(设备B)(751)。因而,起动新的HDCP会话的认证。
随后,HDCP发送器从HDCP接收器接收certrx值,和包括REPEATER的AKE_Send_Cert(752)。REPEATER指示连接的HDCP接收器是否是HDCP转发器。
这里,将参考图43a,说明其中128位主密钥(km)不被保存的情况的例子。
HDCP发送器利用Kpubdcp,验证证书上的签名。签名验证的失败意味认证的失败,从而HDCP发送器中断认证协议。HDCP发送器生成128位主密钥(km),并把AKE_No_Stored_km消息传送给HDCP接收器(753)。
随后,HDCP发送器从HDCP接收器接收包括64位伪随机值(rrx)的AKE_Send_rrx消息(754)。HDCP发送器从HDCP接收器接收包括256位H'的AKE_Send_H_prime消息(755)。该消息必须在Ekpub(km)(AKE_No_Stored_km)被传送给HDCP接收器之后的1秒内被接收。
下面参考图43b,说明其中128位主密钥(km)被保存的情况的例子。
HDCP发送器把包括128位Ekh(km),和与HDCP接收器的ReciverID相关的128位m的AKE_Stored_km消息传送给HDCP接收器(757)。
随后,HDCP发送器从HDCP接收器接收包括64位伪随机值(rrx)的AKE_Send_rrx消息(758)。HDCP发送器从HDCP接收器接收包括256位H'的AKE_Send_H_prime消息(759)。该消息必须在AKE_Stored_km被传送给HDCP接收器之后的200mS内被接收。
当该消息未在200ms内被接收,或者H和H'不相同时,判断认证失败,从而认证协议被中断。
[配对]
为了加速AKE处理,必须与具有AKE的HDCP发送器持续HDCP接收期地并发进行配对。
[局部性检查]
下面参考图44a,说明局部性检查。
通过生成64位暂用(nounce)随机数r_n,并把临时的64位伪随机数r_n传送给下游的HDCP接收器,HDCP发送器起动(761)。这种情况下,HDCP发送器按照临时的64位伪随机数r_n的传输,起动计时器。
HDCP接收器利用接收的临时的64位伪随机数r_n,计算“L'=HMAC-SHA256”(r_n,k_dXORr_rx)。随后,HDCP接收器向HDCP发送器传送LC_Send_L_prime消息(762)。
当HDCP发送器收到LC_Send_L_prime消息时(762),HDCP发送器利用和右侧的L'相同的公式计算L,并比较L和接收的L'。当L和L'不相等时,HDCP发送器判断局部性验证失败。
[SKE]
下面参考图44b,说明会话密钥交换(SKE)。
在局部性验证成功之后,HDCP发送器起动会话密钥交换(SKE)。
HDCP发送器HW生成128位伪随机数的会话密钥k_S,并HW生成64位伪随机数的r_iv。HDCP发送器利用滑动#6块,HW生成作为ctr=2的128位dkey_2。HDCP发送器利用dkey_2加密k_S(E_dkey(k_S)=k_SXOR(dkey_2XORr_rx))。
随后,HDCP发送器把r_iv和加密的会话密钥E_dkey(k_s),作为SKE_Send_Eks消息的一部分传送给HDCP接收器(763)。HDCP发送器把加密的会话密钥传送给HDCP接收器,使得在加密的会话密钥的传输之后的200mS之后,能够进行HDCP加密。
HDCP接收器利用滑动#6块,生成作为ctr=2的128位dkey_2。HDCP接收器解码k_S(k_S=E_dkey(k_S)OR(dkey_2XORr_rx))。
利用会话密钥ks加密的内容开始从HDCP发送器被传送给HDCP接收器(764)。
这里,HDCP加密必须只有在AKE,局部性验证,和SKE阶段的成功终止之后才是可能的。
HDCP发送器可对应于利用多个HDCP保护的接口端口,与HDCP接收器的同时连接。在所有HDCP保护的接口端口之间,可以共享相同的会话密钥和riv(ks和rtx的3.8唯一性)。
不过,HDCP发送器被认为在连接的HDCP接收器之间,确保不同的km和rtx值。
这样,信息处理设备1010的控制单元(对应于图3中图解所示的控制单元307)进行以致根据关于发送端设备的能力信息,关于与发送端设备的通信的无线电波传播测量信息,和信息处理设备1010的使用,设定与发送端设备相关的流的内容保护的控制。这种情况下,当在用于利用多接收分集传送流的多个频道中使用的内容保护的版本不同时,信息处理设备1010的控制单元进行以致设定与各个版本之中的低版本相关的内容保护的控制。信息处理设备1010的控制单元(对应于图3中图解所示的控制单元307)可进行以致根据关于发送端设备的管理信息(例示于图4中),选择发送端设备的HDCP设定方法的控制。
[通信系统的结构例子]
图45是图解说明按照本技术的第三实施例,包含在通信系统中的各个信息处理设备的功能结构例子的方框图。图45图解说明充当传输侧信息处理设备(发送端设备)的信息处理设备720,和充当接收侧信息处理设备(接收端设备)的信息处理设备730。
信息处理设备720是当使图23中图解所示的信息处理设备710的一部分变形时的信息处理设备。于是,与信息处理设备710相同的部分被赋予相同的附图标记,其说明被省略。
包含在信息处理设备730中的各个单元(天线731-SEI生成单元744)对应于包含在信息处理设备720中的各个单元(天线728-图像数据生成单元711)。例如,包含在信息处理设备730中的生成单元(图像数据生成单元711-无线分组生成单元726)对应于包含在信息处理设备720中的解码单元(图像数据解码单元743-无线分组解码单元734)。于是,信息处理设备730的说明将被省略。
显示单元745例如是显示基于图像数据解码单元743解码的图像数据的图像的显示设备。例如,作为显示单元745,可以使用诸如有机EL显示器,晶体LED显示器或LCD之类的显示面板。图45图解说明显示单元745被设置在信息处理设备730之外的例子,不过,显示单元745可被设置在信息处理设备730之内。
图45图解说明其中分组生成单元722对应于两种无线方式的例子(其中对2.4GHz、5GHz和60GHz设定一个IP地址的例子)。即,图45图解说明除其中对于2.4GHz或5GHz,设定一个IP地址,对于60GHz,设定一个IP地址的例子以外的方式的例子。图45中图解所示的例子对应于图39中图解所示的例子。
信息处理设备720包括加密生成单元721、分组生成单元722及天线727和728。这些单元由控制单元(对应于图2中图解所示的控制单元240)控制。分组生成单元722包括UDP生成单元723、TCP生成单元724、IP生成单元725和无线分组生成单元726。两个天线727和728连接到无线分组生成单元726。这里,假定天线727是对应于60GHz的天线,假定天线728是对应于2.4GHz或5GHz的天线。
这样,即使当包括两个天线727和728时,直到IP生成单元725的各个处理可被理解成一个块。无线分组生成单元726对应于两个频道。
在IEEE802.11ad中,这种结构被定义为快速会话传输(FST)的透明功能。在比IP生成单元725高的各层中,可在不了解两个天线727和728的特性的情况下,进行无线视频传输。
在IEEE802.11ad中,未记载无线分组生成单元726的切换判断的细节。于是,例如,可根据PER、BER、分组的重传次数、吞吐量等,进行所述判断。例如,可根据丢帧、SIR、RSSI等,进行所述判断,或者可以代替SIR,使用SINR。
这里,设想在其中任意一条无线线路被连接的环境中,传送需要内容保护的图像数据的情况。这里,为了进行说明,将设想其中经天线727,产生连接的情况。天线727和728的连接顺序不受限制,可以首先连接任意天线。当传送需要内容保护的图像数据时,可以连接任意无线线路。
和图41中图解所示的例子中一样,加密生成单元721只对经天线727连接的无线线路进行一次加密处理。在加密处理中,完成传输侧信息处理设备720和接收侧信息处理设备730之间的密钥交换,从而能够传送利用密钥加密的图像数据。在本技术的第三实施例中,即使当无线线路从天线727被变更到天线728时,在IP生成单元725的端口断开之前,也可使用在密钥交换中变更的密钥。
另一方面,在无线分组生成单元726的处理中,比IP生成单元725高的各层可能不了解在物理层(第一层)中,是使用60GHz,还是使用2.4GHz或5GHz。如上所述,在60GHz和2.4GHz或5GHz之间,流传输频带相差约10倍。于是,当使用2.4GHz或5GHz时,必须增大图像数据的压缩率。因而,在本技术的第三实施例中,进行以致无线分组生成单元726向图像数据生成单元711(或SEI生成单元712)实时通知信道变更信息或者当前状况下设定的信道的控制。即,信息处理设备720的控制单元(对应于图2中图解所示的控制单元240)进行以致向比与IP分组生成相关的层更高的层通知关于多个频道之中,用于传送流的频道的信息的控制。
例如,对于由SEI生成单元712生成的信息,尽管数据传输速率较低,仍然要求稳定性。于是,最好以2.4GHz或5GHz,而不是60GHz传送由SEI生成单元712生成的信息。因而,无线分组生成单元726利用IP分组的IP报头的服务种类(TOS)字段,用高稳定性的频道传送由SEI生成单元712生成的信息。即,无线分组生成单元726进行在IP分组的IP报头的TOS字段,写入频道设定信息的写入处理。通过所述写入处理,在生成无线分组的处理中,可根据IP分组的IP报头的TOS字段,设定反映更高层的意图的频道。即,信息处理设备720的控制单元(对应于图2中图解所示的控制单元240)进行以致在IP分组的IP报头的TOP字段,写入和用于传送流的频道的设定有关的设定信息的控制。因而,能够从传输层指定待使用的物理层。即,信息处理设备720的控制单元(对应于图2中图解所示的控制单元240)可进行以致从传输层指定待使用的物理层的控制。
本技术的实施例不限于图45中图解所示的例子。例如,在图45中,说明了其中只有两个天线连接到无线分组生成单元726的例子,但是天线的数目不限于对应的频带。例如,当利用使用多入多出(MIMO)方式的IEEE802.11n/ac,进行传输时,多个天线和一个信道一起使用。除了两个频道之外,还可以安装用于与公共线路连接的协议,比如蓝牙(注册商标)或LTE。
在图45中,说明了其中IP生成单元725设定一个IP地址的例子,不过,本技术的实施例不限于此。例如,可以设定一个MAC地址,或者可以设定另一个固定IP。
在图45中,说明了其中无线分组生成单元726利用IP报头的TOS字段,用稳定性高的频道传送SEI生成单元712生成的信息的例子,不过本技术的实施例不限于此。例如,即使当使用快速会话传输(FST)的透明功能时,也可用TCP分组或UDP分组设定频道。可按照连接端口设定频道,或者可在分组报头的一部分中设置频率设定字段。
在本技术的第三实施例中,作为其中进行内容保护处理的拓扑,设想了图35和36,以便说明,不过,本技术的实施例不限于此。本来,如图33和34中图解所示,具有在其中在内容保护中设定1:N(N等于或大于2)的多接收环境中,进行处理的优点。例如,其中进行内容传输的信息处理设备具有AP或PCP功能,或者GO功能的拓扑环境是更可取的。例如,当传输侧信息处理设备1020起GO作用时,无线通信单元1011和无线通信单元1012可被连接为客户端。从而,这种拓扑是即使当使用非共点(non-concurrent)设备时,也能够构成的拓扑。尽管取决于设备,不过存在对其来说,一个信息处理设备只能够连接到一个GO的设备。于是,这种情况下,在图33或34中图解所示的拓扑中,进行内容保护处理。
根据发送端设备或接收端设备是否是移动设备,可以判断是在进行切换的同时,设定传输(切换分集),还是设定多接收分集。即,可以判断是用仅仅一个PHY,降低电力消耗,还是使用多个PHY。当设备是移动设备时,在副图像的时候,可以进行暂停。
上面说明了能够进行其中可同时使用多个频道的并行操作的信息处理设备。例如,在图32中图解所示的例子中,信息处理设备1020可对于信息处理设备1010的无线通信单元1011和1012,起GO的作用,信息处理设备1010的无线通信单元1013可对于信息处理设备1030,起GO的作用。信息处理设备1020对于信息处理设备1010的无线通信单元1011和1012,可起GO的作用,对于信息处理设备1010的无线通信单元1013,还可起P2P客户端的作用。
具体地,在图32中图解所示的例子中,假定实线箭头1015和1016指示当信息处理设备1020对于信息处理设备1010的无线通信单元1011和1012起GO作用时,各个设备之间的关系。假定虚线箭头1017指示当信息处理设备1020对于信息处理设备1010的无线通信单元1013起P2P客户端作用时,各个设备之间的关系。假定虚线箭头1018指示当信息处理设备1030对于信息处理设备1010的无线通信单元1013起P2P客户端作用时,各个设备之间的关系。
作为并行操作,例如,可以使用时分并行功能和同时使用并行功能中的任意一种。
图32图解说明其中在一个接收端设备(信息处理设备1010)和多个发送端设备(信息处理设备1020和1030)之间进行通信的例子。不过,即使当在多个接收端设备和多个发送端设备之间进行通信时,也可应用本技术的第三实施例。因而,图46和47图解说明其中在多个接收端设备和多个发送端设备之间进行通信的例子。
图46和47是图解说明按照本技术的第三实施例的通信系统1200的系统结构例子的方框图。图46和47图解说明其中在多个接收端设备(信息处理设备1010和1040)和多个发送端设备(信息处理设备1020和1030)之间进行通信的情况的例子。图46和47是其中图32的一部分被变形的示图。具体地,图解说明在图32中例示的通信系统1000中,增加信息处理设备1040的通信系统的例子(通信系统1200)。于是,在图46和47中,和图32中图解所示的通信系统1000相同的部分被赋予相同的附图标记,其说明被省略。
在图46中,假定实线箭头1021指示当信息处理设备1020对于信息处理设备1010的无线通信单元1012,起GO作用时的各个设备之间的关系。假定实线箭头1022指示当信息处理设备1020对于信息处理设备1040的无线通信单元1041起GO作用时,各个设备之间的关系。假定虚线箭头1023指示当信息处理设备1020对于信息处理设备1010的无线通信单元1013起P2P客户端作用时,各个设备之间的关系。假定虚线箭头1031指示当信息处理设备1030对于信息处理设备1010的无线通信单元1013起P2P客户端作用时,各个设备之间的关系。
例如,如实线箭头1021和1022所示,一个发送端设备(信息处理设备1020)可把相同的图像数据同时传送给多个接收端设备(信息处理设备1010和1040)。这种情况下,信息处理设备1020可把待传送的图像数据复制到一个接收端设备(例如,信息处理设备1010),并且可把图像数据传送给另一个接收端设备(例如,信息处理设备1040)。不过,作为传输对象的图像数据不限于相同的图像数据。例如,不同种类的图像数据可被同时传送(或者基本同时地传送)给多个接收端设备(信息处理设备1010和1040)。
这里,依据来自任意信息处理设备的拓扑切换通知,连接到多个P2P客户端的GO可被变更。例如,在图46中图解所示的例子中,可从信息处理设备1010的无线通信单元1013输出拓扑切换通知。依据拓扑切换通知,连接到起P2P客户端作用的信息处理设备1010的无线通信单元1012,和信息处理设备1040的无线通信单元1041的GO可从信息处理设备1020被变更成信息处理设备1030。图47中图解说明了在所述变更之后,各个设备之间的关系。
在图47中,假定实线箭头1032指示当信息处理设备1030对于信息处理设备1010的无线通信单元1012起GO作用时,各个设备之间的关系。假定实线箭头1033指示当信息处理设备1030对于信息处理设备1040的无线通信单元1041起GO作用时,各个设备之间的关系。
在图46和47中,图解说明了其中连接到一个GO的P2P客户端的最大数为2个单元(信息处理设备1010和1040)的例子。不过,即使当P2P客户端的数目为3个或更多单元时,也可应用本技术的第三实施例。在图46和47中,图解说明了其中在多个接收端设备(信息处理设备1010和1040)和多个发送端设备(信息处理设备1020和1030)之间进行通信的情况的例子。不过,即使当在多个接收端设备和一个发送端设备之间进行通信时,也可应用本技术的第三实施例。即,本技术的第三实施例可适用于其中存在信息处理设备1030的情况和其中不存在信息处理设备1030的情况中的任意一种情况。
信息处理设备1010或信息处理设备1040的使用不限于上面的说明。例如,操作信息处理设备1010或信息处理设备1040的显示状态,并发出把所述设备显示成多屏显示的指令也可被理解成信息处理设备1010或信息处理设备1040的使用。例如,操作信息处理设备1010或信息处理设备1040的显示状态,并如扩展显示似的变更各个设备的显示状态也可被理解成信息处理设备1010或信息处理设备1040的使用。例如,通过另一个信息处理设备,对于信息处理设备1010或信息处理设备1040进行变更GO的操作也可被理解成信息处理设备1010或信息处理设备1040的使用。所述另一个信息处理设备例如是可利用有线通信或无线通信,连接到信息处理设备1010或信息处理设备1040,以操作该信息处理设备的信息处理设备(例如,遥控器、平板终端或智能电话机)。
这样,各个信息处理设备的控制单元可进行以致根据关于另一个信息处理设备的能力信息,和信息处理设备的使用,设定与另一个信息处理设备相关的流的多接收的控制。
这样,在本技术的第三实施例中,可适当地设定或切换多接收分集,以按照连接形式,改善其中需要高质量视频传输的链路中的鲁棒容错。这样,通过控制所述设定或切换,能够稳定地传送和接收高质量视频。在其中如多接收分集中一样,准备回避链路的拓扑中,可以适当地设定或切换内容保护。这样,通过控制所述设定和切换,能够进行其中对于需要内容保护的视频,鲁棒容错得到改善的通信。
按照本技术的实施例,根据来自多个发送端设备的流进行输出的接收端设备通过进行流的分辨率的调整,传输停止,频道的变更等,能够减小不必要的电力消耗。因而,能够实现对移动设备来说适当的通信。通过改善频道的频带使用效率,能够实现其中鲁棒性得到改善的通信。
即,管理多条链路的接收端设备通过进行调度,可降低移动设备的电池消耗。整个系统可被调度,以致能够利用多个频道的移动设备只利用一个频道。即使在其中必须完全切换频道之间的差异的拓扑中,通过按照设备信息(例如,设备是否是移动设备),使切换更容易,也能够稳定地实现传输。即使当频道之间存在差异时,也能够适当地互换各项信息(管理信息和用户信息)。在本技术的实施例中,说明了其中对于两个发送端设备,存在两条链路的拓扑的例子。不过,本技术的实施例并不局限于此。例如,当设备的数目为2时,必须进行与对应于设备的数目的链路相关的流传输控制(例如,数据传输速度控制和可分级传输速率控制),从而状态转移相当多。于是,控制困难,但是能够获得好处。例如,本技术的实施例也可适用于其中连接两个或更多发送端设备的拓扑。
显示从多个发送端设备传送的图像的接收端设备(例如,显示器)能够适当地显示从每个发送端设备传送的图像。例如,通过设定从各个发送端设备传送的图像的鲁棒容错(多接收分集),能够适当地显示各个图像。例如,通过进行内容保护设定,或者具有大动态范围的无线层或多频带操作中的流传输控制(例如,数据传输速度控制和可分级传输速率控制),能够适当地显示每个图像。
即,例如,当多个发送端设备连接到一个聚集监视器(例如,具有80英寸大屏幕的监视器,或者其中捆束多个小型监视器的监视器),能够按照各种拓扑,进行适当的设定。
本技术的实施例可适用于具有无线通信功能的其它设备。例如,本技术的实施例可适用于具有无线通信功能的成像设备(例如,数字静态照相机或数字摄像机(例如,摄像机一体式记录器)。例如,本技术的实施例还可适用于具有无线通信功能的显示设备(例如电视机、投影仪和个人计算机),或者便携式信息处理设备(例如智能电话机和平板终端)。
<4.应用例子>
本公开的技术可适用于各种产品。例如,信息处理设备200、300、400等可被实现成诸如智能电话机、平板个人计算机(PC)、笔记本PC、便携式游戏终端或数字照相机之类的移动终端,诸如电视接收机、打印机、数字扫描仪或网络存储器之类的固定终端,或者诸如车载导航设备之类的车载终端。另外,信息处理设备200、300、400等可被实现成进行机器间(M2M)通信的终端(这些终端也被称为机器式通信(MTC)终端),比如智能仪表、自动售货机、远程监视设备或销售点(POS)终端。此外,信息处理设备200、300、400等可以是安装在这些终端中的无线通信模块(例如,在一个小片中构成的集成电路模块)。
[4-1.第一应用例子]
图48是示出本公开的技术可适用于的智能电话机900的示意结构的例子的方框图。智能电话机900包括处理器901、内存902、存储器903、外部连接接口904、摄像头906、传感器907、麦克风908、输入设备909、显示设备910、扬声器911、无线通信接口913、天线开关914、天线915、总线917、电池918和辅助控制器919。
处理器901可以是例如中央处理器(CPU)或片上系统(SoC),控制智能电话机900的应用层和其它层的功能。内存902包括随机存取存储器(RAM)和只读存储器(ROM),保存由处理器901执行的程序,以及数据。存储器903可包括诸如半导体存储器或硬盘之类的存储介质。外部连接接口904是用于连接外部设备,比如存储卡或通用串行总线(USB)设备和智能电话机900的接口。
摄像头906包括诸如电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)之类的图像传感器,生成拍摄的图像。传感器907可包括诸如测量传感器、陀螺传感器、地磁传感器和加速度传感器之类的一组传感器。麦克风908把输入智能电话机900的声音转换成音频信号。输入设备909例如包括配置成检测显示设备910的屏幕上的触摸的触摸传感器、小键盘、键盘、按钮或开关,接收从用户输入的操作或信息。显示设备910包括诸如液晶显示器(LCD)和有机发光二极管(OLED)显示器之类的屏幕,显示智能电话机900的输出图像。扬声器911把从智能电话机900输出的音频信号转换成声音。
无线通信接口913支持诸如IEEE802.11a、11b、11g、11n、11ac和11ad之类无线LAN标准中的一种或多种,以进行无线通信。在基础结构模式下,无线通信接口913可通过无线LAN接入点,与另外的设备通信。另外,在ad-hoc模式下,无线通信接口913可直接与另外的设备通信。无线通信接口913一般可包括基带处理器、射频(RF)电路和功率放大器。无线通信接口913可以是其中集成保存通信控制程序的存储器,执行所述程序的处理器,和相关电路的单片模块。除了无线LAN方式之外,无线通信接口913还可支持其它各种无线通信方式,比如近场无线通信方式,邻近无线通信方式和蜂窝通信方式。天线开关914在包含在无线通信接口913中的多个电路(例如用于不同无线通信方式的电路)之间,切换天线915的连接目的地。天线915具有无线通信接口913用于无线信号的传送和接收的一个或多个天线单元(例如,构成MIMO天线的多个天线单元)。
应注意智能电话机900不限于图48的例子,可包括多个天线(例如用于无线LAN的天线,用于邻近无线通信方式的天线等)。在这种情况下,可从智能电话机900的结构中,省略天线开关914。
总线917互连处理器901、内存902、存储器903、外部连接接口904、摄像头906、传感器907、麦克风908、输入设备909、显示设备910、扬声器911、无线通信接口913和辅助控制器919。电池918通过图中部分表示成虚线的馈电线,向图48中图解所示的智能电话机900的各个部件供电。辅助控制器919例如按睡眠模式运行智能电话机900的最低必要功能。
在图48中所示的智能电话机900中,可利用无线通信接口913,实现利用图2和3说明的无线通信单元220和320,及控制单元240和370。另外,这些功能的至少一些可用处理器901或辅助控制器919实现。
[4-2.第二应用例子]
图49是图解说明本公开的技术可适用于的车载导航设备920的示意结构的例子的方框图。车载导航设备920包括处理器921、存储器922、全球定位系统(GPS)模块924、传感器925、数据接口926、内容播放器927、存储介质接口928、输入设备929、显示设备930、扬声器931、无线通信接口933、天线开关934、天线935和电池938。
处理器921例如可以是CPU或SoC,控制车载导航设备920的导航功能和另外的功能。存储器922包括RAM和ROM,保存由处理器921执行的程序,以及数据。
GPS模块924利用从GPS卫星接收的GPS信号,测量车载导航设备920的位置(比如纬度、经度和高度)。传感器925可包括诸如陀螺传感器、地磁传感器和气压传感器之类的一组传感器。数据接口926通过未图示的终端,连接到例如车载网络941,获得车辆生成的数据,比如车速数据。
内容播放器927再现保存在插入存储介质接口928中的存储介质(比如CD和DVD)中的内容。输入设备929例如包括配置成检测在显示设备930的屏幕上的触摸的触摸传感器、按钮或开关,接收从用户输入的操作或信息。显示设备930包括诸如LCD或OLED显示器之类的屏幕,显示导航功能或者再现的内容的图像。扬声器931输出导航功能或再现的内容的声音。
无线通信接口933支持诸如IEEE802.11a、11b、11g、11n、11ac和11ad之类无线LAN标准中的一种或多种,以进行无线通信。在基础结构模式下,无线通信接口933可通过无线LAN接入点,与另外的设备通信。另外,在ad-hoc模式下,无线通信接口933可直接与另外的设备通信。无线通信接口933一般可包括基带处理器、RF电路和功率放大器。无线通信接口933可以是其中集成保存通信控制程序的存储器,执行所述程序的处理器,和相关电路的单片模块。除了无线LAN方式之外,无线通信接口933还可支持其它各种无线通信方式,比如近场无线通信方式,邻近无线通信方式或蜂窝通信方式。天线开关934在包含在无线通信接口933中的多个电路之间,切换天线935的连接目的地。天线935具有由无线通信接口933用于无线信号的传送和接收的一个或多个天线单元。
另外,车载导航设备920可包括多个天线,不限于图49的例子。这种情况下,可从车载导航设备920的结构中省略天线开关934。
电池938通过图中部分表示成虚线的馈电线,向图49中所示的车载导航设备920的各个部件供电。电池938累积从车辆供给的电力。
在图49中图解所示的车载导航设备920中,可用无线通信接口933实现无线通信单元220和320,以及控制单元240和370。这些功能的至少一部分也可用处理器921实现。
本公开的技术也可被实现成包括车载导航设备920的一个或多个部件,车载网络941,和车辆模块942的车载系统(或车辆)940。车辆模块942生成车辆数据,比如车速、发动机速度和故障信息,并把生成的数据输出给车载网络941。
上述实施例是具体体现本技术的例子,实施例中的事项分别和权利要求书中的公开特定事项具有对应关系。同样地,用相同名称表示的实施例中的事项和权利要求书中的公开特定事项相互具有对应关系。不过,本技术不限于上述实施例,实施例的各种变形包含在本技术的范围内,而不脱离本技术的精神。
在上述实施例中说明的处理序列可被看作具有一系列的序列的方法,或者被看作使计算机执行所述一系列的序列的程序,和保存所述程序的记录介质。作为所述记录介质,可以使用硬盘、CD(光盘)、MD(微型光盘)、DVD(数字通用光盘)、存储卡和蓝光光盘(注册商标)。
在本说明中描述的效果仅仅是例子,效果不受限制,可以存在其它效果。
另外,也可如下构成本技术。
(1)一种通过利用无线通信,从另一个信息处理设备接收用于输出图像信息的流的信息处理设备,所述信息处理设备包括:
无线通信单元,所述无线通信单元被配置成与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息,和关于所述另一个信息处理设备的能力信息的通信;和
控制单元,所述控制单元被配置成按照根据关于所述另一个信息处理设备的能力信息,和所述信息处理设备的使用方式,设定与所述另一个信息处理设备相关的流的多接收分集的方式,进行控制。
(2)按照(1)所述的信息处理设备,
其中无线通信单元包括配置成利用多接收分集,进行接收的多个接收单元,
其中当所述另一个信息处理设备通过利用多接收分集,传送流时,控制单元按照进行同时向多个接收单元传送所述流的第一操作,和在切换多个接收单元的时候顺序向每个接收单元传送所述流的第二操作中的任意之一的方式,进行控制。
(3)按照(1)所述的信息处理设备,
其中无线通信单元包括配置成利用多接收分集,进行接收的多个接收单元,
其中当所述另一个信息处理设备通过利用多接收分集,传送流时,控制单元按照进行在与所述多个接收单元相关的多个链路每一个之中,设定用于识别通过利用无线通信,与所述信息处理设备进行通信的设备的识别信息的第一操作,和不管链路的数目,把所述识别信息设定为仅仅一项识别信息的第二操作任意之一的方式,进行控制。
(4)按照(3)所述的信息处理设备,
其中控制单元按照在第一操作和第二操作之间,设定不同的内容保护的方式进行控制。
(5)按照(1)-(4)任意之一所述的信息处理设备,
其中能力信息包括指示设备是否是移动设备的信息。
(6)按照(1)-(6)任意之一所述的信息处理设备,
其中能力信息包括指示信息处理设备的使用方式是否被变更的信息。
(7)按照(1)-(6)任意之一所述的信息处理设备,
其中能力信息包括指示是否包含多接收分集功能的信息。
(8)按照(1)-(7)任意之一所述的信息处理设备,
其中控制单元按照当设定低电力消耗模式时,进行所述流的传输停止或者间歇传输的方式,进行控制。
(9)按照(1)-(8)任意之一所述的信息处理设备,
其中控制单元按照从传输层指定待使用的物理层的方式,进行控制。
(10)按照(1)-(9)任意之一所述的信息处理设备,
其中控制单元接收物理链路切换信息,并按照AVC/HEVC从I帧开始的方式,进行控制。
(11)按照(1)-(10)任意之一所述的信息处理设备,
其中控制单元按照根据关于所述另一个信息处理设备的管理信息,选择HDCP设定方法的方式,进行控制。
(12)一种通过利用多接收分集,从另一个信息处理设备接收用于输出图像信息的流的信息处理设备,所述信息处理设备包括:
无线通信单元,所述无线通信单元被配置成与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息,和关于所述另一个信息处理设备的能力信息的通信;和
控制单元,所述控制单元被配置成按照根据关于所述另一个信息处理设备的能力信息,和所述信息处理设备的使用方式,设定与所述另一个信息处理设备相关的流的内容保护的方式,进行控制。
(13)按照(12)所述的信息处理设备,
其中当对于用于通过利用多接收分集传送所述流的多个频道中的每个频道使用的内容保护的版本不同时,控制单元按照设定与各个版本之中的低版本相关的内容保护的方式,进行控制。
(14)一种通过利用多接收分集,向另一个信息处理设备传送用于输出图像信息的流的信息处理设备,所述信息处理设备包括:
无线通信单元,所述无线通信单元被配置成通过利用多个频道,与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息,和关于所述另一个信息处理设备的能力信息的通信;和
控制单元,所述控制单元被配置成根据基于关于所述信息处理设备的能力信息,和所述另一个信息处理设备的使用方式,从所述另一个信息处理设备进行的控制,进行与所述另一个信息处理设备相关的流的传输控制,并按照把关于所述多个频道之中,用于传送所述流的频道的信息通知比与IP分组生成相关的层更高的层的方式,进行控制。
(15)一种通过利用多接收分集,向另一个信息处理设备传送用于输出图像信息的流的信息处理设备,所述信息处理设备包括:
无线通信单元,所述无线通信单元被配置成通过利用多个频道,与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息,和关于所述另一个信息处理设备的能力信息的通信;和
控制单元,所述控制单元被配置成根据基于关于所述信息处理设备的能力信息,和所述另一个信息处理设备的使用方式,从所述另一个信息处理设备进行的控制,进行与所述另一个信息处理设备相关的流的传输控制,并按照在IP分组的IP报头的TOP字段,写入关于用于传送所述流的频道的设定的设定信息的方式,进行控制。
(16)一种通过利用无线通信,把用于输出图像信息的流传送给另一个信息处理设备的信息处理设备,所述信息处理设备包括:
无线通信单元,所述无线通信单元被配置成与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息,和关于所述另一个信息处理设备的能力信息的通信;和
控制单元,所述控制单元被配置成以根据基于关于所述信息处理设备的能力信息,和所述另一个信息处理设备的使用方式,从所述另一个信息处理设备进行的控制,设定与所述另一个信息处理设备相关的流的多接收分集的方式,进行控制。
(17)按照(16)所述的信息处理设备,
其中当在其中切换和使用多个物理层的环境中,待使用的IP层是公共的,并且物理层被切换时,控制单元不重试再次认证和局部性检查。
(18)按照(16)所述的信息处理设备,
其中当在其中切换和使用多个物理层的环境中,对于两种流分别进行HDCP时,控制单元把传输侧设备密钥和接收侧设备密钥设定为一个密钥。
(19)一种通过利用无线通信,从另一个信息处理设备接收用于输出图像信息的流的信息处理设备,所述信息处理设备包括:
无线通信单元,所述无线通信单元被配置成与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息,和关于所述另一个信息处理设备的能力信息的通信;和
控制单元,所述控制单元被配置成按照根据关于所述另一个信息处理设备的能力信息,和所述信息处理设备的使用方式,设定与所述另一个信息处理设备相关的流的多接收的方式,进行控制。
(20)一种通过利用无线通信,从另一个信息处理设备接收用于输出图像信息的流的信息处理方法,所述信息处理方法包括:
无线通信过程,所述无线通信过程与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息,和关于所述另一个信息处理设备的能力信息的通信;和
控制过程,所述控制过程按照根据关于所述另一个信息处理设备的能力信息,和所述信息处理设备的使用方式,设定与所述另一个信息处理设备相关的流的多接收分集的方式,进行控制。
附图标记列表
100通信系统
200信息处理设备
210天线
220无线通信单元
230控制信号接收单元
240控制单元
250图像和音频信号生成单元
260图像和音频压缩单元
270流传输单元
300信息处理设备
310天线
320无线通信单元
330流接收单元
340图像和音频解压缩单元
350图像和音频输出单元
351显示单元
352音频输出单元
360用户信息获取单元
370控制单元
380控制信号传输单元
390管理信息保持单元
400信息处理设备
700通信系统
710信息处理设备
711图像数据生成单元
712SEI生成单元
713NAL生成单元
714PES生成单元
715TS生成单元
716RTP生成单元
717分组生成单元
718天线
719成像单元
720信息处理设备
721加密生成单元
722分组生成单元
723UDP生成单元
724TCP生成单元
725IP生成单元
726无线分组生成单元
727、728天线
730信息处理设备
731、732天线
733分组解码单元
734无线分组解码单元
735IP解码单元
736UDP解码单元
737TCP解码单元
738RTP解码单元
739TS解码单元
740加密解码单元
741PES解码单元
742NAL解码单元
743图像数据解码单元
744SEI生成单元
745显示单元
1000通信系统
1010、1020、1030信息处理设备
1011-1013无线通信单元
1101应用存储器
1102-1104存储器

Claims (20)

1.一种通过利用无线通信从另一个信息处理设备接收用于输出图像信息的流的信息处理设备,所述信息处理设备包括:
无线通信单元,所述无线通信单元被配置成与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息和关于所述另一个信息处理设备的能力信息的通信;和
控制单元,所述控制单元被配置成按照根据关于所述另一个信息处理设备的能力信息和所述信息处理设备的使用方式,设定与所述另一个信息处理设备相关的流的多接收分集的方式,进行控制。
2.按照权利要求1所述的信息处理设备,
其中无线通信单元包括被配置成利用多接收分集进行接收的多个接收单元,并且
其中当所述另一个信息处理设备通过利用多接收分集来发送流时,控制单元按照进行同时向多个接收单元发送所述流的第一操作,和在切换多个接收单元的时候顺序地向每个接收单元发送所述流的第二操作中的任意一个的方式,进行控制。
3.按照权利要求1所述的信息处理设备,
其中无线通信单元包括被配置成利用多接收分集进行接收的多个接收单元,
其中当所述另一个信息处理设备通过利用多接收分集发送流时,控制单元按照进行第一操作和第二操作中的任意一个的方式进行控制,在第一操作中,对于与所述多个接收单元相关的多个链路中的每一个,设定用于识别通过利用无线通信与所述信息处理设备进行通信的设备的识别信息,在第二操作中,不管链路的数目,把所述识别信息设定为仅仅一项识别信息。
4.按照权利要求3所述的信息处理设备,
其中控制单元按照在第一操作和第二操作之间设定不同的内容保护的方式进行控制。
5.按照权利要求1所述的信息处理设备,
其中能力信息包括指示设备是否是移动设备的信息。
6.按照权利要求1所述的信息处理设备,
其中能力信息包括指示信息处理设备的使用方式是否被变更的信息。
7.按照权利要求1所述的信息处理设备,
其中能力信息包括指示是否包含多接收分集功能的信息。
8.按照权利要求1所述的信息处理设备,
其中控制单元按照当设定低电力消耗模式时进行所述流的发送停止或者间歇发送的方式,进行控制。
9.按照权利要求1所述的信息处理设备,
其中控制单元按照从传输层指定待使用的物理层的方式,进行控制。
10.按照权利要求1所述的信息处理设备,
其中控制单元接收物理链路切换信息,并按照AVC/HEVC从I帧开始的方式进行控制。
11.按照权利要求1所述的信息处理设备,
其中控制单元按照根据关于所述另一个信息处理设备的管理信息选择HDCP设定方法的方式,进行控制。
12.一种通过利用多接收分集从另一个信息处理设备接收用于输出图像信息的流的信息处理设备,所述信息处理设备包括:
无线通信单元,所述无线通信单元被配置成与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息和关于所述另一个信息处理设备的能力信息的通信;和
控制单元,所述控制单元被配置成按照根据关于所述另一个信息处理设备的能力信息和所述信息处理设备的使用方式,设定与所述另一个信息处理设备相关的流的内容保护的方式,进行控制。
13.按照权利要求12所述的信息处理设备,
其中当对于用于通过利用多接收分集发送所述流的多个频道中的每个频道使用的内容保护的版本不同时,控制单元按照设定与各个版本之中的低版本相关的内容保护的方式,进行控制。
14.一种通过利用多接收分集向另一个信息处理设备发送用于输出图像信息的流的信息处理设备,所述信息处理设备包括:
无线通信单元,所述无线通信单元被配置成通过利用多个频道,与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息和关于所述另一个信息处理设备的能力信息的通信;和
控制单元,所述控制单元被配置成根据基于关于所述信息处理设备的能力信息和所述另一个信息处理设备的使用方式的来自所述另一个信息处理设备的控制,进行与所述另一个信息处理设备相关的流的传输控制,并按照把关于所述多个频道之中的用于发送所述流的频道的信息通知比与IP分组生成相关的层更高的层的方式,进行控制。
15.一种通过利用多接收分集向另一个信息处理设备发送用于输出图像信息的流的信息处理设备,所述信息处理设备包括:
无线通信单元,所述无线通信单元被配置成通过利用多个频道,与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息和关于所述另一个信息处理设备的能力信息的通信;和
控制单元,所述控制单元被配置成根据基于关于所述信息处理设备的能力信息和所述另一个信息处理设备的使用方式的来自所述另一个信息处理设备的控制,进行与所述另一个信息处理设备相关的流的传输控制,并按照在IP分组的IP报头的TOP字段写入关于用于发送所述流的频道的设定的设定信息的方式,进行控制。
16.一种通过利用无线通信把用于输出图像信息的流发送给另一个信息处理设备的信息处理设备,所述信息处理设备包括:
无线通信单元,所述无线通信单元被配置成与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息和关于所述另一个信息处理设备的能力信息的通信;和
控制单元,所述控制单元被配置成以根据基于关于所述信息处理设备的能力信息和所述另一个信息处理设备的使用方式的来自所述另一个信息处理设备的控制,设定与所述另一个信息处理设备相关的流的多接收分集的方式,进行控制。
17.按照权利要求16所述的信息处理设备,
其中当在切换地使用多个物理层的环境中,待使用的IP层是公共的并且物理层被切换时,控制单元不重试再次认证和局部性检查。
18.按照权利要求16所述的信息处理设备,
其中当在切换地使用多个物理层的环境中,对于两种流分别进行HDCP时,控制单元把传输侧设备密钥和接收侧设备密钥设定为一个密钥。
19.一种通过利用无线通信从另一个信息处理设备接收用于输出图像信息的流的信息处理设备,所述信息处理设备包括:
无线通信单元,所述无线通信单元被配置成与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息和关于所述另一个信息处理设备的能力信息的通信;和
控制单元,所述控制单元被配置成按照根据关于所述另一个信息处理设备的能力信息和所述信息处理设备的使用方式,设定与所述另一个信息处理设备相关的流的多接收的方式,进行控制。
20.一种通过利用无线通信从另一个信息处理设备接收用于输出图像信息的流的信息处理方法,所述信息处理方法包括:
无线通信过程,与所述另一个信息处理设备进行交换关于所述信息处理设备的能力信息和关于所述另一个信息处理设备的能力信息的通信;和
控制过程,按照根据关于所述另一个信息处理设备的能力信息和所述信息处理设备的使用方式,设定与所述另一个信息处理设备相关的流的多接收分集的方式,进行控制。
CN201480047303.7A 2013-09-05 2014-08-18 信息处理设备和信息处理方法 Expired - Fee Related CN105474691B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013184519 2013-09-05
JP2013-184519 2013-09-05
PCT/JP2014/071569 WO2015033762A1 (ja) 2013-09-05 2014-08-18 情報処理装置および情報処理方法

Publications (2)

Publication Number Publication Date
CN105474691A true CN105474691A (zh) 2016-04-06
CN105474691B CN105474691B (zh) 2019-08-27

Family

ID=52628242

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480047303.7A Expired - Fee Related CN105474691B (zh) 2013-09-05 2014-08-18 信息处理设备和信息处理方法

Country Status (6)

Country Link
US (1) US10547897B2 (zh)
EP (1) EP3043593B1 (zh)
JP (1) JP6536404B2 (zh)
CN (1) CN105474691B (zh)
AU (1) AU2014316299B2 (zh)
WO (1) WO2015033762A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111787377A (zh) * 2020-08-19 2020-10-16 青岛海信传媒网络技术有限公司 显示设备及投屏方法
CN112787865A (zh) * 2021-01-21 2021-05-11 中科创达软件股份有限公司 Hdcp设备兼容方法、装置、电子设备和介质
CN112911729A (zh) * 2021-01-29 2021-06-04 成都极米科技股份有限公司 隧道直接链路建立的方法、终端及存储介质

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10454726B2 (en) * 2014-12-29 2019-10-22 Watchy Technology Private Limited System for increasing bandwidth available for data communication
JP6750608B2 (ja) * 2015-03-17 2020-09-02 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US11265595B2 (en) * 2015-10-06 2022-03-01 Sony Interactive Entertainment Inc. Communication system, transmission apparatus, reception apparatus, communication system control method, and program
KR101678096B1 (ko) * 2015-11-05 2016-11-23 현대자동차주식회사 통신 모듈, 그를 가지는 차량 및 그 제어 방법
JP6729023B2 (ja) * 2016-06-14 2020-07-22 コニカミノルタ株式会社 無線通信装置および無線通信装置の制御プログラム
US10075671B2 (en) 2016-09-26 2018-09-11 Samsung Display Co., Ltd. System and method for electronic data communication
US10616383B2 (en) 2016-09-26 2020-04-07 Samsung Display Co., Ltd. System and method for electronic data communication
US10469857B2 (en) 2016-09-26 2019-11-05 Samsung Display Co., Ltd. System and method for electronic data communication
US10523895B2 (en) * 2016-09-26 2019-12-31 Samsung Display Co., Ltd. System and method for electronic data communication
US10390070B2 (en) 2017-03-31 2019-08-20 Intel Corporation Methods and apparatus for adaptive video transmission based on channel capacity
JP7154833B2 (ja) 2018-06-20 2022-10-18 キヤノン株式会社 通信装置、通信方法、およびプログラム
JP7118764B2 (ja) * 2018-06-20 2022-08-16 キヤノン株式会社 通信装置、制御方法、およびプログラム
CN109614804B (zh) * 2018-11-19 2021-04-27 中国地质大学(武汉) 一种双模态生物特征加密方法、设备及存储设备
KR20210123927A (ko) * 2020-04-06 2021-10-14 엘지전자 주식회사 무선 디바이스
TWI792821B (zh) * 2021-12-30 2023-02-11 瑞昱半導體股份有限公司 媒體串流裝置及媒體串流方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110158110A1 (en) * 2009-12-24 2011-06-30 Robert Stacey Method and system for multiband rate scaling
WO2012004944A1 (ja) * 2010-07-06 2012-01-12 パナソニック株式会社 無線伝送装置
US20130179605A1 (en) * 2012-01-06 2013-07-11 Qualcomm Incorporated Bi-directional tunneling via user input back channel for wireless displays

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002300072A (ja) 2001-03-30 2002-10-11 Hitachi Kokusai Electric Inc Hf無線回線用送受信装置
US20070032254A1 (en) * 2005-08-02 2007-02-08 Hitachi, Ltd. System and method for providing efficient spectrum usage of wireless devices in unlicensed bands
US7558572B2 (en) 2005-12-21 2009-07-07 Qualcomm Incorporated Methods and apparatus for determining and/or communicating parameter switching point information in wireless communications systems including wireless terminals supporting multiple wireless connections
US8085858B2 (en) * 2007-02-07 2011-12-27 Valens Semiconductor Ltd. Power saving techniques for a partial functionality communication link
JP2008224489A (ja) * 2007-03-14 2008-09-25 Yamatake Corp 位置推定装置
JP2008278388A (ja) 2007-05-07 2008-11-13 Sony Corp 情報交換装置および情報交換方法
JP4823146B2 (ja) * 2007-05-24 2011-11-24 三洋電機株式会社 受信装置
US8165644B2 (en) * 2007-08-29 2012-04-24 Qualcomm Incorporated Server initiated power mode switching in portable communication devices
JP2010045706A (ja) 2008-08-18 2010-02-25 Panasonic Corp ダイバーシティ受信装置とこれを用いた電子機器
US8934386B2 (en) * 2008-12-18 2015-01-13 Broadcom Corporation Power-save for wireless networks
US8326221B2 (en) 2009-02-09 2012-12-04 Apple Inc. Portable electronic device with proximity-based content synchronization
JP5094896B2 (ja) * 2010-02-26 2012-12-12 シャープ株式会社 移動局装置、基地局装置、通信制御方法及び集積回路
US9503771B2 (en) * 2011-02-04 2016-11-22 Qualcomm Incorporated Low latency wireless display for graphics
US9277230B2 (en) * 2011-11-23 2016-03-01 Qualcomm Incorporated Display mode-based video encoding in wireless display devices
US8862155B2 (en) * 2012-08-30 2014-10-14 Time Warner Cable Enterprises Llc Apparatus and methods for enabling location-based services within a premises

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110158110A1 (en) * 2009-12-24 2011-06-30 Robert Stacey Method and system for multiband rate scaling
WO2012004944A1 (ja) * 2010-07-06 2012-01-12 パナソニック株式会社 無線伝送装置
US20130179605A1 (en) * 2012-01-06 2013-07-11 Qualcomm Incorporated Bi-directional tunneling via user input back channel for wireless displays

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111787377A (zh) * 2020-08-19 2020-10-16 青岛海信传媒网络技术有限公司 显示设备及投屏方法
CN111787377B (zh) * 2020-08-19 2022-06-28 青岛海信传媒网络技术有限公司 显示设备及投屏方法
CN112787865A (zh) * 2021-01-21 2021-05-11 中科创达软件股份有限公司 Hdcp设备兼容方法、装置、电子设备和介质
CN112911729A (zh) * 2021-01-29 2021-06-04 成都极米科技股份有限公司 隧道直接链路建立的方法、终端及存储介质

Also Published As

Publication number Publication date
CN105474691B (zh) 2019-08-27
EP3043593A4 (en) 2017-08-23
US20160173939A1 (en) 2016-06-16
WO2015033762A1 (ja) 2015-03-12
AU2014316299A1 (en) 2016-02-11
US10547897B2 (en) 2020-01-28
JP6536404B2 (ja) 2019-07-03
EP3043593A1 (en) 2016-07-13
EP3043593B1 (en) 2022-06-08
JPWO2015033762A1 (ja) 2017-03-02
AU2014316299B2 (en) 2017-08-03

Similar Documents

Publication Publication Date Title
CN105474691B (zh) 信息处理设备和信息处理方法
CN105493508B (zh) 信息处理设备和信息处理方法
US10172080B2 (en) Information processing device, information processing system, and information processing method
US10805672B2 (en) Information processing device, information processing system, and information processing method
JP6406249B2 (ja) 情報処理装置および情報処理方法
US10979900B2 (en) Information processing device and information processing method
US10499200B2 (en) Information processing device and information processing method
WO2014192414A1 (ja) 情報処理装置および情報処理方法
KR20210138117A (ko) 무선 av 시스템에서 영상 데이터의 처리 및 전송을 수행하는 장치 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190827