CN106063285A - 信息处理设备、信息处理系统和信息处理方法 - Google Patents

信息处理设备、信息处理系统和信息处理方法 Download PDF

Info

Publication number
CN106063285A
CN106063285A CN201480076759.6A CN201480076759A CN106063285A CN 106063285 A CN106063285 A CN 106063285A CN 201480076759 A CN201480076759 A CN 201480076759A CN 106063285 A CN106063285 A CN 106063285A
Authority
CN
China
Prior art keywords
messaging device
information
image
control unit
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201480076759.6A
Other languages
English (en)
Inventor
石见英辉
吉村司
片山靖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN106063285A publication Critical patent/CN106063285A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43637Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/006Details of the interface to the display terminal
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14Display of multiple viewports
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4122Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving MPEG packets from an IP network
    • H04N21/4383Accessing a communication channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6587Control parameters, e.g. trick play commands, viewpoint selection
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/02Details of power systems and of start or stop of display operation
    • G09G2330/021Power management, e.g. power saving
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/02Handling of images in compressed format, e.g. JPEG, MPEG
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/12Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2350/00Solving problems of bandwidth in display systems
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/04Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/10Use of a protocol of communication by packets in interfaces along the display data pipeline
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/16Use of wireless transmission of display information
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/20Details of the management of multiple sources of image data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W84/00Network topologies
    • H04W84/02Hierarchically pre-organised networks, e.g. paging networks, cellular networks, WLAN [Wireless Local Area Network] or WLL [Wireless Local Loop]
    • H04W84/10Small scale networks; Flat hierarchical networks
    • H04W84/12WLAN [Wireless Local Area Networks]

Abstract

本发明在多个信息处理设备之间,适当地显示图像信息。信息处理设备具备无线通信单元和控制器。无线通信单元按照Wi‑Fi认证的Miracast规范,在它自己和其它信息处理设备之间进行实时图像传输。此外,控制器获得待显示在包含于从其他信息处理设备发送的第一图像信息中的不可显示区中的第二图像信息,并进行控制,以使显示单元显示合成第一图像信息和第二图像信息的合成图像。

Description

信息处理设备、信息处理系统和信息处理方法
技术领域
本技术涉及信息处理设备,更具体地,涉及其中利用无线通信交换各种信息的信息处理设备、信息处理系统和信息处理方法。
背景技术
一直以来,已知利用无线通信交换各种数据的无线通信技术。例如,提出了使各种信息能够在两个信息处理设备之间被交换的无线通信技术(例如,参见专利文献1)。
引文列表
专利文献
专利文献1:JP 2008-278388A
发明内容
按照上述现有技术,即使当未利用有线线路建立连接时,也可通过无线通信在两个信息处理设备之间交换各种信息。例如,基于从传输侧信息处理设备传送的图像数据的图像可被显示在接收侧信息处理设备的显示单元上。
这里,例如,各种内容(例如,运动图像内容)也可被显示在信息处理设备上。此外,显示在传输侧信息处理设备上的内容可被传送给接收侧信息处理设备,从而也可显示在接收侧信息处理设备上。然而,设定了某些限制,例如,按版权管理的内容(例如,数字版权管理(DRM)内容)的分发和再现存在限制。因此,当按版权管理的内容被设定为显示对象时,可能难以使显示在传输侧信息处理设备上的内容被适当地显示在接收侧信息处理设备上。
鉴于上面所述,产生了本技术,本技术的一个目的是在多个信息处理设备之间适当地显示图像信息。
为了解决上述问题,产生了本技术,本技术的第一方面是一种信息处理设备,信息处理设备的信息处理方法,和使计算机执行所述信息处理方法的程序,所述信息处理设备包括:无线通信单元,所述无线通信单元被配置成按照无线保真(Wi-Fi)认证的Miracast规范(技术规范名称:Wi-Fi Display),与其他信息处理设备进行实时图像传输;和控制单元,所述控制单元被配置成按照获得待显示在包含于从所述其他信息处理设备传送的第一图像信息中的非显示区上的第二图像信息,并且其中合成第一图像信息和第二图像信息的合成图像被显示在显示单元上的方式,进行控制。从而,存在其中获得待显示在包含于从其他信息处理设备传送的第一图像信息中的非显示区上的第二图像信息,并且其中合成第一图像信息和第二图像信息的合成图像被显示在显示单元上的操作。
按照第一方面,所述控制单元可根据与从所述其他信息处理设备传送的非显示区相关的命令信息,指定第一图像信息中的非显示区和第二图像信息。从而,存在其中根据与非显示区相关的命令信息,指定第一图像信息中的非显示区和第二图像信息的操作。
按照第一方面,所述控制单元可根据包含在命令信息中的第一图像信息中的非显示区的位置和大小,指定第一图像信息中的非显示区。从而,存在其中根据包含在命令信息中的非显示区的位置和大小,指定第一图像信息中的非显示区的操作。
按照第一方面,所述控制单元可根据与包含在命令信息中的第二图像信息相关的地址信息,从外部设备获得第二图像信息。从而,存在其中根据与包含在命令信息中的第二图像信息相关的地址信息,从外部设备获得第二图像信息的操作。
按照第一方面,当收到命令信息时,控制单元可向外部设备传送用于访问第二图像信息的确认信息,从外部设备接收允许访问第二图像信息的许可信息,随后从外部设备获得第二图像信息。从而,存在其中当收到命令信息时,向外部设备传送确认信息,从外部设备接收许可信息,随后从外部设备获得第二图像信息的操作。
按照第一方面,当收到命令信息时,控制单元可向外部设备传送供其他信息处理设备访问第二图像信息之间的确认信息,从外部设备接收允许所述其他信息处理设备访问第二图像信息的许可信息,随后把供所述其他信息处理设备从外部设备获得第二图像信息之间的设定信息传送给所述其他信息处理设备。从而,存在其中当收到命令信息时,向外部设备传送确认信息,从外部设备接收许可信息,随后把设定信息传送给其他信息处理设备的操作。
按照第一方面,在把设定信息传送给其他信息处理设备之后,控制单元可从外部设备获得第二图像信息,并把第二图像信息传给所述其他信息处理设备。从而,存在其中在把设定信息传送给其他信息处理设备之后,从外部设备获得第二图像信息,并把第二图像信息传给其他信息处理设备的操作。
按照第一方面,控制单元可根据与显示在包含于命令信息中的非显示区上的图像相关的控制信息,进行合成图像的显示控制。从而,存在其中根据包含在命令信息中的控制信息,进行合成图像的显示控制的操作。
按照第一方面,根据包含于命令信息中的与显示在非显示区上的操作图像相关的操作图像信息,控制单元可使所述操作图像叠加地显示在合成图像上。从而,存在其中根据包含在命令信息中的操作图像信息,使操作图像叠加地显示在合成图像上的操作。
按照第一方面,非显示区可以是由其他信息处理设备显示的第一图像信息中的按版权管理的图像的显示区。从而,存在其中获得按版权管理的图像,并把所述图像用于合成图像的操作。
按照第一方面,无线通信单元可以与多个其它信息处理设备进行实时图像传输,控制单元可以使与从多个其它信息处理设备传送的多项第一图像信息相关的多个合成图像同时显示在显示单元上。从而,存在其中与从多个其它信息处理设备传送的多项第一图像信息相关的多个合成图像被同时显示在显示单元上的操作。
本技术的第二方面是一种信息处理设备,信息处理设备的信息处理方法,和使计算机执行所述信息处理方法的程序,所述信息处理设备包括:无线通信单元,所述无线通信单元被配置成按照无线保真(Wi-Fi)认证的Miracast规范,与其他信息处理设备进行实时图像传输;和控制单元,所述控制单元被配置成按照与包含于显示在显示单元上并被传送给和显示在其他信息处理设备上的图像信息中的非显示区相关的命令信息被传送给所述其他信息处理设备,并且所述图像信息中的除非显示区外的图像信息被传送给所述其他信息处理设备的方式,进行控制。从而,存在其中与包含于显示在显示单元上并被传送给和显示在其他信息处理设备上的图像信息中的非显示区相关的命令信息被传送给其他信息处理设备,并且所述图像信息中的除非显示区外的图像信息被传送给其他信息处理设备的操作。
本技术的第三方面是一种信息处理系统,信息处理系统的信息处理方法,和使计算机执行所述信息处理方法的程序,所述信息处理系统包括:发送端设备,所述发送端设备被配置成按照无线保真(Wi-Fi)认证的Miracast规范,与接收端设备进行实时图像传输,把与包含在作为显示在显示单元上并被传送给和显示在接收端设备上的图像信息的第一图像信息中的非显示区相关的命令信息传送给接收端设备,和把第一图像信息中的除非显示区之外的图像信息传送给接收端设备;和接收端设备,所述接收端设备被配置成按照Wi-Fi认证的Miracast规范,与发送端设备进行实时图像传输,根据命令信息,获得待显示在包含于从发送端设备传送的第一图像信息中的非显示区上的第二图像信息,并使其中合成第一图像信息和第二图像信息的合成图像被显示在显示单元上。从而,存在其中发送端设备把与包含在作为显示在显示单元上并被传送给和显示在接收端设备上的图像信息的第一图像信息中的非显示区相关的命令信息传送给接收端设备,和把第一图像信息中的除非显示区之外的图像信息传送给接收端设备,接收端设备根据命令信息,获得待显示在包含于从发送端设备传送的第一图像信息中的非显示区上的第二图像信息,并使其中合成第一图像信息和第二图像信息的合成图像被显示在显示单元上的操作。
按照本技术,获得能够在多个信息处理设备之间适当地显示图像信息的优异效果。不一定局限于这里说明的效果,可以包括记载在本公开中的任意效果。
附图说明
图1是图解说明按照本技术的第一实施例的通信系统100的系统结构例子的方框图。
图2是图解说明按照本技术的第一实施例的信息处理设备200的功能结构例子的方框图。
图3是图解说明按照本技术的第一实施例的信息处理设备300的功能结构例子的方框图。
图4是示意图解说明按照本技术的第一实施例,保持在管理信息保持单元390中的内容例子的示图。
图5是图解说明按照本技术的第一实施例,显示在信息处理设备300的显示单元351上的图像的转变例子的示图。
图6是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图7是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图8是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图9是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图10是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图11是图解说明按照本技术的第一实施例,在包含在通信系统100中的各个设备之间的通信处理例子的序列图。
图12是图解说明按照本技术的第一实施例,由信息处理设备200进行的数据传输处理的处理过程的例子的流程图。
图13是图解说明按照本技术的第一实施例,由信息处理设备300进行的数据传输速度控制处理的处理过程的例子的流程图。
图14是图解说明按照本技术的第一实施例,发送端设备和接收端设备之间的通信处理例子的序列图。
图15是图解说明按照本技术的第一实施例,发送端设备和接收端设备之间的通信处理例子的序列图。
图16是图解说明按照本技术的第一实施例,发送端设备和接收端设备之间的通信处理例子的序列图。
图17是图解说明按照本技术的第二实施例的通信系统700的系统结构例子的图。
图18是示意图解说明按照本技术的第二实施例,在包含在通信系统700中的设备之间交换的图像数据的流动的例子的示图。
图19是图解说明按照本技术的第二实施例,发送端设备和接收端设备之间的连接处理例子的序列图。
图20是图解说明按照本技术的第二实施例,包含在通信系统700中的设备之间的通信处理例子的序列图。
图21是图解说明按照本技术的第二实施例,包含在通信系统700中的设备之间的通信处理例子的序列图。
图22是图解说明按照本技术的第二实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。
图23是图解说明按照本技术的第二实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。
图24是图解说明按照本技术的第二实施例,由信息处理设备730进行的数据接收处理的处理过程的例子的流程图。
图25是图解说明按照本技术的第二实施例,由信息处理设备730进行的数据接收处理的处理过程的例子的流程图。
图26是示意图解说明按照本技术的第二实施例,在包含在通信系统700中的设备之间交换的图像数据的流动的例子的示图。
图27是图解说明按照本技术的第三实施例的通信系统705的系统结构例子的示图。
图28是图解说明充当本技术的基础的发送端设备和接收端设备之间的通信模式的切换例子的示图。
图29是示意图解说明按照本技术的第三实施例,在包含在通信系统705中的设备之间交换的图像数据的流动的例子的示图。
图30是图解说明按照本技术的第三实施例,包含在通信系统705中的设备之间的通信处理例子的序列图。
图31是图解说明按照本技术的第三实施例,包含在通信系统705中的设备之间的通信处理例子的序列图。
图32是图解说明按照本技术的第三实施例,包含在通信系统705中的设备之间的通信处理例子的序列图。
图33是图解说明按照本技术的第三实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。
图34是图解说明按照本技术的第三实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。
图35是示意图解说明按照本技术的第四实施例,在包含在通信系统700中的设备之间交换的图像数据的流动的例子的示图。
图36是图解说明按照本技术的第四实施例,包含在通信系统700中的设备之间的通信处理例子的序列图。
图37是图解说明按照本技术的第四实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。
图38是图解说明按照本技术的第四实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。
图39是图解说明按照本技术的第四实施例,由信息处理设备730进行的数据接收处理的处理过程的例子的流程图。
图40是图解说明按照本技术的第四实施例,由信息处理设备730进行的数据接收处理的处理过程的例子的流程图。
图41是图解说明按照本技术的第四实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。
图42是图解说明智能电话机的示意结构的例子的方框图。
图43是图解说明车载导航设备的示意结构的例子的方框图。
具体实施方式
下面说明实现本技术的模式(下面称为“实施例”)。将按照以下顺序进行说明:
1.第一实施例(根据用户信息或管理信息,控制无线通信的例子)
2.第二实施例(把按照数字版权管理的内容设定为发送端设备和接收端设备的显示对象的例子)
3.第三实施例(通过经接入点的发送端设备和接收端设备之间的连接,和发送端设备和接收端设备之间的直接连接,显示按照数字版权管理的内容的例子)
4.第四实施例(把按照数字版权管理的内容从发送端设备传送给接收端设备,并使内容被显示在接收端设备上的例子)
5.应用例
<1.第一实施例>
[通信系统的结构例子]
图1是图解说明按照本技术的第一实施例的通信系统100的系统结构例子的方框图。
通信系统100包括信息处理设备200、300和400。通信系统100是其中信息处理设备300接收从信息处理设备200和400至少之一传送的数据(例如图像数据或音频数据)的通信系统。
信息处理设备200、300和400是具有无线通信功能的收发设备。例如,信息处理设备200、300和400是具有无线通信功能的显示设备(例如,个人计算机),或者便携式信息处理设备(例如智能电话机或平板终端)。信息处理设备200、300和400是例如遵从电气和电子工程师协会(IEEE)802.11、802.15或802.16,第三代合作伙伴计划(3GPP)规范(例如,宽带码分多址接入(W-CDMA)),全球移动通信系统(GSM:注册商标),微波存取全球互通(WiMAX),WiMAX2,长期演进(LTE),LTE-A(高级)等的无线通信设备。信息处理设备200、300和400可利用无线通信功能,交换各种信息。
这里,说明在信息处理设备200和300之间,或者在信息处理设备400和300之间,进行利用无线局域网(LAN)的无线通信的情况的例子。
作为所述无线LAN,例如可以使用无线保真(Wi-Fi)Direct、隧穿直接链路设置(Tunneled Direct Link Setup)(TDLS)、ad-hoc网络或网状网络。作为在通信系统100中使用的短程无线视听(AV)传输通信,例如可以使用Wi-Fi认证的Miracast(技术规范名称:Wi-Fi Display)。Wi-Fi认证的Miracast是利用Wi-Fi Direct或TDLS的技术,把用一个终端再现的音频或显示图像传送给另一个终端,并类似地用所述另一个终端输出所述音频或图像数据的镜像技术。
在Wi-Fi认证的Miracast中,利用传输控制协议/网际协议(TCP/IP),实现用户输入反向通道(UIBC)。UIBC是把诸如鼠标或键盘之类输入设备的操作信息从一个终端传送给另一个终端的技术。代替Wi-Fi认证的Miracast,可以应用另一种远程桌面软件(例如虚拟网络计算(VNC))。
这里,例如,在Wi-Fi认证的Miracast中,规定利用H.264压缩和解压缩图像(视频)。例如,在Wi-Fi认证的Miracast中,可在传输侧调整H.264。本技术的实施例不限于H.264,而是也可对应于各种编解码器,比如H.265(例如,高效视频编码(HEVC)和高效视频编码的可缩放视频编码扩展(SHVC)),和运动图像专家组(MPEG4),联合图像专家组(JPEG)2000。此外,它还可对应于行基编解码器,在行基编解码器中,一行或多行被打包或和压缩,或者两行或更多行被分成2×2或更多的宏块,以便被压缩和解压缩。例如,通过获得特定代码量区域(比如画面、一束的多行、或者宏块)与前一个代码量区域的差分,能够对应于不进行诸如DCT或小波变换之类压缩地降低传输速率的编解码器。此外,可以不压缩地传送或接收图像(视频)。
在本技术的第一实施例中,将说明其中信息处理设备200把通过成像操作生成的图像数据和音频数据设定为传输对象的例子。在本技术的第一实施例中,将说明其中信息处理设备400把保存在存储单元(例如硬盘)中的内容(例如由图像数据和音频数据构成的内容)设定为传输对象的例子。可以使用安装有摄像头的电子设备(例如个人计算机、游戏机、智能电话机或平板终端),作为信息处理设备200。可以使用包括显示单元的另一个电子设备(例如成像设备、游戏机、智能电话机或平板终端),作为信息处理设备300。如果信息处理设备400具有网络共享(tethering)功能,那么信息处理设备400可经无线或有线网络,获得保存在因特网服务提供商(ISP)中的内容,并把所述内容设定为传输对象。
例如,通过信息处理设备200的成像操作生成的图像数据被传送给信息处理设备300,基于所述图像数据的图像11被显示在信息处理设备300的显示单元351上。此外,保存在信息处理设备400的存储单元(例如硬盘)中的内容被传送给信息处理设备300,基于所述内容的图像12被显示在信息处理设备300的显示单元351上。
这样,在本技术的第一实施例中,将说明其中信息处理设备200和400充当发送端侧的信息处理设备(发送端设备),信息处理设备300充当接收端侧的信息处理设备(接收端设备)的例子。
图1中,其中信息处理设备300能够利用无线通信,经对等(P2P)直接连接,进行直接通信的范围被表示成信息传输范围101。信息传输范围101是基于信息处理设备300的信息传输范围(服务范围)。
[信息处理设备(发送端设备)的结构例子]
图2是图解说明按照本技术的第一实施例的信息处理设备200的功能结构例子的方框图。与无线通信相关的信息处理设备400的功能结构和信息处理设备200的功能结构实质相同。于是,在本技术的第一实施例中,只说明信息处理设备200,信息处理设备400的说明被省略。
信息处理设备200包括天线210、无线通信单元220、控制信号接收单元230、控制单元240、图像和音频信号生成单元250、图像和音频压缩单元260和流传输单元270。
在控制单元240的控制下,无线通信单元220利用无线通信,通过天线210,往来于另一个信息处理设备(例如,信息处理设备300)传送和接收各项信息(例如,图像数据和音频数据)。例如,当进行图像数据传输处理时,图像和音频信号生成单元250生成的图像数据由图像和音频压缩单元260压缩,压缩的图像数据(图像流)经无线通信单元220从天线210传送。例如,无线通信单元220根据Wi-Fi认证的Miracast规范与另一信息处理设备执行实时图像传输。
无线通信单元220被假定能够利用多个频道,往来于另一个信息处理设备(例如,信息处理设备300)传送和接收各项信息。在本技术的第一实施例中,将说明其中无线通信单元220具有传送和接收3种频道,2.4GHz、5GHz和60GHz的功能的例子。这样,当发送端设备具有传送和接收多个频道的功能时,接收端设备(例如,信息处理设备300)能够控制将由各个发送端设备使用的频道。
控制信号接收单元230获得无线通信单元220接收的各项信息之中,从另一个信息处理设备(例如,信息处理设备300)传送的控制信号(例如,与信息处理设备300交换的信息)。随后,控制信号接收单元230把获得的控制信号输出给控制单元240。
控制单元240对将从信息处理设备200传送的各项信息进行控制。例如,控制单元240根据控制信号接收单元230接收的控制信号,对图像和音频信号生成单元250及图像和音频压缩单元260进行控制。例如,控制单元240进行变更声道的数目,或者作为传输对象的图像数据的分辨率的控制,或者进行变更作为传输对象的图像数据的图像区域的控制。即,控制单元240根据控制信号接收单元230接收的控制信号,进行作为传输对象的流的传输控制(例如,数据传输速度控制,可缩放传输速率控制)。
控制单元240可具有测量在利用无线通信,往来于接收端设备传送和接收数据时的无线电波传播状况(链路无线电波传播状况)的功能,并可把测量结果(无线电波传播测量信息)传送给接收端设备。
这里,例如,无线电波传播测量信息是用于判定与接收端设备的线路质量是否是能够传送和接收图像数据和音频数据的质量的信息。例如,当进行流传输控制(例如,数据传输速度控制,可缩放传输速率控制)时,使用所述无线电波传播测量信息。无线电波传播测量信息将参考图4详细说明。代替无线电波传播测量信息,控制单元240可计数相同分组的重传次数,并进行与计数的重传次数对应的流传输控制。
这里,数据传输速度主要意味通信线路占用率,被认为包括通信速度或通信容量的含意。例如,分辨率被定义为配置成包括诸如图像数据的图像帧(垂直像素和水平像素的数目),或者图像数据的比特率(压缩率)之类要素的画质指标。作为所述画质指标,可以使用流的吞吐量。音频的通道数被认为包括诸如单声道(1.0ch)或立体声(2.0ch)之类的音频记录和再现方法的含意。音频的通道数被定义为配置成包括诸如音频数据的比特率(压缩率)或者通道数之类要素的音质指标。作为所述音质指标,可以使用流的吞吐量。
控制单元240进行改善数据速率控制中不稳定的状态的控制。例如,控制单元240通过与接收端设备(例如,信息处理设备300)交换信息,了解所述接收端设备的系统性能信息。这里,例如,系统性能信息是关于接收端设备的系统的性能信息。例如,系统性能信息是可用频道、分辨率、传输控制协议(TCP)和用户数据报协议(UDP)。例如,系统性能信息是指示加密方法的对应、标准清晰度(SD)/高清晰度(HD)的对应和低电力消耗模式的对应中的每一个的信息。例如,控制单元240可按照接收端设备是否对应于低电力消耗模式,选择进一步提高通信系统100的整个系统稳定性的流传输控制(例如,数据传输速度控制和可缩放传输速率控制)的方法。
例如,假定控制单元240在与信息处理设备300的信息交换期间,插入关于信息处理设备200是否是移动设备的信息。例如,关于信息处理设备200的能力信息可包括关于信息处理设备200是否是移动设备的信息。当了解信息处理设备200是移动设备时,信息处理设备300可根据与其它连接的信息处理设备的关联,判断不必使信息处理设备200工作。这样,当判断不必使信息处理设备200工作时,信息处理设备200从信息处理设备300接收传输停止命令。当控制单元240领会传输停止命令时,控制单元240可使图像和音频信号生成单元250、图像和音频压缩单元260和流传输单元270每一个的功能断电给定时间。控制单元240可使无线通信单元220转变成间歇接收(间歇接收是无线通信单元220定期启动,以致无线通信单元200能够从信息处理设备300接收命令,而在其它情况下,该设备被断电的模式)。
在控制单元240的控制下,图像和音频信号生成单元250生成作为输出对象的数据(图像数据和音频数据),并把生成的数据输出给图像和音频压缩单元260。例如,图像和音频信号生成单元250包括成像单元(未图示)和音频获取单元(未图示)。成像单元(例如,镜头、图像传感器或信号处理电路)对被摄对象成像,从而生成图像(图像数据)。音频获取单元(例如,麦克风)获得生成图像数据时的环境音频。按照这种方式生成的数据是待传送给另一个信息处理设备(例如,信息处理设备300)的传输对象。
在控制单元240的控制下,图像和音频压缩单元260压缩(编码)图像和音频信号生成单元250生成的数据(图像数据和音频数据)。随后,图像和音频压缩单元260把压缩数据(图像数据和音频数据)输出给流传输单元270。图像和音频压缩单元260可通过利用软件进行编码来实现,或者可通过利用硬件进行编码来实现。图像和音频压缩单元260被认为起编解码器作用,不过,认为能够处理未压缩的图像或音频。此外,图像和音频压缩单元260也可起可缩放编解码器的作用。这里,可缩放编解码器例如意味能够按照接收侧信息处理设备(接收端设备)的分辨率,网络环境等,被自由应用的编解码器。
在控制单元240的控制下,流传输单元270进行通过无线通信单元220,从天线210以流的形式,传送图像和音频压缩单元260压缩的数据(图像数据和音频数据)的传输处理。
除上述单元之外,信息处理设备200还可包括显示单元、音频输出单元和操作接收单元,不过图2中未图示这些单元。上面说明了其中信息处理设备200生成作为传输对象的图像数据和音频数据的例子。不过,信息处理设备200可从外部设备获得作为传输对象的图像数据和音频数据。例如,信息处理设备200可从具备麦克风的web摄像头获得作为传输对象的图像数据和音频数据。信息处理设备200可把保存在存储设备(例如硬盘)中的内容(例如由图像数据和音频数据形成的内容)设定为传输对象,而不管在信息处理设备200的内部或外部。这种情况下,保存在存储设备中的内容也被假定是压缩内容。这种情况下,当压缩内容按照在通信系统100中采用的标准中定义的编码方式被压缩时,可以不解密(解码)地传送所述压缩内容。
信息处理设备200的显示单元(未图示)例如是显示由图像和音频信号生成单元250生成的图像的显示单元。作为所述显示单元,例如可以使用诸如电致发光(EL)或晶体发光二极管(LED)显示器或液晶显示器(LCD)之类的显示面板。
信息处理设备200的音频输出单元(未图示)例如是输出由图像和音频信号生成单元250生成的音频的音频输出单元(例如,扬声器)。图像可从传输设备和接收设备输出,不过,音频优选只从传输设备和接收设备之一输出。
信息处理设备200的操作接收单元(未图示)是接收用户进行的操作输入的操作接收单元,例如是键盘、鼠标、游戏垫(pad)、触摸面板、摄像头或麦克风。通过利用当用户用他或她的手指触摸或接近显示面时,能够进行操作输入的触摸面板,可以一体地构成操作接收单元和显示单元。
[信息处理设备(接收侧)的结构例子]
图3是图解说明按照本技术的第一实施例的信息处理设备300的功能结构例子的方框图。
信息处理设备300包括天线310、无线通信单元320、流接收单元330、图像和音频解压缩单元340、图像和音频输出单元350、用户信息获取单元360、控制单元370、控制信号传输单元380和管理信息保持单元390。
在控制单元370的控制下,无线通信单元320利用无线通信,通过天线310,往来于另一个信息处理设备(例如,信息处理设备200)传送和接收各项信息(例如图像数据和音频数据)。例如,当进行图像数据接收处理时,天线310接收的图像数据经无线通信单元320和流接收单元330,被图像和音频解压缩单元340解压缩(解码)。随后,解压缩的图像数据被提供给图像和音频输出单元350,从图像和音频输出单元350输出与解压缩图像数据相应的图像。即,与解压缩图像数据相应的图像被显示在显示单元351上。例如,无线通信单元220根据Wi-Fi认证的Miracast规范与另一信息处理设备执行实时图像传输。
无线通信单元320被认为能够利用多个频道,往来于另一个信息处理设备(例如,信息处理设备200)传送和接收各项信息。在本技术的第一实施例中,将说明其中无线通信单元320具有传送和接收3种频道,2.4GHz、5GHz和60GHz的功能的例子。即,无线通信单元320可进行利用第一频带的通信,和利用数据传输速度比第一频带高的第二频带的通信。控制单元370控制多个频道之中的将在与各个发送端设备的无线通信中使用的频道。
信息处理设备200和300之间的链路,以及信息处理设备400和300之间的链路可用相同频道建立,或者可用不同频道建立。
在本技术的第一实施例中,将说明其中无线通信单元320具有传送和接收3种频道,2.4GHz、5GHz和60GHz的功能的例子,不过本技术的实施例不限于此。例如,无线通信单元320可具有传送和接收其它频道,2个频道,4个或更多频道的功能。
在控制单元370的控制下,流接收单元330在利用无线通信单元320接收的各项信息之中,接收流(例如,图像流和音频流)和与各个发送端设备的交换信息。随后,流接收单元330把接收的命令信息输出给控制单元370,并把接收的流输出给图像和音频解压缩单元340及控制单元370。
这里,与各个发送端设备的交换信息是从发送端设备(例如,信息处理设备200)传送的信息,例如包括获得信息处理设备300的系统性能信息的请求。例如,系统性能信息是指示可用频道、分辨率、TCP和UDP,或者加密方法的对应、SD/HD的对应、及低电力消耗模式的对应中的每一个的信息。
流接收单元330具有测量在利用无线通信,往来于接收端设备传送和接收数据时的无线电波传播状况(链路无线电波传播状况)的功能。流接收单元330把测量结果(无线电波传播测量信息)输出给控制单元370。无线电波传播测量信息将参考图4详细说明。
在控制单元370的控制下,图像和音频解压缩单元340解压缩(解码)从另一个信息处理设备(例如,信息处理设备200)传送的流(图像数据和音频数据)。随后,图像和音频解压缩单元340把解压缩的数据(图像数据和音频数据)输出给图像和音频输出单元350。图像和音频解压缩单元340可通过利用软件进行解码来实现,或者可通过利用硬件进行解码来实现。图像和音频解压缩单元340被认为起编解码器作用,不过假定能够处理未压缩的图像或音频。此外,图像和音频解压缩单元340还可起可缩放编解码器的作用。
图像和音频输出单元350包括显示单元351和音频输出单元352。
显示单元351是显示基于由图像和音频解压缩单元340解压缩的图像数据的各个图像(例如,图1中图解所示的图像11和12)的显示单元。作为显示单元351,例如,可以使用诸如有机EL面板、晶体LED显示器、LCD面板之类的显示面板。作为显示单元351,可以使用当用户用他或她的手指触摸或接近显示面时,能够进行操作输入的触摸面板。
音频输出单元352是输出基于由图像和音频解压缩单元340解压缩的音频数据的各种音频(与显示在显示单元351上的图像相关的音频等)的音频输出单元(例如,扬声器)。这里,作为音频输出方法,例如可以使用从扬声器只再现分配给中间通道(主图像)的发送端设备的音频,而不再现分配给周边通道(副图像)的发送端设备的音频的方法。作为另一种音频输出方法,例如可以使用把分配给中间通道的发送端设备的音频的音量设定为主要部分,并降低分配给周边通道的发送端设备的音频的音量,并再现音频的方法。可以使用其它的音频输出方法。
用户信息获取单元360获得关于用户的信息(用户信息),并把获得的用户信息输出给控制单元370。例如,用户信息获取单元360可通过接收来自操作接收单元(键盘、鼠标、遥控器、游戏垫或触摸面板)的输入,获得用户信息,通过所述操作接收单元,用户能够直接设定显示方法。例如,操作接收单元是指定显示在显示单元351上的图像中的任意区域的操作部件。例如,用户信息获取单元360可通过接收来自能够了解用户的意图的设备,比如摄像头、麦克风、或者任意各种传感器(例如陀螺传感器或检测人体的传感器)的输入,获得用户信息。
例如,当从图像和音频输出单元350输出基于利用无线通信,从另一个信息处理设备(例如,信息处理设备200)接收的流的信息时,用户信息获取单元360获得通过用户动作生成的用户信息。所述用户信息例如是通过与显示在显示单元351上的图像相关的用户动作生成的用户信息。例如,用户信息是根据与显示在显示单元351上的图像相关的用户操作生成的信息。
控制单元370使管理信息保持单元390保持流接收单元330获得的各项信息,并根据管理信息保持单元390保持的管理信息,管理各个发送端设备。控制单元370进行流传输控制(例如,数据控制速度控制和可缩放传输速率控制),以致对于从整个系统中的多个发送端设备传送的流,改善稳定性。
例如,控制单元370根据用户信息获取单元360获得的用户信息,和保持在管理信息保持单元390中的管理信息,进行流传输控制(例如,数据传输速度控制和可缩放传输速率控制)。具体地,控制单元370根据保持在管理信息保持单元390中的管理信息,对于各个发送端设备生成用于进行流传输控制(例如,数据传输速度控制和可缩放传输速率控制)的控制信号,并把生成的控制信号输出给控制信号传输单元380。例如,控制单元370根据用户信息和管理信息,变更显示在显示单元351上的图像的分辨率,并生成向各个发送端设备请求与所述分辨率等同的传输速率的控制信号。例如,控制单元370根据用户信息和管理信息,生成用于变更显示单元351上的图像的显示区域的控制信号。例如,控制单元370根据用户信息和管理信息,生成用于变更显示单元351上的图像的大小的控制信号。
控制单元370根据用户信息和管理信息,进行设定要使用的频道和分辨率的控制。例如,控制单元370在无线通信单元320的多个频道之中,设定用于各个发送端设备的频道。当各个频道的电力消耗模式不同时,控制单元370了解每种模式,并设定频道,以便关心移动设备的电力消耗。即,控制单元370可分别设定与第一频带相关的第一电力消耗模式,和与数据传输速度高于第一频带的第二频带相关的第二电力消耗模式。
控制信号传输单元380进行通过无线通信单元320和天线310,把从控制单元370输出的控制信号传送给另一个无线通信设备的传输处理。
管理信息保持单元390是保持用于管理利用无线通信,连接到信息处理设备300的各个发送端设备的信息(管理信息)的表格。保持在管理信息保持单元390中的内容将参考图4详细说明。
[保持在管理信息保持单元中的内容例子]
图4是示意图解说明按照本技术的第一实施例的保持在管理信息保持单元390中的内容例子的示图。
管理信息保持单元390是保持用于管理利用无线通信,连接到信息处理设备300的各个发送端设备的信息(管理信息)的表格。例如,在管理信息保持单元390中,彼此关联地保持终端标识信息391、频道392、无线电波传播测量信息393、设备信息394、频带使用水平395、输出形式396、待机或唤醒397,和多接收分集对应398。
在终端标识信息391中,保存用于识别利用无线通信,连接到信息处理设备300的发送端设备的识别信息。
在频道392中,保存利用无线通信,连接到信息处理设备300的发送端设备实际使用的频道。
在无线电波传播测量信息393中,保存与利用无线通信,连接到信息处理设备300的发送端设备相关的无线电波传播测量信息。所述无线电波传播测量信息是由流接收单元330对于利用无线通信,连接到信息处理设备300的每个发送端设备测量的。
作为无线电波传播测量信息393,例如,保存分组差错率(PER)、误码率(BER)、分组重传次数和吞吐量。作为无线电波传播测量信息393,例如,保存丢帧、信号-干扰比(SIR)和接收信号强度指示(RSSI)。这里,代替SIR,可以使用信号-干扰加噪声比(SINR)。图4中图解所示的无线电波传播测量信息393是例子。可以保存所述各项信息中的至少一项信息,或者流接收单元330可以测量另一项无线电波传播测量信息,以便保存。可以获得并保存由发送端设备测量的无线电波传播测量信息。可以确定接收侧接收的分组延迟,关于所述分组延迟的信息可用作无线电波传播测量信息。所述分组延迟充当与无线电波传播相关的一个指标,因为当发生错误时,在通过层2中的重传处理,向接收侧的传输中发生延迟。例如,分组延迟充当指示其中多个设备共用无线频带的无线系统中,何处链路特性恶化的指标。
在设备信息394中,保存利用无线通信,连接到信息处理设备300的发送端设备的分类(发送端设备的属性)。例如,作为发送端设备的分类,保存移动设备或固定设备。作为发送端设备的分类,可以保存其电源被插入的设备,或者另一个设备。作为发送端设备的分类,可以保存电池驱动设备,或者另一种设备。
在频带使用水平395中,保存利用无线通信,连接到信息处理设备300的发送端设备的频带使用水平。例如,作为频带使用水平,可以使用分辨率或吞吐量。例如,在频带使用水平中,可以保存使用期间的吞吐量,可以准备预先决定的表格,可以保存并管理指示表格的范围的对应的编号。
在输出形式396中,保存基于从利用无线通信,连接到信息处理设备300的发送端设备传送的流的数据显示形式(输出形式)。例如,保存以从发送端设备传送的流为基础,显示在显示单元351上的图像数据的显示形式(主图像(中间通道)或副图像(周边通道))。例如,保存以从发送端设备传送的流为基础,从音频输出单元352输出的音频数据的输出形式(主音频或副音频)。按照显示形式,可以实现其中不显示周边通道的格式。
在待机或唤醒397中,保存利用无线通信,连接到信息处理设备300的发送端设备的模式(待机模式或唤醒模式)。待机模式和唤醒模式将参考图6-8详细说明。
在多接收分集对应398中,保存指示利用无线通信,连接到信息处理设备300的发送端设备是否对应于多接收分集的信息。
这样,保持在管理信息保持单元390中的管理信息是联系用于识别另一个信息处理设备的识别信息(终端标识信息391)和关于所述另一个信息处理设备的能力信息以便管理的信息。保持在管理信息保持单元390中的管理信息至少包括关于与和另一个信息处理设备的通信有关的无线电波传播测量的信息(无线电波传播测量信息393),和关于电力消耗的信息(待机或唤醒397),作为关于另一个信息处理设备的能力信息。保持在管理信息保持单元390中的管理信息包括关于显示图像信息的显示形式的信息(显示形式396),作为关于另一个信息处理设备的能力信息。关于显示形式的信息例如是指示图像信息被显示成主信息或者副信息的信息。
[图像的转变例子]
图5是图解说明按照本技术的第一实施例,显示在信息处理设备300的显示单元351上的图像的转变例子的示图。
图5a图解说明其中通过把图像11设定为中间通道,把图像12设定为周边通道,在信息处理设备300的显示单元351上,显示图像11和12的显示形式的例子。
图5b图解说明其中通过把图像11设定为周边通道,把图像12设定为中间通道,在信息处理设备300的显示单元351上,显示图像11和12的显示形式的例子。
例如,设想其中信息处理设备200和400都向信息处理设备300传送具有标准分辨率的流(图像数据和音频数据)的情况。这种情况下,如图1中图解所示,可以图像11和图像12的大小相同地在信息处理设备300的显示单元351上,显示基于来自信息处理设备200的图像数据的图像11,和基于来自信息处理设备400的图像数据的图像12。在本例中,给定分辨率和显示区域被定义成相同,不过可向显示单元351增加缩放器功能,以致图像11和12被重新缩放后显示在显示单元351上。不过,在本技术的实施例中,为了易于说明,在说明中假定不使用这种功能。
在图像11和12的显示形式中,例如,可以保持在先前通信时设定的显示形式,图像11和12可按照所述显示形式,被显示在信息处理设备300的显示单元351上。
可根据与信息处理设备300的连接顺序,决定图像11和12的显示形式。例如,设想其中信息处理设备200首先连接到信息处理设备300,在该连接之后,信息处理设备400连接到信息处理设备300的情况。这种情况下,通过把图像11设定为中间通道,把图像12设定为周边通道,在信息处理设备300的显示单元351上显示图像11和12。即,可根据与信息处理设备300的连接顺序,按照中间通道和周边通道的顺序显示图像。
如图5a中图解所示,当通过把图像11设定为中间通道,把图像12设定为周边通道,在显示单元351上显示图像11和12时,假定用户信息获取单元360获得把图像12设定为中间通道的用户信息。例如,当观看者利用诸如遥控器或手势之类的指示器,进行把图像12设定为中间通道的操作时,用户信息获取单元360获得用于把图像12设定为中间通道的用户信息。这种情况下,如在图5b中图解所示,通过把图像12设定为中间通道,把图像11设定为周边通道,在显示单元351上显示图像11和12。此外,根据用户信息获取单元360获得的用户信息(例如,手动操作或视线),决定图像11和12在显示单元351的显示面上的显示位置。
[通信例子]
图6-8是图解说明按照本技术的第一实施例的包含在通信系统100中的设备之间的通信处理例子的序列图。图6-8图解说明信息处理设备200和300之间的通信处理的例子。
在图6-8中,包含在信息处理设备200中的各个单元之中的图像和音频信号生成单元250、图像和音频压缩单元260及流传输单元270被例示成数据传输系统201。天线210、无线通信单元220、控制信号接收单元230和控制单元240被例示成线路控制系统202。
在图6-8中,信息处理设备300的结构中的天线310、无线通信单元320、流接收单元330、控制单元370和控制信号传输单元380被例示成线路控制系统301。图像和音频解压缩单元340、图像和音频输出单元350及用户信息获取单元360被例示成输入和输出系统302。
在图6-8中,首先图解说明其中基于来自信息处理设备200的图像数据的图像作为周边通道,被显示在信息处理设备300的显示单元351上,并在信息处理设备200中设定低电力消耗模式的例子。随后,图解说明其中基于来自信息处理设备200的图像数据的图像作为中间通道,被显示在显示单元351上,并在信息处理设备200中设定通常电力消耗模式的例子。即,在图6-8中,图解说明信息处理设备200和300的连接建立例子,和信息处理设备200中的电力消耗模式的转变例子。
首先,当信息处理设备300被通电时,先前的输出形式(当信息处理设备300被断电时的输出形式)被设定为信息处理设备300的输出形式(图像显示形式和音频输出形式)(501)。信息处理设备300的控制单元370使管理信息保持单元390(图4中所示)保持利用无线通信,连接到信息处理设备300的各个发送端设备的管理信息。如图5中所示,根据先前的输出形式,信息处理设备300的控制单元370使显示单元351显示与分别传送自信息处理设备200和400的两个流对应的图像11和12。
随后,设想其中用户进行设定输出形式的操作(变更操作)的情况(502)。这种情况下,用户信息获取单元360获得与设定操作相关的控制信号,作为用户信息,所述用户信息被输出给控制单元370。随后,控制单元370根据所述用户信息,变更保持在管理信息保持单元390(图4中所示)中的内容(503和504)。例如,如在图5b中所示,设想其中进行把基于来自信息处理设备200的图像数据的图像11设定为周边通道的设定操作(变更操作)的情况。这种情况下,控制单元370把管理信息保持单元390中的信息处理设备200的输出形式396(图4中所示)变更成“副”(503和504)。
信息处理设备200定期或不定期地(还包括只在开始时)向信息处理设备300传送模式表格请求(分辨率、音质、低电力消耗模式等的查询请求)(505和506)。所述模式表格请求是传送在信息处理设备300中管理的各项信息(所述各项信息是借助关于信息处理设备300的管理信息,用于与信息处理设备200通信的信息(例如,可由信息处理设备200显示的分辨率信息等))的请求。
当信息处理设备300收到模式表格请求时(506),信息处理设备300按照所述模式表格请求,传送命令信息(507、508)。所述命令信息是供信息处理设备300用于把设定命令连同无线电波传播环境和显示形式一起,发给信息处理设备200的关于信息处理设备200的信息。例如,所述命令信息是包括分辨率和音质的输出形式信息(例如,中间通道和周边通道),是否对应于低电力消耗模式,制作者姓名,和多接收分集功能的有无的信息。例如,所述命令信息是包括分辨率和音质,图像和音频编解码器的种类,3D功能的有无,内容保护的有无,显示设备的显示大小,拓扑信息,可用协议,协议的设定信息(端口信息等),连接接口信息(连接器种类等),水平同步和垂直同步位置,发送端设备的性能优先级请求信息,是否对应于低电力消耗模式的模式控制表格响应,无线传输的最大传输吞吐量或可接收的最大吞吐量,中央处理器(CPU)功率,电池剩余电量,和电源信息的信息。每项信息包含在能力信息的一部分中。这里,关于信息处理设备200的分辨率和音质的输出形式信息例如是指示来自信息处理设备200的数据的显示形式是主形式(中间通道)还是副形式(周边通道)的信息。信息处理设备300从信息处理设备300的视点,传送以参数的形式,包含关于分辨率和音质或低电力消耗模式的设定的要求的命令信息。除了关于信息处理设备200的各项信息之外,信息处理设备300还可以命令信息的形式,传送关于所有发送端设备的各项信息。这种情况下,信息处理设备200只选择和使用专用于自身信息处理设备的信息。当设备遵从Wi-Fi认证的Miracast时,该设备对应于定义为RTSP消息的wfd-audio-codecs、wfd-video-formats、wfd-content-protection、wfd-displayedid、wfd-coupledsink、wfd-client-rtpports、wfd-I2C、wfd-uibccapability、wfd-connectortype、wfd-standby-resume-capability等,不过在这些命令中,待传送的消息内容不受限制。
当信息处理设备200收到命令信息时(508),信息处理设备200的控制单元240根据命令信息,指定来自信息处理设备200的数据的输出形式是主形式还是副形式。根据命令信息,信息处理设备200的控制单元240判定信息处理设备300是否具有与电力消耗工作模式对应的功能。随后,信息处理设备200的控制单元240向信息处理设备300传送指示指定的输出形式被设定的模式设定信息(509和510)。这里,假定副形式被指定为来自信息处理设备200的数据的输出形式。假定信息处理设备300具有与低电力消耗模式对应的功能。因而,信息处理设备200的控制单元240向信息处理设备300传送模式设定信息,用于向信息处理设备300通知指定的输出形式(副形式)被设定,并且低电力消耗模式被设定(509和510)。
在本例中,说明了其中根据命令信息,图像被指定为中间通道或者周边通道,然后设定低电力消耗模式的例子,不过,可以不使用中间通道或周边通道的判断作为基准地设定低电力消耗模式。例如,通过在发送端设备和接收端设备之间,交换指示模式可转变到低电力消耗模式的许可标记,可以设定低电力消耗模式。
随后,信息处理设备200的控制单元240把图像传输模式(周边通道)设定为传输模式(511)。因而,在数据传输系统201中,音质被设定,以输出用于显示周边通道的分辨率和副音频(512)。在线路控制系统202中,设定低电力消耗模式(513)。
这里,当按照这种方式设定低电力消耗模式时,接收端设备和发送端设备都被认为具有该功能。例如,移动设备(例如蜂窝电话机、智能电话机或平板终端)在许多情况下是由电池驱动工作的。于是,当来自自身信息处理设备的数据的输出形式不是主形式时(当输出形式为副形式时),理想的是尽可能降低自身信息处理设备的电池消耗。因而,在使接收端设备中的输出形式被设定为副形式的发送端设备中,理想的是设定低电力消耗模式。此外,在设定处理(512)中,可以只有分配给中间通道的发送端设备的音频被设定从扬声器再现,而分配给周边通道的发送端设备的音频可被设定成不被再现。分配给中间通道的发送端设备的音频的音量可被设定成主要部分,而分配给周边通道的发送端设备的音频的音量可被设定成降低后再现。
这样,当输出形式被设定为周边通道(副显示)时,信息处理设备300的控制单元370进行设定信息处理设备200中的低电力消耗模式的控制。即,信息处理设备300的控制单元370根据其中基于流,输出图像信息的显示单元351的输出形式,进行在信息处理设备200中设定电力消耗模式的控制。
当按照这种方式,设定低电力消耗模式时(513),信息处理设备200的控制单元240开始间歇传输(514-522)。
具体地,信息处理设备200仅仅使传输处理停止给定时间,并使各个单元睡眠(514)。随后,当所述给定时间过去时(514),信息处理设备200唤醒信息处理设备200的各个单元,以便进行传输处理,然后进行相对于信息处理设备300的传输处理(515-520)。
例如,信息处理设备200的控制单元240向信息处理设备300传送查询消息,以确认在信息处理设备300中是否产生任何变动(例如输出形式的变动)(515和516)。
当收到查询消息时(516),信息处理设备300的控制单元370向信息处理设备200传送响应消息,以通知是否产生任何变动(例如输出形式的变动)(517和518)。这里,假定在信息处理设备300中未产生变动(例如输出形式的变动)。于是,信息处理设备300的控制单元370向信息处理设备200传送用于通知未产生变动(例如输出形式的变动)的响应消息(517和518)。
当按照这种方式收到指示未产生变更(例如输出形式的变更)的响应消息时(518),不需要变更信息处理设备200中的设定。于是,信息处理设备200的控制单元240向信息处理设备300传送用于输出周边通道和副音频的流(519和520)。当信息处理设备300按照这种方式收到所述流时(520),信息处理设备300输出以接收的流为基础的图像和音频(521)。例如,如在图5b中图解所示,基于来自信息处理设备200的流的图像11作为周边通道被显示在显示单元351上。
当传输处理结束时(519),信息处理设备200仅仅使传输处理停止给定时间,使各个单元睡眠(522)。继续执行间歇传输,直到从信息处理设备300发出变更请求为止。
这里,在间歇传输中,存在其中不从信息处理设备200传送流的时间段。于是,信息处理设备300最好进行插值,并显示与最后从信息处理设备200接收的流对应的图像的显示处理。不过,假定信息处理设备300也不具有插值处理功能。这种情况下,在睡眠期间,来自信息处理设备200的图像可不被显示在显示单元351上。于是,当信息处理设备300不具有插值处理功能时,可以继续传送来自信息处理设备200的图像数据。例如,在作为来自信息处理设备200的传输对象的流中,传输停止时的最后图像数据被保存在传输缓冲器中。在睡眠期间,信息处理设备200的图像处理被停止,但是在无线链路中继续进行传输处理,从而继续传送保存在传输缓冲器中的图像数据。
在睡眠期间,只有与从信息处理设备400传送的流对应的图像可被显示在显示单元351上。例如,与从信息处理设备400传送的流对应的图像可被显示在显示单元351的整个表面上。
下面,说明其中用户进行设定输出形式的操作(变更操作)的情况的例子。
当用户进行设定输出形式的操作(变更操作)时(531),如上所述,控制单元370根据与设定操作相关的用户信息,变更保持在管理信息保持单元390(图4中所示)中的内容(532和533)。例如,如在图5a中所示,假定其中用户进行把基于来自信息处理设备200的图像数据的图像11设定为中间通道的设定操作(变更操作)的情况。这种情况下,控制单元370把管理信息保持单元390中的信息处理设备200的输出形式396(示于图4中)变更成“主”(532和533)。
这里,如上所述,当在信息处理设备200中设定低电力消耗模式时,假定信息处理设备200进入睡眠状态。这样,当信息处理设备200睡眠时,不能向信息处理设备200通知用户进行了设定输出形式的操作(变更操作)。
因而,当用户进行设定输出形式的操作(变更操作)531,从而保持在管理信息保持单元390(图4中所示)中的内容被变更时(532和533),信息处理设备300的控制单元370设定变更触发(534)。所述变更触发是当从信息处理设备200收到查询消息时,用于向信息处理设备200通知用户进行了设定输出形式的操作(变更操作)的触发。通过该变更触发,信息处理设备200取消待机模式的状态,并通知信息处理设备200,用户进行了设定输出形式的操作(变更操作)。
这里,设想其中信息处理设备200的各个单元唤醒,从而开始向信息处理设备300的传输处理的情况。这种情况下,信息处理设备300的控制单元370向信息处理设备200传送待机解除消息(535和536)。
当收到待机解除消息时(536),信息处理设备200的控制单元240向信息处理设备300传送响应消息(537和538)。
这样,按照来自接收端设备的待机模式解除请求(535-538),需要询问信息处理设备200中的设定。于是,信息处理设备200的控制单元240向信息处理设备300传送模式表格请求(539和540)。如上所述,所述模式表格请求是传送在信息处理设备300中管理的各项信息(关于信息处理设备200的管理信息)的请求。在上述处理(535-538)中,可以交换变更(比如输出形式的变更)的消息(例如,对于处理(515-518)中的查询消息的响应消息)。
当信息处理设备300收到模式表格请求时(540),信息处理设备300传送与模式表格请求相应的命令信息(541和542)。这里,当命令信息已从信息处理设备300被传送给信息处理设备200时,信息处理设备200已获得包含在命令信息中的信息。于是,信息处理设备300可以只传送差分信息,作为与模式表格请求相应的命令信息(541和542)。所述差分信息是与变更相关的信息,例如,是关于信息处理设备200的分辨率和音质的输出形式信息。
在收到命令信息时(542),信息处理设备200的控制单元240根据命令信息,指定来自信息处理设备200的数据的输出形式是主形式还是副形式。随后,信息处理设备200的控制单元240把指示指定的输出形式的设定的模式设定信息传送给信息处理设备300(543和544)。这里,假定主形式被指定为来自信息处理设备200的数据的输出形式。因而,信息处理设备200的控制单元240向信息处理设备300传送用于向信息处理设备300通知指定的输出形式(主形式)被设定,并且通常电力消耗模式被设定的模式设定信息(543和544)。当设备遵从Wi-Fi认证的Miracast时,可借助能力再协商,进行各个处理(539-544)。在能力再协商的情况下,不需要关于在处理(534)中输出形式未变更的设定值再次进行协商。例如,可以例示的是wfd-displayedid、wfd-client-rtpports、wfd-I2C和wfd-connectortype。
随后,信息处理设备200的控制单元240把图像传输模式(中间通道)设定为传输模式(545)。因而,在数据传输系统201中,设定用于显示中间通道的分辨率,和用于输出主音频的音质(546)。在线路控制系统202中,设定通常电力消耗模式(547)。
当按照这种方式设定通常电力消耗模式时(547),信息处理设备200的控制单元240开始通常的传输处理(548和549)。即,信息处理设备200向信息处理设备300传送用于输出中间通道和主音频的流(548和549)。当按照这种方式收到所述流时(549),信息处理设备300输出以接收的流为基础的图像和音频(550)。例如,如在图5a中所示,基于来自信息处理设备200的流的图像11作为中间通道被显示在显示单元351上。
在本例中,说明了其中当信息处理设备300被通电时,先前的输出形式(当信息处理设备300被断电时的输出形式)被设定为显示单元351的显示形式的例子。不过,当信息处理设备300被通电时,可以设定另一种输出形式。例如,当信息处理设备300被通电时,可以通常设定默认输出形式。或者,可根据与信息处理设备300的连接的顺序,决定输出形式。
在图6-8中,说明了其中信息处理设备200询问关于信息处理设备300的设定信息,并根据接收的参数信息,设定传输参数的例子。不过,信息处理设备200可向信息处理设备300要求对于期望被设定的参数的设定请求,并在信息处理设备200从信息处理设备300收到指示没问题的响应时,可以设定所述参数。图9和10中图解说明了该例子。
[通信例子]
图9-11是图解说明按照本技术的第一实施例的包含在通信系统100中的设备之间的通信处理例子的序列图。在图9和10中,在图6-8中图解所示的通信处理例子的一部分被修改。于是,在图9和10中,与图6-8中所示的通信处理例子相同的部分被赋予相同的附图标记,其说明将被部分省略。在图11中,在图9中图解所示的通信处理例子的一部分被修改。于是,在图11中,与图9中图解所示的通信处理例子相同的部分被赋予相同的附图标记,其说明将被部分省略。
图9中图解所示的处理(561-564)对应于图6中图解所示的处理(501-504)。
随后,信息处理设备300的控制单元370向信息处理设备200传送用于把用户设定的输出形式通知信息处理设备200的模式状态通知(565和566)。所述模式状态通知是用于通知可由信息处理设备200设定的分辨率和音质,图像和音频编解码器的种类,3D功能的有无,内容保护的有无,显示设备的显示大小,拓扑信息,可用协议,协议的设定信息(端口信息等),连接接口信息(连接器的种类等),水平同步和垂直同步位置,发送端设备的性能优先级请求信息,是否对应于低电力消耗模式的模式控制表格响应,无线传输的最大传输吞吐量或可接收的最大吞吐量,中央处理器(CPU)功率,电池剩余电量,和电源信息,以及由用户设定的输出形式(例如,主形式或副形式)的信息。
这样,紧接在进行信息处理设备300中,用户进行的输出形式的设定操作之后,用于把与设定操作相关的输出形式通知信息处理设备200的模式状态通知可被传送给信息处理设备200。于是,能够缩短利用无线通信连接的信息处理设备200和300之间的设定时间(变更时间)。
当收到模式状态通知时(566),信息处理设备200的控制单元240比较由接收的模式状态通知指定的状态参数和自身信息处理设备的状态参数。随后,信息处理设备200的控制单元240根据比较结果,决定设定内容(例如,分辨率和音频,以及电力消耗模式)。随后,信息处理设备200的控制单元240向信息处理设备300传送用于通知决定的设定内容(例如,分辨率和音频,以及电力消耗模式)的模式设定请求(567和568)。
当收到模式设定请求时(568),信息处理设备300的控制单元370判定是否允许由收到的模式设定请求指定的设定内容(例如分辨率和音频,以及电力消耗模式)。随后,信息处理设备300的控制单元370向信息处理设备200传送用于通知判定结果的模式设定可行性命令(569和570)。
当收到模式设定可行性命令时(570),信息处理设备200的控制单元240确认模式设定可行性命令的内容。例如,当收到指示与由信息处理设备200传送的模式设定请求相关的设定内容的许可的模式设定可行性命令时,信息处理设备200的控制单元240把图像传输模式(周边通道)设定为传输模式(571)。此外,图9中图解所示的处理(571-574)对应于图6中图解所示的处理(511-514)。此外,图10中图解所示的处理(575-578)对应于图7中图解所示的处理(519-522)。
当收到指示与由信息处理设备200传送的模式设定请求相关的设定内容的不许可的模式设定可行性命令时,信息处理设备200的控制单元240重新决定设定内容(例如,分辨率和音频,以及电力消耗模式)。随后,信息处理设备200的控制单元240向信息处理设备300传送用于把新决定的设定内容(例如,分辨率和音频,以及电力消耗模式)通知信息处理设备300的模式设定请求。
图10中图解所示的处理(581-583)对应于图7中图解所示的处理(531-533)。
随后,信息处理设备300的控制单元370向信息处理设备200传送用于把用户变更的输出形式通知信息处理设备200的模式状态变更通知(584和585)。所述模式状态变更通知是用于通知可由信息处理设备200设定的分辨率和音质,和是否对应于低电力消耗模式,以及用户变更的输出形式(例如,主形式或副形式)的信息。
当收到模式状态变更通知时(585),信息处理设备200的控制单元240决定设定内容(例如,分辨率和音频,以及电力消耗模式)。决定设定内容的处理和上面说明的决定处理相同。随后,信息处理设备200的控制单元240向信息处理设备300传送用于把决定的设定内容(例如,分辨率和音频,以及电力消耗模式)通知信息处理设备300的模式变更请求(586和587)。
当收到模式变更请求时(587),信息处理设备300的控制单元370判定是否允许收到的模式变更请求指定的设定内容(例如,分辨率和音频,以及电力消耗模式)。随后,信息处理设备300的控制单元370向信息处理设备200传送用于通知判定结果的模式设定可行性命令(588和589)。
当收到模式设定可行性命令时(589),信息处理设备200的控制单元240确认模式设定可行性命令的内容,并设定传输模式(590)。该确认处理和上面说明的确认处理相同。图10中图解所示的处理(590-595)对应于图8中图解所示的处理(545-550)。
这里,当发送端设备进行周边通道和中间通道的切换时,指示切换的时刻的信息(例如,指示图像组(GOP)的开始的信息,或者指示图像的开始的信息)可被包含在待传送的流中。换句话说,当发送端设备进行主显示和副显示的切换时,指示切换的时刻的信息可被传送给接收端设备。这种情况下,收到流的接收端设备可根据指示时刻的信息,在适当时刻进行周边通道和中间通道的切换。
这里,图6-10图解说明其中控制连接到接收端设备的发送端设备的待机和唤醒的例子。这里,可根据连接到接收端设备的发送端设备的待机和唤醒,控制接收端设备的待机和唤醒。例如,当连接到接收端设备的所有发送端设备都待机时,可以进行控制,以致接收端设备待机。当连接到接收端设备的发送端设备至少之一唤醒时,可以进行控制,以致该接收端设备唤醒。
图11中图解说明其中在图9中所示的处理(565-570)中,接收端设备通知发送端设备在处理(564)中保持的内容被变更,发送端设备传送模式表格请求的情况的变形例。
如图11中图解所示,信息处理设备300传送通知信息处理设备200输出形式被变更(564),并促成从信息处理设备200传送模式设定请求的模式状态通知(565和566)。当对应可能时,收到模式状态通知的信息处理设备200向信息处理设备300传送指示模式状态通知的认可的模式状态通知认可(851和852)。
这样,在传送模式状态通知认可之后(851),进行各个处理(853-858)。所述各个处理(853-858)对应于图6中图解所示的处理(505-510)。这样,通过在模式状态通知认可的传输之后(851),进行各个处理(853-858),能够在状态变更(输出形式的变更(564))下,适当地进行流传输控制(例如,数据传输速度控制和可缩放传输速率控制)。
这里,例如,在按照Wi-Fi认证的Miracast准备的命令中,包括wfd-triggered-method的RTSPM5消息目前被定义为由信息处理设备200传送给信息处理设备300的命令。不过,当包括wfd-triggered-method的RTSPM5消息被扩展为由信息处理设备300传送给信息处理设备200的命令时,包括wfd-triggered-method的RTSPM5消息可被信息处理设备200接收,从而信息处理设备200能够与信息处理设备300开始能力再协商。即,利用包括wfd-triggered-method的RTSPM5消息,能够交换管理信息。例如,当管理信息被变更时,信息处理设备300的控制单元370能够进行控制,以致在Wi-Fi认证的Miracast规范中定义的包括wfd-triggered-method的RTSPM5消息,作为向信息处理设备200通知所述变更的命令被传送给信息处理设备200。除该命令之外,可以新定义充当等同物的命令。
[信息处理设备(发送端设备)的操作例子]
图12是图解说明按照本技术的第一实施例,由信息处理设备200进行的数据传输处理的处理过程的例子的流程图。图12图解说明其中信息处理设备200首先向信息处理设备300传送具有标准分辨率的流(图像数据和音频数据)的情况的例子。这种情况下,假定进行向信息处理设备300的基于所述流的输出。
首先,控制单元240向信息处理设备300传送模式表格请求(步骤S1001)。随后,控制单元240判定是否从信息处理设备300收到命令信息(步骤S1002)。当未收到命令信息时,继续进行监视。当即使等待给定时间,仍未收到命令信息时,处理因超时而结束。例如,在Wi-Fi认证的Miracast中,取决于状况,设定5秒-9秒的超时。
当从信息处理设备300收到命令信息时(步骤S1002),控制单元240向信息处理设备300传送指示根据接收的命令信息,设定模式的模式设定信息(步骤S1003)。
随后,控制单元240根据接收的命令信息,设定模式(步骤S1004)。当命令信息中包含增大分辨率的变更请求时,控制单元240响应该变更请求,设定图像和音频的分辨率。当命令信息中包含降低分辨率的变更请求时,控制单元240响应该变更请求,设定图像的分辨率和音频的音质。
随后,控制单元240进行按照设定,把流传送给信息处理设备300的传输处理(步骤S1005)。
随后,控制单元240判定是否设定了低电力消耗模式(步骤S1006)。当未设定低电力消耗模式(即,设定了通常电力消耗模式)时,处理进入步骤S1011。相反,当设定了低电力消耗模式时(步骤S1006),控制单元240睡眠给定时间(步骤S1007)。
随后,控制单元240向信息处理设备300传送查询消息(步骤S1008)。随后,控制单元240判定是否从信息处理设备300收到响应消息(步骤S1009)。当未收到响应消息时,继续进行监视。当尽管等待给定时间,仍未收到响应消息时,处理因超时而终止。例如,在Wi-Fi认证的Miracast中,取决于状况,设定5秒-9秒的超时。
当从信息处理设备300收到响应消息时(步骤S1009),控制单元240判定响应消息是否包括变更请求(步骤S1010)。当响应消息包括变更请求时(步骤S1010),处理返回步骤S1001。
当响应消息不包括变更请求时(步骤S1010),控制单元240判定是否收到变更请求(步骤S1011)。当收到变更请求时(步骤S1011),处理返回步骤S1001。相反,当未收到变更请求时(步骤S1011),控制单元240判定是否进行了传输停止操作(步骤S1012)。当进行了传输停止操作时(步骤S1012),数据传输处理的操作结束。相反,当未进行传输停止操作时(步骤S1012),处理返回步骤S1005。
[信息处理设备(接收端设备)的操作例子]
图13是图解说明按照本技术的第一实施例,由信息处理设备300进行的数据传输速度控制处理的处理过程的例子的流程图。图13图解说明其中当信息处理设备300收到流(图像数据和音频数据)时,决定与发送端设备相关的设定内容(例如分辨率和电力消耗模式)的例子。
例如,信息处理设备300的控制单元370可按照用于设定中间通道的用户信息,或者信息处理设备300与各个发送端设备之间的链路无线电波传播环境,决定要使用的分辨率和要使用的频道。
例如,假定其中进行在图5a中图解所示的状态下选择图像12的用户操作的情况。这种情况下,理想的是增大图像12的分辨率,并降低图像11的分辨率。此外,理想的是随着时间的过去,根据各个发送端设备的链路无线电波传播环境,选择图像11和12的最佳分辨率。
例如,信息处理设备300可使对应于对应吞吐量的数据流向多个频道的同时,了解无线电波传播特性。例如,信息处理设备300保持以便了解所述多个频道中的每个频道的理想吞吐量的表格。随后,信息处理设备300可根据同时使用的发送端设备的数目,和PER,了解待使用的频道的可用数据传输速度,并为每个频道选择最佳频道。
例如,控制单元370从管理信息保持单元390获得管理信息,从用户信息获取单元360获得用户信息(步骤S1021)。随后,控制单元370根据获得的管理信息和用户信息,决定输出形式(步骤S1022)。根据决定的输出形式,与从多个发送端设备中的每个发送端设备传送的两个流对应的图像被显示在显示单元351上。
随后,控制单元370判定是否存在对其来说,包含在管理信息中的PER小于阈值的发送端设备(步骤S1023)。当存在对其来说,包含在管理信息中的PER等于或小于阈值的发送端设备时(步骤S1023),控制单元370决定增大发送端设备的分辨率的变更请求(步骤S1024)。按照基于用户信息的输出形式,控制单元370进行向中间通道分配高数据传输速度的控制。例如,变更请求被包含在待传送给发送端设备的命令信息(例如,图6中所示的命令信息)中。可判定在增大发送端设备的分辨率之后的吞吐量是否小于阈值,并可根据判定结果,控制流的速率。
当不存在对其来说,包含在管理信息中的PER等于或小于阈值的发送端设备时(步骤S1023),控制单元370根据管理信息,判定各个发送端设备的吞吐量是否等于或小于阈值(步骤S1025)。即,判定每个链路的吞吐量即使对于当前频道是否也没有问题(步骤S1025)。
当各个发送端设备的吞吐量不等于或小于阈值时(步骤S1025),处理返回步骤S921。相反,当各个发送端设备的吞吐量等于或小于阈值时(步骤S1025),控制单元370根据管理信息,判定是否存在对应于低电力消耗模式的发送端设备(步骤S1026)。
当存在对应于低电力消耗模式的发送端设备时(步骤S1026),控制单元370决定在对应于低电力消耗模式的发送端设备中,设定低电力消耗模式的变更请求(步骤S1028)。例如,该变更请求被包含在待传送给该发送端设备的命令信息(例如,图6中所示的命令信息)中。
当不存在对应于低电力消耗模式的发送端设备时(步骤S1026),控制单元370决定降低发送端设备(对其来说,PER等于或小于阈值的发送端设备)的分辨率的变更请求(步骤S1027)。例如,该变更请求被包含在待传送给该发送端设备的命令信息(例如,图6中所示的命令信息)中。
判定是否进行接收停止操作(步骤S1029)。当进行接收停止操作时,数据传输速度控制处理的操作结束。当未进行接收停止操作时,处理返回步骤S1021。当存在通过低电力消耗模式的设定,进入睡眠状态的发送端设备时,连接到信息处理设备300的发送端设备的数目减小。这种情况下,步骤S1025中的吞吐量的阈值可被变更。在按照这种方式变更吞吐量的阈值之后,可以进一步进行和步骤S1025对应的步骤。
这样,能够实现其中接收端设备持续给定时间,训练线路环境,并把能够进行稳定的视频通信的分辨率通知发送端设备的控制协议。还能够实现其中发送端设备持续给定时间,在线路环境中进行训练,并请求能够进行稳定的视频通信的分辨率,而接收端设备响应所述请求的控制协议。
这样,信息处理设备300的控制单元370可根据管理信息保持单元390的管理信息,和用户信息获取单元360获得的用户信息,进行从各个发送端设备传送的两个流的传输控制(例如,数据传输速度控制和可缩放传输速率控制)。
此外,可以进行使从信息处理设备200和400每一个传送的两个流的总数据传输速度降至最小的控制。例如,在接收侧信息处理设备300的控制单元370中,设定总数据传输速度的最大容许值。在控制单元370向信息处理设备200传送降低比特率的变更请求之后,控制单元370从流接收单元330获得从信息处理设备200和400传送的两个流的比特率。随后,控制单元370计算获得的两个流的总数据传输速度。随后,控制单元370在不大于设定的最大容许值的范围内,决定从信息处理设备400传送的流的比特率,并向信息处理设备400传送增大比特率的变更请求。当尽管比特率被设定为最小比特率,但PER较高,从而在相同频道中不能接收时,可以使用不同的频道。当图像(中间通道和周边通道)被暂停给定时间或更长时,图像数据可被停止,只要用户未进行操作(比如指示操作)。
这样,按照本技术的第一实施例,即使当一个接收端设备接收从多个发送端设备传送的多个流时,也能够按照用户的操作、状况和意图,进行适当的流传输控制(例如,数据传输速度控制)。例如,可按照用户的操作、状况和意图,降低多个图像和音频流中的一些流的数据传输速度,并增大剩余流的数据传输速度。
例如,当接收端设备接收并显示多个流时,可以欣赏具有由用户及时设定的高质量的重要图像和音频。对于另外的图像和音频,数据传输速度可被自动调整到最佳的频道,电力消耗和传输速率。
这里,对于保持在管理信息保持单元390中的管理信息,按照Wi-Fi认证的Miracast准备的命令可用于交换所述管理信息。这种情况下,可以使用在Wi-Fi Display规范中定义的能力协商或能力再协商。这里,作为能力协商或能力再协商,例如,可以例示的是RFC5939或Wi-Fi认证的Miracast规范。不过,能力协商或能力再协商不限于此,而是被定义为设备性能信息的交换。图14-16中图解说明利用Wi-Fi认证的Miracast规范的命令的交换的通信例子。
[利用Wi-Fi认证的Miracast规范命令的交换的通信例子]
图14-16是图解说明按照本技术的第一实施例,发送端设备和接收端设备之间的通信处理例子的序列图。图14-16图解说明利用RTSP协议的交换的通信例子。发送端设备820对应于信息处理设备200和400,而接收端设备830对应于信息处理设备300。
首先参考图14进行说明。例如,如用图14的虚线矩形840所示,可以使用从发送端设备920传送给接收端设备930的“RTSP M3请求”(RTSP GET_PARAMETER请求)消息,和响应“RTSP M3请求”(RTSP GET_PARAMETER请求)消息,从接收端设备830传送给发送端设备820的“RTSP M3响应”(RTSP GET_PARAMETER响应)消息。这种交换处理例如对应于图6中所示的处理(505-508),和图8中所示的处理(539-542)。另一方面,消息可酌情从发送端设备820传送给接收端设备830。例如,“RTSP M3请求”(RTSP GET_PARAMETER请求)消息和“RTSP M3响应”(RTSP GET_PARAMETER响应)消息的交换可被省略,可把管理信息包含在将从发送端设备820传送给接收端设备830的消息中,所述管理信息可从发送端设备820被传送给接收端设备830,接收端设备830可选择信息,并把该信息保持在管理信息保持单元390中。例如,当进行内容保护设定时,在M3响应之后,进行链路保护设置。于是,理想的是在通过只传送M4以上的消息,确保一次设定的链路的保密性的时候进行通信。
借助利用RTSP协议的预定消息,可以进行关于电力消耗模式的信息的交换。例如,可以交换下述(1)-(3)的3种管理信息:
(1)“待机模式的设定”,
(2)“当发送端设备解除待机模式时,或者当发送端设备解除接收端设备的待机模式时”,和
(3)“当接收端设备解除待机模式时,或者当接收端设备解除发送端设备的待机模式时”。
首先参考图15进行说明。例如,当使用在Wi-Fi认证的Miracast中准备的命令时,在如上所述的(1)“待机模式的设定”的交换中,可以使用从发送端设备820传送给接收端设备830的“RTSP M12请求”(RTSP SET_PARAMETER(带有WFD-standby))消息,和响应“RTSPM12请求”(RTSP SET_PARAMETER(带有WFD-standby))消息,从接收端设备830传送给发送端设备820的“RTSP M12响应”(RTSP OK)消息。另一方面,这也适用于从接收端设备830到发送端设备820的待机模式的设定。
接下来参考图16进行说明。例如,如上所述的(2)“当发送端设备解除待机模式时,或者当发送端设备解除接收端设备的待机模式时”,发送端设备820交换传送给接收端设备830的“RTSP M5请求”(RTSP SET_PARAMETER(请求(wfd-trigger-method:PLAY))消息,和响应“RTSP M5请求”(RTSP SET_PARAMETER(请求(wfd-trigger-method:PLAY))消息,从接收端设备830传送给发送端设备820的“RTSP M5响应”(RTSP OK)消息。接收端设备830可利用传送给发送端设备820的“RTSP M7请求”(RTSP PLAY请求)消息,和响应“RTSP M7请求”(RTSP PLAY请求)消息,从发送端设备820传送给接收端设备830的“RTSP M7响应”(RTSPOK)消息。
在本技术的第一实施例中,说明了其中发送端设备的数目为2的拓扑例子,从而当这两个发送端设备中的任意一个被控制时,可以给出包括终端标识信息的命令。这里,将说明利用图4中图解所示的终端标识信息391(DSC200和DR400)的例子。信息处理设备200的终端标识信息391用DSC200指示,而信息处理设备400的终端标识信息391用DR400指示。例如,信息处理设备300(接收端设备830)通过把终端标识信息391“DSC200”加入待传送给信息处理设备200(发送端设备820)的“RTSP M7请求”(RTSP PLAY请求)消息中,生成“RTSP M7请求”(RTSP SET_PARAMETER(Request(wfd-trigger-method:PLAY DSC200))消息。此外,例如,信息处理设备300(接收端设备830)通过把终端标识信息391“DR400”加入待传送给信息处理设备400(发送端设备820)的“RTSP M7请求”(RTSP PLAY请求)消息中,生成“RTSP M7请求”(RTSP SET_PARAMETER(Request(wfd-trigger-method:PLAY DR400))消息。如上所述,接收端设备指定发送端设备,并进行RTSP M7请求。在这个例子中,举例说明了与“PLAY”相关的消息,不过本技术不限于此。例如,可以使用与“SETUP”、“PAUSE”或“TEARDOWN”相关的消息。
例如,如上所述的(3)“当接收端设备解除待机模式时,或者当接收端设备解除发送端设备的待机模式时”,接收端设备830可利用传送给发送端设备820的“RTSP M7请求”(RTSP PLAY请求)消息,和响应“RTSP M7请求”(RTSP PLAY请求)消息,从发送端设备820传送给接收端设备830的“RTSP M7响应”(RTSP OK)消息。所述交换例如对应于图7中所示的处理(515-518),和图7中所示的处理(535-538)。
例如,在图9中所示的处理(565-570)的交换中,可以利用从接收端设备830传送给发送端设备820的“RTSP M12请求”(RTSP SET_PARAMETER(带有WFD-standby))消息,和响应“RTSP M12请求”(RTSP SET_PARAMETER(带有WFD-standby))消息,从发送端设备820传送给接收端设备830的“RTSP M12响应”(RTSP OK)消息。
此外,例如,在图10中所示的处理(584-589)的交换中,可以利用从接收端设备830传送给发送端设备820的“RTSP M7请求”(RTSP PLAY请求)消息,和响应“RTSP M7请求”(RTSP PLAY请求)消息,从发送端设备820传送给接收端设备830的“RTSP M7响应”(RTSPOK)消息。
这样,无线通信单元320可借助在Wi-Fi Display规范中定义的能力协商或能力再协商,进行能力信息的交换。例如,借助能力协商或能力再协商中的RTSP M3消息,交换能力信息。
这样,例如,信息处理设备300的无线通信单元320进行与发送端设备的通信,以便交换关于信息处理设备300的能力信息,和关于信息处理设备200的能力信息。信息处理设备200的无线通信单元220进行与信息处理设备300的通信,以便交换关于信息处理设备200的能力信息,和关于信息处理设备300的能力信息。这种情况下,无线通信单元220和320可借助能力协商或能力再协商,交换能力信息。
信息处理设备300的控制单元370根据关于信息处理设备200的能力信息,关于与信息处理设备200的通信的无线电波传播测量信息,和信息处理设备300的使用,进行与信息处理设备200的流传输控制(例如,数据传输速度控制和可缩放传输速率控制)。流传输方法和本技术的实施例中的不同,不过,信息处理设备200的控制单元240也可根据以关于信息处理设备200的能力信息,和关于与信息处理设备300的流通信的无线电波传播测量信息为基础,从信息处理设备300进行的控制,进行与信息处理设备300的流传输控制(例如,数据传输速度控制和可缩放传输速率控制)。
信息处理设备300的控制单元370根据关于信息处理设备200的能力信息(例如,指示信息处理设备200是否是移动设备的信息),进行在信息处理设备200中设定电力消耗模式的控制。这种情况下,控制单元370可根据关于信息处理设备200的能力信息,和用于管理信息处理设备200的管理信息,进行在信息处理设备200中设定低电力消耗模式的控制。信息处理设备200的控制单元240根据以关于信息处理设备200的能力信息为基础,从信息处理设备300进行的控制,设定电力消耗模式。在本技术的实施例中,说明了其中使用两个发送端设备的拓扑的例子,不过本技术的实施例不限于本技术的该实施例。例如,当发送端设备的数目为2或更大时,必须控制与设备的数目对应的数据传输速度控制,状态转移相当多。于是,控制困难,但是能够获得好处。也可对应于其中连接两个或更多发送端设备的拓扑。
<2.第二实施例>
在本技术的第二实施例中,将说明利用近场通信(NFC),开始发送端设备和接收端设备之间的群组认证,并通过发送端设备和接收端设备之间的直接连接进行图像传输的例子。在本技术的第二实施例中,将说明把按照数字版权管理的内容(DRM内容)设定为发送端设备和接收端设备的显示对象的例子。
[通信系统的结构例子]
图17是图解说明按照本技术的第二实施例的通信系统700的系统结构例子的示图。
通信系统700包括网络701、信息处理设备703、704、710、720和730、显示设备731和DRM内容服务器740。
在本技术的第二实施例中,将说明其中假定信息处理设备703、704、710和720是传输侧信息处理设备(发送端设备),假定信息处理设备730是接收侧信息处理设备(接收端设备)的例子。信息处理设备703、704、710和720对应于图2中图解所示的信息处理设备200,信息处理设备730对应于图3中图解所示的信息处理设备300。在下面的说明中,作为发送端设备,将主要说明信息处理设备710,所述说明类似地适用于信息处理设备703、704和720。
信息处理设备710是传送图像的传输侧信息处理设备(发送端设备)。信息处理设备710可通过P2P直接通信(例如,WiFi Direct),建立与信息处理设备730的连接。例如,信息处理设备710具有能够通过WiFi Direct,建立与信息处理设备730的连接,并且能够实现诸如Wi-Fi认证的Miracast或数字生活网络联盟(DLNA)之类图像通信的协议。
信息处理设备730具有与信息处理设备703、704、710和720或者DRM内容服务器740建立连接的通信功能。信息处理设备730具有与信息处理设备703、704、710和720,和DRM内容服务器740建立连接,并控制所有协议的功能。信息处理设备730具有与专用LAN或全局LAN建立连接的通信功能。
信息处理设备730具有显示图像的显示功能。显示功能是进行电视机或投影仪的屏幕显示的功能。信息处理设备730可使图像被显示在信息处理设备730配备的显示单元上,或者可使图像被显示在外部显示设备上。在本技术的第二实施例中,将说明其中安装与信息处理设备730分离的显示设备731的例子。
当如上所述,安装与信息处理设备730分离的显示设备731时,可通过有线连接或无线连接,连接信息处理设备730和显示设备731。例如,当通过有线连接,连接信息处理设备730和显示设备731时,可以利用电缆(例如,高清多媒体接口(HDMI)(注册商标)、移动高清链路(MHL)、DisplayPort或USB3.0),建立连接。此外,例如,当通过无线连接,连接信息处理设备730和显示设备731时,可以利用无线LAN,建立连接。多个显示设备可被连接到信息处理设备730。
DRM内容服务器740是保持内容(DRM内容)的服务器,其中对内容(DRM内容)的分发或再现设定某些限制。DRM内容服务器740把保持的DRM内容提供给包含在通信系统700中的信息处理设备(信息处理设备703、704、710、720和730)。例如,DRM内容服务器740用包括保持的介质的设备(例如,游戏机、硬盘驱动器(HDD)记录器或媒体服务器)实现。
例如,DRM内容服务器740利用有线线路或无线线路,与信息处理设备730连接。例如,信息处理设备730支持的通信方式(例如,无线LAN)可用于无线通信。可以使用红外方式、任何其它无线方式或者任何其它通信方式。
例如,DRM内容服务器740经信息处理设备730与信息处理设备703、704、710和720连接。
DRM内容服务器740包括通信单元741、控制单元742和DRM内容存储单元743。
在控制单元742的控制下,通信单元741经网络701,进行与信息处理设备730的各项信息的传输和接收。
控制单元742根据控制程序,控制DRM内容服务器740的各个单元。例如,控制单元742进行按照来自包含在通信系统700中的各个信息处理设备(信息处理设备703、704、710、720和730)的请求,提供保存在DRM内容存储单元743中的DRM内容的控制。
DRM内容存储单元743是保存DRM内容的存储单元。
这里,将说明发送端设备和接收端设备之间的通信模式。例如,图像传输模式被设定为通信模式。这里,图像传输模式是其中进行从发送端设备到接收端设备的图像传输的通信模式,发送端设备和接收端设备按照P2P方式直接连接。图像传输模式包括其中传送中间通道的图像的图像传输模式(中间通道),和其中传送周边通道的图像的图像传输模式(周边通道)。
图像传输模式(中间通道)是其中传送使图像被显示在接收端设备的显示单元中的中间通道(中间通道区域733)上的图像数据的通信模式。在图像传输模式(中间通道)下,例如,通过高频带的无线传输路径,传送图像数据。
图像传输模式(周边通道)是其中传送使图像被显示在接收端设备的显示单元中的中间通道(周边通道区域734)上的图像数据的通信模式。在图像传输模式(周边通道)下,例如,通过低频带的无线传输路径,传送图像数据。
在发送端设备中,假定在接收端设备的控制下,通信模式被顺序切换,例如,像图像传输模式(周边通道)→图像传输模式(中间通道)→图像传输模式(周边通道)→…似的。
[图像数据的通信例子]
图18是示意图解说明按照本技术的第二实施例,在包含在通信系统700中的设备之间交换的图像数据的流动的例子的示图。
图18图解说明其中保存在DRM内容服务器740的DRM内容存储单元743中的DRM内容750被显示在信息处理设备710的显示单元711和显示设备731的显示单元732上的例子。
这里,例如,对于DRM内容750的分发或再现,设定某些限制。因此,例如,可能难以按照Wi-Fi认证的Miracast,把显示在信息处理设备710的显示单元711上的DRM内容750传送给显示设备731,并使DRM内容750显示在显示单元732上。
在这方面,在本技术的第二实施例中,接收端设备从外部设备获得待显示在包含在从发送端设备传送的显示画面中的非显示区(DRM内容显示区)上的DRM内容。随后,接收端设备显示其中合成从发送端设备传送的显示画面和DRM内容的合成图像。这里,非显示区指示显示在发送端设备上的显示画面中的按照版权管理的图像的显示区(例如,DRM内容显示区)。
例如,如用箭头751所示,信息处理设备710的控制单元经信息处理设备730,从DRM内容服务器740获得DRM内容750。随后,信息处理设备710的控制单元使获得的DRM内容750被显示在显示单元711上。例如,基于DRM内容750的图像被显示在显示单元711的区域712上,基于保存在信息处理设备710中的内容的图像被显示在显示单元711的区域713上。
这里,当如用箭头751所示,传送DRM内容750时,接收端设备(信息处理设备730)只实现路由功能。当如上所述,接收端设备只实现路由功能时,DRM内容可被传送。
如用箭头752所示,信息处理设备710的控制单元按照Wi-Fi认证的Miracast,把显示在显示单元711上的整个显示画面753传送给信息处理设备730。然而,例如对于DRM内容750的分发或再现,设定某种限制。因此,信息处理设备710的控制单元传送特定颜色的图像(例如,黑色图像)754,作为显示在显示单元711上的显示画面753中的DRM内容750的显示区(显示单元711的区域712)。这里,例如,DRM内容750的显示区(显示单元711的区域712)是其中在其它设备中不可显示DRM内容750的区域(非显示图像区)。
如用箭头755所示,信息处理设备730的控制单元从DRM内容服务器740获得DRM内容750。随后,信息处理设备730的控制单元进行合成从信息处理设备710传送的显示画面730和获得的DRM内容750的合成处理756。在合成处理756中,信息处理设备730的控制单元进行合成从信息处理设备710传送的显示画面753中的特定颜色的图像754的区域和基于DRM内容750的图像的合成处理。
随后,如用箭头757所示,信息处理设备730的控制单元使通过合成处理756生成的合成图像758被传送给显示设备731,并被显示在显示单元732上。例如,基于DRM内容750的图像被显示在显示单元732的区域735上,基于保存在信息处理设备710中的内容的图像被显示在显示单元732的区域736上。
结果,保存在DRM内容服务器740的DRM内容存储单元743中的DRM内容750可被显示在信息处理设备710的显示单元711和显示设备731的显示单元732上。
[发送端设备的通信模式的切换例子]
这里,将说明当切换通信模式(其中显示DRM内容的图像传输模式和其中不显示DRM内容的图像传输模式)时的切换方法。
例如,利用发送端设备的切换或利用接收端设备的切换可用作切换发送端设备的通信模式的触发。例如,利用发送端设备的切换是按照使用发送端设备的用户的操作的主动切换。例如,利用接收端设备的切换是按照使用接收端设备的用户的操作的切换。
各个设备中的用户的操作(切换操作)例如是使用各个设备装备的操作接收单元(例如,操作部件或触摸面板)的用户的操作,或者使用各个设备装备的用户信息获取单元(例如,检测手势的检测单元)的用户的操作。
在利用发送端设备的切换中,例如,预先安装在发送端设备中的应用或操作部件的操作输入可用作切换触发。例如,当在发送端设备中进行切换操作时,与通信模式的切换相关的命令被传送给接收端设备(信息处理设备730)。当收到该命令时,在进行关于其它频带的控制的同时,接收端设备(信息处理设备730)进行以致传送该命令的发送端设备的频带被增大或减小的控制。
在利用发送端设备的切换中,例如,接收端设备(信息处理设备730)中的用户的操作可用作切换触发。例如,当在接收端设备(信息处理设备730)中进行发送端设备的切换操作时,进行以致在对其他频带执行控制的同时其中进行了所述切换操作的发送端设备的频带被增大或减小的控制。
[连接处理例子]
图19是图解说明按照本技术的第二实施例,发送端设备和接收端设备之间的连接处理例子的序列图。图19图解说明信息处理设备(发送端设备)710和信息处理设备(接收端设备)730之间的连接处理例子。
首先,信息处理设备710进行设备发现(Device Discovery)(615)。当通过设备发现,检测到信息处理设备730时,信息处理设备710与信息处理设备730进行基于形成(Formation)的主-从关系的决定,和认证处理(620)。当各个处理完成时,在信息处理设备710和信息处理设备730之间建立连接。随后,信息处理设备710进行与信息处理设备730的直接通信(操作(Operation))(616)。
这里,将说明Formation(620)。
首先,在信息处理设备710和信息处理设备730之间进行GO_Negotiation。在GO_Negotiation中,信息处理设备710和信息处理设备730交换起群组所有者(GO)作用的优先级,优先级较高的信息处理设备被确定起群组所有者(GO)的作用。图19图解说明其中信息处理设备730的优先级较高,从而信息处理设备730被确定为群组所有者(GO)的例子。
具体地,信息处理设备710把GO_Negotiation_Request传送给信息处理设备730(621)。当收到GO_Negotiation_Request时(621),信息处理设备730向信息处理设备710传送GO_Negotiation_Response(622)。当收到GO_Negotiation_Response(622)时,信息处理设备710向信息处理设备730传送GO_Negotiation_Confirmation(623)。
通过这些交换(621-623),信息处理设备730被确定为群组所有者(GO),而信息处理设备710被确定为客户端。
随后,信息处理设备710和信息处理设备730执行Wi-Fi受保护接入(WPS)_exchange(624)。通过WPS_exchange的执行,信息处理设备710和信息处理设备730共享凭证(例如,服务集标识符(SSID)和Wi-Fi受保护接入2(WPS2)-pre-shared密钥(PSK))。
随后,信息处理设备710和信息处理设备730执行4-way_handshake(625)。
[利用NFC,开始群组认证的例子]
在本技术的第二实施例中,将说明其中利用近场通信,开始发送端设备和接收端设备之间的群组认证的例子。例如,可利用通过NFC(近场通信)协议的Wi-Fi直接连接(Direct)或者利用NFC协议的Wi-Fi直接连接(Wi-Fi direct),开始群组认证。例如通过具有NFC功能的发送端设备直接接触具有NFC功能的接收端设备,可以开始群组认证。
通过NFC协议的Wi-Fi直接连接(Wi-Fi Direct)是利用发送端设备和接收端设备之间的接触,连接发送端设备和接收端设备的协议。例如,所述协议是通过使具有NFC标签的发送端设备接触(或接近)具备NFC读/写器功能的接收端设备,交换用于连接Wi-FiDirect的信息的协议。
如上所述,利用使发送端设备直接接触接收端设备的用户操作,可以开始群组认证。从而,当用户打算加入群组时,用户可主动进行加入群组的操作。此外,在发送端设备和接收端设备之间的直接连接之后,可以进行到与接入点的连接的切换。因而,能够提供用户友好的界面。此外,对用户来说,通过进行使发送端设备接触期望的接收端设备的操作,能够使发送端设备连接到期望的接收端设备。
通过使发送端设备接触另一个设备,而不是直接接触接收端设备,可以开始群组认证。例如,在其中进行发送端设备和接收端设备之间的图像传输的场所的入口附近,安装读/写器设备。所述读/写器设备通过利用近场通信(例如,NFC),与信息处理设备交换各种信息。读/写器设备通过利用无线线路或有线线路,把与信息处理设备交换的信息传送给接收端设备。
例如,通过使发送端设备接触读/写器设备,可以开始群组认证。这种情况下,读/写器设备把与所接触的发送端设备相关的信息(例如,终端标识信息或个人识别号(PIN)码)传送给接收端设备。对于PIN码,优选使用单独生成的唯一ID。
此外,例如,用于操作接收端设备(例如,信息处理设备730)或显示设备(例如,显示设备731)的遥控器可以用作接收端设备。例如,通过使发送端设备接触具备NFC读/写器功能的遥控器,可以开始群组认证。这种情况下,遥控器把与所接触的发送端设备相关的信息(例如,终端标识信息或PIN码)传送给接收端设备。
[通信例子]
图20和21是图解说明按照本技术的第二实施例,包含在通信系统700中的设备之间的通信处理例子的序列图。图20和21图解说明信息处理设备(发送端设备)710、信息处理设备(接收端设备)730和DRM内容服务器740之间的通信处理例子。
图20和21图解说明其中通过使信息处理设备710直接接触信息处理设备730,开始群组认证的例子。
在图20和21的例子中,信息处理设备(接收端设备)730起群组认证服务器的作用。换句话说,信息处理设备(接收端设备)730被假定具有群组认证功能。
在图20和21中,信息处理设备710被假定具有NFC标签功能,信息处理设备730被假定具有NFC读/写器功能。信息处理设备730起DHCP服务器的作用。
首先,信息处理设备730接触信息处理设备710(631和632)。当如上所述,信息处理设备730接触信息处理设备710时(631和632),信息处理设备710的控制单元(对应于图2中图解所示的控制单元240)开始与信息处理设备730的直接连接(633和634)。
随后,信息处理设备710被确定为P2P客户端(635),信息处理设备730被确定为P2P群组所有者(GO)(636)。随后,信息处理设备710的控制单元从信息处理设备730接收无线电参数,并根据接收的无线电参数,进行连接处理。
随后,信息处理设备710的控制单元从信息处理设备730(DHCP服务器)获得IP地址(637和638)。
此外,信息处理设备730的控制单元(对应于图3中图解所示的控制单元370)进行群组认证处理(639)。在群组认证处理中,判定信息处理设备710是否参加利用由信息处理设备710启动的应用操作的群组(639)。换句话说,信息处理设备730的控制单元进行判定对于信息处理设备710是否允许用于操作由信息处理设备710启动的应用的连接的群组认证处理(639)。
例如,在群组认证处理中,判定在属于相同群组并且已处于连接状态的发送端设备和接收端设备任意之一中,是否进行了向信息处理设备710给予许可的用户操作。随后,在已在设备(发送端设备和接收端设备)任意之一中,进行了向信息处理设备710给予许可的用户操作的条件下,可以进行允许信息处理设备710参加群组的判定。
例如,进行用于向信息处理设备710给予许可的用户操作的显示画面(例如,弹出式画面)被显示在各个设备(发送端设备和接收端设备)至少之一的显示单元上。随后,当在显示画面上进行向信息处理设备710给予许可的用户操作时,信息处理设备730的控制单元判定允许信息处理设备710参加群组(639)。
例如,可根据信息处理设备是否已预先被登记,进行群组认证处理。例如,信息处理设备730的控制单元判定允许其终端标识信息预先登记在信息处理设备730中的信息处理设备参加群组(639)。
当在群组认证处理中,判定允许信息处理设备710参加群组时(639),信息处理设备730的控制单元把连接许可信息传送给信息处理设备710(640和641)。这里,连接许可信息是指示允许信息处理设备710参加利用由信息处理设备710启动的应用操作的群组的信息。
此外,当在群组认证处理中,判定不允许信息处理设备710参加群组(认证不被许可)时(639),信息处理设备730的控制单元向信息处理设备710传送连接不许可信息。这里,连接不许可信息是指示不允许信息处理设备710参加利用由信息处理设备710启动的应用操作的群组的信息。当信息处理设备710收到连接不许可信息时,数据传输处理的操作结束。
当收到来自信息处理设备730的连接许可信息时(641),信息处理设备710的控制单元经接入点701,把与信息处理设备710相关的能力信息传送给信息处理设备730(642和643)。所述能力信息是用于进行与信息处理设备730的Wi-Fi认证的Miracast通信的能力信息。
当收到来自信息处理设备710的能力信息时(643),信息处理设备730的控制单元把设定请求信息传送给信息处理设备710(644和645)。设定请求信息是请求用于进行按照Wi-Fi认证的Miracast标准的图像传输的设定的信息。
这里,信息处理设备730进行与信息处理设备730相连的发送端设备的频带控制和显示画面控制。因此,必须请求新连接的信息处理设备710传送其中根据与其它发送端设备的关系来考虑群组共享的参数的设定。在这方面,在允许信息处理设备710参加群组之后,信息处理设备730的控制单元根据与和信息处理设备730相连的各个发送端设备相关的各项信息,传送与信息处理设备710相关的设定请求信息(644和645)。
当收到设定请求信息时(645),在信息处理设备710中,图像传输模式被设定为初始状态。随后,信息处理设备710的控制单元根据从信息处理设备730接收的设定请求信息,向信息处理设备730传送设定请求(646和647)。此外,当在信息处理设备710和信息处理设备730之间执行Wi-Fi认证的Miracast通信时,假定在信息处理设备710中继续设定图像传输模式。
当收到设定请求时(647),信息处理设备730的控制单元把指示允许与设定请求对应的图像的接收的确认信息传送给信息处理设备710(648和649)。此外,当不允许与设定请求对应的图像的接收时,信息处理设备730的控制单元把指示不许可的确认信息传送给信息处理设备710。这种情况下,数据传输处理的操作结束。
当收到确认信息时(649),信息处理设备710的控制单元开始与信息处理设备730的直接P2P连接(650和651)。随后,信息处理设备710的控制单元根据与接收的确认信息对应的连接请求,与信息处理设备730进行图像参数和音频参数的协商,然后传送图像数据(650和651)。
这里,假定进行用于显示DRM内容的DRM内容显示指令操作(652)。当进行DRM内容显示指令操作时(652),信息处理设备710的控制单元把与DRM内容显示相关的信息传送给信息处理设备730(653和654)。这里,例如,与DRM内容显示相关的信息是与显示画面中的非显示区(DRM内容显示区)相关的命令信息,能够指定非显示区和DRM内容。与DRM内容显示相关的信息例如包括与DRM内容显示区相关的信息,和与DRM内容相关的信息。与DRM内容显示还相关的信息例如是指定显示单元711中的显示大小和显示位置的信息。例如,与DRM内容相关的信息是指定充当显示对象的DRM内容的信息(例如,统一资源定位符(URL))。
当收到与DRM内容显示相关的信息时(654),信息处理设备730的控制单元把DRM内容的访问确认信息传送给DRM内容服务器740(655,656)。DRM内容的访问确认信息是用于访问由与DRM内容显示相关的信息指定的DRM内容的确认信息。
当收到DRM内容的访问确认信息时(656),DRM内容服务器740的控制单元742判定是否允许对DRM内容的访问。随后,当判定允许对DRM内容的访问时,DRM内容服务器740的控制单元742把DRM内容的访问许可信息传送给信息处理设备730(657和658)。此外,当判定不允许对DRM内容的访问时,DRM内容服务器740的控制单元742把DRM内容的访问不许可信息传送给信息处理设备730。这种情况下,信息处理设备710不能使DRM内容被显示在显示单元711上。
当收到DRM内容的访问许可信息时(658),信息处理设备730的控制单元把DRM内容的访问确认终止通知传送给信息处理设备710(659和660)。DRM内容的访问确认终止通知是通知DRM内容服务器740对于DRM内容的访问确认已终止的信息。
信息处理设备730的控制单元把与DRM内容接收相关的设定信息传送给信息处理设备710(661和662)。与DRM内容接收相关的设定信息是供信息处理设备710经信息处理设备730接收DRM内容的信息(例如,分辨率、传输速率、其它能力信息、或者进行包括其它链路的频带控制的结果)。
当收到DRM内容的访问确认终止通知,和与DRM内容接收相关的设定信息时(660和662),信息处理设备710的控制单元获得DRM内容(663-666)。这种情况下,信息处理设备710的控制单元经信息处理设备730,从DRM内容服务器740接收和获得DRM内容(663-666)。
随后,信息处理设备710的控制单元解码接收的DRM内容,使基于解码的DRM内容的图像显示在显示单元711上(667)。
随后,信息处理设备710的控制单元按照Wi-Fi认证的Miracast,把显示在显示单元711上的整个显示画面传送给信息处理设备730(668和669)。这种情况下,信息处理设备710的控制单元传送特定颜色的图像(例如,黑色图像),作为显示在显示单元711上的显示画面中的DRM内容显示区(显示单元711中的显示区)(668和669)。换句话说,显示在显示单元711上的整个显示画面,和与DRM内容显示区相关的信息被传送给信息处理设备730(668和669)。
信息处理设备730的控制单元从DRM内容服务器740获得将与显示在显示单元711上的整个显示画面合成的DRM内容(670、671)。随后,信息处理设备730的控制单元进行合成从信息处理设备710传送的显示画面和获得的DRM内容的合成处理(672)。
随后,信息处理设备730的控制单元使通过合成处理(672)生成的合成图像被传送给显示设备731,并被显示在显示单元732上(673)。
如上所述,信息处理设备730的控制单元进行控制,以致获得待显示在包含在从信息处理设备710传送的显示画面(第一图像信息)中的DRM内容显示区(非显示区)上的DRM内容(第二图像信息)。随后,信息处理设备730的控制单元进行控制,以致其中合成显示画面(第一图像信息)和DRM内容(第二图像信息)的合成图像被传送给显示设备731,并显示在显示单元732上。
这种情况下,信息处理设备730的控制单元可根据与从信息处理设备710传送的非显示区相关的命令信息,指定显示画面(第一图像信息)中的非显示区,和DRM内容(第二图像信息)。例如,信息处理设备730的控制单元可根据包含在命令信息中的非显示区的位置和大小,指定非显示区。此外,例如,信息处理设备730的控制单元可根据与包含在命令信息中的DRM内容(第二图像信息)相关的地址信息(例如,URL),从外部设备获得DRM内容(第二图像信息)。
信息处理设备710的控制单元进行控制,以致与包含在显示在显示单元711上并被传送给和显示在信息处理设备730上的图像信息中的非显示区相关的命令信息被传送给信息处理设备730。随后,信息处理设备710的控制单元进行控制,以致图像信息中的除非显示区外的图像信息被传送给信息处理设备730。
[信息处理设备(发送端设备)的操作例子]
图22和23是图解说明按照本技术的第二实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。图22和23图解说明其中通过使信息处理设备710直接接触信息处理设备730,开始群组认证的例子。
在图22和23中,假定信息处理设备710具有NFC标签功能,假定信息处理设备730具有NFC读/写器功能。信息处理设备730起DHCP服务器的作用。
首先,信息处理设备710的控制单元判定信息处理设备710是否接触信息处理设备730(步骤S1031)。当信息处理设备710未接触信息处理设备730时(步骤S1031),继续进行监视。
当信息处理设备710接触信息处理设备730时(步骤S1031),信息处理设备710的控制单元开始与信息处理设备730的直接连接(步骤S1032)。换句话说,信息处理设备710起P2P客户端的作用,而信息处理设备730起P2P GO的作用。随后,信息处理设备710的控制单元从信息处理设备730接收无线参数,并根据接收的无线参数,进行连接处理(步骤S1033)。
随后,信息处理设备710的控制单元从信息处理设备730(DHCP服务器)获得IP地址(步骤S1034)。
随后,信息处理设备710的控制单元判定是否从信息处理设备730收到连接许可信息(步骤S1035)。当未从信息处理设备730收到连接许可信息时(步骤S1035),数据传输处理的操作终止。
当从信息处理设备730收到连接许可信息时(步骤S1035),信息处理设备710的控制单元把与信息处理设备710相关的能力信息传送给信息处理设备730(步骤S1036)。
随后,信息处理设备710的控制单元判定是否从信息处理设备730收到设定请求信息(步骤S1037)。当未收到设定请求信息时(步骤S1037),继续进行监视。
当收到设定请求信息时(步骤S1037),在信息处理设备710中,设定图像传输模式,作为初始状态。随后,信息处理设备710的控制单元根据从信息处理设备730接收的设定请求信息,向信息处理设备730传送设定请求(步骤S1038)。
随后,信息处理设备710的控制单元判定是否从信息处理设备730,收到指示允许与设定请求对应的图像的接收的确认信息(步骤S1039)。当未从信息处理设备730收到确认信息时(步骤S1039),继续进行监视。
当从信息处理设备730收到确认信息时(步骤S1039),信息处理设备710的控制单元开始与信息处理设备730的直接P2P连接(步骤S1040)。随后,信息处理设备710的控制单元根据与接收的确认信息对应的连接请求,与信息处理设备730进行图像参数和音频参数的协商,并传送图像数据(步骤S1041)。
随后,信息处理设备710的控制单元判定是否进行了DRM内容显示指令操作(步骤S1042)。随后,当未进行DRM内容显示指令操作时(步骤S1042),处理返回步骤S1041。
当进行了DRM内容显示指令操作时(步骤S1042),信息处理设备710的控制单元判定是否经信息处理设备730,进行对DRM内容的访问(步骤S1043)。例如,当经信息处理设备730进行对DRM内容的访问时,信息处理设备710新安装经信息处理设备730与专用LAN相连的端口,并访问连接到专用LAN的DRM内容。
当判定不经信息处理设备730进行对DRM内容的访问时(步骤S1043),DRM内容不可显示,从而处理返回步骤S1041。这种情况下,由于判定不经信息处理设备730进行对DRM内容的访问,因此信息处理设备710的控制单元可向用户通知DRM内容不可显示(通过显示器或音频输出)。
当判定经信息处理设备730进行对DRM内容的访问时(步骤S1043),信息处理设备710的控制单元把与DRM内容显示相关的信息传送给信息处理设备730(步骤S1044)。
随后,信息处理设备710的控制单元判定是否收到DRM内容的访问确认终止通知(步骤S1045)。随后,当未收到DRM内容的访问确认终止通知时,继续进行监视。
当收到DRM内容的访问确认终止通知时(步骤S1045),信息处理设备710的控制单元判定是否收到与DRM内容接收相关的设定信息(步骤S1046)。随后,当未收到与DRM内容接收相关的设定信息时,继续进行监视。
当收到与DRM内容接收相关的设定信息时(步骤S1046),信息处理设备710的控制单元经信息处理设备730,从DRM内容服务器740接收DRM内容(步骤S1047)。
随后,信息处理设备710的控制单元解码接收的DRM内容,使基于解码的DRM内容的图像显示在显示单元711上(步骤S1048)。
随后,信息处理设备710的控制单元按照Wi-Fi认证的Miracast,把显示在显示单元711上的整个显示画面传送给信息处理设备730(步骤S1049)。这种情况下,信息处理设备710的控制单元传送特定颜色的图像(例如,黑色图像),作为显示在显示单元711上的显示画面中的DRM内容显示区(显示单元711中的显示区)(步骤S1049)。
随后,信息处理设备710的控制单元判定是否进行了变更DRM内容显示位置的变更操作(步骤S1050)。当未进行变更操作时(步骤S1050),处理进入步骤S1053。当进行了变更操作时(步骤S1050),信息处理设备710的控制单元把与利用变更操作的变更之后的DRM内容显示相关的变更命令传送给信息处理设备730(步骤S1051)。变更命令是向接收端设备通知DRM内容显示区的位置已被变更的命令。变更命令包括与利用变更操作的变更之后的DRM内容显示区相关的信息(例如,显示单元711中的显示大小和显示位置),和与DRM内容相关的信息(充当显示对象的DRM内容的URL)。信息处理设备730的控制单元可根据变更命令,确定信息处理设备710的显示单元711中的整个显示画面中的DRM内容的位置。
随后,信息处理设备710的控制单元判定是否从信息处理设备730收到变更完成信息(步骤S1052)。变更完成信息是通知与从信息处理设备710传送的变更命令对应的变更处理已完成的信息(命令)。由于信息处理设备710收到变更完成信息,因此信息处理设备710的控制单元可变更DRM内容的显示位置。
随后,信息处理设备710的控制单元判定是否进行了终止DRM内容显示的操作(DRM内容显示终止操作)(步骤S1053)。当进行了DRM内容显示终止操作时(步骤S1053),信息处理设备710的控制单元向信息处理设备730传送DRM内容显示终止信息(步骤S1054),然后处理返回步骤S1041。DRM内容显示终止信息是向接收端设备通知DRM内容显示终止的信息(命令)。
当进行DRM内容显示终止操作时(步骤S1053),信息处理设备710的控制单元进行变更,以致不进行把特定颜色的图像显示成DRM内容显示区的处理。
当收到DRM内容显示终止信息时,信息处理设备730的控制单元终止DRM内容合成处理,以致可以不变更地解码从信息处理设备710传送的图像数据,并显示在显示设备731上。
当未进行DRM内容显示终止操作时(步骤S1053),信息处理设备710的控制单元判定线路是否已被断开(步骤S1055)。随后,当线路已被断开时(步骤S1055),数据传输处理的操作终止。当线路未被断开时(步骤S1055),处理返回步骤S1047。
[信息处理设备(接收端设备)的操作例子]
图24和25是图解说明按照本技术的第二实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。图24和25图解说明其中通过使信息处理设备730直接接触信息处理设备710,开始群组认证的例子。
在图24和25中,假定信息处理设备710具有NFC标签功能,假定信息处理设备730具有NFC读/写器功能。信息处理设备730起DHCP服务器作用。
首先,信息处理设备730的控制单元判定信息处理设备710是否接触信息处理设备730(步骤S1061)。当信息处理设备730未被信息处理设备710接触时(步骤S1061),继续进行监视。
当信息处理设备730被信息处理设备710接触时(步骤S1061),信息处理设备730的控制单元开始与信息处理设备710的直接连接(步骤S1062)。换句话说,信息处理设备710起P2P客户端作用,信息处理设备730起P2P GO作用。随后,信息处理设备730的控制单元把无线参数传送给信息处理设备710,并根据无线参数,进行连接处理(步骤S1063)。
随后,信息处理设备730的控制单元把IP地址传送给信息处理设备710(步骤S1064)。
随后,信息处理设备730的控制单元进行群组认证处理(步骤S1065)。当在群组认证处理中,判定允许信息处理设备710参加时(步骤S1066),信息处理设备730的控制单元把连接许可信息传送给信息处理设备710(步骤S1067)。
此外,当在群组认证处理中,判定不允许信息处理设备710参加时(当认证不被允许时)(步骤S1067),数据接收处理的操作终止。这种情况下,信息处理设备730的控制单元可向信息处理设备710传送连接不许可信息。
随后,信息处理设备730的控制单元判定是否从信息处理设备710收到与信息处理设备710相关的能力信息(步骤S1068)。当收到与信息处理设备710相关的能力信息时(步骤S1068),信息处理设备730的控制单元向信息处理设备710传送设定请求信息(步骤S1069)。
随后,信息处理设备730的控制单元判定是否从信息处理设备710收到设定请求(步骤S1070)。随后,当未收到设定请求时,继续进行监视。
当收到设定请求时(步骤S1070),信息处理设备730的控制单元把指示允许与连接请求对应的图像的接收的确认信息传送给信息处理设备710(步骤S1071)。
随后,信息处理设备730的控制单元开始与信息处理设备710的P2P直接连接(步骤S1072)。随后,信息处理设备730的控制单元根据接收的连接请求,与信息处理设备710进行图像参数和音频参数的协商,并进行接收图像数据的处理(步骤S1073)。步骤S1073是记载在权利要求书中的第一处理的例子。
随后,信息处理设备730的控制单元判定是否从信息处理设备710收到与DRM内容显示相关的信息(步骤S1074)。随后,当未收到与DRM内容显示相关的信息时(步骤S1074),处理返回步骤S1073。
当收到与DRM内容显示相关的信息时(步骤S1074),信息处理设备730的控制单元把DRM内容的访问确认信息传送给DRM内容服务器740(步骤S1075)。
随后,信息处理设备730的控制单元判定是否从DRM内容服务器740收到DRM内容的访问许可信息(步骤S1076)。当未收到DRM内容的访问许可信息时(步骤S1076),继续进行监视。
当收到DRM内容的访问许可信息时(步骤S1076),信息处理设备730的控制单元向信息处理设备710传送DRM内容的访问确认终止通知(步骤S1077)。
随后,信息处理设备730的控制单元向信息处理设备710传送与DRM内容接收相关的设定信息(步骤S1078)。随后,信息处理设备730的控制单元把从DRM内容服务器740接收的DRM内容传送给信息处理设备710(步骤S1079)。
随后,信息处理设备730的控制单元判定是否从信息处理设备710收到显示在信息处理设备710的显示单元711上的整个显示画面,和与DRM内容显示区相关的信息(步骤S1080)。当未收到整个显示画面和与DRM内容显示区相关的信息时(步骤S1080),继续进行监视。
当收到整个显示画面和与DRM内容显示区相关的信息时(步骤S1080),信息处理设备730的控制单元从DRM内容服务器740获得DRM内容(步骤S1081)。随后,信息处理设备730的控制单元进行合成从信息处理设备710传送的显示画面和获得的DRM内容的合成处理(步骤S1082)。
随后,信息处理设备730的控制单元使利用合成处理生成的合成图像被传送给显示设备731,并显示在显示单元732上(步骤S1083)。步骤S1080-S1083是记载在权利要求书中的第二处理的例子。
随后,信息处理设备730的控制单元判定是否从信息处理设备710收到变更命令(步骤S1084)。当未收到变更命令时(步骤S1084),处理返回步骤S1079。
当收到变更命令时(步骤S1084),信息处理设备730的控制单元把与收到的变更命令对应的变更完成信息传送给信息处理设备710(步骤S1085)。
随后,信息处理设备730的控制单元判定是否从信息处理设备710收到DRM内容显示终止信息(步骤S1086)。当收到DRM内容显示终止信息时(步骤S1086),处理返回步骤S1070。当收到DRM内容显示终止信息时(步骤S1086),信息处理设备730的控制单元终止DRM内容合成处理,以致可以无变更地解码从信息处理设备710传送的图像数据,并显示在显示设备731上。
当未收到DRM内容显示终止信息时(步骤S1086),信息处理设备730的控制单元判定线路是否已被断开(步骤S1087)。随后,当线路已被断开时(步骤S1087),数据传输处理的操作终止。当线路未被断开时(步骤S1087),处理返回步骤S1079。
在本技术的第二实施例中,说明了其中在一个接收端设备侧显示从一个发送端设备传送的图像信息的例子。不过,当在一个接收端设备侧同时显示从多个发送端设备传送的图像信息时,也可应用本技术的第二实施例。这种情况下,可以应用在本技术的第一实施例中说明的显示控制。换句话说,信息处理设备730的控制单元可进行控制,以致与从多个发送端设备传送的多个显示画面相关的多个合成图像被传送给显示设备731,并被同时显示在显示单元732上。
在本技术的第二实施例中,说明了其中从发送端设备向接收端设备传送变更命令,以通知DRM内容显示位置的变更的例子,不过本技术不限于此。
例如,当在发送端设备和接收端设备之间进行图像传输时,必须在发送端设备和接收端设备之间使诸如图像内容的播放、停止、快进和倒回之类的各种功能同步。在这方面,可定期或不定期地从发送端设备向接收端设备传送指定诸如对非显示图像区进行的播放、停止、快进和倒回之类的控制信息的命令信息。
如上所述,设想其中接收用于在接收端设备侧,管理多个发送端设备中的从其收到PLAY命令的发送端设备的命令(例如,从信息处理设备710接收的命令“RTSP M7请求”(RTSP SET_PARAMETER(Request(wfd-trigger-method:PLAY 710))))的情况。这种情况下,PLAY命令的目的地(例如,DRM内容服务器的URL)记载在该命令中,从而接收端设备能够播放正在接收的用于信息处理设备710的DRM内容。此外,也能够实现除播放外的功能(例如,停止、快进、倒回等)。
此外,例如,必须使发送端设备的图像再现时刻和接收端设备的图像再现时刻一致。为此,发送端设备可向接收端设备提供指示图像编号、在发送端设备收到DRM内容之后到DRM内容被显示为止的解码时间等的通知。换句话说,信息处理设备730的控制单元可根据与显示在包含于命令信息中的非显示区上的图像相关的控制信息,进行合成图像的显示控制。
此外,例如,可根据发送端设备的显示单元(或者连接到发送端设备的显示设备)的DRM内容显示区的大小,切换充当传输对象的图像数据。例如,当DRM内容显示区的大小大于阈值时,黑色图像被设定为对应于DRM内容的区域,图像数据从接收端设备被传送给发送端设备。另一方面,当DRM内容显示区的大小小于阈值时,DRM内容的图像数据从接收端设备被传送给发送端设备。换句话说,接收端设备可根据DRM内容显示区的大小,控制接收端设备是把所有接收的DRM内容,还是把一些接收的DRM内容传送给发送端设备。
[在基于DRM内容的图像上,显示操作图像的例子]
结合其中接收端设备使其中合成DRM内容和显示画面的合成图像被显示在发送端设备上的例子,进行了以上说明。这里,用于用户操作的操作图像可被显示在显示于发送端设备上的显示画面上。例如,操作图像是按照利用操作部件(例如,键盘、鼠标或触摸面板)的用户操作,在显示画面上移动的图像(例如,图标或光标)。例如,操作图像也被称为“操作标记”、“指示信息”、“操作信息”等。
例如,操作图像可在基于DRM内容的图像上移动。这种情况下,重要的是使显示在发送端设备上的操作图像显示在接收端设备上。在这方面,下面说明其中显示在发送端设备上的操作图像被适当显示在接收端设备上的例子。
[图像数据的通信例子]
图26是示意图解说明按照本技术的第二实施例,在包含在通信系统700中的设备之间交换的图像数据的流动的例子的示图。图26中图解所示的例子是图18的变形例,从而与图18相同的部分用相同的附图标记表示,其说明被省略。
图26图解说明其中在显示于显示单元711的区域712上的图像(基于DRM内容750的图像)上,叠加地显示操作图像760的例子。
这种情况下,如用箭头761所示,信息处理设备710的控制单元按照Wi-Fi认证的Miracast,把显示在显示单元711上的整个显示画面762传送给信息处理设备730。这里,信息处理设备710的控制单元传送显示画面762,而不在显示画面762中的DRM内容750的显示区(区域712)中,设定特定颜色的图像763,作为操作图像760的区域764。
信息处理设备730的控制单元进行合成从DRM内容服务器740获得的DRM内容750和从信息处理设备710传送的显示画面762的合成处理765。在合成处理765中,信息处理设备730的控制单元进行合成基于DRM内容750的图像和从信息处理设备710传送的显示画面762中的特定颜色的图像763的区域的合成处理。这种情况下,信息处理设备730的控制单元进行在基于DRM内容750的图像上叠加地合成特定颜色的图像763的区域中的操作图像760的区域764的合成处理。
随后,如用箭头766所示,信息处理设备730的控制单元使利用合成处理765生成的合成图像767被传送给显示设备731,并显示在显示单元732上。例如,基于DRM内容750的图像被显示在显示单元732的区域735上,操作图像769被叠加地显示在基于DRM内容750的图像上。
结果,操作图像能够被适当地显示在发送端设备和接收端设备上。
图26图解说明其中特定颜色的图像不被设定为操作图像的区域,并传送操作图像的区域的例子。然而,指定显示画面中的操作图像的区域和操作图像的显示形式(例如,位置、形状和颜色)的信息(操作图像信息)可从发送端设备被传送给接收端设备。这种情况下,接收端设备可根据操作图像信息,显示操作图像。换句话说,信息处理设备730的控制单元可根据与显示在包含于命令信息中的非显示区上的操作图像相关的操作图像信息,在合成图像上叠加地显示操作图像。
<3.第三实施例>
在本技术的第三实施例中,将说明其中发送端设备访问接入点,开始发送端设备和接收端设备之间的群组认证的例子。在本技术的第三实施例中,将说明通过经接入点的发送端设备与接收端设备之间的连接,和发送端设备与接收端设备之间的直接连接,显示DRM内容的例子。
[通信系统的结构例子]
图27是图解说明按照本技术的第三实施例的通信系统705的系统结构例子的示图。
通信系统705包括网络701、接入点702、信息处理设备703、704、710、720和730、显示设备731和DRM内容服务器740。通信系统705是图17中图解所示的通信系统700的变形例,从而和通信系统700相同的部分用相同的附图标记表示,其说明的一部分被省略。
接入点702是无线LAN(例如,Wi-Fi)的接入点。例如,接入点702具有IEEE802.11标准的基础结构模式的功能。接入点702连接到一个或多个信息处理设备(例如,传输侧信息处理设备(发送端设备)和接收侧信息处理设备(接收端设备))。
接入点702可经有线线路(例如,以太网(注册商标)),与信息处理设备730连接。例如,接入点702可经网络701,与信息处理设备730连接。接入点702可以与信息处理设备730的内部总线相连,并进行处理。信息处理设备730的内部总线的例子包括通用串行总线(USB)、外围组件互连(PCI)和PCI Express。接入点702和信息处理设备730之间的连接可以是有线连接或无线连接(例如,无线LAN)。例如,在无线LAN的情况下,网络701连接到信息处理设备730,信息处理设备730必须判定传输/接收处理是与接入点702的传输/接收处理,还是与信息处理设备710的传输/接收处理。
在本技术的第三实施例中,将说明其中利用无线LAN(例如,对应于IEEE 802.11a/b/g/n/ac/ad的无线LAN),连接接入点702与信息处理设备703、704、710和720的例子。将说明其中经以太线,连接接入点702和信息处理设备730的例子。
信息处理设备710是可按照基础结构模式,与接入点702连接的信息处理设备。
这里,将说明其中信息处理设备710按照基础结构模式,建立与接入点702的连接的连接例子。响应从接入点702传送的信标信号,信息处理设备710向接入点702传送连接请求信号。如上所述,通过传送连接请求信号,信息处理设备710开始建立与接入点702的连接的操作(连接建立操作)。
连接建立操作是链接层2的层级的操作。例如,除了在无线LAN中进行的利用分组标识(PID)的密码认证之外,还需要判定信息处理设备710是否是作为应用被连接的连接认证处理。
信息处理设备710可以是与接入点702建立连接,并通过接入点702与信息处理设备730交换各种信息的待机设备。此外,当信息处理设备710只被用作待机设备时,信息处理设备710可不具有能够实现图像通信的协议。
信息处理设备710具有与接入点702和信息处理设备730两者建立连接的并发功能(时分并发功能或者同时使用并发功能)。当信息处理设备710具有一种物理层时,通过在一种物理层中,时分地接入两个频率,实现时分并发功能。此外,当信息处理设备710具有两种物理层时,能够通过两种物理层,同时接入不同的信息处理设备。因而,实现同时使用并发功能。
当如上所述,信息处理设备710具有并发功能时,信息处理设备710进行与接入点和接收端设备两者的时分或同时连接,而不进行接入点和接收端设备的断开和切换。
这里,在本技术的第三实施例中,将说明其中在无信息处理设备730的介入的情况下,使信息处理设备710与DRM内容服务器740直接相连的例子。
信息处理设备730具有与接入点702、信息处理设备703、704、710和720、或者DRM内容服务器740建立连接的通信功能。信息处理设备730具有与接入点702、信息处理设备703、704、710和720、和DRM内容服务器740建立连接,并控制所有协议的功能。信息处理设备730具有与专用LAN或全局LAN建立连接的通信功能。
这里,重要的是稳定信息处理设备730与信息处理设备703、704、710和720之间的连接。从而,理想的是把与接入点702使用的无线电频率不同的频率用于信息处理设备730与信息处理设备703、704、710和720之间的连接。在本技术的第三实施例中,将说明其中使用诸如IEEE 802.11a/b/g/n/ac/ad的2.4GHz、5GHz或60GHz之类频带的例子。这里,可以使用任何其它无线标准或任何其它频带。
DRM内容服务器740可具备与接入点702建立连接的协议,并经接入点702与信息处理设备730连接。
这里,将说明发送端设备和接收端设备之间的通信模式。在本技术的第三实施例中,在其中发送端设备与接收端设备相连的状态下(当群组的参加被允许时),假定在发送端设备中设定待机模式和图像传输模式两者任意之一的通信模式。
待机模式是其中在不进行从发送端设备到接收端设备的图像传输的情况下,维持发送端设备和接收端设备之间经接入点的连接状态的通信模式。换句话说,待机模式是当发送端设备被接收端设备识别成网络参与者时设定的模式。
如上所述,在图像传输模式下,认为允许从发送端设备到接收端设备的图像传输,但是在待机模式下,认为不允许从发送端设备到接收端设备的图像传输。然而,即使在待机模式下,例如,当存在简单的消息接发时,也认为允许从发送端设备到接收端设备的传输。
此外,当多个发送端设备连接到一个接收端设备时,在每个发送端设备中,假定通信模式被顺序切换,例如像按待机模式→图像传输模式(周边通道)→图像传输模式(中间通道)→待机模式…似的。
[发送端设备的通信模式的切换例子]
这里,将说明切换发送端设备的通信模式(待机模式和图像传输模式)时的切换方法。
例如,下述(B1)和(B2)可以用作切换发送端设备的通信模式的触发:
(B1)利用发送端设备的切换(例如,按照利用发送端设备的用户的操作的主动切换);和
(B2)利用接收端设备的切换(例如,按照利用接收端设备的用户的操作的切换)。
各个设备中的用户的操作(切换操作)例如是利用各个设备装备的操作接收单元(例如,操作部件或触摸面板)的用户的操作,或者利用各个设备装备的用户信息获取单元(例如,检测手势的检测单元)的用户的操作。
在(B1)中,例如,预先安装在发送端设备中的应用或操作部件的操作输入可以用作切换触发。例如,当在发送端设备中进行切换操作时,与通信模式的切换相关的命令被传送给接收端设备(信息处理设备730).当收到命令时,接收端设备(信息处理设备730)进行控制,以致已传送命令的发送端设备的频带被增大或减小,同时进行对于其它频带的控制。
在(B2)中,例如,接收端设备(信息处理设备730)中的用户的操作可以用作切换触发。例如,当在接收端设备(信息处理设备730)中进行发送端设备的切换操作时,进行控制,以致其中已进行切换操作的发送端设备的频带被增大或减小,同时进行对于其它频带的控制。
[通信模式的切换例子]
图28是图解说明作为本技术的基础的发送端设备和接收端设备之间的通信模式的切换例子的示图。
在本技术的第三实施例中,如上所述,在待机模式下,采用经接入点611,间接连接发送端设备610和接收端设备612的连接方式。在图像传输模式下,采用无接入点611的介入地直接连接发送端设备610和接收端设备612的连接方式。
例如,假定进行从待机模式的连接(613)到图像传输模式的连接(614)的切换。换句话说,假定进行从其中经接入点611建立连接的待机模式(613)到其中无接入点611的介入地建立连接的图像传输模式(614)的切换。
当如上所述进行切换时,必须进行图19中图解所示的Wi-Fi直接控制(P2P设备发现(Device Discovery)、P2P服务发现(Service Discovery)和GO协商(Negociation)),用于进行无线LAN的安全认证的4-路握手(Handshake)、用于获得网际协议(IP)地址的动态主机配置协议(DHCP)接入、实时流媒体协议(RTSP)的端口设定的交换等。从而,当进行从待机模式的连接(613)到图像传输模式的连接(614)的切换时,发生数秒时间的连接时段D1。
这里,假定接入点611和发送端设备610在相同的群组认证中,假定发送端设备610和接收端设备612在相同的群组认证中。这种情况下,在接入点611和发送端设备610之间进行安全认证。因此,即使接入点611和发送端设备610之间的设定值被用于发送端设备610和接收端设备612之间的连接处理,也认为不存在任何问题。
在这方面,在本技术的第三实施例中,说明其中发送端设备和接收端设备之间的安全认证被省略,进行更加无缝的连接切换的例子。例如,能够转移诸如高带宽数字内容保护系统(HDCP)的IP获取,和实时传输协议(RTP)的端口设定之类的处理。从而,即使当进行到具有不同连接方式的通信模式的切换(从待机模式到图像传输模式的切换,和从图像传输模式到待机模式的切换)时,也能够进行快速连接处理。从而,能够使用户感觉到好像连接一直被维持似的。
此外,当发送端设备和接收端设备支持隧道直接链路建立(TDLS)功能时,可以使用TDLS协议。
[图像数据的通信例子]
图29是示意图解说明按照本技术的第三实施例,在包含在通信系统705中的设备之间交换的图像数据的流动的例子的示图。图29中图解所示的例子是图18的变形例,从而与图18相同的部分用相同的附图标记表示,其说明被省略。
图29图解说明其中信息处理设备710经接入点702,从DRM内容服务器740获得DRM内容750的例子。
例如,如用箭头770所示,信息处理设备710的控制单元经接入点702,从DRM内容服务器740获得DRM内容750。随后,信息处理设备710的控制单元使获得的DRM内容750被显示在显示单元711上。
这在如图26中图解所示,在显示于显示单元711的区域712上的图像(基于DRM内容750的图像)上叠加地显示操作图像760时同样适用。
[通信例子]
图30-32是图解说明按照本技术的第三实施例,包含在通信系统705中的各个设备之间的通信处理例子的序列图。图30-32图解说明信息处理设备(发送端设备)710、接入点702、信息处理设备(接收端设备)730和DRM内容服务器740之间的通信处理例子。
在图30-32的例子中,信息处理设备(接收端设备)730起群组认证服务器作用。换句话说,假定信息处理设备(接收端设备)730具有群组认证功能。
图30-32是其中在图20和21中图解所示的通信处理例子被部分变更的例子,从而与图20和21相同的一些部分的部分说明被省略。
首先,信息处理设备710启动用于进行与信息处理设备730的通信的应用(预先安装在信息处理设备710中的应用)(401)。例如,按照用户的操作(例如,按下应用按钮的操作),进行应用的启动。
这里,在图30和32的例子中,默认地,发送端设备直接连接到接入点,随后开始各个处理。换句话说,信息处理设备710启动预先安装的应用,经特定接入点(接入点702),向接收端设备(信息处理设备730)传送连接请求。
具体地,在与接入点702建立连接之后,信息处理设备710进行设备发现(对应于图19中图解所示的设备发现(615)),使可连接的接收端设备被显示在显示单元711上。
这里,例如,接收诸如探测请求(Probe Request)(探测请求)之类的消息,并进行设备发现,以致可经接入点702执行WiFi direct协议的方法可以用作设备发现方法。此外,例如,可以使用在连接到接入点702的站之间交换用通用即插即用(UPnP)表示的设备服务类型,并进行设备发现的方法。
也可通过设备发现处理,发现与启动的应用对应的多个接收端设备。这种情况下,可在发送端设备的显示单元上显示用于从多个发现的接收端设备中选择期望的接收端设备的选择画面,利用用户的操作,可在选择画面上选择期望的接收端设备。多个发现的接收端设备中的最靠近发送端设备的设备可被自动选择和连接。当自动选择最近的设备时,例如,可以使用由各个设备获得的位置信息。
如上所述,信息处理设备710启动应用,随后选择接收端设备(401)。图30和32图解说明其中选择信息处理设备730的例子。
当如上所述选择接收端设备(信息处理设备730)时(401),信息处理设备710的控制单元(对应于图2中图解所示的控制单元240)经接入点702,向接收端设备(信息处理设备730)传送连接请求(402-405)。所述连接请求例如包括识别信息处理设备710的标识信息(例如,图4中图解所示的终端标识信息391),和识别待启动的应用的标识信息(应用信息)。
当收到来自信息处理设备710的连接请求时(405),信息处理设备730的控制单元(对应于图3中图解所示的控制单元370)进行群组认证处理(406)。在群组认证处理中,判定信息处理设备710是否参加利用由信息处理设备710启动的应用操作的群组(406)。换句话说,信息处理设备730的控制单元进行判定对于信息处理设备710是否允许用于操作由信息处理设备710启动的应用的连接的群组认证处理(406)。
例如,在群组认证处理中,判定在属于同一群组并且已处于连接状态的发送端设备和接收端设备中的任意之一中,是否进行了向信息处理设备710给予许可的用户操作。随后,在已在设备(发送端设备和接收端设备)任意之一中进行了向信息处理设备710给予许可的用户操作的条件下,可以进行允许信息处理设备710参加群组的判定。
例如,进行用于向信息处理设备710给予许可的用户操作的显示画面(例如,弹出式画面)被显示在各个设备(发送端设备和接收端设备)至少之一的显示单元上。随后,当在显示画面上进行向信息处理设备710给予许可的用户操作时,信息处理设备730的控制单元判定允许信息处理设备710参加群组(406)。
此外,例如,可根据信息处理设备是否被登记在接收端设备中,进行群组认证处理。例如,信息处理设备730的控制单元判定允许其终端标识信息登记在信息处理设备730中的信息处理设备参加群组(406)。然而,这种情况下,信息处理设备730的控制单元判定允许该信息处理设备参加群组,只要在事先设定的时间内(406)。
当在群组认证处理中,判定允许信息处理设备710参加群组时(406),信息处理设备730的控制单元经接入点701,把连接许可信息传送给信息处理设备710(407-410)。这里,连接许可信息是指示允许信息处理设备710参加利用由信息处理设备710启动的应用操作的群组的信息。
此外,当在群组认证处理中,判定不允许信息处理设备710参加群组(认证不被许可)时(406),信息处理设备730的控制单元经接入点702,向信息处理设备710传送连接不许可信息。这里,连接不许可信息是指示不允许信息处理设备710参加利用由信息处理设备710启动的应用操作的群组的信息。当信息处理设备710收到连接不许可信息时,数据传输处理的操作终止。
当收到来自信息处理设备730的连接许可信息时(410),信息处理设备710的控制单元经接入点702,把与信息处理设备710相关的能力信息传送给信息处理设备730(411-414)。所述能力信息是用于进行与信息处理设备730的Wi-Fi认证的Miracast通信的能力信息。能力信息包括用于与信息处理设备730进行直接P2P连接的信息。
当收到来自信息处理设备710的能力信息时(414),信息处理设备730的控制单元经接入点702,把设定请求信息传送给信息处理设备710(415-418)。设定请求信息是请求用于进行按照Wi-Fi认证的Miracast标准的图像传输的设定的信息。
这里,信息处理设备730进行与信息处理设备730相连的发送端设备的频带控制和显示画面控制。因此,必须请求新连接的信息处理设备710传送其中根据与其它发送端设备的关系考虑群组共享的参数的设定。在这方面,在允许信息处理设备710参加群组之后,信息处理设备730根据与和信息处理设备730相连的各个发送端设备相关的各项信息,传送与信息处理设备710相关的设定请求信息(415-418)。
此外,如上所述,在信息处理设备710中,根据从信息处理设备730发出的指令,最初设定待机模式。换句话说,当从信息处理设备730收到设定请求信息时(418),在信息处理设备710中,设定待机模式,作为初始状态。
根据来自信息处理设备730的指令,顺序切换信息处理设备710中的通信模式。例如,当只有信息处理设备710连接到信息处理设备730时,按照待机模式→图像传输模式→待机模式→图像传输模式…的顺序,依次切换通信模式。此外,当多个发送端设备与信息处理设备730相连时,按照待机模式→图像传输模式(周边通道)→图像传输模式(中间通道)→待机模式…的顺序,依次切换通信模式。
这里,假定按照上述(B1)和(B2)任意之一的切换方法,切换信息处理设备710的通信模式。这里,说明其中把信息处理设备710的通信模式从待机模式切换到图像传输模式的例子。
当设定图像传输模式时(419),信息处理设备710的控制单元随后维持与接入点702的连接,并进行与信息处理设备730进行直接连接的P2P连接处理(420和421)。在完成P2P连接处理之后(420和421),信息处理设备710的控制单元根据从信息处理设备730接收的设定请求信息,向信息处理设备730传送连接请求(422和423)。换句话说,信息处理设备710的控制单元根据从信息处理设备730接收的设定请求信息,向信息处理设备730传送连接请求(422和423)。连接请求是与直到层3的连接设定相关的连接请求。
当收到连接请求时(423),信息处理设备730的控制单元把指示允许与连接请求对应的图像的接收的确认信息传送给信息处理设备710(426和427)。当收到确认信息时(425),信息处理设备710的控制单元开始与信息处理设备730的直接P2P连接(426和427)。随后,信息处理设备710的控制单元根据与接收的确认信息对应的连接请求,与信息处理设备730进行图像参数和音频参数的协商,然后传送图像数据。
如上所述,信息处理设备710继续处于能够经接入点702访问DRM内容的状态。信息处理设备710进行与信息处理设备730的P2P直接通信,以交换和Wi-Fi认证的Miracast相关的命令。
这里,假定进行用于显示DRM内容的DRM内容显示指令操作(428)。这种情况下,在各个处理(428-449)中,除通过信息处理设备710获得DRM内容的处理(439-442)外的处理对应于图20和21中图解所示的处理(652-673)。
换句话说,当信息处理设备710获得DRM内容时,经接入点702,从DRM内容服务器740接收和获得DRM内容(439-442)。换句话说,信息处理设备710的控制单元经接入点702,从DRM内容服务器740接收和获得DRM内容(439-442)。
[信息处理设备(发送端设备)的操作例子]
图33和34是图解说明按照本技术的第二实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。图33和34图解说明其中默认地,发送端设备(信息处理设备710)直接连接到接入点,随后开始各个处理的例子。换句话说,信息处理设备710启动预先安装的应用,经特定接入点(接入点702),向接收端设备传送连接请求。此外,图33和34图解说明其中发送端设备(信息处理设备710)连接到充当接收端设备的信息处理设备730,并连接到充当特定接入点的接入点702的例子。
首先,信息处理设备710启动用于与接收端设备(信息处理设备730)进行通信的应用(步骤S1091)。在所述启动之后,选择充当连接对象的接收端设备(信息处理设备730)(步骤S1091)。
随后,信息处理设备710的控制单元经接入点702(AP),向信息处理设备730传送连接请求(步骤S1092)。随后,信息处理设备710的控制单元判定是否经接入点701,从信息处理设备730收到连接许可信息(步骤S1093)。当未从信息处理设备730收到连接许可信息时(步骤S1093),数据传输处理的操作终止。这种情况下,当在预定一段时间内未收到连接许可信息时,数据传输处理的操作可终止。
当从信息处理设备730收到连接许可信息时(步骤S1093),信息处理设备710的控制单元经接入点702,把信息处理设备710的能力信息传送给信息处理设备730(步骤S1094)。
随后,信息处理设备710的控制单元判定是否经接入点702,从信息处理设备730收到设定请求信息(步骤S1095)。当未收到设定请求信息时(步骤S1095),继续进行监视。
当收到设定请求信息时(步骤S1095),在信息处理设备710中,设定待机模式,作为初始状态。随后,信息处理设备710的控制单元判定是否设定了待机模式(步骤S1096)。随后,当在信息处理设备710中设定了待机模式时(步骤S1096),继续进行监视。
当未设定待机模式时(当设定了图像传输模式时)(步骤S1096),信息处理设备710的控制单元判定信息处理设备710是否离开了群组(步骤S1097)。这里,当信息处理设备710离开了群组时,例如,当信息处理设备710移动到接入点的无线电波不能到达接收端设备的无线电波也不能到达的场所时,可以进行用于离开群组的用户操作。例如,所述用户操作可以是按下离开按钮的操作(例如,按下操作部件的操作,或者按下触摸面板的操作)。假定在信息处理设备710、另一个发送端设备和接收端设备中的任意之一中,进行所述用户操作。
随后,当信息处理设备710离开群组时(步骤S1097),数据传输处理的操作终止。当信息处理设备710未离开群组时(步骤S1097),信息处理设备710的控制单元维持与接入点702的连接,并进行与信息处理设备730进行直接连接的P2P连接处理(步骤S1098)。
当P2P连接处理完成时(步骤S1098),信息处理设备710的控制单元根据从信息处理设备730接收的设定请求信息,向信息处理设备730传送设定请求(步骤S1099)。
随后,信息处理设备710的控制单元判定是否从信息处理设备730传送了指示允许与设定请求对应的图像的接收的确认信息(步骤S1100)。当未从信息处理设备730传送确认信息时(步骤S1100),继续进行监视。
当从信息处理设备730传送了确认信息时(步骤S1100),信息处理设备710的控制单元开始与信息处理设备730的P2P直接连接(步骤S1101)。
后续的处理过程(步骤S1102-S1115)对应于图22和23中图解所示的处理过程(步骤S1041-S1054),从而其说明被省略。然而,差异在于当获得DRM内容时,经接入点702从DRM内容服务器740接收和获得DRM内容(步骤S1108)。换句话说,信息处理设备710的控制单元经接入点702,从DRM内容服务器740接收和获得DRM内容(步骤S1108)。
此外,当未进行DRM内容显示终止操作时(步骤S1114),信息处理设备710的控制单元判定是否设定了待机模式(步骤S1116)。随后,当在信息处理设备710中设定了待机模式时(步骤S1116),信息处理设备710的控制单元断开与信息处理设备730的直接连接(步骤S1117),处理返回步骤S1096。
随后,信息处理设备710的控制单元判定线路是否被断开(步骤S1118)。随后,当线路已被断开时(步骤S1118),数据传输处理的操作终止。当线路未被断开时(步骤S1118),处理返回步骤S1108。
<4.第四实施例>
在本技术的第四实施例中,将说明其中向DRM内容服务器传送DRM内容传送请求,以致DRM内容可从发送端设备被传送给接收端设备的例子。换句话说,在本技术的第四实施例中,将说明其中DRM内容从发送端设备被传送给接收端设备,并显示在接收端设备上的例子。按照本技术的第四实施例的通信系统的结构和图17中图解所示的通信系统700的结构大体相同。从而,在本技术的第四实施例中,与通信系统700相同的部分用相同的附图标记表示,其部分说明被省略。
此外,在本技术的第四实施例中,将说明其中当只有Wi-Fi认证的Miracast用于通信时,通过利用功能种类消息只允许一次传送的例子。
[图像数据的通信例子]
图35是示意图解说明按照本技术的第四实施例,在包含在通信系统700中的设备之间交换的图像数据的流动的例子的示图。图35中图解所示的例子是图18的变形例,从而与图18相同的部分用相同的附图标记表示,其说明被省略。
图35图解说明其中包括显示在信息处理设备710的显示单元711上的DRM内容的显示画面被传送给信息处理设备730,并显示在显示设备731的显示单元732上的例子。
例如,如用箭头771所示,信息处理设备710的控制单元把包括显示在显示单元711的区域712上的图像(基于DRM内容750的图像)的显示画面772传送给信息处理设备730。随后,信息处理设备730的控制单元使接收的显示画面773被传送给显示设备731,并显示在显示单元732上。
这在如图26中图解所示在显示于显示单元711的区域712上的图像(基于DRM内容750的图像)上叠加地显示操作图像760时同样适用。
[通信例子]
图36是图解说明按照本技术的第四实施例,包含在通信系统700中的各个设备之间的通信处理例子的序列图。图36中图解所示的例子是图20和21的变形例,从而与图20和21相同的部分用相同的附图标记表示,其部分说明被省略。
参考图36,将说明其中信息处理设备(发送端设备)710、信息处理设备(接收端设备)730和DRM内容服务器740存在于相同场地中的例子。这种情况下,通过在各个设备之间交换指示各个设备存在于相同场地中的信息,DRM内容传送许可请求被传送给DRM内容服务器740,以致可以进行信息处理设备710和信息处理设备730之间的DRM内容的通信。
当进行DRM内容显示指令操作时(652(图20中图解所示)),信息处理设备710的控制单元向信息处理设备730传送DRM内容传送许可请求信息(451和452)。这里,DRM内容传送许可请求信息是请求DRM内容服务器740允许发送端设备和接收端设备之间的DRM内容的传送的信息。例如,DRM内容传送许可请求信息包括指定传输源(发送端设备)和DRM内容的传输目的地(接收端设备)的终端标识信息。
当收到DRM内容传送许可请求信息时(452),信息处理设备730的控制单元把DRM内容传送许可请求信息传送给DRM内容服务器740(453和454)。当收到DRM内容传送许可请求信息时(454),DRM内容服务器740的控制单元742检查DRM内容传送策略信息。这种情况下,可以使用各种认证方法。
例如,只有当确认在专用LAN环境中时,才允许所述传送。此外,例如,只有当设定了无变化地按照Wi-Fi认证的Miracast传送显示画面的设置时,才允许所述传送。此外,例如,只有当接收端设备能够再现DRM内容时,才允许所述传送。
当作为所述确认的结果,判定允许发送端设备和接收端设备之间的DRM内容的传送时,DRM内容服务器740的控制单元742把DRM内容传送许可信息传送给信息处理设备730(455和456)。这里,DRM内容传送许可信息是通知允许发送端设备和接收端设备之间的DRM内容的传送的信息。
当收到DRM内容传送许可信息时(456),信息处理设备730的控制单元把DRM内容传送许可信息传送给信息处理设备710(457和458)。当收到DRM内容传送许可信息时(458),可进行发送端设备和接收端设备之间的DRM内容的传送。从而,信息处理设备730的控制单元可使包括DRM内容的显示画面按照Wi-Fi认证的Miracast被传送给信息处理设备730,并显示在信息处理设备730上。
处理(459-465)对应于图21中图解所示的处理(661-667)。
信息处理设备710的控制单元解码接收的DRM内容,使基于解码的DRM内容的图像被显示在显示单元711上(465)。随后,信息处理设备710的控制单元压缩显示在显示单元711上的整个显示画面,并按照Wi-Fi认证的Miracast,把压缩的显示画面传送给信息处理设备730(466、467)。这种情况下,信息处理设备710的控制单元压缩包括显示在显示单元711上的DRM内容的显示画面,并传送压缩的显示画面(466和467)。
[信息处理设备(发送端设备)的操作例子]
图37和38是图解说明按照本技术的第四实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。图37和38中图解所示的例子是图22和23的变形例,从而与图22和23相同的部分用相同的附图标记表示,其部分说明被省略。
图37中图解所示的处理过程(步骤S1121-1133)对应于图22中图解所示的处理过程(步骤S1031-1043)。
当判定经信息处理设备730访问DRM内容时(步骤S1133),信息处理设备710的控制单元向信息处理设备730传送DRM内容传送许可请求信息(步骤S1134)。
随后,信息处理设备710的控制单元判定是否收到了DRM内容传送许可信息(步骤S1135)。随后,当未收到DRM内容传送许可信息时,继续进行监视。
当收到DRM内容传送许可信息时(步骤S1135),信息处理设备710的控制单元判定是否收到与DRM内容接收相关的设定信息(步骤S1136)。随后,当未收到与DRM内容接收相关的设定信息时,继续进行监视。
当收到与DRM内容接收相关的设定信息时(步骤S1136),信息处理设备710的控制单元经信息处理设备730,从DRM内容服务器740接收DRM内容(步骤S1137)。
随后,信息处理设备710的控制单元解码接收的DRM内容,使基于解码的DRM内容的图像被显示在显示单元711上(步骤S1138)。
随后,信息处理设备710的控制单元压缩显示在显示单元711上的整个显示画面,按照Wi-Fi认证的Miracast,把压缩的显示画面传送给信息处理设备730(步骤S1139)。
随后,信息处理设备710的控制单元判定是否进行了DRM内容显示终止操作(DRM内容显示终止操作)(步骤S1140)。当进行了DRM内容显示终止操作时(步骤S1140),信息处理设备710的控制单元向信息处理设备730传送DRM内容显示终止信息(步骤S1141),处理返回步骤S1131。
当未进行DRM内容显示终止操作时(步骤S1140)时,信息处理设备710的控制单元判定线路是否已被断开(步骤S1142)。随后,当线路已被断开时(步骤S1142),数据传输处理的操作终止。当线路未被断开时(步骤S1142),处理返回步骤S1137。
[信息处理设备(接收端设备)的操作例子]
图39和40是图解说明按照本技术的第四实施例,由信息处理设备730进行的数据接收处理的处理过程的例子的流程图。图39和40中图解所示的例子是图24和25的变形例,从而与图24和25相同的部分用相同的附图标记表示,其部分说明被省略。
图39中图解说明的处理过程(步骤S1151-1163)对应于图24中图解说明的处理过程(步骤S1061-S1073)。
信息处理设备730的控制单元判定是否从信息处理设备710,收到DRM内容传送许可请求信息(步骤S1164)。随后,当未收到DRM内容传送许可请求信息时(步骤S1164),处理返回步骤S1163。
当收到DRM内容传送许可请求信息时(步骤S1164),信息处理设备730的控制单元把DRM内容传送许可请求信息传送给DRM内容服务器740(步骤S1165)。
随后,信息处理设备730的控制单元判定是否从DRM内容服务器740收到DRM内容传送许可信息(步骤S1166)。当未收到DRM内容传送许可信息时(步骤S1166),继续进行监视。
当收到DRM内容传送许可信息时(步骤S1166),信息处理设备730的控制单元把DRM内容传送许可信息传送给信息处理设备710(步骤S1167)。
随后,信息处理设备730的控制单元把与DRM内容接收相关的设定信息传送给信息处理设备710(步骤S1168)。随后,信息处理设备730的控制单元把从DRM内容服务器740接收的DRM内容传送给信息处理设备710(步骤S1169)。
随后,信息处理设备730的控制单元判定是否从信息处理设备710,收到显示在信息处理设备710的显示单元711上的整个显示画面(步骤S1170)。当未收到整个显示画面时(步骤S1170),继续进行监视。
当收到整个显示画面时(步骤S1170),信息处理设备730的控制单元解码接收的整个显示画面,把解码的显示画面传送给显示设备731,并通过显示单元732,显示所述显示画面(步骤S1171)。
随后,信息处理设备730的控制单元判定是否从信息处理设备710,收到DRM内容显示终止信息(步骤S1172)。当收到DRM内容显示终止信息时(步骤S1172),处理返回步骤S1160。
当未收到DRM内容显示终止信息时(步骤S1172),信息处理设备730的控制单元判定线路是否被断开(步骤S1173)。随后,当线路被断开时(步骤S1173),数据传输处理的操作终止。当线路未被断开时(步骤S1173),处理返回步骤S1169。
如上所述,在本技术的第四实施例中,在预先被允许访问DRM内容的设备之间,可以进行P2P直接通信。此外,能够实现允许DRM内容服务器740按照Wi-Fi认证的Miracast,进行转码的协议。
此外,由于在接收端设备中,不必进行合成处理,因此能够降低接收端设备中的通信处理的负荷。即使当接收端设备不具有显示DRM内容的功能时,也可在接收端设备侧适当显示DRM内容。
在本技术的第四实施例中,说明了其中信息处理设备710经信息处理设备730向DRM内容服务器740传送内容传送请求,并且DRM内容服务器740允许该请求的例子。然而,当构成任何其它拓扑时,也可应用本技术的第四实施例。例如,当如图27和29中图解所示,信息处理设备710经接入点702接收DRM内容,而不存在信息处理设备730的介入时,也可应用本技术的第四实施例。例如,当信息处理设备710连接到按照诸如IEEE 802.16或3GPP(例如,W-CDMA、GSM、WiMAX、WiMAX2、LTE或LTE-A)之类规范的公共线路,并经所述公共线路连接到DRM内容服务器740时,也可应用本技术的第四实施例。
[信息处理设备(发送端设备)的操作例子]
图41是图解说明按照本技术的第四实施例,由信息处理设备710进行的数据传输处理的处理过程的例子的流程图。图41图解说明其中按照是否对经公共线路接收的内容设定使用限制,变更向接收端设备传送内容的处理的例子。
首先,信息处理设备710的控制单元进行经公共线路,接收内容的接收处理(步骤S1181)。随后,信息处理设备710的控制单元检查关于接收内容的使用限制(步骤S1182)。随后,信息处理设备710的控制单元判定是否对接收内容设定使用限制(步骤S1183)。例如,当接收的内容是DRM内容时,信息处理设备710的控制单元判定对接收的内容设定使用限制(步骤S1182)。
随后,当对于接收的内容设定使用限制时(步骤S1183),信息处理设备710的控制单元判定如果接收的内容被显示在信息处理设备710上,那么接收的内容是否因使用限制而不可传送(步骤S1184)。当如果接收的内容被显示在它自己的设备上,接收的内容因使用限制而不可传送时(步骤S1184),信息处理设备710的控制单元把与接收的内容(对其设定使用限制的内容)相关的信息(例如,显示区和分辨率)传送给接收端设备(步骤S1185)。
随后,信息处理设备710的控制单元使整个显示画面被编码,随后被传送给接收端设备(步骤S1186)。
此外,当未对接收的内容设定使用限制时(步骤S1183),信息处理设备710的控制单元使接收的内容被解码,并显示在显示单元上(步骤S1188)。此外,当即使在接收的内容被显示在它自己的设备上时,也能够不管使用限制地传送接收的内容时(步骤S1184),处理进入步骤S1188。
在本技术的第二到第四实施例中,说明了其中显示从DRM内容服务器740接收的DRM内容和保存在发送端设备中的图像的例子。然而,当显示保存在接收端设备中的图像或DRM内容时,也可应用本技术的第二到第四实施例。
结合其中DRM内容被作为按照版权管理的内容来处理的例子,说明了本技术的实施例,不过当处理利用任何其它版权管理技术管理的内容时,也可应用本技术的实施例。例如,可以使为加密有线线路或无线线路的链路而工作的任何其它版权管理技术同时工作。作为加密有线线路或无线线路的链路的方式,例如,本技术的实施例可适用于诸如高带宽数字内容保护系统(HDCP)之类的版权保护技术,或者可以同时使DRM工作。例如,本技术的实施例可以适用于诸如数字传输内容保护(DTCP)之类的技术标准。
这里,例如,在教育现场或医疗现场,通常利用只能在场地中使用的按照版权管理的内容(例如,教育用内容),进行演示。在这种情况下,按照本技术的实施例,在发送端设备和接收端设备中,能够进行适当的画面显示。这种情况下,能够根据从发送端设备传送的信息在接收端设备侧显示DRM内容,而不存在不舒服的感觉。此外,能够不使用户感觉物理发生的切换时段地进行切换。换句话说,可在多个信息处理设备之间适当地显示图像信息。
发送端设备和接收端设备任意之一可不具有显示DRM内容的功能。这种情况下,通过增加Wi-Fi认证的Miracast的发送端设备和DRM内容服务器的协议,可在发送端设备和接收端设备之间进行DRM内容选择。
<5.应用例子>
本公开的技术可适用于各种产品。例如,信息处理设备200、300、400、703、704、710、720和730可被实现成诸如智能电话机、平板个人计算机(PC)、笔记本PC、便携式游戏终端或数字照相机之类的移动终端,诸如电视接收机、打印机、数字扫描仪或网络存储器之类的固定终端,或者诸如车载导航设备之类的车载终端。另外,信息处理设备200、300、400、703、704、710、720和730可被实现成进行机器间(M2M)通信的终端(这些终端也被称为机器式通信(MTC)终端),比如智能仪表、自动售货机、远程监视设备或销售点(POS)终端。此外,信息处理设备200、300、400、703、704、710、720和730可以是安装在这些终端中的无线通信模块(例如,在一个小片中构成的集成电路模块)。
[5-1.第一应用例子]
图42是表示本公开的技术可适用于的智能电话机900的示意结构的例子的方框图。智能电话机900包括处理器901、内存902、存储器903、外部连接接口904、摄像头906、传感器907、麦克风908、输入设备909、显示设备910、扬声器911、无线通信接口913、天线开关914、天线915、总线917、电池918和辅助控制器919。
处理器901可以是例如中央处理器(CPU)或片上系统(SoC),控制智能电话机900的应用层和其它层的功能。内存902包括随机存取存储器(RAM)和只读存储器(ROM),保存由处理器901执行的程序,以及数据。存储器903可包括诸如半导体存储器或硬盘之类的存储介质。外部连接接口904是用于连接外部设备,比如存储卡或通用串行总线(USB)设备和智能电话机900的接口。
摄像头906包括诸如电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)之类的图像传感器,生成拍摄的图像。传感器907可包括诸如测量传感器、陀螺传感器、地磁传感器和加速度传感器之类的一组传感器。麦克风908把输入智能电话机900的声音转换成音频信号。输入设备909例如包括配置成检测显示设备910的屏幕上的触摸的触摸传感器、小键盘、键盘、按钮或开关,接收从用户输入的操作或信息。显示设备910包括诸如液晶显示器(LCD)和有机发光二极管(OLED)显示器之类的屏幕,显示智能电话机900的输出图像。扬声器911把从智能电话机900输出的音频信号转换成声音。
无线通信接口913支持诸如IEEE802.11a、11b、11g、11n、11ac和11ad之类无线LAN标准中的一种或多种,以进行无线通信。在基础结构模式下,无线通信接口913可通过无线LAN接入点,与另外的设备通信。另外,在ad-hoc模式或诸如Wi-Fi direct之类的直接通信模式下,无线通信接口913可直接与另外的设备通信。在Wi-Fi direct下,不同于ad-hoc模式,两个终端之一起接入点作用,不过在终端之间直接进行通信。无线通信接口913一般可包括基带处理器、射频(RF)电路和功率放大器。无线通信接口913可以是其中集成保存通信控制程序的存储器,执行所述程序的处理器,和相关电路的单片模块。除了无线LAN方式之外,无线通信接口913还可支持其它各种无线通信方式,比如近场无线通信方式,邻近无线通信方式和蜂窝通信方式。天线开关914在包含在无线通信接口913中的多个电路(例如用于不同无线通信方式的电路)之间,切换天线915的连接目的地。天线915具有无线通信接口913用于无线电信号的传送和接收的一个或多个天线单元(例如,构成MIMO天线的多个天线单元)。此外,可以提供用于根据诸如IEEE 802.16或3GPP(例如,W-CDMA、GSM、WiMAX、WiMAX2、LTE或LTE-A)之类的规范建立与公共线路的连接从而与公共线路执行通信的无线通信接口的功能。
应注意智能电话机900不限于图42的例子,可包括多个天线(例如用于无线LAN的天线、用于邻近无线通信方式的天线或用于公共线路通信的天线等)。在这种情况下,可从智能电话机900的结构中,省略天线开关914。
总线917互连处理器901、内存902、存储器903、外部连接接口904、摄像头906、传感器907、麦克风908、输入设备909、显示设备910、扬声器911、无线通信接口913和辅助控制器919。电池918通过图中部分表示成虚线的馈电线,向图42中图解所示的智能电话机900的各个部件供电。辅助控制器919例如按睡眠模式运行智能电话机900的最低必要功能。
在图42中所示的智能电话机900中,可利用无线通信接口913,实现利用图2描述的控制单元240和利用图3说明的控制单元370。另外,这些功能的至少一些可用处理器901或辅助控制器919实现。
通过经处理器901,在应用层执行接入点功能,智能电话机900可起无线接入点(软件AP)的作用。此外,无线通信接口913可具有无线接入点功能。
[5-2.第二应用例子]
图43是图解说明本公开的技术可适用于的车载导航设备920的示意结构的例子的方框图。车载导航设备920包括处理器921、存储器922、全球定位系统(GPS)模块924、传感器925、数据接口926、内容播放器927、存储介质接口928、输入设备929、显示设备930、扬声器931、无线通信接口933、天线开关934、天线935和电池938。
处理器921例如可以是CPU或SoC,控制车载导航设备920的导航功能和另外的功能。存储器922包括RAM和ROM,保存由处理器921执行的程序,以及数据。
GPS模块924利用从GPS卫星接收的GPS信号,测量车载导航设备920的位置(比如纬度、经度和高度)。传感器925可包括诸如陀螺传感器、地磁传感器和气压传感器之类的一组传感器。数据接口926通过未图示的终端,连接到例如车载网络941,获得车辆生成的数据,比如车速数据。
内容播放器927再现保存在插入存储介质接口928中的存储介质(比如CD和DVD)中的内容。输入设备929例如包括配置成检测在显示设备930的屏幕上的触摸的触摸传感器、按钮或开关,接收从用户输入的操作或信息。显示设备930包括诸如LCD或OLED显示器之类的屏幕,显示导航功能或者再现的内容的图像。扬声器931输出导航功能或再现的内容的声音。
无线通信接口933支持诸如IEEE802.11a、11b、11g、11n、11ac和11ad之类无线LAN标准中的一种或多种,以进行无线通信。在基础结构模式下,无线通信接口933可通过无线LAN接入点,与另外的设备通信。另外,在ad-hoc模式或诸如Wi-Fi Direct之类的直接通信模式下,无线通信接口933可直接与另外的设备通信。无线通信接口933一般可包括基带处理器、RF电路和功率放大器。无线通信接口933可以是其中集成保存通信控制程序的存储器,执行所述程序的处理器,和相关电路的单片模块。除了无线LAN方式之外,无线通信接口933还可支持其它各种无线通信方式,比如近场无线通信方式,邻近无线通信方式或蜂窝通信方式。天线开关934在包含在无线通信接口933中的多个电路之间,切换天线935的连接目的地。天线935具有由无线通信接口933用于无线信号的传送和接收的一个或多个天线单元。
另外,车载导航设备920可包括多个天线,不限于图43的例子。这种情况下,可从车载导航设备920的结构中省略天线开关934。
电池938通过图中部分表示成虚线的馈电线,向图43中所示的车载导航设备920的各个部件供电。电池938累积从车辆供给的电力。
在图43中图解所示的车载导航设备920中,可用无线通信接口933实现利用图2说明的控制单元240和利用图3说明的控制单元370。至少一部分的功能也可用处理器921实现。
本公开的技术也可被实现成包括车载导航设备920的一个或多个部件,车载网络941,和车辆模块942的车载系统(或车辆)940。车辆模块942生成车辆数据,比如车速、发动机速度和故障信息,并把生成的数据输出给车载网络941。
上述实施例是具体体现本技术的例子,实施例中的事项分别和权利要求书中的公开特定事项具有对应关系。同样地,用相同名称表示的实施例中的事项和权利要求书中的公开特定事项相互具有对应关系。不过,本技术不限于上述实施例,实施例的各种变形包含在本技术的范围内,而不脱离本技术的精神。
在上述实施例中说明的处理序列可被看作具有一系列的序列的方法,或者被看作使计算机执行所述一系列的序列的程序,和保存所述程序的记录介质。作为所述记录介质,可以使用硬盘、CD(光盘)、MD(微型光盘)、DVD(数字通用光盘)、存储卡和蓝光光盘(注册商标)。
在本说明中描述的效果仅仅是例子,效果不受限制,可以存在其它效果。
另外,也可如下构成本技术。
(1)一种信息处理设备,包括:
无线通信单元,所述无线通信单元被配置成按照无线保真(Wi-Fi)认证的Miracast规范,与其他信息处理设备进行实时图像传输;和
控制单元,所述控制单元被配置成按照获得待显示在包含于从所述其他信息处理设备传送的第一图像信息中的非显示区上的第二图像信息,并且其中合成第一图像信息和第二图像信息的合成图像被显示在显示单元上的方式,进行控制。
(2)按照(1)所述的信息处理设备,
其中所述控制单元根据与从所述其他信息处理设备传送的非显示区相关的命令信息,指定第一图像信息中的非显示区和第二图像信息。
(3)按照(2)所述的信息处理设备,
其中所述控制单元根据包含在命令信息中的第一图像信息中的非显示区的位置和大小,指定第一图像信息中的非显示区。
(4)按照(2)或(3)所述的信息处理设备,
其中控制单元根据与包含在命令信息中的第二图像信息相关的地址信息,从外部设备获得第二图像信息。
(5)按照(4)所述的信息处理设备,
其中当收到命令信息时,控制单元向外部设备传送用于访问第二图像信息的确认信息,从外部设备接收允许访问第二图像信息的许可信息,随后从外部设备获得第二图像信息。
(6)按照(4)所述的信息处理设备,
其中当收到命令信息时,控制单元向外部设备传送供所述其他信息处理设备访问第二图像信息之用的确认信息,从外部设备接收允许所述其他信息处理设备访问第二图像信息的许可信息,随后把供所述其他信息处理设备从外部设备获得第二图像信息之用的设定信息传送给所述其他信息处理设备。
(7)按照(6)所述的信息处理设备,
其中在把设定信息传送给所述其他信息处理设备之后,控制单元从外部设备获得第二图像信息,并把第二图像信息传给所述其他信息处理设备。
(8)按照(2)-(7)任意之一所述的信息处理设备,
其中控制单元根据包含于命令信息中的与显示在非显示区上的图像相关的控制信息,进行合成图像的显示控制。
(9)按照(2)-(8)任意之一所述的信息处理设备,
其中根据包含于命令信息中的与显示在非显示区上的操作图像相关的操作图像信息,控制单元使所述操作图像叠加地显示在合成图像上。
(10)按照(1)-(9)任意之一所述的信息处理设备,
其中非显示区是由所述其他信息处理设备显示的第一图像信息中的按版权管理的图像的显示区。
(11)按照(1)-(10)任意之一所述的信息处理设备,
其中无线通信单元与多个其它信息处理设备进行实时图像传输,
控制单元使与从多个其它信息处理设备传送的多项第一图像信息相关的多个合成图像同时显示在显示单元上。
(12)一种信息处理设备,包括:
无线通信单元,所述无线通信单元被配置成按照无线保真(Wi-Fi)认证的Miracast规范,与其他信息处理设备进行实时图像传输;和
控制单元,所述控制单元被配置成按照向所述其他信息处理设备发送与显示在显示单元上并被发送给和显示在所述其他信息处理设备上的图像信息中包含的非显示区相关的命令信息,并且向所述其他信息处理设备发送所述图像信息中的除非显示区外的图像信息的方式,执行控制。
(13)一种信息处理系统,包括:
发送端设备,所述发送端设备被配置成按照无线保真(Wi-Fi)认证的Miracast规范,与接收端设备进行实时图像传输,把与在作为显示在显示单元上并被传送给和显示在接收端设备上的图像信息的第一图像信息中包含的非显示区相关的命令信息传送给接收端设备,和把第一图像信息中的除非显示区之外的图像信息传送给接收端设备;和
接收端设备,所述接收端设备被配置成按照Wi-Fi认证的Miracast规范,与发送端设备进行实时图像传输,根据命令信息,获得待显示在从发送端设备传送的第一图像信息中包含的非显示区上的第二图像信息,并使其中合成第一图像信息和第二图像信息的合成图像被显示在显示单元上。
(14)一种信息处理方法,包括:
按照无线保真(Wi-Fi)认证的Miracast规范,与其他信息处理设备进行实时图像传输的第一处理;和
按照获得待显示在包含于从所述其他信息处理设备传送的第一图像信息中的非显示区上的第二图像信息,并且其中合成第一图像信息和第二图像信息的合成图像被显示在显示单元上的方式,进行控制的第二处理。
附图标记列表
100 通信系统
200 信息处理设备
210 天线
220 无线通信单元
230 控制信号接收单元
240 控制单元
250 图像和音频信号生成单元
260 图像和音频压缩单元
270 流传输单元
300 信息处理设备
310 天线
320 无线通信单元
330 流接收单元
340 图像和音频解压缩单元
350 图像和音频输出单元
351 显示单元
352 音频输出单元
360 用户信息获取单元
370 控制单元
380 控制信号传输单元
390 管理信息保持单元
400 信息处理设备
700 通信系统
701 网络
702 接入点
703 信息处理设备
705 通信系统
710 信息处理设备
711 显示单元
730 信息处理设备
731 显示设备
732 显示单元
740 DRM内容服务器
740 通信单元
742 控制单元
743 DRM内容存储单元
900 智能电话机
901 处理器
902 内存
903 存储器
904 外部连接接口
906 摄像头
907 传感器
908 麦克风
909 输入设备
910 显示设备
911 扬声器
913 无线通信接口
914 天线开关
915 天线
917 总线
918 电池
919 辅助控制器
920 车载导航设备
921 处理器
922 存储器
924 GPS模块
925 传感器
926 数据接口
927 内容播放器
928 存储介质接口
929 输入设备
930 显示设备
931 扬声器
933 无线通信接口
934 天线开关
935 天线
938 电池
941 车载网络
942 车辆模块

Claims (14)

1.一种信息处理设备,包括:
无线通信单元,所述无线通信单元被配置成根据无线保真Wi-Fi认证的Miracast规范,与其他信息处理设备执行实时图像传输;和
控制单元,所述控制单元被配置成按照获得待显示在包含于从所述其他信息处理设备发送的第一图像信息中的非显示区上的第二图像信息,并且其中合成第一图像信息和第二图像信息的合成图像被显示在显示单元上的方式,执行控制。
2.按照权利要求1所述的信息处理设备,
其中所述控制单元基于从所述其他信息处理设备发送的与非显示区相关的命令信息,指定第一图像信息中的非显示区和第二图像信息。
3.按照权利要求2所述的信息处理设备,
其中所述控制单元基于包含在所述命令信息中的第一图像信息中的非显示区的位置和大小,指定第一图像信息中的非显示区。
4.按照权利要求2所述的信息处理设备,
其中控制单元基于包含在所述命令信息中的与第二图像信息相关的地址信息,从外部设备获得第二图像信息。
5.按照权利要求4所述的信息处理设备,
其中当已经收到所述命令信息时,控制单元向外部设备发送用于访问第二图像信息的确认信息,从外部设备接收允许访问第二图像信息的许可信息,随后从外部设备获得第二图像信息。
6.按照权利要求4所述的信息处理设备,
其中当已经收到命令信息时,控制单元向外部设备发送供所述其他信息处理设备访问第二图像信息之用的确认信息,从外部设备接收允许所述其他信息处理设备访问第二图像信息的许可信息,随后把供所述其他信息处理设备从外部设备获得第二图像信息之用的设定信息发送给所述其他信息处理设备。
7.按照权利要求6所述的信息处理设备,
其中在把设定信息发送给所述其他信息处理设备之后,控制单元从外部设备获得第二图像信息,并把第二图像信息传送给所述其他信息处理设备。
8.按照权利要求2所述的信息处理设备,
其中控制单元基于包含于命令信息中的与显示在非显示区上的图像相关的控制信息,执行合成图像的显示控制。
9.按照权利要求2所述的信息处理设备,
其中基于包含于命令信息中的与显示在非显示区上的操作图像相关的操作图像信息,控制单元使所述操作图像叠加地显示在合成图像上。
10.按照权利要求1所述的信息处理设备,
其中非显示区是由所述其他信息处理设备显示的第一图像信息中的按版权管理的图像的显示区。
11.按照权利要求1所述的信息处理设备,
其中无线通信单元与多个其它信息处理设备执行实时图像传输,并且
控制单元使与从多个其它信息处理设备发送的多项第一图像信息相关的多个合成图像同时显示在显示单元上。
12.一种信息处理设备,包括:
无线通信单元,所述无线通信单元被配置成根据无线保真Wi-Fi认证的Miracast规范,与其他信息处理设备执行实时图像传输;和
控制单元,所述控制单元被配置成按照向所述其他信息处理设备发送与显示在显示单元上并被发送给和显示在所述其他信息处理设备上的图像信息中包含的非显示区相关的命令信息,并且向所述其他信息处理设备发送所述图像信息中的除非显示区外的图像信息的方式,执行控制。
13.一种信息处理系统,包括:
发送端设备,所述发送端设备被配置成根据无线保真Wi-Fi认证的Miracast规范与接收端设备执行实时图像传输,把与在作为显示在显示单元上并被发送给和显示在接收端设备上的图像信息的第一图像信息中包含的非显示区相关的命令信息发送给接收端设备,并把第一图像信息中的除非显示区之外的图像信息发送给接收端设备;和
接收端设备,所述接收端设备被配置成根据Wi-Fi认证的Miracast规范与发送端设备执行实时图像传输,基于命令信息获得待显示在包含于从发送端设备发送的第一图像信息中的非显示区上的第二图像信息,并使其中合成第一图像信息和第二图像信息的合成图像被显示在显示单元上。
14.一种信息处理方法,包括:
根据无线保真Wi-Fi认证的Miracast规范与其他信息处理设备执行实时图像传输的第一处理;和
按照获得待显示在包含于从所述其他信息处理设备发送的第一图像信息中的非显示区上的第二图像信息,并且其中合成第一图像信息和第二图像信息的合成图像被显示在显示单元上的方式,执行控制的第二处理。
CN201480076759.6A 2014-03-11 2014-12-02 信息处理设备、信息处理系统和信息处理方法 Pending CN106063285A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014-047070 2014-03-11
JP2014047070 2014-03-11
PCT/JP2014/081811 WO2015136791A1 (ja) 2014-03-11 2014-12-02 情報処理装置、情報処理システムおよび情報処理方法

Publications (1)

Publication Number Publication Date
CN106063285A true CN106063285A (zh) 2016-10-26

Family

ID=54071256

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480076759.6A Pending CN106063285A (zh) 2014-03-11 2014-12-02 信息处理设备、信息处理系统和信息处理方法

Country Status (5)

Country Link
US (1) US10805672B2 (zh)
EP (1) EP3119098A4 (zh)
JP (1) JP6515918B2 (zh)
CN (1) CN106063285A (zh)
WO (1) WO2015136791A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108632244A (zh) * 2017-03-15 2018-10-09 佳能株式会社 通信装置、通信系统、通信方法和存储介质
CN108901024A (zh) * 2018-06-25 2018-11-27 北京小鱼在家科技有限公司 控制投屏接收设备连网及投屏接收设备连网方法、设备
CN108966182A (zh) * 2017-05-26 2018-12-07 佳能株式会社 通信装置、通信方法和存储介质
CN110115052A (zh) * 2017-02-13 2019-08-09 索尼公司 再现设备、信息处理方法和程序
CN110780946A (zh) * 2019-10-30 2020-02-11 京东数字科技控股有限公司 用于处理信息的方法和装置

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104679469B (zh) * 2014-12-29 2019-02-26 合肥杰发科技有限公司 车载终端及其获取手持终端的屏幕分辨率的方法
US10798575B2 (en) * 2015-01-23 2020-10-06 Maxell, Ltd. Display apparatus and display method
US10223061B2 (en) * 2015-12-17 2019-03-05 International Business Machines Corporation Display redistribution between a primary display and a secondary display
WO2018101514A1 (ko) * 2016-12-01 2018-06-07 엘지전자 주식회사 영상표시장치, 및 이를 구비하는 영상표시 시스템
JP7118764B2 (ja) * 2018-06-20 2022-08-16 キヤノン株式会社 通信装置、制御方法、およびプログラム
JP7154833B2 (ja) 2018-06-20 2022-10-18 キヤノン株式会社 通信装置、通信方法、およびプログラム
JP6891913B2 (ja) * 2019-03-25 2021-06-18 カシオ計算機株式会社 電子表示装置及び表示制御方法
US11245851B2 (en) * 2019-07-31 2022-02-08 Canon Kabushiki Kaisha Display control apparatus and method for controlling the same
US11349976B2 (en) * 2019-09-12 2022-05-31 Lenovo (Beijing) Co., Ltd. Information processing method, file transmission method, electronic apparatus, and computing apparatus
US11651749B2 (en) * 2020-11-02 2023-05-16 Panduit Corp. Display layout optimization of multiple media streams

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1717025A (zh) * 2004-05-07 2006-01-04 索尼株式会社 信息处理装置,信息处理方法以及信息处理程序
CN1767648A (zh) * 2004-08-25 2006-05-03 索尼株式会社 信息处理设备和信息处理方法、记录介质、以及程序
US20120038541A1 (en) * 2010-08-13 2012-02-16 Lg Electronics Inc. Mobile terminal, display device and controlling method thereof
CN102667750A (zh) * 2009-12-18 2012-09-12 微软公司 在可插入的内容处理系统中卸载内容检索并进行解码

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008278388A (ja) 2007-05-07 2008-11-13 Sony Corp 情報交換装置および情報交換方法
US9003512B2 (en) * 2009-01-16 2015-04-07 Cox Communications, Inc. Content protection management system
JP5073032B2 (ja) * 2010-09-27 2012-11-14 株式会社東芝 情報出力装置、情報処理システムおよび情報処理方法
US9503771B2 (en) 2011-02-04 2016-11-22 Qualcomm Incorporated Low latency wireless display for graphics
US8560453B2 (en) * 2011-06-30 2013-10-15 Intel Corporation Method and apparatus for dynamic, real-time ad insertion based on meta-data within a hardware based root of trust
US8966131B2 (en) * 2012-01-06 2015-02-24 Qualcomm Incorporated System method for bi-directional tunneling via user input back channel (UIBC) for wireless displays
JP5999452B2 (ja) * 2012-01-26 2016-09-28 パナソニックIpマネジメント株式会社 携帯端末及び機器連携方法
KR102007749B1 (ko) * 2012-08-29 2019-08-06 삼성전자주식회사 단말에서의 화면 녹화 방법 및 장치와 그 방법에 대한 프로그램 소스를 저장한 기록 매체

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1717025A (zh) * 2004-05-07 2006-01-04 索尼株式会社 信息处理装置,信息处理方法以及信息处理程序
CN1767648A (zh) * 2004-08-25 2006-05-03 索尼株式会社 信息处理设备和信息处理方法、记录介质、以及程序
CN102667750A (zh) * 2009-12-18 2012-09-12 微软公司 在可插入的内容处理系统中卸载内容检索并进行解码
US20120038541A1 (en) * 2010-08-13 2012-02-16 Lg Electronics Inc. Mobile terminal, display device and controlling method thereof

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110115052A (zh) * 2017-02-13 2019-08-09 索尼公司 再现设备、信息处理方法和程序
CN110115052B (zh) * 2017-02-13 2022-08-16 索尼公司 再现设备、信息处理方法和记录介质
CN108632244A (zh) * 2017-03-15 2018-10-09 佳能株式会社 通信装置、通信系统、通信方法和存储介质
CN108632244B (zh) * 2017-03-15 2021-09-07 佳能株式会社 通信装置、通信系统、通信方法和存储介质
CN108966182A (zh) * 2017-05-26 2018-12-07 佳能株式会社 通信装置、通信方法和存储介质
US11435973B2 (en) 2017-05-26 2022-09-06 Canon Kabushiki Kaisha Communication apparatus, communication method, and storage medium
CN108901024A (zh) * 2018-06-25 2018-11-27 北京小鱼在家科技有限公司 控制投屏接收设备连网及投屏接收设备连网方法、设备
CN110780946A (zh) * 2019-10-30 2020-02-11 京东数字科技控股有限公司 用于处理信息的方法和装置

Also Published As

Publication number Publication date
JPWO2015136791A1 (ja) 2017-04-06
EP3119098A1 (en) 2017-01-18
US20170078740A1 (en) 2017-03-16
EP3119098A4 (en) 2017-10-18
JP6515918B2 (ja) 2019-05-22
US10805672B2 (en) 2020-10-13
WO2015136791A1 (ja) 2015-09-17

Similar Documents

Publication Publication Date Title
CN106063285A (zh) 信息处理设备、信息处理系统和信息处理方法
CN109121127B (zh) 信息处理设备、信息处理系统和信息处理方法
US10383098B2 (en) Information processing device and information processing method
CN105474691B (zh) 信息处理设备和信息处理方法
EP3273712B1 (en) Information processing device, information processing method, and program
JP6406249B2 (ja) 情報処理装置および情報処理方法
US10499200B2 (en) Information processing device and information processing method
CN108966182A (zh) 通信装置、通信方法和存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20161026

RJ01 Rejection of invention patent application after publication