JP7037358B2 - 情報処理装置、情報処理方法およびプログラム - Google Patents

情報処理装置、情報処理方法およびプログラム Download PDF

Info

Publication number
JP7037358B2
JP7037358B2 JP2017511499A JP2017511499A JP7037358B2 JP 7037358 B2 JP7037358 B2 JP 7037358B2 JP 2017511499 A JP2017511499 A JP 2017511499A JP 2017511499 A JP2017511499 A JP 2017511499A JP 7037358 B2 JP7037358 B2 JP 7037358B2
Authority
JP
Japan
Prior art keywords
information processing
information
processing device
sink device
source device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017511499A
Other languages
English (en)
Other versions
JPWO2016163181A1 (ja
Inventor
英輝 石見
智也 山浦
英之 鈴木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Sony Group Corp
Original Assignee
Sony Corp
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp, Sony Group Corp filed Critical Sony Corp
Publication of JPWO2016163181A1 publication Critical patent/JPWO2016163181A1/ja
Application granted granted Critical
Publication of JP7037358B2 publication Critical patent/JP7037358B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/104Peer-to-peer [P2P] networks
    • H04L67/1044Group management mechanisms 
    • H04L67/1051Group master selection mechanisms
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/12Discovery or management of network topologies
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0803Configuration setting
    • H04L41/0813Configuration setting characterised by the conditions triggering a change of settings
    • H04L41/0816Configuration setting characterised by the conditions triggering a change of settings the condition being an adaptation, e.g. in response to network events
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0893Assignment of logical groups to network elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066Session management
    • H04L65/1083In-session procedures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M11/00Telephonic communication systems specially adapted for combination with other electrical systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W48/00Access restriction; Network selection; Access point selection
    • H04W48/08Access restriction or access information delivery, e.g. discovery data delivery
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W76/00Connection management
    • H04W76/10Connection setup
    • H04W76/14Direct-mode setup
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W8/00Network data management
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W84/00Network topologies
    • H04W84/02Hierarchically pre-organised networks, e.g. paging networks, cellular networks, WLAN [Wireless Local Area Network] or WLL [Wireless Local Loop]
    • H04W84/10Small scale networks; Flat hierarchical networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W92/00Interfaces specially adapted for wireless communication networks
    • H04W92/04Interfaces between hierarchically different network devices
    • H04W92/08Interfaces between hierarchically different network devices between user and terminal device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/51Discovery or management thereof, e.g. service location protocol [SLP] or web services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W84/00Network topologies
    • H04W84/18Self-organising networks, e.g. ad-hoc networks or sensor networks
    • H04W84/20Master-slave selection or change arrangements

Description

本技術は、情報処理装置に関する。詳しくは、無線通信を利用して情報のやりとりを行う情報処理装置および情報処理方法ならびに当該方法をコンピュータに実行させるプログラムに関する。
近年、無線LAN(Local Area Network)を利用して無線通信を行う情報処理装置が広く普及している。この無線LANとして、例えば、IEEE(Institute of Electrical and Electronics Engineers)802.11に代表される無線LANが広く普及している。
また、例えば、無線AV(Audio Visual)伝送通信として、Wi-Fi(Wireless Fidelity) CERTIFIED Miracastが提案されている(例えば、特許文献1参照。)。
特開2014-96074号公報
上述の従来技術によれば、Wi-Fi CERTIFIED Miracast仕様に従って、2つの情報処理装置間においてリアルタイム画像伝送を行うことができる。例えば、ソース機器から送信された画像データに基づく画像を、シンク機器の表示部に表示させることができる。
ここで、1つのシンク機器に複数のソース機器が接続することも想定される。また、1つのソース機器に複数のシンク機器が接続されることも想定される。このように各種の接続形態が想定されるため、接続形態に応じて、各機器を適切に接続することが重要である。
本技術はこのような状況に鑑みて生み出されたものであり、情報処理装置を適切に無線接続することを目的とする。
本技術は、上述の問題点を解消するためになされたものであり、その第1の側面は、他の情報処理装置との間でデータ伝送を行う無線通信部と、少なくとも自装置および第1情報処理装置により形成されるネットワークのグループオーナーの役割を担う上記第1情報処理装置との間で上記データ伝送を行っている間に第2情報処理装置との間で新たに上記データ伝送を行う場合に、上記第1情報処理装置および上記第2情報処理装置のそれぞれに上記データ伝送を行うための役割を変更するための情報をやりとりする制御を行う制御部とを具備する情報処理装置およびその情報処理方法ならびに当該方法をコンピュータに実行させるプログラムである。これにより、グループオーナーの役割を担う第1情報処理装置との間でデータ伝送を行っている間に第2情報処理装置との間で新たにデータ伝送を行う場合に、第1情報処理装置および第2情報処理装置のそれぞれにデータ伝送を行うための役割を変更するための情報をやりとりするという作用をもたらす。
また、この第1の側面において、上記制御部は、上記グループオーナーの役割の変更を上記第1情報処理装置が許可するか否かを示す情報と、上記情報処理装置および上記第1情報処理装置のそれぞれがコンカレント機能を備えるか否かを示す情報と、上記情報処理装置が複数の機器との間で無線通信を行う複数動作に対応可能か否かを示す情報とのうちの少なくとも1つを、上記情報としてやりとりする制御を行うようにしてもよい。これにより、グループオーナーの役割の変更を第1情報処理装置が許可するか否かを示す情報と、情報処理装置および第1情報処理装置のそれぞれがコンカレント機能を備えるか否かを示す情報と、情報処理装置が複数の機器との間で無線通信を行う複数動作に対応可能か否かを示す情報とのうちの少なくとも1つをやりとりするという作用をもたらす。
また、この第1の側面において、上記制御部は、上記情報処理装置および上記第1情報処理装置間でやりとりされるメッセージに上記情報を含めてやりとりする制御を行うようにしてもよい。これにより、情報処理装置および第1情報処理装置間でやりとりされるメッセージに情報を含めてやりとりするという作用をもたらす。
また、この第1の側面において、上記制御部は、上記グループオーナーの役割の変更を上記第1情報処理装置が許可している場合に、上記グループオーナーの役割を上記第1情報処理装置から上記情報処理装置に変更した後に、上記第2情報処理装置との接続処理を行うように制御するようにしてもよい。これにより、グループオーナーの役割の変更を第1情報処理装置が許可している場合に、グループオーナーの役割を第1情報処理装置から情報処理装置に変更した後に、第2情報処理装置との接続処理を行うという作用をもたらす。
また、この第1の側面において、上記制御部は、上記グループオーナーの役割の変更を上記第1情報処理装置が許可し、かつ、上記情報処理装置および上記第1情報処理装置の双方がコンカレント機能を備える場合に、上記グループオーナーの役割を上記第1情報処理装置から上記情報処理装置に変更した後に、上記情報処理装置および上記第1情報処理装置の切断処理を行い、上記第1情報処理装置および上記第2情報処理装置のそれぞれに上記データ伝送を行うための接続処理を行うように制御するようにしてもよい。これにより、グループオーナーの役割の変更を第1情報処理装置が許可し、かつ、情報処理装置および第1情報処理装置の双方がコンカレント機能を備える場合に、グループオーナーの役割を第1情報処理装置から情報処理装置に変更した後に、情報処理装置および第1情報処理装置の切断処理を行い、第1情報処理装置および第2情報処理装置のそれぞれにデータ伝送を行うための接続処理を行うという作用をもたらす。
また、この第1の側面において、上記制御部は、上記グループオーナーの役割の変更を上記第1情報処理装置が許可している場合において、上記情報処理装置がグループオーナーであり、かつ、上記第1情報処理装置がクライアントである場合の接続設定情報を上記第2情報処理装置が保持しないときには、上記グループオーナーの役割を上記第1情報処理装置から上記情報処理装置に変更する前に上記情報処理装置および上記第1情報処理装置間でやりとりされるメッセージに当該接続設定情報を取得するための情報を含めるように制御するようにしてもよい。これにより、グループオーナーの役割の変更を第1情報処理装置が許可している場合において、情報処理装置がグループオーナーであり、かつ、第1情報処理装置がクライアントである場合の接続設定情報を第2情報処理装置が保持しないときには、グループオーナーの役割を第1情報処理装置から情報処理装置に変更する前に情報処理装置および第1情報処理装置間でやりとりされるメッセージにその接続設定情報を取得するための情報を含めるという作用をもたらす。
また、この第1の側面において、上記制御部は、上記情報処理装置および上記第1情報処理装置間でやりとりされるメッセージに、DHCP(Dynamic Host Configuration Protocol)に関する情報と、通信中のMAC(Media Access Control)アドレス情報と、HDCP(High-bandwidth Digital Content Protection system)を動作させた状態でIP(Internet Protocol)アドレスを移動させるための情報と、Persistentに必要な情報との少なくとも1つを含めてやりとりする制御を行うようにしてもよい。これにより、情報処理装置および第1情報処理装置間でやりとりされるメッセージに、DHCPに関する情報と、通信中のMACアドレス情報と、HDCPを動作させた状態でIPアドレスを移動させるための情報と、Persistentに必要な情報との少なくとも1つを含めてやりとりするという作用をもたらす。
また、この第1の側面において、上記制御部は、上記役割の変更後の接続形態における接続設定情報を保持していない場合には、既に共有されている上記役割の変更前の第1の接続設定情報に、予め定められた規則を適用して、上記役割の変更後の第2の接続設定情報を生成するようにしてもよい。これにより、役割の変更後の接続形態における接続設定情報を保持していない場合には、既に共有されている役割の変更前の第1の接続設定情報に、予め定められた規則を適用して、役割の変更後の第2の接続設定情報を生成するという作用をもたらす。
また、この第1の側面において、上記制御部は、上記第2の接続設定情報を生成する場合に、上記情報処理装置および上記第1情報処理装置のみが有する上記第1の接続設定情報のみを用いるようにしてもよい。これにより、第2の接続設定情報を生成する場合に、情報処理装置および第1情報処理装置のみが有する第1の接続設定情報のみを用いるという作用をもたらす。
また、この第1の側面において、上記制御部は、上記グループオーナーの役割の変更を上記第1情報処理装置が未許可であり、かつ、上記情報処理装置が複数動作に対応していない場合には、上記第1情報処理装置および上記第2情報処理装置のうちから上記データ伝送を行う情報処理装置を選択するための選択情報をユーザに提供するようにしてもよい。これにより、グループオーナーの役割の変更を第1情報処理装置が未許可であり、かつ、情報処理装置が複数動作に対応していない場合には、第1情報処理装置および第2情報処理装置のうちからデータ伝送を行う情報処理装置を選択するための選択情報をユーザに提供するという作用をもたらす。
また、この第1の側面において、上記制御部は、上記データ伝送の対象となる画像情報と、上記選択情報とを異なる管理とするようにしてもよい。これにより、データ伝送の対象となる画像情報と、選択情報とを異なる管理とするという作用をもたらす。
また、この第1の側面において、上記制御部は、上記グループオーナーの役割の変更を上記第1情報処理装置が許可している場合に、上記グループオーナーの役割を上記第1情報処理装置から上記情報処理装置に変更したときには、その旨を通知するための通知情報をユーザに提供するようにしてもよい。これにより、グループオーナーの役割の変更を第1情報処理装置が許可している場合に、グループオーナーの役割を第1情報処理装置から情報処理装置に変更したときには、その旨を通知するための通知情報をユーザに提供するという作用をもたらす。
また、この第1の側面において、上記無線通信部は、Wi-Fi(Wireless Fidelity) CERTIFIED Miracast仕様に従って上記他の情報処理装置との間で上記データ伝送を行うようにしてもよい。これにより、Wi-Fi CERTIFIED Miracast仕様に従って他の情報処理装置との間でデータ伝送を行うという作用をもたらす。
本技術によれば、情報処理装置を適切に無線接続することができるという優れた効果を奏し得る。なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。
本技術の第1の実施の形態における通信システム10のシステム構成例を示すブロック図である。 本技術の基礎となるソース機器41、第1シンク機器42および第2シンク機器43の通信処理例を示すシーケンスチャートである。 本技術の第1の実施の形態におけるソース機器(情報処理装置)100の機能構成例を示すブロック図である。 本技術の第1の実施の形態における第1シンク機器(情報処理装置)200の機能構成例を示すブロック図である。 本技術の第1の実施の形態における機器の役割管理部320の構成例を模式的に示す図である。 本技術の第1の実施の形態におけるソース機器100および第1シンク機器200間における通信処理例を示すシーケンスチャートである。 本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。 本技術の第1の実施の形態における通信システム10を構成する各機器がマルチシンク・トポロジ環境を構築する場合の遷移例を示す図である。 本技術の第1の実施の形態における通信システム10を構成する各機器がマルチシンク・トポロジ環境を構築する場合の遷移例を示す図である。 本技術の第1の実施の形態における通信システム10を構成する各機器がマルチシンク・トポロジ環境を構築する場合の遷移例を示す図である。 本技術の第1の実施の形態における通信システム10を構成する各機器がマルチシンク・トポロジ環境を構築する場合の遷移例を示す図である。 本技術の第1の実施の形態における通信システム10を構成する各機器がマルチシンク・トポロジ環境を構築する場合の遷移例を示す図である。 本技術の第1の実施の形態における通信システム10を構成する各機器がマルチシンク・トポロジ環境を構築する場合の遷移例を示す図である。 本技術の第1の実施の形態における通信システム10を構成する各機器がマルチシンク・トポロジ環境を構築する場合の遷移例を示す図である。 本技術の第1の実施の形態における通信システム10を構成する各機器がマルチシンク・トポロジ環境を構築する場合の遷移例を示す図である。 本技術の第1の実施の形態におけるソース機器100および第2シンク機器300に表示される通知画面の一例を示す図である。 本技術の第1の実施の形態におけるソース機器100および第1シンク機器200に表示される通知画面の一例を示す図である。 本技術の第1の実施の形態におけるソース機器100および第1シンク機器200に表示される選択画面の一例を示す図である。 本技術の第1の実施の形態におけるソース機器100および第1シンク機器200に表示される通知画面の一例を示す図である。 本技術の第1の実施の形態におけるソース機器100によるマルチシンク接続処理の処理手順の一例を示すフローチャートである。 本技術の第1の実施の形態におけるソース機器100によるマルチシンク接続処理の処理手順の一例を示すフローチャートである。 本技術の第1の実施の形態における通信システム10を構成する各機器間によりやりとりされるWFD IEフォーマットの一例を示す図である。 本技術の第1の実施の形態における通信システム10を構成する各機器間によりやりとりされるWFD IEフォーマットの一例を示す図である。 本技術の第1の実施の形態における通信システム10を構成する各機器間によりやりとりされるWFD IEフォーマットの一例を示す図である。 本技術の第1の実施の形態における通信システム10を構成する各機器間によりやりとりされるWFD IEフォーマットの一例を示す図である。 本技術の第1の実施の形態における通信システム10を構成する各機器間によりやりとりされるWFD IEフォーマットの一例を示す図である。 本技術の第1の実施の形態における通信システム10を構成する各機器間によりやりとりされるASP(Application Service Platform)用の新規メッセージの一例を示す図である。 本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。 本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。 本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。 本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。 本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。 本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。 本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。 本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。 本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。 本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。 本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。 本技術の第2の実施の形態におけるソース機器100および第1シンク機器200に表示される選択画面の一例を示す図である。 本技術の第2の実施の形態におけるソース機器100によるマルチシンク接続処理の処理手順の一例を示すフローチャートである。 本技術の第2の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。 本技術の第2の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。 本技術の第2の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。 本技術の第2の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。 スマートフォンの概略的な構成の一例を示すブロック図である。 カーナビゲーション装置の概略的な構成の一例を示すブロック図である。
以下、本技術を実施するための形態(以下、実施の形態と称する)について説明する。説明は以下の順序により行う。
1.第1の実施の形態(マルチシンク・トポロジを構築する場合に新規参入するシンク機器が接続要求を行う例)
2.第2の実施の形態(マルチシンク・トポロジを構築する場合に新規参入するシンク機器にソース機器が接続要求を行う例)
3.応用例
<1.第1の実施の形態>
[通信システムの構成例]
図1は、本技術の第1の実施の形態における通信システム10のシステム構成例を示すブロック図である。図1では、P2P(Peer to Peer)ダイレクト通信を用いたマルチシンク・トポロジ環境の無線接続を行うことができる通信システムの一例を示す。
通信システム10は、ソース機器(情報処理装置)100と、第1シンク機器(情報処理装置)200と、第2シンク機器(情報処理装置)300とを備える。また、図1では、通信システム10は、ソース機器100から送信されるデータ(例えば、画像データや音声データ)を第1シンク機器200および第2シンク機器300が受信する通信システムの一例である。
また、ソース機器100、第1シンク機器200、第2シンク機器300は、無線通信機能を備える送受信機器(情報処理装置)である。例えば、ソース機器100、第1シンク機器200、第2シンク機器300は、無線通信機能を備える表示装置(例えば、パーソナルコンピュータ)や携帯型の情報処理装置(例えば、スマートフォン、タブレット端末)である。また、例えば、ソース機器100、第1シンク機器200、第2シンク機器300は、IEEE(Institute of Electrical and Electronics Engineers)802.11、IEEE802.15、IEEE802.16、3GPP(3rd Generation Partnership Project)仕様(例えば、W-CDMA(Wideband Code Division Multiple Access)、GSM(登録商標)(Global System for Mobile Communications)、WiMAX(Worldwide Interoperability for Microwave Access)、WiMAX2、LTE(Long Term Evolution)、LTE-A(Advanced))、LAA(Licensed Assisted Access using LTE)に準拠した無線通信装置である。そして、ソース機器100、第1シンク機器200、第2シンク機器300は、無線通信機能を利用して各種情報のやりとりを行うことができる。
ここで、第1シンク機器200、第2シンク機器300は、ソース機器100から送信されるデータを受信する機器である。このため、ソース機器100および第2シンク機器300間のやりとりは、ソース機器100および第1シンク機器200間のやりとりと同等である。そこで、本技術の実施の形態では、ソース機器100および第2シンク機器300間のやりとりの説明の一部を省略し、主に、ソース機器100および第1シンク機器200間のやりとり(例えば、接続方法)を例にして説明する。また、本技術の実施の形態では、ソース機器100および第1シンク機器200は、無線LAN(Local Area Network)を用いた無線通信を行う場合の例について説明する。
この無線LANとして、例えば、Infrastructureモード(Wi-Fi Infrastructureモード)、Wi-Fi(Wireless Fidelity) Direct、TDLS(Tunneled Direct Link Setup)、アドホックネットワーク、メッシュネットワークを用いることができる。また、通信システム10に用いられる近距離無線AV(Audio Visual)伝送通信として、例えば、Wi-Fi CERTIFIED Miracast(技術仕様書名:Wi-Fi Display)を用いることができる。なお、Wi-Fi CERTIFIED Miracastは、Wi-Fi DirectやTDLSの技術を利用して、一方の端末で再生される音声や表示画像を他の端末に送信し、他の端末でも同様にその音声、画像データを出力させるミラーリング技術である。
また、Wi-Fi CERTIFIED Miracastでは、TCP/IP(Transmission Control Protocol/Internet Protocol)上でUIBC(User Input Back Channel)を実現している。UIBCは、一方の端末から他方の端末へマウスやキーボード等の入力機器の操作情報を送信する技術である。なお、Wi-Fi CERTIFIED Miracastの代わりに、他のリモートデスクトップソフトウェア(例えば、VNC(Virtual Network Computing))を適用するようにしてもよい。
ここで、Wi-Fi CERTIFIED Miracastでは、画像(映像)を、例えば、H.264を用いて圧縮・展開することが定められている。また、例えば、Wi-Fi CERTIFIED Miracastでは、H.264を送信側で調整することができる。なお、H.264に限らず、例えば、H.265(例えば、HEVC(high efficiency video coding)、SHVC(scalable video coding extensions of high efficiency video coding))、MPEG(Moving Picture Experts Group)4、JPEG(Joint 1Photographic Experts Group)2000にも対応することができる。また、例えば、1ライン以上を束ねて圧縮したり、2ライン以上を2×2以上のマクロブロックに分割して圧縮・展開を行うラインベースコーデック(例えば、Wavelet、DCT(Discrete Cosine Transform))にも対応することができる。また、例えば、特定の符号量領域(Pictureまたは複数ラインの束またはマクロブロック等)の前符号量領域との差分を求めることでDCTやWavelet等の圧縮を行わずに伝送レートを減らすコーデックにも対応することができる。また、非圧縮で画像(映像)を送信・受信するようにしてもよい。
また、例えば、ソース機器100は、撮像動作により生成された画像データおよび音声データを送信対象とすることができる。また、例えば、ソース機器100は、記憶部(例えば、ハードディスク)に保存されているコンテンツ(例えば、画像データおよび音声データからなるコンテンツ)を送信対象とすることができる。なお、ソース機器100、第1シンク機器200、第2シンク機器300として、カメラを搭載した電子機器(例えば、パソコン、ゲーム機、スマートフォン、タブレット端末)を用いるようにしてもよい。また、ソース機器100、第1シンク機器200、第2シンク機器300として、表示部を備える他の電子機器(例えば、撮像装置、ゲーム機、スマートフォン、タブレット端末)を用いるようにしてもよい。また、ソース機器100がテザリング機能を備える場合には、無線または有線ネットワークを介してISP(Internet Services Provider)に保存されたコンテンツを送信対象とするようにしてもよい。
例えば、ソース機器100の撮像動作により生成された画像データが第1シンク機器200に送信され、その画像データに基づく画像11が第1シンク機器200の表示部251に表示される。
また、図1では、P2Pダイレクト接続により、無線通信を利用してソース機器100が直接通信することができる範囲を情報伝達範囲15として示す。この情報伝達範囲15は、ソース機器100を基準とした場合における情報伝達範囲(サービス範囲)である。
ここで、ダイレクト通信モードにおけるソース機器100、第1シンク機器200、第2シンク機器300の役割(Role)について説明する。ダイレクト通信モードでは、各機器(ソース機器、シンク機器)は、例えば、P2P GO(Group Owner)、P2Pクライアント(P2P Client)またはP2P未設定(P2P Device)の何れかの状態になる。
ここでは、ソース機器100がP2P GOであり、第1シンク機器200がP2Pクライアントであり、第2シンク機器300がP2P未設定である場合を想定する。この場合には、ソース機器100(P2P GO)は、無線通信による機器間の直接接続により形成される機器のグループにおいて各機器(P2Pクライアント)と直接接続を確立する。
また、ソース機器100(P2P GO)は、例えば、ビーコンの発信、グループに参加する機器の認証、グループに参加する機器への接続設定情報(クレデンシャル(Credential))の提供等を行う。ここで、接続設定情報(クレデンシャル)は、WPS(Wi-Fi Protected Setup)処理の中で共有されている。また、WPSは、WSC(Wi-Fi Simple Config)またはWSC exchangeとも呼ばれる。また、ソース機器100(P2P GO)は、そのグループにおいてアクセスポイントのような役割を担う。
また、例えば、第1シンク機器200(P2Pクライアント)は、無線通信による機器間の直接接続により形成される機器のグループにおいて、ソース機器100(P2P GO)との直接接続を確立する。すなわち、第1シンク機器200(P2Pクライアント)は、ソース機器100(P2P GO)と通信し、または、ソース機器100(P2P GO)を介して、他のP2Pクライアントと通信する。また、第2シンク機器300(P2P未設定)は、始めは無線通信による機器間の直接接続を確立していない。
なお、P2P GOは、Persistent GOおよびTemporary GOを含む。ここで、Persistent GOは、P2P接続セッション終了後も接続先の機器の接続設定情報を保持し、Invitaion Requestおよびその機器からのProvision Discovery Requestに応じて再接続可能なGOである。また、Temporary GOは、P2P接続セッション中のみ接続設定情報を保持し、P2P接続セッションの終了後には、その接続設定情報を破棄するGOである。
[マルチシンク・トポロジの構築例]
次に、マルチシンク・トポロジの構築方法について説明する。
図2は、本技術の基礎となるソース機器41、第1シンク機器42および第2シンク機器43の通信処理例を示すシーケンスチャートである。具体的には、図2には、P2Pダイレクト接続からマルチシンク・トポロジ環境を構築するまでの基本的な流れを示す。図2では、ソース機器41が、第1シンク機器42とP2Pダイレクト通信で接続している環境において、第2シンク機器43がグループに参入する場合の例を示す。
ここで、ソース機器が2台以上のシンク機器を接続する場合には、ソース機器がP2P GOとして動作し、シンク機器がP2Pクライアントとして動作していることが好ましい。そこで、図2では、ソース機器41をP2P GO(グループオーナー)21とし、第1シンク機器42をP2Pクライアント22とするグループ20が形成されている例を示す。すなわち、ソース機器41は既にP2P GO21として、第1シンク機器42(P2Pクライアント22)と接続済である。また、第2シンク機器43は、P2Pダイレクト接続が可能なP2Pデバイス23であるものとする。
最初に、ソース機器41から第2シンク機器43に、P2P Invitation Request処理を行う(24)。または、第2シンク機器43からソース機器41に、P2P Provision Discovery処理を行うようにしてもよい。
このように、P2P Invitation Request処理が行われると(24)、第2シンク機器43からソース機器41に、P2P Invitation Response処理が返信される(25)。また、ソース機器41および第2シンク機器43間で、WPS(Wi-Fi Protected Setup)実行(26)、4-way Handshake(認証手続き)(27)が行われる。
これらの各処理によって、ソース機器41は、第2シンク機器43を新たなP2Pクライアント31として接続する。これにより、ソース機器41をP2P GO29とし、第1シンク機器42および第2シンク機器43をP2Pクライアント30、31とするグループ28が形成される。
続いて、ソース機器41は、第1シンク機器42および第2シンク機器43のそれぞれとの間で、お互いにサービスディスカバリー(32、33)を行うことにより、マルチシンク・トポロジを構築する。
このように、トポロジが構築された後に、ソース機器41から第1シンク機器42および第2シンク機器43に画像データ(例えば、ソース機器41の撮像動作により生成された画像データ)が送信される。そして、その画像データに基づく画像が第1シンク機器42および第2シンク機器43の表示部に表示される。このように、ソース機器41から第1シンク機器42および第2シンク機器43に送信されて表示されるコンテンツは、同じコンテンツ(画像)とすることができる。ただし、ソース機器41から第1シンク機器42および第2シンク機器43に送信されて表示されるコンテンツは、異なるコンテンツ(画像)とするようにしてもよい。例えば、第1シンク機器42には、ソース機器41に表示された画像をそのまま送信し、第2シンク機器43には、ソース機器41の記憶部に保存されているコンテンツを送信することもできる。
[ソース機器(情報処理装置)の構成例]
図3は、本技術の第1の実施の形態におけるソース機器(情報処理装置)100の機能構成例を示すブロック図である。
ソース機器100は、アンテナ110と、無線通信部120と、制御信号受信部130と、制御部140と、画像・音声信号生成部150と、画像・音声圧縮部160と、ストリーム送信部170と、操作受付部180と、表示部190とを備える。
無線通信部120は、制御部140の制御に基づいて、無線通信を利用して、他の情報処理装置(例えば、第1シンク機器200)との間で各情報(例えば、画像データおよび音声データ)の送受信をアンテナ110を介して行うものである。例えば、画像データの送信処理が行われる場合には、画像・音声信号生成部150により生成された画像データが画像・音声圧縮部160により圧縮され、この圧縮された画像データ(画像ストリーム)が無線通信部120を経由してアンテナ110から送信される。
また、無線通信部120は、複数の周波数チャネルを利用して、他の情報処理装置(例えば、第1シンク機器200)との間で各情報の送受信を行うことが可能であるものとする。本技術の第1の実施の形態では、無線通信部120が、2.4GHz、5GHz、60GHzの3種類の周波数チャネルを同時または選択した周波数のみを送受信可能な機能を備える例を示す。このように、ソース機器が、複数の周波数チャネルを送受信可能な機能を備える場合には、シンク機器(例えば、第1シンク機器200)は、各ソース機器にどの周波数チャネルを使用させるかを制御することができる。
このように、無線通信部120は、Wi-Fi CERTIFIED Miracast仕様に従って他の機器との間でメディア伝送を行うことができる。
制御信号受信部130は、無線通信部120により受信された各情報のうちから、他の情報処理装置(例えば、第1シンク機器200)から送信された制御信号(例えば、第1シンク機器200とのやりとりの情報)を取得するものである。そして、制御信号受信部130は、その取得された制御信号を制御部140に出力する。
制御部140は、ソース機器100から送信される各情報に関する制御を行うものである。例えば、制御部140は、制御信号受信部130により受信された制御信号に基づいて、画像・音声信号生成部150および画像・音声圧縮部160に対する制御を行う。例えば、制御部140は、送信対象となる画像データの解像度や音声のチャネル数を変更させるための制御や、送信対象となる画像データの画像領域を変更させるための制御を行う。すなわち、制御部140は、制御信号受信部130により受信された制御信号に基づいて、送信対象となるストリームの伝送制御を行う。このストリームの伝送制御は、例えば、データ伝送速度制御、スケーラビリティ伝送レート制御である。
また、制御部140は、無線通信を利用してシンク機器との間でデータの送受信が行われている際における電波伝搬状況(リンク電波伝搬状況)を測定する機能を備え、その測定結果(電波伝搬測定情報)をシンク機器に送信するようにしてもよい。
ここで、電波伝搬測定情報は、例えば、シンク機器との回線品質が、画像データおよび音声データの送受信を行うことができる品質であるか否かを判断する際に用いられる情報である。また、電波伝搬測定情報は、例えば、ストリームの伝送制御を行う際に用いられる。
ここで、データ伝送速度は、主に、通信路を占有する率を意味し、通信速度や通信容量の意味を含むものとする。また、解像度は、例えば、画像データの画枠(縦・横のピクセル数)、画像データのビットレート(圧縮率)等の要素から構成される画質の指標と定義する。また、画質の指標としては、ストリームのスループットを用いることができる。また、音声のチャネル数は、モノラル(1.0ch)、ステレオ(2.0ch)、5.1ch、 6.1ch、 9.1ch、ハイレゾ(ハイレゾリューションオーディオ(High-Resolution Audio))等の音声の記録再生方法の意味を含むものとする。また、音声のチャネル数は、音声データのビットレート(圧縮率)やチャネル数等の要素から構成される音質の指標と定義する。また、音質の指標としては、ストリームのスループットを用いることができる。
また、制御部140は、データレート制御では安定化することができない状態を改善させるための制御を行う。例えば、制御部140は、シンク機器(例えば、第1シンク機器200)との情報のやりとりにより、シンク機器のシステム性能情報を把握する。ここで、システム性能情報は、例えば、シンク機器のシステムに関する性能情報である。例えば、システム性能情報は、使用可能な周波数チャネル、解像度、TCP(Transmission Control Protocol)、UDP(User Datagram Protocol)である。また、システム性能情報は、例えば、暗号化方法の対応、SD(Standard Definition)/HD(High Definition)/4K対応、低消費電力モードの対応のそれぞれを示す情報である。例えば、制御部140は、シンク機器が低消費電力モードに対応しているか否かに応じて、通信システム10のシステム全体の安定度をさらに向上させるストリームの伝送制御方法を選ぶことができる。
例えば、制御部140は、第1シンク機器200との情報のやりとりの中に、ソース機器100がモバイル機器であるかどうかの情報を入れるものとする。例えば、ソース機器100に関するCapability情報に、ソース機器100がモバイル機器であるかどうかの情報を含めることができる。また、第1シンク機器200は、ソース機器100がモバイル機器であることを把握すると、他に接続した情報処理装置との関連に基づいて、ソース機器100を動作させる必要がないと判断することができる。このように、ソース機器100を動作させる必要がないと判断された場合には、ソース機器100は、第1シンク機器200から送信停止コマンドを受信する。そして、制御部140は、その送信停止コマンドを把握すると、画像・音声信号生成部150と、画像・音声圧縮部160と、ストリーム送信部170とのそれぞれの機能の電源を一定時間ダウンさせることができる。また、制御部140は、無線通信部120についても間欠受信(第1シンク機器200からコマンドを受信できる程度に定期的に起き上がり、他は電源をダウンさせるモード)に移行することができる。
画像・音声信号生成部150は、制御部140の制御に基づいて、出力対象となるデータ(画像データ、音声データ)を生成するものであり、生成されたデータを画像・音声圧縮部160に出力する。例えば、画像・音声信号生成部150は、撮像部(図示せず)および音声取得部(図示せず)を備える。この撮像部(例えば、レンズ、撮像素子、信号処理回路)は、被写体を撮像して画像(画像データ)を生成するものである。また、音声取得部(例えば、マイク)は、その画像データの生成時における周囲の音声を取得するものである。このように生成されたデータは、他の情報処理装置(例えば、第1シンク機器200)への送信対象となる。
画像・音声圧縮部160は、制御部140の制御に基づいて、画像・音声信号生成部150により生成されたデータ(画像データおよび音声データ)を圧縮(エンコード)するものである。そして、画像・音声圧縮部160は、その圧縮されたデータ(画像データおよび音声データ)をストリーム送信部170に出力する。なお、画像・音声圧縮部160は、ソフトウェアによるエンコードの実行により実現するようにしてもよく、ハードウエアによるエンコードの実行により実現するようにしてもよい。また、画像・音声圧縮部160は、コーデックとして機能することを想定しているが、非圧縮の画像または音声を扱えるものとする。さらに、画像・音声圧縮部160は、スケーラブル・コーデックとしても機能するものとする。ここで、スケーラブル・コーデックは、例えば、受信側の情報処理装置(シンク機器)の解像度やネットワーク環境等に応じて、自在に適応することができるコーデックを意味する。
ストリーム送信部170は、制御部140の制御に基づいて、画像・音声圧縮部160により圧縮されたデータ(画像データおよび音声データ)をストリームとして無線通信部120を経由してアンテナ110から送信する送信処理を行うものである。
操作受付部180は、ユーザにより行われた操作入力を受け付ける操作受付部であり、例えば、キーボード、マウス、ゲームパッド、タッチパネル、カメラ、マイクである。なお、操作受付部180および表示部190については、使用者がその指を表示面に接触または近接することにより操作入力を行うことが可能なタッチパネルを用いて一体で構成することができる。
表示部190は、例えば、画像・音声信号生成部150により生成された画像を表示する表示部である。なお、表示部190として、各種の表示パネルを用いることができる。例えば、有機EL(Electro Luminescence)、クリスタルLED(Light Emitting Diode)ディスプレイ(Crystal LED Display)、LCD(Liquid Crystal Display)を用いることができる。
なお、ソース機器100は、上述した各部以外にも、音声出力部等を備えることができるが、これらについては、図3での図示を省略する。また、ソース機器100が、送信対象となる画像データおよび音声データを生成する例を示すが、ソース機器100は、送信対象となる画像データおよび音声データを外部装置から取得するようにしてもよい。例えば、ソース機器100は、マイクロフォン付きのWebカメラから、送信対象となる画像データおよび音声データを取得するようにしてもよい。また、ソース機器100は、ソース機器100の内部、外部にかかわらず、記憶装置(例えば、ハードディスク)に保存されているコンテンツ(例えば、画像データおよび音声データからなるコンテンツ)を送信対象とするようにしてもよい。この場合に、その記憶装置に保存されているコンテンツが圧縮済のコンテンツである場合も想定される。この場合に、その圧縮済のコンテンツが、通信システム10で採用されている規格で定義されたエンコード方式で圧縮されている場合には、その圧縮済のコンテンツを復号(デコード)せずにそのまま送信するようにしてもよい。
ソース機器100の音声出力部(図示せず)は、例えば、画像・音声信号生成部150により生成された音声を出力する音声出力部(例えば、スピーカ)である。なお、画像については、ソース機器およびシンク機器の双方から出力することもできるが、音声については何れか一方のみから出力することが好ましい。
[シンク機器(情報処理装置)の構成例]
図4は、本技術の第1の実施の形態における第1シンク機器(情報処理装置)200の機能構成例を示すブロック図である。なお、第2シンク機器300の機能構成(無線通信に関する機能構成)については、第1シンク機器200と略同様であるため、ここでの説明を省略する。
第1シンク機器200は、アンテナ210と、無線通信部220と、ストリーム受信部230と、画像・音声展開部240と、画像・音声出力部250と、ユーザ情報取得部260と、制御部270と、制御信号送信部280と、管理情報保持部290とを備える。
無線通信部220は、制御部270の制御に基づいて、無線通信を利用して、他の情報処理装置(例えば、ソース機器100)との間で各情報(例えば、画像データおよび音声データ)の送受信をアンテナ210を介して行うものである。例えば、画像データの受信処理が行われる場合には、アンテナ210により受信された画像データが、無線通信部220、ストリーム受信部230を経由して画像・音声展開部240により展開(復号)される。そして、その展開された画像データが画像・音声出力部250に供給され、その展開された画像データに応じた画像が画像・音声出力部250から出力される。すなわち、その展開された画像データに応じた画像が表示部251に表示される。
また、無線通信部220は、複数の周波数チャネルを利用して、他の情報処理装置(例えば、ソース機器100)との間で各情報の送受信を行うことが可能であるものとする。本技術の第1の実施の形態では、無線通信部220が、2.4GHz、5GHz、60GHzの3種類の周波数チャネルを同時または選択した周波数のみを送受信可能な機能を備える例を示す。すなわち、無線通信部220は、第1の周波数帯を用いる通信と、第1の周波数帯よりも高速なデータ伝送速度の第2の周波数帯を用いる通信とを行うことが可能である。また、制御部270は、各ソース機器との無線通信に、複数の周波数チャネルのうちのどの周波数チャネルを使用させるかを制御することができる。また、ソース機器100の制御部140は、各シンク機器との無線通信に、複数の周波数チャネルのうちのどの周波数チャネルを使用させるかを制御することができる。
なお、ソース機器100および第1シンク機器200間のリンクと、ソース機器100および第2シンク機器300間のリンクとは同一の周波数チャネルとするようにしてもよく、異なる周波数チャネルとするようにしてもよい。
また、本技術の第1の実施の形態では、無線通信部220が、2.4GHz、5GHz、60GHzの3種類の周波数チャネルを送受信可能な機能を備える例を示すが、これに限定されない。例えば、無線通信部220が、他の周波数チャネルや、2または4以上の周波数チャネルを送受信可能な機能を備えるようにしてもよい。
ストリーム受信部230は、制御部270の制御に基づいて、無線通信部220により受信された各情報のうちから、各ソース機器とのやりとりの情報およびストリーム(例えば、画像ストリーム、音声ストリーム)を受信するものである。そして、ストリーム受信部230は、受信したコマンド情報を制御部270に出力し、受信したストリームを画像・音声展開部240および制御部270に出力する。
ここで、各ソース機器とのやりとりの情報は、ソース機器(例えば、ソース機器100)から送信される情報であり、例えば、第1シンク機器200のシステム性能情報の取得要求を含む。このシステム性能情報は、例えば、使用可能な周波数チャネル、解像度、TCP、UDPや、暗号化方法の対応、SD/HD/4K対応、低消費電力モードの対応のそれぞれを示す情報である。
また、ストリーム受信部230は、無線通信を利用してシンク機器との間でデータの送受信が行われている際における電波伝搬状況(リンク電波伝搬状況)を測定する機能を備える。そして、ストリーム受信部230は、その測定結果(電波伝搬測定情報)を制御部270に出力する。
画像・音声展開部240は、制御部270の制御に基づいて、他の情報処理装置(例えば、ソース機器100)から送信されたストリーム(画像データおよび音声データ)を展開(デコード)するものである。そして、画像・音声展開部240は、その展開されたデータ(画像データおよび音声データ)を画像・音声出力部250に出力する。なお、画像・音声展開部240は、ソフトウェアによるデコードの実行により実現するようにしてもよく、ハードウエアによるデコードの実行により実現するようにしてもよい。また、画像・音声展開部240は、コーデックとして機能することを想定しているが、非圧縮の画像または音声を扱えるものとする。また、画像・音声展開部240は、スケーラブル・コーデックとしても機能するものとする。
画像・音声出力部250は、表示部251および音声出力部252を備える。
表示部251は、画像・音声展開部240により展開された画像データに基づく各画像を表示する表示部である。なお、表示部251として、例えば、有機ELパネル、クリスタルLEDディスプレイ、LCDパネル等の表示パネルを用いることができる。なお、表示部251として、使用者がその指を表示面に接触または近接することにより操作入力を行うことが可能なタッチパネルを用いるようにしてもよい。
音声出力部252は、画像・音声展開部240により展開された音声データに基づく各種音声(表示部251に表示された画像に関する音声等)を出力する音声出力部(例えば、スピーカ)である。ここで、音声の出力方法としては、例えば、中央チャネル(メイン画像)に割り当てられたソース機器の音声のみをスピーカから再生して周辺チャネル(サブ画像)に割り当てられたソース機器の音声を再生しない方法を用いることができる。また、他の音声の出力方法として、例えば、中央チャネルに割り当てられたソース機器の音声の音量をメインにして、周辺チャネルに割り当てられたソース機器の音声の音量を下げて再生する方法を用いることができる。なお、これら以外の音声の出力方法を用いるようにしてもよい。
ユーザ情報取得部260は、ユーザに関する情報(ユーザ情報)を取得するものであり、その取得されたユーザ情報を制御部270に出力する。例えば、ユーザ情報取得部260は、ユーザが表示方法を直接設定することができる操作受付部(キーボード、マウス、リモコン、ゲームパッド、タッチパネル)からの入力を受け付けることによりユーザ情報を取得することができる。なお、操作受付部は、例えば、表示部251に表示される画像における任意の領域を指定するための操作部材である。また、例えば、ユーザ情報取得部260は、カメラ、マイク、各種センサ(例えば、ジャイロセンサ、人体を感知するセンサ)等のようにユーザの意図を把握することができるデバイスからの入力を受け付けることによりユーザ情報を取得することができる。
例えば、ユーザ情報取得部260は、無線通信を利用して他の情報処理装置(例えば、ソース機器100)から受信したストリームに基づく情報が画像・音声出力部250から出力されている際におけるユーザ動作により生じるユーザ情報を取得する。このユーザ情報は、例えば、表示部251に表示されている画像に関するユーザ動作により生じるユーザ情報である。例えば、ユーザ情報は、表示部251に表示されている画像に関するユーザ操作に基づいて生成される情報である。
例えば、ユーザ情報取得部260は、表示部に付属する撮像部(省略)により生成された画像データを取得してユーザ情報を生成することができる。また、例えば、ユーザ情報取得部260は、外部装置(例えば、各センサ、ウェアラブルデバイス)により取得される情報(例えば、位置情報、識別情報)を取得してユーザ情報を生成するようにしてもよい。
制御部270は、ストリーム受信部230により取得された各情報を管理情報保持部290に保持させ、管理情報保持部290に保持されている管理情報に基づいて各ソース機器を管理するものである。また、制御部270は、複数のソース機器から送信されるストリームをシステム全体で安定度が向上するようにストリームの伝送制御を行う。
例えば、制御部270は、ユーザ情報取得部260により取得されたユーザ情報と、管理情報保持部290に保持されている管理情報とに基づいてストリームの伝送制御を行う。具体的には、制御部270は、管理情報保持部290に保持されている管理情報に基づいて、ストリームの伝送制御を行うための制御信号をソース機器毎に生成する。そして、制御部270は、その生成された制御信号を制御信号送信部280に出力する。例えば、制御部270は、ユーザ情報および管理情報に基づいて、表示部251に表示される画像の解像度を変更し、この解像度と同等の送信レートを各ソース機器に要求するための制御信号を生成する。また、例えば、制御部270は、ユーザ情報および管理情報に基づいて、表示部251における画像の表示領域を決定するための制御信号を生成する。また、例えば、制御部270は、ユーザ情報および管理情報に基づいて、表示部251における画像のサイズを決定するための制御信号を生成する。
また、制御部270は、ユーザ情報および管理情報に基づいて、使用する周波数チャネルと解像度を設定するための制御を行う。例えば、制御部270は、無線通信部220が備える複数の周波数チャネルについて、使用する周波数チャネルをソース機器毎に設定する。また、制御部270は、周波数チャネル毎に、消費電力モードが異なる場合には、それぞれのモードを把握し、モバイル機器の消費電力をケアした周波数チャネルを設定することができるようにする。すなわち、制御部270は、第1の周波数帯に関する第1の消費電力モードと、第1の周波数帯よりも高速なデータ伝送速度の第2の周波数帯に関する第2の消費電力モードを別々に設定することができる。
制御信号送信部280は、制御部270から出力された制御信号を無線通信部220、アンテナ210を介して、他の無線通信装置に送信する送信処理を行うものである。
[機器の役割管理部の構成例]
図5は、本技術の第1の実施の形態における機器の役割管理部320の構成例を模式的に示す図である。
機器の役割管理部320は、複数の機器がP2Pダイレクト接続を行う場合における各機器の役割を管理するものである。具体的には、機器の役割管理部320には、機器識別情報321および機器の役割322が関連付けて記憶される。また、これらの情報は、各機器間でやりとりされる情報に基づいて、機器の役割管理部320に記憶される。
機器識別情報321は、各機器を識別するための識別情報(例えば、MAC(Media Access Control)アドレス)である。なお、図5では、説明の容易のため、ソース機器100、第1シンク機器200および第2シンク機器300のそれぞれを表す名称を括弧内に示す。
機器の役割322は、複数の機器がP2Pダイレクト接続を行う場合における各機器の役割である。例えば、P2P GO、P2Pクライアント、P2Pデバイスの何れかが格納される。
ここで、機器の役割管理部320は、ソース機器100、第1シンク機器200および第2シンク機器300のうちの少なくとも1つの機器に備えるようにする。例えば、機器の役割管理部320をソース機器100に備える場合には、制御部140を機器の役割管理部320として機能させることができる。また、例えば、機器の役割管理部320を第1シンク機器200に備える場合には、制御部270を機器の役割管理部320として機能させることができる。
また、無線通信を利用して各機器が接続可能な他の機器に備えるようにしてもよい。また、機器の役割管理部320を複数の機器に備える場合には、複数の機器間において、機器の役割管理部320の内容が同一となるように、定期的または不定期に、機器の役割管理部320の内容を確認するためのやりとりを行うことが好ましい。
また、機器の役割管理部320を備える機器は、他の機器からの要求に応じて、機器の役割管理部320の内容を提供することができる。また、機器の役割管理部320を備える機器は、定期的または不定期に、機器の役割管理部320の内容を他の機器に提供するようにしてもよい。
[Wi-Fi CERTIFIED Miracast仕様コマンドを用いたやりとりの通信例]
図6は、本技術の第1の実施の形態におけるソース機器100および第1シンク機器200間における通信処理例を示すシーケンスチャートである。図6では、RTSPプロトコルを用いたやりとりの通信例を示す。
例えば、図6の点線の矩形400内に示すように、ソース機器100から第1シンク機器200に送信される「RTSP M3 Request」(M3-RTSP GET_PARAMETER Request)メッセージと、これに応答して第1シンク機器200からソース機器100に送信される「RTSP M3 Response」(M3-RTSP GET_PARAMETER Response)メッセージとを用いることができる。
一方、ソース機器100から第1シンク機器200に適宜送信するようにしてもよい。例えば、「RTSP M3 Request」(M3-RTSP GET_PARAMETER Request)メッセージと、「RTSP M3 Response」(M3-RTSP GET_PARAMETER Response)メッセージとのやりとりを省略し、ソース機器100から第1シンク機器200に送信されるメッセージに管理情報を含めて、ソース機器100から第1シンク機器200に管理情報を送信し、第1シンク機器200が情報を選択して管理情報保持部290(図4に示す)に保持するようにしてもよい。また、コンテンツプロテクション設定を行う場合、M3 Response後にリンクプロテクションセットアップを行い、その後、M4以上のメッセージに関する秘話性を確保したまま、通信を行ってもよい。
ここで、ソース機器100が、RTSP M3 Responseとして第1シンク機器200から受信する情報は、次の(1)乃至(11)の各情報とすることができる。
(1)Audio format(s) supported by the WFD Sink.
(2)video format(s) supported by the WFD Sink.
(3)3D formats supported by the WFD Sink.
(4)The HDCP system 2.0/2.1/2.2 support/control port.
(5)Available EDID information of display attached to the WFD Sink.
(6)Coupled WFD Sink information.
(7)RTP port(s) the WFD Sink(s) listen on.
(8)Supports I2C commands and port number.
(9)UIBC capability supported.
(10)WFD Source uses this parameter to obtain the connector type currently active on the WFD Sink.
(11)Indicate the support for standby and resume control using RTSP.
なお、図6では、図1に示すソース機器100および第1シンク機器200の接続シーケンスについて説明をしたが、ソース機器100および第2シンク機器300の接続シーケンスにおいても同様の接続シーケンスが行われる。
[マルチシンク・トポロジ環境を構築する場合の通信例]
図7は、本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。
図7では、Wi-Fi CERTIFIED Miracastに代表されるP2Pダイレクト接続を用いた環境において、P2Pダイレクト接続からマルチシンク・トポロジ環境を構築するまでの基本的な流れを示す。
また、図7では、ソース機器100が第1シンク機器200とP2Pダイレクト通信で接続している環境において、第2シンク機器300がグループ参入する場合の例を示す。
なお、図7に示す例では、ソース機器100の処理の流れがP2Pダイレクト接続とは異なる。このため、以下では、その異なる点を中心にして説明する。
ソース機器100は、P2P GOとしてP2Pクライアント(第1シンク機器200)と接続済であるものとする(401)。また、ソース機器100は、第1シンク機器200が利用可能な伝送フォーマットとして第1フォーマットを用いてメディア伝送を行うものとする(401)。
この場合に、第2シンク機器300がグループに参入する場合には、ソース機器100は、第2シンク機器300にInvitation Request処理を行う(402)。なお、第2シンク機器300からソース機器100にProvision Discovery処理を行うようにしてもよい。ただし、ここでは、ソース機器100がInvitation Request処理を行う例について説明する。
ソース機器100から第2シンク機器300にInvitation Request処理が行われると(402)、第2シンク機器300からソース機器100にInvitation Response処理を返信する(403)。この場合に、ソース機器100は、接続中の第1シンク機器200だけでなく、新たな第2シンク機器300と接続するため、同時接続台数が2以上の台数であることを第2シンク機器300に対し、デバイス情報またはサービス情報として通知することができる。
この通知方法としては、次の(a)乃至(d)のうちの少なくとも1つのやりとりにより行うことができるものとする。
(a)P2P IE(Information Element)
(b)WFD IE(Information Element)
(c)ASP(Application Service Platform)(例えば、ASPのフォーマットコマンドで新規フォーマット)
(d)UPnP(Universal Plug and Play)標準でのプロトコル
また、Invitation Response処理(403)により、ソース機器100は、第2シンク機器300を新たなP2Pクライアントとして接続し、アソシエーション処理(404)を行う。このアソシエーション処理は、Group Formation処理(例えば、4-way Handshake、IPアサイン等の処理)である。
また、ソース機器100および第2シンク機器300は、お互いにサービスディスカバリーを行う(405)。この処理によって把握した情報を参考に、ソース機器100をソース機器とし、第1シンク機器200および第2シンク機器300をシンク機器とするマルチシンク・トポロジを構築する(406乃至408)。
例えば、ソース機器100は、P2Pダイレクト回線毎に安定したデータ伝送を行うため、2つのデータパス(第1シンク機器200および第2シンク機器300のそれぞれの送信分)を生成することを決定することができる。そして、ソース機器100は、2つのデータパスを利用してメディアデータ(画像データや音声データ)を送信する(409)。
このように、マルチシンク・トポロジが構築される。この構築後には、ソース機器100から第1シンク機器200または第2シンク機器300に送信されて表示されるコンテンツは、同じコンテンツ(画像)でもよく、異なるコンテンツ(画像)でもよい。例えば、第1シンク機器200には、ソース機器100に表示された画像をそのまま送信し、第2シンク機器300には、ソース機器100の記憶部に保存されているコンテンツを送信するようにしてもよい。また、ソース機器100から第1シンク機器200または第2シンク機器300には、画像データのみ、または、音声データのみ、または、制御データのみを送信するようにしてもよい。
このように、マルチシンク・トポロジにおいて、デバイス情報またはサービス情報を用いて、Discovery情報またはCapability情報のやりとりを行う。また、上述したデバイス情報またはサービス情報を用いてやりとりするCapability情報として、次の(A)乃至(C)の各情報をやりとりすることができる(例えば、図7に示す405)。これらの各情報は、例えば、ソース機器がシンク機器へ送信する情報、または、ソース機器がシンク機器から受け取る情報として、やりとりされる。
(A)シンク機器がメディア伝送に使用するデータ伝送フォーマットの種類(例えば、シンク機器のDecode能力)
(B)新規参入するシンク機器が使用可能なデータ伝送フォーマットへの切替を許可するか否か(例えば、解像度、画質または音質、画像停止・再生または音声停止・再生等の設定変更を行っても正常動作する機能の有無。また、この情報を受け付けるタイミングがCapability Negotiation時、メディア伝送(例えば、画像伝送または音声伝送)の途中で可能か否か)
(C)ソース機器が使用可能なHDCP(High-bandwidth Digital Content Protection system)の暗号鍵の数(例えば、ソース機器がHDCPを使用する必要があるときに、ソース機器が複数の暗号鍵を管理する機能の有無)
ソース機器100は、このように取得された各情報により特定される条件(例えば、能力、機能の有無)に基づいて、画像データまたは音声データを生成するための、共有するグループを把握し、最小限のデータパスを生成する。
[マルチシンク・トポロジ環境を構築する場合の遷移例]
図8乃至図15は、本技術の第1の実施の形態における通信システム10を構成する各機器がマルチシンク・トポロジ環境を構築する場合の遷移例を示す図である。
図8乃至図15には、ソース機器100が第1シンク機器200とP2Pダイレクト通信で接続している環境において、第2シンク機器300がグループ参入する場合の例を示す。
また、図8乃至図11では、第1シンク機器200がP2P GOであり、ソース機器100がP2Pクライアントである場合において、第1シンク機器200でP2P GOからP2Pクライアントへの変更が許可されている場合の例を示す。
また、図8および図9では、ソース機器100および第1シンク機器200の少なくとも一方がコンカレント未対応である場合の例を示す。なお、図8および図9については、図28乃至図30を参照して詳細に説明する。
[コンカレント機能について]
ここで、コンカレント機能について説明する。コンカレント機能は、例えば、ソース機器が、1つ以上のシンク機器にコンカレントセッションを構築可能な機能を意味する。また、コンカレント機能は、例えば、シンク機器が、1つ以上のソース機器にコンカレントセッションを構築可能な機能を意味する。
また、コンカレント機能は、例えば、全てのP2Pデバイスが、Wi-Fi Infraモードで同一のIPサブネットに接続されているときに、2つ以上のソース機器とWi-Fi InfraモードでIPネットワーク上にコンカレントセッションを構築できる機能を意味する。また、コンカレント機能は、例えば、全てのP2Pデバイスが、Wi-Fi Infraモードで同一のIPサブネットに接続されているときに、2つ以上のシンク機器とWi-Fi InfraモードでIPネットワーク上にコンカレントセッションを構築できる機能を意味する。
また、コンカレント機能は、例えば、シンク機器が、同一のチャネルで2つ以上のソース機器とP2Pコネクション上でコンカレントセッションを構築できる機能を意味する。また、コンカレント機能は、例えば、ソース機器が、同一のチャネルで2つ以上のシンク機器とP2Pコネクション上でコンカレントセッションを構築できる機能を意味する。
また、コンカレント機能は、例えば、シンク機器が、サポートされたシンク機器最大接続数とコンカレントセッション接続可能残数等の情報を通知する機能を意味する。また、コンカレント機能は、例えば、ソース機器が、サポートされたソース機器最大接続数とコンカレントセッション接続可能残数等の情報を通知する機能を意味する。
また、コンカレント機能は、例えば、同一の周波数チャネル、または、異なる2つ以上の周波数チャネルに、2つ以上の同時利用可能なコンカレントセッションのシンク機器数を通知することができる定義をする。また、コンカレント機能は、例えば、同一の周波数チャネル、または、異なる2つ以上の周波数チャネルに、2つ以上の同時利用可能なコンカレントセッションのソース機器数を通知することができる定義をする。
また、図10および図11では、ソース機器100および第1シンク機器200の双方がコンカレント対応である場合の例を示す。なお、図10および図11については、図31を参照して詳細に説明する。
また、図12乃至図15では、第1シンク機器200がP2P GOであり、ソース機器100がP2Pクライアントである場合において、第1シンク機器200でP2P GOからP2Pクライアントへの変更が許可されていない場合の例を示す。
また、図12および図13では、ソース機器100が複数動作に未対応の場合の例を示す。ここで、複数動作に対応する機器は、例えば、複数の他の機器に対して異なる処理を同時に行うことができる機器を意味する。例えば、コンカレント機能を備える機器は、複数動作に対応する機器である。ただし、コンカレント機能を備える機器であっても、P2Pダイレクト通信における複数動作に未対応の機器は、複数動作に未対応の機器であるものとする。なお、図12および図13については、図32乃至図35を参照して詳細に説明する。
また、図14および図15では、ソース機器100が複数動作に対応する場合の例を示す。なお、図14および図15については、図36乃至図281を参照して詳細に説明する。
ここで、第2シンク機器300がソース機器100に接続することができないことも想定される。このような場合には、ソース機器100または第2シンク機器300は、相手機器との接続ができない旨をポップアップ画面等の通知手段を用いてユーザに通知することが好ましい。そこで、この通知例を図16に示す。また、第2シンク機器300がソース機器100に接続することができた場合にも、その旨をポップアップ画面等の通知手段を用いてユーザに通知するようにしてもよい。
[相手機器との接続ができない旨をユーザに通知する例]
図16は、本技術の第1の実施の形態におけるソース機器100および第2シンク機器300に表示される通知画面の一例を示す図である。
図16のaは、ソース機器100の表示部190に表示される通知画面381を示す。また、図16のbは、第2シンク機器300の表示部301に表示される通知画面383を示す。これらの通知画面381、383は、例えば、ポップアップ画面として表示することができる。また、これらの通知画面381、383を確認した場合には、ユーザは、確認ボタン382、384を押下することにより、通知画面381、383を消去することができる。なお、確認ボタン382、384が押下された後に、再接続をするための操作画面を表示するようにしてもよく、接続が失敗した原因を表示する画面を表示するようにしてもよい。
このように、ソース機器100の制御部140は、第2シンク機器300との間でメディア伝送を行うことができないと判断された場合には、その旨を通知するための通知情報(例えば、通知画面381、383)をユーザに提供することができる。なお、その通知情報を伝送する方法として、例えば、次の(N1)乃至(N3)の何れか1つで伝送するようにしてもよく、適宜、最適な方式を選択するようにしてもよい。
(N1)ソース画像(例えば、Wi-Fi CERTIFIED Miracast仕様に従ってソース機器からシンク機器に送信される画像)に通知情報(例えば、通知画面381、383)を重畳させたものをエンコードして伝送する伝送方法
(N2)ソース画像と通知情報とを別々にエンコードして伝送する伝送方法(例えば、ソース画像を動画とし、通知情報を静止画として伝送するようにしてもよい)
(N3)ソース画像と通知情報とを制御データとして伝送する伝送方法(例えば、HTTP(HyperText Transfer Protocol)、XML(Extensible Markup Language)、WebSocketを利用して伝送することができる)
[P2P GOの変更をユーザに通知する例]
図17は、本技術の第1の実施の形態におけるソース機器100および第1シンク機器200に表示される通知画面の一例を示す図である。図17では、P2P GOが第1シンク機器200からソース機器100に変更された場合における通知例を示す。
図17のaは、ソース機器100の表示部190に表示される通知画面385を示す。また、図17のbは、第1シンク機器200の表示部251に表示される通知画面387を示す。これらの通知画面385、387は、例えば、ポップアップ画面として表示することができる。また、これらの通知画面385、387を確認した場合には、ユーザは、確認ボタン386、388を押下することにより、通知画面385、387を消去することができる。
このように、ソース機器100の制御部140は、第2シンク機器300との間で新たにメディア伝送を行う場合に、P2P GOが第1シンク機器200からソース機器100に変更された旨の通知情報をユーザに提供することができる。これにより、P2P GOの変更をユーザに通知することができる。
[メディア伝送を行うシンク機器をユーザ操作により選択する例]
図18は、本技術の第1の実施の形態におけるソース機器100および第1シンク機器200に表示される選択画面の一例を示す図である。図18では、ソース機器100が複数動作に未対応である場合(例えば、図12および図13に示す場合)における選択画面の提供例を示す。
図18のaは、ソース機器100の表示部190に表示される選択画面390を示す。また、図18のbは、第1シンク機器200の表示部251に表示される選択画面393を示す。これらの選択画面390、393は、例えば、ポップアップ画面として表示することができる。
このように、ソース機器100の制御部140は、メディア伝送の相手機器を選択する必要がある場合に、その旨を通知するための通知情報(例えば、選択画面390、393)をユーザに提供することができる。そして、ユーザは、その通知情報に基づいて、所望のシンク機器を選択することができる。これにより、ユーザの意向に応じて、接続を開始することができる。
例えば、図12および図13に示す例では、ソース機器100が、第1シンク機器200との接続を切断し、第2シンク機器300との間でメディア伝送を行う例を示した。ただし、メディア伝送を行うシンク機器については、ユーザ操作により選択するようにしてもよい。ここで、ユーザの意図に反して、何れか一方のみに接続した旨のメッセージが出力されると、ユーザに不快感を与える可能性がある。そのため、他方に接続することができない理由を表示するようにしてもよい。このように、ユーザが原因を把握することにより、トポロジを理解していないユーザでもスムーズな対応を迅速に行うことができる。
選択画面390は、どちらのシンク機器へ送信したいかをソース機器100を操作するユーザに選択させるための画面である。例えば、操作ボタン391または392の何れかを押下することにより、メディア伝送を行うシンク機器を選択することができる。
また、ソース機器100の制御部140は、表示部190に表示させた選択画面390を第1シンク機器200に送信し、第1シンク機器200の表示部251に選択画面393を表示させることができる。この場合には、第1シンク機器200を操作するユーザが選択画面393を操作することにより、第1シンク機器200からUIBCを用いてソース機器100の選択を促し、操作することができる。
また、ソース機器100は、シンク機器への伝送を切り替える際に、解像度、画質、画像OnOff、音質、音声OnOff等の切替(または、フォールバック)が発生することをポップアップにより表示するようにしてもよい。また、ソース機器100は、切断されるシンク機器の表示部にその旨のポップアップを表示するようにしてもよい。
ここで、上述した各処理において、第2シンク機器300がソース機器100に接続する場合には、ソース機器100は、第2シンク機器300からの接続要求をポップアップ画面等により表示してユーザにその旨を通知することが好ましい。
ただし、ソース機器100に表示される表示画面は、そのまま既に接続している第1シンク機器200に画像として送信されてしまう可能性がある。そこで、ソース機器100の制御部140は、ユーザ設定または所定規則に基づいて、表示部190の制御を切り替えるようにする。
また、例えば、ユーザは、ソース機器100または第1シンク機器200を用いて、新たな接続機器をサーチして接続することができる。この場合の表示例を図19に示す。
[新たなシンク機器をユーザに通知する例]
図19は、本技術の第1の実施の形態におけるソース機器100および第1シンク機器200に表示される通知画面の一例を示す図である。
図19のaは、ソース機器100の表示部190に表示される通知画面371を示す。また、図19のbは、第1シンク機器200の表示部251に表示される通知画面374を示す。これらの通知画面371、374は、例えば、ポップアップ画面として表示することができる。
例えば、ユーザは、ソース機器100に接続されている第1シンク機器200以外のシンク機器をサーチして接続することを希望する場合には、図19のaに示す通知画面371を表示させるための操作を行う。この操作が行われた場合には、ソース機器100の制御部140は、通知画面371を表示部190に表示させる。また、ソース機器100の制御部140は、通知画面371における操作ボタン372、373を用いてユーザ操作を受け付けることができる。そして、ソース機器100の制御部140は、操作ボタン372、373を用いたユーザ操作に基づいて、他の機器をサーチするための制御を行うことができる。例えば、ユーザにより通知画面371における操作ボタン372が押下されると、ソース機器100の制御部140は、ソース機器100の周囲に存在する機器をスキャンして、ソース機器100に接続が可能な機器をサーチする。そして、ソース機器100の制御部140は、そのサーチ結果を表す表示画面(例えば、接続可能な機器の一覧)を表示部190に表示させる。この表示例については、図39に示す。また、ソース機器100の制御部140は、そのサーチ結果を表す表示画面において、ユーザ操作により選択された機器に接続するための接続処理を行う。
また、例えば、ソース機器100の制御部140は、接続中の第1シンク機器200の表示部251にも通知画面374を表示させることができる。これにより、ソース機器100および第1シンク機器200の双方のユーザは、新たな接続機器をサーチして確認することができる。
また、ソース機器100の制御部140は、通知画面374における操作ボタン375、376を用いてユーザ操作を受け付けることができる。そして、ソース機器100の制御部140は、操作ボタン375、376を用いたユーザ操作に基づいて、他の機器をサーチするための制御を行うことができる。
また、ソース機器100の制御部140は、ポップアップ(例えば、図16乃至図19に示す通知画面や選択画面)を、第1シンク機器200に送信する画像または音声とは別に管理を行うことができる。この場合には、ソース機器100の制御部140は、ユーザ設定または所定規則に基づいて、ポップアップを表示させるための情報を、第1シンク機器200に送信するようにしてもよく、送信しないようにしてもよい。
例えば、ソース機器100の制御部140は、能力確認処理において、メディア伝送の対象となる画像情報(例えば、図16乃至図19に示す牛の画像)と、通知情報(例えば、図16乃至図19に示す通知画面や選択画面)とを異なる管理とすることができる。これにより、接続途中で第1シンク機器200とは関係ないポップアップを表示させないことができ、リアルタイム性が必要な医療機器や車載機器でも、通常のサービスを提供することができる。
例えば、ゲーム機器や車載モニタ等のように、瞬時の反応が必要な情報を表示してその操作が必要となるソース機器の場合には、ポップアップを表示しないようにしてもよい。そこで、ソース機器100の制御部140は、ユーザ設定または所定規則に基づいて、ポップアップ(例えば、図16乃至図19に示す通知画面や選択画面)を表示しないようにすることもできる。
また、ソース機器100から第2シンク機器300に接続要求を行う場合には、接続要求に必要なユーザインターフェースを、現在送信中の第1シンク機器200には送信しないように設定することもできる。
[ソース機器の動作例]
図20および図21は、本技術の第1の実施の形態におけるソース機器100によるマルチシンク接続処理の処理手順の一例を示すフローチャートである。
図20および図21では、第1シンク機器200がP2P GOの役割を担うP2Pトポロジにおいて、第2シンク機器300が新規参入してマルチシンク・トポロジを構築する場合のソース機器100の動作例に示す。
また、P2Pクライアントの役割を担うソース機器100は、P2P GOの役割を担う第1シンク機器200と接続中であるものとする。また、ソース機器100は、P2Pデバイスの役割を担う第2シンク機器300とは未接続であるものとする。
最初に、ソース機器100は、第1シンク機器200との接続中に、第2シンク機器300からのProbe Requestを受信する(ステップS801)。この受信により、ソース機器100は、第2シンク機器300との接続動作を開始する。
ソース機器100の制御部140は、接続中の第1シンク機器200がP2P GOからP2Pクライアントへ役割の変更が可能か否か(第1シンク機器200が役割の変更を許可しているか否か)を判断する(ステップS802)。ここで、ソース機器100の制御部140は、例えば、第1シンク機器200から送信される情報(例えば、図28に示すGO組替Request)に基づいて、役割の変更が可能か否かを判断することができる。
役割の変更が可能な場合には(ステップS802)、ソース機器100の制御部140は、ソース機器100の無線通信部120(例えば、無線モジュール)がコンカレントモードを利用可能か否かを判断する(ステップS803)。ここで、コンカレントモードは、コンカレント対応機器(コンカレント機能を備える機器)によりコンカレント動作を行うモードを意味する。
コンカレントモードを利用不可能である場合には(ステップS803)、ソース機器100の制御部140は、新規参入する第2シンク機器300がソース機器100に関するクレデンシャル(接続設定情報)を保持しているか否かを判断する(ステップS804)。ここで、ソース機器100に関するクレデンシャルは、例えば、ソース機器100と接続する際に用いられる接続設定情報であり、例えば、IDやパスワード等の認証に用いられる情報である。
第2シンク機器300がソース機器100に関するクレデンシャルを保持している場合には(ステップS804)、ソース機器100の制御部140は、P2P GOの第1移動処理を行う(ステップS805)。このP2P GOの第1移動処理については、図28および図30を参照して詳細に説明する。
第2シンク機器300がソース機器100に関するクレデンシャルを保持していない場合には(ステップS804)、ソース機器100の制御部140は、P2P GOの第2移動処理を行う(ステップS806)。このP2P GOの第2移動処理については、図28および図29を参照して詳細に説明する。
コンカレントモードを利用可能である場合には(ステップS803)、ソース機器100の制御部140は、新規参入する第2シンク機器300がソース機器100に関するクレデンシャル(接続設定情報)を保持しているか否かを判断する(ステップS807)。
第2シンク機器300がソース機器100に関するクレデンシャルを保持している場合には(ステップS807)、ソース機器100の制御部140は、P2P GOの第1移動処理を行う(ステップS808)。なお、このP2P GOの第1移動処理については、図30および図31を参照して詳細に説明する。
第2シンク機器300がソース機器100に関するクレデンシャルを保持していない場合には(ステップS807)、ソース機器100の制御部140は、P2P GOの第2移動処理を行う(ステップS809)。このP2P GOの第2移動処理については、図29および図31を参照して詳細に説明する。
役割の変更が不可能な場合には(ステップS802)、ソース機器100の制御部140は、ソース機器100の無線通信部120が複数動作に対応するか否かを判断する(ステップS810)。
複数動作に未対応である場合には(ステップS810)、ソース機器100の制御部140は、新規参入する第2シンク機器300がソース機器100に関するクレデンシャル(接続設定情報)を保持しているか否かを判断する(ステップS811)。
第2シンク機器300がソース機器100に関するクレデンシャルを保持している場合には(ステップS811)、ソース機器100の制御部140は、ソース機器が複数動作未対応である場合の第1接続処理を行う(ステップS812)。この第1接続処理については、図32および図34を参照して詳細に説明する。
第2シンク機器300がソース機器100に関するクレデンシャルを保持していない場合には(ステップS811)、ソース機器100の制御部140は、ソース機器が複数動作未対応である場合の第2接続処理を行う(ステップS813)。この第2接続処理については、図32、図33および図35を参照して詳細に説明する。
複数動作に対応する場合には(ステップS810)、ソース機器100の制御部140は、新規参入する第2シンク機器300がソース機器100に関するクレデンシャル(接続設定情報)を保持しているか否かを判断する(ステップS814)。
第2シンク機器300がソース機器100に関するクレデンシャルを保持している場合には(ステップS814)、ソース機器100の制御部140は、ソース機器が複数動作対応である場合の第1接続処理を行う(ステップS815)。なお、この第1接続処理については、図36および図38を参照して詳細に説明する。
第2シンク機器300がソース機器100に関するクレデンシャルを保持していない場合には(ステップS814)、ソース機器100の制御部140は、ソース機器が複数動作対応である場合の第2接続処理を行う(ステップS816)。この第2接続処理については、図36および図37を参照して詳細に説明する。
[情報の確認例]
ここで、上述した各情報の確認方法として、Probe RequestやProbe Responseのペイロード部分にWFD IEをカプセル化させた例、制御可能なDevice DiscoveryまたはService Discoveryの制御方法の例について説明する。
図22乃至図26は、本技術の第1の実施の形態における通信システム10を構成する各機器間によりやりとりされるWFD IEフォーマットの一例を示す図である。
図27は、本技術の第1の実施の形態における通信システム10を構成する各機器間によりやりとりされるASP(Application Service Platform)用の新規メッセージの一例を示す図である。
図22乃至図26に示すWFD IEは、通信システム10を構成する各機器間でP2P接続によりやりとりすることができる。また、図22乃至図26に示すWFD IEは、通信システム10を構成する各機器間で、アクセスポイントを経由してやりとりすることができる。ここでは、アクセスポイントを経由する例について説明する。例えば、ソース機器100は、アクセスポイントを経由して、第2シンク機器300へProbe Requestを送信し、P2P接続可能な装置をサーチする。
例えば、第2シンク機器300がP2P接続可能な装置である場合には、アクセスポイントを経由して、Probe Responseを受信することにより、P2P接続で使用する周波数チャネルを検出することが可能となる。ここでは、第2シンク機器300がP2P接続可能な機器であることを想定し、Probe Responseを受信できたことを前提にして説明する。
上述した処理によって、ソース機器100は、第2シンク機器300とP2P接続するための周波数チャネルを把握し、P2P接続のコネクションを確立する。
P2P接続のコネクションを確立後、ソース機器100は、第2シンク機器300とTCPコネクションまたはRTSPコネクションのリンクを確立した後に、次の(a)乃至(d)のうちの少なくとも1つのやりとりを行う。
(a)P2P IE(Information Element)
(b)WFD IE(Information Element)
(c)ASP(Application Service Platform)(例えば、ASPのフォーマットコマンドで新規フォーマット)
(d)UPnP(Universal Plug and Play)標準でのプロトコル
例えば、Probe RequestやProbe Responseのペイロード部分にWFD IEをカプセル化させ、やりとりする方法について説明する。
上述した(b)のWFD IEを用いたフォーマット例を、図22乃至図26に示す。図22乃至図24は、既にMiracast Release1で割り当てられているフォーマットである。ただし、図24に示すSubelement ID(11)に、新規のビットを割り当てる。具体的には、このSubelement ID(11)に対応する新規Fieldについては、図25、図26に示す。
図26において、New Device Informationフィールドの[5:0]は、第2シンク機器300がP2P接続において、最適な周波数チャネルを判断するための情報である。
上述した(a)乃至(c)の何れか1つを用いたシーケンスの過程で、ソース機器100は、各情報を把握することにより、第2シンク機器300とのP2P接続において、最適な周波数チャネルを判断することができる。例えば、TDLS方式を用いて、第2シンク機器300とアクセスする場合、アクセスポイントおよび第2シンク機器300間のアソシエイトされた周波数情報(図26に示す[23:14]のフィールド)を用いることができる。また、例えば、第2シンク機器300の無線回線のコンカレント情報(図26に示す[5:2]のフィールド)を用いることができる。このコンカレント情報は、例えば、同じ周波数チャネルの時分割接続、違う周波数チャネルの時分割接続、同じ周波数チャネルの同時接続、違う周波数チャネルの同時接続等の接続形態が可能か否かの情報である(図26に示す[5:2]のフィールド)。また、例えば、無線機能としての端末能力(図26に示す[13:8]のフィールド)を用いることができる。
また、アクセスポイントおよび第2シンク機器300間がEthernet(登録商標)ケーブルやUSB(Universal Serial Bus)ケーブル・コネクタのように有線接続またはコネクタ接続されている場合もある。この場合、第2シンク機器300が、アクセスポイントとの接続が有線であること(図26に示す[1:0])と、P2P接続用無線を備えるか否かとをソース機器100に通知する。これにより、ソース機器100は、最適な周波数チャネルを判断することができる。例えば、第2シンク機器300が、有線回線にのみ対応する場合には、P2P接続へ移行せずにそのままアクセスポイントと接続する。一方、第2シンク機器300が、無線回線にも対応する場合には、サポートする周波数チャネルの1つを選択して接続することが可能である。
以上が、Probe RequestやProbe Responseのペイロード部分にWFD IEをカプセル化させた例であるが、本技術はこれに限定されない。
例えば、Wi-Fi Direct ServicesのDisplay Servieを使う場合には、ASP準拠のメッセージを介してデバイス間でService Capability情報を交換することができる。具体的には、WFD IEに含まれる情報を、4bit毎に区切って16進数にしたものをtext stringとしたものを送受信する。さらに、WFD IEに含まれる情報は現時点の仕様に限らない。例えば、図27に示すService Capability情報をペイロードに含むようにしてもよい。
[ソース機器およびシンク機器の少なくとも一方がコンカレント未対応である場合の通信例]
図28は、本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。ここでは、図8および図9を参照して説明する。
図28では、ソース機器100が、第1シンク機器200とP2Pダイレクト通信で接続している環境において、第2シンク機器300がグループ参入する場合の動作例を示す。すなわち、最初に、ソース機器100がP2Pクライアント411であり、第1シンク機器200がP2P GO412であり、第2シンク機器300がP2Pデバイス413である場合の動作例を示す。
第1シンク機器200は、P2P GO412としてソース機器100(P2Pクライアント411)と接続済であり、ソース機器100から第1シンク機器200に第1フォーマットを用いてメディア伝送が行われているものとする(414)。例えば、図8のaに示すように、第1シンク機器200から第1シンク機器200に第1フォーマットを用いてメディア伝送が行われる(331)。
このように、第1シンク機器200は、P2P GO412としてソース機器100(P2Pクライアント411)と接続済のため、第2シンク機器300は、第1シンク機器200にInvitation Request処理を行う(415、416)。または、第1シンク機器200から第2シンク機器300にProvision Discovery処理を行うようにしてもよい。この例では、Invitation Request処理を行う例について説明する。
第2シンク機器300から第1シンク機器200にProbe Request処理が行われると(415)、第1シンク機器200は、第2シンク機器300にProbe Response処理を返信する(416)。
また、第2シンク機器300は、ソース機器100にProbe Request処理を行う(417、418)。
ここで、ソース機器100は、接続中の第1シンク機器200だけでなく、新たな第2シンク機器300と接続するため、同時接続台数が2以上の台数であることを第2シンク機器300に対し、デバイス情報またはサービス情報として通知する。
この通知方法としては、Probe Request、Probe Responseのパケットの一部として、IE(Information Element)を格納する通知方法を用いることができる。または、Device Discovery Request、Device Discovery Responseの一部として、IE(Information Element)を格納する通知方法を用いることができる。また、これらの通知方法としては、次の(a)乃至(d)のうちの少なくとも1つのやりとりにより行うことができるものとする。
(a)P2P IE(Information Element)
(b)WFD IE(Information Element)
(c)ASP(Application Service Platform)(例えば、ASPのフォーマットコマンドで新規フォーマット)
(d)UPnP(Universal Plug and Play)標準でのプロトコル
この手順において、第2シンク機器300(P2Pデバイス413)がソース機器100(P2Pクライアント411)に対し、Probe Requestを送信する(417)。この場合に、第2シンク機器300およびソース機器100が利用している周波数チャネルが同じチャネルである場合には、第2シンク機器300は、ソース機器100から上述したIEを受信することができる可能性がある。
ここで、第2シンク機器300は、第1シンク機器200(P2P GO412)に対し、Probe Requestを行っている(415)。また、第1シンク機器200およびソース機器100が既にMiracast通信を行っている環境である場合には、同一周波数チャネルで動作している可能性は高い。このため、第2シンク機器300およびソース機器100が同一チャネルを利用する可能性があると考えられる。
また、第2シンク機器300は、第1シンク機器200に対し、Device Discoverability Requestを行う(419)。また、第1シンク機器200は、ソース機器100に対し、GO Discoverability Requestを行う(420)。これに対して、ソース機器100は、第1シンク機器200に対し、GO Discoverability Responseを行う(421)。また、第1シンク機器200は、第2シンク機器300に対し、Device Discoverability Responseを行う(422)。なお、上述したProbe Request処理(415乃至418)において、各機器間でのやりとり(419乃至422)で得る情報(第1シンク機器200がP2P GOとして、ソース機器100とMiracast通信を行っている環境を把握するための情報)の少なくとも1つ以上を把握できる可能性がある。そこで、上述したProbe Request処理(415乃至418)において把握できた情報については、各機器間での情報取得のためのやりとり(419乃至422)を省略するようにしてもよい。
このように、第2シンク機器300は、Device Discoverability Requestまでの手順で3つのIEを受信することができる。この3つのIEに基づいて、第2シンク機器300は、第1シンク機器200がP2P GOとして、ソース機器100とMiracast通信を行っている環境を把握することができる。
また、上述したDevice Discovery Request、Device Discovery Response処理(419乃至422)により、第1シンク機器200は、第2シンク機器300を新たなP2Pクライアント423として接続する。また、第1シンク機器200は、グループ・フォーメーション処理(4-way Handshake、IPアサイン等の処理)を行う(424)。
例えば、図8のbに示すように、ソース機器100、第1シンク機器200および第2シンク機器300のそれぞれでやりとりを行うことにより(333乃至335)、第2シンク機器300が新たなP2Pクライアントとなる。
続いて、第2シンク機器300は、第1シンク機器200にDevice GO組替Requestメッセージを送信する(425)。この場合に、第2シンク機器300は、上述したIE情報により把握したトポロジ情報に基づいて、次の(A1)および(A2)を、Device GO組替Requestメッセージに含めて送信する(425)。
(A1)現状のP2P GOおよびP2Pクライアントの関係ではソース機器100に接続できないため、第1シンク機器200に対し、P2P GOをソース機器100へ移動させることの要求
(A2)ソース機器100と接続したい旨の要求
第1シンク機器200は、Device GO組替Requestメッセージを受信すると、ソース機器100に対し、GO組替Requestを送信する(426)。この場合に、第1シンク機器200は、次の(B1)乃至(B3)をGO組替Requestに含めて送信する(426)。
(B1)ソース機器100が複数動作を行えるか否かの確認
(B2)第1シンク機器200(自装置)が、P2P GOおよびP2Pクライアントの役割変更に同意したか否かを示す情報。この情報には、第1シンク機器200がP2Pクライアントになることを許可するか否かを示すビットを含む。
(B3)第2シンク機器300がソース機器100と接続したい旨の要求
ソース機器100は、GO組替Requestを受信した場合には、次の(C1)および(C2)を把握することができる。
(C1)第2シンク機器300がソース機器100と接続したい旨の要求
(C2)第1シンク機器200がP2P GOおよびP2Pクライアントの役割変更に同意したか否か
このように、ソース機器100は、上述した(C1)および(C2)を把握すると、自装置がP2P GOになるための準備を開始する。最初に、ソース機器100は、第1シンク機器200に対し、ソース機器100がP2P GOになる準備に入った旨を返信する。具体的には、ソース機器100は、上述した要求情報((B1)乃至(B3))に関する返信情報をGO組替Responseに含めて第1シンク機器200に送信する(427)。
この例では、ソース機器100は、コンカレント処理に対応していない場合の例を示す。このため、ソース機器100は、返信情報としてコンカレント処理に対応していない無旨をGO組替Responseに含めて第1シンク機器200に送信する(427)。
また、第1シンク機器200は、GO組替Responseを受信すると、第2シンク機器300に対し、上述した要求情報((A1)および(A2))に関する返信情報をDevice GO組替Responseに含めて第2シンク機器300に送信する(428)。
また、ソース機器100は、第1シンク機器200がP2P GOおよびP2Pクライアントの役割変更に同意していることを把握できたため、第1シンク機器200との通信を切断(TearDownコマンド)する(429)。これにより、ソース機器100および第1シンク機器200が切断(Ending a P2P Group sessions処理)し、P2Pデバイス(P2P Device)に戻る(431)。同様に、第1シンク機器200および第2シンク機器300が切断(Ending a P2P Group sessions処理)し、P2Pデバイス(P2P Device)に戻る(430)。
これらの処理により、ソース機器100、第1シンク機器200および第2シンク機器300が全てP2Pデバイスとなる(432乃至434)。例えば、図9のaに示すように、ソース機器100、第1シンク機器200および第2シンク機器300のそれぞれでやりとりを行うことにより(337、338)、各機器がP2Pデバイスとなる。
ここで、ソース機器100は、Device GO組替Request、Device GO組替Response、GO組替Request、GO組替Responseのやりとりにより、自装置がP2P GOとして立ち上げる必要があることを把握する。このため、ソース機器100、第1シンク機器200および第2シンク機器300が全てP2Pデバイスとなった後に、ソース機器100は、P2P GOとして立ち上がる(435)。なお、ソース機器100は、P2PクライアントからP2P GOに役割変更し、P2Pデバイスを経由しなくてもよい。
なお、各機器がP2Pデバイスとなってから(432乃至434)、ソース機器100がP2P GOとして立ち上がる(435)前に、ソース機器100および第1シンク機器200間で、GO組替完了のやりとりを行うようにしてもよい。例えば、図31に示すGO組替完了RequestおよびGO組替完了Responseのやりとり(488、489)を行うようにしてもよい。
続いて、ソース機器100は、第1シンク機器200に対し、Invitation Requestメッセージを送信する(436)。第1シンク機器200は、Invitation Requestメッセージを受信すると、ソース機器100に対し、Invitation Responseメッセージを送信する(437)。
続いて、ソース機器100は、第1シンク機器200との間で、Assoc./4-way Handshake/IP Assignment処理を行う(438)。これにより、第1シンク機器200がP2Pクライアントとなる(439)。
ここで、Assoc.には、Provioningも含まれる。このProvisioningにより、ソース機器100および第1シンク機器200の接続状態を示す表示画面を第2シンク機器300の表示部に表示させることができる。そして、第2シンク機器300の表示部に表示された表示画面を用いて、ユーザに選択させることにより、第2シンク機器300は、第1シンク機器200との接続を開始、または、ソース機器100との接続を開始させることができる。
ここで、Persistentについて、第2シンク機器300が複数の接続プロファイル(Persistent情報)を保持する場合の処理について考える。
例えば、P2P GOまたはP2Pデバイスは、過去に通信(例えば、AP経由での通信、P2P接続、TDLS)を行った相手機器に関する各情報を保持することができる。この情報として、例えば、SSID(Service Set Identifier)、Group ID、MAC Address、クレデンシャルを保持することができる。
ここで、メディアデータの送信元およびメディアデータの送信先において、互いに他方の接続プロファイルを保持している場合を想定する。この場合には、Persistentモードを用いて、WSC exchange処理を省略し、再接続時間を短縮可能なプロトコル効率化を可能にすることができる。
このように、例えば、クレデンシャル等を保存しておくことにより、WSC exchange等を省略した再接続処理を行うことができる。この例を図30に示す。
[接続先に関するクレデンシャルの保持に応じた接続例]
図28に示すように、第2シンク機器300は、第1シンク機器200と接続することにより、ソース機器100がP2Pクライアントであり、第1シンク機器200がP2P GOである場合のクレデンシャルを保持することができる。しかしながら、第2シンク機器300は、ソース機器100がP2P GOである場合のクレデンシャルを保持していないことも想定される。この場合に、最初から接続処理を行うと、WPS(WSC exchange)の時間が長くなるおそれがある。
そこで、本技術の第1の実施の形態では、クレデンシャルを保持するか否かに応じて、次の2つの条件に分けて各処理に関する説明をする。
(D1)ソース機器100がP2P GOであり、第1シンク機器200がP2Pクライアントである場合のクレデンシャルを第2シンク機器300が既に保持している場合は、そのクレデンシャルを利用する。
(D2)ソース機器100がP2P GOであり、第1シンク機器200がP2Pクライアントである場合のクレデンシャルを第2シンク機器300が保持していない。
なお、クレデンシャルについて、GTK(Group Transient Key)はグループ鍵であり、PSK(Pre-Shared Key)は事前共有鍵である。
[クレデンシャルを保持していない場合の接続例]
図29は、本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。
図29は、図28に示す例に引き続き行われる。また、図29は、上述した(D2)に対応する例である。
最初に、ソース機器100および第1シンク機器200間でWFD Capability Negotiation(RTSP M1乃至M7)が行われる(441)。続いて、ソース機器100から第1シンク機器200に第1フォーマットを用いてメディア伝送が行われる(442)。
続いて、ソース機器100および第2シンク機器300間でP2P Invitation処理が行われる(443、444)。続いて、ソース機器100および第2シンク機器300間でAuthentication処理が行われる(445、446)。続いて、ソース機器100および第2シンク機器300間でAssociation RequestおよびAssociation Responseのやりとりが行われる(447、448)。続いて、ソース機器100および第2シンク機器300間でWPS(WSC exchange)が行われる(449)。
続いて、ソース機器100および第2シンク機器300間でProbe RequestおよびProbe Responseのやりとりが行われる(450、451)。続いて、ソース機器100および第2シンク機器300間でAuthentication処理が行われる(452、453)。続いて、ソース機器100および第2シンク機器300間でAssociation RequestおよびAssociation Responseのやりとりが行われる(454、455)。続いて、ソース機器100および第2シンク機器300間で4-way Handshakeが行われる(456)。
これらの各処理により、第2シンク機器300は、P2Pクライアントとなる(457)。
続いて、ソース機器100および第2シンク機器300間でIP Address Assignmentが行われる(458)。これにより、IPアドレスが割り当てられる。
続いて、ソース機器100および第2シンク機器300間でWFD Capability Negotiation(RTSP M1-M7)が行われる(459)。続いて、ソース機器100から第2シンク機器300に第1フォーマットを用いてメディア伝送が行われる(460)。
例えば、図9のbに示すように、ソース機器100から第1シンク機器200および第2シンク機器300のそれぞれに第1フォーマットを用いてメディア伝送が行われる(339、340)。
[クレデンシャルを保持する場合の例]
図30は、本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。
図30は、図28に示す例に引き続き行われる。また、図30は、上述した(D1)に対応する例である。また、図30は、図29の一部を省略したものである。具体的には、図29に示す点線の矩形440内の各処理(445乃至449)と、IP Address Assignment(458)とを省略したものである。このため、図29と共通する部分には、同一の符号を付してこれらの説明を省略する。なお、図30に示す例において、IP Address Assignment(458)を省略せずに行うようにしてもよい。
ここで、ソース機器100がP2P GOであり、第1シンク機器200がP2Pクライアントである場合のクレデンシャルを、第2シンク機器300が既に保持する場合を想定する。この場合には、図30に示すように、SSID、Group ID、MAC Address情報を把握した後、Persistentグループを形成することができる。この場合には、Invokeするのみでグループを形成することができる。
これに対して、ソース機器100がP2P GOであり、第1シンク機器200がP2Pクライアントである場合のクレデンシャルを、第2シンク機器300が保持していない場合を想定する。この場合には、図29に示すように、WPS(WSC exchange)等を実行させる必要があるため、接続時間が長くなるおそれがある。そこで、情報のやりとりを自動でできるようにし、4-way Handshakeのみの処理で、図30に示す例と同様に、接続を短縮させる例について説明する。
[Action Frameを用いて情報のやりとりを行う例]
例えば、第2シンク機器300が第1シンク機器200に接続したときと比較し、クレデンシャルおよびSSID(例えば、Direct_xx)は変わる。このため、ソース機器100から第2シンク機器300に対し、Action Frame(Short Frame)を用いて通知する通知方法を用いることができる。このAction Frame(Short Frame)は、例えば、GO組替ResponseやDevice GO組替Responseである。
また、例えば、次の(E1)乃至(E3)の方法を用いることにより、接続を短縮させることができる。
(E1)ソース機器100(Autonomous GO)が決定したSSIDに従う。
(E2)GTKは、Association時、4-way Handshakeした時にソース機器100(Autonomous GO)から取得する。
(E3)PSKは、ソース機器100および第1シンク機器200間で使用していた鍵をなんらかのアルゴリズムを用いて取得する。例えば、過去にやりとりしていたPSKや、過去に使用した各情報(例えば、新しいSSID、下位ビット)に所定の演算(例えば、乗算)を施すことにより、PSKを求めることができる。
これらの情報交換を、TearDown前の暗号化されたチャネル上で行い、やりとりが終わった後にTearDownする。
[PSKの変更例]
次に、ソース機器100が、第2シンク機器300との接続を効率的に接続するための方法について説明する。
例えば、図28および図30に示す例において、第1シンク機器200および第2シンク機器300は一度接続されているため、PSKはシェアされている状況である。また、ソース機器100は、GO組替処理後、第1シンク機器200との接続で使用するPSKを変更する。
同様に、第1シンク機器200および第2シンク機器300が接続され、ソース機器100が第1シンク機器200と接続されている状況では、ソース機器100および第2シンク機器300間もPass Phraseを変更するのみで、WPSを省略させるようにしてもよい。
または、ソース機器100は、P2PクライアントからP2P GOを立ち上げる前、P2P GOが立ち上がった後には、何らかのルールでPSKを再生成し、次はこのPSKを使うように、事前にやりとりをすることができる。または、何らかの形でPSKをフレッシュして、それぞれP2P GOで使用するようにしてもよい。
これらの各処理により、例えば、WSC(Wi-Fi Simple Configuration) exchange処理の処理遅延を削減することができる。
[IPアドレスの変更例]
次に、IPアドレスの変更方法について説明する。本技術の第1の実施の形態では、GO組替処理を行う前には、第1シンク機器200がDHCP(Dynamic Host Configuration Protocol)サーバとして機能するが、GO組替後には、ソース機器100がDHCPサーバとして機能するように切り替わる例を示す。
上述したように、GO組替後には、ソース機器100がDHCPサーバとして機能する。このため、GO組替後には、ソース機器100がDHCPサーバを立ち上げ、IPアドレスのアサインする時間を必要とするため、それらの切替時間が長くなる。また、Miracast通信において、HDCPが使用されている場合には、IPアドレスのアサイン変更により、HDCPを繋ぎ直す必要もある。
そこで、ソース機器100のデフォルトルートが第1シンク機器200に向いていることを利用し、ソース機器100および第1シンク機器200のIPアドレスも入れ替えをする。これにより、ソース機器100のIPアドレスを第1シンク機器200のIPアドレスとし、第1シンク機器200のIPアドレスをソース機器100のIPアドレスとするようなIP組替を行うことができる。
このようにすることにより、DHCP認証を元々行うことができるソース機器100および第1シンク機器200の回線をそのまま使用することができる。
また、第1シンク機器200からソース機器100へのGO組替Requestにおいて、HDCPで生成するものと同等の情報を含めて送信することにより、IP Assignmentの時間を削減させることができる。なお、ソース機器100のDHCPポリシを、第1シンク機器200のDHCPポリシと同等のものにすることが好ましい。
[ユーザインターフェースを用いたトポロジ設定例]
次に、ユーザインターフェースを用いたトポロジ設定方法について説明する。
例えば、第2シンク機器300が能動的にP2P GOに接続しようとする場合において、全ての機器がP2Pデバイスの状態である場合を想定する。この場合に、Persistentモードを用いて、第2シンク機器300が、ソース機器100へのPersistent情報、第1シンク機器200へのPersistent情報の双方を保持する場合の処理について考える。この場合には、ソース機器100および第1シンク機器200の双方も、第2シンク機器300へのPersistent情報を保持するものとする。
このような場合には、第2シンク機器300と、ソース機器100および第1シンク機器200とがPersistentを用いて接続可能となる。このため、第2シンク機器300の表示部301には、SSIDまたはGroup IDだけでなく、メディアデータの送信元およびメディアデータの送信先(例えば、ソース機器100および第1シンク機器200)等の情報を表示させることができる。このように表示される情報を用いて、ユーザに選択操作をさせることにより、トポロジを設定することができる。
なお、本技術は、これらに限定されない。例えば、第2シンク機器300は、第1シンク機器200がP2P GOであり、ソース機器100がP2Pクライアントであることを把握するのみでもよい。このように、第2シンク機器300が、機器の役割(P2P GOおよびP2Pクライアント)のみを把握している場合を想定する。また、第2シンク機器300が、次のコマンド(GO組替Request)により、マルチシンク・トポロジとして接続したい要求を第1シンク機器200にした場合を想定する。この場合には、第1シンク機器200は、自装置がP2P GOであるがシンク機器として動作し、ソース機器100がP2Pクライアントとして動作していることを把握している。このため、第1シンク機器200が、GO組替Requestを受信した後、P2P GOを移動しないとシンク2台が接続できないことを把握することができる。そこで、第1シンク機器200が、ソース機器100に対し、ソース機器100および第1シンク機器200間でP2P GOを入れ替えする旨を要求するGO組替Requestコマンドを送信するようにしてもよい。
図28乃至図30に示すように、ソース機器100は、P2Pダイレクト回線毎に安定したデータ伝送を行うため、シンク機器の数と同じ数のデータパスを生成し、メディアデータ(例えば、画像データ、音声データ)を送信する。図28乃至図30に示す例では、シンク機器の数は2(第1シンク機器200、第2シンク機器300)であるため、ソース機器100は、2つのデータパスを生成してメディアデータを送信する。
このように、トポロジが構築された後に、ソース機器100から第1シンク機器200または第2シンク機器300に送信されて表示されるコンテンツは、同じコンテンツ(例えば、画像、音声)でもよく、異なるコンテンツ(例えば、画像、音声)でもよい。例えば、第1シンク機器200には、ソース機器100に表示された画像をそのまま送信し、第2シンク機器300には、ソース機器100の記憶部に保存されているコンテンツを送信することができる。また、画像データのみ、音声データのみ、または、制御データのみをメディアデータとして送信するようにしてもよい。
[P2Pグループの生成例]
ここで、P2Pグループの生成方法について説明する。本技術の第1の実施の形態では、P2Pグループの生成方法として2つの方法を用いる例を示す。
第1の生成方法は、ユーザが手動的にP2Pグループをセットアップする生成方法である。この生成方法により生成されたP2PグループのGOをAutonomous GOと称する。
第2の生成方法は、Intent Valueに基づいてP2P Groupを生成する生成方法である。この生成方法により生成されたP2PグループのGOについては、GOまたはP2P GOと称する。ここで、Intent Valueは、GOに優先的になるためのパラメータ(例えば、GOになる優先度を示す値)を意味する。
[ソース機器およびシンク機器の双方がコンカレント対応である場合の通信例]
図31は、本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。ここでは、図10および図11を参照して説明する。なお、図10および図11は、図8および図9の一部を変形したものであるため、図8および図9と異なる点と中心に説明する。
また、図31では、ソース機器100および第1シンク機器200の双方がコンカレント動作が可能な無線接続環境において実現可能な例について説明する。
また、図31は、図28の変形例である。このため、図28と共通する部分についての説明の一部を省略する。具体的には、図31に示す各処理(461乃至478、480、479、481乃至485)は、図28に示す各処理(411乃至428、430、434、435乃至439)に対応する。
また、図31に示す例は、ソース機器100および第1シンク機器200間の第2の回線を接続した後に、TearDownメッセージングのやりとり(486)を行うようにする。そして、新たなP2P回線が接続された後(Assoc./4-way Handshake/IP Assignment)に第1の回線を切断する(486、487)。これにより、GO組替による切断時間を削減することができる。
すなわち、新規接続を行った後に、使わなくなった回線をTearDownすることにより、元々接続されていたメディア伝送を停止させずに、他方の回線をセットアップさせることができる。このため、ソース機器100および第1シンク機器200間のメディア伝送からマルチシンク・トポロジへの変更に伴うメディア伝送の停止時間を削減させることができる。
図31では、ソース機器100は、P2PクライアントからAutonomous GOへの状態遷移を行えるため、図28に示すように、ソース機器100がP2Pデバイスに一度戻らずに、Autonomous GOになることができる。この例を図11のaに示す。
また、第1シンク機器200は、P2P GOからP2Pデバイスに状態遷移された後、P2Pデバイスに一度戻るが、ソース機器100の役割が変更されたP2P GOと接続し、P2Pクライアントになる。ここで、第1シンク機器200は、ソース機器100のP2P GOと既に接続したことがある等、クレデンシャルを保持することも想定される。このように、第1シンク機器200がクレデンシャルを保持している場合には、P2P GOからP2Pデバイスにならなくても、P2Pクライアントになることもできる。この例を図11のaに示す。
通常、第1シンク機器200は、ソース機器100がAutonomous GOになり、ソース機器100からのビーコンを検出するまで、P2Pクライアントになることはできない。しかしながら、ソース機器100がビーコンを送信する前に、GO組替Response(Action Frame)を受信することにより、第1シンク機器200は、ビーコンを受信しなくてもP2PデバイスからP2Pクライアントに切り替わることが可能となる。これにより、ビーコン受信の待機時間の分だけ切替処理を早く行うことができる。
また、GO組替Responseは、ソース機器100および第1シンク機器200がAssociationされていない状態であるため、Associationしなくても受け付けができるAction Frameでのやりとりを行うものとする。また、どのチャネルで受けるか、SSID、Autonomous GOとして立ち上がった時のチャネル情報、使用可能なチャネル情報のうちの少なくとも1つ以上を、そのメッセージに含めて送信することができる。
これらの各処理により、SSIDとAutonomous GOのチャネルの情報を上述したAction Frameで伝送し、ビーコンを待たずにやりとりを開始させることができる。
また、ソース機器100は、自動的にP2PクライアントからAutonomous GOへの昇格があった後に、第2シンク機器300へInviationかInvokeが送信される。
また、クレデンシャルを保持しない場合の例については、図29と同様である。また、クレデンシャルを保持する場合の例については、図30と同様である。
次に、IPアドレスの変更方法について説明する。本技術の第1の実施の形態では、図28に示すIPアドレスの変更方法以外の他の変更方法を用いることができる。例えば、ソース機器100(P2Pクライアント)および第1シンク機器200(P2P GO)のそれぞれにおいて、IP AssignおよびHDCPアサインを並列に処理させることができる。そして、それらの各処理が終了した時点で、ソース機器100(P2P GO)および第1シンク機器200(P2Pクライアント)に繋ぎかえることができる。このIPアドレスの変更方法を用いることができる。
このように、ソース機器100は、P2P GOの役割を担う第1シンク機器200との間でメディア伝送を行っている間に、第2シンク機器300との間で新たにメディア伝送を行うことができる。この場合に、ソース機器100の制御部140は、第2シンク機器300との間で新たにメディア伝送を行う前に、第1シンク機器200および第2シンク機器300のそれぞれにメディア伝送を行うための役割を変更するための情報をやりとりする制御を行う。この情報は、例えば、P2P GOの役割の変更を第1シンク機器200が許可するか否かを示す情報である。また、その情報は、例えば、ソース機器100および第1シンク機器200のそれぞれがコンカレント機能を備えるか否かを示す情報である。また、その情報は、例えば、ソース機器100が複数の機器との間で無線通信を行う複数動作に対応可能か否かを示す情報である。また、これらのうちの少なくとも1つの情報をやりとりするようにしてもよい。また、これらのうちの少なくとも1つの情報は、例えば、ソース機器100および第1シンク機器200間でやりとりされるメッセージに含めてやりとりされる。
また、ソース機器100の制御部140は、P2P GOの役割の変更を第1シンク機器200が許可している場合に、P2P GOの役割を第1シンク機器200からソース機器100に変更した後に、第2シンク機器300との接続処理を行うように制御する。
また、P2P GOの役割の変更を第1シンク機器200が許可し、かつ、ソース機器100および第1シンク機器200の双方がコンカレント機能を備える場合を想定する。この場合には、ソース機器100の制御部140は、P2P GOの役割を第1シンク機器200からソース機器100に変更した後に、ソース機器100および第1シンク機器200の切断処理を行う。そして、ソース機器100の制御部140は、第1シンク機器200および第2シンク機器300のそれぞれにメディア伝送を行うための接続処理を行う。
また、P2P GOの役割の変更を第1シンク機器200が許可している場合において、ソース機器100がP2P GOであり、かつ、第1シンク機器200がP2Pクライアントである場合の接続設定情報を第2シンク機器300が保持しない場合を想定する。この場合には、制御部140は、P2P GOの役割を第1シンク機器200からソース機器100に変更する前に、ソース機器100および第1シンク機器200間でやりとりされるメッセージに、その接続設定情報を取得するための情報を含めるように制御する。
また、ソース機器100の制御部140は、ソース機器100および第1シンク機器200間でやりとりされるメッセージに、DHCPに関する情報、通信中のMACアドレス情報の少なくとも1つを含めてやりとりする制御を行うことができる。また、ソース機器100の制御部140は、そのやりとりされるメッセージに、HDCPを動作させた状態でIPアドレスを移動させるための情報、Persistentに必要な情報の少なくとも1つを含めてやりとりする制御を行うことができる。
また、ソース機器100の制御部140は、P2P GOの役割を第1シンク機器200からソース機器100に変更したときには、その旨を通知するための通知情報をユーザに提供することができる。
[第1シンク機器がGOの変更を不許可であり、ソース機器が複数動作に未対応である場合の通信例]
図32乃至図35は、本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。ここでは、図12および図13を参照して説明する。なお、図10および図11は、図8および図9の一部を変形したものであるため、図8および図9と異なる点と中心に説明する。
また、図32は、図28の変形例である。このため、図28と共通する部分についての説明の一部を省略する。具体的には、図32に示す各処理(491乃至506、510乃至514)は、図28に示す各処理(411乃至426、427乃至431)に対応する。
また、図33は、図29の変形例である。このため、図29と共通する部分についての説明の一部を省略する。具体的には、図33に示す各処理(522乃至537、539、540)は、図29に示す各処理(443乃至458、459、460)に対応する。
また、図34は、図33の一部を省略したものである。具体的には、図33に示す点線の矩形520内の各処理(524乃至528)と、IP Address Assignment(537)とを省略したものである。このため、図33と共通する部分には、同一の符号を付してこれらの説明を省略する。
また、図35は、図33の変形例である。このため、図33と共通する部分についての説明の一部を省略する。具体的には、図33に示す各処理(538、539)の代わりに、各処理(541乃至543)を行う点が異なる。
また、図32では、第1シンク機器200がP2P GOからP2Pクライアントへの変更を不許可としている場合であって、ソース機器100が複数動作に未対応である場合の通信例を示す。
第2シンク機器300は、第1シンク機器200に対し、ソース機器100との間でMiracast受信を行いたい旨をメッセージに挿入し、Device GO組替Requestを送信する(505)。
また、Device GO組替Requestを受信した第1シンク機器200は、GO組替Requestをソース機器100に送信する(506)。このGO組替Requestには、第1シンク機器200がP2Pクライアントになることを許可するか否かのビットを格納する。この例では、第1シンク機器200がP2Pクライアントになることを不許可とするビットが格納される。このGO組替RequestおよびGO組替Responseのやりとり(506、510)により、ソース機器100に状況を伝えることができる。これにより、ソース機器100は、自装置の動作モード変更を判断することができる。なお、この例では、ビットを一例として記載したが、本技術の実施の形態はこれに限定されない。例えば、第1シンク機器200がP2Pクライアントになることを許可するか否かを、メッセージやその他のやりとりにより通知するようにしてもよい。
図32に示す例では、第1シンク機器200は、自装置がシンク機器、かつ、P2P GOであることを認識し、P2P GOからP2Pクライアントへの変更を拒否する設定がされているものとする。このため、第1シンク機器200は、P2P GOからP2Pクライアントへの変更を拒否するための情報(GO組替拒否の情報)を、GO組替Requestのメッセージに書き込む。そして、第1シンク機器200は、GO組替Requestを第2シンク機器300からの接続要求としてソース機器100へ送信する(506)。
GO組替Requestを受信したソース機器100は、自装置と、第1シンク機器200と、第2シンク機器300との接続方式の属性を確認し、P2Pのみしか両装置へは接続できないことを把握する。このため、ソース機器100は、自装置から2台のP2P機器(第1シンク機器200、第2シンク機器300)への接続を行うことができないと判断する。そこで、ソース機器100は、2台のP2P機器(第1シンク機器200、第2シンク機器300)のうちの何れか機器との接続のみが可能である旨を表示し、接続を希望する機器を選択するための表示画面を表示部190に表示する(507)。例えば、その表示画面をポップアップ等に表示部190に表示させることができる。この表示例を図18に示す。これにより、ソース機器100は、ユーザからの判断を仰ぐことができる。
このように、ソース機器100が複数動作を行うことができない場合には、何れか一方のシンク機器にしか接続することができない旨を表示する。この場合には、例えば、次の(F1)および(F2)のように、表示方法のポリシを決めておくことができる。また、必要に応じて、Device GO組替RequestおよびDevice GO組替Response、GO組替RequestおよびGO組替Response等を用いて、表示ポリシを事前にやりとりするようにしてもよい。
(F1)第1シンク機器200でもソース機器100に表示したポップアップを見せる
(F2)第1シンク機器200ではソース機器100に表示したポップアップを見せない
また、図32では、接続を希望する機器として第2シンク機器300が選択された場合の例を示す。このように、接続を希望する機器として第2シンク機器300が選択された場合には(508)、ソース機器100は、第1シンク機器200との接続を切断することを決定する(509)。そして、ソース機器100は、第1シンク機器200との接続を切断するため、第1シンク機器200に対し、TearDownコマンドを送信する(512)。
また、図33に示すように、ソース機器100は、第1シンク機器200の切断後、第2シンク機器300と接続するため、第2シンク機器300に対し、Invitation Requestを送信する(522)。
このように、図32では、ソース機器100が第1シンク機器200と切断処理後、GO Neotiationを行わない例を示す。なお、第2シンク機器300がP2P GOになるような場合には、ソース機器100および第2シンク機器300間でGO Negotiationを行い、第2シンク機器300がP2P GOとして接続を行うようにしてもよい。ただし、ソース機器100は、第1シンク機器200との切断時点で、Autonomous GOになるための準備処理を行うことができる。このため、ソース機器100は、第2シンク機器300との間でGO Negotiationを行うよりも、早く立ち上げることができる。
また、各機器間でやりとりされるRequestメッセージの中で、接続要求・ポリシ変更要求を行い、ResponseメッセージでAcceptするか否かの結果を受け取ることにより、接続するシンク機器を決定するようにしてもよい。また、他の情報(例えば、Intent Value等の数値)に基づいて、接続するシンク機器を決定するようにしてもよい。
また、メッセージの中に、P2P GOとして立ち上がる場合のSSIDを格納するようにしてもよい。このSSID情報に基づいて、クレデンシャルがあるか否か、Persistentで接続できるか否かを判断することができる。
なお、図32では、ソース機器100は、P2PクライアントからAutonomous GOに切り替わる例を示すが、図28と同様に、P2Pデバイスに戻るようにしてもよい。
なお、図35では、ソース機器100から第1シンク機器200に送信するTeadownの処理コマンドが、ソース機器100から第2シンク機器300に送信するRTSP M6である場合の例を示す。ただし、Teadownの処理コマンドは、ソース機器100から第2シンク機器300に送信するRTSP M4以上M6以下であれば、RTSP M6以外のものを使用するようにしてもよい。例えば、RTSP M4までを転送することにより、第2シンク機器300の転送フォーマットを確実に把握することができる。また、例えば、RTSP M6までを転送することにより、さらに確実に伝送設定を行うことができる。
このように、P2P GOの役割の変更を第1シンク機器200が未許可であり、かつ、ソース機器100が複数動作に対応していない場合も想定される。この場合には、ソース機器100の制御部140は、第1シンク機器200および第2シンク機器300のうちから、メディア伝送を行うシンク機器を選択するための選択情報(例えば、図18に示す選択画面390、393)をユーザに提供することができる。
[第1シンク機器がGOの変更を不許可であり、ソース機器が複数動作に対応する場合の通信例]
図36乃至図38は、本技術の第1の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。ここでは、図14および図15を参照して説明する。なお、図14および図15は、図8および図9の一部を変形したものであるため、図8および図9と異なる点と中心に説明する。
また、図36は、図28の変形例である。このため、図28と共通する部分についての説明の一部を省略する。具体的には、図36に示す各処理(551乃至565、568)は、図28に示す各処理(411乃至425、428)に対応する。
また、図37は、図29の変形例である。このため、図29と共通する部分についての説明の一部を省略する。具体的には、図37に示す各処理(581乃至597、602)は、図29に示す各処理(442乃至458、460)に対応する。
また、図38は、図37の一部を省略したものである。具体的には、図37に示す点線の矩形580内の各処理(584乃至588)と、IP Address Assignment(597)とを省略したものである。このため、図37と共通する部分には、同一の符号を付してこれらの説明を省略する。
また、図36では、第1シンク機器200がP2P GOからP2Pクライアントへの変更を不許可としている場合であって、ソース機器100が複数動作に対応する場合の通信例を示す。
図28と同様に、第2シンク機器300は、第1シンク機器200にDevice GO組替Requestメッセージを送信する(565)。
ここで、第1シンク機器200は、自装置がGOの変更を不許可であり、ソース機器100が複数動作に対応することを把握しているものとする。このため、第1シンク機器200は、Device GO組替Requestメッセージを受信すると、ソース機器100に対し、GO追加Requestを送信する(566)。この場合に、第1シンク機器200は、次の(G1)および(G2)をGO追加Requestに含めて送信する(566)。
(G1)第2シンク機器300がソース機器100と接続したい旨の要求
(G2)ソース機器100が第2シンク機器300に対してP2P GOとして接続する旨の要求
なお、図28に示す例と同様に、上述した(B1)乃至(B3)をGO追加Requestに含めて送信するようにしてもよい。
ソース機器100は、GO追加Requestを受信した場合には、上述した(G1)および(G2)を把握することができる。
このように、ソース機器100は、上述した(G1)および(G2)を把握すると、自装置が第2シンク機器300に対してP2P GOになるための準備を開始する。そこで、ソース機器100は、第1シンク機器200に対し、ソース機器100が第2シンク機器300に対してP2P GOになる準備に入った旨を返信する。具体的には、ソース機器100は、上述した要求情報((G1)および(G2))に関する返信情報をGO追加Responseに含めて第1シンク機器200に送信する(567)。
この例では、ソース機器100は、複数動作に対応する場合の例を示す。このため、ソース機器100は、返信情報として、第1シンク機器200に対してはP2Pクライアントとして動作し、第2シンク機器300に対してはP2P GOとして動作する旨をGO追加Responseに含めて第1シンク機器200に送信する(567)。
また、第1シンク機器200は、GO追加Responseを受信すると、第2シンク機器300に対し、上述した要求情報((A1)および(A2))に関する返信情報をDevice GO組替Responseに含めて第2シンク機器300に送信する(568)。
これにより、ソース機器100は、第1シンク機器200に対してはP2Pクライアントとなり、第2シンク機器300に対してはP2P GOとなる(569)。また、第1シンク機器200は、ソース機器100に対してはP2P GOとなる(570)。この場合の遷移例を図15のaおよびbに示す。
次に、第2シンク機器300が、接続先に関するクレデンシャルを保持しない場合の例について図37を参照して説明する。
IP Address Assignmentを行った後に(597)、ソース機器100および第2シンク機器300間でWFD Capability Negotiation(RTSP M1-M3)が行われる(598)。続いて、ソース機器100および第1シンク機器200間でWFD Capability Re-Negotiation(RTSP M4)が行われる(599)。
続いて、ソース機器100および第2シンク機器300間でWFD Session Establishment(RTSP M4-M7)が行われる(601)。
ここで、図36に示す例において、Persistentについて、第2シンク機器300が複数の接続プロファイル(Persistent情報)を保持する場合の処理について説明する。
例えば、第2シンク機器300が能動的にP2P GOに接続しようとする場合、第1シンク機器200のみがP2P GOのときには、第1シンク機器200と接続する。しかし、ソース機器100にもP2P GOが立ち上がった状況において、第2シンク機器300が、ソース機器100へのPersistent情報、第1シンク機器200へのPersistent情報の双方を保持する場合も考えられる。
この場合、対象となるP2P GOが2つ存在するため、第2シンク機器300の表示部301に、SSIDだけでなく、メディアデータの送信元およびメディアデータの送信先(例えば、ソース機器100および第1シンク機器200)等の情報を表示させる。このように表示される情報を用いて、ユーザに選択操作をさせることができる。
<2.第2の実施の形態>
本技術の第1の実施の形態では、マルチシンク・トポロジを構築する場合に新規参入するシンク機器が接続要求を行う例を示した。本技術の第2の実施の形態では、マルチシンク・トポロジを構築する場合に新規参入するシンク機器にソース機器が接続要求を行う例を示す。
なお、本技術の第2の実施の形態における情報処理装置の構成については、図1等に示すソース機器100、第1シンク機器200、第2シンク機器300と略同一である。このため、本技術の第1の実施の形態と共通する部分については、本技術の第1の実施の形態と同一の符号を付してこれらの説明の一部を省略する。
[新たなシンク機器に接続要求する例]
図39は、本技術の第2の実施の形態におけるソース機器100および第1シンク機器200に表示される選択画面の一例を示す図である。
図39のaは、ソース機器100の表示部190に表示される選択画面700を示す。また、図39のbは、第1シンク機器200の表示部251に表示される選択画面710を示す。これらの選択画面700、710は、例えば、ポップアップ画面として表示することができる。
選択画面700は、例えば、図19のaに示す通知画面371における操作ボタン372の押下操作が行われた後に表示される。また、選択画面710は、例えば、図19のbに示す通知画面374における操作ボタン375の押下操作が行われた後に表示される。
例えば、ユーザは、選択画面700における操作ボタン701、702のうち、希望する機器のボタンを押下して確認ボタン703を押下することにより、希望する機器に接続要求をすることができる。同様に、例えば、ユーザは、選択画面710における操作ボタン721、712のうち、希望する機器のボタンを押下して確認ボタン713を押下することにより、希望する機器に接続要求をすることができる。
[ソース機器の動作例]
図40は、本技術の第2の実施の形態におけるソース機器100によるマルチシンク接続処理の処理手順の一例を示すフローチャートである。
図40は、図20および図21の変形例であり、ソース機器100から第2シンク機器300にProbe Requestを送信する点が図20および図21とは異なる。また、これ以外の点については、図20および図21と共通するため、図20および図21と同一の符号を付してこれらの説明を省略する。
最初に、ソース機器100は、第1シンク機器200との接続中に、第2シンク機器300にProbe Requestを送信する(ステップS821)。この送信により、ソース機器100は、第2シンク機器300との接続動作を開始する。
例えば、ユーザは、図19のaに示す通知画面371を表示させ、通知画面371における操作ボタン372の押下操作を行うことにより、ソース機器100の周囲に存在する機器(ソース機器100に無線接続が可能な機器)をサーチすることができる。これにより、そのサーチ結果を表す表示画面(例えば、図39のaに示す選択画面700)が表示部190に表示される。そして、ユーザは、その表示画面において、所望の機器を選択する選択操作を行うことにより、所望の機器にProbe Requestを送信することができる。
また、図40に示すP2P GOの第1移動処理(ステップS805)については、図41および図30を参照して詳細に説明する。
また、図40に示すP2P GOの第2移動処理(ステップS806)については、図41および図29を参照して詳細に説明する。
また、図40に示すP2P GOの第1移動処理(ステップS808)については、図42および図30を参照して詳細に説明する。
また、図40に示すP2P GOの第2移動処理(ステップS809)については、図42および図29を参照して詳細に説明する。
また、図21に示す第1接続処理(ステップS812)については、図43および図34を参照して詳細に説明する。
また、図21に示す第2接続処理(ステップS813)については、図43、図33および図35を参照して詳細に説明する。
また、図21に示す第1接続処理(ステップS815)については、図44および図38を参照して詳細に説明する。
また、図21に示す第2接続処理(ステップS816)については、図44および図37を参照して詳細に説明する。
[ソース機器およびシンク機器の少なくとも一方がコンカレント未対応である場合の通信例]
図41は、本技術の第2の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。
図41では、ソース機器100が、第1シンク機器200とP2Pダイレクト通信で接続している環境において、第2シンク機器300がグループ参入する場合の動作例を示す。すなわち、最初に、ソース機器100がP2Pクライアント611であり、第1シンク機器200がP2P GO612であり、第2シンク機器300がP2Pデバイス613である場合の動作例を示す。
第1シンク機器200は、P2P GO612としてソース機器100(P2Pクライアント611)と接続済であり、ソース機器100から第1シンク機器200に第1フォーマットを用いてメディア伝送が行われているものとする(614)。なお、点線の矩形610は、ソース機器100から第1シンク機器200にメディア伝送が行われている期間を示す。
ここで、上述したように、ソース機器100において、新たなシンク機器を接続するためのユーザ操作が行われた場合を想定する。この場合には、ソース機器100は、Device Discoverability Requestを第1シンク機器200に送信する(615)。また、第1シンク機器200は、Device Discoverability Responseをソース機器100に送信する(616)。なお、これらのやりとり(615、616)により取得される情報を、メディア伝送用の回線のやりとりにより既に取得していることも想定される。このような場合には、これらのやりとり(615、616)を省略することができる。
続いて、ソース機器100は、Device GO組替Requestメッセージを第1シンク機器200に送信する(617)。この場合に、ソース機器100は、上述したIE情報により把握したトポロジ情報に基づいて、次の(H1)および(H2)を、Device GO組替Requestメッセージに含めて送信する(617)。
(H1)現状のP2P GOおよびP2Pクライアントの関係では第2シンク機器300に接続できないため、第1シンク機器200に対し、P2P GOをソース機器100へ移動させることの要求
(H2)第2シンク機器300と接続したい旨の要求
第1シンク機器200は、Device GO組替Requestメッセージを受信すると、上述した要求情報((H1)および(H2))に関する返信情報をDevice GO組替Responseに含めてソース機器100に送信する(618)。この例では、第1シンク機器200がP2P GOおよびP2Pクライアントの役割変更に同意しているものとする。
このように、ソース機器100は、第1シンク機器200がP2P GOおよびP2Pクライアントの役割変更に同意していることを把握すると、第1シンク機器200との通信を切断(TearDownコマンド)する(619)。これにより、ソース機器100および第1シンク機器200が切断(Ending a P2P Group sessions処理)する(620)。そして、ソース機器100は、Autonomous GOとなり(621)、第1シンク機器200はP2Pデバイス(P2P Device)となる(622)。
続いて、ソース機器100は、Probe Requestを第2シンク機器300に送信する(623)。また、第2シンク機器300は、Probe Requestを受信すると、Probe Responseをソース機器100に送信する(624)。
続いて、ソース機器100は、Invitation Requestを第1シンク機器200に送信する(625)。また、第1シンク機器200は、Invitation Requestを受信すると、Invitation Responseをソース機器100に送信する(626)。
続いて、ソース機器100は、第1シンク機器200との間で、Assoc./4-way Handshake/IP Assignment処理を行う(627)。これにより、第1シンク機器200がP2Pクライアントとなる(628)。
[ソース機器およびシンク機器の双方がコンカレント対応である場合の通信例]
図42は、本技術の第2の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。
図42は、図41の変形例である。すなわち、ソース機器100および第1シンク機器200の双方がコンカレント対応であるため、ソース機器100および第1シンク機器200の通信を切断するタイミングが図41とは異なる(647、648)。また、ソース機器100および第1シンク機器200の切断後に、GO組替完了RequestおよびGO組替Responseのやりとりを行う点が図41とは異なる(649、650)。これら以外については、図41と共通するため、ここでの詳細な説明を省略する。
[第1シンク機器がGOの変更を不許可であり、ソース機器が複数動作に未対応である場合の通信例]
図43は、本技術の第2の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。
図43は、図32の変形例である。このため、図32と共通する部分についての説明を省略する。具体的には、図43に示す各処理(661乃至670)は、図32に示す各処理(491乃至494、508、509、512、514乃至516)に対応する。
[第1シンク機器がGOの変更を不許可であり、ソース機器が複数動作に対応する場合の通信例]
図44は、本技術の第2の実施の形態における通信システム10を構成する各機器間における通信処理例を示すシーケンスチャートである。
図44は、図36の変形例である。このため、図36と共通する部分についての説明を省略する。具体的には、図44に示す各処理(681乃至686)は、図36に示す各処理(551乃至554、569、570)に対応する。
なお、本技術の実施の形態では、シンク機器が2台の場合の例を示したが、台数には制限がないものとする。また、ユーザへの通知として、通知画面(例えば、図16乃至図19に示す通知画面)を表示する代わりに、または、通知画面の表示とともに、その旨のメッセージを音声出力するようにしてもよい。また、振動による通知やその他の通知手段を用いてユーザへの通知を行うようにしてもよい。
また、上述した各機器間でやりとりされる情報に基づいて、マルチシンクを構成する複数の機器の役割を管理する機器の役割管理部320(図5に示す)を、マルチシンクを構成する複数の機器のうちの少なくとも1つの機器に備えることができる。また、マルチシンクを構成する複数の機器以外の外部機器に機器の役割管理部320(図5に示す)を備えるようにしてもよい。また、これらの管理をする機器と、その管理情報を記憶する機器とを異なる機器とするようにしてもよい。
ここで、1台のソース機器が複数のシンク機器に送信するマルチシンク・トポロジでの伝送方式は、各々のシンク機器へユニキャストパケットを送信するマルチプル・ユニキャスト伝送、または、全てのシンク機器へのマルチキャスト伝送を使用することが多い。これらの伝送を行うシーケンスにおいて、ソース機器(例えば、サーバ)は、各シンク機器の受信能力を把握し、ソース機器主導で設定するようなサービスが行われている。例えば、MPEG-DASHに代表されるように、シンク機器がソース機器へ品質(画質・音質)や伝送レートを要求し、ソース機器は要求された品質(画質・音質)や伝送レートで伝送を行う環境となることが多い。
下位レイヤのプロトコルにおいては、特に無線通信はエラーレートが高くなる可能性があるため、シンク機器が多ければ多いほど、マルチキャスト伝送が使われる可能性が高い。上述したマルチキャスト通信は、ベストエフォートであり、無線電波伝搬環境に大きく影響され、電波伝搬環境次第で受信できないこともある。ここで、IEEE802.11aaの規格が決まり、無線伝送の効率化が行われている。しかしながら、Wi-Fi CERTIFIED Miracastに代表されるP2Pダイレクト接続は、複数台のシンク機器(以下、マルチシンク・トポロジ)への対応は、これから行われることが想定される。
ここで、P2P GOしか、複数のP2Pクライアント機器と接続できない。このため、例えば、マルチシンク・トポロジにおいて、P2P GOがシンク機器になっている場合において、新規参入する機器がグループに接続するときには、シンク機器にしか接続をすることができない。この場合には、ソース機器へ接続し、ダイレクトにメディア伝送するトポロジへの変更が必要となる。そこで、本技術の実施の形態では、GO組替メッセージをやりとりすることにより、効果的に、マルチシンク・トポロジを構築することができる。
また、接続する機器の全てがコンカレント機能に対応している場合、新しいP2P回線構築を容易にすることができる。そこで、P2P GO組替を行う場合において、どのようにやりとりすることが効率的であるかを具体化することが重要である。
また、GO組替を行う過程で、P2P GOおよびP2Pクライアントの回線を切断する場合、TearDownコマンド送出後にIP Assignmentを通常通りに行うと、HDCP処理に時間を要する。また、IP設定された後に行うDHCP処理に時間を要する。また、既に、Miracastが通信中の状態において、GO組替を行う場合には、通信の停止状態を短くする必要がある。
そこで、本技術の実施の形態では、マルチシンク・トポロジにおいて、シンク機器がP2P GOであり、既に接続された機器がコンカレントモードに対応する場合に、新規参入する機器がグループに接続するときには、新規参入を含めたトポロジ変更に伴う現状の回線切断時間を削減することができる。
また、接続切替に伴うクレデンシャルを保持しない機器間でも、接続切替を短縮することができる。また、DHCP移動への対応、HDCP移動への対応、接続プロファイル(Persistent情報)の対応を適切に行うことにより、停止時間をさらに短縮させることができる。
また、シンク機器がP2P GOである場合には、シンク機器は、P2P GOの権限をリリースし、P2P GOからP2Pクライアントへ状態を変更できる環境にある。また、P2P GOは、DHCPサーバ機能を有するため、他のネットワーク環境におけるIP Assignment等の処理を行うため、他のネットワーク環境にも影響を与える。そこで、シンク機器がP2P GOである場合に、P2P GOの権限を委譲できない環境でのやりとりを適切に実現することが重要である。
このように、シンク機器がP2P GOである場合には、他のネットワーク環境への影響があり、P2P GOを移動できないことも存在する。そこで、本技術の実施の形態では、ユーザが希望するサービスを提供することができるようなユーザインターフェースを設けることにより、意図したメディア伝送を適切に行うことができる。
また、新規参入するシンク機器が複数の接続プロファイル(Persistent情報)を保持している場合において、ソース機器がP2P GOでない場合でも、適切に対応することができる。また、ソース機器および接続中のシンク機器がクレデンシャルを交換していて、新規参入するシンク機器がソース機器に対してクレデンシャルを保持していない場合でも、接続時間を短縮させることができる。
このように、本技術の実施の形態では、マルチシンク対応の無線通信システムを実現することができる。すなわち、マルチシンク・トポロジを適切に構築することができる。また、接続中の各機器がコンカレントモードに対応する場合、新規参入を含めたトポロジ変更に伴う現状の回線切断時間を削減することができる。また、DHCP移動への対応、HDCP移動への対応、接続プロファイル(Persistent情報)の対応を適切に行うことにより、停止時間をさらに短縮させることができる。すなわち、情報処理装置(ソース機器、シンク機器)を適切に無線接続することができる。
また、本技術の実施の形態におけるソース機器100、第1シンク機器200、第2シンク機器300は、各分野において使用される機器に適用することができる。例えば、自動車内で使用される機器(例えば、カーナビゲーション装置、スマートフォン)に適用することができる。例えば、自動車の前側の席にソース機器100を設置し、自動車の後部座席に第1シンク機器200および第2シンク機器300を設置することができる。そして、後部座席のユーザによる操作により、ソース機器100からの画像および音声を第1シンク機器200または第2シンク機器300により楽しむことができる。また、例えば、教育分野でも適用可能である。例えば、教室内で講師がソース機器100を使用し、学生が第1シンク機器200および第2シンク機器300を使用する。また、講義を聞きに来る学生は、教室に入る毎に、所有するシンク機器をソース機器100に接続してソース機器100からの画像および音声を利用することができる。これにより、各学生の学力向上に利用することができる。
<3.応用例>
本開示に係る技術は、様々な製品へ応用可能である。例えば、ソース機器(情報処理装置)100、第1シンク機器(情報処理装置)200、第2シンク機器(情報処理装置)300は、スマートフォン、タブレットPC(Personal Computer)、ノートPC、携帯型ゲーム端末若しくはデジタルカメラなどのモバイル端末、テレビジョン受像機、プリンタ、デジタルスキャナ若しくはネットワークストレージなどの固定端末、又はカーナビゲーション装置などの車載端末として実現されてもよい。また、ソース機器(情報処理装置)100、第1シンク機器(情報処理装置)200、第2シンク機器(情報処理装置)300は、スマートメータ、自動販売機、遠隔監視装置又はPOS(Point Of Sale)端末などの、M2M(Machine To Machine)通信を行う端末(MTC(Machine Type Communication)端末ともいう)として実現されてもよい。さらに、ソース機器(情報処理装置)100、第1シンク機器(情報処理装置)200、第2シンク機器(情報処理装置)300は、これら端末に搭載される無線通信モジュール(例えば、1つのダイで構成される集積回路モジュール)であってもよい。
[3-1.第1の応用例]
図45は、本開示に係る技術が適用され得るスマートフォン900の概略的な構成の一例を示すブロック図である。スマートフォン900は、プロセッサ901、メモリ902、ストレージ903、外部接続インターフェース904、カメラ906、センサ907、マイクロフォン908、入力デバイス909、表示デバイス910、スピーカ911、無線通信インターフェース913、アンテナスイッチ914、アンテナ915、バス917、バッテリー918及び補助コントローラ919を備える。
プロセッサ901は、例えばCPU(Central Processing Unit)又はSoC(System on Chip)であってよく、スマートフォン900のアプリケーションレイヤ及びその他のレイヤの機能を制御する。メモリ902は、RAM(Random Access Memory)及びROM(Read Only Memory)を含み、プロセッサ901により実行されるプログラム及びデータを記憶する。ストレージ903は、半導体メモリ又はハードディスクなどの記憶媒体を含み得る。外部接続インターフェース904は、メモリカード又はUSB(Universal Serial Bus)デバイスなどの外付けデバイスをスマートフォン900へ接続するためのインターフェースである。
カメラ906は、例えば、CCD(Charge Coupled Device)又はCMOS(Complementary Metal Oxide Semiconductor)などの撮像素子を有し、撮像画像を生成する。センサ907は、例えば、測位センサ、ジャイロセンサ、地磁気センサ及び加速度センサなどのセンサ群を含み得る。マイクロフォン908は、スマートフォン900へ入力される音声を音声信号へ変換する。入力デバイス909は、例えば、表示デバイス910の画面上へのタッチを検出するタッチセンサ、キーパッド、キーボード、ボタン又はスイッチなどを含み、ユーザからの操作又は情報入力を受け付ける。表示デバイス910は、液晶ディスプレイ(LCD)又は有機発光ダイオード(OLED)ディスプレイなどの画面を有し、スマートフォン900の出力画像を表示する。スピーカ911は、スマートフォン900から出力される音声信号を音声に変換する。
無線通信インターフェース913は、IEEE802.11a、11b、11g、11n、11ac及び11adなどの無線LAN標準のうちの1つ以上をサポートし、無線通信を実行する。無線通信インターフェース913は、インフラストラクチャーモードにおいては、他の装置と無線LANアクセスポイントを介して通信し得る。また、無線通信インターフェース913は、アドホックモード又はWi-Fi Direct等のダイレクト通信モードにおいては、他の装置と直接的に通信し得る。なお、Wi-Fi Directでは、アドホックモードとは異なり2つの端末の一方がアクセスポイントとして動作するが、通信はそれら端末間で直接的に行われる。無線通信インターフェース913は、典型的には、ベースバンドプロセッサ、RF(Radio Frequency)回路及びパワーアンプなどを含み得る。無線通信インターフェース913は、通信制御プログラムを記憶するメモリ、当該プログラムを実行するプロセッサ及び関連する回路を集積したワンチップのモジュールであってもよい。無線通信インターフェース913は、無線LAN方式に加えて、近距離無線通信方式、近接無線通信方式又はセルラ通信方式などの他の種類の無線通信方式をサポートしてもよい。アンテナスイッチ914は、無線通信インターフェース913に含まれる複数の回路(例えば、異なる無線通信方式のための回路)の間でアンテナ915の接続先を切り替える。アンテナ915は、単一の又は複数のアンテナ素子(例えば、MIMOアンテナを構成する複数のアンテナ素子)を有し、無線通信インターフェース913による無線信号の送信及び受信のために使用される。また、IEEE802.16、3GPP仕様(例えば、W-CDMA、GSM(登録商標)、WiMAX、WiMAX2、LTE、LTE-A)等の公衆回線に接続するための無線通信インターフェースの機能を有し、公衆回線と通信し得る。
なお、図45の例に限定されず、スマートフォン900は、複数のアンテナ(例えば、無線LAN用のアンテナ及び近接無線通信方式用のアンテナ、公衆回線通信用アンテナなど)を備えてもよい。その場合に、アンテナスイッチ914は、スマートフォン900の構成から省略されてもよい。
バス917は、プロセッサ901、メモリ902、ストレージ903、外部接続インターフェース904、カメラ906、センサ907、マイクロフォン908、入力デバイス909、表示デバイス910、スピーカ911、無線通信インターフェース913及び補助コントローラ919を互いに接続する。バッテリー918は、図中に破線で部分的に示した給電ラインを介して、図45に示したスマートフォン900の各ブロックへ電力を供給する。補助コントローラ919は、例えば、スリープモードにおいて、スマートフォン900の必要最低限の機能を動作させる。
図45に示したスマートフォン900において、図3を用いて説明した制御部140、図4を用いて説明した制御部270は、無線通信インターフェース913において実装されてもよい。また、これら機能の少なくとも一部は、プロセッサ901又は補助コントローラ919において実装されてもよい。
なお、スマートフォン900は、プロセッサ901がアプリケーションレベルでアクセスポイント機能を実行することにより、無線アクセスポイント(ソフトウェアAP)として動作してもよい。また、無線通信インターフェース913が無線アクセスポイント機能を有していてもよい。
[3-2.第2の応用例]
図46は、本開示に係る技術が適用され得るカーナビゲーション装置920の概略的な構成の一例を示すブロック図である。カーナビゲーション装置920は、プロセッサ921、メモリ922、GPS(Global Positioning System)モジュール924、センサ925、データインターフェース926、コンテンツプレーヤ927、記憶媒体インターフェース928、入力デバイス929、表示デバイス930、スピーカ931、無線通信インターフェース933、アンテナスイッチ934、アンテナ935及びバッテリー938を備える。
プロセッサ921は、例えばCPU又はSoCであってよく、カーナビゲーション装置920のナビゲーション機能及びその他の機能を制御する。メモリ922は、RAM及びROMを含み、プロセッサ921により実行されるプログラム及びデータを記憶する。
GPSモジュール924は、GPS衛星から受信されるGPS信号を用いて、カーナビゲーション装置920の位置(例えば、緯度、経度及び高度)を測定する。センサ925は、例えば、ジャイロセンサ、地磁気センサ及び気圧センサなどのセンサ群を含み得る。データインターフェース926は、例えば、図示しない端子を介して車載ネットワーク941に接続され、車速データなどの車両側で生成されるデータを取得する。
コンテンツプレーヤ927は、記憶媒体インターフェース928に挿入される記憶媒体(例えば、CD又はDVD)に記憶されているコンテンツを再生する。入力デバイス929は、例えば、表示デバイス930の画面上へのタッチを検出するタッチセンサ、ボタン又はスイッチなどを含み、ユーザからの操作又は情報入力を受け付ける。表示デバイス930は、LCD又はOLEDディスプレイなどの画面を有し、ナビゲーション機能又は再生されるコンテンツの画像を表示する。スピーカ931は、ナビゲーション機能又は再生されるコンテンツの音声を出力する。
無線通信インターフェース933は、IEEE802.11a、11b、11g、11n、11ac及び11adなどの無線LAN標準のうちの1つ以上をサポートし、無線通信を実行する。無線通信インターフェース933は、インフラストラクチャーモードにおいては、他の装置と無線LANアクセスポイントを介して通信し得る。また、無線通信インターフェース933は、アドホックモード又はWi-Fi Direct等のダイレクト通信モードにおいては、他の装置と直接的に通信し得る。無線通信インターフェース933は、典型的には、ベースバンドプロセッサ、RF回路及びパワーアンプなどを含み得る。無線通信インターフェース933は、通信制御プログラムを記憶するメモリ、当該プログラムを実行するプロセッサ及び関連する回路を集積したワンチップのモジュールであってもよい。無線通信インターフェース933は、無線LAN方式に加えて、近距離無線通信方式、近接無線通信方式又はセルラ通信方式などの他の種類の無線通信方式をサポートしてもよい。アンテナスイッチ934は、無線通信インターフェース933に含まれる複数の回路の間でアンテナ935の接続先を切り替える。アンテナ935は、単一の又は複数のアンテナ素子を有し、無線通信インターフェース933による無線信号の送信及び受信のために使用される。
なお、図46の例に限定されず、カーナビゲーション装置920は、複数のアンテナを備えてもよい。その場合に、アンテナスイッチ934は、カーナビゲーション装置920の構成から省略されてもよい。
バッテリー938は、図中に破線で部分的に示した給電ラインを介して、図46に示したカーナビゲーション装置920の各ブロックへ電力を供給する。また、バッテリー938は、車両側から給電される電力を蓄積する。
図46に示したカーナビゲーション装置920において、図3を用いて説明した制御部140、図4を用いて説明した制御部270は、無線通信インターフェース933において実装されてもよい。また、これら機能の少なくとも一部は、プロセッサ921において実装されてもよい。
また、本開示に係る技術は、上述したカーナビゲーション装置920の1つ以上のブロックと、車載ネットワーク941と、車両側モジュール942とを含む車載システム(又は車両)940として実現されてもよい。車両側モジュール942は、車速、エンジン回転数又は故障情報などの車両側データを生成し、生成したデータを車載ネットワーク941へ出力する。
なお、上述の実施の形態は本技術を具現化するための一例を示したものであり、実施の形態における事項と、特許請求の範囲における発明特定事項とはそれぞれ対応関係を有する。同様に、特許請求の範囲における発明特定事項と、これと同一名称を付した本技術の実施の形態における事項とはそれぞれ対応関係を有する。ただし、本技術は実施の形態に限定されるものではなく、その要旨を逸脱しない範囲において実施の形態に種々の変形を施すことにより具現化することができる。
また、上述の実施の形態において説明した処理手順は、これら一連の手順を有する方法として捉えてもよく、また、これら一連の手順をコンピュータに実行させるためのプログラム乃至そのプログラムを記憶する記録媒体として捉えてもよい。この記録媒体として、例えば、CD(Compact Disc)、MD(MiniDisc)、DVD(Digital Versatile Disc)、メモリカード、ブルーレイディスク(Blu-ray(登録商標)Disc)等を用いることができる。
なお、本明細書に記載された効果はあくまで例示であって、限定されるものではなく、また、他の効果があってもよい。
なお、本技術は以下のような構成もとることができる。
(1)
他の情報処理装置との間でデータ伝送を行う無線通信部と、
少なくとも自装置および第1情報処理装置により形成されるネットワークのグループオーナーの役割を担う前記第1情報処理装置との間で前記データ伝送を行っている間に第2情報処理装置との間で新たに前記データ伝送を行う場合に、前記第1情報処理装置および前記第2情報処理装置のそれぞれに前記データ伝送を行うための役割を変更するための情報をやりとりする制御を行う制御部と
を具備する情報処理装置。
(2)
前記制御部は、前記グループオーナーの役割の変更を前記第1情報処理装置が許可するか否かを示す情報と、前記情報処理装置および前記第1情報処理装置のそれぞれがコンカレント機能を備えるか否かを示す情報と、前記情報処理装置が複数の機器との間で無線通信を行う複数動作に対応可能か否かを示す情報とのうちの少なくとも1つを、前記情報としてやりとりする制御を行う前記(1)に記載の情報処理装置。
(3)
前記制御部は、前記情報処理装置および前記第1情報処理装置間でやりとりされるメッセージに前記情報を含めてやりとりする制御を行う前記(1)または(2)に記載の情報処理装置。
(4)
前記制御部は、前記グループオーナーの役割の変更を前記第1情報処理装置が許可している場合に、前記グループオーナーの役割を前記第1情報処理装置から前記情報処理装置に変更した後に、前記第2情報処理装置との接続処理を行うように制御する前記(1)から(3)のいずれかに記載の情報処理装置。
(5)
前記制御部は、前記グループオーナーの役割の変更を前記第1情報処理装置が許可し、かつ、前記情報処理装置および前記第1情報処理装置の双方がコンカレント機能を備える場合に、前記グループオーナーの役割を前記第1情報処理装置から前記情報処理装置に変更した後に、前記情報処理装置および前記第1情報処理装置の切断処理を行い、前記第1情報処理装置および前記第2情報処理装置のそれぞれに前記データ伝送を行うための接続処理を行うように制御する前記(1)から(3)のいずれかに記載の情報処理装置。
(6)
前記制御部は、前記グループオーナーの役割の変更を前記第1情報処理装置が許可している場合において、前記情報処理装置がグループオーナーであり、かつ、前記第1情報処理装置がクライアントである場合の接続設定情報を前記第2情報処理装置が保持しないときには、前記グループオーナーの役割を前記第1情報処理装置から前記情報処理装置に変更する前に前記情報処理装置および前記第1情報処理装置間でやりとりされるメッセージに当該接続設定情報を取得するための情報を含めるように制御する前記(1)から(5)のいずれかに記載の情報処理装置。
(7)
前記制御部は、前記情報処理装置および前記第1情報処理装置間でやりとりされるメッセージに、DHCP(Dynamic Host Configuration Protocol)に関する情報と、通信中のMAC(Media Access Control)アドレス情報と、HDCP(High-bandwidth Digital Content Protection system)を動作させた状態でIP(Internet Protocol)アドレスを移動させるための情報と、Persistentに必要な情報との少なくとも1つを含めてやりとりする制御を行う前記(1)から(6)のいずれかに記載の情報処理装置。
(8)
前記制御部は、前記役割の変更後の接続形態における接続設定情報を保持していない場合には、既に共有されている前記役割の変更前の第1の接続設定情報に、予め定められた規則を適用して、前記役割の変更後の第2の接続設定情報を生成する前記(1)から(7)のいずれかに記載の情報処理装置。
(9)
前記制御部は、前記第2の接続設定情報を生成する場合に、前記情報処理装置および前記第1情報処理装置のみが有する前記第1の接続設定情報のみを用いる前記(8)に記載の情報処理装置。
(10)
前記制御部は、前記グループオーナーの役割の変更を前記第1情報処理装置が未許可であり、かつ、前記情報処理装置が複数動作に対応していない場合には、前記第1情報処理装置および前記第2情報処理装置のうちから前記データ伝送を行う情報処理装置を選択するための選択情報をユーザに提供する前記(1)から(3)、(7)から(9)のいずれかに記載の情報処理装置。
(11)
前記制御部は、前記データ伝送の対象となる画像情報と、前記選択情報とを異なる管理とする前記(10)に記載の情報処理装置。
(12)
前記制御部は、前記グループオーナーの役割の変更を前記第1情報処理装置が許可している場合に、前記グループオーナーの役割を前記第1情報処理装置から前記情報処理装置に変更したときには、その旨を通知するための通知情報をユーザに提供する前記(1)から(3)、(7)から(9)のいずれかに記載の情報処理装置。
(13)
前記無線通信部は、Wi-Fi(Wireless Fidelity) CERTIFIED Miracast仕様に従って前記他の情報処理装置との間で前記データ伝送を行う前記(1)から(12)のいずれかに記載の情報処理装置。
(14)
少なくとも自装置および第1情報処理装置により形成されるネットワークのグループオーナーの役割を担う前記第1情報処理装置との間でデータ伝送を行っている間に第2情報処理装置との間で新たに前記データ伝送を行う場合に、前記第1情報処理装置および前記第2情報処理装置のそれぞれに前記データ伝送を行うための役割を変更するための情報をやりとりする制御を行う情報処理方法。
(15)
少なくとも自装置および第1情報処理装置により形成されるネットワークのグループオーナーの役割を担う前記第1情報処理装置との間でデータ伝送を行っている間に第2情報処理装置との間で新たに前記データ伝送を行う場合に、前記第1情報処理装置および前記第2情報処理装置のそれぞれに前記データ伝送を行うための役割を変更するための情報をやりとりする制御をコンピュータに実行させるプログラム。
10 通信システム
41 ソース機器
42 第1シンク機器
43 第2シンク機器
100 ソース機器
110 アンテナ
120 無線通信部
130 制御信号受信部
140 制御部
150 画像・音声信号生成部
160 画像・音声圧縮部
170 ストリーム送信部
180 操作受付部
190 表示部
200 第1シンク機器
210 アンテナ
220 無線通信部
230 ストリーム受信部
240 画像・音声展開部
250 画像・音声出力部
251 表示部
252 音声出力部
260 ユーザ情報取得部
270 制御部
280 制御信号送信部
290 管理情報保持部
300 第2シンク機器
301 表示部
320 機器の役割管理部
900 スマートフォン
901 プロセッサ
902 メモリ
903 ストレージ
904 外部接続インターフェース
906 カメラ
907 センサ
908 マイクロフォン
909 入力デバイス
910 表示デバイス
911 スピーカ
913 無線通信インターフェース
914 アンテナスイッチ
915 アンテナ
917 バス
918 バッテリー
919 補助コントローラ
920 カーナビゲーション装置
921 プロセッサ
922 メモリ
924 GPSモジュール
925 センサ
926 データインターフェース
927 コンテンツプレーヤ
928 記憶媒体インターフェース
929 入力デバイス
930 表示デバイス
931 スピーカ
933 無線通信インターフェース
934 アンテナスイッチ
935 アンテナ
938 バッテリー
941 車載ネットワーク
942 車両側モジュール

Claims (14)

  1. 他の情報処理装置との間でデータ伝送を行う無線通信部と、
    少なくとも自装置および第1情報処理装置により形成されるネットワークのグループオーナーの役割を担う前記第1情報処理装置との間で前記データ伝送を行っている間に第2情報処理装置との間で新たに前記データ伝送を行う場合に、前記第1情報処理装置および前記第2情報処理装置のそれぞれに前記データ伝送を行うための役割を変更するための情報をやりとりする制御を行う制御部と
    を具備し、
    前記制御部は、前記グループオーナーの役割の変更を前記第1情報処理装置が許可するか否かを示す情報と、前記自装置および前記第1情報処理装置のそれぞれがコンカレント機能を備えるか否かを示す情報と、前記自装置が複数の機器との間で無線通信を行う複数動作に対応可能か否かを示す情報とのうちの少なくとも1つを、前記情報としてやりとりする制御を行い、
    前記制御部は、前記グループオーナーの役割の変更を前記第1情報処理装置が許可している場合において、前記自装置がグループオーナーであり、かつ、前記第1情報処理装置がクライアントである場合の接続設定情報を前記第2情報処理装置が保持しないときには、前記グループオーナーの役割を前記第1情報処理装置から前記自装置に変更する前に前記自装置と前記第1情報処理装置と前記第2情報処理装置との間でやりとりされる特定のメッセージに当該接続設定情報を取得するための情報を含めるように制御する
    情報処理装置。
  2. 前記制御部は、前記自装置および前記第1情報処理装置間でやりとりされるメッセージに前記データ伝送を行うための役割を変更するための情報を含めてやりとりする制御を行う請求項1に記載の情報処理装置。
  3. 前記制御部は、前記グループオーナーの役割の変更を前記第1情報処理装置が許可している場合に、前記グループオーナーの役割を前記第1情報処理装置から前記自装置に変更した後に、前記第2情報処理装置との接続処理を行うように制御する請求項1または2に記載の情報処理装置。
  4. 前記グループオーナーの役割を担う前記第1情報処理装置に、前記自装置がクライアントとして所定回線により接続されており、
    前記制御部は、前記グループオーナーの役割の変更を前記第1情報処理装置が許可し、かつ、前記自装置および前記第1情報処理装置の双方がコンカレント機能を備える場合に、新たなグループオーナーの役割を担う前記自装置に前記第1情報処理装置を新たなクライアントとして新たな回線により接続した後に、前記所定回線の切断処理を行い、前記第2情報処理装置に前記データ伝送を行うための接続処理を行うように制御する請求項1から3のいずれかに記載の情報処理装置。
  5. 前記特定のメッセージは、グループオーナーの変更の要求に対して返信されるGO組替Responseであり、
    前記第1情報処理装置は、前記自装置からの前記GO組替Responseを前記第2情報処理装置に転送する
    請求項1から4のいずれかに記載の情報処理装置。
  6. 前記制御部は、前記自装置および前記第1情報処理装置間でやりとりされるメッセージに、DHCP(Dynamic Host Configuration Protocol)に関する情報と、通信中のMAC(Media Access Control)アドレス情報と、HDCP(High-bandwidth Digital Content Protection system)を動作させた状態でIP(Internet Protocol)アドレスを移動させるための情報と、Persistentに必要な情報との少なくとも1つを含めてやりとりする制御を行う請求項1から5のいずれかに記載の情報処理装置。
  7. 前記制御部は、前記役割の変更後の接続形態における接続設定情報を保持していない場合には、既に共有されている前記役割の変更前の第1の接続設定情報に、予め定められた規則を適用して、前記役割の変更後の第2の接続設定情報を生成する請求項1からのいずれかに記載の情報処理装置。
  8. 前記制御部は、前記第2の接続設定情報を生成する場合に、前記自装置および前記第1情報処理装置のみが有する前記第1の接続設定情報のみを用いる請求項7記載の情報処理装置。
  9. 前記制御部は、前記グループオーナーの役割の変更を前記第1情報処理装置が未許可であり、かつ、前記自装置が複数動作に対応していない場合には、前記第1情報処理装置および前記第2情報処理装置のうちから前記データ伝送を行う情報処理装置を選択するための選択情報をユーザに提供する請求項1から3、6から8のいずれかに記載の情報処理装置。
  10. 前記制御部は、前記データ伝送の対象となる画像情報と、前記選択情報とを異なる管理とする請求項9記載の情報処理装置。
  11. 前記制御部は、前記グループオーナーの役割の変更を前記第1情報処理装置が許可している場合に、前記グループオーナーの役割を前記第1情報処理装置から前記自装置に変更したときには、その旨を通知するための通知情報をユーザに提供する請求項1から3、6から8のいずれかに記載の情報処理装置。
  12. 前記無線通信部は、Wi-Fi(Wireless Fidelity) CERTIFIED Miracast仕様に従って前記他の情報処理装置との間で前記データ伝送を行う請求項1から11のいずれかに記載の情報処理装置。
  13. 少なくとも自装置および第1情報処理装置により形成されるネットワークのグループオーナーの役割を担う前記第1情報処理装置との間でデータ伝送を行っている間に第2情報処理装置との間で新たに前記データ伝送を行う場合に、前記第1情報処理装置および前記第2情報処理装置のそれぞれに前記データ伝送を行うための役割を変更するための情報をやりとりする制御を前記自装置である情報処理装置内の制御部が行う情報処理方法であって、
    前記制御部は、前記グループオーナーの役割の変更を前記第1情報処理装置が許可するか否かを示す情報と、前記自装置および前記第1情報処理装置のそれぞれがコンカレント機能を備えるか否かを示す情報と、前記自装置が複数の機器との間で無線通信を行う複数動作に対応可能か否かを示す情報とのうちの少なくとも1つを、前記情報としてやりとりする制御を行い、
    前記制御部は、前記グループオーナーの役割の変更を前記第1情報処理装置が許可している場合において、前記自装置がグループオーナーであり、かつ、前記第1情報処理装置がクライアントである場合の接続設定情報を前記第2情報処理装置が保持しないときには、前記グループオーナーの役割を前記第1情報処理装置から前記自装置に変更する前に前記自装置と前記第1情報処理装置と前記第2情報処理装置との間でやりとりされる特定のメッセージに当該接続設定情報を取得するための情報を含めるように制御する
    情報処理方法。
  14. 少なくとも自装置および第1情報処理装置により形成されるネットワークのグループオーナーの役割を担う前記第1情報処理装置との間でデータ伝送を行っている間に第2情報処理装置との間で新たに前記データ伝送を行う場合に、前記第1情報処理装置および前記第2情報処理装置のそれぞれに前記データ伝送を行うための役割を変更するための情報をやりとりする制御をコンピュータに実行させるプログラムであって、
    前記グループオーナーの役割の変更を前記第1情報処理装置が許可するか否かを示す情報と、前記自装置および前記第1情報処理装置のそれぞれがコンカレント機能を備えるか否かを示す情報と、前記自装置が複数の機器との間で無線通信を行う複数動作に対応可能か否かを示す情報とのうちの少なくとも1つを、前記情報としてやりとりし、
    前記グループオーナーの役割の変更を前記第1情報処理装置が許可している場合において、前記自装置がグループオーナーであり、かつ、前記第1情報処理装置がクライアントである場合の接続設定情報を前記第2情報処理装置が保持しないときには、前記グループオーナーの役割を前記第1情報処理装置から前記自装置に変更する前に前記自装置と前記第1情報処理装置と前記第2情報処理装置との間でやりとりされる特定のメッセージに当該接続設定情報を取得するための情報を含めるようにする
    前記制御を前記コンピュータに実行させるプログラム。
JP2017511499A 2015-04-08 2016-03-03 情報処理装置、情報処理方法およびプログラム Active JP7037358B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015079336 2015-04-08
JP2015079336 2015-04-08
PCT/JP2016/056563 WO2016163181A1 (ja) 2015-04-08 2016-03-03 情報処理装置、情報処理方法およびプログラム

Publications (2)

Publication Number Publication Date
JPWO2016163181A1 JPWO2016163181A1 (ja) 2018-02-01
JP7037358B2 true JP7037358B2 (ja) 2022-03-16

Family

ID=57073168

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017511499A Active JP7037358B2 (ja) 2015-04-08 2016-03-03 情報処理装置、情報処理方法およびプログラム

Country Status (4)

Country Link
US (1) US10841165B2 (ja)
EP (1) EP3282810B1 (ja)
JP (1) JP7037358B2 (ja)
WO (1) WO2016163181A1 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10564921B2 (en) * 2016-03-09 2020-02-18 Ricoh Company, Ltd. Display device, display method, and display system for determining image display size
US10084678B2 (en) 2016-04-19 2018-09-25 International Business Machines Corporation Managing connections for data communications using heartbeat messaging
US10827001B2 (en) * 2016-07-27 2020-11-03 International Business Machines Corporation Managing connections for data communications
KR102599479B1 (ko) * 2016-11-02 2023-11-08 삼성전자주식회사 근거리통신 연결을 위한 전자장치, 시스템 및 방법
JP6874381B2 (ja) * 2017-01-16 2021-05-19 ブラザー工業株式会社 通信装置
JP6862872B2 (ja) 2017-02-02 2021-04-21 ブラザー工業株式会社 通信装置
WO2019009059A1 (ja) * 2017-07-05 2019-01-10 アルプス電気株式会社 通信装置及び通信方法
US10742747B2 (en) 2017-07-06 2020-08-11 International Business Machines Corporation Managing connections for data communications following socket failure
US20190090252A1 (en) * 2017-09-20 2019-03-21 Lg Electronics Inc. Method and apparatus for reusing p2p connection in wireless communication system

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006319466A (ja) 2005-05-10 2006-11-24 Brother Ind Ltd 情報配信システム、処理プログラム、管理プログラム及び情報配信方法等
JP2011244151A (ja) 2010-05-17 2011-12-01 Sony Corp 無線通信装置、無線通信方法、プログラム、および無線通信システム

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101598886B1 (ko) * 2009-10-13 2016-03-03 삼성전자주식회사 이동통신 단말기에서 무선랜을 이용한 피어투피어 연결 방법 및 장치
JP5853227B2 (ja) * 2010-08-26 2016-02-09 パナソニックIpマネジメント株式会社 マルチホップ通信方法、マルチホップ通信システム、および通信端末
KR101763171B1 (ko) * 2011-06-13 2017-08-14 삼성전자주식회사 단말 간의 피어투피어 연결 방법 및 장치
WO2013046088A1 (en) * 2011-09-27 2013-04-04 Koninklijke Philips Electronics N.V. Management of group secrets by group members
EP2795993A4 (en) 2011-12-20 2015-12-16 Intel Corp WIRELESS COMMUNICATION DEVICES AND METHOD FOR PRODUCING WIRELESS PEER TO PEER (P2P) CONNECTIONS BETWEEN DEVICES
JP5978901B2 (ja) 2012-10-09 2016-08-24 ソニー株式会社 無線通信装置、プログラム及び通信制御方法
JP5929719B2 (ja) 2012-11-12 2016-06-08 ソニー株式会社 情報処理装置、通信システムおよび情報処理方法
KR101489675B1 (ko) * 2012-12-20 2015-02-04 주식회사 팬택 와이파이 다이렉트 장치의 스캔 및 접속 방법, 이를 위한 단말 장치
JP6271839B2 (ja) 2013-01-25 2018-01-31 キヤノン株式会社 通信装置、通信装置の制御方法、プログラム
JP2014212412A (ja) 2013-04-18 2014-11-13 ソニー株式会社 情報処理装置、無線通信システム、及び情報処理方法
JP6173011B2 (ja) * 2013-04-24 2017-08-02 キヤノン株式会社 通信装置、通信装置の制御方法、プログラム
US9197680B2 (en) * 2013-05-23 2015-11-24 Qualcomm Incorporated Establishing and controlling audio and voice back channels of a Wi-Fi display connection
KR102181777B1 (ko) * 2013-05-23 2020-11-24 삼성전자주식회사 무선 도킹 네트워크에서 도키(dockee)와 주변 장치 사이의 직접 연결을 위한 방법 및 장치
US9942728B2 (en) * 2014-02-05 2018-04-10 Sony Corporation Device and method of determining a group owner in a wireless network
US9532193B2 (en) * 2014-03-14 2016-12-27 Blackberry Limited Changing topology of wireless peer-to-peer group
WO2015199680A1 (en) * 2014-06-25 2015-12-30 Intel Corporation Techniques to enhance wireless personal area network performance under interference conditions
US9654552B2 (en) * 2014-08-21 2017-05-16 Google Technology Holdings LLC Methods and systems for delegating group ownership for the formation of a new group
US9681365B2 (en) * 2014-10-29 2017-06-13 Aruba Networks, Inc. Group owner (GO) negotiation in peer to peer (P2P) communications to obtain group owner role

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006319466A (ja) 2005-05-10 2006-11-24 Brother Ind Ltd 情報配信システム、処理プログラム、管理プログラム及び情報配信方法等
JP2011244151A (ja) 2010-05-17 2011-12-01 Sony Corp 無線通信装置、無線通信方法、プログラム、および無線通信システム

Also Published As

Publication number Publication date
US10841165B2 (en) 2020-11-17
US20180069761A1 (en) 2018-03-08
EP3282810A4 (en) 2018-10-10
WO2016163181A1 (ja) 2016-10-13
EP3282810B1 (en) 2020-07-29
EP3282810A1 (en) 2018-02-14
JPWO2016163181A1 (ja) 2018-02-01

Similar Documents

Publication Publication Date Title
JP7037358B2 (ja) 情報処理装置、情報処理方法およびプログラム
JP6897566B2 (ja) 装置及び方法
JP6750608B2 (ja) 情報処理装置、情報処理方法およびプログラム
US9775107B2 (en) Information processing device, information processing system, and information processing method
KR101653671B1 (ko) Wi-Fi 디스플레이 연결의 오디오 및 음성 백 채널들의 설정 및 제어
US10805672B2 (en) Information processing device, information processing system, and information processing method
WO2015151962A1 (ja) 情報処理装置および情報処理方法
JP6620759B2 (ja) 情報処理装置、情報処理方法およびプログラム
JP7123594B2 (ja) 通信装置、制御方法、およびプログラム
KR20150047278A (ko) 기기 간 자동 무선 통신 연결되는 영상 표시장치 및 이에 따른 영상표시 방법
WO2017018042A1 (ja) 情報処理装置及び情報処理方法、並びにソース機器
US20180048933A1 (en) Information processing apparatus, communication system, information processing method and non-transitory computer readable medium
JP2017085246A (ja) 通信装置およびその制御方法、通信システムとプログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190107

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190107

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200324

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200515

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20201104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210129

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20210129

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20210209

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20210216

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20210430

C211 Notice of termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C211

Effective date: 20210511

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20210629

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20210914

C13 Notice of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: C13

Effective date: 20211026

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211111

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211214

C23 Notice of termination of proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C23

Effective date: 20211228

C03 Trial/appeal decision taken

Free format text: JAPANESE INTERMEDIATE CODE: C03

Effective date: 20220208

C30A Notification sent

Free format text: JAPANESE INTERMEDIATE CODE: C3012

Effective date: 20220208

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220304

R150 Certificate of patent or registration of utility model

Ref document number: 7037358

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150