JP7183271B2 - 電子装置、ユーザ端末装置及びその制御方法 - Google Patents

Description

本発明は、電子装置、ユーザ端末装置及びその制御方法に関し、より詳細には、電子装置とユーザ端末装置との接続を行う電子装置、ユーザ端末装置及びその制御方法に関する。

電子技術の発達により、多様な電子製品が開発及び普及されている。特に、無線通信技術が発達するにつれ、家庭内の様々な電子装置に通信機能を組み込み、ネットワークで接続している。

このように、電子装置をネットワークで接続することで、一つの端末装置で複数の電子装置を手軽に制御することができ、電子装置のステータス情報を確認することができる。

一方、このような電子装置をネットワークに接続し、端末装置で識別するためには、それぞれの電子装置と端末装置との間の初期接続の設定段階が必要であり、このような設定段階は数多くの手順が求められる。

なお、初期接続の設定段階の後も、従来の電子装置との接続解除後、新たな電子装置との接続の際には、ユーザはもう一度数段階の認証手順を経なければならないため、不都合であった。

そのため、端末装置で手軽に電子装置を識別することができ、最初の接続又は再接続の際でも、複数の認証手順を必要としない方法が求められている。

特開第２０１７－１０２７８３号公報 特開第２０１６－１９４７５６号公報

そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、ユーザ端末装置からブロードキャストされた信号又は映像に基づいて、電子装置とユーザ端末装置との間で接続ができる電子装置、ユーザ端末装置及びその制御方法を提供することにある。

上述の目的を達成するための本発明の一実施形態に係る電子装置は、通信部と、保存部と、ディスプレイと、前記通信部を介してユーザ端末装置から予め設定された接続リクエスト信号が受信されると、前記ディスプレイを介して出力される第１映像を前記保存部に保存し、前記通信部を介して前記ユーザ端末装置から第２映像が受信されると、前記第１映像に含まれたオブジェクトと同様のオブジェクトを前記第２映像で識別し、前記第１映像に含まれた前記オブジェクトの変化パターン、及び前記第２映像で識別された前記オブジェクトの変化パターンが同様である場合、前記予め設定された接続リクエスト信号に対する認証情報を前記ユーザ端末装置に伝送するように前記通信部を制御するプロセッサとを含む。

ここで、前記プロセッサは、前記ユーザ端末装置から前記通信部の接続されたネットワーク装置を介して伝送される前記予め設定された接続リクエスト信号を受信し、前記認証情報に基づいた前記ユーザ端末装置の通信接続リクエストに応じて、前記ユーザ端末装置とＰ２Ｐ（Ｐｅｅｒ－ｔｏ－Ｐｅｅｒ）通信を行うように前記通信部を制御してよい。

なお、前記オブジェクトは、前記第１映像及び前記第２映像のそれぞれに含まれたテキスト情報、及び前記第１映像及び前記第２映像のそれぞれのＲＧＢ情報のうち、少なくとも１つであってよい。

なお、前記プロセッサは、前記ユーザ端末装置から他電子装置に対する認証情報が受信されると、受信された認証情報に基づいて前記他電子装置と通信を行ってよい。

なお、前記プロセッサは、前記他電子装置に前記他電子装置の機能情報をリクエストし、前記機能情報が受信されると、前記電子装置の機能情報と前記他電子装置の機能情報に基づいて、前記他電子装置と連動可能な機能を識別し、前記識別された機能を行ってよい。

ここで、前記プロセッサは、前記電子装置の機能がディスプレイ機能を含み、前記他電子装置の機能情報にディスプレイ機能が含まれている場合、前記他電子装置とミラーリング機能が可能であると識別し、前記他電子装置にディスプレイされた映像を受信し、前記ミラーリング機能を行ってよい。

一方、本発明の一実施形態に係るユーザ端末装置は、入力部と、撮影部と、通信部と、前記入力部を介して、ユーザ命令に応じて予め設定された接続リクエスト信号を電子装置に伝送し、予め設定された時間が経過した後で、前記撮影部を介して撮影された映像を前記電子装置に伝送し、前記電子装置から前記予め設定された接続リクエスト信号に対する認証情報が受信されると、前記認証情報に基づいて前記電子装置とＰ２Ｐ（Ｐｅｅｒ－ｔｏ－Ｐｅｅｒ）通信を行うプロセッサとを含む。

ここで、前記プロセッサは、前記通信部の接続されたネットワーク装置を介して、前記予め設定された接続リクエスト信号を前記電子装置にブロードキャストし、予め設定された時間が経過した後で、前記ネットワーク装置を介して前記撮影された映像を前記電子装置にブロードキャストする前記通信部を制御してよい。

なお、前記プロセッサは、前記予め設定された接続リクエスト信号を伝送した後、前記予め設定された時間の間、撮影を行うように前記撮影部を制御してよい。

なお、前記プロセッサは、ユーザの撮影命令に応じて撮影を開始し、前記予め設定された接続リクエスト信号を伝送した後、前記撮影部を介して撮影された映像を前記電子装置に伝送してよい。

なお、本発明の一実施形態に係るユーザ端末装置は、ディスプレイと、従来接続が行われた他電子装置に対する接続情報が保存された保存部とを更に含み、前記プロセッサは、外部電子装置と接続を行うためのモードに移行すると、前記保存部に保存された情報に基づいて、前記他電子装置に対するイメージを前記ディスプレイ上にディスプレイしてよい。

ここで、前記プロセッサは、予め設定された命令に応じて、前記他電子装置に対する接続情報を前記電子装置に伝送するように前記通信部を制御し、前記接続情報は、前記電子装置が前記他電子装置とＰ２Ｐ通信を行うための認証情報を含んでよい。

なお、前記接続情報は、前記電子装置が前記他電子装置とＰ２Ｐ通信を行うための認証情報及び前記他電子装置の機能情報を含み、前記プロセッサは、前記電子装置に前記電子装置の機能情報をリクエストし、前記電子装置の機能情報及び前記他電子装置の機能情報に基づいて、前記電子装置と前記他電子装置と間で連動可能な機能を識別し、前記識別された機能を前記ディスプレイを介して提供してよい。

一方、前記撮影部を介して撮影された映像は、前記電子装置に備えられたディスプレイが撮影された映像であってよい。

一方、本発明の一実施形態に係るユーザ端末装置の制御方法は、ユーザ命令に応じて予め設定された接続リクエスト信号を電子装置に伝送するステップと、予め設定された時間が経過した後で、前記ユーザ端末装置の撮影部を介して撮影された映像を前記電子装置に伝送するステップと、前記電子装置から前記予め設定された接続リクエスト信号に対する認証情報が受信されると、前記認証情報に基づいて前記電子装置とＰ２Ｐ（Ｐｅｅｒ－ｔｏ－Ｐｅｅｒ）通信を行うステップとを含む。

ここで、前記予め設定された接続リクエスト信号を前記電子装置に伝送するステップは、前記ユーザ端末装置の接続されたネットワーク装置を介して前記予め設定された接続リクエスト信号を前記電子装置にブロードキャストし、前記撮影された映像を前記電子装置に伝送するステップは、前記予め設定された時間が経過した後で、前記ネットワーク装置を介して前記撮影された映像を前記電子装置にブロードキャストしてよい。

なお、前記撮影された映像を前記電子装置に伝送するステップは、ユーザの撮影命令に応じて撮影を開始し、前記予め設定された接続リクエスト信号を伝送した後、前記撮影部を介して撮影された映像を前記電子装置に伝送してよい。

本発明の一実施形態に係る前記ユーザ端末装置は、従来接続が行われた他電子装置に対する接続情報を含み、制御方法は、外部電子装置と接続を行うためのモードに移行すると、前記他電子装置に対する接続情報に基づいて、前記他電子装置に対するイメージをディスプレイするステップを更に含んでよい。

なお、予め設定された命令に応じて、前記他電子装置に対する接続情報を前記電子装置に伝送するステップを更に含み、前記接続情報は、前記電子装置が前記他電子装置とＰ２Ｐ通信を行うための認証情報を含んでよい。

なお、前記接続情報は、前記電子装置が前記他電子装置とＰ２Ｐ通信を行うための認証情報及び前記他電子装置の機能情報を含み、前記電子装置に前記電子装置の機能情報をリクエストするステップと、前記電子装置の機能情報及び前記他電子装置の機能情報に基づいて、前記電子装置と前記他電子装置と間で連動可能な機能を識別するステップと、前記識別された機能を前記ディスプレイするステップとを含んでよい。

以上説明したように、本発明によれば、数段階の認証手順又は初期設定を行うことなく、ユーザ端末装置が伝送した信号及び映像に基づいて、電子装置とユーザ端末装置との間の接続を行うことができるようになる。

本発明の一実施形態に係るホームネットワークシステムの例示図である。 本発明の一実施形態に係る電子装置の構成を示すブロック図である。 本発明の一実施形態に係るユーザ端末装置の構成を示すブロック図である。 ユーザ端末装置の細部構成の一例を示すブロック図である。 本発明の一実施形態に係る電子装置とユーザ端末装置との制御方法を説明するためのシーケンス図である。 本発明の一実施形態に係る電子装置及びユーザ端末装置の間の制御方法を説明するための図である。 本発明の一実施形態に係る電子装置及びユーザ端末装置の間の制御方法を説明するための図である。 本発明の一実施形態に係る電子装置間の通信接続方法を説明するためのシーケンス図である。 本発明の一実施形態に係る電子装置間の通信接続方法を説明するための図である。 本発明の一実施形態に係る電子装置間の通信接続方法を説明するための図である。 本発明の一実施形態に係る電子装置の制御方法を説明するための図である。 本発明の一実施形態に係る電子装置の制御方法を説明するためのフローチャートである。 本発明の一実施形態に係るユーザ端末装置の制御方法を説明するためのフローチャートである。

本明細書で使われる用語について概略に説明し、本開示について具体的に説明する。

本開示の実施形態で使われる用語は、本開示における機能を考慮しつつ、可能な限り、現在広く使われている通常の用語を選択しているが、それは、当分野に携わる技術者の意図又は判例、新たな技術の登場などにより、異なることもある。なお、特定の場合は、出願人が任意に選定した用語もあり、この場合、該当する開示の説明箇所で、その意味について詳細に説明する。そのため、本開示で使われる用語は、単なる用語の名称ではなく、その用語のもつ意味と、本開示の全般にわたる内容とを基に定義されるべきである。

本開示の実施形態は、多様な変更を加えることができ、複数の実施形態を有することができるため、特定の実施形態を図面に例示し、詳細な説明において詳しく説明する。しかし、それは、特定の実施形態に対して範囲を限定するものではなく、発明された思想及び技術範囲に含まれる全ての変更、均等物ないし代替物を含むものとして理解されるべきである。実施形態を説明するうえで、関連する公知技術に対する具体的な説明が要旨を曖昧にするおそれがあると判断される場合には、その詳細な説明を省略する。

第１、第２などの用語は、多様な構成要素を説明するのに使われてよいが、構成要素は用語によって限定されてはならない。用語は、一つの構成要素を他の構成要素から区別する目的としてのみ使われる。

単数の表現は文脈上明白にそうでないことを意味しない限り、複数の表現を含む。本出願において、「含む」又は「構成される」などの用語は、明細書上に記載された特徴、数字、ステップ、動作、構成要素、部品、又はこれらを組み合わせたものが存在することを指定するものであって、一つ又はそれ以上の他の特徴や、数字、ステップ、動作、構成要素、部品、又はこれらを組み合わせたものの存在又は付加可能性を予め排除しないものとして理解されるべきである。

本開示において、「モジュール」或いは「部」は、少なくとも１つの機能や動作を行い、ハードウェア又はソフトウェアで実現されたり、ハードウェアとソフトウェアとの組み合わせで実現されてよい。なお、複数の「モジュール」或いは複数の「部」は、特定のハードウェアで実現される必要のある「モジュール」或いは「部」を除いては、少なくとも一つのモジュールで一体化され、少なくとも１つのプロセッサ（図示せず）で実現されてよい。

以下では、添付の図を参照し、本発明の実施形態について、本発明の属する技術分野で通常の知識を有する者が容易に実施できるように詳しく説明する。しかし、本開示は、複数の異なる形態で実現されてよく、ここで説明する実施形態に限定しない。そして、図面において、本発明を明確に説明するために、説明と関係のない部分は省略しており、明細書の全体を通して、類似する部分に対しては、類似する図面の符号を付している。

図１は、本発明の一実施形態に係るホームネットワークシステムの例示図である。図１によると、ホームネットワークシステムは、少なくとも1つの電子装置１００及びユーザ端末装置２００を含む。

ここで、電子装置１００は、ディスプレイ装置１００－１、スピーカ１００－２、冷蔵庫１００－３、洗濯機１００－４、ロボット掃除機１００－５、エアコン、空気清浄機、セットトップボックスなどのような多様な家電製品（ｈｏｍｅ ａｐｐｌｉａｎｃｅ)で実現されてよい。ただ、それに限定されるものではなく、電子装置１００は、各種医療機器や、モノのインターネット（ｉｎｔｅｒｎｅｔ ｏｆ ｔｈｉｎｇｓ）及び各種センサのような多様なタイプの電子装置で実現されてよい。

電子装置１００は、外部デバイスと通信を行うことができる。ここで、外部デバイスは、ネットワーク装置、他電子装置、サーバ、ユーザ端末装置２００などであってよい。ここで、ネットワーク装置は、アクセスポイント（Ａｃｃｅｓｓ Ｐｏｉｎｔ：ＡＰ）のように、ブリッジの役割を担う多様なタイプの装置で実現されてよい。一例として、ネットワーク装置は、ルータ、スイッチ、ＩＰ共有器及び無線ネットワークカードで実現されてよい。

本発明の一実施形態によって、電子装置１００は、ユーザ端末装置２００が伝送する信号やデータなどを受信することができ、受信された信号及びデータに基づいて、ユーザ端末装置とＰ２Ｐ（Ｐｅｅｒ－ｔｏ－Ｐｅｅｒ）通信を行うことができる。ユーザ端末装置２００は、スマートフォン、タブレット、ポータブル端末装置、スマートウォッチ、ウェアラブルデバイスなどで実現されてよい。ただ、それに限定されるものではなく、ユーザ端末装置２００は、カメラを含み、カメラを介して撮影された映像を外部デバイスに伝送可能な装置なら、如何なる装置でも構わない。

ユーザ端末装置２００は、外部デバイスと通信を行うことができる。ここで、外部デバイスは、上述のように、ネットワーク装置、電子装置１００、サーバなどであってよい。

本発明の一実施形態によって、ユーザ端末装置２００は、電子装置１００に予め設定された接続リクエスト信号及び映像を伝送することができる。一例として、ユーザ端末装置２００は、電子装置１００に予め設定された接続リクエスト信号を伝送した後、映像を伝送することができる。電子装置１００は、ユーザ端末装置２００から受信された信号及び映像に基づいて、ユーザ端末装置２００に予め設定された接続リクエスト信号に対する認証情報を伝送することができる。例えば、ユーザ端末装置２００は、ユーザ端末装置２００に備えられたカメラを介して電子装置１００を識別し、識別された電子装置１００に予め設定された接続リクエスト信号、映像などを伝送することができる。この場合、映像を受信した電子装置１００は、受信された映像に基づいて、ユーザ端末装置２００に認証情報を伝送するか否かを識別することができる。ここで、ユーザ端末装置２００は、拡張現実（ＡＲ：ａｕｇｍｅｎｔｅｄ ｒｅａｌｉｔｙ）ベースの外部デバイス識別方法を用いて、電子装置１００を識別し、識別された電子装置１００に信号や映像などを伝送することができる。それに対する具体的な説明は、後述する。

他の例として、ユーザ端末装置２００は、ネットワーク装置を介してネットワーク装置に接続された電子装置に信号や映像などを伝送することもできる。一例として、ユーザ端末装置２００は、予め設定された接続リクエスト信号及び映像をネットワーク装置を経由し、複数の電子装置１００－１ないし１００－５に伝送することができる。例えば、予め設定された接続リクエスト信号及び映像は、ネットワーク装置を介してブロードキャストされてよく、ネットワーク装置に接続された複数の電子装置１００－１ないし１００－５は、予め設定された接続リクエスト信号及び映像を受信することができるようになる。ここで、ブロードキャストとは、１：Ｎ又は１：Ａｌｌでデータを伝送するものとして、データを受信する電子装置のＭａｃ Ａｄｄｒｅｓｓを特定しないまま、データを伝送する方法である。例えば、ユーザ端末装置２００が映像をブロードキャストすると、ＡＰに接続された複数の電子装置１００－１ないし１００－５は、映像を受信することができる。本発明の一実施形態に係る電子装置１００は、受信された信号及び映像に基づいて、ユーザ端末装置２００に予め設定された接続リクエスト信号に対する認証情報を伝送することができる。ユーザ端末装置２００は、認証情報に基づいて、電子装置１００に通信接続をリクエストすることができ、電子装置１００とユーザ端末装置２００とは、Ｐ２Ｐ通信を行うことができる。ここで、電子装置１００とユーザ端末装置２００とが直接接続される多様なＰ２Ｐ通信は、Ｂｌｕｅｔｏｏｔｈ、Ｗｉ－Ｆｉ Ｐ２Ｐ（Ｗｉ－Ｆｉ Ｐｅｅｒ－ｔｏ－Ｐｅｅｒ）（又は、Ｗｉ－Ｆｉダイレクト（Ｗｉ－Ｆｉ Ｄｉｒｅｃｔ）を意味してよい。以上では、電子装置１００及びユーザ端末装置２００の動作について概略に説明した。以下では、本発明の多様な実施形態に係る電子装置１００及びユーザ端末装置２００の制御方法について、具体的に説明する。

図２は、本発明の一実施形態に係る電子装置１００の構成を示すブロック図である。

図２を参照すると、電子装置１００は、通信部１１０、保存部１２０、ディスプレイ１３０及びプロセッサ１４０を含む。

通信部１１０は、外部デバイスと通信を行う。本発明の一実施形態によって、通信部１１０は、ＢＴ（ＢｌｕｅＴｏｏｔｈ）、ＷＩ－ＦＩ（Ｗｉｒｅｌｅｓｓ Ｆｉｄｅｌｉｔｙ）、Ｚｉｇｂｅｅ、ＩＲ（Ｉｎｆｒａｒｅｄ）、Ｓｅｒｉａｌ Ｉｎｔｅｒｆａｃｅ、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）、ＮＦＣ（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ）などのような様々な通信方式を通じ、外部デバイスと通信を行うことができる。

特に、通信部１１０は、ユーザ端末装置２００から予め設定された接続リクエスト信号や映像を受信することができる。一例として、通信部１１０は、同じＡＰに接続されたユーザ端末装置２００がＡＰを通してブロードキャスト（Ｂｒｏａｄｃａｓｔ）する予め設定された接続リクエスト信号及び映像を受信することができる。ただ、それに限定されるものではなく、予め設定された接続リクエスト信号及び映像は、ＡＰを経由することなく、ユーザ端末装置２００が電子装置１００に直接（Ｄｉｒｅｃｔｌｙ）伝送することもできる。ここで、予め設定された接続リクエスト信号は、ユーザ端末装置２００が電子装置１００とＰ２Ｐ（Ｐｅｅｒ－ｔｏ－Ｐｅｅｒ）接続を行うために、電子装置１００の認証情報をリクエストする信号であってよい。

本発明の一実施形態に係るユーザ端末装置２００から受信された映像は、ユーザ端末装置２００が電子装置１００に備えられたディスプレイ１３０を撮影した映像であってよい。それに関する具体的な説明は、後述する。

保存部１２０は、電子装置１００を駆動させるためのＯ／Ｓ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）ソフトウェアモジュール、各種通信モジュール、従来接続が行われた他電子装置に対する接続情報、映像分析ソフトウェアモジュール、各種コンテンツのような多様なデータを保存する。

保存部１２０は、プロセッサ１４０に含まれたＲＯＭ、ＲＡＭなどの内部メモリで実現されたり、プロセッサ１４０と別途のメモリで実現されてよい。この場合、保存部１２０は、データ保存の用途によって、電子装置１００にエンベデッドされたメモリで実現されたり、電子装置１００に着脱自在なメモリで実現されてよい。例えば、電子装置１００の駆動のためのデータの場合、電子装置１００にエンベデッドされたメモリに保存され、電子装置１００の拡張機能のためのデータの場合、電子装置１００に着脱自在なメモリに保存されてよい。一方、電子装置１００にエンベデッドされたメモリの場合、非揮発性メモリ、揮発性メモリ、ハードディスクドライブ（HDD）又はソリッドステートドライブ（SSD）などのような形態で実現され、電子装置１００に着脱自在なメモリの場合、メモリカード（例えば、ｍｉｃｒｏ ＳＤカード、ＵＳＢメモリなど）、ＵＳＢポートに接続可能な外部メモリ（例えば、ＵＳＢメモリ）などのような形態で実現されてよい。

ディスプレイ１３０は、多様なタイプの映像をディスプレイすることができ、液晶表示装置（ＬＣＤ：Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）、有機発光ダイオード（ＯＬＥＤ：Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｓｐｌａｙ）又はプラズマ表示パネル（ＰＤＤ：Ｐｌａｓｍａ Ｄｉｓｐｌａｙ Ｐａｎｅｌ）などで実現されてよい。ただ、それに限定されるものではなく、様々なタイプのディスプレイ１３０で実現されてよい。一例として、ディスプレイ１３０は、７セグメントディスプレイ（Ｓｅｖｅｎ－ｓｅｇｍｅｎｔ ｄｉｓｐｌａｙ）で実現されてよい。

プロセッサ１４０は、電子装置１００の動作を全体的に制御する。

一実施形態によって、プロセッサ１４０は、中央処理装置（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ：ＣＰＵ）、MCU（Ｍｉｃｒｏ Ｃｏｎｔｒｏｌｌｅｒ Ｕｎｉｔ）、ＭＰＵ（Ｍｉｃｒｏ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、コントローラ（Ｃｏｎｔｒｏｌｌｅｒ）、アプリケーションプロセッサ（Ａｐｐｌｉｃａｔｉｏｎ Ｐｒｏｃｅｓｓｏｒ：AP）又はコミュニケーションプロセッサ（Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｐｒｏｃｅｓｓｏｒ：CP)、ＡＲＭプロセッサのうち、一つ又はそれ以上を含むか、当該用語で定義されてよい。なお、プロセッサ１４０は、プロセッシングアルゴリズムの内蔵されたＳｏＣ（Ｓｙｓｔｅｍ ｏｎ Ｃｈｉｐ）、ＬＳＩ（Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ）で実現されてよく、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）で実現されてよい。

本発明の一実施形態によって、プロセッサ１４０は、通信部１１０を介して、ユーザ端末装置２００から予め設定された接続リクエスト信号が受信されると、ディスプレイ１３０を介して出力される第１映像を保存部１２０に保存することができる。一例として、プロセッサ１４０は、電子装置１００の位置する領域で接続可能なＷｉ－Ｆｉ通信規格によるＡＰに接続されるように、通信部１１０を制御することができる。接続されたＡＰを利用して予め設定された接続リクエスト信号が通信部１１０を介して受信されると、ディスプレイ１３０を介して出力される第１映像を保存部１２０に保存することができる。ただ、予め設定された接続リクエスト信号は、ＡＰを経由することなく、ユーザ端末装置２００から直接受信することもできる。

本発明の一実施形態によって、保存部１２０に保存される第１映像は、ディスプレイ１３０を介して現在出力されている映像であってよい。一例として、プロセッサ１４０は、ディスプレイ１３０を介してマルチメディアコンテンツ、電子装置１００のステータス情報、電子装置１００の動作による情報、予め設定された映像などを出力することができる。予め設定された接続リクエスト信号が受信されることにより、プロセッサ１４０は、現在出力中の第１映像の録画を開始することができ、録画された映像は保存部１２０に保存されてよい。

なお、プロセッサ１４０は、通信部１１０を介して第２映像が受信されると、保存部１２０に保存された第１映像と受信された第２映像とを比較することができる。ここで、第２映像は、ユーザ端末装置２００が伝送した映像であってよい。

本発明の一実施形態に係るプロセッサ１４０は、保存された第１映像に含まれたオブジェクトと同様のオブジェクトを受信された第２映像で識別することができる。ここで、オブジェクトは、第１及び第２映像のそれぞれに含まれたイメージ、テキスト情報、図形、及び第１及び第２映像のそれぞれのＲＧＢ情報などを意味することができる。一例として、第１映像に含まれたテキストと同様のテキストが第２映像に含まれているか否かを識別することができる。別の例として、第１映像に含まれた特定の図形と同様の図形が第２映像に含まれてるか否かを識別することができる。

プロセッサ１４０は、第２映像で第１映像に含まれたオブジェクトと同様のオブジェクトが識別されると、第１映像に含まれたオブジェクトの変化パターンと識別されたオブジェクトの変化パターンとが同様か否かを判断することができる。一例として、第１映像に含まれた第１テキスト情報の変化パターン及び第２映像に含まれた第２テキスト情報の変化パターンが同様か否かを判断することができる。例えば、プロセッサ１４０は、第１映像から「残りの洗濯時間 ０１：３０」及び「残りの洗濯時間 ０１：２９」の変化パターンを識別し、第２領域から「残りの洗濯時間 ０１：３０」及び「残りの洗濯時間 ０１：２９」の変化パターンを識別し、両変化パターンが同様か否かを判断することができる。それに対する具体的な例は、図５及び図６を参照して行う。

本発明の一実施形態に係るプロセッサ１４０は、識別結果に基づいて予め設定された接続リクエスト信号に対する認証情報をユーザ端末装置２００に伝送するように、通信部１１０を制御することができる。一例として、プロセッサ１４０は、第１映像の変化パターン及び第２映像の変化パターンが同様なら、ユーザ端末装置２００から受信された第２映像は、第１映像を出力中の電子装置１００に備えられたディスプレイ１３０を撮影した映像であると識別することができる。続いて、プロセッサ１４０は、通信部１１０を制御し、ユーザ端末装置２００に認証情報を伝送することができる。

ここで、認証情報は、電子装置１００のＰ２Ｐ通信を構成するための情報を含んでよい。ユーザ端末装置２００は、認証情報に基づいて電子装置１００にＰ２Ｐ通信接続をリクエストすることができる。それに対する具体的な説明は、ユーザ端末装置２００に対する詳細図で行う。

一方、以上では、通信部１１０が１つの構成要素であるとして説明しているが、実施形態によって、複数の通信部１１０は、複数の通信モジュールを含んでよい。一例として、第１通信部は、Ｗｉ－Ｆｉモジュールで実現され、第２通信部はブルートゥース（登録商標）モジュールで実現されてよい。この場合、第１通信部を介して、ネットワーク装置と通信を行うことができ、第２通信部を介してユーザ端末装置２００と通信を行うことができる。

本発明の一実施形態に係るプロセッサ１４０は、第１映像と第２映像とを比較し、相互同様の映像フレームを含むか否かを識別することもできる。一例として、第１映像と第２映像とは、相互異なる再生時間を有してよく、プロセッサ１４０は、第１映像の特定区間から識別されたオブジェクトの変化パターンが第２映像の特定区間から識別されたオブジェクトの変化パターンと同様か否かを判断することもできる。それにより、第１映像及び第２映像のそれぞれの全ての再生区間を考慮し、オブジェクトの変化パターンを識別し、同様か否かを判断するものではない、特定の再生区間のみを考慮することもできる。

本発明の一実施形態に係るプロセッサ１４０は、ユーザ端末装置２００から他電子装置に対する認証情報が受信されると、受信された認証情報に基づいて、他電子装置と通信を行うように通信部１１０を制御することもできる。一例として、ディスプレイ装置１００－１とユーザ端末装置２００と接続された状態で、ユーザ端末装置２００からスピーカ１００－２に対する認証情報が受信されると、ディスプレイ装置は受信された認証情報に基づいてスピーカとＰ２Ｐ通信を行うことができる。

なお、プロセッサ１４０は、接続された他電子装置に他電子装置の機能情報をリクエストすることができる。プロセッサ１４０は、電子装置１００の機能情報と他電子装置の機能情報とに基づいて、他電子装置と連動可能な機能を識別し、識別された機能を行うことができる。一例として、電子装置１００の機能がディスプレイ機能を含み、他電子装置の機能情報にディスプレイ機能が含まれている場合、他電子装置とミラーリング機能が可能であると識別し、他電子装置にディスプレイされた映像を受信し、ミラーリング機能を行うことができる。ただ、それは一実施形態に過ぎず、他の例として、スピーカ１００－２は、ディスプレイ装置１００－１と連動可能な機能を識別し、ディスプレイ装置１００－１と音響出力に関するミラーリングが可能であると識別されると、ディスプレイ装置１００－１が出力中のコンテンツの音響信号をディスプレイ装置１００－１から受信して出力することができる。

図３Ａは、本発明の一実施形態に係るユーザ端末装置２００の構成を示すブロック図である。

図３Ａを参照すると、ユーザ端末装置２００は、入力部２１０、撮影部２２０、通信部２３０及びプロセッサ２４０を含む。

入力部２１０は、ユーザ端末装置２００を制御するための多様なユーザ命令を受信する。そのために、入力部２１０は、入力パネルで実現されてよい。入力パネルは、タッチパッド（Ｔｏｕｃｈ Ｐａｄ）或いは各種機能キー、数字キー、特殊キー、文字キーなどを備えたキーパッド（Ｋｅｙ Ｐａｄ）又はタッチスクリーン（Ｔｏｕｃｈ Ｓｃｒｅｅｎ）方式で行われてよい。ただ、それに限定されるものではなく、入力部２１０は、音声入力装置、モーション入力装置などのような多様な入力装置で実現されてよい。

撮影部２２０は、ユーザ端末装置２００の周辺領域を撮影し、映像を獲得するための構成である。撮影部２２０は、カメラ、ビデオカメラなどを含んでよい。撮影部２２０は、ユーザ端末装置２００の内部に含まれる一構成に限定されるものではなく、ユーザ端末装置２００の外部端子に接続される外部装置で実現されてよい。

特に、撮影部２２０は、ユーザ端末装置２００の周辺領域に位置する電子装置１００を撮影することができる。一例として、撮影部２２０は、電子装置１００に備えられたディスプレイ１３０を撮影し、映像を獲得することができる。

通信部２３０は、外部デバイスと通信を行うための構成である。例えば、通信部２３０は、ＢＴ（ＢｌｕｅＴｏｏｔｈ）、ＢＬＥ（Ｂｌｕｅｔｏｏｔｈ Ｌｏｗ Ｅｎｅｒｇｙ）、ＷＩ－ＦＩ（Ｗｉｒｅｌｅｓｓ Ｆｉｄｅｌｉｔｙ）、Ｚｉｇｂｅｅなどのように、多様な通信方法を利用し、外部デバイスと通信を行うことができる。ここで、外部デバイスは、ネットワーク装置、電子装置１００、サーバで実現されてよい。

プロセッサ２４０は、ユーザ端末装置２００の動作を全体的に制御する。

特に、プロセッサ２４０は、入力部２１０を介したユーザ命令に応じ、予め設定された接続リクエスト信号が電子装置１００に伝送されるように通信部２３０を制御することができる。一例として、プロセッサ２４０は、ユーザ端末装置２００の位置する領域で接続可能なＷｉ－Ｆｉ通信規格によるネットワーク装置に接続されるように、通信部２３０を制御することができ、ネットワーク装置を介して予め設定された接続リクエスト信号をブロードキャストすることができる。この場合、同様のネットワーク装置に接続された複数の電子装置１００－１ないし１００－５は、予め設定された接続リクエスト信号を受信することができる。

ここで、予め設定された接続リクエスト信号は、ユーザ端末装置２００と電子装置１００との間でＰ２Ｐ通信を構成するための電子装置１００の認証情報リクエスト信号を意味することができる。

ただ、それに限定されるものではなく、プロセッサ２４０は、特定の電子装置１００に予め設定された接続リクエスト信号を直接伝送することもできる。一例として、プロセッサ２４０は、拡張現実ベースの外部デバイス識別方法を用いて、特定の電子装置１００を識別し、識別された電子装置１００に接続リクエスト信号を伝送することもできる。拡張現実ベースの外部デバイス識別方法は、電子装置１００にマーカーが付着されている場合、マーカーに基づいて特定の電子装置１００を識別することができ、識別された電子装置に接続リクエスト信号を伝送することができる。

別の例として、プロセッサ２４０は、撮影部２２０を介して撮影されたイメージから特定の電子装置１００を識別することもでき、識別された電子装置１００に予め設定された接続リクエスト信号を伝送することができる。

別の例として、プロセッサ２４０は、近距離無線通信法式に基づいて、特定の電子装置１００に接続リクエスト信号を伝送することもできる。なお、プロセッサ２４０は、同様のネットワーク装置に接続された複数の電子装置のうち、ユーザの命令に応じて選択された電子装置又は予め設定された有線順位に応じた特定の電子装置としてのみ予め設定された接続リクエスト信号を伝送することもできる。

プロセッサ２４０は、予め設定された接続リクエスト信号を伝送した後、ユーザ端末装置２００の周辺領域を撮影するように撮影部２２０を制御することができる。一例として、ユーザの操作に対応し、撮影部２２０は電子装置１００に備えられたディスプレイ１３０を撮影し、映像を獲得することができる。

プロセッサ２４０は、予め設定された時間が経過した後、映像を通信部２３０を介して電子装置１００に伝送することができる。一例として、映像は、ユーザ端末装置１００の接続されたネットワーク装置を介してブロードキャストされ、複数の電子装置１００－１ないし１００－５に伝送されてよい。別の例として、プロセッサ２４０は、拡張現実ベースの外部デバイス識別方法又は近距離無線通信などに基づいて、特定の電子装置１００に映像を伝送することもできる。

一方、プロッサ２４０は、予め設定された時間の間、撮影を行うように撮影部２２０を制御した後、予め設定された接続リクエスト信号を電子装置１００に伝送することもできる。即ち、撮影部２２０を介した撮影の開始と、通信部２３０を介した予め設定された接続リクエスト信号の伝送は、前後関係が定められているものではなく、本発明の多様な実施形態によって、前後関係が入れ替わることもできる。

本発明の別の実施形態によって、プロセッサ２４０は、入力部２１０を介してユーザの撮影命令が入力されると、予め設定された時間の間、撮影を行うように撮影部２２０を制御することもできる。一例として、ユーザ端末装置２００は、ユーザの撮影命令に応じて撮影を開始し、予め設定された接続リクエスト信号を伝送した後、撮影部２２０を介して撮影された映像を電子装置１００に伝送することもできる。

プロセッサ２４０は、映像が電子装置１００に伝送された後、予め設定された接続リクエスト信号に対する認証情報が受信されると、電子装置１００とＰ２Ｐ通信を行うように、通信部２３０を制御することができる。

一例として、認証情報が受信されると、プロセッサ２４０は、認証情報を伝送した電子装置１００とペアリング実行の有無、ブルートゥース（登録商標）モジュールの有効化の有無などに基づいて、電子装置１００とブルートゥース（登録商標）規格によるＰ２Ｐ通信を行うことができる。別の例として、プロセッサ２４０は、電子装置１００とＷｉ－Ｆｉ Ｐ２Ｐ通信ネットワークを構成し、Ｐ２Ｐ通信を行うこともできる。

一方、以上では、通信部２３０が一つの構成要素であるとして説明したが、一実施形態によって、複数の通信部２３０は、複数の通信モジュールを含んでよい。一例として、第１通信部は、Ｗｉ－Ｆｉモジュールで実現され、第２通信部は、ブルートゥース（登録商標）モジュールで実現されてよい。この場合、第１通信部を介してネットワーク装置と通信を行うことができ、第２通信部を介して電子装置１００と通信を行うこともできる。

図３Ｂは、ユーザ端末装置２００の細部構成の一例を示すブロック図である。

図３Ｂによると、ユーザ端末装置２００は、入力部２１０、撮影部２２０、通信部２３０、プロセッサ２４０、ディスプレイ２５０及び保存部２６０を含む。図３Ｂに示す構成要素のうち、図３Ａに示す構成要素と重複する部分に対しては、詳細な説明を省略する。

撮影部２２０は、カメラのように、レンズ、ＣＣＤ、ＣＭＯＳのような映像センサ及びアナログデジタルコンバータなどのモジュールを含んで構成されてよい。撮影部２２０は、被写体を捉えて生成される映像信号を獲得し、獲得された映像信号をデジタル信号を変換し、プロセッサ２４０に伝達する。プロセッサ２４０は、デジタル信号に変換された映像に対するノイズの除去、色合いの処理などの映像処理のためのイメージ処理動作を行うことができる。プロセッサ２４０は、撮影された映像をディスプレイ２５０を介してユーザに提供することができる。

通信部２３０は、多様なタイプの通信方式のよって、ＡＰ、電子装置１００、サーバと通信を行う構成である。通信部２３０は、Ｗｉ－Ｆｉチップ、ブルートゥース（登録商標）チップ、無線通信チップ、ＮＦＣチップなどを含んでよい。

Ｗｉ－Ｆｉチップ、ブルートゥース（登録商標）チップは、それぞれＷｉ－Ｆｉ方式、ブルートゥース（登録商標）方式で通信を行う。Ｗｉ－Ｆｉチップやブルートゥース（登録商標）チップを利用する場合には、ＳＳＩＤ及びセッションキーなどのような各種接続情報を先に送受信し、それを用いて通信接続した後、各種情報を送受信することができる。無線通信チップは、ＩＥＥＥ、Ｚｉｇｂｅｅ、３Ｇ（3ｒｄ Ｇｅｎｅｒａｔｉｏｎ）、３ＧＰＰ（3ｒｄ Ｇｅｎｅｒａｔｉｏｎ Ｐａｒｔｎｅｒｓｈｉｐ Ｐｒｏｊｅｃｔ）、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）などのような多様な通信規格によって通信を行うチップを意味する。

プロセッサ２４０は、ユーザ端末装置２００の動作全般を制御する。プロセッサ２４０は、デジタルシグナルプロセッサ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ：ＤＳＰ）、中央処理装置（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ：ＣＰＵ）、コントローラ（Ｃｏｎｔｒｏｌｌｅｒ）、アプリケーションプロセッサ（Ａｐｐｌｉｃａｔｉｏｎ Ｐｒｏｃｅｓｓｏｒ：AP）又はコミュニケーションプロセッサ（Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｐｒｏｃｅｓｓｏｒ：CP)、ＡＲＭプロセッサのうち、一つ又はそれ以上を含むか、当該用語で定義されてよい。

プロセッサ２４０は、ＣＰＵ、ユーザ端末装置２００の制御のための制御プログラムが保存されたＲＯＭ（又は、非揮発性メモリ）及びユーザ端末装置２００の外部から入力されるデータを保存するか、ユーザ端末装置２００で行われる多様な作業に対応する保存領域として使われるＲＡＭ（又は、揮発性メモリ）を含んでよい。

ＣＰＵは、保存部２６０にアクセスし、保存部２６０に保存されたＯ／Ｓを用いてブートを行う。そして、保存部２６０に保存された各種プログラム、コンテンツ、データなどを用いて、多様な動作を行う。

ディスプレイ２５０は、多様な映像をディスプレイすることができ、液晶表示装置（ＬＣＤ：Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）、有機発光ダイオード（ＯＬＥＤ：Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｓｐｌａｙ）又はプラズマ表示パネル（ＰＤＤ：Ｐｌａｓｍａ Ｄｉｓｐｌａｙ Ｐａｎｅｌ）などで実現されてよい。

特に、ディスプレイ２５０は、従来接続が行われた少なくとも一つの電子装置に対するイメージをディスプレイすることができる。本発明の一実施形態により、プロセッサ２４０は、保存部２６０に保存された接続情報に基づいて、複数の電子装置１００に対するイメージをディスプレイ２５０を介してディスプレイすることができる。ここで、複数の電子装置１００に対するイメージは、電子装置１００に対応するサムネイルイメージ、電子装置１００の形態を示すイメージなどを意味することができる。

保存部２６０は、ユーザ端末装置２００を駆動させるためのＯ／Ｓソフトウェアモジュール、各種マルチメディアコンテンツのような多様なデータを保存する。

ここで、保存部２６０は、プロセッサ２４０に含まれたＲＯＭ、ＲＡＭなどの内部メモリで実現されたり、プロセッサ２４０と別途のメモリで実現されてよい。この場合、保存部２６０は、データ保存の用途によって、ユーザ端末装置２００にエンベデッドされたメモリで実現されたり、ユーザ端末装置２００に着脱自在なメモリで実現されてよい。例えば、ユーザ端末装置２００の駆動のためのデータの場合、ユーザ端末装置２００にエンベデッドされたメモリに保存され、ユーザ端末装置２００の拡張機能のためのデータの場合、ユーザ端末装置２００に着脱自在なメモリに保存されてよい。一方、ユーザ端末装置２００にエンベデッドされたメモリの場合、非揮発性メモリ、揮発性メモリ、ハードディスクドライブ（ＨＤＤ）又はソリッドステートドライブ（ＳＳＤ）などのような形態で実現され、ユーザ端末装置２００に着脱自在なメモリの場合、メモリカード（例えば、ｍｉｃｒｏ ＳＤカード、ＵＳＢメモリなど）、ＵＳＢポートに接続可能な外部メモリ（例えば、ＵＳＢメモリ）などのような形態で実現されてよい。

特に、保存部２６０は、従来接続が行われた他電子装置に対する接続情報を保存することができる。一例として、従来他電子装置から認証情報を受信しており、認証情報に基づいて、他電子装置のＰ２Ｐ通信を行った場合、プロセッサ２４０は、他電子装置に対するＭａｃ Ａｄｄｒｅｓｓ、他電子装置を示すイメージなどのような接続情報を保存部２６０に保存することができる。

ここで、他電子装置を示すイメージは、他電子装置のサムネイルイメージ、他電子装置の形態を示すイメージなどを意味することができる。プロセッサ２４０は、ユーザ端末装置２００が外部電子装置と接続を行うためのモードに移行すると、他電子装置に対する接続情報に基づいて、イメージをディスプレイ２５０を介してディスプレイすることができる。

一方、本発明の一実施形態に係るプロセッサ２４０は、予め設定された命令に応じて、ディスプレイされたイメージが選択されると、選択されたイメージに対応する他電子装置に対する接続情報をＰ２Ｐ通信を行っている電子装置１００に伝送することができる。一例として、ディスプレイ装置１００－１とＰ２Ｐ通信を行っている状態で、ディスプレイ２５０にディスプレイされたイメージのうちいずれか一つが選択されると、選択されたイメージに対応するスピーカ１００－２に対する接続情報がディスプレイ装置１００－１に伝送されてよい。ディスプレイ装置１００－１は、受信された接続情報に基づいて、スピーカ１００－２とＰ２Ｐ通信を行うことができる。ここで、接続情報は、電子装置１００が他電子装置とＰ２Ｐ通信を行うための他電子装置に対する認証情報を含んでよい。

本発明の一実施形態に係る接続情報は、電子装置が他電子装置とＰ２Ｐ通信を行うための認証情報及び他電子装置の機能情報を含んでよい。プロセッサ２４０は、Ｐ２Ｐ通信を実行中の電子装置に電子装置の機能情報をリクエストし、電子装置の機能情報及び他電子装置の機能情報に基づいて、電子装置と他電子装置と間で連動可能な機能を識別し、識別された機能をディスプレイ２５０を介して提供してよい。一例として、ディスプレイ装置１００－１及びスピーカ１００－２の間で連動可能な機能として音響出力機能を識別し、ディスプレイ装置１００－１が出力中のコンテンツに含まれた音響信号がスピーカ１００－２を介して出力可能であることをディスプレイ２５０を介して提供することもできる。それに対する具体的な説明は、後述する。

図４は、本発明の一実施形態に係る電子装置とユーザ端末装置との制御方法を説明するためのシーケンス図である。

図４に示すように、ユーザ端末装置２００は、予め設定された接続リクエスト信号を電子装置１００に伝送することができる（Ｓ４１１）。

予め設定された接続リクエスト信号が受信されると、電子装置１００は現在出力中の映像を保存することができる（Ｓ４２１）。

ユーザ端末装置２００は、ユーザ端末装置２００の周辺領域を撮影することができる（Ｓ４１２）。一例として、ユーザ端末装置２００は、ユーザの操作に対応し、電子装置１００に備えられたディスプレイ１３０を撮影し、映像を獲得することができる。一方、ステップＳ４１１とステップＳ４１２とに、前後関係が特定されているものではない。

ユーザ端末装置２００は、予め設定された時間の間、撮影を行った後、映像を電子装置１００に伝送することができる。一例として、ユーザ端末装置２００は、映像を複数の電子装置１００－１ないし１００－５に伝送することができる。別の例として、映像は特定の電子装置１００にのみ伝送されてよい。

電子装置１００は、ステップＳ４２１で保存された映像とユーザ端末装置２００から受信された映像とを比較することができる（Ｓ４２２）。一例として、ディスプレイ装置１００－１には、ディスプレイ装置１００－１に備えられたディスプレイを介して出力された映像が保存されており、保存された映像と受信された映像とを比較することができる。電子装置１００は、保存された映像に含まれたオブジェクトと同様のオブジェクトとを受信された映像で識別し、保存された映像に含まれたオブジェクトの変化パターン及び受信された映像で識別されたオブジェクトの変化パターンが同様か否かを識別することができる。

電子装置１００は、保存された映像に含まれたオブジェクトの変化パターン及び受信された映像で識別されたオブジェクトの変化パターンが同様である場合（Ｓ４２３：Ｙ）、予め設定された接続リクエスト信号に対する認証情報をユーザ端末装置２００に伝送することができる（Ｓ４２４）。

本発明の一実施形態によって、予め設定された接続リクエスト信号及び撮影された映像が複数の電子装置１００－１ないし１００－５に伝送された場合、保存された映像及び受信された映像を比較するステップＳ４２２は、複数の電子装置１００－１ないし１００－５で行われてよい。一例として、ディスプレイ装置１００－１は、ディスプレイ装置１００－１に保存された映像と受信された映像とに基づいて、両映像間でオブジェクトの変化パターンが同様か否かを識別し、同様な変化パターンなら（Ｓ４２３：Ｙ）、ユーザ端末装置２００に認証情報を伝送することができる。この場合、残りの電子装置１００－２ないし１００－５は、各電子装置に保存された映像と受信された映像とに基づいて、同様のオブジェクトが含まれていないと識別するか、オブジェクトの変化パターンが同様ではないと識別してよい（Ｓ４２３：Ｎ）。そのため、残りの電子装置１００－２ないし１００－５に対する認証情報は、ユーザ端末装置２００に伝送されなくてよい。

図５及び図６は、本発明の一実施形態に係る電子装置及びユーザ端末装置の間の制御方法を説明するための図である。

図５によると、電子装置１００は、ディスプレイ装置１００－１で実現され、ディスプレイ装置１００－１が映像を出力する場合を想定することができる。ユーザ端末装置２００は、予め設定された接続リクエスト信号をディスプレイ装置１００－１に伝送することができる。ディスプレイ装置１００－１は、予め設定された接続リクエスト信号が受信されると、ディスプレイを介して出力中の映像を保存することができる。

なお、ユーザ端末装置２００は、ユーザの操作に対応し、ディスプレイ装置１００－１に備えられたディスプレイを撮影することができる。予め設定された時間が経過した後、ユーザ端末装置２００の撮影した映像は、ディスプレイ装置１００－１に伝送されてよい。

本発明の一実施形態によって、予め設定された接続リクエスト信号及び撮影された映像は、ディスプレイ装置１００－１の他にも、スピーカ１００－２、洗濯機１００－４、エアコンなどに伝送されてよい。

ディスプレイ装置１００－１と残りの電子装置１００－２ないし１００－５とは、それぞれ保存された映像と受信された映像とを比較し、受信された映像が自分を撮影した映像に該当するか否かを識別することができえる。一例として、ディスプレイ装置１００－１は、保存された映像に含まれたオブジェクト（例えば、キャラクタ、テキスト情報）と同様のオブジェクトを、第２映像で識別することができる。同様のオブジェクトが識別されると、第１映像に含まれたオブジェクトの変化パターンと第２映像で識別されたオブジェクトの変化パターンとが同様か否かを判断することができる。変化パターンが同様であると判断されると、ディスプレイ装置１００－１は、ユーザ端末装置２００から伝送された予め設定された接続リクエスト信号に対して認証情報をユーザ端末装置２００に伝送してよい。

例えば、ディスプレイ装置を介して出力される映像がコンテンツＡであり、ユーザ端末装置２００を介して受信された映像がコンテンツＡを出力中のディスプレイ装置を撮影した映像である場合を想定することができる。ディスプレイ装置１００－１は、受信された映像と保存された映像とを比較し、受信された映像にコンテンツＡの一定区間が含まれており、保存された映像にコンテンツＡの一定区間が含まれている場合、ディスプレイ装置１００－１は、変化パターンが同様であると判断し、認証情報をユーザ端末装置２００に伝送することができる。

一方、本発明の一実施形態によって、電子装置１００は、多様なオブジェクトに基づいて保存された映像及び受信された映像の変化パターンが同様か否かを識別することができる。一例として、電子装置１００は、保存された映像の輝度、明度、ＲＧＢ色相値のそれぞれに対する変化パターン及び受信された映像の輝度、明度、ＲＧＢ色相値のそれぞれに対する変化パターンに基づいて、変化パターンが同一か否かを識別することができる。なお、電子装置１００がＯＳＤ方式でチャネル番号、ボリューム値などのように、ステータス情報をディスプレイした場合、電子装置１００は受信された映像でチャネル番号、ボリューム値などの変化パターンを識別し、保存された映像に含まれたチャネル番号、ボリューム値などの変化パターンと同様か否かを識別することができる。例えば、チャネル番号の変化パターン（例えば、チャネル９→チャネル１０）、ボリューム値の変化パターン（例えば、ボリューム１０→ボリューム１５）が受信された映像と保存された映像との全てが同様である場合、電子装置１００は、ユーザ端末装置２００に認証情報を伝送することができる。認証情報がユーザ端末装置２００に伝送されることで、ユーザ端末装置２００は、電子装置１００とＰ２Ｐ通信を行うことができる。

本発明の一実施形態によって、電子装置１００は、ユーザ端末装置２００に制御権限を与えることもできる。この場合、ユーザ端末装置２００を介して電子装置１００を制御することができる。

なお、本発明の一実施形態によって、電子装置１００は、自分のステータス情報をユーザ端末装置２００に伝送することができ、ユーザ端末装置２００は、電子装置１００のステータス情報（例えば、チャネル情報、ボリューム情報、コンテンツ情報など）をユーザに提供することができる。図６によると、電子装置１００は、洗濯機１００－４で実現されてよい。本発明の一実施形態によって、洗濯機１００－４は、装置のステータス情報をディスプレイを介してユーザに提供することができる。例えば、洗濯機１００－４は、洗濯コードに関する情報、残りの洗濯時間、経過した洗濯時間などに関する情報をディスプレイすることができる。ユーザ端末装置２００から接続リクエスト信号が受信されると、洗濯機１００－４はディスプレイ中のステータス情報を保存することができる。

図６を参照すると、洗濯機１００－４は、洗濯コース及び残りの洗濯時間に関する情報をディスプレイすることができ、ユーザ端末装置２００はユーザの操作によって、洗濯機１００－４がディスプレイ中のステータス情報を撮影し、映像を獲得することができる。

ユーザ端末装置２００は、予め設定された時間が経過した後、映像を洗濯機１００－４に伝送することができる。洗濯機１００－４は、接続リクエスト信号に応じて保存された映像と、ユーザ端末装置２００から受信された映像とを比較することができる。例えば、受信された映像で洗濯コース「標準」及び「０１時間０９分所要」が識別され、洗濯機１００－４内に保存された映像で洗濯コース「標準」及び「０１時間０９分所要」が識別されると、洗濯機１００－４はユーザ端末装置２００に認証情報を伝送することができる。

それにより、ユーザ端末装置２００は、洗濯機１００－４とＰ２Ｐ通信を行うことができる。

図７は、本発明の一実施形態に係る電子装置間の通信接続方法を説明するためのシーケンス図である。

本発明の一実施形態によって、ユーザ端末装置２００は、従来接続が行われた他電子装置３００に対する接続情報を保存することができる。ここで、接続情報は、他電子装置３００のＭａｃ Ａｄｄｒｅｓｓ、他電子装置３００との接続を行う際、要求されるセキュリティキー及び設定値のような認証情報及び他電子装置３００の機能情報などを含んでよい。

本発明の一実施形態によって、ユーザ端末装置２００は、従来接続が行われた他電子装置３００に対するイメージをディスプレイすることができる（Ｓ７１１）。一例として、ユーザ端末装置２００は、予め保存された接続情報に基づいて、他電子装置３００のサムネイルイメージ又は形態を示すイメージをディスプレイすることができる。

ディスプレイされたイメージに対する予め設定された命令が受信されると（Ｓ７１２：Ｙ）、ユーザ端末装置２００はイメージに対応する他電子装置３００に接続情報を電子装置１００に伝送することができる（Ｓ７１３）。一例として、電子装置１００とユーザ端末装置２００との間で、Ｐ２Ｐ通信を行う途中にイメージを選択するユーザ命令が受信されると、イメージに対応する他電子装置３００に対する接続情報を電子装置１００に伝送することができる。

電子装置１００は、受信された他電子装置３００に対する接続情報に基づいて、他電子装置３００とＰ２Ｐ通信を行うことができる（Ｓ７２０）。

図８及び図９は、本発明の一実施形態に係る電子装置間の通信接続方法を説明するための図である。

図８（ａ）によると、ユーザ端末装置２００とディスプレイ装置１００－１との間で接続が行われた後、ユーザ端末装置２００はディスプレイ装置１００－１の接続情報を保存することができる。

図８（ｂ）に示すように、ユーザ端末装置２００は、外部電子装置と接続を行うためのモードに移行すると、ユーザ端末装置２００は、従来接続が行われたディスプレイ装置１００－１に対応するイメージをディスプレイすることができる。なお、ユーザ端末装置２００の撮影部２２０を介し、ユーザ端末装置２００の周辺領域を撮影することができる。図８（ｂ）は、説明の便宜上、スピーカ１００－２が撮影される場合を想定するものである。

ユーザ端末装置２００に対する予め設定された命令に応じて、ユーザ端末装置２００は、ディスプレイ装置１００－１に対する接続情報をスピーカに伝送することができる。例えば、ディスプレイ装置１００－１に対応するイメージとディスプレイ中のスピーカ１００－２をピンチイン（Ｐｉｎｃｈ ｉｎ）すると、ユーザ端末装置２００はディスプレイ装置１００－１に対する接続情報をスピーカ１００－２に伝送することができる。ただ、予め設定された命令は、ピンチイン動作に限定されるものではなく、多様なタッチ動作であってよい。

図８（ｃ）に示すように、スピーカ１００－２は、ユーザ端末装置２００からディスプレイ装置１００－１の接続情報が受信されると、ディスプレイ装置１００－１とＰ２Ｐ通信を行うことができる。即ち、ユーザがディスプレイ装置１００－１又はスピーカ１００－２を直接操作しなくても、ユーザ端末装置２００に対する操作を通じ、相互異なる両電子装置がＰ２Ｐ通信を行うことができる。

図９は、本発明の別の実施形態に係る電子装置間の通信接続方法を説明するための図である。

図９（ａ）と図９（ｂ）によると、図７に示すステップＳ７１１、Ｓ７１２、Ｓ７１３が行われることで、冷蔵庫１００－３とディスプレイ装置１００－１との間のＰ２Ｐ通信が行われてよい。即ち、電子装置１００がディスプレイ装置１００－１で実現され、従来接続が行われた他電子装置３００が冷蔵庫１００－３で実現された場合を想定したものである。

本発明の一実施形態によって、ディスプレイ装置１００－１と冷蔵庫１００－３とでＰ２Ｐ通信が行われると、冷蔵庫１００－３に設けられたディスプレイを介して出力されるステータス情報、コンテンツなどがディスプレイ装置１００－１を介して出力されてよい。

例えば、ディスプレイ装置１００－１は、冷蔵庫１００－３に冷蔵庫１００－３の機能情報をリクエストし、ディスプレイ装置１００－１の機能情報と冷蔵庫１００－３の機能情報に基づいて、冷蔵庫１００－３と連動可能な機能を識別することができる。一例として、冷蔵庫１００－３の機能情報にディスプレイ機能が含まれている場合、ディスプレイ装置１００－１は、冷蔵庫１００－３とミラーリング機能が可能であると識別し、冷蔵庫１００－３にディスプレイされた映像を受信してミラーリング機能を行ってよい。

図１０は、本発明の一実施形態に係る電子装置の制御方法を説明するための図である。

ユーザ端末装置２００が電子装置１００から応答信号を受信すると、ユーザ端末装置２００と電子装置１００とは接続が行われてよい。

本発明の一実施形態によって、ユーザ端末装置２００は、接続が行われた電子装置１００を制御することができる。一例として、図１０（ｃ）に示すように、ユーザ端末装置２００がロボット掃除機１００－５と接続された場合を想定することができる。この場合、ユーザ端末装置２００にディスプレイされた機能を選択し、ロボット掃除機１００－５を制御することができる。例えば、ユーザ端末装置２００を介してロボット掃除機１００－５に充電復帰命令を伝送することもできる。

一方、上述のように、ユーザ端末装置２００は、従来接続が行われた電子装置に対するイメージをディスプレイすることができる。例えば、図１０（ａ）に示すように、ディスプレイ装置１００－１と接続が行われた後、ユーザ端末装置２００がロボット掃除機が接続されると、ディスプレイ装置１００－１に対応するイメージをディスプレイすることができる。

図１０（ｄ）に示すように、ディスプレイ装置１００－１に対応するイメージに対するユーザ命令に応じて、ユーザ端末装置２００は、ロボット掃除機１００－５ではない、ディスプレイ装置１００－１と再接続を行うことができる。この場合、ユーザ端末装置２００は、上述のように、予め保存されたディスプレイ装置１００－１に対する接続情報に基づいて再接続を行うことができる。ディスプレイ装置１００－１と再接続が行われることで、ディスプレイ装置１００－１の機能（例えば、ボリュームアップ又はダウン）を制御することができるＵＩがユーザ端末装置２００にディスプレイされてよい。

図１１は、本発明の一実施形態に係る電子装置の制御方法を説明するためのフローチャートである。

本発明の一実施形態に係る電子装置は、ユーザ端末装置から予め設定された接続リクエスト信号が受信されると、ディスプレイを介して出力される第１映像を保存する（Ｓ１１１０）。

そして、ユーザ端末装置から第２映像が受信されると、第１映像に含まれたオブジェクトと同様のオブジェクトを第２映像で識別する（Ｓ１１２０）。

続いて、第１映像に含まれたオブジェクトの変化パターン及び第２映像で識別されたオブジェクトの変化パターンが同様である場合（Ｓ１１３０：Ｙ）、予め設定された接続リクエスト信号に対する認証情報をユーザ端末装置に伝送する（Ｓ１１４０）。

図１２は、本発明の一実施形態に係るユーザ端末装置の制御方法を説明するためのフローチャートである。

まず、ユーザ命令に応じて、予め設定された接続リクエスト信号を電子装置に伝送する（Ｓ１２１０）。

続いて、予め設定された時間が経過した後、ユーザ端末装置の撮影部を介して撮影された映像を電子装置に伝送する（Ｓ１２２０）。

更に、電子装置から予め設定された接続リクエスト信号に対する認証情報が受信されると、認証情報に基づいて、電子装置のＰ２Ｐ通信を行う（Ｓ１２３０）。

ここで、予め設定された接続リクエスト信号を電子装置に伝送するステップＳ１１２０は、ユーザ端末装置の接続されたネットワーク装置を介し、予め設定された接続リクエスト信号を電子装置にブロードキャストし、撮影された映像を電子装置に伝送するステップＳ１２２０は、予め設定された時間が経過した後、ネットワーク装置を介して撮影された映像を電子装置にブロードキャストしてよい。

なお、撮影された映像を電子装置に伝送するステップＳ１２２０は、ユーザの撮影命令に応じて撮影を介しし、予め設定された接続リクエスト信号を伝送した後、撮影部を介して撮影された映像を電子装置に伝送することができる。

ここで、ユーザ端末装置は、従来接続が行われた他電子装置に対する接続情報を含み、本発明の一実施形態に係る制御方法は、外部電子装置と接続を行うためのモードに移行すると、他電子装置に対する接続情報に基づいて、他電子装置に対するイメージをディスプレイするステップを更に含んでよい。

本発明の一実施形態に係る制御方法は、予め設定された命令に応じて、他電子装置に対する接続情報を電子装置に伝送するステップを更に含み、接続情報は、電子装置が他電子装置のＰ２Ｐ通信を行うための認証情報を含んでよい。

別の例として、接続情報は、電子装置が他電子装置とＰ２Ｐ通信を行うための認証情報及び他電子装置の機能情報を含み、電子装置に電子装置の機能情報をリクエストするステップは、電子装置の機能情報及び他電子装置の機能情報に基づいて、電子装置と他電子装置との間に連動可能な機能を識別するステップ、及び識別された機能をディスプレイするステップを更に含んでよい。

一方、以上で説明された多様な実施形態は、ソフトウェア（ｓｏｆｔｗａｒｅ）、ハードウェア（ｈａｒｄｗａｒｅ）またはこれらの組み合わせを用いてコンピュータ又はそれに類似する装置で読み込むことができる記録媒体内で実現されてよい。一部の場合において、本明細書で説明される実施形態がプロセッサ１２０そのもので実現されてよい。ソフトウェア的な実現によると、本明細書で説明される手続き及び機能のような実施形態は、別途のソフトウェアモジュールで実現されてよい。ソフトウェアモジュールのそれぞれは、本明細書で説明される一つ以上の機能及び動作を行うことができる。

一方、上述の本開示の多様な実施形態に係る処理動作を行うためのコンピュータ命令語（ｃｏｍｐｕｔｅｒ ｉｎｓｔｒｕｃｔｉｏｎｓ）は、非一時的な読み取り可能な媒体（ｎｏｎ－ｔｒａｎｓｉｔｏｒｙ ｃｏｍｐｕｔｅｒ ｒｅａｄａｂｌｅ ｍｅｄｉｕｍ）に保存されてよい。このような非一時的な読み取り可能な媒体に保存されたコンピュータ命令語は、プロセッサによって実行された際、上述の多様な実施形態に係る処理動作を特定機器が行うようにすることができる。

非一時的な読み取り可能な媒体とは、レジスタやキャッシュ、メモリ等のような短い間データを保存する媒体ではなく、半永久的にデータを保存し、機器によって読み取り（Ｒｅａｄｉｎｇ）が可能な媒体を意味する。非一時的な読み取り可能な媒体の具体的な例としては、ＣＤやＤＶＤ、ハードディスク、ブルーレイディスク、ＵＳＢ、メモリカード、ＲＯＭ等であってよい。

以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明は以上の実施形態に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的趣旨の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。

100 電子装置
110 通信部
120 保存部
130 ディスプレイ
140 プロセッサ
200 ユーザ端末装置
210 入力部
220 撮影部
230 通信部
240 プロセッサ
250 ディスプレイ
260 保存部
300 他電子装置

Claims (15)

1. 通信部と、
   保存部と、
   ディスプレイと、
   前記通信部を介してユーザ端末装置から予め設定された接続リクエスト信号が受信されると、前記ディスプレイを介して出力される第１映像を前記保存部に保存し、
   前記通信部を介して前記ユーザ端末装置から第２映像が受信されると、前記第１映像に含まれたオブジェクトと同様のオブジェクトを前記第２映像で識別し、
   前記第１映像に含まれた前記オブジェクトの変化パターン、及び前記第２映像で識別された前記オブジェクトの変化パターンが同様である場合、前記予め設定された接続リクエスト信号に対する認証情報を前記ユーザ端末装置に伝送するように前記通信部を制御するプロセッサと
   を含む電子装置。
2. 前記プロセッサは、
   前記ユーザ端末装置から前記通信部の接続されたネットワーク装置を介して伝送される前記予め設定された接続リクエスト信号を受信し、
   前記認証情報に基づいた前記ユーザ端末装置の通信接続リクエストに応じて、前記ユーザ端末装置とＰ２Ｐ（Ｐｅｅｒ－ｔｏ－Ｐｅｅｒ）通信を行うように前記通信部を制御することを特徴とする請求項１に記載の電子装置。
3. 前記オブジェクトは、
   前記第１映像及び前記第２映像のそれぞれに含まれたテキスト情報、及び前記第１映像及び前記第２映像のそれぞれのＲＧＢ情報のうち、少なくとも１つであることを特徴とする請求項１に記載の電子装置。
4. 前記プロセッサは、
   前記ユーザ端末装置から他電子装置に対する認証情報が受信されると、受信された認証情報に基づいて前記他電子装置と通信を行うことを特徴とする請求項１に記載の電子装置。
5. 前記プロセッサは、
   前記他電子装置に前記他電子装置の機能情報をリクエストし、
   前記機能情報が受信されると、前記電子装置の機能情報と前記他電子装置の機能情報に基づいて、前記他電子装置と連動可能な機能を識別し、前記識別された機能を行うことを特徴とする請求項４に記載の電子装置。
6. 前記プロセッサは、
   前記電子装置の機能がディスプレイ機能を含み、前記他電子装置の機能情報にディスプレイ機能が含まれている場合、前記他電子装置とミラーリング機能が可能であると識別し、前記他電子装置にディスプレイされた映像を受信し、前記ミラーリング機能を行うことを特徴とする請求項５に記載の電子装置。
7. 入力部と、
   撮影部と、
   通信部と、
   前記入力部を介して、ユーザ命令に応じて予め設定された接続リクエスト信号を電子装置に伝送し、
   予め設定された時間が経過した後で、前記撮影部を介して撮影された映像を前記電子装置に伝送し、
   前記電子装置から前記予め設定された接続リクエスト信号に対する認証情報が受信されると、前記認証情報に基づいて前記電子装置とＰ２Ｐ（Ｐｅｅｒ－ｔｏ－Ｐｅｅｒ）通信を行うプロセッサと
   を含むユーザ端末装置。
8. 前記プロセッサは、
   前記通信部の接続されたネットワーク装置を介して、前記予め設定された接続リクエスト信号を前記電子装置にブロードキャストし、
   予め設定された時間が経過した後で、前記ネットワーク装置を介して前記撮影された映像を前記電子装置にブロードキャストする前記通信部を制御することを特徴とする請求項７に記載のユーザ端末装置。
9. 前記プロセッサは、
   前記予め設定された接続リクエスト信号を伝送した後、前記予め設定された時間の間、撮影を行うように前記撮影部を制御することを特徴とする請求項７に記載のユーザ端末装置。
10. 前記プロセッサは、
    ユーザの撮影命令に応じて撮影を開始し、前記予め設定された接続リクエスト信号を伝送した後、前記撮影部を介して撮影された映像を前記電子装置に伝送することを特徴とする請求項７に記載のユーザ端末装置。
11. ディスプレイと、
    従来接続が行われた他電子装置に対する接続情報が保存された保存部と
    を更に含み、
    前記プロセッサは、
    外部電子装置と接続を行うためのモードに移行すると、前記保存部に保存された情報に基づいて、前記他電子装置に対するイメージを前記ディスプレイ上にディスプレイすることを特徴とする請求項７に記載のユーザ端末装置。
12. 前記プロセッサは、
    予め設定された命令に応じて、前記他電子装置に対する接続情報を前記電子装置に伝送するように前記通信部を制御し、
    前記接続情報は、
    前記電子装置が前記他電子装置とＰ２Ｐ通信を行うための認証情報を含むことを特徴とする請求項１１に記載のユーザ端末装置。
13. 前記接続情報は、
    前記電子装置が前記他電子装置とＰ２Ｐ通信を行うための認証情報及び前記他電子装置の機能情報を含み、
    前記プロセッサは、
    前記電子装置に前記電子装置の機能情報をリクエストし、
    前記電子装置の機能情報及び前記他電子装置の機能情報に基づいて、前記電子装置と前記他電子装置と間で連動可能な機能を識別し、前記識別された機能を前記ディスプレイを介して提供することを特徴とする請求項１１に記載のユーザ端末装置。
14. 前記撮影部を介して撮影された映像は、
    前記電子装置に備えられたディスプレイが撮影された映像であることを特徴とする請求項７に記載のユーザ端末装置。
15. ユーザ端末装置の制御方法において、
    ユーザ命令に応じて予め設定された接続リクエスト信号を電子装置に伝送するステップと、
    予め設定された時間が経過した後で、前記ユーザ端末装置の撮影部を介して撮影された映像を前記電子装置に伝送するステップと、
    前記電子装置から前記予め設定された接続リクエスト信号に対する認証情報が受信されると、前記認証情報に基づいて前記電子装置とＰ２Ｐ（Ｐｅｅｒ－ｔｏ－Ｐｅｅｒ）通信を行うステップと
    を含む制御方法。

Images