JP6026474B2 - マスタデバイスとオブジェクトデバイスとの自動インターフェース接続 - Google Patents

マスタデバイスとオブジェクトデバイスとの自動インターフェース接続 Download PDF

Info

Publication number
JP6026474B2
JP6026474B2 JP2014182705A JP2014182705A JP6026474B2 JP 6026474 B2 JP6026474 B2 JP 6026474B2 JP 2014182705 A JP2014182705 A JP 2014182705A JP 2014182705 A JP2014182705 A JP 2014182705A JP 6026474 B2 JP6026474 B2 JP 6026474B2
Authority
JP
Japan
Prior art keywords
object device
image
broadcast data
master device
master
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014182705A
Other languages
English (en)
Other versions
JP2015038740A (ja
Inventor
マシュー・エス.・グロブ
セラフィン・ディアズ・スピンドラ
ジェラルド・ブイ.・ジュニア.・ライト
バージニア・ウォーカー・キーティング
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of JP2015038740A publication Critical patent/JP2015038740A/ja
Application granted granted Critical
Publication of JP6026474B2 publication Critical patent/JP6026474B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/35Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00315Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a radio transmission apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • H04N1/0044Display of information to the user, e.g. menus for image preview or review, e.g. to help the user position a sheet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/185Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/08Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/083Network architectures or network communication protocols for network security for authentication of entities using passwords
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00307Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a mobile telephone apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0013Arrangements for the control of the connected apparatus by the still picture apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0034Details of the connection, e.g. connector, interface
    • H04N2201/0048Type of connection
    • H04N2201/0055By radio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0084Digital still camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)
  • Radar Systems Or Details Thereof (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Information Transfer Between Computers (AREA)
  • Selective Calling Equipment (AREA)

Description

関連出願への相互参照
本出願は、本出願の譲受人に譲渡され、参照により明確に本明細書に組み込まれる、2009年7月17日に出願された米国仮出願61/226552号および2009年7月17日に出願された米国仮出願61/226545号の利益を主張する。
無線デバイスは、よりユビキタスになりつつある。現在、無線デバイスとインターフェースすることは、比較的難しいか、あるいは、制限されたプロセスである。例えば、現在、電子デバイスをペアリングすることは、ユーザに対して、両方のデバイス上のプロトコルの起動を要求し、次に発見(discovery)を要求し、次いでペアリングする複雑なタスクである。さらに、いくつかの電子デバイスは、ほとんど、あるいは、まったく組み込みインターフェースを有しておらず、それは、デバイスがインタラクトすることを難しくする。ディスプレイスクリーンの値段、および、一般的に望まれる小さなデバイスのサイズは、全ての無線デバイスに高性能のインターフェースを取り付けることの妨げとなる。
無線デバイスの使用が増加するにつれ、電子デバイス間のインターフェース接続は、ますます難しくなるであろう。例えば、現在の電子デバイスは、典型的に、物理デバイスに関連のない不明瞭なデバイス名を含み、ユーザを混乱させている。例えば、デフォルトの電話のブルートゥース(登録商標)名は、NOK234Bであり、電話には表示されない。ユーザが被るこの混乱は、ペアリングが可能な無線デバイスの数が増えることで、さらに増すであろう。
このように、デバイスと簡単且つ自然にインターフェースすることを求める要求がますます増加している。
マスタデバイスは、オブジェクトデバイスを画像化し、この画像を使用して、オブジェクトデバイスを識別する。次に、マスタデバイスは、例えば、オブジェクトデバイスとペアリングすることによって、この識別されたオブジェクトデバイスと自動的にインターフェースする。マスタデバイスは、オブジェクトデバイスと関連するデータを検索し、その関連データを表示し、それは、表示されたオブジェクトデバイスの画像の上にデータを表示しうる。マスタデバイスは、オブジェクトデバイスを制御するため、あるいは、オブジェクトデバイスへのデータパスに使用されるインターフェースを提供する。
マスタデバイスは、オブジェクトデバイスから、このオブジェクトデバイスの視覚的外観についての情報を含みうるブロードキャストデータを受信する。マスタデバイスは、そのブロードキャストデータを表示し、オブジェクトデバイスからの表示されたブロードキャストデータの選択に基づいて、オブジェクトデバイスとインターフェースしうる。オブジェクトデバイスの画像は、複数のオブジェクトデバイスからのブロードキャストデータをフィルタリングして、マスタデバイスによってブロードキャストデータが表示されるオブジェクトデバイスの数を減らすために使用されうる。
図1は、マスタデバイスとオブジェクトデバイスとを含む、無線で接続されたデバイスの例示的なシステムを示すブロック図である。 図2は、オブジェクトデバイスと自動的にインターフェースしうるマスタデバイスの例を示すブロック図である。 図3は、マスタデバイスをオブジェクトデバイスとインターフェースする方法のフローチャートである。 図4Aは、マスタデバイス上に表示されるオブジェクトデバイスに関連するデータを用いて、そのオブジェクトデバイスとインターフェースするマスタデバイスを示す。 図4Bは、マスタデバイス上に表示されるオブジェクトデバイスに関連するデータを用いて、そのオブジェクトデバイスとインターフェースするマスタデバイスを示す。 図5Aは、オブジェクトデバイスとインターフェースするマスタデバイスを示す。 図5Bは、オブジェクトデバイスに関連するデータでオーグメント(augment)されたマスタデバイスの表示を示す。 図6Aは、オブジェクトデバイスとインターフェースするマスタデバイスを、オブジェクトデバイスに関連するオーグメントされたデータがマスタデバイスのオブジェクトデバイスの画像の上に示された状態で示す。 図6Bは、オブジェクトデバイスとインターフェースするマスタデバイスを、オブジェクトデバイスに関連するオーグメントされたデータがマスタデバイスのオブジェクトデバイスの画像の上に示された状態で示す。 図6Cは、オブジェクトデバイスとインターフェースするマスタデバイスを、オブジェクトデバイスに関連するオーグメントされたデータがマスタデバイスのオブジェクトデバイスの画像の上に示された状態で示す。 図6Dは、オブジェクトデバイスとインターフェースするマスタデバイスを、オブジェクトデバイスに関連するオーグメントされたデータがマスタデバイスのオブジェクトデバイスの画像の上に示された状態で示す。 図7Aは、インターフェース機能が制限されているオブジェクトデバイスとインターフェースするマスタデバイスを示す。 図7Bは、インターフェース機能が制限されているオブジェクトデバイスとインターフェースするマスタデバイスを示す。 図8Aは、マスタデバイスがオブジェクトデバイスに拡張機能を提供する場合の、オブジェクトデバイスとインターフェースするマスタデバイスを示す。 図8Bは、マスタデバイスがオブジェクトデバイスに拡張機能を提供する場合の、オブジェクトデバイスとインターフェースするマスタデバイスを示す。 図9Aは、オブジェクトデバイスによってブロードキャストされた情報を使用して、複数の同一オブジェクトデバイスのうちの1つを識別するマスタデバイスを示す。 図9Bは、2つのオブジェクトデバイスとインターフェースするために使用されるマスタデバイスを示す。 図9Cは、2つのオブジェクトデバイスとインターフェースするために使用されるマスタデバイスを示す。 図9Dは、2つのオブジェクトデバイスとインターフェースするために使用されるマスタデバイスを示す。 図10Aは、2つのオブジェクト間のインターフェースを開始するために使用されるマスタデバイスを示す。 図10Bは、2つのオブジェクト間のインターフェースを開始するために使用されるマスタデバイスを示す。 図10Cは、2つのオブジェクト間のインターフェースを開始するために使用されるマスタデバイスを示す。 図11は、マスタデバイスが、ペアリングまたはインターフェースが不可能な受動(passive)オブジェクトを画像化し、さらに、マスタデバイスが、そのオブジェクトに関係するデータを検索および表示する方法のフローチャートである。 図12は、オブジェクトの画像に基づいてアプリケーションを自動的に起動し、表示するマスタデバイスを示す。 図13Aは、受動オブジェクトを画像化し、その受動オブジェクトについての情報を検索および表示するマスタデバイスを示す。 図13Bは、受動オブジェクトを画像化し、その受動オブジェクトについての情報を検索および表示するマスタデバイスを示す。 図14Aは、受動オブジェクトを画像化し、その受動オブジェクトに関連する情報を検索および表示するマスタデバイスの別の例を示す。 図14Bは、受動オブジェクトを画像化し、その受動オブジェクトに関連する情報を検索および表示するマスタデバイスの別の例を示す。 図15Aは、受動オブジェクトを画像化し、そのオブジェクトに関連したデータを検索し、そのデータを、マスタデバイスがインターフェースしているオブジェクトデバイスにパスするマスタデバイスを示す。 図15Bは、受動オブジェクトを画像化し、そのオブジェクトに関連したデータを検索し、そのデータを、マスタデバイスがインターフェースしているオブジェクトデバイスにパスするマスタデバイスを示す。 図15Cは、受動オブジェクトを画像化し、そのオブジェクトに関連したデータを検索し、そのデータを、マスタデバイスがインターフェースしているオブジェクトデバイスにパスするマスタデバイスを示す。
本明細書に記述されるシステムおよび方法はペアリングを自動化するか、そうでなければ、例えば、マスタデバイスで撮ったオブジェクトデバイスの画像を使用して、マスタデバイスおよびオブジェクトデバイスをインターフェースする。マスタデバイスは、オブジェクトデバイスについての関連情報を、例えば、オブジェクトデバイスの画像上にその情報をオーバーレイすることで、提供するために使用されうる。マスタデバイスは、オブジェクトデバイスで見られるものよりも優れているインタラクション能力を含み、オブジェクトデバイスとのインタラクションを可能にする。それは、他の方法では、例えば、オブジェクトデバイスのインターフェース機能が制限されているか、オブジェクトデバイスがインターフェース機能を有さないため、難しいまたは不可能である。
図1は、マスタデバイス110とオブジェクトデバイス180とを含む、無線で接続されたデバイスの例示的なシステム100を示すブロック図である。例として、マスタデバイス110は、モバイル電話、または、ウルトラモバイルPC(「UMPC」)のような別の電子デバイスでありうる。1つの実施形態において、マスタデバイス110は、準モバイルあるいは固定でありうる。例えば、マスタデバイス110は、新たなデバイスを互いに容易にペアリングするために使用されうる、例えば、店などの固定または準固定のロケーションに位置づけられうる。例として、オブジェクトデバイスは、デジタルカメラ、ミュージックプレーヤ、テレビ、デジタルピクチャフレーム、または、あらゆる別のデバイスのようなデバイスでありうる。さらに、オブジェクトデバイス180がポータブルであること、あるいは、いくつかの場合において、比較的または完全に非ポータブルであることは認識されるべきである。マスタデバイス110は、カメラ112およびディスプレイ114を含む。マスタデバイス110は、オブジェクトデバイス180をカメラ112で画像化することによってオブジェクトデバイス180とインターフェースし、そのオブジェクトデバイス180の画像180imageは、ディスプレイ114に示され、その画像180imageを使用して、オブジェクトデバイス180を識別しうる。オブジェクトデバイス180が識別されると、次に、マスタデバイス110は、矢印116で示されるように、オブジェクトデバイス180と自動的にインターフェースすることができる。マスタデバイス110は、さらに、リンク104を通して、例えば、インターネットといった広域ネットワークなどのネットワーク102と通信し、それは、オブジェクトデバイス180を識別するか、または、それとインターフェースするのを支援するために使用されうる。随意に、マスタデバイス110は、ネットワーク102を通して間接的にオブジェクトデバイス180とインターフェース(116a)しうる。
図2は、マスタデバイス110の例を示すブロック図である。マスタデバイス110は、無線リンク116(図1に示される)を介して通信するために、カメラ112のような、画像化するための手段と、無線インターフェース130のような、オブジェクトデバイスとインターフェースするための手段とを含む。マスタデバイス110は、さらに、マスタデバイス110の動きを検出するために、加速度計またはジャイロスコープなどでありうる動き(motion)センサ118のような、動きを感知するための手段を含み、それは、マスタデバイス110に対するユーザ入力として使用されるジェスチャを検出するために使用されうる。マスタデバイス110は、さらに、オブジェクトデバイス180を識別するための手段を含み、それは、ソフトウェア126を含むメモリ124と通信状態にあるプロセッサ122と、ハードウェア128およびファームウェア129とを含みうるマスタデバイス制御ユニット120を含み、さらに、ディスプレイまたはキーパッド152などのユーザインターフェース150の態様を含みうる。カメラ112と無線インターフェース130は制御ユニット120に接続され、使用された場合は動きセンサ118も制御ユニット120に接続される。制御ユニット120は、実際は、プロセッサ122によって実行されうるが、機能的にプロセッサ122とは離れて示されるグラフィックエンジン125を含む。グラフィックエンジン125は、例えば、オブジェクトデバイス180の画像の上に表示されるオーグメンテーションデータ(augmentation data)を生成する。本明細書で使用される場合、プロセッサが、1または複数のマイクロプロセッサ、組み込みプロセッサ、コントローラ、特定用途向け集積回路(ASIC)、デジタル信号プロセッサ(DSP)などを含みうること、しかしながら、必ずしもそれらを含む必要がないことは理解されるであろう。プロセッサという用語は、特定のハードウェアというよりはむしろシステムによって実施される機能を記述することを目的としている。さらに、本明細書で使用される場合、「メモリ」という用語は、モバイルプラットフォームと関連づけられた長期、短期、または別のメモリを含む、あらゆるタイプのコンピュータ記憶媒体を指し、いずれかの特定のタイプのメモリまたはメモリの数、あるいは、メモリが格納される媒体のタイプに制限されるべきではない。
マスタデバイス110は、さらに、ディスプレイ114のような、表示するための手段、並びに、キーパッド、タッチスクリーン、または、別の適切な触覚入力デバイスのようなユーザ入力デバイス152を含むユーザインターフェース150を含む。ユーザインターフェース150は、さらに、マスタデバイス110がモバイル電話の場合などに、スピーカ154およびマイクロホン156を含みうる。
無線インターフェース130は、任意の適切なアンテナ132、受信機と送信機、すなわち、トランシーバを含み、それによって、マスタデバイス110は、1または複数のオブジェクトデバイスと、無線リンク116を通して通信することができる。随意に、無線インターフェース130は、さらに、プロセッサ122の処理要求を減らすための処理機能を有する。
随意に、マスタデバイス110は、ネットワーク102上でリンク104(図1に示される)を介して通信するために、アンテナ142を有するトランシーバのようなネットワークインターフェース140を含みうる。例えば、マスタデバイス110は、有線または無線通信リンクを介して、別のネットワーク102(例えば、インターネットのような広域ネットワーク)への接続性を提供しうる。結果として、マスタデバイス110によって、別のオブジェクトデバイス180(例えば、Wi−Fi(登録商標)局)は、ネットワーク102にアクセスすることができる。ネットワークインターフェース140は、セルラタワーを含む様々な無線通信ネットワークと共に、および、無線広域ネットワーク(WWAN)、無線ローカルエリアネットワーク(WLAN)、無線パーソナルエリアネットワーク(WPAN)などの無線通信アクセスポイントから実施されうる。「ネットワーク」および「システム」という用語は、交換可能に使用されることが多い。WWANは、符号分割多元接続(CDMA)ネットワーク、時分割多元接続(TDMA)ネットワーク、周波数分割多元接続(FDMA)ネットワーク、直交周波数分割多元接続(OFDMA)ネットワーク、単一搬送波周波数分割多元接続(SC−FDMA)ネットワーク、ロングタームエボリュ−ション(LTE)などでありうる。CMDAネットワークは、cdma2000、広域CDMA(W−CDMA)など、1または複数の無線アクセステクノロジ(RAT)を実施しうる。Cdma2000は、IS−95,IS−2000、IS−856規格を含む。TDMAネットワークは、GSM(登録商標)、D−AMPS(Digital Advanced Mobile Phone System)、または、ある別のRATを実施しうる。GSMとW−CDMAとは、「第3世代パートナーシッププロジェクト(3GPP)」という名の団体からの文書に記述されている。Cdma2000は、「第3世代パートナーシーププロジェクト2(3GPP2)」という名の団体からの文書に記述されている。3GPPおよび3GPP2の文書は、公に入手可能であるWLANは、IEEE 802.11xネットワークであり、WPANは、ブルートゥースネットワーク、IEEE 802.15x、または、ある別のタイプのネットワークでありうる。これらの技術は、さらに、WWAN、WLAN、および/または、WPANのあらゆる組み合わせと共に実施されうる。
マスタデバイス110は、マスタデバイス110の1または複数のコンポーネントに電力を提供するために、随意にバッテリ121を含みうる。マスタデバイス110は、モバイルハンドセット、携帯情報端末、ラップトップコンピュータ、ヘッドセット、乗り物用ハンズフリーデバイス(vehicle hands free device)、または、あらゆる別の電子デバイスのうちの少なくとも1つを備えうる。特に、本明細書の教示は、様々なデバイスに組み込まれうる(例えば、それ内で実施されるか、あるいは、それによって実行される)。例えば、本明細書に教示される1または複数の態様は、電話(例えば、セルラ電話)、携帯情報端末(「PDA」)、UMPC、エンターテイメントデバイス(例えば、ミュージックデバイスまたはビデオデバイス)、あるいは、カメラ112を組み込むあらゆる別のデバイスに組み込まれうる。
本明細書に記述される方法は、アプリケーションに依存して、様々な方法で実施されうる。例えば、これらの方法は、ハードウェア128、ソフトウェア126、ファームウェア129、あるいは、これらのあらゆる組み合わせで実施されうる。ハードウェアに実施された場合、処理ユニットは、1または複数の特定用途向け集積回路(ASIC)、デジタル信号プロセッサ(DSP)、デジタル信号処理デバイス(DSPD)、プログラマブル論理デバイス(PLD)、フィールドプログラマブルゲートアレイ(FPGA)、プロセッサ、コントローラ、マイクロコントローラ、マイクロプロセッサ、電子デバイス、本明細書に記述される機能を行うように設計された別の電子ユニット、または、これらの組み合わせで実施されうる。
ファームウェアおよび/またはソフトウェア実施の場合、この方法は、本明細書に記述される機能を行うモジュール(例えば、手順、機能など)を用いて実施されうる。命令群を実体的に組み込む任意の機械可読媒体が、本明細書で記述される方法を実施する際に使用されうる。メモリは、プロセッサユニットの中で、あるいは、プロセッサユニットの外で実施されうる。本明細書で使用される際、「メモリ」という用語は、長期、短期、揮発性、不揮発性のうちのいずれかのタイプ、または、別のメモリを指し、任意の特定のタイプのメモリまたはメモリの数、あるいは、メモリが記憶される媒体のタイプに制限されるべきではない。
例えば、ソフトウェア126のコードは、本明細書に記述されるように、メモリ124に記憶され、プロセッサ122によって実行され、プロセッサを実行するため、且つ、マスタデバイス110の動作を制御するために使用されうる。例えば、メモリ124などの、コンピュータ可読媒体に記憶されたプログラムコードは、オブジェクトデバイスの画像を使用してオブジェクトデバイスを識別するためのプログラムコードと、その識別されたオブジェクトデバイスとインターフェースするためのプログラムコードとを含みうる。コンピュータ可読媒体は、オブジェクトデバイスから受信されたブロードキャストデータを表示し、そのブロードキャストデータを使用して、インターフェースされるべきオブジェクトデバイスの識別を支援するためのプログラムコードを含みうる。
ファームウェアおよび/またはソフトウェアで実施された場合、機能は、コンピュータ可読媒体上の、1または複数の命令群あるいはコードとして記憶されうる。例は、データ構造でエンコードされたコンピュータ可読媒体と、コンピュータプログラムでエンコードされるコンピュータ可読媒体とを含む。コンピュータ可読媒体は、物理コンピュータ記憶媒体を含む。記憶媒体は、コンピュータがアクセス可能な、あらゆる利用可能な媒体でありうる。それに制限されない例として、そのようなコンピュータ可読媒体は、RAM、ROM、EEPROM、CD−ROMまたは他の光学ディスク記憶装置、磁気ディスク記憶装置または他の磁気記憶デバイス、あるいは、コンピュータによってアクセスされることができ、命令群やデータ構造形で所望のプログラムコードを記憶するために使用されうる任意の別媒体を備えうる。ディスク(disk)とディスク(disc)は、本明細書で使用される際、コンパクトディスク(CD)、レーザディスク、光ディスク、デジタル多用途ディスク(DVD)、フロッピー(登録商標)ディスク、ブルーレイ(登録商標)ディスクを含む。ディスク(disk)は通常磁気作用によってデータを再生し、ディスク(disc)はレーザーで光学的にデータを再生する。上記の組み合わせもコンピュータ可読媒体の範囲内に含まれるべきである。
図3は、マスタデバイス110をオブジェクトデバイス180とインターフェースする方法のフローチャートである。マスタデバイス110は、デバイスが互いに登録しあうプロセスである「ペアリング」を行うことによって、オブジェクトデバイスとインターフェースしうる。一度ペアリングされると、デバイスは、典型的に、それらが範囲内にあり、アクティブである場合はいつでも、ペアリングプロセスを再度行うことなく互いに通信することができる。参照の簡略化のために、インターフェース接続は、時に、ペアリングと呼ばれうるが、本明細書において、インターフェース接続のさらなる形態が、ペアリング以外に意図されることは理解されるべきである。
図3に示されるように、ペアリングされるべきオブジェクトデバイスが、マスタデバイスを用いて画像化される(202)。オブジェクトデバイスの画像は、マスタデバイスが、所望のオブジェクトデバイスとインターフェースすることを確実にするために、ユーザに対して表示されうる。この画像は、カメラを使用して静止画像として生成されるか、あるいは、ビデオとして生成されうる。マスタデバイスは、この画像からオブジェクトデバイスを識別する(204)。識別は、オブジェクトデバイスの視覚的外観、あるいは、バーコードや別のタイプのマーカなどの、オブジェクトデバイス上に現れる可視マーカに基づきうる。識別は、さらに、オブジェクトデバイス180からの、例えば、タグまたは周波数など、ブロードキャストビーコンに基づき、それは、例えば、ジオポジション(geo-position)、ジオオリエンテーション(geo-orientation)、ID、または、オブジェクトデバイスのタイプであるが、それに限定されることのないカテゴリ(例えば、デジタルカメラ、MP3プレーヤなど)、サブカテゴリ(例えば、ポイントアンドシュートデジタルカメラ)、ブランド(例えば、ソニー、ノキアなど)、コンテンツの種類(例えば、映画、ミュージックなど)、あるいは、これらの組み合わせといった制限された情報へのパブリックアクセスを可能にする。マスタデバイス110は、視覚的外観、可視マーカ、または、ブロードキャストビーコンから得られた情報を使用して、ルックアップテーブルから一致するものを検索することによって、オブジェクトデバイス180を識別しうる。1つの実施形態において、マスタデバイス110は、キーポイント機能またはラインのような別の視覚的参照を使用し、ルックアップテーブルに対して画像の視覚的な整合を行った後に、利用可能な非視覚的センサを使用して、可能性の高いアイテムのルックアップテーブルを狭めうる。例えば、ルックアップテーブルは、前に記憶された、消費者電子機器工業デザインの画像、または、そのようなデザインの3次元モデルの画像を含みうる。ルックアップテーブルは、例えば、マスタデバイス110、オブジェクトデバイス180、または、例えば、ネットワーク102によってリンク104(図1に示される)を介してアクセスされるサーバなどの遠隔ロケーションに記憶されうる。
1つの実施形態において、識別は、オブジェクトデバイスによって提供される視覚的識別情報に基づきうる。例えば、オブジェクトデバイスは、オブジェクトデバイスについての視覚的情報をブロードキャストし、それを用いてオブジェクトデバイスが識別されうる。オブジェクトデバイスは、オブジェクトデバイスが何に見えるか、つまり画像をブロードキャストするか、あるいは、例えば、オブジェクトデバイスが図9Aに示されるようにデジタルピクチャフレームである場合には、オブジェクトデバイスによって表示される画像についての情報をブロードキャストしうる。これは、同一のオブジェクトデバイスが、複数存在する場合に有益でありうる。次に、マスタデバイス110は、オブジェクトデバイスを画像化し、マスタデバイス110が撮ったその画像を、例えば、デジタルピクチャフレーム上に現在表示されている画像のような、オブジェクトデバイスについてのブロードキャスト情報と比較して、オブジェクトデバイスを識別する。例えば、図9Aに示されるように、マスタデバイス110は、ピクチャフレーム180Aの工業デザインを使用して、そのオブジェクトデバイスを認識することができる。しかしながら、例えば、フレーム180Aと180Bで示される同じ工業デザインなど、類似または同様のフレームが複数存在する場合であって、各々が、異なるスクリーン画像を表示している場合、ユーザは、カメラビューにおいて1つ(180A)を選択し、マスタデバイス110は、現在表示されている画像を用いて、オブジェクトデバイス180Aまたは180Bのうちのどちらとペアリングすべきかを識別することができる。識別は、例えば、デジタルピクチャフレームで表示される静止画像に基づくか、あるいは、表示されるビデオに基づきうる。ビデオに基づく識別の場合、例えば、既定の時間セグメントにおいてビデオが何に「見える」かについての概要である共有ビデオシグネチャのシーケンスに基づいて、あるいは、選択されたフレームの両側における選択された数のフレームが比較される誤り修正が加えられた、既知の時間に生成されたビデオの1フレームに基づいて整合が行われうる。これらの技術は、コンピュータ、ラップトップ、セルラ電話、ミュージックプレーヤなどの別のオブジェクトデバイスと使用されうる。1つの実施形態において、マスタデバイス110は、オブジェクトデバイスによってブロードキャストされた情報の画像を表示し、ユーザは、そこから、インターフェースすべき所望のオブジェクトデバイスを選択する。それによって、マスタデバイス110が、マスタデバイス110でオブジェクトデバイスを画像化する必要性はなくなるであろう。望まれる場合、マスタデバイス110によって撮られたオブジェクトデバイスの画像が使用され、マスタデバイス110がユーザ選択のために表示する、ペアリング可能なオブジェクトデバイスの数をフィルタリングしうる。
オブジェクトデバイスの識別に基づいて、マスタデバイスは、任意のステップ206で示されるように、オブジェクトデバイスがインターフェース可能か否かを決定する。マスタデバイス110は、ディスプレイ114のオブジェクトデバイス180の画像上に、オブジェクトデバイス180がインターフェースされたか否かを示し、ユーザに、インターフェースが望まれるものか否かを示す機会を与えうる。例えば、オブジェクトデバイス180の画像は、ペアリング能力を示すために、マスタデバイス110のディスプレイ114にアウトライン化されるか、あるいは、拡大して示されうる。オブジェクトデバイス画像のディスプレイのオーグメンテーション(augmentation)は、オブジェクトデバイス180からのブロードキャストビーコンから得られる情報を含みうる。ユーザは、ペアリングするか、ペアリングしないか、あるいは、オブジェクトデバイスのペアリング能力を隠すかを選択することができる。ペアリング能力は、例えば、一度だけ、永久に、または、例えば、全てのデジタルピクチャフレームなど、特定のクラス内の全てのオブジェクトデバイスについて隠されうる。
次に、マスタデバイス110は、自動的に、あるいは、ユーザ選択に応答して、オブジェクトデバイスとインターフェースまたはペアリングする(208)。ユーザ選択の使用は、ペアリング可能なオブジェクトデバイスが画像内に複数存在する場合に有益でありうる。例として、ユーザ選択は、ジェスチャに基づきうる。ここで、例えば、ペアリング可能な異なるオブジェクトデバイスはジェスチャに基づいてハイライトされ、一度それがハイライトされると、所望のオブジェクトデバイスが選択されうる加えて、ユーザが、例えば、ペアリングが望まれることを示すと、そのペアリングプロセスは自動でありうる。ペアリングが自動である場合、ユーザが、オブジェクトデバイスとのペアリングを望んでいることを確実にするために、中間セキュリティステップが使用されうる。このペアリングは、マスタデバイスとオブジェクトデバイスとの距離に到達するために、例えば、最低電力ペアリング方法を使用して、特定のロケーションの特定のデバイスに対して最適化されうる。さらに、ペアリング方法は、マスタデバイスとオブジェクトデバイスとの相対位置が変化すると、必要に応じて自動的に変化しうる。インターフェースまたはペアリングするために、マスタデバイスおよびオブジェクトデバイスは、最初に、例えば、デバイスが、発見メッセージの交換を通して互いを発見するという発見可能な状態に入ることによって、互いを発見しなければならない。例えば、マスタデバイス110は、ペアリング可能ローカルデバイスが発見モードに入ることを要求しうる。マスタデバイス110は、例えば、ネットワーク102を通して、その要求を開始しうる。ネットワークは、マスタデバイス110のエリア内のペアリング可能な任意のオブジェクトデバイスを刺激して発見モードに入らせうる。あるいは、マスタデバイスは、最初に、所望のオブジェクトデバイス180を識別し、次に、例えば、ネットワーク102を通して、マスタデバイス110のエリア内の類似した全てのオブジェクトデバイスが発見モードに入ることを要求する発見要求を開始しうる。発見すると、デバイスは、互いにペアリングしうる。ペアリングは、少なくとも部分的に、ペアリングを特定のデバイスに制限するセキュリティ機能でありうる。例えば、ペアリングは、デバイスの無許可あるいは望まれないペアリングを防ぐために、第1のデバイスが、パスワード(工場出荷前にデバイス毎に決められることが多い4桁の数字)と一緒に、第2のデバイスに応答しなければならないパスワード認証スキームを含みうるメッセージの交換を含みうる。ブルートゥースのようなネットワーキングプロトコルにおいて、発見およびペアリングは、別々の手順であるが、共に実行されうる。実際のペアリングは、プロトコルの標準プラクティス(例えば、ブルートゥース、WiFi(登録商標)、IRなど)を通し、現在のあらゆるプロトコルを用いて行われうる。
望まれる場合、マスタデバイス110上に表示される画像はオーグメントされ、例えば、グラフィックエンジン125によって提供されるオーグメンテーションデータを使用して、随意のステップ210で示されるようなペアリングの承認など、オブジェクトデバイスの状態を示す。加えて、オブジェクトデバイスに関連するデータは、任意ステップ214において、マスタデバイスに表示されうる。
図4Aおよび4Bは、例として、マスタデバイス110を、オブジェクトデバイス180(この場合はデジタルカメラ)とペアリングすることを示す。ここで、オブジェクトデバイス180と関連するデータは、ペアリングの後、マスタデバイス110上に表示される(214)。図4Aは、オブジェクトデバイス180を画像化する(202)マスタデバイス110を示す。ここで、オブジェクトデバイスの画像180imageは、マスタデバイス110のディスプレイ114に示される。オブジェクトデバイスの画像180imageに基づいて、マスタデバイス110は、図4Bに示されるように、オブジェクトデバイス180とペアリング116し、オブジェクトデバイス180と関連するデータ(この場合は、オブジェクトデバイス180で撮った写真182)を、マスタデバイス110のディスプレイ114上に表示する。マスタデバイス110によって表示される、オブジェクトデバイス180に関連するデータは、ユーザによって選択されるか、あるいは、自動的に表示されうる。
オブジェクトデバイス180に関連するデータは、オブジェクトデバイスについての情報でありうる。例えば、そのデータは、オブジェクトデバイスの履歴やプロパティ、オブジェクトデバイスに関連したタスクをどのように実行するかを説明するヘルプファイル、あるいは、別のそのようなデータに関連しうる。あるいは、この関連データは、例えば、デジタルカメラからの写真、音楽や映画などのファイルのリスト、または、オブジェクトデバイスに記憶されている別の情報など、オブジェクトデバイスからのものでありうる。加えて、この関連データは、アプリケーション、または、オブジェクトデバイスとのインターフェースでありうる。例として、図5Aおよび5Bは、USBフラッシュドライブの形をしているオブジェクトデバイス180とインターフェースするマスタデバイス110と、オブジェクトデバイス180に関連するデータ180dataでオーグメントされた、マスタデバイス110のディスプレイとを示す。図5Bに示されるように、ペアリング116の後、フラッシュドライブに格納されたファイルのリストであありうる関連データ180dataか、あるいは、フラッシュドライブに格納されたファイルを開けうる関連データ180dataが表示される。このように、マスタデバイス110は、オブジェクトデバイス180自体が、ユーザインターフェースを有していない場合に、ユーザインターフェースをオブジェクトデバイス180に提供しうる。
図6A、6B、6C、6Dは、時計の形をしているオブジェクトデバイス180とインターフェースするマスタデバイス110の別の例を、オブジェクトデバイス180に関連する、オーグメントされたデータ180dataがマスタデバイス110のオブジェクトデバイス画像180imageの上に示された状態で示す。示されるように、関連データ180dataは、オブジェクトデバイスの画像180imageと密にアライメントされて(図6A)、粗くアライメントされて(図6B)、あるいは、アライメントされずに(図6C、6D)、マスタデバイス110によって表示されうる。図6Dに示されるように、オブジェクトデバイス180からの関連データは、画像180imageのキーポイント追跡を使用して、マスタデバイス180のディスプレイ全体にわたって表示され、次に、グラフィックオーグメンテーション(graphic augmentation)をそれに固定しうる。
マスタデバイス110は、制限されたユーザインターフェース容量を有するオブジェクトデバイスとのユーザインターフェースを提供するため、あるいは、単に、オブジェクトデバイスのユーザインターフェースによって許可されるものと関連する拡張機能性とのユーザインターフェースを提供するために使用されうる。例えば、図7Aおよび7Bは、制限されたユーザインターフェース機能を有するオブジェクトデバイス180とペアリングするマスタデバイス110を示す。図7Aおよび7Bのオブジェクトデバイス180は、物理ユーザインナーフェースを有するが、グラフィカルユーザインターフェース(GUI)を提供するためのスクリーンを有さないMP3プレーヤの形をしている。図7Aに示されるように、マスタデバイス110は、オブジェクトデバイス180を画像化することによって、オブジェクトデバイス180とペアリングされる。図7Bに示されるように、ペアリング116の後、マスタデバイス110上のオブジェクトデバイス180に関連するデータは、例えば、MP3プレーヤのさらなる機能性を可能にするために使用されうるGUIである。
図8Aおよび8Bは、オブジェクトデバイス180とインターフェースするマスタデバイス110を示す。ここで、マスタデバイス110は拡張機能性を提供する。図8Aおよび8Bのオブジェクトデバイス180は、グラフィカルユーザインターフェースを有するMP3プレーヤの形をしている。図8Aに示されるように、マスタデバイス110は、オブジェクトデバイス180を画像化することによって、オブジェクトデバイス180とペアリングされる。図8Bで示されるように、ペアリング116の後、マスタデバイス110上のオブジェクトデバイス180に関連するデータはGUIであり、インターフェースは、より簡単なユーザインタラクションのためのタッチスクリーン、より大きなスクリーン、制御のためにより自然なジェスチャを可能にすること、または、プレイリスト作成のような追加の能力を提供すことなど、拡張機能性を提供しうる。
このように、オブジェクトデバイス180に関連した様々なタイプのデータが、マスタデバイス110によって表示されうる。例えば、そのデータは、図6Aに示される情報のように受動(passive)であるか、あるいは、図7Bに表示されるミュージックインターフェースのようにインタラクティブでありうる。さらに、オブジェクトデバイスによって直接あるいは図1に示されるネットワーク102のようなリモートソースを介して晒される(exposed)機能性が表示されうる。例として、図5Aおよび5Bにおいて、180dataは、オブジェクトデバイス180自体からとは対照的に、ネットワーク102からのものでありうる。例として、図5Aに示されるUSBフラッシュドライブ180がコンピュータに差し込まれると、180dataが、ネットワーク102において同期化されうる。マスタデバイス110がUSBフラッシュドライブ180とペアリングされると、それは、実際、ネットワーク102において同期化されたデータとペアリングしうる。別の例において、MP3プレーヤ機能性は、拡張される。ここで、MP3プレーヤ上のデータのコピーは、ネットワーク102上に存在する。MP3プレーヤ上では拡張機能性(例えば、プレイリストを作ることなど)ができない場合、マスタデバイス110が使用され、ネットワーク102上でデータを操作する。インタラクションが完了すると(例えば、新しいプレイリストが作られると)、ネットワーク102は、MP3プレーヤ(オブジェクトデバイス)180と同期化する。望まれる場合、マスタデバイス110とオブジェクトデバイス180との間のインタラクションは、オーグメンテーション呼び出し(augmentation call)間で持続しうる。例えば、表示されるオーグメントされたデータは、それが前回閲覧されたに表示された状態と同じ状態で保存されうる。さらに、マスタデバイス110は、命令またはデータをオブジェクトデバイス180に提供しうる。換言すると、オブジェクトデバイス180は、マスタデバイス110とのインターフェースを通して制御されうる。データは、マスタデバイス110、オブジェクトデバイス180、あるいは、例えば、ネットワーク102(図1)を介してアクセスされるサーバなどのリモートロケーションに記憶されうる。
加えて、マスタデバイス110は、さらに、複数のオブジェクトデバイスとインターフェースしうる。例えば、図9B、9C、9Dで示されるように、マスタデバイス110は、デジタルカメラ180およびデジタルピクチャフレーム180Aとして示される2つのオブジェクトデバイスとインターフェースするために使用される。マスタデバイス110は、例えば、カメラ180などの一方のオブジェクトデバイスからデータを検索し、そのデータを、例えば、デジタルピクチャフレーム180Aなどのもう一方のオブジェクトデバイスにパスするために使用されうる。図9Bは、カメラ180を画像化することによって、カメラ180とペアリングされているマスタデバイス110を示す。デジタルピクチャフレーム180Aは、図9Cに示されるように、既に、または、後に、同様の方法でペアリング116Aされうる。図9Cは、マスタデバイス110とカメラ180とのペアリング116の後を示し、データは、マスタデバイス110によってカメラ180から受信され、マスタデバイス110によって表示される。次に、選択されたデータは、マスタデバイス110から、例えば、デジタルピクチャフレーム180Aなどの第2のオブジェクトデバイスにパスされ、図9Dに示されるように表示されるか、そうでなければ、第2のオブジェクトデバイスによって記憶または使用されうる。このデータパスは自動であるか、あるいは、例えば、タッチスクリーンを通しての選択を、あるいは、マスタデバイス110内の、加速度計またはジャイロスコープなどの動きセンサ118によって検出されるユーザジェスチャを含むユーザインタラクションによって引き起こされうる。ジェスチャを使用してデータパスを開始する場合、互いに、および/または、マスタデバイス110に関する、1または複数のオブジェクトデバイス180と180Aの相対位置は、例えば、2つのオブジェクトデバイス180と180Aの画像化の間で動きセンサ118を使用して、マスタデバイス110の位置の変化または傾向を検出することによって事前に決定されうる。あるいは、ピクセルフロー追跡(pixel flow tracking)が使用され、オブジェクトデバイス180と180Aとの関連性を視覚的に決定しうる。
1つの実施形態において、マスタデバイス110は、2つ以上のオブジェクトデバイスとインターフェースして、それらのオブジェクトデバイス間のペアリングを開始することで、それらのオブジェクトデバイス間のペアリングを支援するために使用されうる。それは、特に、オブジェクトデバイスのユーザインターフェースが、それらのデバイスの直接的なペアリングが難しい場合に有益でありうる。例えば、図10A、10B、10Cに示されるように、マスタデバイス110が使用され、デジタルカメラ180およびデジタルピクチャフレーム180Aとして示される2つのオブジェクトデバイス間のインターフェースを開始する。図10Aは、カメラ180を画像化することによってカメラ180とペアリング116されているマスタデバイス110を示す。図10Bは、デジタルピクチャフレーム180Aを画像化することによって、デジタルカメラフレーム180Aとして示されるターゲットオブジェクトデバイスとペアリング116Aされているマスタデバイス110を示す。2つのオブジェクトデバイス180と180Aがマスタデバイス110とペアリングされると、マスタデバイス110は、図10Cに示されるように、2つのオブジェクトデバイス180と180Aとの間のペアリング116Bを開始するために使用される。2つのオブジェクトデバイス180と180Aとのペアリングは、自動的に、または、マスタデバイス110のユーザインターフェースによる選択などのユーザインタラクションに応答して、マスタデバイス110がオブジェクトデバイス180と180Aの相対位置に気づいている場合のオブジェクトデバイス180と180Aとの間のジェスチャによって、あるいは、オブジェクトデバイス180と180Aの各々からのプロトコルの仕様を使用することによって行われうる。オブジェクトデバイス180と180Aとのペアリング186は、マスタデバイス110が存在しない場合でも持続しうる。
別の実施形態において、図11に示されるフローチャートに示されるように、マスタデバイス110は、受動オブジェクト190、すなわち、ペアリングまたはインターフェースできないオブジェクト、を画像化し(302)、そのオブジェクトに関連するデータを検索して表示する。マスタデバイス110は、受動オブジェクトを識別し(304)、その識別されたオブジェクトと関連するデータを検索して、そのデータをマスタデバイス110に表示しうる(306)。受動オブジェクト190は、マスタデバイス110のカメラ112によって登録されうる任意のオブジェクトであり、それは、時計、ステープラーまたは車のような接続性のないデバイス、例えば、ブルートゥースを備えたカメラのような、利用されない接続性を有するデバイス、鉛筆、石、またはテーブルのようなオブジェクト、マガジン、スクリーンショットのような印刷媒体またはデジタル媒体、ウエストまたは足のような体の一部、あるいは、色彩またはテクスチャ(texture)のような登録された別のオブジェクトを含む。
受動オブジェクト190は、その視覚的外観から識別されうる。識別は、例えば、ユーザによってあらかじめ撮られた受動オブジェクトの特定の画像、受動オブジェクトのテクスチャされた(textured)3次元モデル、または、時計の一般的な画像など、時計の特定のブランドとは対照的に画像の一般的なカテゴリに基づきうる。ユーザは、その画像を「時計」とラベル付けすること、あるいは、特定のオブジェクトまたはオブジェクトのカテゴリに対してPINを提供することなど、その画像を定義するために追加情報を提供しうる。ユーザによって提供される追加情報は、例えば、マスタデバイス110のトレーニングの間に、1度だけ入力され、入力された情報を使用した後続の識別は自動的である。加えて、受動オブジェクトは、識別探索を、例えば、カテゴリ、サブカテゴリ、ブランド、ジャンル、あるいは、それらの組み合わせ別に絞るために、画像化され使用される視覚的マーカを含みうる。識別は、マスタデバイス110によって、または、例えば、ネットワーク102(図1)を通して遠隔に行われうる。受動オブジェクトのマスタデバイス110に表示される画像は、例えば、受動オブジェクトを拡大することによって、あるいは、受動オブジェクトをアウトラインすることによって、受動オブジェクトがその画像へのオーグメンテーションを使用して識別されたことを示しうる。望まれる場合、ユーザは、識別されるべき受動オブジェクトと、表示されるべきデータのタイプとを選択しうる。データは、自動的に表示されうる。識別されるべき受動オブジェクトの選択がユーザによって一度行われると、受動オブジェクトの後の画像化は自動識別につながる。受動オブジェクトと検索データとの関連性は、ユーザ定義されるか、あるいは、外部的または自動的に定義されうる。さらに、データは、マスタデバイス110、または、リモートソースに記憶され、例えば、ネットワーク102(図1)上のマスタデバイス110によって検索されうる。関連データは、カレンダーアプリケーションなどを起動するアプリケーションの形をしている。あるいは、アプリケーションは、受動オブジェクトの画像に基づいて、検索または固定解除(unlock)されうる。関連データは、命令群のような受動オブジェクトに関連のある情報、または、ヘルプ情報でありうる。関連データは、受動オブジェクトの画像に基づいて、関連データへのアクセスを提供するか、あるいは、関連データのダウンロードを開始しうる。例えば、ブックカバーを画像化すると、オーディオブックまたはデジタルブックを自動的にダウンロードしうる。関連データは、任意の媒体、または、媒体の組み合わせであり、2次元または3次元の画像、アニメーション、ビデオ、サウンド、ハプティック(haptic)フィードバック、または別の感覚データを含むがそれらに限定されない。
例として、ユーザは、図12に示されるように、マスタデバイス110内で、ユーザの時計190の画像が、カレンダーアプリケーションを自動的に起動し、ユーザのカレンダーをマスタデバイス110に表示することを定義しうる。あるいは、ユーザは、ユーザの結婚指輪の画像を使用して、ユーザの結婚式の画像を開くなど、受動オブジェクトと検索データとの関連性をパーソナライズすることができる。マスタデバイス110は、受動オブジェクトを画像化することと、その受動オブジェクトデバイスと関連付けられるべきであり、後にマスタデバイス110によって受動オブジェクトと相関されるデバイス名および所望データを入力することとを含むプロセスを通して、ユーザの時計、指輪、ステープラー、車など、個人的な受動オブジェクトを識別するようにトレーニングされうる。
加えて、受動オブジェクト190について検索された関連データは、外部的または自動的に定義されうる。例えば、図13Aおよび13Bは、マスタデバイス110が、ペアリング不可能なDVRなどの受動オブジェクト190を画像化する例を示し(図13A)、動作命令群などの動作命令群192の形をしている関連データがネットワーク102から検索され、マスタデバイス110によって自動的に表示される(図13B)。特定のDVRが識別されているが、この動作命令群、または、特定のDVRについての別の情報をネットワーク102から得るために接続もペアリングも必要としない。動作命令群192は、図13Bに示される画像のように、画像に密にアライメントされて表示されうる。
図14Aおよび14Bは、マスタデバイス110が、映画についての広告、この例では、ダークナイト(登録商標)ロゴ(図14A)のような受動オブジェクト190を画像化し、ダークナイトに関連するデータ(192)が検索され表示される例を示す。例えば、映画ダークナイトは、自動的に検索され、図14Bに示されるようにマスタデバイス110上に表示されうる。あるいは、映画ダークナイトを上映している場所および時間などの、画像化されたオブジェクトに関連する別の情報が表示されうる。望まれる場合、受動オブジェクト190の画像は、受動オブジェクトの識別を助けるために、例えば、ロゴ自体などの視覚的外観に基づくか、あるいは、視覚的マーカ194に部分的または完全に基づきうる。
別の実施形態において、マスタデバイス110は、ペアリング可能なオブジェクトデバイス180とインターフェースし、ペアリング可能な、または、受動的な別のオブジェクトデバイスの画像から得られたデータを、オブジェクトデバイス180に提供しうる。1つの実施形態において、データが得られる1つよりも多くのオブジェクトデバイス、および/または、1つよりも多くのターゲットオブジェクトデバイス180が存在しうる。例えば、図15A、15B、15Cに示されるように、マスタデバイス110は、受動オブジェクト190(ダークナイトの広告など)を画像化し(図15A)、前述されたように、受動オブジェクトの画像に基づいてデータを識別および獲得しうる。ユーザは、テレビのような、ペアリング116されたターゲットオブジェクトデバイス180にパスされるべきデータを選択し(図15B)、例えば映画などのデータをオブジェクトデバイス180に自動的にパスされうる(図15C)。データは、マスタデバイス110によって検索され、オブジェクトデバイス180にパスされる。あるいは、代替として、マスタデバイス110は命令群をオブジェクトデバイス180に提供して、データ自体を検索しうる。
このように、マスタデバイス110は、受動的またはペアリング可能な1または複数のオブジェクトデバイスの画像に基づいて、コマンドをオブジェクトデバイス180にパスするために使用されうる。例えば、マスタデバイス110は、ランニングシューズの特定のブランドを画像化し、次にMP3プレーヤを画像化し、それに応じて、例えば、エクササイズミュージックのような特定のプレイリストをMP3プレーヤに自動的にダウンロードしうる。1つの実施形態において、マスタデバイス110は、例えば、ミュージックのようなデータをダウンロードし、そのデータをオブジェクトデバイスにパスするか、あるいは、代替として、そのデータ自体を検索するようにオブジェクトデバイスを指揮する。マルチセレクションについて、カメラが短い時間期間の間オブジェクトに向けられるか、あるいは、ユーザが、例えば、ボタンを押すかホールドすることで、または、ジェスチャを使用することでマルチセレクションの開始または停止を示すことによって、画像とインタラクトしうる。ユーザが画像内のオブジェクトデバイスを選択しうるか、オブジェクトデバイスが自動的に選択されうるか、ユーザがオブジェクトデバイスを一度選択して、後の選択は自動的でありうるかである。マルチセレクションに応答して生じるアクションは、ユーザ定義されるか、あるいは、外部的に定義されうる。
本発明は、例示の目的のために、特定の実施形態に関して示されているが、本発明はそれに限定されない。本発明の範囲を逸脱することなく様々な適応および変更が行われうる。このように、添付される特許請求の範囲の原理および範囲は、前述の記載に限定されるべきではない。
以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。
[C1]
マスタデバイスを用いてオブジェクトデバイスを画像化し、前記オブジェクトデバイスの画像を前記マスタデバイス上に表示することと、
前記オブジェクトデバイスの画像を使用して前記オブジェクトデバイスを識別することと、
前記オブジェクトデバイスのアイデンティティに基づいて、前記マスタデバイスを通して前記オブジェクトデバイスとインターフェースすることと
を備える方法。
[C2]
前記オブジェクトデバイスに関連するデータを前記マスタデバイス上に表示することをさらに備える、C1に記載の方法。
[C3]
前記オブジェクトデバイスの画像を使用して前記オブジェクトデバイスをペアリング可能と識別することと、
前記マスタデバイスを前記オブジェクトデバイスとペアリングすることと
をさらに備える、C1に記載の方法。
[C4]
前記オブジェクトデバイスを制御するためのインターフェースを前記マスタデバイス上に表示することをさらに備える、C1に記載の方法。
[C5]
前記マスタデバイスを通してターゲットデバイスとインターフェースすることと、
ここにおいて、前記オブジェクトデバイスとインターフェースすることは、関連したデータを前記オブジェクトデバイスから検索することを備え、
前記データを前記ターゲットデバイスにパスすることと
をさらに備える、C1に記載の方法。
[C6]
前記マスタデバイスを、前記オブジェクトデバイスとペアリングすることと、
前記マスタデバイスを、第2のオブジェクトデバイスとペアリングすることと、
前記マスタデバイスを使用して、前記オブジェクトデバイスと前記第2のオブジェクトデバイスをペアリングすることと
をさらに備える、C1に記載の方法。
[C7]
前記オブジェクトデバイスの視覚的外観についての情報を含むブロードキャストデータを前記オブジェクトデバイスから受信することをさらに備え、
前記オブジェクトデバイスは、前記オブジェクトデバイスの画像を、前記オブジェクトデバイスのブロードキャストデータと比較することによって識別される、
C1に記載の方法。
[C8]
前記オブジェクトデバイスの視覚的外観についての情報は、前記オブジェクトデバイスの画像およびテクスチャされた3次元モデルのうちの少なくとも1つを備える、C7に記載の方法。[C9]
前記オブジェクトデバイスの視覚的外観についての情報を含むブロードキャストデータを複数のオブジェクトデバイスから受信することをさらに備え、
前記オブジェクトデバイスの画像を使用して前記オブジェクトデバイスを識別することは、
前記オブジェクトデバイスの画像を使用して、前記ブロードキャストデータをフィルタリングし、ブロードキャストデータのサブセットを生成することと、
前記ブロードキャストのサブセットを表示することと、
前記表示されたブロードキャストのサブセットからのユーザ選択によって前記オブジェクトデバイスを識別することと
を備える、C1に記載の方法。
[C10]
前記マスタデバイスを通して、前記オブジェクトデバイスを、広域ネットワークとインターフェースすることをさらに備える、C1に記載の方法。
[C11]
前記オブジェクトデバイスの視覚的外観についての情報を含むブロードキャストデータをオブジェクトデバイスから受信することと、
前記ブロードキャストデータをマスタデバイス上に表示することと、
前記オブジェクトデバイスからの前記表示されたブロードキャストデータの選択に基づいて前記オブジェクトデバイスとインターフェースすることと
を備える方法。
[C12]
前記ブロードキャストデータは、前記オブジェクトデバイスによって表示される画像についての情報を備える、C11に記載の方法。
[C13]
前記マスタデバイスを用いて前記オブジェクトデバイスを画像化することと、
前記オブジェクトデバイスの画像と前記受信されたブロードキャストデータとを比較することによって、前記オブジェクトデバイスを識別することと
をさらに備える、C11に記載の方法。
[C14]
前記マスタデバイスを通して、前記オブジェクトデバイスを、広域ネットワークとインターフェースすることをさらに備える、C11に記載の方法。
[C15]
オブジェクトデバイスを画像化するのに使用可能なカメラと、
無線信号を、前記オブジェクトデバイスへ送信し、前記オブジェクトデバイスから受信できる無線トランシーバと、
前記カメラおよび前記無線トランシーバに接続されたプロセッサと、
前記プロセッサに接続されたメモリと、
前記メモリに保存され、前記プロセッサに対して、前記カメラが提供する画像を使用して前記オブジェクトデバイスを識別させ、前記無線トランシーバを介して前記識別されたオブジェクトデバイスとインターフェースさせるための、前記プロセッサで実行されるソフトウェアと
を備える装置。
[C16]
前記プロセッサに結合されたデジタルディスプレイをさらに備え、前記オブジェクトデバイスに関連するデータは、前記デジタルディスプレイ上に表示される、C15に記載の装置。
[C17]
前記オブジェクトデバイスに関連するデータは、前記無線トランシーバによって、前記オブジェクトデバイスから受信される、C16に記載の装置。
[C18]
前記プロセッサに結合されたネットワークインターフェーストランシーバをさらに備え、前記オブジェクトデバイスに関連するデータは、前記ネットワークインターフェーストランシーバによって受信される、C16に記載の装置。
[C19]
前記ソフトウェアは、前記プロセッサに対して、前記オブジェクトデバイスの画像を使用して、前記オブジェクトデバイスをペアリング可能と識別させ、前記マスタデバイスを前記オブジェクトデバイスとペアリングさせる、C15に記載の装置。
[C20]
前記プロセッサに結合されたデジタルディスプレイをさらに備え、前記ソフトウェアは、前記プロセッサに対して、前記デジタルディスプレイ上の前記オブジェクトデバイスを制御するためのインターフェースを表示させる、C15に記載の装置。
[C21]
前記ソフトウェアは、前記プロセッサに対して、ターゲットデバイスとインターフェースさせ、前記オブジェクトデバイスからの関連するデータを検索することによって成す前記オブジェクトデバイスとインターフェースさせ、、および前記データを、前記無線トランシーバを介して前記ターゲットデバイスに送信させる、C15に記載の装置。
[C22]
前記ソフトウェアは、前記プロセッサ対して、前記オブジェクトデバイスとペアリングさせ、第2のオブジェクトデバイスとペアリングさせ、前記オブジェクトデバイスと前記第2のオブジェクトデバイスとをペアリングさせる、C15に記載の装置。
[C23]
前記無線トランシーバは、ブロードキャストデータを前記オブジェクトデバイスから受信し、前記オブジェクトデバイスの視覚的外観についての情報を含む前記ブロードキャストデータを、前記プロセッサに提供し、前記ソフトウェアは、前記プロセッサに対して、前記カメラによって提供される画像と、前記オブジェクトデバイスから受信されたブロードキャストデータとを比較することによって前記オブジェクトデバイスを識別させる、C15に記載の装置。
[C24]
前記オブジェクトデバイスの視覚的外観についての情報は、前記オブジェクトデバイスの画像およびテクスチャされた3次元モデルのうちの少なくとも1つを備える、C23に記載の装置。
[C25]
前記プロセッサに結合されたデジタルディスプレイと前記プロセッサに結合されたユーザインタフェースをさらに備え、前記無線トランシーバは、ブロードキャストデータを複数のオブジェクトデバイスから受信して、前記オブジェクトデバイスの視覚的外観についての情報を含む前記ブロードキャストデータを前記プロセッサに提供し、前記ソフトウェアは、前記プロセッサに対して、前記カメラによって提供される前記画像を使用し、前記ブロードキャストデータをフィルタリングしてブロードキャストデータのサブセットを生成することによって前記オブジェクトデバイスを識別させ、前記ブロードキャストデータのサブセットをデジタルディスプレイ上に表示させ、前記ユーザインターフェースからの入力に基づいて、前記ブロードキャストデータのサブセットから前記オブジェクトデバイスを識別させる、C15に記載の装置。
[C26]
前記プロセッサに結合されたネットワークインターフェーストランシーバをさらに備え、前記ソフトウェアは、前記プロセッサに対して、前記ネットワークインターフェーストランシーバを通して前記オブジェクトデバイスを広域ネットワークとインターフェースさせる、C15に記載の装置。
[C27]
無線信号を、前記オブジェクトデバイスに送信し、前記オブジェクトデバイスから受信できる無線トランシーバであって、前記オブジェクトデバイスの視覚的外観についての情報を含むブロードキャストデータを前記オブジェクトデバイスから受信する無線トランシーバと、
デジタルディスプレイと、
ユーザインターフェースと、
前記カメラ、前記デジタルディスプレイ、ユーザインターフェースに結合されたプロセッサと、
前記プロセッサに結合されたメモリと、
前記メモリに保存され、前記プロセッサに対して、前記ブロードキャストデータを前記デジタルディスプレイ上に表示させ、前記表示されたブロードキャストデータに応答して前記ユーザインターフェースからの入力に基づいて前記オブジェクトデバイスとインターフェースさせる、前記プロセッサで実行されるソフトウェアと
を備える装置。
[C28]
前記ブロードキャストデータは、前記オブジェクトデバイスによって表示される画像についての情報を備える、C27に記載の装置。
[C29]
前記無線トランシーバは、ブロードキャストデータを、複数のオブジェクトデバイスから受信し、さらに、前記オブジェクトデバイスを画像化するのに使用可能なカメラを備え、前記ソフトウェアは、前記プロセッサに対して、前記オブジェクトデバイスの画像を、前記受信されたブロードキャストデータと比較させ、前記カメラによって提供される前記画像を使用し、前記ブロードキャストデータをフィルタリングして、ブロードキャストデータのサブセットを生成させ、前記ブロードキャストデータのサブセットを前記デジタルディスプレイ上に表示させる、C27に記載の装置。
[C30]
前記プロセッサに結合されたネットワークインターフェーストランシーバをさらに備え、前記ソフトウェアは、前記プロセッサに対して、前記ネットワークインターフェーストランシーバを通して前記オブジェクトデバイスを、広域ネットワークとインターフェースさせる、C27に記載の装置。
[C31]
マスタデバイスとオブジェクトデバイスとの間のシステムインターフェース接続であって、
前記マスタデバイスを用いてオブジェクトデバイスを画像化するための手段と、
前記オブジェクトデバイスの画像を前記マスタデバイス上に表示するための手段と、
前記オブジェクトデバイスの画像を使用して、前記オブジェクトデバイスを識別するための手段と、
前記識別されたオブジェクトデバイスとインターフェースするための手段と
を備えるシステムインターフェース接続。
[C32]
前記オブジェクトデバイスに関連したデータを得るための手段をさらに備え、前記オブジェクトの画像を表示するための手段は、前記オブジェクトデバイスに関するデータを表示する、C31に記載のシステム。
[C33]
前記インターフェースするための手段は、前記マスタデバイスを前記オブジェクトデバイスとペアリングする、C31に記載のシステム。
[C34]
前記識別されたオブジェクトデバイスを、前記マスタデバイスを用いて制御するための手段をさらに備える、C31に記載のシステム。
[C35]
前記識別されたオブジェクトデバイスとインターフェースするための手段は、さらに、前記オブジェクトデバイスとは異なるターゲットデバイスとインターフェースし、前記システムは、さらに、前記識別されたオブジェクトデバイスから関連データを検索するための手段を備え、前記インターフェースするための手段は、前記検索されたデータを前記ターゲットデバイスにパスする、C31に記載のシステム。
[C36]
前記インターフェースするための手段は、前記マスタデバイスを前記オブジェクトデバイスとペアリングし、前記マスタデバイスを第2のオブジェクトデバイスとペアリングし、前記システムは、さらに、前記オブジェクトデバイスを、前記マスタデバイスを通して前記第2のオブジェクトデバイスとペアリングするための手段を備える、C31に記載のシステム。
[C37]
前記オブジェクトデバイスの視覚的外観についての情報を含むブロードキャストデータを前記オブジェクトデバイスから受信するための手段をさらに備え、
前記オブジェクトデバイスを識別するための手段は、前記オブジェクトデバイスの画像を、前記オブジェクトデバイスからのブロードキャストデータと比較する
C31に記載のシステム。
[C38]
前記オブジェクトデバイスの視覚的外観についての情報は、前記オブジェクトデバイスの画像およびテクスチャされた3次元モデルのうちの少なくとも1つを備える、C37に記載のシステム。
[C39]
前記オブジェクトデバイスの視覚的外観についての情報を含むブロードキャストデータを、複数のオブジェクトデバイスから受信するための手段をさらに備え、
前記オブジェクトデバイスを識別するための手段は、
前記オブジェクトデバイスの画像を使用して前記ブロードキャストデータをフィルタリングして、ブロードキャストデータのサブセットを生成するための手段と、ここで、前記表示するための手段が、前記ブロードキャストのサブセットを表示し、
前記表示されるブロードキャストデータのサブセットに基づいて前記オブジェクトデバイスを選択するための手段と、
を備える、C31に記載のシステム。
[C40]
前記オブジェクトデバイスを広域ネットワークにインターフェースするための手段をさらに備える、C31に記載のシステム。
[C41]
格納されたプログラムコードを備えるコンピュータ可読媒体であって、
オブジェクトデバイスの画像を使用して前記オブジェクトデバイスを識別するためのプログラムコードと、
前記識別されたオブジェクトデバイスとインターフェースするためのプログラムコードと、
を備えるコンピュータ可読媒体。

Claims (33)

  1. マスタデバイスを用いてオブジェクトデバイスを画像化し、前記オブジェクトデバイスの画像を前記マスタデバイス上に表示することと、
    前記オブジェクトデバイスの画像を使用して前記オブジェクトデバイスを識別することと、
    前記オブジェクトデバイスのアイデンティティに基づいて、前記オブジェクトデバイスを前記マスタデバイスと直接インターフェースすることと
    を備え、さらに、前記インターフェースすることは、
    前記オブジェクトデバイスの画像を使用して前記オブジェクトデバイスをペアリング可能と識別することと、
    前記マスタデバイスを前記オブジェクトデバイスとペアリングすることと、
    前記マスタデバイスを、第2のオブジェクトデバイスとペアリングすることと、
    前記マスタデバイスを使用して、前記オブジェクトデバイスと前記第2のオブジェクトデバイスをペアリングすることと
    を備える方法。
  2. 前記オブジェクトデバイスに関連するデータを前記マスタデバイス上に表示することをさらに備える、請求項1に記載の方法。
  3. 前記オブジェクトデバイスを制御するためのインターフェースを前記マスタデバイス上に表示することをさらに備える、請求項1に記載の方法。
  4. ターゲットデバイスを前記マスタデバイスと直接インターフェースすることと、
    ここにおいて、前記オブジェクトデバイスとインターフェースすることは、データを前記オブジェクトデバイスから検索することを備え、
    前記データを前記ターゲットデバイスにパスすることと
    をさらに備える、請求項1に記載の方法。
  5. 前記オブジェクトデバイスの視覚的外観についての情報を含むブロードキャストデータを前記オブジェクトデバイスから受信することをさらに備え、
    前記オブジェクトデバイスは、前記オブジェクトデバイスの画像を、前記オブジェクトデバイスからのブロードキャストデータと比較することによって識別される、
    請求項1に記載の方法。
  6. 前記オブジェクトデバイスの視覚的外観についての情報は、前記オブジェクトデバイスの画像およびテクスチャされた3次元モデルのうちの少なくとも1つを備える、請求項5に記載の方法。
  7. 前記オブジェクトデバイスの視覚的外観についての情報を含むブロードキャストデータを複数のオブジェクトデバイスから受信することをさらに備え、
    前記オブジェクトデバイスの画像を使用して前記オブジェクトデバイスを識別することは、
    前記オブジェクトデバイスの画像を使用して、前記ブロードキャストデータをフィルタリングし、ブロードキャストデータのサブセットを生成することと、
    前記ブロードキャストデータのサブセットを表示することと、
    前記表示されたブロードキャストデータのサブセットからのユーザ選択によって前記オブジェクトデバイスを識別することと
    を備える、請求項1に記載の方法。
  8. 前記マスタデバイスを通して、前記オブジェクトデバイスを、広域ネットワークとインターフェースすることをさらに備える、請求項1に記載の方法。
  9. オブジェクトデバイスの視覚的外観についての情報を含むブロードキャストデータを前記オブジェクトデバイスから受信することと、ここで、前記ブロードキャストデータは、前記オブジェクトデバイスによって表示される画像についての情報を備える、
    前記視覚的外観についての情報を含む前記ブロードキャストデータをマスタデバイス上に表示することと、
    前記オブジェクトデバイスからの前記視覚的外観についての情報を含む前記表示されたブロードキャストデータのユーザ選択に基づいて前記オブジェクトデバイスとインターフェースすることと
    を備える方法。
  10. 前記マスタデバイスを用いて前記オブジェクトデバイスを画像化することと、
    前記オブジェクトデバイスの画像と前記受信されたブロードキャストデータとを比較することによって、前記オブジェクトデバイスを識別することと
    をさらに備える、請求項9に記載の方法。
  11. 前記マスタデバイスを通して、前記オブジェクトデバイスを、広域ネットワークとインターフェースすることをさらに備える、請求項9に記載の方法。
  12. オブジェクトデバイスを画像化するのに使用可能なカメラと、
    無線信号を、前記オブジェクトデバイスへ送信し、前記オブジェクトデバイスから受信できる無線トランシーバと、
    前記カメラおよび前記無線トランシーバに接続されたプロセッサと、
    前記プロセッサに接続されたメモリと、
    前記メモリに保存され、前記プロセッサに対して、前記カメラによって提供される画像を使用して前記オブジェクトデバイスを識別させ、前記識別されたオブジェクトデバイスを前記無線トランシーバと直接インターフェースさせるための、前記プロセッサで実行されるソフトウェアと
    を備え、さらに前記ソフトウェアは、前記プロセッサに対して、前記オブジェクトデバイスの画像を使用して、前記オブジェクトデバイスをペアリング可能と識別させ、前記オブジェクトデバイスとペアリングさせ、第2のオブジェクトデバイスとペアリングさせ、前記オブジェクトデバイスと前記第2のオブジェクトデバイスとをペアリングさせる装置。
  13. 前記プロセッサに結合されたデジタルディスプレイをさらに備え、前記オブジェクトデバイスに関連するデータは、前記デジタルディスプレイ上に表示される、請求項12に記載の装置。
  14. 前記オブジェクトデバイスに関連するデータは、前記無線トランシーバによって、前記オブジェクトデバイスから受信される、請求項13に記載の装置。
  15. 前記プロセッサに結合されたネットワークインターフェーストランシーバをさらに備え、前記オブジェクトデバイスに関連するデータは、前記ネットワークインターフェーストランシーバによって受信される、請求項13に記載の装置。
  16. 前記プロセッサに結合されたデジタルディスプレイをさらに備え、前記ソフトウェアは、前記プロセッサに対して、前記デジタルディスプレイ上の前記オブジェクトデバイスを制御するためのインターフェースを表示させる、請求項12に記載の装置。
  17. 前記ソフトウェアは、前記プロセッサに対して、ターゲットデバイスとインターフェースさせ、前記オブジェクトデバイスからデータを検索することによって構成される前記オブジェクトデバイスとインターフェースさせ、そして、前記データを、前記無線トランシーバを用いて直接前記ターゲットデバイスに送信させる、請求項12に記載の装置。
  18. 前記無線トランシーバは、ブロードキャストデータを前記オブジェクトデバイスから受信し、前記オブジェクトデバイスの視覚的外観についての情報を含む前記ブロードキャストデータを、前記プロセッサに提供し、前記ソフトウェアは、前記プロセッサに対して、前記カメラによって提供される画像と、前記オブジェクトデバイスから受信された前記ブロードキャストデータとを比較することによって前記オブジェクトデバイスを識別させる、請求項12に記載の装置。
  19. 前記オブジェクトデバイスの視覚的外観についての情報は、前記オブジェクトデバイスの画像およびテクスチャされた3次元モデルのうちの少なくとも1つを備える、請求項18に記載の装置。
  20. 前記プロセッサに結合されたデジタルディスプレイと前記プロセッサに結合されたユーザインターフェースをさらに備え、前記無線トランシーバは、ブロードキャストデータを複数のオブジェクトデバイスから受信して、前記オブジェクトデバイスの視覚的外観についての情報を含む前記ブロードキャストデータを前記プロセッサに提供し、前記ソフトウェアは、前記プロセッサに対して、前記カメラによって提供される前記画像を使用し、前記ブロードキャストデータをフィルタリングしてブロードキャストデータのサブセットを生成することによって前記オブジェクトデバイスを識別させ、前記ブロードキャストデータのサブセットをデジタルディスプレイ上に表示させ、前記ユーザインターフェースからの入力に基づいて、前記ブロードキャストデータのサブセットから前記オブジェクトデバイスを識別させる、請求項12に記載の装置。
  21. 前記プロセッサに結合されたネットワークインターフェーストランシーバをさらに備え、前記ソフトウェアは、前記プロセッサに対して、前記ネットワークインターフェーストランシーバを通して前記オブジェクトデバイスを広域ネットワークとインターフェースさせる、請求項12に記載の装置。
  22. 無線信号を、オブジェクトデバイスに送信し、前記オブジェクトデバイスから受信できる無線トランシーバであって、前記オブジェクトデバイスの視覚的外観についての情報を含むブロードキャストデータを前記オブジェクトデバイスから受信する無線トランシーバと、ここで、前記ブロードキャストデータは、前記オブジェクトデバイスによって表示される画像についての情報を備える、
    デジタルディスプレイと、
    ユーザインターフェースと、
    前記デジタルディスプレイと前記ユーザインターフェースとに接続されたプロセッサと、
    前記プロセッサに接続されたメモリと、
    前記メモリに保存され、前記プロセッサに対して、前記視覚的外観についての情報を含む前記ブロードキャストデータを前記デジタルディスプレイ上に表示させ、前記視覚的外観についての情報を含む前記表示されたブロードキャストデータに応答して前記ユーザインターフェースからの入力に基づいて前記オブジェクトデバイスとインターフェースさせるための、前記プロセッサで実行されるソフトウェアと
    を備える装置。
  23. 前記無線トランシーバは、ブロードキャストデータを、複数のオブジェクトデバイスから受信し、前記装置はさらに、前記オブジェクトデバイスを画像化するのに使用可能なカメラを備え、前記ソフトウェアは、前記プロセッサに対して、前記オブジェクトデバイスの画像を、前記受信されたブロードキャストデータと比較させ、前記カメラによって提供される前記画像を使用し、前記ブロードキャストデータをフィルタリングして、ブロードキャストデータのサブセットを生成させ、前記ブロードキャストデータのサブセットを前記デジタルディスプレイ上に表示させる、請求項22に記載の装置。
  24. 前記プロセッサに結合されたネットワークインターフェーストランシーバをさらに備え、前記ソフトウェアは、前記プロセッサに対して、前記ネットワークインターフェーストランシーバを通して前記オブジェクトデバイスを、広域ネットワークとインターフェースさせる、請求項22に記載の装置。
  25. マスタデバイスとオブジェクトデバイスをインターフェースするシステムであって、
    前記マスタデバイスを用いて前記オブジェクトデバイスを画像化するための手段と、
    前記オブジェクトデバイスの画像を前記マスタデバイス上に表示するための手段と、
    前記オブジェクトデバイスの画像を使用して、前記オブジェクトデバイスを識別するための手段と、
    前記マスタデバイスを、前記識別されたオブジェクトデバイスと直接インターフェースするための手段と
    を備え、
    前記インターフェースするための手段は、前記マスタデバイスを前記オブジェクトデバイスとペアリングし、前記マスタデバイスを第2のオブジェクトデバイスとペアリングし、前記システムは、さらに、前記オブジェクトデバイスを、前記マスタデバイスを通して前記第2のオブジェクトデバイスとペアリングするための手段を備える、システム。
  26. 前記オブジェクトデバイスに関連するデータを得るための手段をさらに備え、前記オブジェクトデバイスの画像を表示するための手段は、前記オブジェクトデバイスに関連するデータを表示する、請求項25に記載のシステム。
  27. 前記識別されたオブジェクトデバイスを、前記マスタデバイスを用いて制御するための手段をさらに備える、請求項25に記載のシステム。
  28. 前記マスタデバイスを、前記識別されたオブジェクトデバイスと直接インターフェースするための手段は、さらに、前記マスタデバイスを、前記オブジェクトデバイスとは異なるターゲットデバイスと直接インターフェースし、前記システムは、さらに、前記識別されたオブジェクトデバイスからデータを検索するための手段を備え、前記インターフェースするための手段は、前記検索されたデータを前記ターゲットデバイスにパスする、請求項25に記載のシステム。
  29. 前記オブジェクトデバイスの視覚的外観についての情報を含むブロードキャストデータを前記オブジェクトデバイスから受信するための手段をさらに備え、
    前記オブジェクトデバイスを識別するための手段は、前記オブジェクトデバイスの画像を、前記オブジェクトデバイスからのブロードキャストデータと比較する
    請求項25に記載のシステム。
  30. 前記オブジェクトデバイスの視覚的外観についての情報は、前記オブジェクトデバイスの画像およびテクスチャされた3次元モデルのうちの少なくとも1つを備える、請求項29に記載のシステム。
  31. 前記オブジェクトデバイスの視覚的外観についての情報を含むブロードキャストデータを、複数のオブジェクトデバイスから受信するための手段をさらに備え、
    前記オブジェクトデバイスを識別するための手段は、
    前記オブジェクトデバイスの画像を使用して前記ブロードキャストデータをフィルタリングして、ブロードキャストデータのサブセットを生成するための手段と、ここで、前記表示するための手段が、前記ブロードキャストデータのサブセットを表示し、
    前記表示されたブロードキャストデータのサブセットに基づいて前記オブジェクトデバイスを選択するための手段と、
    を備える、請求項25に記載のシステム。
  32. 前記オブジェクトデバイスを広域ネットワークにインターフェースするための手段をさらに備える、請求項25に記載のシステム。
  33. 格納されたプログラムコードを備えるコンピュータ可読記憶媒体であって、
    オブジェクトデバイスの画像を使用して前記オブジェクトデバイスを識別するためのプログラムコードと、
    マスタデバイスを、前記識別されたオブジェクトデバイスと直接インターフェースするためのプログラムコードと、
    を備え、さらに、前記インターフェースするためのプログラムコードは、
    前記オブジェクトデバイスの画像を使用して前記オブジェクトデバイスをペアリング可能と識別するためのプログラムコードと、
    前記マスタデバイスを前記オブジェクトデバイスとペアリングするためのプログラムコードと
    前記マスタデバイスを、第2のオブジェクトデバイスとペアリングするためのプログラムコードと、
    前記マスタデバイスを使用して、前記オブジェクトデバイスと前記第2のオブジェクトデバイスをペアリングするためのプログラムコードと
    を備えるコンピュータ可読記憶媒体。
JP2014182705A 2009-07-17 2014-09-08 マスタデバイスとオブジェクトデバイスとの自動インターフェース接続 Active JP6026474B2 (ja)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
US22655209P 2009-07-17 2009-07-17
US22654509P 2009-07-17 2009-07-17
US61/226,545 2009-07-17
US61/226,552 2009-07-17
US12/786,886 2010-05-25
US12/786,886 US8818274B2 (en) 2009-07-17 2010-05-25 Automatic interfacing between a master device and object device

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2012520817A Division JP2012533802A (ja) 2009-07-17 2010-07-16 マスタデバイスとオブジェクトデバイスとの自動インターフェース接続

Publications (2)

Publication Number Publication Date
JP2015038740A JP2015038740A (ja) 2015-02-26
JP6026474B2 true JP6026474B2 (ja) 2016-11-16

Family

ID=42990159

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2012520817A Withdrawn JP2012533802A (ja) 2009-07-17 2010-07-16 マスタデバイスとオブジェクトデバイスとの自動インターフェース接続
JP2014182705A Active JP6026474B2 (ja) 2009-07-17 2014-09-08 マスタデバイスとオブジェクトデバイスとの自動インターフェース接続

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2012520817A Withdrawn JP2012533802A (ja) 2009-07-17 2010-07-16 マスタデバイスとオブジェクトデバイスとの自動インターフェース接続

Country Status (9)

Country Link
US (3) US8818274B2 (ja)
EP (3) EP2454834B1 (ja)
JP (2) JP2012533802A (ja)
KR (3) KR101755147B1 (ja)
BR (1) BR112012001134A2 (ja)
ES (1) ES2793332T3 (ja)
HU (1) HUE048977T2 (ja)
TW (1) TWI423709B (ja)
WO (1) WO2011009069A2 (ja)

Families Citing this family (78)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7953983B2 (en) 2005-03-08 2011-05-31 Microsoft Corporation Image or pictographic based computer login systems and methods
KR20100015246A (ko) * 2008-08-04 2010-02-12 삼성전자주식회사 디스플레이부를 구비한 저장장치 및 정보 디스플레이 방법
US8458485B2 (en) 2009-06-17 2013-06-04 Microsoft Corporation Image-based unlock functionality on a computing device
US8818274B2 (en) 2009-07-17 2014-08-26 Qualcomm Incorporated Automatic interfacing between a master device and object device
US10104183B2 (en) * 2010-06-22 2018-10-16 Microsoft Technology Licensing, Llc Networked device authentication, pairing and resource sharing
US20120005632A1 (en) * 2010-06-30 2012-01-05 Broyles Iii Paul J Execute a command
BR112013008484A2 (pt) * 2010-10-20 2016-08-09 Procter & Gamble uso de artigo
US9942304B2 (en) * 2011-01-08 2018-04-10 N99 Llc Remote control authority and authentication
US10778747B2 (en) * 2011-01-08 2020-09-15 N99 Llc Remote control authority and authentication
AU2011202415B1 (en) 2011-05-24 2012-04-12 Microsoft Technology Licensing, Llc Picture gesture authentication
US20120309289A1 (en) * 2011-06-06 2012-12-06 Apple Inc. Techniques for facilitating interoperation between an accessory and multiple devices
US8989280B2 (en) * 2011-06-30 2015-03-24 Cable Television Laboratories, Inc. Frame identification
JP5772540B2 (ja) * 2011-11-23 2015-09-02 富士通株式会社 携帯型端末装置、エリア指定方法及びエリア指定プログラム
EP2602691A1 (en) * 2011-12-05 2013-06-12 Alcatel Lucent Method for gesture control, gesture server device and sensor input device
US10013857B2 (en) * 2011-12-21 2018-07-03 Qualcomm Incorporated Using haptic technologies to provide enhanced media experiences
TW201352001A (zh) * 2012-06-11 2013-12-16 Quanta Comp Inc 多媒體互動系統及方法
TWI526041B (zh) * 2012-07-17 2016-03-11 廣達電腦股份有限公司 互動系統及互動方法
CN103576848B (zh) * 2012-08-09 2016-07-13 腾讯科技(深圳)有限公司 手势操作方法和手势操作装置
WO2014022905A1 (en) * 2012-08-10 2014-02-13 Research In Motion Limited Stacked device position identification
WO2014041235A1 (en) * 2012-09-14 2014-03-20 Nokia Corporation Remote control system
WO2014045860A1 (ja) * 2012-09-24 2014-03-27 Necカシオモバイルコミュニケーションズ株式会社 情報機器、対向機器、通信システム、情報機器の制御方法及びプログラム
US11372536B2 (en) 2012-11-20 2022-06-28 Samsung Electronics Company, Ltd. Transition and interaction model for wearable electronic device
US9030446B2 (en) 2012-11-20 2015-05-12 Samsung Electronics Co., Ltd. Placement of optical sensor on wearable electronic device
US9477313B2 (en) 2012-11-20 2016-10-25 Samsung Electronics Co., Ltd. User gesture input to wearable electronic device involving outward-facing sensor of device
US10185416B2 (en) 2012-11-20 2019-01-22 Samsung Electronics Co., Ltd. User gesture input to wearable electronic device involving movement of device
US10551928B2 (en) 2012-11-20 2020-02-04 Samsung Electronics Company, Ltd. GUI transitions on wearable electronic device
US10423214B2 (en) 2012-11-20 2019-09-24 Samsung Electronics Company, Ltd Delegating processing from wearable electronic device
US8994827B2 (en) 2012-11-20 2015-03-31 Samsung Electronics Co., Ltd Wearable electronic device
US11157436B2 (en) 2012-11-20 2021-10-26 Samsung Electronics Company, Ltd. Services associated with wearable electronic device
US11237719B2 (en) 2012-11-20 2022-02-01 Samsung Electronics Company, Ltd. Controlling remote electronic device with wearable electronic device
CN103905092A (zh) * 2012-12-27 2014-07-02 鸿富锦精密工业(武汉)有限公司 具有蓝牙功能的装置及蓝牙连接方法
US20140355389A1 (en) * 2013-05-29 2014-12-04 Nokia Corporation Method and apparatus for establishing device communication
US9373208B2 (en) * 2013-09-11 2016-06-21 Sony Corporation Secure remote control for operating closures such as garage doors
US20160182930A1 (en) * 2013-09-13 2016-06-23 Isabella V. Ortiz Systems and methods for enabling simultaneous second screen data access during ongoing primary screen programming
US9245192B2 (en) * 2013-09-20 2016-01-26 Here Global B.V. Ad collateral detection
KR102245362B1 (ko) * 2014-01-24 2021-04-28 엘지전자 주식회사 서로 다른 통신 프로토콜을 사용하는 디바이스들 간 무선 네트워크 연결을 제어하기 위한 방법 및 이를 위한 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록 매체
EP3103021B1 (en) 2014-02-07 2020-12-16 Ascensia Diabetes Care Holdings AG Methods and apparatus for a multiple master bus protocol
TWI563853B (en) * 2014-02-27 2016-12-21 Beseye Cloud Security Co Ltd Surveillance system and the operation process thereof
US10691332B2 (en) 2014-02-28 2020-06-23 Samsung Electronics Company, Ltd. Text input on an interactive display
US20170149696A1 (en) * 2014-04-10 2017-05-25 Hewlett Packard Enterprise Development Lp Connection classification
US9712948B2 (en) * 2014-04-30 2017-07-18 Avago Technologies General Ip (Singapore) Pte. Ltd. Image triggered pairing
US9679538B2 (en) * 2014-06-26 2017-06-13 Intel IP Corporation Eye display interface for a touch display device
KR102437104B1 (ko) * 2014-07-29 2022-08-29 삼성전자주식회사 모바일 디바이스에서 촬영된 전자 기기와 페어링하는 방법 및 장치
WO2016017945A1 (en) * 2014-07-29 2016-02-04 Samsung Electronics Co., Ltd. Mobile device and method of pairing the same with electronic device
US9392398B2 (en) * 2014-09-30 2016-07-12 Apple Inc. Wireless proximity pairing of user-interface devices
KR102197851B1 (ko) * 2014-10-20 2021-01-04 한국전자통신연구원 단말간 직접 통신에서 대상 발견 방법 및 장치
KR102332752B1 (ko) * 2014-11-24 2021-11-30 삼성전자주식회사 지도 서비스를 제공하는 전자 장치 및 방법
KR102302327B1 (ko) * 2014-12-08 2021-09-15 엘지전자 주식회사 단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법
WO2016115068A1 (en) * 2015-01-13 2016-07-21 Thomson Licensing Atsc 3.0 display discovery via a mobile secondary device
JP6473014B2 (ja) * 2015-02-27 2019-02-20 トッパン・フォームズ株式会社 情報提供システム及び情報提供装置
US10353949B2 (en) * 2015-09-02 2019-07-16 David Webster Optically initiated configuration and cryptographic test key transfer for testing interconnected electronic devices
TWI563407B (en) * 2015-09-11 2016-12-21 Noodoe Corp Methods and systems for registering detection of electronic devices, and related computer program products
CN105204742B (zh) * 2015-09-28 2019-07-09 小米科技有限责任公司 电子设备的控制方法、装置及终端
US10061552B2 (en) * 2015-11-25 2018-08-28 International Business Machines Corporation Identifying the positioning in a multiple display grid
US10334076B2 (en) * 2016-02-22 2019-06-25 Google Llc Device pairing in augmented/virtual reality environment
US10120635B2 (en) * 2016-03-09 2018-11-06 Samsung Electronics Co., Ltd. Configuration and operation of display devices including device management
US10838601B2 (en) 2016-06-08 2020-11-17 Huawei Technologies Co., Ltd. Processing method and terminal
CN107771310B (zh) 2016-06-22 2020-12-04 华为技术有限公司 头戴式显示设备及其处理方法
KR101715142B1 (ko) * 2016-08-29 2017-03-14 주식회사 리얼야구존 모바일 기기를 이용하는 스크린 야구 경기 방법
US10560844B2 (en) * 2017-03-15 2020-02-11 International Business Machines Corporation Authentication of users for securing remote controlled devices
US20190034152A1 (en) * 2017-07-25 2019-01-31 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Automatic configuration of display settings based on a detected layout of multiple display devices
US10725629B2 (en) 2018-06-25 2020-07-28 Google Llc Identifying and controlling smart devices
WO2020022780A1 (en) * 2018-07-25 2020-01-30 Samsung Electronics Co., Ltd. Method and apparatus for establishing device connection
US11784845B2 (en) 2018-09-28 2023-10-10 Qualcomm Incorporated System and method for disambiguation of Internet-of-Things devices
KR102137194B1 (ko) * 2018-10-31 2020-07-24 엘지전자 주식회사 이동 단말기
US10659112B1 (en) 2018-11-05 2020-05-19 XCOM Labs, Inc. User equipment assisted multiple-input multiple-output downlink configuration
US10812216B2 (en) 2018-11-05 2020-10-20 XCOM Labs, Inc. Cooperative multiple-input multiple-output downlink scheduling
US10756860B2 (en) 2018-11-05 2020-08-25 XCOM Labs, Inc. Distributed multiple-input multiple-output downlink configuration
US10432272B1 (en) 2018-11-05 2019-10-01 XCOM Labs, Inc. Variable multiple-input multiple-output downlink user equipment
US10756795B2 (en) 2018-12-18 2020-08-25 XCOM Labs, Inc. User equipment with cellular link and peer-to-peer link
US11063645B2 (en) 2018-12-18 2021-07-13 XCOM Labs, Inc. Methods of wirelessly communicating with a group of devices
US11330649B2 (en) 2019-01-25 2022-05-10 XCOM Labs, Inc. Methods and systems of multi-link peer-to-peer communications
EP3690609B1 (en) * 2019-01-30 2021-09-22 DENTSPLY SIRONA Inc. Method and system for controlling dental machines
US10756767B1 (en) 2019-02-05 2020-08-25 XCOM Labs, Inc. User equipment for wirelessly communicating cellular signal with another user equipment
JPWO2020217909A1 (ja) * 2019-04-23 2020-10-29
US11348320B2 (en) 2020-04-02 2022-05-31 Samsung Electronics Company, Ltd. Object identification utilizing paired electronic devices
WO2021201638A1 (en) 2020-04-02 2021-10-07 Samsung Electronics Co., Ltd. Electronic device and method for object identification utilizing paired electronic device
TWI824729B (zh) * 2021-10-15 2023-12-01 仁寶電腦工業股份有限公司 主機裝置的授權方法、非暫態電腦可讀取儲存媒體及主機裝置

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6037936A (en) * 1993-09-10 2000-03-14 Criticom Corp. Computer vision system with a graphic user interface and remote camera control
JPH0984147A (ja) 1995-09-08 1997-03-28 Sony Corp リモートコントローラ、電子機器、及び電子機器システム
US6353450B1 (en) * 1999-02-16 2002-03-05 Intel Corporation Placing and monitoring transparent user interface elements in a live video stream as a method for user input
US6396475B1 (en) * 1999-08-27 2002-05-28 Geo Vector Corp. Apparatus and methods of the remote address of objects
JP3756741B2 (ja) * 2000-08-21 2006-03-15 株式会社東芝 情報交換装置およびキャッシュレジスタ装置
US7016532B2 (en) * 2000-11-06 2006-03-21 Evryx Technologies Image capture and identification system and process
US7031875B2 (en) * 2001-01-24 2006-04-18 Geo Vector Corporation Pointing systems for addressing objects
US6783071B2 (en) * 2001-06-18 2004-08-31 Symbol Technologies, Inc Scanner pairing in a bluetooth POS network
JP3761505B2 (ja) * 2002-03-04 2006-03-29 株式会社東芝 通信システム、無線通信端末及び無線通信装置
KR100530233B1 (ko) 2003-02-17 2005-11-22 삼성전자주식회사 애드호크 네트워크로 연결가능한 기기를 사용자에게알려주어 사용자의 선택에 의해 효율적인 연결 설정을가능하게 해주는 블루투스 무선통신 장치 및 통신방법
EP1571584A1 (en) * 2004-03-03 2005-09-07 Honda Research Institute Europe GmbH Integrating visual and object information in a pervasive computing environment
JP2005268941A (ja) 2004-03-16 2005-09-29 Sony Corp 遠隔制御装置、遠隔制御方法及びそのプログラム
JP4745737B2 (ja) * 2004-08-06 2011-08-10 キヤノン株式会社 撮像装置、通信システム、伝送方法、撮像装置の制御方法、及びコンピュータプログラム
US7602420B2 (en) * 2004-08-06 2009-10-13 Canon Kabushiki Kaisha Image capture apparatus, method for controlling the same and computer program
JP2006081028A (ja) 2004-09-10 2006-03-23 Kyocera Mita Corp 遠隔操作システム、通信装置及び電気機器
US20060190812A1 (en) * 2005-02-22 2006-08-24 Geovector Corporation Imaging systems including hyperlink associations
US7519200B2 (en) * 2005-05-09 2009-04-14 Like.Com System and method for enabling the use of captured images through recognition
US8164640B2 (en) * 2005-06-30 2012-04-24 Nokia Corporation Camera control means to allow operating of a destined location of the information surface of a presentation and information system
US20070047435A1 (en) * 2005-08-31 2007-03-01 Motorola, Inc. Advertising availability for ad-hoc networking based on stored device history
KR101170081B1 (ko) 2005-09-07 2012-08-01 삼성전자주식회사 움직임에 대응되는 리모콘 신호를 전송하는 리모트컨트롤러
JP4676303B2 (ja) * 2005-10-18 2011-04-27 株式会社日立製作所 端末装置
CA2646602C (en) * 2006-03-20 2015-11-03 Absolute Software Corporation Method for determining identification of an electronic device
US20080125040A1 (en) * 2006-11-29 2008-05-29 Apple Computer, Inc. Location discovery using bluetooth
JP5064091B2 (ja) 2007-04-13 2012-10-31 株式会社Pfu スキャナ装置、および、画像読取表示方法
KR101375481B1 (ko) 2007-07-06 2014-03-19 삼성전자주식회사 통신 시스템에서 통신 모드 결정 방법 및 장치
US8059573B2 (en) * 2007-07-30 2011-11-15 Qualcomm Incorporated Method of pairing devices
WO2009046574A1 (en) 2007-10-11 2009-04-16 Motorola, Inc. Method and system for contact management and organization
TWI421690B (zh) * 2007-11-21 2014-01-01 Ind Tech Res Inst 智慧型遠端介面裝置、系統及其使用方法
JP5136040B2 (ja) 2007-12-13 2013-02-06 日本電気株式会社 携帯端末及びそれを用いた通信方法並びにプログラム
KR101442544B1 (ko) * 2007-12-18 2014-09-23 엘지전자 주식회사 이동 단말기 및 그의 무선기기 표시 방법
US20090176451A1 (en) * 2008-01-04 2009-07-09 Microsoft Corporation Encoded color information facilitating device pairing for wireless communication
TWI346489B (en) * 2008-01-09 2011-08-01 Inventec Corp A nic and method of booting of the remote device
EP2401865B1 (en) * 2009-02-27 2020-07-15 Foundation Productions, Llc Headset-based telecommunications platform
US8818274B2 (en) 2009-07-17 2014-08-26 Qualcomm Incorporated Automatic interfacing between a master device and object device

Also Published As

Publication number Publication date
KR20140090263A (ko) 2014-07-16
KR20160006262A (ko) 2016-01-18
EP3678309A1 (en) 2020-07-08
US9667817B2 (en) 2017-05-30
JP2012533802A (ja) 2012-12-27
KR101583245B1 (ko) 2016-01-08
KR101755147B1 (ko) 2017-07-19
US20150138376A1 (en) 2015-05-21
EP2454834B1 (en) 2020-03-25
WO2011009069A2 (en) 2011-01-20
CN102625981A (zh) 2012-08-01
EP2454834A2 (en) 2012-05-23
KR20120049272A (ko) 2012-05-16
WO2011009069A3 (en) 2011-04-28
ES2793332T3 (es) 2020-11-13
US20110016405A1 (en) 2011-01-20
TW201110784A (en) 2011-03-16
BR112012001134A2 (pt) 2016-02-23
US8971811B2 (en) 2015-03-03
US20140327786A1 (en) 2014-11-06
US8818274B2 (en) 2014-08-26
EP2597796A3 (en) 2013-12-11
TWI423709B (zh) 2014-01-11
EP2597796A1 (en) 2013-05-29
HUE048977T2 (hu) 2020-08-28
JP2015038740A (ja) 2015-02-26

Similar Documents

Publication Publication Date Title
JP6026474B2 (ja) マスタデバイスとオブジェクトデバイスとの自動インターフェース接続
US9547873B2 (en) Smartphone-based methods and systems
US9367886B2 (en) Smartphone arrangements responsive to musical artists and other content proprietors
US20190237108A1 (en) Smartphone-based methods and systems
US9218530B2 (en) Smartphone-based methods and systems
US9648197B2 (en) Salient point-based arrangements
US9240021B2 (en) Smartphone-based methods and systems
US9225822B2 (en) Channelized audio watermarks
KR102437104B1 (ko) 모바일 디바이스에서 촬영된 전자 기기와 페어링하는 방법 및 장치

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150825

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150901

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20151201

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20160104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160201

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160705

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160826

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160913

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161012

R150 Certificate of patent or registration of utility model

Ref document number: 6026474

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250