KR101583245B1 - 마스터 디바이스와 오브젝트 디바이스 간의 자동 인터페이싱 - Google Patents

마스터 디바이스와 오브젝트 디바이스 간의 자동 인터페이싱 Download PDF

Info

Publication number
KR101583245B1
KR101583245B1 KR1020147016382A KR20147016382A KR101583245B1 KR 101583245 B1 KR101583245 B1 KR 101583245B1 KR 1020147016382 A KR1020147016382 A KR 1020147016382A KR 20147016382 A KR20147016382 A KR 20147016382A KR 101583245 B1 KR101583245 B1 KR 101583245B1
Authority
KR
South Korea
Prior art keywords
object device
image
broadcast data
interfacing
identifying
Prior art date
Application number
KR1020147016382A
Other languages
English (en)
Other versions
KR20140090263A (ko
Inventor
매튜 에스 그롭
스핀돌라 세라핀 디아즈
제랄드 브이 주니어 라이트
버지니아 워커 키팅
Original Assignee
퀄컴 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 퀄컴 인코포레이티드 filed Critical 퀄컴 인코포레이티드
Publication of KR20140090263A publication Critical patent/KR20140090263A/ko
Application granted granted Critical
Publication of KR101583245B1 publication Critical patent/KR101583245B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/35—Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00315—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a radio transmission apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/00408—Display of information to the user, e.g. menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/00408—Display of information to the user, e.g. menus
    • H04N1/0044—Display of information to the user, e.g. menus for image preview or review, e.g. to help the user position a sheet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/185—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/083—Network architectures or network communication protocols for network security for authentication of entities using passwords
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00307—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a mobile telephone apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008—Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0013—Arrangements for the control of the connected apparatus by the still picture apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008—Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0034—Details of the connection, e.g. connector, interface
    • H04N2201/0048—Type of connection
    • H04N2201/0055—By radio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077—Types of the still picture apparatus
    • H04N2201/0084—Digital still camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)
  • Radar Systems Or Details Thereof (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Selective Calling Equipment (AREA)

Abstract

마스터 디바이스는 오브젝트 디바이스를 이미징하고 그 이미지를 이용하여 오브젝트 디바이스를 식별한다. 그 후, 마스터 디바이스는 예를 들어, 오브젝트 디바이스와 페어링함으로써, 식별된 오브젝트 디바이스와 자동으로 인터페이싱한다. 마스터 디바이스는 오브젝트 디바이스의 시각적 외양에 관한 정보를 포함한 브로드캐스트 데이터를 오브젝트 디바이스로부터 수신하고, 그 브로드캐스트 데이터를 오브젝트 디바이스의 식별에 이용할 수도 있다. 마스터 디바이스는 오브젝트 디바이스에 관련된 데이터를 취출하고 그 관련된 데이터를 디스플레이할 수도 있으며, 이는 오브젝트 디바이스의 디스플레이된 이미지에 걸쳐 데이터를 디스플레이할 수도 있다. 마스터 디바이스는 오브젝트 디바이스를 제어하거나 오브젝트 디바이스에 데이터를 전달하는데 이용될 인터페이스를 제공할 수도 있다.

Description

마스터 디바이스와 오브젝트 디바이스 간의 자동 인터페이싱{AUTOMATIC INTERFACING BETWEEN A MASTER DEVICE AND OBJECT DEVICE}
관련 출원들에 대한 상호참조
본 출원은 2009년 7월 17일자로 출원된 가출원 제61/226,552호 및 2009년 7월 17일자로 출원된 가출원 제61/226,545호의 이익을 주장하며, 이들 가출원들은 본 출원의 양수인에게 양도되어 있고 그에 의해 본 명세서에 참조로 명백히 포함된다.
무선 디바이스들은 더욱 유비쿼터스화되고 있다. 현재, 무선 디바이스들과의 인터페이싱은 비교적 어렵거나 제한된 프로세스이다. 예를 들어, 현재, 전자 디바이스들을 페어링 (pairing) 시키는 것은 사용자에게 양 디바이스들에 대한 프로토콜들을 턴온시키도록 요청하고 그후 발견을 요청하고 그후 페어링시키는 복잡한 태스크이다. 또한, 일부 전자 디바이스들은 거의 또는 전혀 빌트인 (built in) 인터페이스들을 갖지 않아서 상호작용하는 것을 어렵게 한다. 일반적으로 요구되는 소형 디바이스 사이즈들 및 디스플레이 스크린들의 가격은 모든 무선 디바이스에 풍부한 인터페이스들을 두는 것에 대한 장벽들이다.
무선 디바이스들의 이용이 증가함에 따라, 전자 디바이스들 간의 인터페이싱은 더욱 어렵게 될 것이다. 예를 들어, 현재 전자 디바이스들은 통상적으로 물리적 디바이스에 대해 연관을 갖지 않는 불분명한 디바이스명들을 포함하여 사용자들을 혼동스럽게 하고 있다; 예를 들어, 디폴트 전화 블루투스 명은 NOK234B 일 수도 있으며 전화 상에 나타나지 않는다. 사용자에 의해 겪게 되는 혼동은 페어링이 가능한 무선 디바이스들의 증가하는 수에 의해 악화될 것이다.
따라서, 디바이스들과 용이하고 자연스럽게 인터페이싱하기 위한 증가하는 요구가 존재한다.
마스터 디바이스는 오브젝트 디바이스를 이미징하고 그 이미지를 이용하여 오브젝트 디바이스를 식별한다. 그 후, 마스터 디바이스는, 예를 들어, 오브젝트 디바이스와 페어링함으로써, 식별된 오브젝트 디바이스와 자동으로 인터페이싱한다. 마스터 디바이스는 오브젝트 디바이스에 관련된 데이터를 취출하고, 그 관련된 데이터를 디스플레이할 수도 있으며, 이는 오브젝트 디바이스의 디스플레이된 이미지에 걸쳐 데이터를 디스플레이할 수도 있다. 마스터 디바이스는 오브젝트 디바이스를 제어하거나 오브젝트 디바이스로 데이터를 전달하도록 이용될 인터페이스를 제공할 수도 있다.
마스터 디바이스는 오브젝트 디바이스의 시각적 외양에 관한 정보를 포함하는 브로드캐스트 데이터를 오브젝트 디바이스로부터 수신한다. 마스터 디바이스는 브로드캐스트 데이터를 디스플레이하고, 오브젝트 디바이스로부터의 디스플레이된 브로드캐스트 데이터의 선택에 기초하여 오브젝트 디바이스와 인터페이싱할 수도 있다. 오브젝트 디바이스의 이미지는 다중의 오브젝트 디바이스들로부터 브로드캐스트 데이터를 필터링하여, 브로드캐스트 데이터가 마스터 디바이스에 의해 디스플레이되는 오브젝트 디바이스들의 수를 감소시키는데 이용될 수도 있다.
도 1 은 마스터 디바이스 및 오브젝트 디바이스를 포함하는, 무선 접속된 디바이스들의 예시적인 시스템을 도시한 블록 다이어그램이다.
도 2 는 오브젝트 디바이스와 자동으로 인터페이싱할 수도 있는 마스터 디바이스의 일 예를 도시한 블록 다이어그램이다.
도 3 은 마스터 디바이스를 오브젝트 디바이스와 인터페이싱시키는 방법의 플로우 차트이다.
도 4a 및 도 4b 는 오브젝트 디바이스에 관련된 데이터가 마스터 디바이스 상에 디스플레이된, 오브젝트 디바이스와 인터페이싱하는 마스터 디바이스를 도시한 것이다.
도 5a 및 도 5b 는 오브젝트 디바이스와 인터페이싱하는 마스터 디바이스, 및 오브젝트 디바이스에 관련된 데이터로 확대된 마스터 디바이스의 디스플레이를 도시한 것이다.
도 6a, 도 6b, 도 6c 및 도 6d 는 오브젝트 디바이스에 관련된 확대 데이터가 오브젝트 디바이스 이미지에 걸쳐 마스터 디바이스 상에 도시된, 오브젝트 디바이스와 인터페이싱하는 마스터 디바이스를 도시한 것이다.
도 7a 및 도 7b 는 제한된 인터페이스 능력들을 갖는, 오브젝트 디바이스와 인터페이싱하는 마스터 디바이스를 도시한 것이다.
도 8a 및 도 8b 는 마스터 디바이스가 확장된 기능을 오브젝트 디바이스에게 제공하는, 오브젝트 디바이스와 인터페이싱하는 마스터 디바이스를 도시한 것이다.
도 9a 는 오브젝트 디바이스들에 의해 브로드캐스트된 정보를 이용하여 다중의 동일한 오브젝트 디바이스들 중 하나를 식별하는 마스터 디바이스를 도시한 것이다.
도 9b, 도 9c 및 도 9d 는 2개의 오브젝트 디바이스들과 인터페이싱하는데 이용되는 마스터 디바이스를 도시한 것이다.
도 10a, 도 10b 및 도 10c 는 2개의 오브젝트 디바이스들 간의 인터페이스를 개시하는데 이용되는 마스터 디바이스를 도시한 것이다.
도 11 은 페어링하거나 인터페이싱할 수 없는 패시브 오브젝트를 마스터 디바이스가 이미징할 수도 있고 또한 마스터 디바이스가 오브젝트에 관련된 데이터를 취출 및 디스플레이하는 방법의 플로우 차트이다.
도 12 는 오브젝트의 이미지에 기초하여 애플리케이션을 자동으로 론칭 및 디스플레이하는 마스터 디바이스를 도시한 것이다.
도 13a 및 도 13b 는 패시브 오브젝트를 이미징하고 패시브 오브젝트에 관한 정보를 취출 및 디스플레이하는 마스터 디바이스를 도시한 것이다.
도 14a 및 도 14b 는 패시브 오브젝트를 이미징하고 패시브 오브젝트에 관련된 정보를 취출 및 디스플레이하는 마스터 디바이스의 또다른 예를 도시한 것이다.
도 15a, 도 15b 및 도 15c 는 패시브 오브젝트를 이미징하고 오브젝트에 관련된 데이터를 취출하고 그 데이터를 마스터 디바이스가 인터페이싱하고 있는 오브젝트 디바이스로 전달하는 마스터 디바이스를 도시한 것이다.
본 명세서에서 설명되는 시스템 및 방법은, 예를 들어, 마스터 디바이스로 취해진 오브젝트 디바이스의 이미지를 이용하여 마스터 디바이스와 오브젝트 디바이스를 페어링하거나 다르게는 인터페이싱시키는 것을 자동화한다. 마스터 디바이스는 오브젝트 디바이스에 관련된 관련 정보를, 예를 들어, 그 정보를 오브젝트 디바이스의 이미지 상에 오버레이시킴으로써 제공하는데 이용될 수도 있다. 마스터 디바이스는 오브젝트 디바이스에서 발견된 것보다 우수한 상호작용 능력들을 포함할 수도 있으며, 예를 들어, 오브젝트 디바이스의 제한되거나 전혀없는 인터페이싱 능력들로 인해, 다르게는 어렵거나 가능하지 않은 오브젝트 디바이스와의 상호작용들을 가능케 할 수 있다.
도 1 은 마스터 디바이스 (110) 및 오브젝트 디바이스 (180) 를 포함하는, 무선 접속된 디바이스들의 예시적인 시스템 (100) 을 도시한 블록 다이어그램이다. 예로써, 마스터 디바이스 (110) 는 울트라 모바일 PC ("UMPC") 와 같은 이동 전화기 또는 다른 전자 디바이스들일 수도 있다. 일 실시형태에 있어서, 마스터 디바이스 (110) 는 세미(semi)-이동식이거나 정지식일 수도 있다. 예를 들어, 마스터 디바이스 (110) 는 고정된 위치 또는 세미-고정된 위치에, 예를 들어, 상점에 위치될 수도 있으며, 새로운 디바이스들을 함께 용이하게 페어링시키는데 이용될 수도 있다. 예로써, 오브젝트 디바이스는 디지털 카메라, 뮤직 플레이어, 텔레비전, 디지털 화상 프레임, 또는 임의의 다른 디바이스와 같은 디바이스들일 수도 있다. 부가적으로, 오브젝트 디바이스 (180) 는 휴대형이거나, 일부 경우들에 있어서, 상대적으로 또는 완전히 비-휴대형일 수도 있다. 마스터 디바이스 (110) 는 카메라 (112) 및 디스플레이 (114) 를 포함한다. 마스터 디바이스 (110) 는 카메라 (112) 를 이용하여 오브젝트 디바이스 (180) 를 이미징함으로써 오브젝트 디바이스 (180) 와 인터페이싱하고, 오브젝트 디바이스 (180) 의 이미지 (180이 미지) 는 디스플레이 (114) 에 나타내어져서 그 이미지 (180이미지) 를 이용하여 오브젝트 디바이스 (180) 를 식별할 수도 있다. 오브젝트 디바이스 (180) 가 식별될 경우, 그 후, 마스터 디바이스 (110) 는 화살표 (116) 에 의해 도시된 바와 같이, 오브젝트 디바이스 (180) 와 자동으로 인터페이싱할 수 있다. 마스터 디바이스 (110) 는 또한, 오브젝트 디바이스 (180) 를 식별하거나 오브젝트 디바이스와 인터페이싱하는 것을 돕는데 이용될 수도 있는 링크 (104) 를 통해 네트워크 (102; 예를 들어, 인터넷과 같은 광역 네트워크) 와 통신할 수도 있다. 옵션적으로, 마스터 디바이스 (110) 는 네트워크 (102) 를 통해 간접적으로 오브젝트 디바이스 (180) 와 인터페이싱할 수도 있다 (116a).
도 2 는 마스터 디바이스 (110) 의 일 예를 도시한 블록 다이어그램이다. 마스터 디바이스 (110) 는 카메라 (112) 와 같은 이미징하는 수단, 및 무선 링크 (116: 도 1 에 도시됨) 를 통해 통신하기 위한 무선 인터페이스 (130) 와 같은, 오브젝트 디바이스와 인터페이싱하는 수단을 포함한다. 마스터 디바이스 (110) 는 또한, 가속도계 또는 자이로스코프일 수도 있는 모션 센서들 (118) 과 같은 모션을 감지하는 수단을 포함하여, 마스터 디바이스 (110) 에 대한 사용자 입력으로서 사용된 제스처들을 검출하는데 이용될 수도 있는 마스터 디바이스 (110) 의 모션을 검출할 수도 있다. 마스터 디바이스 (110) 는 소프트웨어 (126) 를 포함하는 메모리 (124) 와 통신하는 프로세서 (122) 를 포함하고 또한 하드웨어 (128) 및 펌웨어 (129) 를 더 포함할 수도 있는, 예를 들어, 마스터 디바이스 제어 유닛 (120) 일 수도 있는, 오브젝트 디바이스 (180) 를 식별하기 위한 수단을 더 포함하고, 디스플레이 또는 키패드 (152) 와 같은 사용자 인터페이스 (150) 의 양태들을 더 포함할 수도 있다. 카메라 (112) 및 무선 인터페이스 (130), 그리고 사용될 경우 모션 센서들 (118) 은 제어 유닛 (120) 에 접속된다. 제어 유닛 (120) 은 프로세서 (122) 와는 기능적으로 별개로서 예시되지만 실제로 프로세서 (122) 에 의해 수행될 수도 있는 그래픽 엔진 (125) 을 포함한다. 그래픽 엔진 (125) 은, 예를 들어, 오브젝트 디바이스 (180) 의 이미지에 걸쳐 디스플레이될 수도 있는 확대 데이터를 생성한다. 본 명세서에서 사용되는 바와 같이, 프로세서는 하나 이상의 마이크로 프로세서들, 내장형 프로세서들, 제어기들, 주문형 집적회로(ASIC)들, 디지털 신호 프로세서(DSP)들 등일 수 있지만 이들을 반드시 포함할 필요는 없음을 이해할 것이다. 용어 프로세서는 특정 하드웨어보다는 시스템에 의해 구현된 기능들을 기술하도록 의도된다. 더욱이, 본 명세서에서 사용되는 바와 같이, 용어 "메모리" 는 이동 플랫폼과 연관된 장기 메모리, 단기 메모리 또는 다른 메모리를 포함하여 임의의 타입의 컴퓨터 저장 매체를 지칭하며, 메모리의 임의의 특정 타입 또는 메모리들의 수, 또는 메모리가 저장되는 매체의 타입에 제한되지 않는다.
마스터 디바이스 (110) 는 또한, 디스플레이 (114) 와 같은 디스플레이하는 수단뿐 아니라 키패드, 터치 스크린, 또는 다른 적절한 촉각형 입력 디바이스와 같은 사용자 입력 디바이스 (152) 를 포함하는 사용자 인터페이스 (150) 를 포함한다. 사용자 인터페이스 (150) 는 또한, 예를 들어, 마스터 디바이스 (110) 가 이동 전화기인 경우, 스피커 (154) 및 마이크로폰 (156) 을 포함할 수도 있다.
무선 인터페이스 (130) 는 임의의 적절한 안테나 (132), 수신기 및 송신기 또는 트랜시버를 포함하여, 마스터 디바이스 (110) 가 무선 링크 (116) 를 통해 하나 이상의 오브젝트 디바이스들과 통신할 수 있게 한다. 옵션적으로, 무선 인터페이스 (130) 는 또한, 프로세서 (122) 의 프로세싱 요건들을 감소시킬 프로세싱 능력들을 가질 수도 있다.
옵션적으로, 마스터 디바이스 (110) 는, 링크 (104; 도 1 에 도시됨) 를 통해 네트워크 (102) 상으로 통신하기 위해 안테나 (142) 를 갖는 트랜시버와 같은 네트워크 인터페이스 (140) 를 포함할 수도 있다. 예를 들어, 마스터 디바이스 (110) 는 유선 또는 무선 통신 링크를 통해 다른 네트워크 (102; 예를 들어, 인터넷과 같은 광역 네트워크) 로의 접속성을 제공할 수도 있다. 따라서, 마스터 디바이스 (110) 는 다른 오브젝트 디바이스들 (180; 예를 들어, Wi-Fi 스테이션) 이 네트워크 (102) 에 액세스할 수 있게 할 수도 있다. 네트워크 인터페이스 (140) 는, 무선 광역 네트워크 (WWAN), 무선 로컬 영역 네트워크 (WLAN), 무선 개인 영역 네트워크 (WPAN) 등과 같이 셀룰러 타워들을 포함하고 무선 통신 액세스 포인트들로부터의 다양한 무선 통신 네트워크들과 결합하여 구현될 수도 있다. 용어 "네트워크" 및 "시스템" 은 종종 상호대체가능하게 사용된다. WWAN 은 코드분할 다중 액세스 (CDMA) 네트워크, 시분할 다중 액세스 (TDMA) 네트워크, 주파수 분할 다중 액세스 (FDMA) 네트워크, 직교 주파수 분할 다중 액세스 (OFDMA) 네트워크, 단일 캐리어 주파수 분할 다중 액세스 (SC-FDMA) 네트워크, 롱텀 이볼루션 (LTE) 등일 수도 있다. CDMA 네트워크는 cdma2000, 광대역 CDMA (W-CDMA) 등과 같은 하나 이상의 무선 액세스 기술(RAT)들을 구현할 수도 있다. cdma2000 은 IS-95, IS-2000, 및 IS-856 표준들을 포함한다. TDMA 네트워크는 이동 통신용 글로벌 시스템 (GSM), 디지털 어드밴스드 이동 전화 시스템 (D-AMPS) 또는 기타 다른 RAT 를 구현할 수도 있다. GSM 및 W-CDMA 는 "제3세대 파트너쉽 프로젝트" (3GPP) 로 명명된 컨소시엄으로부터의 문헌들에 기술되어 있다. cdma2000 은 "제3세대 파트너쉽 프로젝트 2" (3GPP2) 로 명명된 컨소시엄으로부터의 문헌들에 기술되어 있다. 3GPP 및 3GPP2 는 공개적으로 입수가능하다. WLAN 은 IEEE 802.11x 네트워크일 수도 있고, WPAN 은 블루투스 네트워크, IEEE 802.15x, 또는 기타 다른 타입의 네트워크일 수도 있다. 그 기술들은 또한, WWAN, WLAN 및/또는 WPAN 의 임의의 조합과 결합하여 구현될 수도 있다.
마스터 디바이스 (110) 는 옵션적으로, 마스터 디바이스 (110) 의 하나 이상의 컴포넌트들에 전력을 제공하기 위한 배터리 (121) 를 포함할 수도 있다. 마스터 디바이스 (110) 는 이동 핸드셋, 개인 디지털 보조기, 랩탑 컴퓨터, 헤드셋, 차량용 핸즈프리 디바이스, 또는 임의의 다른 전자 디바이스 중 적어도 하나를 포함할 수도 있다. 특히, 본 명세서에서의 교시들은 다양한 디바이스들에 포함 (예를 들어, 다양한 디바이스들 내에서 구현되거나 그에 의해 수행) 될 수도 있다. 예를 들어, 본 명세서에서 교시된 하나 이상의 양태들은 전화기 (예를 들어, 셀룰러 전화기), 개인 데이터 보조기 ("PDA"), UMPC, 엔터테인먼트 디바이스 (예를 들어, 뮤직 또는 비디오 디바이스), 또는 카메라 (112) 를 포함한 임의의 다른 디바이스에 포함될 수도 있다.
본 명세서에서 설명된 방법들은 애플리케이션에 의존하여 다양한 수단에 의해 구현될 수도 있다. 예를 들어, 이들 방법들은 하드웨어 (128), 소프트웨어 (126), 펌웨어 (129), 또는 이들의 임의의 조합으로 구현될 수도 있다. 하드웨어 구현에 있어서, 프로세싱 유닛들은 하나 이상의 주문형 집적회로(ASIC)들, 디지털 신호 프로세서(DSP)들, 디지털 신호 프로세싱 디바이스(DSPD)들, 프로그래머블 로직 디바이스(PLD)들, 필드 프로그래머블 게이트 어레이(FPGA)들, 프로세서들, 제어기들, 마이크로 제어기들, 마이크로 프로세서들, 전자 디바이스들, 본 명세서에서 설명된 기능들을 수행하도록 설계된 다른 전자 유닛들, 또는 이들의 조합 내에서 구현될 수도 있다.
펌웨어 및/또는 소프트웨어 구현에 있어서, 그 방법들은 본 명세서에서 설명된 기능들을 수행하는 모듈들 (예를 들어, 절차들, 함수들 등) 로 구현될 수도 있다. 명령들을 실질적으로 수록하는 임의의 머신 판독가능 매체가 본 명세서에 설명된 방법들을 구현하는데 이용될 수도 있다. 메모리는 프로세서 유닛 내부 또는 프로세서 유닛 외부에 구현될 수도 있다. 본 명세서에서 사용되는 바와 같이, 용어 "메모리" 는 임의의 타입의 장기 메모리, 단기 메모리, 휘발성 메모리, 비휘발성 메모리, 또는 다른 메모리를 지칭하며, 메모리의 임의의 특정 타입 또는 메모리들의 수 또는 메모리가 저장되는 매체의 타입에 제한되지 않는다.
예를 들어, 소프트웨어 (126) 코드들은 메모리 (124) 에 저장되고 프로세서 (122) 에 의해 실행될 수도 있으며, 프로세서를 구동시키고 본 명세서에 설명된 바와 같은 마스터 디바이스 (110) 의 동작을 제어하는데 이용될 수도 있다. 예를 들어, 메모리 (124) 와 같은 컴퓨터 판독가능 매체에 저장된 프로그램 코드는 오브젝트 디바이스의 이미지를 이용하여 오브젝트 디바이스를 식별하기 위한 프로그램 코드, 및 식별된 오브젝트 디바이스와 인터페이싱하기 위한 프로그램 코드를 포함할 수도 있다. 컴퓨터 판독가능 매체는 오브젝트 디바이스로부터 수신된 브로드캐스트 데이터를 디스플레이하고 또한 그 브로드캐스트 데이터를 이용하여 인터페이싱할 오브젝트 디바이스를 식별하는 것을 돕기 위한 프로그램 코드를 포함할 수도 있다.
펌웨어 및/또는 소프트웨어로 구현된다면, 그 기능들은 컴퓨터 판독가능 매체 상에 하나 이상의 명령들 또는 코드로서 저장될 수도 있다. 예들은 데이터 구조로 인코딩된 컴퓨터 판독가능 매체, 및 컴퓨터 프로그램으로 인코딩된 컴퓨터 판독가능 매체를 포함한다. 컴퓨터 판독가능 매체는 물리적 컴퓨터 저장 매체를 포함한다. 저장 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수도 있다. 한정이 아닌 예로써, 그러한 컴퓨터 판독가능 매체는 RAM, ROM, EEPROM, CD-ROM 또는 다른 광학 디스크 저장부, 자기 디스크 저장부 또는 다른 자기 저장 디바이스들, 또는 원하는 프로그램 코드를 명령들 또는 데이터 구조들의 형태로 저장하는데 이용될 수 있고 또한 컴퓨터에 의해 액세스될 수 있는 임의의 다른 매체를 포함할 수 있으며, 본 명세서에서 사용되는 바와 같은 디스크 (disk) 및 디스크 (disc) 는 컴팩트 디스크 (CD), 레이저 디스크, 광학 디스크, DVD (digital versatile disc), 플로피 디스크 및 블루레이 디스크를 포함하며, 여기서, 디스크 (disk) 는 통상적으로 데이터를 자기적으로 재생하지만 디스크 (disc) 는 레이저를 이용하여 광학적으로 데이터를 재생한다. 상기의 조합들이 또한 컴퓨터 판독가능 매체의 범위 내에 포함될 것이다.
도 3 은 마스터 디바이스 (110) 를 오브젝트 디바이스 (180) 와 인터페이싱시키는 방법의 플로우 차트이다. 마스터 디바이스 (110) 는, 디바이스들이 서로에 등록하는 프로세스인 "페어링" 에 의해 오브젝트 디바이스와 인터페이싱할 수도 있다. 일단 페어링되면, 통상적으로, 디바이스들은 페어링 프로세스를 재수행하지 않고도, 범위 내에 있고 액티브일 때마다 서로와 통신할 수 있다. 참조의 용이를 위해, 인터페이싱은 종종 페어링으로서 본 명세서에서 지칭되지만, 페어링 이외에 부가적인 형태들의 인터페이싱이 또한 본 명세서에서 고려됨을 이해해야 한다.
도 3 에 도시된 바와 같이, 페어링될 오브젝트 디바이스는 마스터 디바이스를 이용하여 이미징된다 (202). 오브젝트 디바이스의 이미지는 사용자에게 디스플레이되어, 마스터 디바이스가 원하는 오브젝트 디바이스와 인터페이싱하고 있음을 보장할 수도 있다. 이미지는 카메라를 이용한 스틸 이미지로서 또는 비디오로서 생성될 수도 있다. 마스터 디바이스는 이미지로부터 오브젝트 디바이스를 식별한다 (204). 식별은 오브젝트 디바이스의 시각적 외양에 기초하거나 바코드 또는 다른 타입의 마크와 같은, 오브젝트 디바이스 상에 나타나는 가시적 마커에 기초할 수도 있다. 식별은 또한, 오브젝트 디바이스 (180) 로부터의 브로드캐스트 비컨에 기초할 수도, 예를 들어, 태그 또는 주파수에 기초할 수도 있으며, 이는, 예를 들어, 오브젝트 디바이스의 타입 (예를 들어, 디지털 카메라, mp3 플레이어 등), 하위 카테고리 (예를 들어, 포인트-앤드-슛트 (point-and-shoot) 디지털 카메라), 브랜드 (예를 들어, Sony, Nokia 등), 컨텐츠의 장르 (예를 들어, 영화, 노래 등) 또는 이들의 임의의 조합과 같지만 이에 제한되지 않는 카테고리, ID, 지오-배향, 또는 지오-포지션과 같은 제한된 정보에 공중이 액세스하게 한다. 마스터 디바이스 (110) 는 시각적 외양, 가시적 마커, 또는 브로드캐스트 비컨으로부터 획득된 정보를 이용하여 룩업 테이블로부터 매칭을 취출함으로써 오브젝트 디바이스 (180) 를 식별할 수도 있다. 일 실시형태에 있어서, 마스터 디바이스 (110) 는 이용가능한 비-시각적 센서들을 이용하여 가능성있는 아이템들의 룩업 테이블을 좁히고, 그 후, 키포인트 특징들 또는 라인들과 같은 다른 시각적 참조들을 이용하여 룩업 테이블에 대한 이미지의 시각적 매칭을 수행할 수도 있다. 예를 들어, 룩업 테이블은 소비자 전자기기 산업 설계들의 이전에 저장된 이미지들 또는 그러한 설계들의 3차원 모델들을 포함할 수도 있다. 룩업 테이블은, 예를 들어, 마스터 디바이스 (110) 상에, 오브젝트 디바이스 (180) 상에 또는 원격 위치에, 예를 들어, 링크 (104; 도 1 에 도시됨) 를 통해 네트워크 (102) 에 의해 액세스되는 서버 상에 저장될 수도 있다.
일 실시형태에 있어서, 식별은 오브젝트 디바이스에 의해 제공된 시각적 식별 정보에 기초할 수도 있다. 예를 들어, 오브젝트 디바이스는 오브젝트 디바이스에 관한 시각적 정보를 브로드캐스팅할 수도 있으며, 그 시각적 정보를 이용하여 오브젝트 디바이스가 식별될 수도 있다. 오브젝트 디바이스는, 예를 들어, 오브젝트 디바이스가 도 9a 에 도시된 바와 같은 디지털 화상 프레임인 경우, 오브젝트 디바이스가 무엇과 같이 보이는지를 또는 오브젝트 디바이스에 의해 디스플레이되는 이미지에 관한 정보 또는 이미지를 브로드캐스팅할 수도 있으며, 이는 동일한 오브젝트 디바이스들이 존재할 경우에 유용할 수도 있다. 그 후, 마스터 디바이스 (110) 는 오브젝트 디바이스들을 이미징하고, 마스터 디바이스 (110) 에 의해 취해진 이미지를 오브젝트 디바이스들에 관한 브로드캐스트 정보, 예를 들어, 디지털 화상 프레임 상의 현재 디스플레이된 이미지와 비교하여 오브젝트 디바이스를 식별할 수 있다. 예를 들어, 도 9a 에 도시된 바와 같이, 마스터 디바이스 (110) 는 디지털 프레임 (180A) 의 산업 설계를 이용하여 그 오브젝트 디바이스를 인식할 수 있다. 하지만, 프레임 (180A 및 180B) 에 의해 도시된 다중의 유사한 또는 동일한 프레임들, 예를 들어, 동일한 산업 설계가 존재하지만 각각이 상이한 스크린 이미지를 디스플레이한다면, 사용자는 카메라 뷰에서 하나 (180A) 를 선택할 수 있고 마스터 디바이스 (110) 는 현재 디스플레이된 이미지를 이용하여 오브젝트 디바이스들 (180A, 180B) 중 어느 것이 페어링되는지를 식별할 수 있다. 식별은 예를 들어 디지털 화상 프레임에서와 같은 디스플레이된 스틸 이미지에 기초하거나 디스플레이된 비디오에 기초할 수 있다. 비디오에 기초한 식별에 있어서, 매칭은 예를 들어, 미리결정된 시간 세그먼트에서 비디오가 무엇"과 같이 보이는지"의 서머리인 공유된 비디오 시그너처들의 시퀀스에 기초하거나, 또는 선택된 프레임의 어느 한측 상의 선택된 수의 프레임들이 또한 비교되는 에러 정정치의 부가로 공지된 시간에서 생성되는 비디오의 일 프레임에 기초하여 행해질 수도 있다. 이들 기술들은 컴퓨터들, 랩탑들, 셀룰러 전화기들, 뮤직 플레이어들 등과 같은 다른 오브젝트 디바이스들과 함께 사용될 수도 있다. 일 실시형태에 있어서, 마스터 디바이스 (110) 는 오브젝트 디바이스에 의해 브로드캐스트된 정보의 이미지를 디스플레이할 수도 있고, 이 정보의 이미지로부터 사용자는 인터페이싱할 원하는 오브젝트 디바이스를 선택할 수도 있으며, 이는 마스터 디바이스 (110) 가 마스터 디바이스 (110) 를 이용하여 오브젝트 디바이스를 이미징해야 하는 필요성을 제거할 것이다. 원한다면, 마스터 디바이스 (110) 에 의해 취해진 오브젝트 디바이스의 이미지는, 마스터 디바이스 (110) 가 사용자 선택을 위해 디스플레이하는 페어링가능 오브젝트 디바이스들의 수를 필터링하는데 이용될 수도 있다.
오브젝트 디바이스의 식별에 기초하여, 마스터 디바이스는, 옵션적인 단계 206 에 도시된 바와 같이, 오브젝트 디바이스가 인터페이싱될 수도 있는지를 판정할 수도 있다. 마스터 디바이스 (110) 는, 디스플레이 (114) 에서의 오브젝트 디바이스 (180) 의 이미지 상에, 오브젝트 디바이스 (180) 가 인터페이싱될 수도 있는지 여부를 나타내고, 인터페이싱이 요구되는지 여부를 나타내기 위한 기회를 사용자에게 제공할 수도 있다. 예를 들어, 오브젝트 디바이스 (180) 의 이미지는 페어링 능력을 나타내기 위해 마스터 디바이스 (110) 의 디스플레이 (114) 에 개략적으로 또는 선명하게 도시될 수도 있다. 오브젝트 디바이스 이미지의 디스플레이의 확대는 오브젝트 디바이스 (180) 로부터의 브로드캐스트 비컨으로부터 획득된 정보를 포함할 수도 있다. 사용자는 오브젝트 디바이스의 페어링, 비-페어링, 또는 페어링 능력을 은닉하는 것을 선택할 수 있다. 페어링 능력은 예를 들어, 한번만, 또는 영원히, 또는 특정 클래스 내의 모든 오브젝트 디바이스들, 예를 들어 모든 디지털 화상 프레임들에 대해 은닉될 수도 있다.
그 후, 마스터 디바이스 (110) 는 자동으로 또는 사용자 선택에 응답하여 오브젝트 디바이스와 인터페이싱하거나 페어링할 수도 있다 (208). 사용자 선택의 이용은 2 이상의 페어링가능 오브젝트 디바이스가 이미지에 존재하는 경우에 유리할 수도 있다. 예로써, 사용자 선택은 제스처들에 기초할 수도 있으며, 예를 들어, 여기서, 상이한 페어링가능 오브젝트 디바이스들이 제스처들에 기초하여 강조되며, 원하는 오브젝트 디바이스는 강조되는 경우에 선택된다. 부가적으로, 사용자는 예를 들어, 페어링이 요구됨을 나타낼 수도 있고, 페어링 프로세스는 자동적일 수도 있다. 페어링이 자동적일 경우, 중간 보안 단계가 사용되어 사용자가 오브젝트 디바이스와의 페어링을 원한다는 것을 보장할 수도 있다. 페어링은 예를 들어, 마스터 디바이스와 오브젝트 디바이스 간 거리에 도달하기 위해 최저 전력 페어링 방법을 이용하여 특정 위치들에서의 특정 디바이스들에 대해 최적화될 수도 있다. 또한, 페어링 방법은 마스터 디바이스와 오브젝트 디바이스의 상대적 위치들이 변하는 경우에 필요에 따라 자동으로 변할 수도 있다. 인터페이싱 또는 페어링하기 위해, 마스터 디바이스 및 오브젝트 디바이스는 예를 들어, 디바이스들이 발견 메시지의 교환을 통해 서로를 발견하는 발견가능 상태에 진입함으로써, 먼저 서로를 발견해야 한다. 예를 들어, 마스터 디바이스 (110) 는 로컬 페어링가능 오브젝트 디바이스들이 발견 모드에 진입할 것을 요청할 수도 있다. 마스터 디바이스 (110) 는, 예를 들어, 네트워크 (102) 를 통해 그 요청을 개시할 수도 있다. 네트워크는 마스터 디바이스 (110) 의 영역에서의 임의의 페어링가능 오브젝트 디바이스를 시뮬레이션하여 발견 모드에 진입할 수도 있다. 대안적으로, 마스터 디바이스는 원하는 오브젝트 디바이스 (180) 를 먼저 식별한 후, 마스터 디바이스 (110) 의 영역에서의 모든 유사한 오브젝트 디바이스들에 대해 예를 들어 네트워크 (102) 를 통해 발견 요청을 개시하여 발견 모드로 진입할 수도 있다. 발견 시, 디바이스들은 서로와 페어링할 수도 있다. 페어링은 특정 디바이스들로의 페어링을 제한하기 위한 적어도 부분적으로 보안 기능이다. 예를 들어, 페어링은, 디바이스들의 무허가의 또는 원치않은 페어링을 방지하기 위해 제 1 디바이스가 제 2 디바이스에 (디바이스에 대한 공장에서 종종 고정된 4자리 번호와 같은) 패스워드로 응답해야 하는 패스워드 인증 방식들을 포함할 수도 있는 메시지들의 교환을 포함할 수도 있다. 블루투스와 같은 네트워킹 프로토콜들에 있어서, 발견과 페어링은 별개의 절차들이지만 함께 수행될 수도 있다. 실제 페어링은 프로토콜의 표준 프랙티스 (예를 들어, 블루투스, WiFi, IR, …) 를 통해 임의의 현재 프로토콜로 수행될 수 있다.
원한다면, 마스터 디바이스 (110) 상에 디스플레이된 이미지는 예를 들어, 그래픽 엔진 (125) 에 의해 제공된 확대 데이터를 이용하여 오브젝트 디바이스의 상태를 나타내기 위해, 예를 들어, 옵션적인 단계 210 에 나타낸 바와 같이 페어링을 확인응답하기 위해 확대될 수도 있다. 부가적으로, 오브젝트 디바이스에 관련된 데이터는 옵션적인 단계 214 에서 마스터 디바이스 상에 디스플레이될 수도 있다.
예로써, 도 4a 및 4b 는 마스터 디바이스 (110) 를 오브젝트 디바이스 (180), 이 경우, 디지털 카메라와 페어링시키는 것을 도시한 것이고, 여기서, 오브젝트 디바이스 (180) 에 관련된 데이터는 페어링 이후 마스터 디바이스 (110) 상에 디스플레이된다 (214). 도 4a 는 마스터 디바이스 (110) 가 오브젝트 디바이스 (180) 를 이미징하는 것 (202) 을 도시한 것이고, 여기서, 오브젝트 디바이스 이미지 (180이미지) 는 마스터 디바이스 (110) 의 디스플레이 (114) 에 나타내진다. 도 4b 에 도시된 바와 같이, 오브젝트 디바이스 이미지 (180이미지) 에 기초하여, 마스터 디바이스 (110) 는 오브젝트 디바이스 (180) 와 페어링하고 (116), 오브젝트 디바이스 (180) 에 관련된 데이터, 이 경우, 오브젝트 디바이스 (180) 에 의해 취해진 사진들 (182) 을 마스터 디바이스 (110) 의 디스플레이 (114) 상에 디스플레이한다. 마스터 디바이스 (110) 에 의해 디스플레이되는 오브젝트 디바이스 (180) 에 관련된 데이터는 사용자에 의해 선택될 수도 있거나 또는 자동으로 디스플레이될 수도 있다.
오브젝트 디바이스 (180) 에 관련된 데이터는 오브젝트 디바이스에 관한 정보일 수도 있다. 예를 들어, 그 데이터는 오브젝트 디바이스의 이력 또는 특성들, 오브젝트 디바이스에 관련된 태스크들을 수행하는 방법을 기술하는 헬프 파일들, 또는 다른 그러한 데이터와 관련될 수도 있다. 대안적으로, 디지털 카메라로부터의 사진들, 뮤직 또는 영화와 같은 파일들의 리스트, 또는 오브젝트 디바이스에 저장된 다른 정보와 같은 관련된 데이터는 오브젝트 디바이스로부터 유래할 수도 있다. 부가적으로, 관련된 데이터는 오브젝트 디바이스와의 인터페이스 또는 애플리케이션일 수도 있다. 예로써, 도 5a 및 도 5b 는 USB 플래시 드라이브의 형태로 오브젝트 디바이스 (180) 와 인터페이싱하는 마스터 디바이스 (110), 및 오브젝트 디바이스 (180) 에 관련된 데이터 (180데이터) 로 확대된 마스터 디바이스 (110) 의 디스플레이를 도시한 것이다. 도 5b 에 도시된 바와 같이, 페어링 (116) 이후, 플래시 드라이브 상에 저장된 파일들의 리스트일 수도 있거나 플래시 드라이브 상에 저장된 파일들을 심지어 열 수도 있는 관련된 데이터 (180데이터) 가 디스플레이된다. 따라서, 마스터 디바이스 (110) 는 오브젝트 디바이스 (180) 자체가 사용자 인터페이스를 갖지 않는 경우에 오브젝트 디바이스 (180) 에 사용자 인터페이스를 제공할 수도 있다.
도 6a, 도 6b, 도 6c 및 도 6d 는 오브젝트 디바이스 (180) 에 대한 확대된 데이터 (180데이터) 가 오브젝트 디바이스 이미지 (180이미지) 에 걸쳐 마스터 디바이스 (110) 상에 도시된, 오브젝트 디바이스 (180) 와 인터페이싱하는 마스터 디바이스 (110) 의 다른 예를 시계의 형태로 도시한 것이다. 도시된 바와 같이, 관련된 데이터 (180데이터) 는 오브젝트 디바이스 이미지 (180이미지) 와 엄격히 정렬된 것 (도 6a) 으로서, 느슨하게 정렬된 것 (도 6b) 으로서, 또는 정렬되지 않는 것 (도 6c, 도 6d) 으로서, 마스터 디바이스 (110) 에 의해 디스플레이될 수도 있다. 도 6d 에 도시된 바와 같이, 오브젝트 디바이스 (180) 로부터의 관련된 데이터는 이미지 (180이미지) 의 키 포인트 추적을 이용하여 마스터 디바이스 (110) 의 전체 디스플레이에 걸쳐 디스플레이된 후, 그에 대한 그래픽 확대를 고정시킬 수도 있다.
마스터 디바이스 (110) 는 제한된 사용자 인터페이스 능력들을 갖는 오브젝트 디바이스를 사용자 인터페이스에게 제공하거나, 또는 오브젝트 디바이스의 사용자 인터페이스에 의해 허용된 것에 비해 확장된 기능을 사용자 인터페이스에게 간단히 제공하는데 이용될 수도 있다. 예를 들어, 도 7a 및 도 7b 는 제한된 사용자 인터페이스 능력들을 갖는, 오브젝트 디바이스 (180) 와 페어링하는 마스터 디바이스 (110) 를 도시한 것이다. 도 7a 및 도 7b 에서의 오브젝트 디바이스 (180) 는, 물리적 사용자 인터페이스를 가질 수도 있지만 그래픽 사용자 인터페이스 (GUI) 를 제공하기 위한 스크린이 없는 MP3 플레이어의 형태이다. 도 7a 에 도시된 바와 같이, 마스터 디바이스 (110) 는 오브젝트 디바이스 (180) 를 이미징함으로써 오브젝트 디바이스 (180) 와 페어링된다. 도 7b 에 도시된 바와 같이, 페어링 (116) 이후, 마스터 디바이스 (110) 상의 오브젝트 디바이스 (180) 에 관련된 데이터는 예를 들어, MP3 플레이어의 부가 기능을 허용하도록 사용될 수 있는 GUI 이다.
도 8a 및 도 8b 는 마스터 디바이스 (110) 가 확장된 기능을 제공하는, 오브젝트 디바이스 (180) 와 인터페이싱하는 마스터 디바이스 (110) 를 도시한 것이다. 도 8a 및 도 8b 에서의 오브젝트 디바이스 (180) 는, 그래픽 사용자 인터페이스를 갖는 MP3 플레이어의 형태이다. 도 8a 에 도시된 바와 같이, 마스터 디바이스 (110) 는 오브젝트 디바이스 (180) 를 이미징함으로써 오브젝트 디바이스 (180) 와 페어링된다. 도 8b 에 도시된 바와 같이, 페어링 (116) 이후, 마스터 디바이스 (110) 상의 오브젝트 디바이스 (180) 에 관련된 데이터는 GUI 이고, 그 인터페이스는 더 용이한 사용자 상호작용을 위한 터치 스크린, 더 큰 스크린, 제어를 위해 더 자연스런 제스처들을 허용하는 것, 또는 플레이 리스트들을 생성하는 것과 같은 부가 능력들을 제공하는 것과 같은 확장된 기능을 제공한다.
따라서, 오브젝트 디바이스 (180) 에 관련된 다양한 타입의 데이터가 마스터 디바이스 (110) 에 의해 디스플레이될 수도 있다. 예를 들어, 그 데이터는 도 6a 에 도시된 정보와 같은 패시브형이거나 도 7b 에 디스플레이된 뮤직 인터페이스와 같은 인터랙티브형일 수도 있다. 또한, 직접 또는 도 1 에 도시된 네트워크 (102) 와 같은 원격 소스를 통해 오브젝트 디바이스에 의해 노출된 기능이 디스플레이될 수도 있다. 예로써, 도 5a 및 도 5b 에 있어서, 180데이터 는 오브젝트 디바이스 (180) 자체로부터와는 대조적으로 네트워크 (102) 로부터 유래할 수도 있다. 일예로서, 도 5a 에 도시된 USB 플래시 드라이브 (180) 가 컴퓨터에 플러그인될 경우, 180데이터 는 네트워크 (102) 에 동기될 수도 있다. 마스터 디바이스 (110) 가 USB 플래시 드라이브 (180) 와 페어링할 경우, 실제로, 네트워크 (102) 에서의 동기된 데이터와 페어링할 수도 있다. 다른 예에 있어서, MP3 플레이어 기능이 확장되며, 여기서, MP3 플레이어 상의 데이터의 사본이 네트워크 (102) 상에 존재한다. 확장된 기능 (예를 들어, 플레이 리스트를 작성하는 것) 이 MP3 플레이어 자체 상에서 가능하지 않을 수도 있기 때문에, 마스터 디바이스 (110) 는 네트워크 (102) 상에서 데이터를 조작하는데 이용될 수도 있다. 일단 상호작용이 완료되면 (예를 들어, 새로운 플레이 리스트가 작성됨), 네트워크 (102) 는 MP3 플레이어 (오브젝트 디바이스; 180) 와 동기한다. 원한다면, 마스터 디바이스 (110) 와 오브젝트 디바이스 (180) 간의 상호작용은 확대 호출들 사이에서 지속될 수도 있다. 예를 들어, 디스플레이되는 확대된 데이터는 관측되었던 이전 시간에 나타났던 동일한 상태로 유지될 수도 있다. 또한, 마스터 디바이스 (110) 는 커맨드들 또는 데이터를 오브젝트 디바이스 (180) 에 제공할 수도 있다. 즉, 오브젝트 디바이스 (180) 는 마스터 디바이스 (110) 와의 인터페이스를 통해 제어될 수도 있다. 데이터는 마스터 디바이스 (110) 상에, 오브젝트 디바이스 (180) 상에, 또는 원격 위치에, 예를 들어, 네트워크 (102; 도 1) 를 통해 액세스된 서버 상에 저장될 수도 있다.
부가적으로, 마스터 디바이스 (110) 는 또한 다중의 오브젝트 디바이스들과 인터페이싱할 수도 있다. 예를 들어, 도 9b, 도 9c 및 도 9d 에 도시된 바와 같이, 마스터 디바이스 (110) 는 디지털 카메라 (180) 및 디지털 화상 프레임 (180A) 으로서 도시된 2개의 오브젝트 디바이스들과 인터페이싱하는데 이용된다. 마스터 디바이스 (110) 는 하나의 오브젝트 디바이스, 예를 들어, 카메라 (180) 로부터 데이터를 취출하고 그 데이터를 다른 오브젝트 디바이스, 예를 들어, 디지털 화상 프레임 (180A) 으로 전달하는데 이용될 수도 있다. 도 9b 는 카메라 (180) 를 이미징함으로써 카메라 (180) 와 페어링되는 마스터 디바이스 (110) 를 도시한 것이다. 디지털 화상 프레임 (180A) 은 동일한 방식으로 도 9c 에 도시된 바와 같이 이미 또는 후속적으로 페어링될 수도 있다 (116A). 도 9c 는 마스터 디바이스 (110) 와 카메라 (180) 간의 페어링 (116) 이후, 데이터가 마스터 디바이스 (110) 에 의해 카메라 (180) 로부터 수신되고 마스터 디바이스 (110) 에 의해 디스플레이되는 것을 도시한다. 그 후, 선택된 데이터는 마스터 디바이스 (110) 로부터 제 2 오브젝트 디바이스, 예를 들어, 디지털 화상 프레임 (180A) 으로 전달될 수도 있고, 도 9d 에 도시된 바와 같이 디스플레이되거나 그렇지 않으면 제 2 오브젝트 디바이스에 의해 저장 또는 이용될 수도 있다. 데이터는 마스터 디바이스 (110) 에서의 가속도계 또는 자이로스코프와 같은 모션 센서들 (118) 에 의해 검출된 사용자 제스처 또는 터치 스크린을 통한 선택을 포함하여 사용자 상호작용에 의해 야기되거나 자동식일 수도 있다. 데이터 전달을 개시하기 위한 제스처의 이용에 있어서, 서로 및/또는 마스터 디바이스 (110) 에 대한 하나 이상의 오브젝트 디바이스들 (180, 180A) 의 상대적 위치들은, 예를 들어, 2개의 오브젝트 디바이스들 (180, 180A) 의 이미징 사이에서 모션 센서들 (118) 을 이용하여 마스터 디바이스 (110) 의 위치 또는 배향에서의 변경을 검출함으로써 이전에 결정될 수도 있다. 대안적으로, 오브젝트 디바이스들 (180, 180A) 간의 관련성을 시각적으로 결정하기 위해 픽셀 플로우 추적이 이용될 수도 있다.
일 실시형태에 있어서, 마스터 디바이스 (110) 는 오브젝트 디바이스들과 인터페이싱하고 오브젝트 디바이스들 간의 페어링을 개시함으로써 2 이상의 오브젝트 디바이스들 간의 페어링을 돕는데 이용될 수도 있으며, 이는 오브젝트 디바이스들의 사용자 인터페이스들이 그 디바이스들의 직접 페어링을 어렵게 할 경우에 특히 유용할 수도 있다. 예를 들어, 도 10a, 도 10b 및 도 10c 에 도시된 바와 같이, 마스터 디바이스 (110) 는 디지털 카메라 (180) 및 디지털 화상 프레임 (180A) 으로서 도시된 2개의 오브젝트 디바이스들 간의 인터페이스를 개시하는데 이용된다. 도 10a 는 카메라 (180) 를 이미징함으로써 카메라 (180) 과 페어링 (116) 되는 마스터 디바이스 (110) 를 도시한 것이다. 도 10b 는 디지털 화상 프레임 (180A) 을 이미징함으로써, 디지털 화상 프레임 (180A) 으로서 도시된 타깃 오브젝트 디바이스와 페어링 (116A) 되는 마스터 디바이스 (110) 를 도시한 것이다. 마스터 디바이스 (110) 와 페어링된 2개의 오브젝트 디바이스들 (180, 180A) 에 있어서, 마스터 디바이스 (110) 는 도 10c 에 도시된 바와 같이, 2개의 오브젝트 디바이스들 (180, 180A) 간의 페어링 (116B) 을 개시하는데 이용될 수도 있다. 2개의 오브젝트 디바이스들 (180, 180A) 의 페어링은, 마스터 디바이스 (110) 가 오브젝트 디바이스들 (180, 180A) 의 상대적 위치들을 인식하는 오브젝트 디바이스들 (180, 180A) 간의 제스처에 의해 또는 각각의 오브젝트 디바이스 (180, 180A) 로부터의 프로토콜 규격들을 이용함으로써, 마스터 디바이스 (110) 의 사용자 인터페이스를 통한 선택과 같은 사용자 상호작용에 응답하여 또는 자동으로 행해질 수도 있다. 오브젝트 디바이스들 (180, 180A) 간의 페어링 (186) 은 마스터 디바이스 (110) 의 부재시에 지속될 수도 있다.
다른 실시형태에 있어서, 도 11 에 도시된 플로우 차트에 도시된 바와 같이, 마스터 디바이스 (110) 는 패시브 오브젝트 (190), 즉, 페어링되거나 그렇지 않으면 인터페이싱될 수 없는 오브젝트를 이미징하고 (302), 오브젝트에 관련된 데이터를 취출 및 디스플레이할 수도 있다. 마스터 디바이스 (110) 는 패시브 오브젝트를 식별하고 (304), 식별된 오브젝트에 관련된 데이터를 취출하며 그 데이터를 마스터 디바이스 (110) 상에 디스플레이할 수도 있다 (306). 패시브 오브젝트 (190) 는 시계, 스테이플러, 차량과 같은 접속성없는 디바이스들; 이용되지 않는 접속성을 갖는 디바이스들, 예를 들어, 블루투스를 갖는 카메라; 연필, 바위 또는 테이블과 같은 오브젝트들; 잡지, 스크린 샷과 같은 인쇄 매체 또는 디지털 매체; 손목 또는 발과 같은 신체 부분들; 또는 컬러 또는 텍스처와 같은 다른 등록된 오브젝트를 포함하여, 마스터 디바이스 (110) 의 카메라 (112) 에 의해 등록될 수 있는 임의의 오브젝트일 수도 있다.
패시브 오브젝트 (190) 는 그 시각적 외양으로부터 식별될 수도 있다. 그 식별은 예를 들어 사용자에 의해 이전에 취해졌던 패시브 오브젝트의 특정 이미지들, 패시브 오브젝트의 텍스처화된 3차원 모델, 또는 시계의 특정 브랜드와는 대조적으로 시계의 일반적인 이미지와 같은 이미지들의 일반 카테고리에 기초될 수도 있다. 사용자는 부가 정보를 제공하여, 이미지를 "시계" 로서 표기하는 것과 같이 이미지를 정의하거나, 특정 오브젝트들 또는 오브젝트들의 카테고리에 대한 PIN 을 제공할 수도 있다. 사용자에 의해 제공된 부가 정보는, 예를 들어, 마스터 디바이스 (110) 의 트레이닝 동안에 한번 입력될 수도 있으며, 입력된 정보를 이용한 후속적인 식별은 자동적이다. 부가적으로, 패시브 오브젝트는 예를 들어, 카테고리, 하위 카테고리, 브랜드, 장르 또는 이들의 임의의 조합에 의해 식별 탐색을 좁히는데 사용되거나 이미징되는 시각적 마커를 포함할 수도 있다. 그 식별은 마스터 디바이스 (110) 에 의해 수행되거나 예를 들어 네트워크 (102; 도 1) 를 통해 원격으로 수행될 수도 있다. 패시브 오브젝트의 마스터 디바이스 (110) 상에 디스플레이된 이미지는, 예를 들어 패시브 오브젝트를 선명하게 하거나 패시브 오브젝트를 개략화함으로써 이미지에 대한 확대를 이용하여 패시브 오브젝트가 식별되었음을 나타낼 수도 있다. 원한다면, 사용자는 식별될 패시브 오브젝트 및 디스플레이될 데이터의 타입을 선택할 수도 있다. 데이터는 자동으로 디스플레이될 수도 있다. 식별될 패시브 오브젝트의 선택은 사용자에 의해 한번 수행될 수도 있으며, 패시브 오브젝트의 후속 이미징은 자동 식별을 유도한다. 패시브 오브젝트와 취출된 데이터 간의 관계는 사용자 정의되거나 외적으로 또는 자동으로 정의될 수도 있다. 또한, 데이터는 마스터 디바이스 (110) 상에 또는 원격 소스 상에 저장되고, 예를 들어, 네트워크 (102; 도 1) 상에서 마스터 디바이스 (110) 에 의해 취출될 수도 있다. 관련된 데이터는 캘린더 (calendar) 애플리케이션과 같이 론칭하는 애플리케이션의 형태일 수도 있다. 대안적으로, 애플리케이션은 패시브 오브젝트의 이미지에 기초하여 취출 또는 언록킹 (unlock) 될 수도 있다. 관련된 데이터는 명령들 또는 헬프 정보와 같이, 패시브 오브젝트에 관련된 정보일 수도 있다. 관련된 데이터는 패시브 오브젝트의 이미지에 기초하여 그 관련된 데이터로의 액세스를 제공하거나 그 관련된 데이터의 다운로드를 개시할 수도 있다. 예를 들어, 북 커버를 이미징하는 것은 오디오 북 또는 디지털 북을 자동으로 다운로드할 수도 있다. 관련된 데이터는 임의의 미디어 또는 미디어의 조합일 수도 있으며, 2차원 또는 3차원 이미지들, 애니메이션, 비디오, 사운드, 햅틱 피드백, 또는 다른 감각 데이터를 포함할 수도 있지만 이에 제한되지 않는다.
예로써, 도 12 에 도시된 바와 같이, 사용자는 사용자의 시계 (190) 의 이미지가 캘린더 애플리케이션을 자동으로 론칭하고 사용자의 캘린더를 마스터 디바이스 (110) 상에 디스플레이한다는 것을 마스터 디바이스 (110) 내에 정의할 수도 있다. 대안적으로, 사용자는 사용자의 웨딩 링의 이미지를 이용하여 사용자의 웨딩의 이미지들을 개방하는 것과 같이, 패시브 오브젝트와 취출된 데이터 간의 관계들을 개인화할 수도 있다. 마스터 디바이스 (110) 는, 패시브 오브젝트를 이미징하고 패시브 오브젝트에 관련될 원하는 데이터 및 디바이스명을 입력하는 것을 포함하는 프로세스를 통해 사용자의 시계, 링, 스테이플러, 차량 등과 같은 개인적 패시브 오브젝트를 식별하도록 트레이닝될 수도 있으며, 그 후, 원하는 데이터는 마스터 디바이스 (110) 에 의해 패시브 오브젝트와 상관된다.
부가적으로, 패시브 오브젝트 (190) 에 대해 취출되는 관련된 데이터는 외부적으로 또는 자동으로 정의될 수도 있다. 예를 들어, 도 13a 및 도 13b 는, 마스터 디바이스 (110) 가 비-페어링가능 DVR 과 같은 패시브 오브젝트 (190) 를 이미징하고 (도 13a) 동작 명령들과 같은 동작 명령들 (192) 의 형태인 관련된 데이터가 네트워크 (102) 로부터 취출되고 마스터 디바이스 (110) 에 의해 자동으로 디스플레이되는 (도 13b) 일 예를 도시한 것이다. 특정 DVR 이 식별되지만, 특정 DVR 에 대한 동작 명령들 또는 다른 정보를 네트워크 (102) 로부터 획득하기 위해 접속 또는 페어링은 불필요하다. 도 13b 에 도시된 바와 같이, 동작 명령들 (192) 은 이미지에 엄격히 정렬되게 디스플레이될 수도 있다.
도 14a 및 도 14b 는, 마스터 디바이스 (110) 가 영화에 대한 광고와 같은, 이 예에 있어서는 Dark Knight® 로고와 같은 패시브 오브젝트 (190) 를 이미징하고 (도 14a) Dark Knight® 에 대한 관련된 데이터 (192) 가 취출 및 디스플레이되는 일 예를 도시한 것이다. 예를 들어, 도 14b 에 도시된 바와 같이, Dark Knight® 영화는 마스터 디바이스 (110) 상에 자동으로 취출 및 디스플레이될 수도 있다. 대안적으로, Dark Knight® 영화가 상영되고 있는 위치들 및 시간들과 같은, 이미징된 오브젝트에 관련된 다른 정보가 디스플레이될 수도 있다. 원한다면, 패시브 오브젝트 (190) 의 이미지는 예를 들어 로고 자체인 시각적 외양에 기초할 수도 있거나, 또는 패시브 오브젝트의 식별을 돕기 위한 시각적 마커 (194) 에 부분적으로 또는 완전히 기초할 수도 있다.
다른 실시형태에 있어서, 마스터 디바이스 (110) 는 페어링가능 오브젝트 디바이스 (180) 와 인터페이싱하고, 페어링가능하거나 패시브일 수도 있는 다른 오브젝트 디바이스의 이미지로부터 획득된 데이터를 오브젝트 디바이스 (180) 에 제공할 수도 있다. 일 실시형태에 있어서, 데이터가 획득되는 2 이상의 오브젝트 디바이스 및/또는 2 이상의 타깃 오브젝트 디바이스 (180) 가 존재할 수도 있다. 예를 들어, 도 15a, 도 15b 및 도 15c 에 도시된 바와 같이, 마스터 디바이스 (110) 는 (Dark Knight® 광고와 같은) 패시브 오브젝트 (190) 를 이미징하고 (도 15a), 상술된 바와 같은 패시브 오브젝트의 이미지에 기초한 데이터를 식별 및 획득할 수도 있다. 사용자는 텔레비전과 같은 페어링 (116) 된 타깃 오브젝트 디바이스 (180) 로 전달될 데이터를 선택할 수도 있으며 (도 15b), 그 데이터 예를 들어 영화가 오브젝트 디바이스 (180) 에 자동으로 전달된다 (도 15c). 그 데이터는 마스터 디바이스 (110) 에 의해 취출되고 오브젝트 디바이스 (180) 에 전달될 수도 있거나, 대안적으로, 마스터 디바이스 (110) 는 오브젝트 디바이스 (180) 에 명령들을 제공하여 데이터 자체를 취출할 수도 있다.
따라서, 마스터 디바이스 (110) 는, 패시브이거나 페어링가능한 하나 이상의 오브젝트 디바이스들의 이미지에 기초하여 오브젝트 디바이스 (180) 에 커맨드들을 전달하는데 이용될 수도 있다. 예를 들어, 마스터 디바이스 (110) 는 특정 브랜드의 러닝화를 이미징한 후, mp3 플레이어를 이미징하고, 응답하여, 특정 플레이 리스트 예를 들어 운동 뮤직을 mp3 플레이어에 자동으로 다운로드할 수도 있다. 일 실시형태에 있어서, 마스터 디바이스 (110) 는 데이터 예를 들어 뮤직을 다운로드하고, 그 데이터를 오브젝트 디바이스에 전달하거나, 대안적으로, 오브젝트 디바이스가 데이터 자체를 취출하게 명령한다. 다중 선택에 있어서, 카메라는 짧은 시간주기 동안 오브젝트에 포인팅될 수도 있거나, 또는 사용자는, 예를 들어, 버튼을 누르거나 홀딩함으로써 또는 멀티 선택을 개시 또는 중지하도록 표시하기 위한 제스처를 이용함으로써 이미지와 상호작용할 수도 있다. 사용자는 이미지들에서 오브젝트 디바이스들을 선택할 수도 있거나, 오브젝트 디바이스들은 자동으로 선택될 수도 있거나, 또는 사용자는 오브젝트 디바이스들을 한번 선택할 수도 있으며, 후속 선택은 자동적이다. 멀티 선택에 응답하여 발생하는 액션은 사용자 정의되거나 외부적으로 정의될 수도 있다.
본 발명이 교육의 목적으로 특정 실시형태들과 관련하여 예시되었지만, 본 발명은 이에 한정되지 않는다. 다양한 적응예 및 변형예들이 본 발명의 범위로부터 일탈함없이 실시될 수도 있다. 따라서, 첨부된 청구항들의 사상 및 범위는 전술한 설명에 한정되지 않아야 한다.

Claims (38)

  1. 마스터 디바이스를 이용하여 제 1 오브젝트 디바이스의 이미지를 캡쳐링하는 단계;
    상기 제 1 오브젝트 디바이스의 상기 이미지를 이용하여 상기 제 1 오브젝트 디바이스를 식별하는 단계;
    상기 제 1 오브젝트 디바이스의 식별에 기초하여, 상기 마스터 디바이스를 통하여 상기 제 1 오브젝트 디바이스와 인터페이싱하는 단계;
    상기 마스터 디바이스를 통하여 제 2 오브젝트 디바이스와 인터페이싱하는 단계; 및
    상기 마스터 디바이스를 이용하여 상기 제 1 오브젝트 디바이스 및 상기 제 2 오브젝트 디바이스 간의 인터페이스를 개시하는 단계를 포함하는, 방법.
  2. 제 1 항에 있어서,
    상기 제 1 오브젝트 디바이스의 상기 이미지를 이용하여 상기 제 1 오브젝트 디바이스를 식별하는 단계는 상기 마스터 디바이스에 의해 수행되고,
    상기 방법은,
    상기 제 1 오브젝트 디바이스와 인터페이싱하는 단계 이전에, 상기 마스터 디바이스를 이용하여, 상기 제 1 오브젝트 디바이스의 식별에 기초하여 상기 제 1 오브젝트 디바이스가 인터페이싱될수 있는지 여부를 결정하는 단계를 더 포함하는, 방법.
  3. 제 1 항에 있어서,
    마스터 디바이스를 이용하여 제 2 오브젝트 디바이스의 이미지를 캡쳐링하고, 상기 제 2 오브젝트 디바이스의 상기 이미지를 상기 마스터 디바이스 상에 디스플레이하는 단계;
    상기 제 2 오브젝트 디바이스의 상기 이미지를 이용하여 상기 제 2 오브젝트 디바이스를 식별하는 단계를 더 포함하고,
    상기 마스터 디바이스를 통하여 상기 제 2 오브젝트 디바이스와 인터페이싱하는 단계는 상기 제 2 오브젝트 디바이스의 식별에 기초하는, 방법.
  4. 제 1 항에 있어서,
    상기 마스터 디바이스를 이용하여 상기 제 1 오브젝트 디바이스 및 상기 제 2 오브젝트 디바이스 간의 인터페이스를 개시하는 단계는 자동으로 수행되거나 사용자 상호작용에 응답하여 수행되는, 방법.
  5. 제 4 항에 있어서,
    상기 사용자 상호작용은 상기 마스터 디바이스의 사용자 인터페이스를 이용한 선택, 또는 상기 제 1 오브젝트 디바이스 및 상기 제 2 오브젝트 디바이스 간의 제스처인, 방법.
  6. 제 1 항에 있어서,
    상기 마스터 디바이스를 통하여 타깃 디바이스와 인터페이싱하는 단계로서, 상기 제 1 오브젝트 디바이스와 인터페이싱하는 단계는 상기 제 1 오브젝트 디바이스로부터 데이터를 취출하는 단계를 포함하는, 상기 타깃 디바이스와 인터페이싱하는 단계; 및
    상기 타깃 디바이스로 상기 데이터를 전달하는 단계를 더 포함하고,
    상기 타깃 디바이스로 상기 데이터를 전달하는 단계는 자동으로 수행되거나 사용자 상호작용에 응답하여 수행되는, 방법.
  7. 제 1 항에 있어서,
    상기 제 1 오브젝트 디바이스의 상기 이미지를 이용하여 상기 제 1 오브젝트 디바이스를 식별하는 단계는 상기 제 1 오브젝트 디바이스의 상기 이미지를 룩업 테이블 내의 데이터와 매칭하는 단계를 포함하는, 방법.
  8. 제 1 항에 있어서,
    상기 제 1 오브젝트 디바이스로부터 브로드캐스트 데이터를 수신하는 단계를 더 포함하고,
    상기 브로드캐스트 데이터는 상기 제 1 오브젝트 디바이스의 시각적 외양에 관한 정보를 포함하며,
    상기 제 1 오브젝트 디바이스의 상기 이미지를 이용하여 상기 제 1 오브젝트 디바이스를 식별하는 단계는 상기 제 1 오브젝트 디바이스의 상기 이미지를 상기 제 1 오브젝트 디바이스로부터의 상기 브로드캐스트 데이터와 매칭하는 단계를 포함하는, 방법.
  9. 제 8 항에 있어서,
    상기 제 1 오브젝트 디바이스의 시각적 외양에 관한 정보는 상기 제 1 오브젝트 디바이스의 이미지 및 텍스처화된 3차원 모델 중 적어도 하나를 포함하는, 방법.
  10. 제 1 항에 있어서,
    복수의 오브젝트 디바이스들로부터 브로드캐스트 데이터를 수신하는 단계를 더 포함하고,
    상기 브로드캐스트 데이터는 상기 오브젝트 디바이스들의 시각적 외양에 관한 정보를 포함하며,
    상기 제 1 오브젝트 디바이스의 상기 이미지를 이용하여 상기 제 1 오브젝트 디바이스를 식별하는 단계는,
    상기 제 1 오브젝트 디바이스의 상기 이미지를 이용하여 상기 브로드캐스트 데이터를 필터링하여 브로드캐스트 데이터의 서브세트를 생성하는 단계;
    상기 브로드캐스트 데이터의 서브세트를 디스플레이하는 단계; 및
    상기 브로드캐스트 데이터의 디스플레이된 서브세트로부터 사용자 선택에 의해 상기 제 1 오브젝트 디바이스를 식별하는 단계를 포함하는, 방법.
  11. 제 1 오브젝트 디바이스를 이미징하도록 동작가능한 카메라;
    무선 신호들을 상기 제 1 오브젝트 디바이스 및 제 2 오브젝트 디바이스로 송신하고 상기 제 1 오브젝트 디바이스 및 상기 제 2 오브젝트 디바이스로부터 수신할 수 있는 무선 트랜시버; 및
    상기 카메라 및 상기 무선 트랜시버에 접속된 프로세서로서,
    상기 카메라에 의해 제공된 상기 제 1 오브젝트 디바이스의 이미지를 이용하여 상기 제 1 오브젝트 디바이스를 식별하고,
    상기 제 1 오브젝트 디바이스의 식별에 기초하여, 상기 무선 트랜시버를 통하여 상기 제 1 오브젝트 디바이스와 인터페이싱하고,
    상기 무선 트랜시버를 통하여 상기 제 2 오브젝트 디바이스와 인터페이싱하고, 그리고
    상기 무선 트랜시버를 통하여 상기 제 1 오브젝트 디바이스 및 상기 제 2 오브젝트 디바이스 간의 인터페이스를 개시하도록 구성된, 상기 프로세서를 포함하는, 장치.
  12. 제 11 항에 있어서,
    상기 프로세서는 상기 제 1 오브젝트 디바이스와 인터페이싱하기 전에, 상기 제 1 오브젝트 디바이스의 식별에 기초하여 상기 제 1 오브젝트 디바이스가 인터페이싱될수 있는지 여부를 결정하도록 더 구성된, 장치.
  13. 제 11 항에 있어서,
    상기 프로세서는 상기 카메라에 의해 제공된 상기 제 2 오브젝트 디바이스의 이미지를 이용하여 상기 제 2 오브젝트 디바이스를 식별하고 상기 제 2 오브젝트 디바이스의 상기 이미지를 이용하여 상기 제 2 오브젝트 디바이스를 식별하도록 더 구성되고,
    상기 프로세서는 상기 제 2 오브젝트 디바이스의 식별에 기초하여 상기 제 2 오브젝트 디바이스와 인터페이싱하는, 장치.
  14. 제 11 항에 있어서,
    상기 프로세서는 자동으로 또는 사용자 상호작용에 응답하여 상기 제 1 오브젝트 디바이스 및 상기 제 2 오브젝트 디바이스 간의 인터페이스를 개시하도록 구성된, 장치.
  15. 제 14 항에 있어서,
    상기 장치는 사용자 인터페이스를 더 포함하고,
    상기 사용자 상호작용은 상기 사용자 인터페이스를 이용한 선택인, 장치.
  16. 제 14 항에 있어서,
    상기 장치는 하나 이상의 모션 센서들을 더 포함하고,
    상기 사용자 상호작용은 상기 하나 이상의 모션 센서들을 이용하여 검출된 상기 제 1 오브젝트 디바이스 및 상기 제 2 오브젝트 디바이스 간의 제스처인, 장치.
  17. 제 11 항에 있어서,
    상기 프로세서는 상기 무선 트랜시버를 통하여 타깃 디바이스와 인터페이싱하도록 더 구성되고,
    상기 프로세서는 상기 제 1 오브젝트 디바이스로부터 데이터를 취출하고 상기 무선 트랜시버를 통해 상기 타깃 디바이스로 상기 데이터를 전송하도록 더 구성된, 장치.
  18. 제 11 항에 있어서,
    상기 프로세서는 상기 제 1 오브젝트 디바이스의 상기 이미지를 룩업 테이블 내의 데이터와 매칭하도록 구성됨으로써, 상기 제 1 오브젝트 디바이스의 상기 이미지를 이용하여 상기 제 1 오브젝트 디바이스를 식별하도록 구성된, 장치.
  19. 제 11 항에 있어서,
    상기 무선 트랜시버는 상기 제 1 오브젝트 디바이스로부터 브로드캐스트 데이터를 수신하고 상기 브로드캐스트 데이터를 상기 프로세서로 제공하고,
    상기 브로드캐스트 데이터는 상기 제 1 오브젝트 디바이스의 시각적 외양에 관한 정보를 포함하며,
    상기 프로세서는 상기 제 1 오브젝트 디바이스의 상기 이미지를 상기 제 1 오브젝트 디바이스로부터 수신된 상기 브로드캐스트 데이터와 비교하도록 구성됨으로써, 상기 제 1 오브젝트 디바이스를 식별하도록 구성된, 장치.
  20. 제 19 항에 있어서,
    상기 제 1 오브젝트 디바이스의 시각적 외양에 관한 정보는 상기 제 1 오브젝트 디바이스의 이미지 및 텍스처화된 3차원 모델 중 적어도 하나를 포함하는, 장치.
  21. 제 11 항에 있어서,
    상기 프로세서에 접속된 디지털 디스플레이 및 상기 프로세서에 접속된 사용자 인터페이스를 더 포함하고,
    상기 무선 트랜시버는 복수의 오브젝트 디바이스들로부터 브로드캐스트 데이터를 수신하고 상기 브로드캐스트 데이터를 상기 프로세서에 제공하고,
    상기 브로드캐스트 데이터는 상기 오브젝트 디바이스들의 시각적 외양에 관한 정보를 포함하며,
    상기 프로세서는,
    상기 제 1 오브젝트 디바이스의 상기 이미지를 이용하여 상기 브로드캐스트 데이터를 필터링하여 브로드캐스트 데이터의 서브세트를 생성하도록 구성됨으로써 상기 제 1 오브젝트 디바이스를 식별하고,
    상기 브로드캐스트 데이터의 서브세트를 상기 디지털 디스플레이 상에 디스플레이하고, 그리고
    상기 사용자 인터페이스로부터의 입력에 기초하여, 상기 브로드캐스트 데이터의 서브세트로부터 상기 제 1 오브젝트 디바이스를 식별하도록 구성된, 장치.
  22. 제 1 오브젝트 디바이스의 이미지를 캡쳐링하는 수단;
    상기 제 1 오브젝트 디바이스의 상기 이미지를 이용하여 상기 제 1 오브젝트 디바이스를 식별하는 수단;
    상기 제 1 오브젝트 디바이스의 식별에 기초하여, 마스터 디바이스를 통하여 상기 제 1 오브젝트 디바이스와 인터페이싱하는 수단;
    상기 마스터 디바이스를 통하여 제 2 오브젝트 디바이스와 인터페이싱하는 수단; 및
    상기 마스터 디바이스를 이용하여 상기 제 1 오브젝트 디바이스 및 상기 제 2 오브젝트 디바이스 간의 인터페이스를 개시하는 수단을 포함하는, 장치.
  23. 제 22 항에 있어서,
    상기 마스터 디바이스를 이용하여, 상기 제 1 오브젝트 디바이스의 식별에 기초하여 상기 제 1 오브젝트 디바이스가 인터페이싱될수 있는지 여부를 결정하는 수단을 더 포함하는, 장치.
  24. 제 22 항에 있어서,
    상기 이미지를 캡쳐링하는 수단은 상기 제 2 오브젝트 디바이스의 이미지를 캡쳐링하고,
    상기 식별하는 수단은 상기 제 2 오브젝트 디바이스의 상기 이미지를 이용하여 상기 제 2 오브젝트 디바이스를 식별하며,
    상기 제 2 오브젝트 디바이스와 인터페이싱하는 것은 상기 제 2 오브젝트 디바이스의 식별에 기초하는, 장치.
  25. 제 22 항에 있어서,
    상기 제 1 오브젝트 디바이스 및 상기 제 2 오브젝트 디바이스 간의 인터페이스를 개시하는 수단은 자동으로 또는 사용자 상호작용에 응답하여 개시하는, 장치.
  26. 제 25 항에 있어서,
    사용자 인터페이싱을 위한 수단을 더 포함하고,
    상기 사용자 상호작용은 상기 사용자 인터페이싱을 위한 수단을 이용한 선택인, 장치.
  27. 제 25 항에 있어서,
    상기 장치는 모션을 센싱하는 수단을 더 포함하고,
    상기 사용자 상호작용은 상기 모션을 센싱하는 수단에 의해 검출된 상기 제 1 오브젝트 디바이스 및 상기 제 2 오브젝트 디바이스 간의 제스처인, 장치.
  28. 제 22 항에 있어서,
    상기 제 1 오브젝트 디바이스와 인터페이싱하는 수단은 상기 제 1 오브젝트 디바이스 및 상기 제 2 오브젝트 디바이스와 상이한 타깃 디바이스와 더 인터페이싱하고,
    상기 장치는 상기 제 1 오브젝트 디바이스로부터 데이터를 취출하는 수단을 더 포함하며,
    상기 인터페이싱하는 수단은 상기 취출된 데이터를 상기 타깃 디바이스로 전달하는, 장치.
  29. 제 22 항에 있어서,
    상기 제 1 오브젝트 디바이스의 상기 이미지를 이용하여 상기 제 1 오브젝트 디바이스를 식별하는 수단은 상기 제 1 오브젝트 디바이스의 상기 이미지를 룩업 테이블 내의 데이터와 매칭하는 수단을 포함하는, 장치.
  30. 제 22 항에 있어서,
    상기 제 1 오브젝트 디바이스로부터 브로드캐스트 데이터를 수신하는 수단을 더 포함하고,
    상기 브로드캐스트 데이터는 상기 제 1 오브젝트 디바이스의 시각적 외양에 관한 정보를 포함하며,
    상기 제 1 오브젝트 디바이스를 식별하는 수단은 상기 제 1 오브젝트 디바이스의 상기 이미지를 상기 제 1 오브젝트 디바이스로부터의 상기 브로드캐스트 데이터와 비교하는, 장치.
  31. 제 30 항에 있어서,
    상기 제 1 오브젝트 디바이스의 시각적 외양에 관한 정보는 상기 제 1 오브젝트 디바이스의 이미지 및 텍스처화된 3차원 모델 중 적어도 하나를 포함하는, 장치.
  32. 제 22 항에 있어서,
    복수의 오브젝트 디바이스들로부터 브로드캐스트 데이터를 수신하는 수단을 더 포함하고,
    상기 브로드캐스트 데이터는 상기 오브젝트 디바이스들의 시각적 외양에 관한 정보를 포함하며,
    상기 제 1 오브젝트 디바이스를 식별하는 수단은,
    상기 제 1 오브젝트 디바이스의 상기 이미지를 이용하여 상기 브로드캐스트 데이터를 필터링하여 브로드캐스트 데이터의 서브세트를 생성하는 수단;
    상기 브로드캐스트 데이터의 서브세트를 디스플레이하는 수단; 및
    상기 브로드캐스트 데이터의 디스플레이된 서브세트에 기초하여 상기 제 1 오브젝트 디바이스를 선택하는 수단을 포함하는, 장치.
  33. 저장된 프로그램 코드를 포함하는 비-일시적 컴퓨터 판독가능 저장 매체로서,
    제 1 오브젝트 디바이스의 캡쳐된 이미지를 이용하여 상기 제 1 오브젝트 디바이스를 식별하기 위한 프로그램 코드;
    상기 제 1 오브젝트 디바이스의 식별에 기초하여, 상기 제 1 오브젝트 디바이스와 인터페이싱하기 위한 프로그램 코드;
    제 2 오브젝트 디바이스와 인터페이싱하기 위한 프로그램 코드; 및
    마스터 디바이스를 이용하여 상기 제 1 오브젝트 디바이스 및 상기 제 2 오브젝트 디바이스 간의 인터페이스를 개시하기 위한 프로그램 코드를 포함하는, 비-일시적 컴퓨터 판독가능 저장 매체.
  34. 제 33 항에 있어서,
    제 2 오브젝트 디바이스의 캡쳐된 이미지를 이용하여 상기 제 2 오브젝트 디바이스를 식별하기 위한 프로그램 코드; 및
    상기 제 2 오브젝트 디바이스의 상기 이미지를 이용하여 상기 제 2 오브젝트 디바이스를 식별하기 위한 프로그램 코드를 더 포함하고,
    상기 제 2 오브젝트 디바이스와 인터페이싱하기 위한 프로그램 코드는 상기 제 2 오브젝트 디바이스의 식별을 이용하는, 비-일시적 컴퓨터 판독가능 저장 매체.
  35. 제 33 항에 있어서,
    상기 제 1 오브젝트 디바이스 및 상기 제 2 오브젝트 디바이스 간의 인터페이스를 개시하기 위한 프로그램 코드는 자동으로 또는 사용자 상호작용에 응답하여 상기 인터페이스를 개시하기 위한 프로그램 코드를 포함하는, 비-일시적 컴퓨터 판독가능 저장 매체.
  36. 제 33 항에 있어서,
    상기 제 1 오브젝트 디바이스의 상기 이미지를 이용하여 상기 제 1 오브젝트 디바이스를 식별하기 위한 프로그램 코드는 상기 제 1 오브젝트 디바이스의 상기 이미지를 룩업 테이블 내의 데이터와 매칭하기 위한 프로그램 코드를 포함하는, 비-일시적 컴퓨터 판독가능 저장 매체.
  37. 제 33 항에 있어서,
    상기 제 1 오브젝트 디바이스를 식별하기 위한 프로그램 코드는, 상기 제 1 오브젝트 디바이스의 상기 이미지를 상기 제 1 오브젝트 디바이스로부터 수신된 브로드캐스트 데이터와 비교하기 위한 프로그램 코드를 더 포함하고,
    상기 브로드캐스트 데이터는 상기 제 1 오브젝트 디바이스의 시각적 외양에 관한 정보를 포함하는, 비-일시적 컴퓨터 판독가능 저장 매체.
  38. 제 33 항에 있어서,
    상기 제 1 오브젝트 디바이스를 식별하기 위한 프로그램 코드는,
    복수의 오브젝트 디바이스들의 시각적 외양에 관한 정보를 포함하는 브로드캐스트 데이터를 필터링하기 위한 프로그램 코드;
    브로드캐스트 데이터의 서브세트를 생성하기 위한 프로그램 코드;
    상기 브로드캐스트 데이터의 서브세트를 디스플레이 상에서 디스플레이하기 위한 프로그램 코드; 및
    사용자 인터페이스로부터의 입력에 기초하여 상기 브로드캐스트 데이터의 서브세트로부터 상기 제 1 오브젝트 디바이스를 식별하기 위한 프로그램 코드를 포함하는, 비-일시적 컴퓨터 판독가능 저장 매체.

KR1020147016382A 2009-07-17 2010-07-16 마스터 디바이스와 오브젝트 디바이스 간의 자동 인터페이싱 KR101583245B1 (ko)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US22655209P 2009-07-17 2009-07-17
US22654509P 2009-07-17 2009-07-17
US61/226,545 2009-07-17
US61/226,552 2009-07-17
US12/786,886 US8818274B2 (en) 2009-07-17 2010-05-25 Automatic interfacing between a master device and object device
US12/786,886 2010-05-25
PCT/US2010/042318 WO2011009069A2 (en) 2009-07-17 2010-07-16 Automatic interfacing between a master device and object device

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020127004164A Division KR20120049272A (ko) 2009-07-17 2010-07-16 마스터 디바이스와 오브젝트 디바이스 간의 자동 인터페이싱

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020157037140A Division KR101755147B1 (ko) 2009-07-17 2010-07-16 마스터 디바이스와 오브젝트 디바이스 간의 자동 인터페이싱

Publications (2)

Publication Number Publication Date
KR20140090263A KR20140090263A (ko) 2014-07-16
KR101583245B1 true KR101583245B1 (ko) 2016-01-08

Family

ID=42990159

Family Applications (3)

Application Number Title Priority Date Filing Date
KR1020147016382A KR101583245B1 (ko) 2009-07-17 2010-07-16 마스터 디바이스와 오브젝트 디바이스 간의 자동 인터페이싱
KR1020127004164A KR20120049272A (ko) 2009-07-17 2010-07-16 마스터 디바이스와 오브젝트 디바이스 간의 자동 인터페이싱
KR1020157037140A KR101755147B1 (ko) 2009-07-17 2010-07-16 마스터 디바이스와 오브젝트 디바이스 간의 자동 인터페이싱

Family Applications After (2)

Application Number Title Priority Date Filing Date
KR1020127004164A KR20120049272A (ko) 2009-07-17 2010-07-16 마스터 디바이스와 오브젝트 디바이스 간의 자동 인터페이싱
KR1020157037140A KR101755147B1 (ko) 2009-07-17 2010-07-16 마스터 디바이스와 오브젝트 디바이스 간의 자동 인터페이싱

Country Status (9)

Country Link
US (3) US8818274B2 (ko)
EP (3) EP2597796A3 (ko)
JP (2) JP2012533802A (ko)
KR (3) KR101583245B1 (ko)
BR (1) BR112012001134A2 (ko)
ES (1) ES2793332T3 (ko)
HU (1) HUE048977T2 (ko)
TW (1) TWI423709B (ko)
WO (1) WO2011009069A2 (ko)

Families Citing this family (78)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7953983B2 (en) 2005-03-08 2011-05-31 Microsoft Corporation Image or pictographic based computer login systems and methods
KR20100015246A (ko) * 2008-08-04 2010-02-12 삼성전자주식회사 디스플레이부를 구비한 저장장치 및 정보 디스플레이 방법
US8458485B2 (en) 2009-06-17 2013-06-04 Microsoft Corporation Image-based unlock functionality on a computing device
US8818274B2 (en) 2009-07-17 2014-08-26 Qualcomm Incorporated Automatic interfacing between a master device and object device
US10104183B2 (en) * 2010-06-22 2018-10-16 Microsoft Technology Licensing, Llc Networked device authentication, pairing and resource sharing
US20120005632A1 (en) * 2010-06-30 2012-01-05 Broyles Iii Paul J Execute a command
EP2735142B1 (en) * 2010-10-20 2018-09-05 The Procter and Gamble Company Article utilization
US10778747B2 (en) * 2011-01-08 2020-09-15 N99 Llc Remote control authority and authentication
US9942304B2 (en) * 2011-01-08 2018-04-10 N99 Llc Remote control authority and authentication
AU2011202415B1 (en) 2011-05-24 2012-04-12 Microsoft Technology Licensing, Llc Picture gesture authentication
US20120309289A1 (en) * 2011-06-06 2012-12-06 Apple Inc. Techniques for facilitating interoperation between an accessory and multiple devices
US8989280B2 (en) * 2011-06-30 2015-03-24 Cable Television Laboratories, Inc. Frame identification
JP5772540B2 (ja) * 2011-11-23 2015-09-02 富士通株式会社 携帯型端末装置、エリア指定方法及びエリア指定プログラム
EP2602691A1 (en) * 2011-12-05 2013-06-12 Alcatel Lucent Method for gesture control, gesture server device and sensor input device
US10013857B2 (en) * 2011-12-21 2018-07-03 Qualcomm Incorporated Using haptic technologies to provide enhanced media experiences
TW201352001A (zh) * 2012-06-11 2013-12-16 Quanta Comp Inc 多媒體互動系統及方法
TWI526041B (zh) * 2012-07-17 2016-03-11 廣達電腦股份有限公司 互動系統及互動方法
CN103576848B (zh) * 2012-08-09 2016-07-13 腾讯科技（深圳）有限公司 手势操作方法和手势操作装置
US9373302B2 (en) 2012-08-10 2016-06-21 Blackberry Limited Stacked device position identification
US9204131B2 (en) * 2012-09-14 2015-12-01 Nokia Technologies Oy Remote control system
WO2014045860A1 (ja) * 2012-09-24 2014-03-27 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 情報機器、対向機器、通信システム、情報機器の制御方法及びプログラム
US10185416B2 (en) 2012-11-20 2019-01-22 Samsung Electronics Co., Ltd. User gesture input to wearable electronic device involving movement of device
US9030446B2 (en) 2012-11-20 2015-05-12 Samsung Electronics Co., Ltd. Placement of optical sensor on wearable electronic device
US8994827B2 (en) 2012-11-20 2015-03-31 Samsung Electronics Co., Ltd Wearable electronic device
US10423214B2 (en) 2012-11-20 2019-09-24 Samsung Electronics Company, Ltd Delegating processing from wearable electronic device
US11237719B2 (en) 2012-11-20 2022-02-01 Samsung Electronics Company, Ltd. Controlling remote electronic device with wearable electronic device
US11157436B2 (en) 2012-11-20 2021-10-26 Samsung Electronics Company, Ltd. Services associated with wearable electronic device
US11372536B2 (en) 2012-11-20 2022-06-28 Samsung Electronics Company, Ltd. Transition and interaction model for wearable electronic device
US9477313B2 (en) 2012-11-20 2016-10-25 Samsung Electronics Co., Ltd. User gesture input to wearable electronic device involving outward-facing sensor of device
US10551928B2 (en) 2012-11-20 2020-02-04 Samsung Electronics Company, Ltd. GUI transitions on wearable electronic device
CN103905092A (zh) * 2012-12-27 2014-07-02 鸿富锦精密工业(武汉)有限公司 具有蓝牙功能的装置及蓝牙连接方法
US20140355389A1 (en) * 2013-05-29 2014-12-04 Nokia Corporation Method and apparatus for establishing device communication
US9373208B2 (en) * 2013-09-11 2016-06-21 Sony Corporation Secure remote control for operating closures such as garage doors
US20160182930A1 (en) * 2013-09-13 2016-06-23 Isabella V. Ortiz Systems and methods for enabling simultaneous second screen data access during ongoing primary screen programming
US9245192B2 (en) * 2013-09-20 2016-01-26 Here Global B.V. Ad collateral detection
KR102245362B1 (ko) * 2014-01-24 2021-04-28 엘지전자 주식회사 서로 다른 통신 프로토콜을 사용하는 디바이스들 간 무선 네트워크 연결을 제어하기 위한 방법 및 이를 위한 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록 매체
US10204065B2 (en) 2014-02-07 2019-02-12 Ascensia Diabetes Care Holdings Ag Methods and apparatus for a multiple master bus protocol
TWI563853B (en) * 2014-02-27 2016-12-21 Beseye Cloud Security Co Ltd Surveillance system and the operation process thereof
US10691332B2 (en) 2014-02-28 2020-06-23 Samsung Electronics Company, Ltd. Text input on an interactive display
WO2015156812A1 (en) * 2014-04-10 2015-10-15 Hewlett-Packard Development Company, L.P. Connection classification
US9712948B2 (en) * 2014-04-30 2017-07-18 Avago Technologies General Ip (Singapore) Pte. Ltd. Image triggered pairing
US9679538B2 (en) * 2014-06-26 2017-06-13 Intel IP Corporation Eye display interface for a touch display device
KR102437104B1 (ko) * 2014-07-29 2022-08-29 삼성전자주식회사 모바일 디바이스에서 촬영된 전자 기기와 페어링하는 방법 및 장치
WO2016017945A1 (en) * 2014-07-29 2016-02-04 Samsung Electronics Co., Ltd. Mobile device and method of pairing the same with electronic device
US9392398B2 (en) * 2014-09-30 2016-07-12 Apple Inc. Wireless proximity pairing of user-interface devices
KR102197851B1 (ko) * 2014-10-20 2021-01-04 한국전자통신연구원 단말간 직접 통신에서 대상 발견 방법 및 장치
KR102332752B1 (ko) * 2014-11-24 2021-11-30 삼성전자주식회사 지도 서비스를 제공하는 전자 장치 및 방법
KR102302327B1 (ko) * 2014-12-08 2021-09-15 엘지전자 주식회사 단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법
WO2016115068A1 (en) * 2015-01-13 2016-07-21 Thomson Licensing Atsc 3.0 display discovery via a mobile secondary device
JP6473014B2 (ja) * 2015-02-27 2019-02-20 トッパン・フォームズ株式会社 情報提供システム及び情報提供装置
US10353949B2 (en) * 2015-09-02 2019-07-16 David Webster Optically initiated configuration and cryptographic test key transfer for testing interconnected electronic devices
TWI563407B (en) * 2015-09-11 2016-12-21 Noodoe Corp Methods and systems for registering detection of electronic devices, and related computer program products
CN105204742B (zh) * 2015-09-28 2019-07-09 小米科技有限责任公司 电子设备的控制方法、装置及终端
US10061552B2 (en) * 2015-11-25 2018-08-28 International Business Machines Corporation Identifying the positioning in a multiple display grid
US10334076B2 (en) * 2016-02-22 2019-06-25 Google Llc Device pairing in augmented/virtual reality environment
US11853635B2 (en) * 2016-03-09 2023-12-26 Samsung Electronics Co., Ltd. Configuration and operation of display devices including content curation
WO2017210908A1 (zh) 2016-06-08 2017-12-14 华为技术有限公司 处理方法与终端
US10672149B2 (en) 2016-06-22 2020-06-02 Huawei Technologies Co., Ltd. Head mounted display device and processing method of head mounted display device
KR101715142B1 (ko) * 2016-08-29 2017-03-14 주식회사 리얼야구존 모바일 기기를 이용하는 스크린 야구 경기 방법
US10560844B2 (en) * 2017-03-15 2020-02-11 International Business Machines Corporation Authentication of users for securing remote controlled devices
US20190034152A1 (en) * 2017-07-25 2019-01-31 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Automatic configuration of display settings based on a detected layout of multiple display devices
US10725629B2 (en) 2018-06-25 2020-07-28 Google Llc Identifying and controlling smart devices
US11350264B2 (en) * 2018-07-25 2022-05-31 Samsung Electronics Co., Ltd. Method and apparatus for establishing device connection
US11784845B2 (en) 2018-09-28 2023-10-10 Qualcomm Incorporated System and method for disambiguation of Internet-of-Things devices
KR102137194B1 (ko) * 2018-10-31 2020-07-24 엘지전자 주식회사 이동 단말기
US10812216B2 (en) 2018-11-05 2020-10-20 XCOM Labs, Inc. Cooperative multiple-input multiple-output downlink scheduling
US10659112B1 (en) 2018-11-05 2020-05-19 XCOM Labs, Inc. User equipment assisted multiple-input multiple-output downlink configuration
US10432272B1 (en) 2018-11-05 2019-10-01 XCOM Labs, Inc. Variable multiple-input multiple-output downlink user equipment
US10756860B2 (en) 2018-11-05 2020-08-25 XCOM Labs, Inc. Distributed multiple-input multiple-output downlink configuration
US10756795B2 (en) 2018-12-18 2020-08-25 XCOM Labs, Inc. User equipment with cellular link and peer-to-peer link
US11063645B2 (en) 2018-12-18 2021-07-13 XCOM Labs, Inc. Methods of wirelessly communicating with a group of devices
US11330649B2 (en) 2019-01-25 2022-05-10 XCOM Labs, Inc. Methods and systems of multi-link peer-to-peer communications
EP3690609B1 (en) * 2019-01-30 2021-09-22 DENTSPLY SIRONA Inc. Method and system for controlling dental machines
US10756767B1 (en) 2019-02-05 2020-08-25 XCOM Labs, Inc. User equipment for wirelessly communicating cellular signal with another user equipment
JP7534287B2 (ja) 2019-04-23 2024-08-14 フェリカネットワークス株式会社 通信装置、通信制御システム、および通信制御方法、並びにプログラム
EP4097641A4 (en) * 2020-04-02 2023-06-28 Samsung Electronics Co., Ltd. Electronic device and method for object identification utilizing paired electronic device
US11348320B2 (en) 2020-04-02 2022-05-31 Samsung Electronics Company, Ltd. Object identification utilizing paired electronic devices
TWI824729B (zh) * 2021-10-15 2023-12-01 仁寶電腦工業股份有限公司 主機裝置的授權方法、非暫態電腦可讀取儲存媒體及主機裝置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005251197A (ja) * 2004-03-03 2005-09-15 Honda Research Inst Europe Gmbh 環境から情報を収集するためのシステムおよび方法
JP2005268941A (ja) * 2004-03-16 2005-09-29 Sony Corp 遠隔制御装置、遠隔制御方法及びそのプログラム
JP2006081028A (ja) * 2004-09-10 2006-03-23 Kyocera Mita Corp 遠隔操作システム、通信装置及び電気機器

Family Cites Families (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6037936A (en) * 1993-09-10 2000-03-14 Criticom Corp. Computer vision system with a graphic user interface and remote camera control
JPH0984147A (ja) 1995-09-08 1997-03-28 Sony Corp リモートコントローラ、電子機器、及び電子機器システム
US6353450B1 (en) * 1999-02-16 2002-03-05 Intel Corporation Placing and monitoring transparent user interface elements in a live video stream as a method for user input
US6396475B1 (en) * 1999-08-27 2002-05-28 Geo Vector Corp. Apparatus and methods of the remote address of objects
JP3756741B2 (ja) * 2000-08-21 2006-03-15 株式会社東芝 情報交換装置およびキャッシュレジスタ装置
JP4868195B2 (ja) * 2000-10-24 2012-02-01 ソニー株式会社 電子機器および情報処理装置
US7016532B2 (en) 2000-11-06 2006-03-21 Evryx Technologies Image capture and identification system and process
US7031875B2 (en) * 2001-01-24 2006-04-18 Geo Vector Corporation Pointing systems for addressing objects
US6783071B2 (en) * 2001-06-18 2004-08-31 Symbol Technologies, Inc Scanner pairing in a bluetooth POS network
JP3761505B2 (ja) 2002-03-04 2006-03-29 株式会社東芝 通信システム、無線通信端末及び無線通信装置
KR100530233B1 (ko) * 2003-02-17 2005-11-22 삼성전자주식회사 애드호크 네트워크로 연결가능한 기기를 사용자에게알려주어 사용자의 선택에 의해 효율적인 연결 설정을가능하게 해주는 블루투스 무선통신 장치 및 통신방법
US7602420B2 (en) * 2004-08-06 2009-10-13 Canon Kabushiki Kaisha Image capture apparatus, method for controlling the same and computer program
JP4745737B2 (ja) * 2004-08-06 2011-08-10 キヤノン株式会社 撮像装置、通信システム、伝送方法、撮像装置の制御方法、及びコンピュータプログラム
JP2006109296A (ja) * 2004-10-08 2006-04-20 Canon Inc デジタルカメラ及びデジタルカメラの制御方法
US20060190812A1 (en) * 2005-02-22 2006-08-24 Geovector Corporation Imaging systems including hyperlink associations
US7519200B2 (en) * 2005-05-09 2009-04-14 Like.Com System and method for enabling the use of captured images through recognition
US8164640B2 (en) * 2005-06-30 2012-04-24 Nokia Corporation Camera control means to allow operating of a destined location of the information surface of a presentation and information system
US7761812B2 (en) * 2005-07-27 2010-07-20 Microsoft Corporation Media user interface gallery control
US20070047435A1 (en) * 2005-08-31 2007-03-01 Motorola, Inc. Advertising availability for ad-hoc networking based on stored device history
KR101170081B1 (ko) 2005-09-07 2012-08-01 삼성전자주식회사 움직임에 대응되는 리모콘 신호를 전송하는 리모트컨트롤러
JP4676303B2 (ja) * 2005-10-18 2011-04-27 株式会社日立製作所 端末装置
MX2008012020A (es) * 2006-03-20 2009-03-06 Absolute Software Corp Metodo para determinar la identificacion de un dispositivo electronico.
US20080125040A1 (en) * 2006-11-29 2008-05-29 Apple Computer, Inc. Location discovery using bluetooth
JP5064091B2 (ja) 2007-04-13 2012-10-31 株式会社Ｐｆｕ スキャナ装置、および、画像読取表示方法
US20080295012A1 (en) * 2007-05-23 2008-11-27 Microsoft Corporation Drag-and-drop abstraction
KR101375481B1 (ko) * 2007-07-06 2014-03-19 삼성전자주식회사 통신 시스템에서 통신 모드 결정 방법 및 장치
US8059573B2 (en) * 2007-07-30 2011-11-15 Qualcomm Incorporated Method of pairing devices
WO2009046574A1 (en) 2007-10-11 2009-04-16 Motorola, Inc. Method and system for contact management and organization
TWI421690B (zh) * 2007-11-21 2014-01-01 Ind Tech Res Inst 智慧型遠端介面裝置、系統及其使用方法
JP5136040B2 (ja) 2007-12-13 2013-02-06 日本電気株式会社 携帯端末及びそれを用いた通信方法並びにプログラム
KR101442544B1 (ko) * 2007-12-18 2014-09-23 엘지전자 주식회사 이동 단말기 및 그의 무선기기 표시 방법
US20090176451A1 (en) * 2008-01-04 2009-07-09 Microsoft Corporation Encoded color information facilitating device pairing for wireless communication
TWI346489B (en) * 2008-01-09 2011-08-01 Inventec Corp A nic and method of booting of the remote device
KR20110131247A (ko) * 2009-02-27 2011-12-06 파운데이션 프로덕션, 엘엘씨 헤드셋 기반 원격통신 플랫폼
US8818274B2 (en) 2009-07-17 2014-08-26 Qualcomm Incorporated Automatic interfacing between a master device and object device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005251197A (ja) * 2004-03-03 2005-09-15 Honda Research Inst Europe Gmbh 環境から情報を収集するためのシステムおよび方法
JP2005268941A (ja) * 2004-03-16 2005-09-29 Sony Corp 遠隔制御装置、遠隔制御方法及びそのプログラム
JP2006081028A (ja) * 2004-09-10 2006-03-23 Kyocera Mita Corp 遠隔操作システム、通信装置及び電気機器

Also Published As

Publication number Publication date
BR112012001134A2 (pt) 2016-02-23
EP2454834A2 (en) 2012-05-23
EP3678309A1 (en) 2020-07-08
KR20160006262A (ko) 2016-01-18
JP6026474B2 (ja) 2016-11-16
US20140327786A1 (en) 2014-11-06
KR101755147B1 (ko) 2017-07-19
KR20120049272A (ko) 2012-05-16
US8818274B2 (en) 2014-08-26
ES2793332T3 (es) 2020-11-13
CN102625981A (zh) 2012-08-01
US9667817B2 (en) 2017-05-30
US20110016405A1 (en) 2011-01-20
WO2011009069A2 (en) 2011-01-20
US8971811B2 (en) 2015-03-03
EP2454834B1 (en) 2020-03-25
WO2011009069A3 (en) 2011-04-28
HUE048977T2 (hu) 2020-08-28
EP2597796A1 (en) 2013-05-29
TW201110784A (en) 2011-03-16
EP2597796A3 (en) 2013-12-11
JP2015038740A (ja) 2015-02-26
US20150138376A1 (en) 2015-05-21
KR20140090263A (ko) 2014-07-16
JP2012533802A (ja) 2012-12-27
TWI423709B (zh) 2014-01-11

Similar Documents

Publication Publication Date Title
KR101583245B1 (ko) 마스터 디바이스와 오브젝트 디바이스 간의 자동 인터페이싱
KR101757870B1 (ko) 이동 단말기 및 그 제어방법
CN103944963B (zh) 数据同步方法、装置、设备及系统
CN104639972B (zh) 一种分享内容的方法、装置及设备
CN105389113B (zh) 基于手势的应用控制方法、装置及终端
CN106201734A (zh) 文件分享方法及装置
CN104202624A (zh) 传输图片的方法及装置
CN106503131A (zh) 获取兴趣信息的方法及装置
CN106792442A (zh) 数据迁移方法及装置
KR102501713B1 (ko) 영상 표시 방법 및 그 전자장치
KR20130001826A (ko) 이동 단말기 및 그 제어방법
CN105912202A (zh) 应用分享方法及装置
CN104615743B (zh) 图片显示方法及装置
US8953050B2 (en) Interaction with electronic device recognized in a scene captured by mobile device
CN104125268B (zh) 文件下载方法、装置、路由设备及终端设备
KR101738513B1 (ko) 동영상 미디어를 제공하기 위한 이동 단말기, 이를 포함한 시스템 및 그 제어 방법
CN107239490A (zh) 一种命名人脸图像的方法、装置及计算机可读存储介质
CN107169042A (zh) 一种共享图片的方法、装置及计算机可读存储介质
CN103929677B (zh) 多媒体文件播放的方法和装置
CN104778023B (zh) 数据传输方法及装置
CN107682623A (zh) 拍照方法及装置
KR101773010B1 (ko) 동영상 미디어를 제공하기 위한 이동 단말기, 이를 포함한 시스템 및 그 제어 방법
CN102625981B (zh) 用于在主设备和目标设备之间自动接口的方法和设备
CN105610686A (zh) 联系人分组方法及装置
JP2014010721A (ja) コマンド入力装置及びコマンド入力方法

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
A302 Request for accelerated examination
E701 Decision to grant or registration of patent right
A107 Divisional application of patent
FPAY Annual fee payment

Payment date: 20180928

Year of fee payment: 4