CN105323708B - 移动设备和将移动设备与电子设备配对的方法 - Google Patents

移动设备和将移动设备与电子设备配对的方法 Download PDF

Info

Publication number
CN105323708B
CN105323708B CN201510456032.7A CN201510456032A CN105323708B CN 105323708 B CN105323708 B CN 105323708B CN 201510456032 A CN201510456032 A CN 201510456032A CN 105323708 B CN105323708 B CN 105323708B
Authority
CN
China
Prior art keywords
electronic device
mobile device
user
information
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510456032.7A
Other languages
English (en)
Other versions
CN105323708A (zh
Inventor
高在佑
李宰荣
金铉中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020150034042A external-priority patent/KR102437104B1/ko
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority to CN201911127094.8A priority Critical patent/CN110850593B/zh
Publication of CN105323708A publication Critical patent/CN105323708A/zh
Application granted granted Critical
Publication of CN105323708B publication Critical patent/CN105323708B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W76/00Connection management
    • H04W76/10Connection setup
    • H04W76/14Direct-mode setup
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/08Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0876Network architectures or network communication protocols for network security for authentication of entities based on the identity of the terminal or configuration, e.g. MAC address, hardware or software configuration or device fingerprint
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72415User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories for remote control of appliances
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4108Peripherals receiving signals from specially adapted client devices characterised by an identification number or address, e.g. local network address
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42222Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44231Monitoring of peripheral device or external card, e.g. to detect processing problems in a handheld device or the failure of an external recording device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/06Authentication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/50Secure pairing of devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/60Context-dependent security
    • H04W12/69Identity-dependent
    • H04W12/71Hardware identity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/20Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel
    • H04W4/21Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel for social networking applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W84/00Network topologies
    • H04W84/18Self-organising networks, e.g. ad-hoc networks or sensor networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02Terminal devices
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0141Head-up displays characterised by optical features characterised by the informative content of the display
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B2027/0178Eyeglass type

Abstract

一种要与电子设备配对的眼镜,所述眼镜包括:存储器,存储关于多个电子设备中的每一个的标识信息和设备信息,设备信息表示用于将所述眼镜与所述多个电子设备配对的信息;图像获取单元,经由包括在眼镜中的相机来获取至少一个电子设备的图像;标识信息提取单元,提取关于被包括在所获取的图像中的电子设备的标识信息;配对目标选择单元,搜索所存储的标识信息并且选择对应于所提取的标识信息的电子设备;以及无线通信单元,基于所选择的电子设备的设备信息来与所选择的电子设备配对。

Description

移动设备和将移动设备与电子设备配对的方法
相关申请的交叉引用
本申请要求于2014年7月29日提交的韩国专利申请No.10-2014-0096764以及于2015年3月11日提交的韩国专利申请No.10-2015-0034042的权益,其全部公开内容通过引用合并于此。
技术领域
一个或多个实施例涉及用于与电子设备配对的方法和装置。
背景技术
随着技术的发展,电子设备被小型化并且具有各种形状,正在开发要被佩戴在身体上的可佩戴设备。例如,智能手表或智能眼镜正在被开发。智能手表通常是指具有比一般腕表更多改进的功能的嵌入式系统腕表。智能眼镜通常是指包括头戴式显示器(HMD)的可佩戴计算机。可佩戴设备可以被分类为独立设备和互锁设备。独立设备包括:输入/输出单元、处理单元、存储单元以及通信单元,并且可以单独使用。互锁设备指在与诸如智能电话的独立设备互锁之后可以被使用的设备。
发明内容
一个或多个示例性实施例包括与被包括在输入图像中的电子设备配对的方法。
其他方面将部分地在以下说明书中被阐述,并且部分地将从说明书中变得显而易见,或者可以通过实践所呈现的示例性实施例来学习。
根据一个或多个示例性实施例,一种要与电子设备配对的眼镜,所述眼镜包括:存储器,存储关于多个电子设备中的每一个的标识信息和设备信息,设备信息表示用于将所述眼镜与所述多个电子设备配对的信息;图像获取单元,经由被包括在眼镜中的相机来获取至少一个电子设备的图像;标识信息提取单元,提取关于被包括在所获取的图像中的电子设备的标识信息;配对目标选择单元,搜索所存储的标识信息并且选择对应于所提取的标识信息的电子设备;以及无线通信单元,基于所选择的电子设备的设备信息来与所选择的电子设备配对。
根据一个或多个示例性实施例,一种由眼镜执行的与电子设备配对的方法,该方法包括:存储关于多个电子设备中的每一个的标识信息和设备信息,设备信息表示用于将所述眼镜与所述多个电子设备配对的信息;经由被包括在眼镜中的相机来获取至少一个电子设备的图像;提取关于被包括在所获取的图像中的电子设备的标识信息;搜索所存储的标识信息并且选择对应于所提取的标识信息的电子设备;以及基于所选择的电子设备的设备信息来与所选择的电子设备配对。
附图说明
结合附图,这些和/或其他方面从下面对示例性实施例的描述中将变得清楚和明显,在附图中:
图1是用于描述根据实施例的移动设备与电子设备配对的方法的图;
图2是用于描述移动设备与遥控器配对并且控制遥控器的方法的图;
图3是用于描述根据实施例的移动设备控制电子设备的方法的流程图;
图4是用于描述根据实施例的移动设备直接控制TV的方法的图;
图5是用于描述根据实施例的移动设备控制电子设备的方法的流程图;
图6是示出根据实施例的移动设备的配置的图;
图7是示出根据实施例的移动设备的配置的图;
图8是用于根据实施例的智能眼镜获取电子设备的图像的方法的图;
图9是示出根据实施例的智能眼镜的配置的图;
图10是用于描述根据实施例的配对方法的图;
图11是用于描述根据实施例的配对方法的图;
图12是用于描述根据实施例的配对方法的图;
图13是用于描述根据实施例的配对方法的图;
图14A是用于描述根据实施例的移动设备通过广播分组与电子设备配对的方法的图;
图14B是用于描述根据实施例的电子设备通过广播分组与电子设备配对的方法的图;
图15是用于描述根据实施例的移动设备经由广播分组执行配对的方法的图;
图16是用于描述根据实施例的移动设备通过使用输入单元来控制电子设备的方法的图。
图17是用于描述根据实施例的移动设备通过使用应用控制电子设备的方法的图;
图18是用于描述根据实施例的移动设备通过提供在电子设备上显示的屏幕图像来控制电子设备的方法的图;
图19是用于描述根据实施例的移动设备控制音频系统的方法的图;
图20是用于描述根据实施例的移动设备控制空调的方法的图;
图21是用于描述根据实施例的移动设备控制膝上型PC的方法的图;
图22是用于描述根据实施例的移动设备控制冰箱的方法的图;
图23是用于描述根据实施例的移动设备控制可佩戴设备的方法的图;
图24是用于描述根据实施例的移动设备控制移动设备的方法的图;
图25示出了显示单元显示与在另一移动设备处显示的屏幕图像相同的屏幕图像的情况;
图26A和图26B是用于描述移动设备使用电子设备的图像来与电子设备配对的方法的图;
图27是用于描述移动设备经由文本与电子设备配对的方法的图;
图28是用于描述使根据实施例的移动设备登记电子设备的操作的图;
图29是用于描述使根据实施例的移动设备登记应用的操作的图;
图30是用于描述使根据实施例的移动设备登记应用的操作的图;
图31是用于说明使根据实施例的移动设备登记应用的操作的图;
图32是用于说明使根据实施例的移动设备登记控制功能的操作的图;
图33是用于描述使根据实施例的移动设备与电子设备配对的操作的图;
图34是用于描述使根据实施例的移动设备标识对象并且提供相关功能的操作的图;
图35是用于描述使根据实施例的移动设备向所识别的人进行电话呼叫的操作的图;
图36是用于描述使根据实施例的移动设备向所识别的人发送消息的操作的图;
图37是用于描述使根据实施例的移动设备执行对应于所识别的人的应用的操作的图;
图38是用于描述根据实施例的移动设备执行相对于所识别的对象所登记的功能的方法的图;
图39是用于描述根据实施例的移动设备控制传统设备的方法的图;
图40是用于描述根据实施例的眼镜控制电子设备的方法的图;
图41是用于描述根据实施例的无缝回放内容的方法的流程图;
图42是用于描述根据实施例的无缝回放内容的方法的流程图;
图43是用于说明根据实施例的电子设备的图;
图44是用于描述根据实施例的无缝回放方法的图;
图45是用于描述用于在存在多个用户时利用用户定制的书签信息的实施例的图;
图46是用于说明根据实施例的眼镜的图;
图47是用于描述根据实施例的无缝回放内容的方法的流程图;
图48是用于描述根据实施例的配对电子设备的方法的流程图;
图49是用于描述根据实施例的配对方法和无缝内容回放方法的图;
图50是用于描述智能电话与TV配对并且智能电话向TV传送内容的方法的流程图;
图51A和图51B是用于描述确定电子设备无缝地回放内容的方法的图;
图52A和图52B是用于描述确定电子设备无缝地回放内容的方法的图;
图53是用于描述智能电话与TV配对并且智能电话向TV传送内容的方法的流程图;
图54是用于描述使用书签的无缝回放方法的图;
图55是用于描述相对于多个用户的无缝回放方法的图;以及
图56是用于描述从附近电子设备接收内容并且回放该内容的电子设备的示例的图。
具体实施方式
因为本发明的原理允许各种改变和很多实施例,所以在所撰写的说明书中具体描述并且在附图中图示了具体实施例。然而,这并不意在将本发明的原理限制为具体实践模式,并且可以理解,不脱离本发明原理的精神和技术范围的所有的改变、等同物和替代物都被包括在本发明的原理中。在本发明的原理的描述中,在认为其可能不必要地混淆本发明的原理的本质时,省略相关技术的特定具体说明。
尽管可以使用诸如“第一”、“第二”等术语来描述各种组件,但是这样的组件不必限于上述术语。上述术语仅用于使一个组件与其他组件区分。
在本说明书中使用的术语仅仅用于描述具体实施例,并且不意在限制本发明原理。使用单数的表达包括复数的表达,除非其在上下文中具有明显不同的含义。在本说明书中,应当理解,诸如“包括”或“具有”等的术语意在指示存在在本说明书中公开的特征、数字、步骤、动作、组件、部件或其组合,并且不意在排除可以存在或者可以添加一个或多个其他特征、数字、步骤、动作、组件、部件或其组合的可能性。
现在将具体地参考示例性实施例,在附图中图示了其示例,其中相同的附图标记指相似的元件。在这方面,本示例性实施例可以具有不同的形式,而不应被解释为限于在此阐述的描述。因此,通过参考附图,如下描述示例性实施例仅仅用以解释本说明书的各方面。诸如“至少一个”的表达在引导一系列元件时修改整列系列的元件,并且不修改该列表中的单个元件。
图1是用于描述根据实施例的移动设备100与电子设备配对的方法的图。参考图1,用户可以将移动设备1000与附近的电子设备210至230配对。例如,移动设备1000可以是可以识别附近电子设备的设备,如智能眼镜110、智能相机120、可佩戴设备130、和智能电话140,并且可以无线地连接到附近的设备。
移动设备1000识别被包括在输入图像中的电子设备,并且与所识别的电子设备配对。电子设备的识别可以是确定输入图像是否包括电子设备的操作。此外,电子设备的识别可以是确定包括在输入图像中的电子设备的类型的操作。此外,电子设备的识别可以是确定包括在输入图像中的电子设备的名称的操作。
电子设备可以包括可以直接与移动设备1000进行通信的设备和无法直接与移动设备1000进行通信的传统设备。传统设备可以经由贴片(patch)与移动设备1000进行通信。使移动设备1000经由贴片控制传统设备的过程将在下面参考图39来具体描述。
配对是指用于经由有线或无线地将移动设备1000连接到电子设备的操作。此外,配对是指建立移动设备1000的设置以经由有线或无线地向和从电子设备传送和接收数据的操作。
移动设备1000存储用于标识多个电子设备的标识信息。标识信息可以是将相应的电子设备与其他电子设备区分的对电子设备唯一的信息。例如,标识信息包括关于电子设备的外观的信息,诸如电子设备的形状、特征点和图像。此外,标识信息可以包括指示电子设备的名称的文本,即,电子设备的类型或型号名称。此外,标识信息可以包括在人或机器读取电子设备的名称时获取的音频。
移动设备1000可以通过扫描预先布置的代码来识别多个电子设备。预先布置的代码可以是指示用于存储信息的技术的数据,诸如条形码、QR码或色码。条形码通过使用具有不同厚度的垂直线的组合来存储信息。QR码是信息被存储为正方形晶格状图案的二维码。色码是指示用于通过使用固定颜色的组合来存储信息的技术的数据。例如,色码可以通过使用包括红色,绿色和蓝色的颜色来被打印为矩阵状形状。代码可以被打印在电子设备的外部,并且可以包括如下信息,其包括电子设备的名称、类型或序列码。移动设备1000可以通过使用相机来扫描条形码、QR码或色码,并且基于从其读出的信息来识别打印有代码的电子设备。虽然以上例示了条形码、QR码和色码,但是可以使用各种代码中的任何一个来识别电子设备,只要该代码可以通过移动设备1000来扫描以从其读出信息。移动设备1000可以识别各个电子设备的不同特征,基于此来生成标识信息,并且将所生成的标识信息存储在存储器中。移动设备1000可以获取每个类型的电子设备的平均特征,并且将平均特征存储在存储器中。移动设备1000可以存储电子设备的名称、特征和形状以及电子设备的标识符号。
移动设备1000可以存储电子设备的外观的一部分作为特征点。例如,移动设备1000可以从电子设备的外观提取边缘,并且将所提取的边缘存储为关于电子设备的标识信息。例如,当移动设备1000提取相机的特征时,移动设备1000可以仅提取相机的边缘,并且将所提取的边缘存储为关于相机的标识信息,而不存储关于相机的整个外观的信息来作为标识信息。相机包括矩形主体和位于主体中的圆形透镜。移动设备1000提取主体和透镜的边缘,并且将边缘存储为关于相机的标识信息。
移动设备1000不仅可以存储边缘,也可以存储可以从电子设备的外观提取的各种其他特征,并且将该特征存储为关于电子设备的标识信息。此外,为了使移动设备1000分析电子设备的图像和所提取的特征,可以应用包括上述方法的各种技术。
移动设备1000识别被包括在输入图像中的电子设备,提取关于电子设备的标识信息,并且从存储在移动设备1000中的标识信息当中选择对应于所提取的标识信息的标识信息。选择对应于所提取的标识信息的标识信息可以指搜索以设置的百分比或更高的程度与所提取的标识信息相同的标识信息。所提取的标识信息是关于从当前输入图像获取的电子设备的信息,而要搜索的标识信息是关于预先存储在移动设备1000中的电子设备的信息。
移动设备1000通过使用关于所选择的电子设备的设备信息来与所选择的电子设备配对。设备信息指使移动设备1000和电子设备彼此配对所需要的信息。例如,设备信息可以是电子设备的MAC地址或IP地址。移动设备1000通过使用MAC地址或IP地址来与电子设备配对。此外,还可以从服务器(未示出)传送设备信息。
因为传统设备无法直接与移动设备1000配对,所以附连到传统设备的贴片可以与移动设备1000配对。
在配对之后,移动设备1000可以控制电子设备。例如,术语“配对”可以指示移动设备1000可以向电子设备传送数据的状态。控制电子设备可以意味着该电子设备根据从移动设备1000传送的数据进行操作。图1示出了移动设备1000与电子设备或传统设备配对的情况,其中,电子设备诸如遥控器210、音频系统220、和智能电话230,传统设备诸如附连到贴片235a的冰箱235。这里,冰箱235是传统设备。
移动设备1000可以通过使用移动设备1000的输入设备来控制配对的电子设备。例如,移动设备1000可以通过使用移动设备1000的输入设备来调整配对的电子设备的频道和音量。输入设备指能够接收用户的指令的设备。例如,输入设备可以是按钮、触摸面板、相机或鼠标。
用于控制配对的电子设备的屏幕图像可以在移动设备1000的显示单元1400处被显示。用于控制配对的电子设备的屏幕图像可以是显示被包括在电子设备中的功能的屏幕图像。或者,用于控制配对的电子设备的屏幕图像可以是用于将控制信号从移动设备1000传送到电子设备的屏幕图像。
移动设备1000可以根据所识别的电子设备的类型来显示各种类型的控制屏幕图像。电子设备的类型指用于执行不同功能的电子设备的各个组,例如移动设备、可佩戴设备、遥控器、家电等。在图1中,在移动设备1000的显示单元1400处显示用于调整频道或音量的屏幕图像。因此,可以在显示单元1400处显示用于改变频道的按钮和用于改变音量的按钮。移动设备1000接收用户输入,并且确定用户输入选择了哪个按钮。移动设备1000向电子设备传送对应于所选择的按钮的控制信号。例如,移动设备1000可以接收用户的输入,并且向遥控器210、音频系统220、或智能电话230输出用于调整频道或音量的控制信号。
音频系统220或智能电话230可以增加当前正在回放的歌曲的音量,或者根据从移动设备1000接收到的控制信号来改变要回放的歌曲。
基于用户设置的状态,移动设备1000可以或可以不识别包括在输入图像中的电子设备,并且与所识别的电子设备配对。可以在移动设备1000的显示单元1400处显示用于激活或去激活相应功能的用户界面(UI)元素。例如,可以在移动设备1000的显示单元1400处显示用于激活或去激活相应功能的按钮或复选框。用户可以通过触摸按钮或选择复选框来识别被包括在输入图像中的电子设备并且与所识别的电子设备配对。
基于电池中剩余的电力,移动设备1000可以或可以不识别被包括在输入图像中的电子设备,并且与所识别的电子设备配对。移动设备1000可以检查电池中剩余的电力,并且如果功率小于或等于预设值,则移动设备1000可以不执行相应的功能。例如,如果预设值是电池中剩余的电力的10%,则移动设备1000可以不识别被包括在输入图像中的电子设备。或者,移动设备1000可以不与所识别的电子设备配对。如果在电池中剩余多于10%的电力,则移动设备1000可以识别被包括在输入图像中的电子设备并且与所识别的电子设备配对。
图2是用于描述移动设备1000与遥控器210配对并且控制遥控器210的方法的图。遥控器210根据从移动设备1000接收到的控制信号来控制其他电子设备,诸如TV 240。
移动设备1000经由相机获取遥控器210的图像。图像的获取可以包括获取至少一个静止图像。移动设备1000与遥控器210配对。移动设备1000向遥控器210输出用于调整频道或音量的控制信号。遥控器210从移动设备1000接收控制信号,并且向TV 240输出控制信号。TV 240根据接收到的控制信号来进行操作。
图3是用于描述根据实施例的移动设备1000控制电子设备的流程图。参考图3,移动设备1000可以在与电子设备配对之后对其进行控制。
在操作310中,移动设备1000存储关于电子设备的标识信息和设备信息。标识信息包括用于标识电子设备的外观的信息,而设备信息包括用于建立在移动设备1000和电子设备之间的连接的信息。移动设备1000可以经由相机获取电子设备的图像,并且提取关于被包括在所获取的图像中的电子设备的标识信息。移动设备1000存储所提取的标识信息。移动设备1000可以从用户接收设备信息。移动设备1000可以通过接收诸如MAC地址和能力信息的关于电子设备的信息来存储设备信息。能力信息可以是关于可以由电子设备执行的功能的信息。例如,能力信息是指示电子设备是否是能够回放声音或者电子设备是否能够显示图像的信息。或者,移动设备1000可以经由有线或无线地从附近的电子设备接收设备信息,并且存储该设备信息。
在操作320中,移动设备1000经由相机获取电子设备的图像。移动设备1000的相机获取电子设备的图像。
在操作330中,移动设备1000提取关于被包括在所获取的图像中的电子设备的标识信息。移动设备1000通过分析图像来确定该图像是否包括电子设备,并且提取关于该电子设备的标识信息。
在操作340中,移动设备1000从存储在移动设备1000中的标识信息当中搜索对应于所提取的标识信息的标识信息。术语对应于所提取的标识信息的标识信息指以设置的百分比或更高的程度与所提取的标识信息相同的标识信息。
在操作350中,移动设备1000选择要配对的电子设备。移动设备1000搜索对应于所提取的标识信息的标识信息,并且选择对应于搜索到的标识信息的电子设备。
在操作360中,移动设备1000与选择的电子设备配对。
在操作370中,移动设备1000接收来自用户的输入。移动设备1000可以经由按钮、触摸面板或相机来接收来自用户的输入。
在操作380中,移动设备1000基于用户输入控制电子设备。移动设备1000向电子设备传送对应于用户输入的控制信号。
图4是用于描述根据实施例的移动设备1000直接控制TV 240的方法的图。移动设备1000可以经由遥控器210控制TV 240或直接控制TV 240。
移动设备1000经由相机获取包括遥控器210的图像。移动设备1000识别包括在图像中的遥控器210,并且控制由所识别的遥控器210控制的目标。移动设备1000可以基于关于遥控器210的标识信息来确定由遥控器210控制的目标。例如,因为遥控器210可以控制电子设备,诸如TV 240和音频系统220,所以移动设备1000基于关于遥控器210的标识信息来确定由遥控器210控制的电子设备,并且选择由遥控器210控制的目标。
图4中所示的实施例涉及由遥控器210控制的目标是TV 240的情况。移动设备1000可以通过识别遥控器210的形状以及包括在遥控器210中的按钮来选择由遥控器210控制的目标。或者,移动设备1000可以从遥控器210接收关于由遥控器210控制的目标的信息。移动设备1000可以从遥控器210接收关于TV 240的信息,并且与TV 240配对。
移动设备1000直接控制TV 240。如果移动设备1000能够输出用于控制TV 240的信号,则移动设备1000直接向TV 240传送控制信号。例如,移动设备1000可以向TV 240传送用于改变频道的信号或者用于改变音量的信号。
图5是用于描述根据实施例的移动设备控制电子设备的方法的流程图。参考图5,移动设备1000可以通过与B-电子设备配对来控制B-电子设备。
在操作510中,移动设备1000存储关于电子设备的标识信息和设备信息。
在操作520中,移动设备1000经由相机获取A-电子设备的图像。例如,移动设备1000的相机获取A-电子设备的图像。
在操作530中,移动设备1000提取关于被包括在图像中的A-电子设备的标识信息。移动设备1000分析该图像,确定A-电子设备是否被包括在该图像中,并且提取关于A-电子设备的标识信息。
在操作540中,移动设备1000从存储在存储器中的标识信息中搜索对应于所提取的标识信息的标识信息。
在操作550中,移动设备1000选择要配对的电子设备。移动设备1000选择由A-电子设备控制的B-电子设备作为要配对的电子设备。如果移动设备1000能够直接控制B-电子设备,则移动设备1000选择B-电子设备作为要配对的电子设备。如果移动设备1000无法直接控制B-电子设备,则移动设备1000通过使用A-电子设备来控制B-电子设备。
在操作560中,移动设备1000与B-电子设备配对。
在操作570中,移动设备1000接收来自用户的输入。例如,如果B-电子设备是TV240,则移动设备1000可以从用户接收用于改变频道或改变音量的输入。
在操作580中,移动设备1000基于来自用户的输入来控制B-电子设备。移动设备1000向B电子设备传送对应于来自用户的输入的控制信号。
图6是示出根据实施例的移动设备1000的配置的图。参考图6,移动设备1000包括处理器1100、相机1200、存储器1300、和显示单元1400。
处理器1100分析从照相机1200接收的图像,并且识别电子设备。处理器1100从相机1200接收图像,并且识别被包括在图像中的电子设备。处理器1100可以识别被包括在图像中的对象的形状,并且从所识别的对象中选择具有与电子设备的形状相同形状的对象。
处理器1100从存储在存储器1300中的标识信息当中搜索对应于从图像中提取的标识信息的标识信息。
处理器1100与所识别的电子设备配对。
处理器1100在显示单元1400处显示用于控制电子设备的界面。当移动设备1000连接到所识别的电子设备时,处理器1100在显示单元1400处显示用于接收来自用户的输入的界面。处理器1100向所识别的电子设备传送对应于用户的输入的控制信号。
处理器1100可以改变移动设备1000的输入单元的功能。例如,如果输入单元执行用于改变显示单元1400的亮度的功能,则处理器1100可以改变输入单元以执行用于改变电子设备的音量的功能。因此,即使经由输入单元从用户接收到相同的输入,处理器1100也可以执行不同的功能。
相机1200获取图像并且向处理器110输出图像。移动设备1000包括至少一个相机1200。相机1200可以被布置在移动设备1000的侧表面、前表面或后表面。
存储器1300存储关于多个电子设备的标识信息和设备信息,其中设备信息表示用于与各个电子设备配对的信息。
显示单元1400在处理器1100的控制下显示用于控制电子设备的屏幕图像。显示单元1400可以是用于接收来自用户的输入的触摸面板。
图7是示出根据实施例的移动设备1000的配置的图。参考图7,移动设备1000的处理器1100包括图像获取单元1110、标识信息提取单元1120、配对目标选择单元1130、和无线通信单元1140。
图像获取单元1110从移动设备1000的相机1200获取至少一个电子设备的图像。图像获取单元1110将所获取的图像输出到标识信息提取单元1120。
图像获取单元1110可以提取被包括在由相机1200获取的图像中的边缘,分析边缘的形状,并且识别电子设备。因为电设备的边缘的形状可能彼此不同,所以包括在图像中的电子设备可以通过将所提取的边缘的形状与所存储的边缘的形状作比较来识别。
如果在设置的时间段中经由相机1200输入固定图像,则图像获取单元1110可以识别被包括在输入图像中的电子设备,并且获取电子设备的图像。此外,如果输入由相机1200获取的图像,则图像获取单元1110可以识别被包括在图像中的电子设备,并且获取电子设备的图像。
标识信息提取单元1120提取关于被包括在图像中的电子设备的标识信息。标识信息提取单元1120可以分析该图像,并且识别具有电子设备的形状的对象。例如,标识信息提取单元1120可以提取指示对象的边界的信息来作为标识信息,或者可以提取指示多边形的信息和包括在对象中的文本作为标识信息。
配对目标选择单元1130从存储在存储器中的标识信息当中搜索对应于从图像中提取的标识信息的标识信息,并且选择对应于搜索到的标识信息的电子设备作为要配对的电子设备。
无线通信单元1140通过使用所存储的关于选择的电子设备的设备信息来与所选择的电子设备配对。
图8是用于描述根据实施例的智能眼镜110获取电子设备的图像的方法的图。参考图8,智能眼镜110搜索位于用户观看的方向上的电子设备。图8示出了遥控器210位于用户周围的情况。
眼睛跟踪相机113跟踪用户的眼睛,并且确定用户观看的方向。
前部相机112获取在眼睛跟踪相机113跟踪的方向上的图像。换言之,前部相机112从与用户相同的视点获取图像。图8示出了前部相机112获取遥控器210的图像的情况。
图9是示出根据实施例的智能眼镜110的配置的图。参考图9,智能眼镜110包括前置摄像头112,眼睛跟踪相机113、和处理器114。
处理器114登记关于电子设备的标识信息和设备信息。前部相机112可以获取电子设备的图像,并且处理器114可以分析所获取的图像,并且登记关于被包括在图像中的电子设备的标识信息。例如,处理器114从图像提取电子设备的特征,并且将所提取的特征登记为标识信息。处理器114可以从电子设备接收关于电子设备的设备信息,并且登记该设备信息。或者,处理器114可以存储关于基于所述电子设备的类型来与相应的电子设备进行通信的方法的信息。例如,处理器114可以登记关于由电子设备使用的频率或协议的信息来作为关于电子设备的设备信息。
如果处理器114确定了用户的眼睛在指定的时间段中没有移动,则处理器114分析从前部相机112接收到的图像。处理器114识别包括在图像中的电子设备。处理器114可以检测被包括在图像中的对象的边界,并且提取对象的特征。处理器114将所识别的对象与登记的电子设备作比较,并且确定是否存在与所登记的电子设备中的任何一项相同的识别的设备。
处理器114从眼睛跟踪相机113接收关于由用户观看的方向的信息,并且基于接收到的信息来调整前部相机112的方向。因此,前部相机112的方向与由用户观看的方向同步。当调整前部相机112的方向时,前部相机112向处理器114输出在调整的方向上获得的图像。
处理器114从所登记的电子设备当中确定是否存在与所识别的电子设备相同的电子设备。如果在所登记的电子设备当中存在于所识别的电子设备相同的电子设备,则处理器114与所识别的电子设备配对,并且基于来自用户的输入来控制电子设备。
智能眼镜110可以经由蓝牙或Wi-Fi与电子设备配对。当智能眼镜110与电子设备配对时,智能眼镜110控制电子设备。智能眼镜110可以从用户接收控制相关的输入,并且基于接收到的输入来向电子设备输出控制信号。
智能眼镜110执行应用。应用是在关于电子设备的标识信息或设备信息被登记时被一起登记的程序。应用是用于控制电子设备的程序或者执行与电子设备相同的功能的应用。当执行应用时,智能眼镜110可以向用户提供用于控制电子设备的屏幕图像。或者,智能眼镜110可以执行语音识别程序。
智能眼镜110接收用户的控制。换言之,智能眼镜110接收用户输入。智能眼镜110接收用户的语音或用户的手势。智能眼镜110基于接收到的语音或识别的手势来向电子设备输出用于控制该电子设备的控制信号。可以经由麦克风来接收语音,而可以经由前部相机112来接收手势。
图10是用于描述根据实施例的配对方法的图。参考图10,移动设备1000可以确定用户的意图,并且选择要配对的电子设备。例如,如果智能眼镜110确定了用户在指定的时间段中在同一方向上寻找,则智能眼镜110与位于用户观看的方向上的电子设备配对。此外,如果移动设备1000确定了相机1200被操作并且在指定的时间段中输入了相同的图像,则移动设备1000与被包括在输入图像中的电子设备配对。
移动设备1000可以询问用户是否控制所识别的电子设备。图10示出了遥控器210被包括在输入图像中的情况。移动设备1000可以在显示单元1400处显示遥控器210的图像,并且可以从用户接收关于是否与遥控器210配对的输入。如果从用户接收到用于与遥控器配对的输入,则移动设备1000与遥控器210配对。
图11是用于描述根据实施例的配对方法的图。参考图11,移动设备1000可以从被包括在所获取的图像中的电子设备当中选择要配对的电子设备。
如果在移动设备1000准备好配对时获取图像,则移动设备1000分析所获取的图像,并且确定电子设备是否被包括在所获取的图像中。如果以配对模式获取图像,则移动设备1000可以分析电子设备是否被包括在所获取的图像中。移动设备1000可以显示包括在显示单元1400中的电子设备。
图11是示出遥控器210和TV 240被包括在所获得的图像中的情况的图。移动设备1000在显示单元1400处显示遥控器210和TV 240。移动设备1000可以接收来自用户的输入以从遥控器210和电视240之间选择要配对的电子设备。例如,如果经由显示单元1400从用户接收用于与TV 240配对的输入,则移动设备1000与TV 240配对。
图12是用于描述根据实施例的配对方法的图。参考图12,移动设备1000可以基于用户的手势来选择要配对的电子设备。
如果在移动设备1000准备好配对时检测到用户的手势,则移动设备1000分析图像,并且确定电子设备是否被包括在该图像中。当移动设备1000处于配对模式时,在检测用于选择电子设备的用户的手势时,移动设备1000可以在检测到手势的区域中搜索电子设备。图12示出了用于选择TV 240的用户的手势。因此,移动设备与TV 240配对。
图13是用于描述根据实施例的配对方法的图。参考图13,移动设备1000可以从预先登记的电子设备当中选择要配对的电子设备。
移动设备1000在显示单元1400处显示预先登记的电子设备的列表。移动设备1000接收来自用户的输入,并且从所显示的电子设备当中选择要配对的电子设备。图13示出了用户选择TV 240的情况。因此,移动设备1000与TV 240配对。
图14A是用于描述根据实施例的移动设备1000通过广播分组来与电子设备配对的方法的图。参考图14A,移动设备1000可以通过广播用于连接的分组1410来与电子设备配对。
移动设备1000识别被包括在图像中的电子设备的类型。移动设备1000广播用于请求与所识别的类型的电子设备配对的分组1410。移动设备1000接收响应分组,并且与传送了响应分组的电子设备配对。
在图14A中,移动设备1000广播分组1410并且与TV 240配对。如果被包括在图像中的电子设备被确定为TV 240,则移动设备1000广播用于请求与TV 240配对的分组1410。分组1410可以包括用于仅请求TV 240传送响应分组的数据。用于仅请求TV 240传送响应分组的数据可以被包括在广告数据或在单独项中。
TV 240从移动设备1000接收分组1410,并且向移动设备1000传送响应分组。移动设备1000从TV 240接收响应分组,并且基于响应分组来与TV 240配对。
分组1410可以包括诸如前导、广告访问地址、广告报头、广告主地址和广告数据的项。分组1410可以被包括在广播的广告数据中,并且可以包括标识移动设备1000并且指示移动设备1000想要与TV配对的数据。移动设备1000可以传送分组1410,并且向TV 240通知要提供的服务。例如,移动设备1000可以向TV 240传送运动图像或歌曲。
此外,移动设备1000就可以向分组1410添加关于移动设备1000的位置的信息,并且广播该分组1410。
TV 240接收分组1410并且传送响应分组,该响应分组指示TV 240是可用于连接到移动设备1000的TV。TV 240可以对响应分组添加关于用于控制TV 240的必要应用的信息,并且向移动设备1000传送该响应分组。如果分组1410包括仅请求TV 240传送响应分组的数据,则仅电子设备当中的接收到分组1410的TV 240向移动设备1000传送响应分组。
TV 240可以经由例如波束形成方法来与包括在分组1410中的移动设备1000的位置进行通信。在该情况下,TV 240可以向移动设备1000的位置传送响应分组,并且由此可以降低功耗。
图14B是用于描述根据实施例的电子设备通过广播分组来与移动设备1000配对的方法的图。参考图14B,电子设备可以通过广播分组1410来与移动设备1000配对。换言之,如果TV 240广播分组1410,则移动设备1000可以通过使用包括在接收到的分组1410中的设备信息来与TV 240配对。
在图14B中,TV 240通过广播分组1410来与移动设备1000配对。由TV 240传送的分组1410包括关于TV 240的设备信息。换言之,由TV 240传送的分组包括指示TV 240是可用于配对的TV的数据以及用于配对的连接信息。
移动设备1000接收从TV 240广播的分组1410,并且通过向传送了分组1410的TV240传送响应分组来与TV 240配对。
移动设备1000基于从TV 240接收到的分组1410来确定可配对的TV240在附近,并且存储被包括在分组1410中的设备信息。移动设备1000预先存储关于TV 240的标识信息。移动设备1000提取被包括在所获取的图像中的电子设备的设备信息。移动设备1000将所提取的标识信息与存储的标识信息作比较,并且识别被包括在图像中的电子设备。如果包括在图像中的电子设备被实现为TV 240,则移动设备1000通过使用被包括在TV 240中的分组1410中所包括的设备信息向TV 240传送响应分组来尝试与TV 240配对。
图15是用于描述根据实施例的移动设备1000通过广播分组来与电子设备配对的方法的图。参考图15,在操作1510中,移动设备1000存储关于电子设备的标识信息。移动设备1000可以根据电子设备的类型来存储标识信息。
在操作1520中,移动设备1000经由相机1200获取电子设备的图像。
在操作1530中,移动设备1000识别电子设备的类型。
在操作1540中,移动设备1000广播用于与所识别的类型的电子设备配对的分组。该分组包括关于移动设备1000的信息以及关于要配对的电子设备的类型的信息。
在操作1550中,移动设备1000从电子设备接收响应分组。从移动设备1000接收到分组的电子设备读取关于在分组中指示的电子设备的类型的信息。仅仅当电子设备是在读取的信息中指示的电子设备时,从移动设备1000接收到分组的电子设备向移动设备1000传送响应分组备。响应分组包括关于电子设备的类型的信息、指示该电子设备是否可用于配对的信息、以及用于配对的设备信息。
在操作1560,移动设备1000与电子设备配对。移动设备1000可以通过使用被包括在响应分组中的设备信息来与传送了响应分组的电子设备配对。
图16是用于描述根据实施例的移动设备1000通过使用输入单元来控制电子设备的方法的图。参考图16,智能眼镜110可以通过使用输入单元来控制电子设备。
如果智能眼镜110不控制电子设备,则智能眼镜110的第一和第二输入单元115和116用作用于控制智能眼镜110的操作的输入单元。然而,智能眼镜110控制附近的电子设备,第一和第二输入单元115和116的功能被改变为用于控制附近的电子设备的功能。
智能眼镜110包括第一和第二输入单元115和116。第一和第二输入单元115和116的功能基于所识别的电子设备而改变。例如,如果智能眼镜110识别遥控器210并且控制遥控器210,则第一输入单元115执行用于改变音轨(track)的功能,而第二输入单元116执行用于改变音量的功能。如果智能眼镜110识别TV 240并且控制TV 240,则第一输入单元115执行用于改变频道的功能,而第二输入单元116执行用于改变音量的功能。
图17是用于描述根据实施例的移动设备1000通过使用应用来控制电子设备的方法的图。参考图17,智能电话140可以通过使用应用来控制遥控器210或TV 240。
智能电话140存储用于控制电子设备的应用或程序。智能电话140可以预先存储用于控制电子设备的应用或程序,或者获取用于下载应用或程序的信息,下载应用或程序,并且存储应用或程序。
智能电话140执行对应于所识别的电子设备的应用或程序,并且控制所识别的电子设备。例如,如果智能电话140识别遥控器210并且控制遥控器210,则智能电话140执行对应于遥控器210的应用或程序。此外,如果智能电话140识别TV 240并且控制TV 240,智能电话140执行对应于TV 240的应用或程序。
如果智能电话140执行应用或程序,则在智能电话140处显示用于控制电子设备的功能的屏幕图像。智能电话140可以接收来自用户的触摸输入,并且向电子设备传送用于改变频道的控制信号或者用于改变音量的控制信号。
图18是用于描述根据实施例的移动设备1000通过提供在电子设备处显示的屏幕图像来控制电子设备的方法的图。参考图18,智能电话140可以通过提供在可佩戴设备260处显示的屏幕图像来控制可佩戴设备260。虽然以下描述涉及智能电话140,但是能够显示与在可佩戴设备260处显示的屏幕图像相同的屏幕图像并且接收来自用户的输入的任何电子设备可以通过向用户提供在可佩戴设备260处显示的屏幕图像相同的屏幕图像来控制可佩戴设备260。
当智能电话140与佩戴设备260配对时,智能电话140可以提供与在可佩戴设备260处显示的屏幕图像相同的屏幕图像。智能电话140从可佩戴设备260接收屏幕图像并且显示接收到的屏幕图像。
智能电话140基于来自用户的输入来控制可佩戴设备260。智能电话140基于来自用户的输入的位置和接收到的屏幕图像来向可佩戴设备260传送控制信号。例如,智能电话140可以确定用户触摸的触摸面板上的位置,并且向可佩戴设备260传送控制信号。可佩戴设备260基于控制信号来执行操作,并且向智能电话140传送示出执行操作的结果的屏幕图像。智能电话140在显示单元处显示接收到的屏幕图像。
图19是用于描述根据实施例的移动设备1000控制音频系统200的方法的图。参考图19,移动设备1000与遥控器210配对,并且经由遥控器210控制音频系统220。
移动设备1000与遥控器210配对。移动设备1000识别遥控器210并且与遥控器210配对。
移动设备1000控制遥控器210。显示单元1400显示用于控制遥控器210的屏幕图像。图19示出了在显示单元1400处显示音轨和音量水平的情况。移动设备1000接收来自用户的输入,并且基于接收到的输入来向遥控器210传送控制信号。例如,移动设备1000可以从用户接收用于改变音轨的输入或者用于改变音量的输入。
遥控器210控制音频系统220。遥控器210基于从移动设备1000接收到的控制信号来控制音频系统220。
移动设备1000可以通过直接向音频系统220传送控制信号来控制音频系统220。
图20是用于描述根据实施例的移动设备1000控制空调270的方法的图。参考图20,移动设备1000与遥控器210配对,并且经由控制器210控制空调270。
移动设备1000与遥控器210配对。移动设备1000识别遥控器210并且与遥控器210配对。
移动设备1000控制遥控器210。移动设备1000接收来自用户的输入,并且基于接收到的输入来向遥控器210传送控制信号。例如,移动设备1000可以从用户接收用于改变风量的输入或者用于改变温度的输入。
移动设备1000控制空调270。显示单元1400显示用于控制空调270中的屏幕图像。图20示出了在显示单元1400处显示风量和温度的情况。遥控器210基于从移动设备1000接收到的控制信号来控制空调270。
移动设备1000可以通过直接向空调270传送控制信号来控制空调270。
图21用于描述根据实施例的移动设备1000控制膝上型PC 290的方法的图。参考图21,移动设备1000与鼠标280配对,并且通过使用鼠标280来控制膝上型PC 290。
移动设备1000与膝上型PC 290配对。移动设备1000识别鼠标280并且与鼠标280配对。
移动设备1000控制鼠标280。显示单元1400显示用于控制鼠标280的屏幕图像。图21示出了在显示单元1400上显示移动、点击和双击的情况。移动设备1000接收来自用户的输入,并且基于接收到的输入来向鼠标280传送控制信号。例如,移动设备1000可以从用户接收用于移动光标、点击或双击的命令。
鼠标280控制膝上型PC 290。鼠标280基于从移动设备1000接收到的控制信号来控制膝上型PC 290。
移动设备1000可以通过直接向膝上型PC 290传送控制信号来控制膝上型PC 290。
图22是用于描述根据实施例的移动设备1000控制冰箱295的方法的图。参考图22,移动设备1000与冰箱295配对,并且控制冰箱295。
移动设备1000与冰箱295配对。移动设备1000识别冰箱295并且与冰箱295配对。
移动设备1000控制冰箱295。显示单元1400显示用于控制冰箱295的屏幕图像。图22示出了在显示单元1400处显示温度和列表的情况。移动设备1000接收来自用户的输入,并且基于接收到的输入来向冰箱295传送控制信号。例如,移动设备1000可以从用户接收用于调整冰箱295的温度的命令。
移动设备1000可以从冰箱295接收关于冰箱295的信息并且在显示单元1400处显示该信息。例如,冰箱295可以向移动设备1000传送存储在冰箱295中的内容的列表。移动设备1000在显示单元1400处显示从冰箱295接收到的列表。用户可以参考该列表来调整冰箱295的温度。
图23是用于描述根据实施例的移动设备1000控制可佩戴设备260的方法的图。参考图23,移动设备1000与可佩戴设备260配对,并且控制可佩戴设备260。
移动设备1000与可佩戴设备260配对。移动设备1000识别可佩戴设备260并且与可佩戴设备260配对。
移动设备1000控制可佩戴设备260。显示单元1400显示用于控制可佩戴设备260的屏幕图像。图23示出了显示单元1400显示与在可佩戴设备260处显示的屏幕图像相同的屏幕图像的情况。移动设备1000接收来自用户的输入,并且向可佩戴设备260传送控制信号。
图24是用于描述根据实施例的移动设备1000控制移动设备260的方法的图。参考图24,移动设备1000与另一移动设备260配对,并且控制该另一移动设备260。
移动设备1000与另一移动设备260配对。移动设备1000识别另一移动设备260并且与另一移动设备260配对。
移动设备1000控制该另一移动设备260。显示单元1400显示用于控制另一移动设备260的屏幕图像。图25示出了显示单元1400显示与在另一移动设备260处显示的屏幕图像相同的屏幕图像的情况。移动设备1000接收来自用户的输入,并且向另一移动设备260传送控制信号。
图25是用于描述根据实施例的移动设备1000控制智能电话230的方法的图。参考图25,移动设备1000与智能电话230配对,并且控制智能电话230。
移动设备1000与智能电话230配对。移动设备1000识别智能电话230并且与智能电话230配对。
移动设备1000控制智能电话230。显示单元1400显示用于控制智能电话230的屏幕图像。图25示出了显示单元1400显示与在智能电话230处显示的屏幕图像相同的屏幕图像的情况。移动设备1000接收来自用户的输入,并且向智能电话230传送控制信号。
图26A是用于描述根据实施例的移动设备1000通过使用电子设备的图像来与电子设备配对的方法的图。参考图26A,移动设备1000可以获取电子设备的图像并且选择要配对的电子设备。
在图26A中,在书2600中示出了智能电话140和可佩戴设备130的图像。移动设备1000可以识别书2600中示出的智能电话230和可佩戴设备260,并且在显示单元1400处显示所识别的智能电话230和所识别的可佩戴设备260。
用户从智能电话或可佩戴设备260之前选择要配对的电子设备。
移动设备1000与由用户选择的电子设备配对。移动设备1000确定所选择的电子设备是否在附近,并且通过使用所存储的设备信息来与所选择的电子设备配对。
书中示出的附图或图像可以是在与拍摄所存储的设备信息(即,存储的附图或图像)的角度相比不同的角度绘制或拍摄的附图或图像。在该情况下,移动设备1000可能无法在存储的设备信息中找到书中示出的附图或图像,即使附图和设备信息指示相同的产品。为了解决问题,当移动设备1000存储设备信息时,移动设备1000可以存储以各种角度拍摄的图像或者以不同角度绘制的附图。换言之,所存储的设备信息可以包括关于相同产品的多个图像或多个附图。
图26B是示出存储在移动设备1000中的设备信息的示例的图。参考图26B,示出了智能电话的代表性图像和以各种角度拍摄的智能电话的图像。
如果移动设备1000识别电子设备,则移动设备1000可以将所获取的电子设备的图像与所存储的设备信息中的代表性图像作比较,并且如果所获取的电子设备的图像与所存储的设备信息中的代表性图像不同,则可以将所获取的电子设备的图像与以其他角度拍摄的图像作比较。
移动设备1000可以利用代表性图像和以各种角度拍摄的图像来不仅用于识别书中的附图,也可以识别实际电子设备。
图27是用于描述移动设备1000经由文本与电子设备配对的方法的图。参考图27,移动设备1000可以识别被包括在文本2700中的电子设备的名称,并且选择要配对的电子设备。
在图27中,文本2700包括电子设备的名称。移动设备1000可以识别被包括在文本2700中的名称。移动设备1000分析被包括在输入图像中的文本,并且确定文本2700是否包括电子设备的名称。
移动设备1000识别位于由用户观看的方向上的电子设备的名字。替代地,移动设备1000识别包括在所获取的图像中的电子设备的名称。移动设备1000在显示单元1400处显示对应于所识别的电子设备的名称的电子设备。如果识别了多个电子设备的名称,则可以由用户选择要配对的电子设备。
移动设备1000与所选择的电子设备配对。移动设备1000确定所选的电子设备是否在附近,并且通过使用设备信息来与所选择的电子设备配对。
移动设备1000可以识别经由麦克风接收的电子设备的名称,并且选择要配对的电子设备。如果用户讲出电子设备的名称,则移动设备1000识别经由麦克风由用户发音的电子设备的名称,并且选择要配对的电子设备。
图28是用于描述使根据实施例的移动设备1000登记电子设备的操作的图。参考图28,移动设备1000登记所识别的电子设备。
移动设备1000通过使用经由相机获取的图像来登记电子设备1200。例如,如果用户在指定时间段中看着相同方向,则移动设备1000选择位于用户观看的方向上的电子设备作为要登记的电子设备。或者,移动设备1000可以选择被包括在所获取的图像中的电子设备作为要登记的电子设备。
移动设备1000还可以显示询问是否登记所识别的电子设备的文本。图28示出了用于登记遥控器210的操作,其中,显示单元1400显示询问是否登记遥控器210的文本。
图29是用于描述使根据实施例的移动设备1000登记应用的操作的图。参考图29,移动设备1000登记用于控制所识别的电子设备的应用。应用包括用于控制电子设备的功能。
移动设备1000还可以显示询问是否登记所识别的电子设备的文本。图28示出用于登记“用于控制遥控器的应用”的操作,其中显示单元1400显示询问是否登记应用的文本。
图30是用于描述使根据实施例的移动设备1000登记应用的操作的图。参考图30,移动设备1000登记用于控制所识别的电子设备的多个应用。
移动设备1000可以向用于控制电子设备的不同的时隙指派不同的应用。例如,移动设备1000可以向早晨时隙指派“遥控器控制应用A”,以用于在上午控制遥控器210,并且向下午时隙指派“遥控器控制应用B”,以用于在下午控制遥控器210。
移动设备1000可以显示询问是否登记应用的文本。图30示出了用于登记“遥控器控制应用A”和“遥控器控制应用B”的操作,其中,显示单元1400显示询问是否登记应用的文本。
图31是用于描述使根据实施例的移动设备1000登记应用的操作的图。参考图31,移动设备1000登记用于控制所识别的电子设备的多个应用。
移动设备1000可以向用于控制电子设备的不同位置指派不同的应用。例如,移动设备1000可以向A-位置指派“遥控器控制应用A”,以用于控制A-位置处的遥控器210,并且向B-位置指派“遥控器控制应用B”,以用于控制B-位置处的遥控器210。
移动设备1000可以显示询问是否登记应用的文本。图31示出了用于登记“遥控器控制应用A”和“遥控器控制应用B”的操作,其中,显示单元1400显示询问是否登记应用的文本。
图32是用于描述使根据实施例的移动设备1000登记控制功能的操作的图。参考图32,移动设备1000登记对应于输入单元的控制功能。
移动设备1000登记用于控制电子设备的控制功能。如果可以通过使用输入单元来控制电子设备,则移动设备1000可以将输入单元映射成控制功能。因此,当移动设备1000控制电子设备时,移动设备1000将输入单元的默认功能改变为用于控制电子设备的映射的控制功能。
例如,移动设备1000的第一输入单元可以被映射成遥控器210的频道改变功能,而移动设备1000的第二输入单元可以被映射成遥控器210的音量改变功能。
图33是用于描述使根据实施例的移动设备1000与电子设备配对的操作的图。参考图33,移动设备1000可以与包括在经由相机1200获取的图像中的电子设备配对。
在操作3310中,移动设备1000存储关于多个电子设备的标识信息以及用于与各个电子设备配对的设备信息。移动设备1000存储关于可控制电子设备的标识信息和设备信息。移动设备1000可以获取电子设备的图像,并且从所获取的图像中提取电子设备的特征。移动设备1000可以存储所提取的电子设备的特征作为标识信息。
在另一示例中,移动设备1000可以存储相同类型的电子设备的特征。移动设备1000可以提取和存储遥控器210、TV 240或各种类型的TV 240的特征。移动设备1000可以经由网络接收包括电子设备的特征的数据并且将该数据存储在存储器中。
在操作3320中,移动设备1000经由相机1200获取至少一个电子设备的图像。移动设备1000可以通过使用相机1200来获取图像,并且获取包括在所获取的图像中的电子设备的图像。移动设备1000可以分析经由相机1200输入的图像,并且确定该图像是否包括电子设备。
在操作3330,移动设备1000提取关于被包括在所获取的图像中的电子设备的标识信息。在操作3340中,移动设备1000搜索存储的标识信息并且选择对应于所提取的标识信息的电子设备。如果在存储器中存在对应于所提取的标识信息的标识信息,移动设备1000选择对应于所提取的标识信息的电子设备作为要配对的电子设备。例如,如果所提取的标识信息对应于关于TV 240的标识信息,则移动设备1000选择TV 240作为要配对的电子设备。
在操作3350中,移动设备1000通过使用关于所选择的电子设备的存储的设备信息来与所选择的电子设备配对。
图34是用于描述使根据实施例的移动设备1000识别对象并且提供相关功能的操作的图。参考图34,移动设备1000可以识别人3410、笔3420和橡皮擦3430,并且提供与所识别的对象相关的功能。
移动设备1000可以分析输入图像并且识别包括在图像中的对象。该图像可以包括多个对象。移动设备1000可以提取多个对象的特征,并且基于所提取的特征来识别对象的类型。例如,移动设备1000可以确定对象是人3410、笔3420还是橡皮擦3430。
移动设备1000确定与所识别的对象相同的对象是否被登记。移动设备1000将所识别的对象的特征与预先存储的对象的特征作比较,并且搜索具有匹配所识别的对象的那些特征的对象。
移动设备1000提供关于所识别的对象设置的功能。移动设备1000可以预先设置相对于各个对象的功能。例如,当移动设备识别人3410时,移动设备1000可以设置电话呼叫功能或信使执行功能。
移动设备1000可以基于元件的类型来向元件指派功能。例如,移动设备1000可以向笔3420指派“笔记本”功能。移动设备1000可以向橡皮擦3430指派“擦除”功能。
当识别多个对象时,移动设备1000可以接收来自用户的用于选择功能的输入。移动设备1000可以显示所识别的对象,接收来自用户的输入,并且选择对象中的一个。
移动设备1000提供与所识别的对象相关的功能。例如,如果所识别的对象是特定的人3410,则移动设备1000可以对该人3410进行电话呼叫。或者,如果所识别的对象是笔3420,则移动设备1000可以执行“笔记本”功能。
图35是用于描述使根据实施例的移动设备1000对所识别的人进行电话呼叫的操作的图。参考图35,移动设备1000识别人3410,并且使用登记的电话号码来对所识别的人3410进行电话呼叫。
移动设备1000识别被包括在经由相机1200获取的图像中的人3410。移动设备1000确定所识别的人3410是否是登记的人。如果所识别的人3410是登记的人,则移动设备1000执行相对于登记的人所登记的功能。在图35中,相对于人3410登记的功能是“电话呼叫”功能。登记在移动设备1000中的相对于人3410的电话号码是010-777-7777。因此,移动设备1000使用电话号码010-777-7777来进行电话呼叫。
图36是用于描述使根据实施例的移动设备1000将消息发送到所识别的人的操作的图。参考图36,移动设备1000识别人3410,并且向所识别的人3410传送消息。
移动设备1000识别经由相机1200获取的图像中所包括的人3410。移动设备1000确定所识别的人3410是否是登记的人。如果所识别的人3410是登记的人,则移动设备1000执行相对于所登记的人登记的功能。在图35中,相对于人3410登记的功能是“信使执行”功能。移动设备1000相对于人3410执行信使,并且显示用于向该人3410发送消息的屏幕图像。替代地,移动设备1000可以显示用于向人3410发送消息的屏幕图像。
图37是用于描述使根据实施例的移动设备1000执行对应于所识别的人的应用的操作的图。参考图37,移动设备1000识别人3410,并且执行对应于所识别的人3410的应用3710和3720。
移动设备1000识别包括在经由相机1200获取的图像中的人3410。移动设备1000确定所识别的人3410是否是登记的人。如果所识别的人3410是登记的人,则移动设备1000执行相对于登记的人所登记的功能。在图35中,相对于人3410登记的功能是“应用执行”功能。移动设备1000执行相对于人3410登记的应用。如果相对于单个人3410登记了多个应用3710和3720,则移动设备1000显示第一和第二应用3710和3720,如图37中所示。
如果登记了多个应用3710和3720,则移动设备1000可以从用户接收用于选择要首先执行的应用的输入。移动设备1000可以显示登记的应用3710和3720,接收来自用户的输入,并且选择应用3710和3720中的一个。
图38是用于描述使根据实施例的移动设备1000执行相对于所识别的对象登记的功能的方法的图。参考图38,移动设备1000可以识别对象并且提供相对于所识别的对象登记的功能。
在操作3810中,移动设备1000可以分析输入图像,并且识别包括在图像中的对象。该图像可以包括多个对象。移动设备1000可以提取多个对象的特征,并且基于所提取的特征来识别对象的类型。
在操作3820中,移动设备1000确定与所识别的对象相同的对象是否被登记。移动设备1000将所识别的对象的特性与预先存储的对象的特征作比较,并且搜索具有匹配特征的对象。
在操作3830中,移动设备1000提供相对于所识别的对象设置的功能。移动设备1000可以预先设置相对于各个对象的功能。例如,移动设备1000可以相对于人3410设置“电话呼叫”功能或“信使执行”功能。
移动设备1000可以提供有关事物的功能。例如,移动设备1000可以相对于笔3420登记“笔记本”功能。移动设备1000可以相对于橡皮擦3430登记“擦除”功能。
当识别多个对象时,移动设备1000可以从用户接收用于选择要执行功能的对象的输入。移动设备1000可以显示所识别的对象,接收来自用户的输入,并且选择对象中的一个。
移动设备1000提供与所识别的对象相关的功能。例如,如果所识别的对象是特定的人3410,则移动设备1000可以对该人3410进行电话呼叫。或者,如果所识别的对象是笔3420,则移动设备1000可以执行“笔记本”功能。
图39是用于描述根据实施例的移动设备1000控制传统设备3901的方法的图。参考图39,移动设备1000可以与贴片3903配对,并且经由贴片3903控制传统设备3901。传统设备3901是不具有通信功能的旧式电子设备,并且无法直接连接到移动设备1000。例如,传统设备3901以是具有红外线(IR)通信功能的空调。
贴片3903是附连到传统设备3901的电子设备,并且可以用作通信中继设备。贴片3903可以经由第一类型的通信方法与移动设备1000进行通信,并且经由第二类型的通信方法与传统设备3901进行通信。例如,贴片3903可以经由Wi-Fi与移动设备1000进行通信,并且经由IR通信方法与传统设备3901进行通信。
如果贴片3903与移动设备1000配对,则移动设备1000的显示单元1400显示用于控制传统设备3901的屏幕图像。
用于控制传统设备3901的控制数据可以被存储在贴片3903中。控制数据可以从移动设备1000接收。使移动设备1000获取用于控制传统设备3901的控制数据的操作与使移动设备1000识别电子设备的操作相同。
如果所识别的电子设备被确定为传统设备3901,则移动设备1000可以向附连到传统设备3901的贴片3903传送用于控制传统设备3901的控制数据。移动设备1000可以显示用于控制传统设备3901的屏幕图像。
图39是示出显示单元1400显示传统设备3901的风量和温度的情况的图。用户可以通过使用在移动设备1000的显示单元处显示的虚拟按钮来控制传统设备3901。
例如,移动设备1000控制贴片3903。移动设备1000可以接收用于改变风量的用户输入或用于改变温度的用户输入,并且基于接收到的输入来向贴片3903传送控制数据。贴片3903控制空调。
图40是用于描述根据实施例的眼镜5000控制电子设备的方法的图。参考图40,眼镜5000可以控制TV 6000和智能电话7000以彼此配对。此外,智能电话7000可以无缝地播放用户经由TV 6000正在观看的相同内容。
眼镜5000控制TV 6000和智能电话7000以彼此配对。眼镜5000可以跟踪用户的眼睛,并且确定要彼此配对的电子设备。例如,如果眼镜5000检测到用户看TV 6000,并且然后在智能电话7000处,眼镜5000可以控制TV 6000和智能电话7000彼此配对。TV 6000和智能电话7000彼此配对的表达是指TV 6000和智能电话7000经由有线或无线地彼此连接,并且向和从彼此传送和接收数据。
眼镜5000可以跟踪用户的眼睛。眼镜5000可以跟踪用户的眼球或者检测瞳孔的改变。因此,眼镜5000可以检测到用户正在注视特定方向,并且确定位于该特定方向的电子设备作为要彼此配对的电子设备。
眼镜5000可以识别用户的虹膜。眼镜5000可以提取用户的虹膜的特征点,并且确定佩戴眼镜5000的用户的身份。此外,眼镜5000可以向TV 6000和智能电话7000传送关于所识别的虹膜的信息以进行用户认证。因此,仅登记到眼镜5000、TV 6000、和智能电话7000的用户可以被授权控制眼镜5000、TV 6000和智能电话7000。
如果从眼镜5000接收到的虹膜信息与存储在TV 6000中的虹膜信息相同,则TV6000可以向眼镜5000传送关于TV 6000的设备信息。眼镜5000可以使用接收到的设备信息来与TV 6000配对。
如果从眼镜5000接收到的虹膜信息与存储在智能电话中的虹膜信息相同,则智能电话7000可以向眼镜5000传送关于智能电话7000的设备信息。眼镜5000可以使用接收到的设备信息来与智能电话7000配对。
如果用户在观看TV 6000的同时注视智能电话7000,则眼镜5000可以控制智能电话7000无缝地回放正在TV 6000处回放的内容。眼镜5000可以向智能电话7000传送关于正在TV 6000处回放的内容的信息。智能电话7000可以从TV 6000接收内容并且回放该内容,或者如果智能电话7000存储与正在眼镜5000处回放的内容相同的内容,则智能电话7000可以回放所存储的内容。智能电话7000可以从TV 6000接收书签信息。书签信息是指示在TV6000上回放的内容的回放点的信息。当智能电话7000从TV 6000接收书签信息时,智能电话7000可以基于书签信息来确定内容的回放点。因此,智能电话7000可以无缝地回放在TV6000处正在回放的内容。
图41是用于描述根据实施例的无缝回放内容的方法的流程图。参考图41,智能电话7000可以无缝地回放在TV 6000处正在回放的内容。
在操作4101中,眼镜5000跟踪用户的眼睛,并且确定要配对的电子设备。眼镜5000可以跟踪用户观看的方向并且检测用户的瞳孔大小的改变。眼镜5000可以基于用户的眼睛或瞳孔的改变来确定用户观看的方向。眼镜5000可以确定位于由用户观看的方向上的电子设备作为要配对的电子设备。图41例示了眼镜5000将TV 6000确定为要配对的电子设备的情况。
在操作4102中,眼镜5000识别用户的虹膜。眼镜5000提取用户的虹膜的特征点。
在操作4103中,眼镜5000经由用户的虹膜执行用户认证。用户认证是用于确定佩戴眼镜5000的用户是否被适当授权以控制TV 6000的操作。眼镜5000向TV 6000传送所提取的虹膜的特征点,并且TV 6000通过将所存储的虹膜的特征点与接收到的虹膜的特征点作比较来执行用户认证。当用户认证完成时,眼镜5000和TV 6000可以向和从彼此传送和接收数据,或者眼镜5000可以控制TV 6000。
在操作4104中,TV 6000存储关于用户的使用信息。TV 6000可以存储关于由用户回放的内容的信息。关于内容的信息包括内容的名称、内容的回放点等。TV 6000可以存储关于每个用户的使用信息。因此,如果改变眼镜5000的用户,则TV 6000可以将关于改变的用户的使用信息存储在单独的存储器中。
在操作4105中,眼镜5000跟踪用户的眼睛,并且确定要配对的电子设备。眼镜5000可以跟踪用户观看的方向并且检测用户的瞳孔大小的改变。图41示出了眼镜5000面对的电子设备从TV 6000改变为智能电话7000的情况。因为眼镜5000的用户注视智能电话7000,眼镜5000确定智能电话7000作为要配对的电子设备。
在操作4106中,眼镜5000识别用户的虹膜。眼镜5000提取用户的虹膜的特征点。
在操作4107中,眼镜5000经由用户的虹膜执行用户认证。用户认证是用于确定佩戴眼镜5000的用户是否被适当授权以控制智能电话7000的操作。眼镜5000向智能电话7000传送所提取的特征点,并且智能电话7000通过将所存储的虹膜的特征点与接收到的虹膜的特征点作比较来执行用户认证。当用户认证完成时,眼镜5000和智能电话7000可以向和从彼此传送和接收数据,或者眼镜5000可以控制智能电话7000。
在操作4108中,眼镜5000向智能电话7000传送关于先前电子设备的信息。先前电子设备可以是最近与眼镜5000配对过的电子设备。关于先前电子设备的信息可以包括识别先前电子设备是什么的信息、用于与先前电子设备配对的信息或者关于由先前电子设备回放的内容的信息。在图41中,先前电子设备是TV 6000。因此,眼镜5000向智能电话7000传送关于TV6000的信息。
在操作4109中,智能电话7000与TV 6000配对。智能电话7000可以基于从眼镜5000接收到的关于TV 6000的信息来与TV 6000配对。智能电话7000请求TV 6000传送内容。
在操作4110中,TV 6000可以向智能电话7000传送正在回放的内容或者最近回放的内容。此外,TV 6000可以向智能电话7000传送指示内容的回放点的信息的书签信息以及内容。
在操作4111中,智能电话7000回放接收到的内容。智能电话7000可以基于书签信息来确定内容的回放点。智能电话7000基于回放点来回放内容。因此,智能电话7000可以无缝地回放在TV 6000处正在回放的内容。
图42是用于描述根据实施例的无缝地回放内容的方法的流程图。图42是用于描述如果智能电话7000存储内容时智能电话7000回放的方法的图。因为智能电话7000存储内容,所以没有必要使智能电话7000从TV 6000接收内容,并且智能电话7000可以基于关于内容的信息来回放内容。
关于图41的操作4101至4107的以上描述也可以应用于操作4201至4207。
在操作4208中,眼镜5000向智能电话7000传送关于用户的使用信息以及关于内容的信息。因为在TV 6000处回放的内容也被存储在智能电话7000中,所以没有必要使眼镜5000向智能电话7000传送正在TV 6000处回放的内容。因此,眼镜5000向智能电话7000传送包括什么内容正被回放以及内容的回放点的内容信息。
在操作4209中,智能电话7000回放存储的内容。智能电话7000基于内容的回放点来回放内容。因此,智能电话7000可以无缝地回放TV 6000处正回放的内容。
图43是用于描述根据实施例的电子设备的图。参考图43,电子设备8000包括通信单元8100、存储器8200、显示单元8300和处理器8400。
通信单元8100从眼镜5000接收关于佩戴眼镜5000的用户的虹膜信息,并且从眼镜5000接收关于由用户使用的先前电子设备的设备信息。例如,虹膜信息可以是关于从用户的虹膜提取的特征点的信息。
通信单元8100从先前电子设备接收内容以及关于内容的书签信息。该内容可以是诸如音乐文件的媒体文件、视频文件、文本文件、图像文件等。
存储器8200存储关于至少一个用户的虹膜信息。
处理器8400通过将接收到的虹膜信息与存储的虹膜信息作比较来识别佩戴眼镜5000的用户,并且通过使用关于先前电子设备的设备信息来与先前电子设备配对。接收到的虹膜信息是指关于佩戴眼镜5000的用户的虹膜的信息,并且所存储的虹膜信息是指存储在电子设备8000的存储器8200中的用户的虹膜信息。处理器8400确定在接收到的虹膜信息和存储的虹膜信息之间的相似性,并且如果该相似性等于或高于设置的临界值,则可以确定接收到的虹膜信息与所存储的虹膜信息相同。仅当接收到的虹膜信息与存储的虹膜信息相同时,处理器8400可以与眼镜5000或另一电子设备配对。
处理器8400基于书签信息来确定内容的回放点,并且控制显示单元8300从回放点回放内容。书签信息指示内容的回放点。处理器8400区分与不同用户相关联的书签信息,并且通过使用关于认证的用户的书签信息来确定内容的回放点。
处理器8400基于书签信息来确定存储在存储器8200中的内容的回放点,并且控制显示单元8300回放该内容。
根据处理器8400的控制,显示单元8300回放在先前电子设备处正在回放的内容。
图44是用于描述根据实施例的无缝回放方法的图。参考图44,TV 6000和智能电话7000可以无缝地回放内容。
眼镜5000可以跟踪用户的眼睛并且确定该用户正在注视的电子设备,并且基于用户的眼睛移动,眼镜5000再次确定用户正在注视的电子设备。例如,如果在用户经由第一电子设备观看内容的同时,用户注视第二电子设备,则第二电子设备无缝地回放在第一电子设备处正在回放的内容。
图44是用于描述在用户A经由TV 6000观看视频的同时用户A注视智能电话7000时,智能电话7000无缝地回放在TV 6000处正回放的视频的方法的图。TV 6000回放视频,并且存储关于用户A的书签A。在视频正在被回放时,书签A被更新。如果用户A注视智能电话7000,则眼镜5000跟踪用户A的眼睛,并且确定用户A所注视的电子设备。眼镜5000控制智能电话7000无缝地回放在TV 6000处正在回放的视频。智能电话7000从眼镜5000和TV 6000接收关于视频的信息。智能电话7000基于接收到的信息从对应于书签A的点回放视频。书签A是从TV 6000或眼镜5000接收的。因此,智能电话7000可以从相应于书签A的点回放视频,并且因此,用户A可以经由智能电话7000无缝地观看在TV 6000上正在回放的视频。
图45是用于描述如果存在多个用户时利用用户定制的书签信息的实施例的图。参考图45,如果用户B佩戴眼镜5000,则TV 6000存储和更新关于用户B的书签B。如果智能电话7000无缝地回放视频,则智能电话7000向TV 6000请求关于用户B书签和视频。TV 6000向智能电话7000传送书签B。智能电话7000基于接收到的书签B回放视频。因此,智能电话7000可以无缝地回放用户B正在观看的视频。
图46是用于描述根据实施例的眼镜5000的图。参考图46,眼镜5000包括眼睛跟踪相机5100、存储器5200、和处理器5300。
眼睛跟踪相机5100获取佩戴眼镜5000的用户的眼睛的图像。眼睛跟踪相机5100向处理器5300传送所获取的图像。
存储器5200存储关于至少一个设备的设备信息。
处理器5300经由所获取的图像跟踪用户的眼睛,并且提取虹膜的特征点。处理器5300可以分析所获取的图像并且检测用户的瞳孔的改变。此外,处理器5300可以分析所获取的图像并且提取虹膜的特征点。
处理器5300基于用户的眼睛来确定要配对的第一电子设备和第二电子设备。第一电子设备是在眼镜5000的控制下正回放内容的电子设备,而第二电子设备是用于无缝地回放正在第一电子设备处回放的内容的电子设备。换言之,第一电子设备和第二电子设备是佩戴眼镜5000的用户依次注视的电子设备。
处理器5300通过使用佩戴眼镜5000的用户的虹膜的特征点来执行与第一和第二电子设备的用户认证。处理器5300执行虹膜认证以确定佩戴眼镜5000的用户被授权以控制第一和第二电子设备。处理器5300可以通过向第一和第二电子设备传送虹膜的特征点来执行虹膜认证。
处理器5300控制第一和第二电子设备以彼此配对。处理器5300控制第一和第二电子设备,使得第二电子设备无缝地回放由第一电子设备正在回放的内容。处理器5300可以向第一电子设备传送关于第二电子设备的设备信息。此外,处理器5300可以向第二电子设备传送关于第一电子设备的设备信息。
图47是用于描述根据实施例的无缝回放内容的方法的流程图。
在操作4710中,电子设备8000接收关于佩戴眼镜5000的用户的虹膜信息并且识别用户。电子设备8000确定是否授权用户控制眼镜5000,并且向眼镜5000传送虹膜认证的结果。
在操作4720中,电子设备8000从眼镜5000接收关于由用户使用的先前电子设备的设备信息。如果用户认证成功,则电子设备8000可以向眼镜5000请求关于先前由用户控制器的先前电子设备的信息。
在操作4730中,电子设备8000通过使用关于先前电子设备的设备信息来与先前电子设备配对。电子设备8000基于关于先前电子设备的设备信息来尝试对先前电子设备的连接。
在操作4740中,电子设备8000回放在先前电子设备处正在回放的内容。电子设备8000可以从先前电子设备接收内容,并且回放接收到的内容。替代地,如果电子设备8000中存储与在先前电子设备处正在回放的内容相同的内容,电子设备8000可以回放所存储的内容。
图48是用于描述根据实施例的配对电子设备的方法的流程图。
在操作4810中,眼镜5000跟踪佩戴眼镜5000的用户的眼睛,并且确定要配对的第一电子设备。
在操作4820中,眼镜5000通过使用用户的虹膜的特征点来执行与第一电子设备的用户认证。如果用户认证成功,则眼镜5000控制第一电子设备。例如,眼镜5000可以控制第一电子设备来回放运动图像或音乐。
在操作4830中,眼镜5000跟踪用户的眼睛的改变,并且确定要配对的第二电子设备。第二电子设备是不同于第一电子设备的电子设备,并且可以连接到与第一电子设备相同的网络。
在操作4840中,眼镜5000通过使用用户的虹膜的特征点来执行与第二电子设备的用户认证。如果用户认证成功,则眼镜5000控制第二电子设备。
在操作4850中,眼镜5000控制第一电子设备和第二电子设备,使得第一电子设备和第二电子设备彼此配对。眼镜5000可以向第二电子设备传送关于第一电子设备的设备信息。第二电子设备可以通过使用关于第一电子设备的设备信息来尝试与第一电子设备配对。
图49是用于描述根据实施例的配对方法和无缝内容回放方法的图。参考图49,智能电话7000可以通过识别用户的虹膜并且跟踪用户的眼睛来与TV 6000配对,其中智能电话7000可以向TV 6000传送内容。此外,TV 6000可以通过识别用户的虹膜并且跟踪用户的眼睛来与智能电话7000配对,其中,TV 6000可以无缝地回放在智能电话7000处正在回放的内容。智能电话7000可以通过识别用户的虹膜来识别用户。智能电话7000可以包括诸如相机的虹膜识别单元,并且经由相机来识别用户的虹膜。智能电话7000可以通过分析通过相机获取的图像来提取用户的虹膜的图像。智能电话7000可以通过将所提取的虹膜图像与存储的虹膜图像作比较来识别用户。智能电话7000可以存储多个用户的虹膜的图像。
智能电话7000可以跟踪用户的眼睛。智能电话7000可以基于通过相机获取的图像的改变来跟踪用户的眼睛。智能电话7000可以通过跟踪用户的眼睛来确定用户观看的方向,并且确定位于由用户观看的方向上的电子设备来作为要配对的电子设备。例如,如果用户注视TV 6000,则智能电话7000可以确定TV 6000来作为要配对的电子设备。
TV 6000可以通过识别用户的虹膜来识别用户。TV 6000可以包括诸如相机的虹膜识别单元,并且经由相机来识别用户的虹膜。TV 6000可以通过分析由相机获取的图像来提取用户的虹膜的图像。TV 6000可以通过将所提取的虹膜图像与存储的虹膜图像作比较来识别用户。TV 6000可以存储多个用户的虹膜的图像。
TV 6000可以跟踪用户的眼睛。TV 6000可以基于由相机获取的图像来跟踪用户的眼睛。TV 6000可以通过跟踪用户的眼睛来确定用户是否正在注视TV 6000,并且如果用户正在注视TV 6000,则TV 6000可以执行虹膜认证。
此外,TV 6000可以确定用户先前使用的电子设备。TV 6000向附近的电子设备传送关于所识别的用户的信息,并且可以从附近的电子设备当中的认证了所识别的用户的电子设备接收用于配对的数据。
TV 6000可以通过使用从附近的电子设备接收到的数据来与附近的电子设备配对。例如,TV 6000可以从附近的电子设备接收MAC地址和设备ID,并且与附近的电子设备配对。例如,如果用户注视TV 6000,则TV 6000可以向附近的电子设备广播用户信息或连接信息。TV 6000可以从智能电话7000接收设备信息,并且基于接收到的设备信息来与智能电话7000配对。
图50是用于描述智能电话7000与TV 6000配对并且智能电话7000向TV 6000传送内容的方法的流程图。参考图50,智能电话7000可以跟踪用户的眼睛,并且将内容传送到TV6000。
在操作5010中,智能电话7000执行用户的虹膜的识别和关于用户的用户认证。智能电话7000可以经由相机识别用户的虹膜,并且通过使用所识别的虹膜来执行用户认证。
在操作5020中,智能电话7000回放内容。智能电话7000可以基于来自用户的输入来回放电影、戏剧或音乐。
在操作5030中,智能电话7000跟踪用户的眼睛并且确定要配对的电子设备。智能电话7000可以经由相机跟踪用户的眼睛。基于跟踪用户的眼睛的结果,智能电话7000可以确定用户注视的电子设备作为要配对的电子设备。例如,智能电话7000可以确定TV 6000作为要配对的电子设备。
在操作5040中,智能电话7000与TV 6000配对。智能电话7000可以向TV 6000广播连接信息和虹膜信息。TV 6000还可以识别用户的虹膜,并且确定相应的用户是否与通过智能电话7000认证的用户相同。
在操作5050中,智能电话7000向TV 6000传送内容。如果TV 6000存储相同的内容,则智能电话7000可以向TV 6000传送关于内容的信息。智能电话7000可以向TV 6000传送关于正在回放的内容的信息,并且从TV6000接收指示相应的内容是否被存储在TV 6000中的信息。智能电话7000可以向TV 6000额外地传送书签信息。
在操作5060中,TV 6000回放从智能电话7000接收到的内容。TV 6000可以基于接收到的书签信息来确定内容的回放点。
因此,用户可以经由智能电话7000和TV 6000无缝地观看内容。
图51A和图51B是用于描述确定电子设备无缝地回放内容的方法的图。参考图51A和图51B,智能电话7000可以跟踪用户的眼睛,并且向TV 6000传送内容以无缝地回放该内容。
在步骤1,在用户经由智能电话7000观看内容的同时,用户注视TV6000。
在步骤2,智能电话7000显示内容流送(streaming)按钮。因为用户注视TV 6000,所以智能电话7000在内容流送按钮7100处显示对应于TV 6000的图标。如果在用户观看的方向上存在多个电子设备,则智能电话7000显示分别指示多个电子设备的内容流送按钮。智能电话7000可以通过直接跟踪用户的眼睛来确定要在流送按钮7100处显示的电子设备,或者根据来自检测到用户的眼睛的电子设备的请求来在流送按钮7100处显示检测到用户的眼睛的电子设备。
在步骤3,智能电话7000接收来自用户的输入。用户可以通过触摸在智能电话7000处显示的按钮来选择要将内容流送到的电子设备。
在步骤4,智能电话7000将内容流送到所选择的电子设备。例如,智能电话7000可以将内容流送到TV 6000。
图52A和图52B是用于描述确定要无缝地回放内容的电子设备的方法的图。
在步骤1,智能电话7000检测按钮7200上的用户的长按。用户可以长按在智能电话7000的触摸屏上显示的按钮7200,以共享内容。
在步骤2,智能电话7000在用户按压按钮7200的同时跟踪用户的眼睛。在用户按压按钮7200的同时,用户注视要将内容流送到的电子设备。例如,在用户按压智能电话7000的按钮7200的同时,用户注视TV 6000。或者,如果用户保持按压按钮7200,智能电话7000确定附近的电子设备是否检测到用户的眼睛。换言之,如果附近的电子设备检测用户的眼睛,则附近的电子设备可以向智能电话7000传送检测的结果。
在步骤3,如果TV 6000被确定为要将内容流送到的电子设备,则智能电话7000在触摸屏上显示TV 6000,并且生成振动,从而向用户通知确定要将内容流送到的电子设备。智能电话7000可以不仅经由振动而且经由声音或图像来向用户提供反馈。
在步骤4,当用户完成触摸按钮7200时,智能电话7000将内容流送到TV 6000。TV6000回放流送的内容。
图53是用于描述智能电话7000与TV 6000配对并且智能电话7000向TV 6000传送内容的方法的流程图。参考图53,TV 6000可以检测用户的眼睛,并且从智能电话7000接收内容。
在操作5310中,智能电话7000执行用户的虹膜的识别和关于用户的用户认证。智能电话7000可以经由相机识别用户的虹膜,并且通过使用所识别的虹膜来执行用户认证。
在操作5320中,智能电话7000回放内容。智能电话7000可以基于来自用户的输入来回放电影、戏剧或音乐。
在操作5330,TV 6000执行用户的虹膜的识别和关于用户的用户认证。TV 6000可以经由相机识别用户的虹膜,并且通过使用所识别的虹膜来执行用户认证。
在操作5340中,TV 6000可以向附近的电子设备广播关于所识别的虹膜的信息。TV6000搜索先前由用户使用的电子设备。
在操作5350中,智能电话7000将从TV 6000接收到虹膜信息与经由相机获取的虹膜信息作比较。换言之,智能电话7000确定由智能电话7000获取的虹膜信息是否与由TV6000获取的虹膜信息相同。
在操作5360中,智能电话7000向TV 6000传送比较的结果。如果通过智能电话7000和TV 6000识别相同用户的虹膜,则智能电话7000可以向TV 6000传送用于配对的设备信息。
在操作5370中,TV 6000确定要配对的电子设备。TV 6000确定由用户使用的电子设备作为要配对的电子设备。因为用户经由智能电话7000观看内容,所以TV 6000确定智能电话7000作为要配对的电子设备。
在操作5380中,TV 6000和智能电话7000彼此配对。
在操作5390中,智能电话7000将内容流送到TV 6000。如果智能电话7000不必流送内容,则智能电话7000可以向TV 6000传送仅关于内容的信息。
在操作5395中,TV 6000回放流送的内容。或者,TV 6000可以回放所存储的内容,或者可以回放戏剧或音乐。
图54是用于描述使用书签的无缝回放方法的图。
参考图54,TV 6000和智能电话7000可以通过使用关于用户的书签信息来无缝地回放内容。即使用户不佩戴眼镜,TV 6000和智能电话7000可以识别用户的虹膜或眼睛,并且无缝地回放内容。
TV 6000识别用户的虹膜,并且识别观看TV 6000的用户。例如,用户A可以正观看TV 6000。TV 6000生成并且存储关于用户A的书签A。书签A指示关于用户A的内容的回放点。
TV 6000跟踪用户A的眼睛,并且确定用户A是否持续观看内容。如果确定了用户A不再观看内容,则TV 6000存储关于用户A的书签A,并且停止内容的回放。TV 6000生成书签A,书签A指示确定了用户A中止观看内容的回放点。例如,如果没有检测到用户A的眼睛,则TV 6000可以确定用户A不再观看内容。
如果确定了用户A再次观看TV 6000,则TV 6000基于书签A回放内容。书签A包括关于用户A正在观看的内容的信息以及指示用户A中止观看内容的回放点的信息。
智能电话7000可以识别用户A的虹膜和眼睛,并且无缝地回放正在TV6000处回放的内容。智能电话7000跟踪用户A的眼睛,并且确定用户A是否希望观看智能电话7000。智能电话7000识别用户A的虹膜并且识别用户A。
智能电话7000与TV 6000配对。智能电话7000可以从TV 6000接收内容并且回放该内容,回放存储在智能电话7000中的内容,或者从服务器接收内容并回放该内容。
智能电话7000额外从TV 6000接收书签信息。智能电话7000从TV 6000接收关于用户A的书签A,并且确定内容的回放点。智能电话7000可以基于所确定的回放点来回放内容。
图55是用于描述相对于多个用户的无缝回放方法的图。
TV 6000可以跟踪多个用户的眼睛,并且生成关于多个用户的相应书签信息。TV6000连续跟踪观看TV 6000的用户A和用户B的眼睛。如果确定;用户A不再观看内容,则TV6000TV生成书签A,书签A包括确定了用户A不再观看内容的回放点。TV 6000存储关于用户A的书签A,并且因为用户B连续观看该内容,则连续回放该内容。如果确定了用户B不再观看内容,则TV 6000生成书签B,书签B包括确定了用户B不再观看内容的回放点。如果确定了用户A和用户B都不再观看内容,则TV 6000可以停止内容的回放。
当再次检测到用户A的眼睛时,TV 6000基于书签A回放内容。或者,当再次检测到用户B的眼睛时,TV 6000基于书签B回放内容。
即使用户A或用户B经由除了TV 6000的电子设备观看内容,电子设备也可以从TV6000接收书签A或书签B,并且无缝地回放内容。
图56是用于描述从附近的电子设备接收内容并且回放内容的电子设备9000的示例的图。参考图56,电子设备9000包括通信单元9100、存储器9200、显示单元9300、相机9400和处理器9500。
通信单元9100可以从附近的电子设备接收关于用户的虹膜信息或设备信息。
通信单元9100从附近的电子设备接收内容和关于该内容的书签信息。该内容可以是诸如音乐文件的媒体文件、视频文件、文本文件、图像文件等。
存储器9200存储关于至少一个用户的虹膜信息。此外,存储器9200还可以存储内容。
显示单元9300在处理器9500的控制下显示内容。显示单元9300可以显示要配对的电子设备或内容流送按钮。
处理器9500获取用户的眼睛的图像。相机9400向处理器9500传送所获取的图像。
处理器9500跟踪用户的眼睛,并且经由通过相机9400获取的图像来提取虹膜的特征点。相机9400基于关于用户的虹膜信息来执行用户认证。
处理器9500确定要配对的电子设备。处理器9500可以通过跟踪用户的眼睛来确定要配对的电子设备。此外,当检测到用户的眼睛时,处理器9500可以向附近的电子设备广播虹膜认证的结果,并且确定要配对的电子设备。
处理器9500可以经由通信单元9100向附近的电子设备传送正在回放的内容。处理器9500向用户正在注视的电子设备传送内容。
处理器9500可以回放从附近的电子设备接收到的内容。处理器9500可以基于接收到的关于内容的信息和接收到的书签信息来回放内容。
根据实施例的电子设备9000可以通过跟踪用户的眼睛来无缝地回放内容。
根据实施例的电子设备9000可以经由虹膜认证来确定是否无缝地回放内容。
如上所述,根据上述示例性实施例中的一个或多个,移动设备可以识别被包括在输入图像中的电子设备,并且与电子设备配对。
根据实施例可的移动设备可以与由所识别的电子设备控制的另一电子设备配对。
根据实施例的移动设备可以跟踪用户的眼睛并且选择要配对的电子设备。
根据实施例的移动设备可以基于用户的选择,来从被包括在所获取的图像中的多个电子设备当中选择要配对的电子设备。
根据实施例的移动设备可以基于用户的手势来选择要配对的电子设备。
本文描述的设备可以包括处理器、用于存储程序数据和执行其的存储器、诸如磁盘驱动器的永久存储单元、用于处理与外部设备的通信的通信端口、以及用户接口设备,包括触摸面板、键、按钮等。当涉及软件模块或算法时,这些软件模块可以在计算机可读介质上被存储为可在处理器上执行的程序指令或计算机可读代码。计算机可读记录介质的示例包括磁存储介质(例如,ROM、软盘、硬盘等)和光学记录介质(例如,CD-ROM或DVD)。计算机可读记录介质还可以分布在网络耦合的计算机系统上,使得计算机可读代码以分布式方式被存储和执行。该介质可以由计算机读取,存储在存储器中,并且由处理器执行。
可以以功能块组件和各种处理步骤的角度来描述本发明原理。这样的功能块可以通过配置为执行指定功能的任何数目的硬件和/或软件组件来实现。例如,本发明原理可以采用各种集成电路(IC)组件,例如存储器元件、处理元件、逻辑元件、查找表等,其可以在一个或多个微处理器或其他控制设备的控制下执行各种功能。类似地,当使用软件编程或软件元件来实现本发明原理的元件时,本发明原理可以通过任何编程或脚本语言利用各种算法来实现,其中,各种编程或脚本语言诸如C、C++、Java和汇编等,各种算法通过数据结构、对象、过程、例程或其他编程元素来实现。各功能方面可以以在一个或多个处理器上执行的算法来实现。此外,本发明原理可以采用任意数目的传统技术来进行电子配置、信号处理和/或控制、数据处理等。词语“机制”、“元件”、“装置”和“配置”被广义地使用,并且不限于机械或物理实现,而是可以包括结合处理器的软件例程等。
本文所示和描述的具体实施方式是本发明原理的说明性示例,并且不意在以其他方式以任何方式限制本发明原理的范围。为简便起见,可以不具体描述传统的电子装置、控制系统、系统的软件开发和其他功能方面。此外,在所呈现的各种附图中示出的连接线或连接器意在表示各种元件之间的示例性功能关系和/或物理或逻辑耦合。应当注意,在实际设备中可以存在许多替代或附加的功能关系、物理连接或逻辑连接。
在描述本发明原理的上下文(特别是在以下权利要求的上下文中)中使用术语“一”和“该”以及类似的引用应当被解释为涵盖单数和复数。此外,本文的值的范围的详述(recitation)仅意在用作单独提及落在该范围的每个单独值的速记(shorthand)方法,除非这里以其他方式指示,并且每个单独值被包含在说明书中,如同其在这里被独立的阐述。而且,这里描述的所有方法步骤可以以任何适当的顺序被执行,除非这里以其他方式指示或者由上下文明确矛盾的。本发明原理不限于所描述的步骤顺序。使用任何和所有示例或这里提供的示例性语言(例如,“诸如”)仅仅意在更好地说明发明原理,并且不对发明原理的范围进行限制,除非另有声明。在不脱离本发明原理的精神和范围的情况下,许多修改和调整对本领域的普通技术人员是显而易见的。

Claims (13)

1.一种要与电子设备配对的眼镜,所述眼镜包括:
存储器,存储关于多个电子设备中的每一个的标识信息和设备信息,所述设备信息表示用于将所述眼镜与所述多个电子设备配对的信息;
眼睛跟踪相机,其获取佩戴眼镜的用户的眼睛的图像;
处理器,其基于用户的眼睛或瞳孔的改变来确定用户观看的方向,所述改变由所述眼睛跟踪相机跟踪,当在指定的时间段中通过相机捕获包括至少一个电子设备的相同或者相似图像时,获取所述至少一个电子设备的图像,提取关于被包括在所获取的图像中的所述至少一个电子设备的标识信息,以及搜索所存储的标识信息并且选择对应于所提取的标识信息的电子设备;以及
无线通信单元,基于所选择的电子设备的设备信息来与所选择的电子设备配对。
2.如权利要求1所述的眼镜,其中,所述处理器搜索对应于所提取的标识信息的设备信息,并且选择对应于所搜索的设备信息的电子设备作为要配对的电子设备。
3.如权利要求1所述的眼镜,其中,所述处理器搜索对应于所提取的标识信息的存储的标识信息,并且选择由对应于搜索到的标识信息的电子设备控制的电子设备来作为要配对的电子设备。
4.如权利要求1所述的眼镜,其中,所述处理器通过识别被包括在由所述相机获取的图像中的电子设备来获取所述电子设备的图像。
5.如权利要求1所述的眼镜,其中,获取所述至少一个电子设备的图像包括:通过识别被包括在所述相同或相似图像中的所述至少一个电子设备来获取所述图像。
6.如权利要求1所述的眼镜,其中,所存储的标识信息指示用于识别所述多个电子设备的形状的特征。
7.一种由眼镜执行的与电子设备配对的方法,所述方法包括:
存储关于多个电子设备中的每一个的标识信息和设备信息,所述设备信息表示用于将所述眼镜与所述多个电子设备配对的信息;
获取佩戴眼镜的用户的眼睛的图像,并且基于用户的眼睛或瞳孔的改变来确定用户观看的方向;
当在指定的时间段中通过相机捕获包括至少一个电子设备的相同或者相似图像时,获取所述至少一个电子设备的图像;
提取关于被包括在所获取的图像中的所述至少一个电子设备的标识信息;
搜索所存储的标识信息并且选择对应于所提取的标识信息的电子设备;以及
基于所选择的电子设备的设备信息来与所选择的电子设备配对。
8.如权利要求7所述的方法,其中,选择所述电子设备包括:搜索对应于所提取的标识信息的存储的标识信息,并且选择对应于所搜索的标识信息的电子设备来作为要配对的电子设备。
9.如权利要求7所述的方法,其中,与所选择的电子设备配对包括:搜索对应于所提取的标识信息的存储的标识信息,并且选择由对应于搜索到的标识信息的电子设备控制的电子设备来作为要配对的电子设备。
10.如权利要求7所述的方法,其中,获取所述至少一个电子设备的图像包括:通过识别被包括在由所述相机获取的图像中的电子设备来获取所述电子设备的图像。
11.如权利要求7所述的方法,其中,获取所述至少一个电子设备的图像包括:如果在指定的时间段中经由所述相机输入静止图像,则通过识别被包括在所述输入图像中的电子设备来获取所述电子设备的图像。
12.如权利要求7所述的方法,其中,所存储的标识信息指示用于识别所述多个电子设备的形状的特征。
13.一种要与电子设备配对的眼镜,所述眼镜包括:
存储器,存储关于多个电子设备的标识信息和设备信息,并且所述设备信息表示用于将所述眼镜与所述多个电子设备配对的信息;
眼睛跟踪相机,其获取佩戴眼镜的用户的眼睛的图像;以及
处理器,其基于用户的眼睛或瞳孔的改变来确定用户观看的方向,所述改变由所述眼睛跟踪相机跟踪;
相机,其当在指定的时间段中通过所述相机捕获包括至少一个电子设备的相同或者相似图像时,在所述眼睛跟踪相机跟踪的方向上获取关于至少一个电子设备的图像数据;
显示单元,显示所获取的图像数据;以及
其中,所述处理器从所述图像数据提取关于所述至少一个电子设备的标识信息,基于所提取的标识信息来搜索所存储的设备信息,并且基于搜索的设备信息来执行与所述至少一个电子设备的配对。
CN201510456032.7A 2014-07-29 2015-07-29 移动设备和将移动设备与电子设备配对的方法 Active CN105323708B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911127094.8A CN110850593B (zh) 2014-07-29 2015-07-29 移动设备和通过移动设备配对电子设备的方法

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR20140096764 2014-07-29
KR10-2014-0096764 2014-07-29
KR10-2015-0034042 2015-03-11
KR1020150034042A KR102437104B1 (ko) 2014-07-29 2015-03-11 모바일 디바이스에서 촬영된 전자 기기와 페어링하는 방법 및 장치

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201911127094.8A Division CN110850593B (zh) 2014-07-29 2015-07-29 移动设备和通过移动设备配对电子设备的方法

Publications (2)

Publication Number Publication Date
CN105323708A CN105323708A (zh) 2016-02-10
CN105323708B true CN105323708B (zh) 2019-12-13

Family

ID=53765081

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201510456032.7A Active CN105323708B (zh) 2014-07-29 2015-07-29 移动设备和将移动设备与电子设备配对的方法
CN201911127094.8A Active CN110850593B (zh) 2014-07-29 2015-07-29 移动设备和通过移动设备配对电子设备的方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201911127094.8A Active CN110850593B (zh) 2014-07-29 2015-07-29 移动设备和通过移动设备配对电子设备的方法

Country Status (5)

Country Link
US (2) US10136460B2 (zh)
EP (4) EP2980675B1 (zh)
KR (1) KR102551240B1 (zh)
CN (2) CN105323708B (zh)
WO (1) WO2016017945A1 (zh)

Families Citing this family (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230188991A9 (en) * 2013-05-08 2023-06-15 Natalya Segal Smart wearable devices and system therefor
US10451874B2 (en) * 2013-09-25 2019-10-22 Seiko Epson Corporation Image display device, method of controlling image display device, computer program, and image display system
KR102437104B1 (ko) 2014-07-29 2022-08-29 삼성전자주식회사 모바일 디바이스에서 촬영된 전자 기기와 페어링하는 방법 및 장치
KR102197851B1 (ko) * 2014-10-20 2021-01-04 한국전자통신연구원 단말간 직접 통신에서 대상 발견 방법 및 장치
KR101673308B1 (ko) * 2015-08-20 2016-11-07 현대자동차주식회사 블루투스 듀얼모드를 이용한 블루투스 자동 연결 방법 및 장치
CN105204742B (zh) * 2015-09-28 2019-07-09 小米科技有限责任公司 电子设备的控制方法、装置及终端
US9961531B2 (en) * 2015-10-02 2018-05-01 Lg Electronics Inc. Method and device for controlling device using bluetooth in wireless communication system
WO2017062768A2 (en) * 2015-10-09 2017-04-13 3G Innovations, LLC Wearable device
US10334076B2 (en) * 2016-02-22 2019-06-25 Google Llc Device pairing in augmented/virtual reality environment
JP2017175439A (ja) * 2016-03-24 2017-09-28 京セラ株式会社 電子機器
CN105812908A (zh) * 2016-03-28 2016-07-27 苏州乐聚堂电子科技有限公司 智能电视系统
CN105704547A (zh) * 2016-03-28 2016-06-22 苏州乐聚堂电子科技有限公司 智能电视系统
CN105898891B (zh) * 2016-04-01 2019-10-18 深圳市元征科技股份有限公司 智能穿戴设备的配对方法和装置
US10181066B2 (en) * 2016-06-06 2019-01-15 Paypal, Inc. Smart harbor device for intelligent updating and selection for use of transaction processing terminal devices
CN106131972B (zh) * 2016-06-30 2019-12-24 联想(北京)有限公司 一种控制方法及电子设备
US9916501B2 (en) * 2016-07-22 2018-03-13 Yung-Hui Li Smart eyeglasses with iris recognition device
US10581853B2 (en) * 2016-08-03 2020-03-03 Huami Inc. Method and apparatus for password management
US10290151B2 (en) * 2016-08-17 2019-05-14 Blackberry Limited AR/VR device virtualisation
WO2018035709A1 (zh) * 2016-08-23 2018-03-01 华为技术有限公司 一种蓝牙配对方法及蓝牙设备
IT201600103076A1 (it) * 2016-10-13 2018-04-13 Osram Gmbh Procedimento di rilevazione del c.d. view frustum, sistema e prodotto informatico corrispondenti
CN106557167B (zh) * 2016-11-23 2020-08-04 上海擎感智能科技有限公司 智能眼镜及其控制设备的方法、系统及控制器
TWM539192U (zh) * 2016-12-16 2017-04-01 宏正自動科技股份有限公司 模擬顯示畫面暨支援虛擬顯示裝置之控制設備及系統
CN108696293B (zh) * 2017-03-03 2020-11-10 株式会社理光 可穿戴设备、移动设备及其连接方法
US10542052B2 (en) 2017-04-27 2020-01-21 Samsung Electronics Co., Ltd. Multi-area grouping
KR20180137913A (ko) * 2017-06-20 2018-12-28 삼성전자주식회사 컨텐츠를 재생하기 위한 전자 장치 및 그의 동작 방법
US10602046B2 (en) * 2017-07-11 2020-03-24 Htc Corporation Mobile device and control method
US11138301B1 (en) * 2017-11-20 2021-10-05 Snap Inc. Eye scanner for user identification and security in an eyewear device
EP3502838B1 (en) * 2017-12-22 2023-08-02 Nokia Technologies Oy Apparatus, method and system for identifying a target object from a plurality of objects
JP7252398B2 (ja) * 2018-07-04 2023-04-04 マクセル株式会社 仮想オブジェクト操作方法およびヘッドマウントディスプレイ
KR102484647B1 (ko) 2018-07-11 2023-01-04 삼성전자주식회사 전자 장치의 제어방법 및 컴퓨터 판독 가능 기록매체
KR102137194B1 (ko) * 2018-10-31 2020-07-24 엘지전자 주식회사 이동 단말기
US10691767B2 (en) 2018-11-07 2020-06-23 Samsung Electronics Co., Ltd. System and method for coded pattern communication
US10897788B2 (en) * 2018-11-29 2021-01-19 Lenovo (Singapore) Pte. Ltd. Wireless connection establishment between devices
EP3690609B1 (en) * 2019-01-30 2021-09-22 DENTSPLY SIRONA Inc. Method and system for controlling dental machines
US10708965B1 (en) * 2019-02-02 2020-07-07 Roambee Corporation Augmented reality based asset pairing and provisioning
US10890992B2 (en) 2019-03-14 2021-01-12 Ebay Inc. Synchronizing augmented or virtual reality (AR/VR) applications with companion device interfaces
US11150788B2 (en) * 2019-03-14 2021-10-19 Ebay Inc. Augmented or virtual reality (AR/VR) companion device techniques
US10972916B2 (en) 2019-04-29 2021-04-06 Sonicwall Inc. Instant secure wireless network setup
KR20200129297A (ko) * 2019-05-08 2020-11-18 삼성전자주식회사 전자 장치, 사용자 단말 및 이들의 제어 방법
US11445107B2 (en) * 2019-08-08 2022-09-13 Qorvo Us, Inc. Supervised setup for control device with imager
US20220070640A1 (en) * 2020-08-27 2022-03-03 Zebra Technologies Corporation Methods and systems for establishing a bi-directional communication link between a host device and a barcode reader
US11829527B2 (en) * 2020-11-30 2023-11-28 Samsung Electronics Co., Ltd. Augmented reality device, electronic device interacting with augmented reality device, and controlling method thereof
CN112668589A (zh) * 2020-12-31 2021-04-16 闪耀现实(无锡)科技有限公司 用于头戴式电子设备的配对方法和装置
CN113538876B (zh) * 2021-06-23 2023-04-07 青岛海信移动通信技术股份有限公司 一种智能家居设备自动配网的方法、设备及系统
EP4343516A4 (en) * 2021-08-23 2024-04-24 Samsung Electronics Co Ltd PORTABLE ELECTRONIC DEVICE HAVING AUGMENTED REALITY OBJECT DISPLAYED THEREOF AND METHOD OF OPERATING THE SAME
CN113727353A (zh) * 2021-08-27 2021-11-30 广州艾美网络科技有限公司 娱乐设备的配置方法、装置及娱乐设备
CN113726569A (zh) * 2021-08-27 2021-11-30 广州艾美网络科技有限公司 娱乐设备的组网方法、装置及娱乐设备
CN115499787A (zh) * 2022-09-19 2022-12-20 歌尔科技有限公司 智能眼镜互联方法及智能眼镜

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102625981A (zh) * 2009-07-17 2012-08-01 高通股份有限公司 在主设备和目标设备之间自动接口
CN103139586A (zh) * 2011-11-21 2013-06-05 三星电子株式会社 眼镜和用于对眼镜进行配对的方法
CN103812535A (zh) * 2014-02-18 2014-05-21 天地融科技股份有限公司 蓝牙设备连接方法和蓝牙设备

Family Cites Families (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6619799B1 (en) 1999-07-02 2003-09-16 E-Vision, Llc Optical lens system with electro-active lens having alterably different focal lengths
KR100861625B1 (ko) * 2001-01-23 2008-10-07 소니 가부시끼 가이샤 통신 장치 및 통신 방법, 전자 기기 및 그 제어 방법 및기억 매체
KR100530233B1 (ko) 2003-02-17 2005-11-22 삼성전자주식회사 애드호크 네트워크로 연결가능한 기기를 사용자에게알려주어 사용자의 선택에 의해 효율적인 연결 설정을가능하게 해주는 블루투스 무선통신 장치 및 통신방법
US8064647B2 (en) * 2006-03-03 2011-11-22 Honeywell International Inc. System for iris detection tracking and recognition at a distance
US20060115130A1 (en) * 2004-11-29 2006-06-01 Douglas Kozlay Eyewear with biometrics to protect displayed data
US20080084867A1 (en) * 2006-09-25 2008-04-10 George Foti Method and server for transferring a multimedia session from a first terminal to a second terminal
KR100850357B1 (ko) * 2006-12-06 2008-08-04 한국전자통신연구원 시선 위치 추적 방법 및 그 장치
KR101373007B1 (ko) 2007-07-04 2014-03-14 삼성전자주식회사 주변 기기 식별 방법 및 장치
CN101521723B (zh) * 2008-02-27 2012-09-12 深圳Tcl新技术有限公司 一种虹膜识别开机控制的方法及电视机
KR101560626B1 (ko) * 2008-06-26 2015-10-15 주식회사 케이티 유무선 연동형 동영상 이어보기 서비스 제공 방법 및 장치
US8398239B2 (en) * 2009-03-02 2013-03-19 Honeywell International Inc. Wearable eye tracking system
KR101657565B1 (ko) * 2010-04-21 2016-09-19 엘지전자 주식회사 증강 원격제어장치 및 그 동작 방법
US8384774B2 (en) 2010-02-15 2013-02-26 Eastman Kodak Company Glasses for viewing stereo images
US8438288B2 (en) * 2010-02-17 2013-05-07 Microsoft Corporation Device-pairing by reading an address provided in device-readable form
WO2011106798A1 (en) * 2010-02-28 2011-09-01 Osterhout Group, Inc. Local advertising content on an interactive head-mounted eyepiece
KR101740728B1 (ko) * 2010-04-23 2017-05-29 주식회사 비즈모델라인 영상 데이터 출력 시스템과 이를 위한 영상 출력 장치
US8789131B2 (en) * 2010-05-14 2014-07-22 Lg Electronics Inc. Electronic device and method of sharing contents thereof with other devices
BR112012010500A2 (pt) 2010-09-03 2016-03-15 Panasonic Corp dispositivo de processamento de vídeo, método de processamento de vídeo, programa computacional, e método de distribuição
US9213405B2 (en) 2010-12-16 2015-12-15 Microsoft Technology Licensing, Llc Comprehension and intent-based content for augmented reality displays
US8670183B2 (en) * 2011-03-07 2014-03-11 Microsoft Corporation Augmented view of advertisements
EP3557855B1 (en) 2011-03-31 2020-12-23 Sony Corporation System and method for establishing a communication session
US8510166B2 (en) * 2011-05-11 2013-08-13 Google Inc. Gaze tracking system
CN103033936A (zh) 2011-08-30 2013-04-10 微软公司 具有虹膜扫描剖析的头戴式显示器
US20130258089A1 (en) * 2011-11-03 2013-10-03 Intel Corporation Eye Gaze Based Image Capture
KR101891786B1 (ko) * 2011-11-29 2018-08-27 삼성전자주식회사 아이 트래킹 기반의 사용자 기능 운용 방법 및 이를 지원하는 단말기
US9229231B2 (en) * 2011-12-07 2016-01-05 Microsoft Technology Licensing, Llc Updating printed content with personalized virtual data
US20130147686A1 (en) * 2011-12-12 2013-06-13 John Clavin Connecting Head Mounted Displays To External Displays And Other Communication Networks
US9766700B2 (en) * 2011-12-14 2017-09-19 Intel Corporation Gaze activated content transfer system
KR101803305B1 (ko) * 2011-12-15 2018-01-10 삼성전자주식회사 애플리케이션 실행을 위한 디스플레이 장치 및 방법
US10013053B2 (en) * 2012-01-04 2018-07-03 Tobii Ab System for gaze interaction
US20130241805A1 (en) 2012-03-15 2013-09-19 Google Inc. Using Convergence Angle to Select Among Different UI Elements
EP3474523B1 (en) * 2012-04-12 2020-04-08 Telefonaktiebolaget LM Ericsson (publ) Pairing a mobile terminal with a wireless device
US20130297460A1 (en) * 2012-05-01 2013-11-07 Zambala Lllp System and method for facilitating transactions of a physical product or real life service via an augmented reality environment
KR101850035B1 (ko) * 2012-05-02 2018-04-20 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR20130131090A (ko) * 2012-05-23 2013-12-03 엘지전자 주식회사 콘텐츠 제공 서버 및 상기 서버에서의 콘텐츠 제공 방법
KR20140000110U (ko) * 2012-06-29 2014-01-08 밍추언 황 인터페이스 전송처리 기능을 가진 안경
KR101968523B1 (ko) * 2012-06-29 2019-04-12 엘지전자 주식회사 아이 트래킹 기능을 구비한 이동 단말기 및 그의 이벤트 표시방법
KR20140017734A (ko) * 2012-07-31 2014-02-12 인텔렉추얼디스커버리 주식회사 착용형 전자 장치 및 그의 제어 방법
WO2014021602A2 (ko) 2012-07-31 2014-02-06 인텔렉추얼디스커버리 주식회사 착용형 전자 장치 및 그의 제어 방법
US20140053189A1 (en) * 2012-08-17 2014-02-20 Electronics And Telecommunications Research Institute Apparatus and method for providing personalized home screen
US20140196143A1 (en) * 2012-08-29 2014-07-10 Identity Validation Products, Llc Method and apparatus for real-time verification of live person presence on a network
KR101958778B1 (ko) 2012-08-31 2019-03-15 엘지전자 주식회사 헤드 마운트 디스플레이 및 이를 이용한 디지털 디바이스 제어 방법
WO2014046424A1 (en) * 2012-09-18 2014-03-27 Samsung Electronics Co., Ltd. Information transmission method and system, and device
KR101769177B1 (ko) * 2012-10-09 2017-08-18 한국전자통신연구원 시선 추적 장치 및 방법
KR101999180B1 (ko) 2012-11-23 2019-10-01 삼성전자주식회사 디스플레이 장치, 그의 제어 방법, 안경 장치 및 그의 제어 방법
KR101934099B1 (ko) * 2012-12-14 2019-01-02 삼성전자주식회사 컨텐츠 재생 장치, 그 ui 제공 방법, 네트워크 서버 및 그 제어 방법
TWM471013U (zh) 2013-09-27 2014-01-21 Univ Southern Taiwan Sci & Tec 遠端控制電源裝置
TWM480898U (zh) 2014-03-14 2014-07-01 Ye Nan Hui 頭戴式顯示裝置
US9712948B2 (en) * 2014-04-30 2017-07-18 Avago Technologies General Ip (Singapore) Pte. Ltd. Image triggered pairing
US9679538B2 (en) * 2014-06-26 2017-06-13 Intel IP Corporation Eye display interface for a touch display device
US9817959B2 (en) * 2014-06-27 2017-11-14 Intel Corporation Wearable electronic devices

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102625981A (zh) * 2009-07-17 2012-08-01 高通股份有限公司 在主设备和目标设备之间自动接口
CN103139586A (zh) * 2011-11-21 2013-06-05 三星电子株式会社 眼镜和用于对眼镜进行配对的方法
CN103812535A (zh) * 2014-02-18 2014-05-21 天地融科技股份有限公司 蓝牙设备连接方法和蓝牙设备

Also Published As

Publication number Publication date
KR102551240B1 (ko) 2023-07-04
EP2980675A3 (en) 2016-03-23
EP3401764B1 (en) 2019-11-20
US20160037573A1 (en) 2016-02-04
WO2016017945A1 (en) 2016-02-04
KR20220122955A (ko) 2022-09-05
EP2980675A2 (en) 2016-02-03
US10136460B2 (en) 2018-11-20
CN110850593A (zh) 2020-02-28
US20190075610A1 (en) 2019-03-07
EP3401764A1 (en) 2018-11-14
EP2980675B1 (en) 2019-02-27
CN105323708A (zh) 2016-02-10
EP3702889A1 (en) 2020-09-02
EP3594786A1 (en) 2020-01-15
CN110850593B (zh) 2023-08-22
US10375749B2 (en) 2019-08-06

Similar Documents

Publication Publication Date Title
CN105323708B (zh) 移动设备和将移动设备与电子设备配对的方法
US11013045B2 (en) Mobile device and method of pairing the same with electronic device
US11546410B2 (en) Device and method for adaptively changing task-performing subjects
EP2927735B1 (en) Head Mounted Display clipped on spectacles frame
KR102062310B1 (ko) 전자 장치에서 헤드 트래킹 기술을 이용하여 제어 서비스를 제공하기 위한 장치 및 방법
CN102467235A (zh) 多媒体设备中用户姿态识别的方法及其多媒体设备
KR20160147555A (ko) 이동 단말기 및 그 제어 방법
KR20120093744A (ko) 데이터 송수신 방법, 그를 이용한 디스플레이 장치 및 휴대용 단말기
CN104853223B (zh) 视频流的插播方法及终端设备
EP2899986B1 (en) Display apparatus, mobile apparatus, system and setting controlling method for connection thereof
CN104902318B (zh) 播放控制方法及终端设备
US10013949B2 (en) Terminal device
US20140253748A1 (en) Display device, and method of controlling a camera of the display device
US10685629B2 (en) Module-type mobile terminal and control method therefor
CN105610686A (zh) 联系人分组方法及装置
KR20150064597A (ko) 디스플레이 장치 및 그의 동작 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant