CN102567240A - 变更用户接口的便携式终端、方法以及程序 - Google Patents

变更用户接口的便携式终端、方法以及程序 Download PDF

Info

Publication number
CN102567240A
CN102567240A CN2011102432519A CN201110243251A CN102567240A CN 102567240 A CN102567240 A CN 102567240A CN 2011102432519 A CN2011102432519 A CN 2011102432519A CN 201110243251 A CN201110243251 A CN 201110243251A CN 102567240 A CN102567240 A CN 102567240A
Authority
CN
China
Prior art keywords
electrical appliance
portable terminal
user interface
application program
identification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011102432519A
Other languages
English (en)
Other versions
CN102567240B (zh
Inventor
菅谷俊二
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Optim Corp
Original Assignee
Optim Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Optim Corp filed Critical Optim Corp
Publication of CN102567240A publication Critical patent/CN102567240A/zh
Application granted granted Critical
Publication of CN102567240B publication Critical patent/CN102567240B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72415—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories for remote control of appliances
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4131—Peripherals receiving signals from specially adapted client devices home appliance, e.g. lighting, air conditioning system, metering devices
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/30—User interface
    • G08C2201/34—Context aware guidance
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/90—Additional features
    • G08C2201/91—Remote control based on location and proximity
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/90—Additional features
    • G08C2201/93—Remote control using other portable devices, e.g. mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Automation & Control Theory (AREA)
  • General Engineering & Computer Science (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)
  • Details Of Television Systems (AREA)
  • Selective Calling Equipment (AREA)

Abstract

本发明提供一种变更用户接口的便携式终端、方法以及程序，该便携式终端即使用户不特意进行显示也能够变更为用户所希望的电器用品的用户接口。便携式终端(10)根据摄影图像或电波信号检测识别存在于周围的电器用品(100)，启动对每个电器用品(100)具有不同的用户接口的应用程序，并将其驻留在内存里。然后，当检测识别到指定的电器用品(100)时，将显示在便携式终端(10)的显示部以及输入部的用户接口变更为与检测识别到的指定的电器用品(100)相对应的应用程序的用户接口以便用户查看确认。当用户将便携式终端(10)朝向指定的方向时，检测识别存在于该方向的电器用品(100)并显示对应的用户接口。

Description

变更用户接口的便携式终端、方法以及程序
技术领域
本发明涉及一种变更用户接口的便携式终端、方法以及程序，尤其涉及便携式终端检测识别电器用品的存在，并将便携式终端的用户接口变更为用于该电器用品的用户接口的技术。
背景技术
目前已有利用便携式终端的位置信息来控制家里的电器用品的公开技术。例如，在专利文献1(JP特开2001-231083号公报)中已经公开了当便携式终端利用便携式终端的GPS(Global Positioning System)检测到靠近家或办公室时，就接通家或办公室里的空调和电脑等的电源。
发明内容
然而，只是因为便携式终端靠近家就接通预先设定好对应关系的家里的所有电器用品的电源并不符合人们的实际需求。也就是说，根据持有便携式终端的用户到家的时间和季节，希望控制的电器用品也会发生变化。并且，为了对便携式终端的位置作出恰当的反应，要求以精确的定位来控制电器用品。例如，如果电器用品是电视机，当用户在电视机前时，希望用户接口变更为电视机的遥控器。但是，如果用户不在电视机前而在回家的路上时便携式终端的用户接口变更为电视机遥控器的话，就很难说作了周密的控制。
为了实现这一功能，以精确的定位进行便携式终端的用户接口的控制，单靠GPS的精度往往是不够的。而且，只靠位置信息来变更用户接口还存在如下问题：当电器用品的放置位置发生了变动时，不能将用户接口变更为所希望的用户接口。
本发明是鉴于上述问题而提出的，其目的在于提供一种便携式终端、方法以及程序，该便携式终端、方法以及程序即使用户不特意变更用户接口也能自动而周密地变更为用户所希望的恰当的电器用品的用户接口。
为了达到上述目的，本发明提供如下的解决方案。
有关本发明的第一个特征提供一种便携式终端，其具备：电器用品检测识别装置，根据摄影图像或电波信号检测识别存在于周围的电器用品；应用程序驻留装置，用于启动与所述电器用品相关且对每个电器用品具有不同的用户接口的应用程序，并将其驻留在所述便携式终端的内存里；用户接口变更装置，当所述电器用品检测识别装置检测识别到指定的电器用品时，将显示在该便携式终端的显示部以及输入部的用户接口变更为所述应用程序驻留装置驻留在内存里的应用程序中与检测识别到的所述指定的电器用品相对应的应用程序的用户接口，以便查看该便携式终端的用户能够进行确认。
根据本发明的第一个特征，便携式终端根据摄影图像或电波信号检测识别存在于周围的电器用品，启动与电器用品相关且对每个电器用品具有不同用户接口的应用程序，并将其驻留在该便携式终端的内存里。然后，当检测识别到指定的电器用品时，将显示在便携式终端的显示部以及输入部的用户接口变更为驻留在内存里的应用程序中与检测识别到的指定的电器用品相对应的应用程序的用户接口，以便查看该便携式终端的用户能够进行确认。
因此，本发明可提供一种便携式终端，该便携式终端即使用户不特意用键操作等来显示与电器用品相对应的用户接口，也能够将显示和输入接受变更为估计用户所希望的电器用品的用户接口。
有关第一个特征的发明，在发明的分类上不仅在用户终端，在方法和程序等方面也具有相同的作用和效果。
有关本发明的第二个特征提供与本发明的第一个特征相关的便携式终端，其中，所述电器用品检测识别装置通过接收GPS电波信号、SSID电波信号以及近距离无线信号中的至少一种信号检测识别所述电器用品。
根据本发明的第二个特征，便携式终端通过接收GPS电波信号、SSID电波信号以及近距离无线信号中的至少一种信号检测识别电器用品。
因此，本发明可提供一种便携式终端，该便携式终端即使用户不特意用键操作等来显示与电器用品相对应的用户接口，也能够根据用户的位置信息(GPS)或接入点SSID，将显示和输入接受变更为估计用户所希望的电器用品的用户接口。
有关本发明的第三个特征提供与本发明的第一个特征相关的便携式终端，该便携式终端具备：存储装置，用于存储作为位置信息的所述电器用品的物理位置；方向检测识别装置，用于检测识别该便携式终端的上面的朝向；位置信息确定装置，用于确定该便携式终端的物理位置；以及，对象物确定装置，用于确定在存储有所述位置信息的电器用品之中，存在于该便携式终端的上面方向的延长线路径上的电器用品，其中，所述用户接口变更装置将用户接口变更为与所述对象物确定装置所确定的电器用品相对应的应用程序的用户接口。
根据本发明的第三个特征，存储有作为位置信息的电器用品的物理位置，检测识别该便携式终端的上面的朝向，并确定该便携式终端的物理位置。而且，在存储有位置信息的电器用品中，确定存在于该便携式终端的上面方向的延长线路径上的电器用品，并将用户接口变更为与所确定的电器用品相对应的应用程序的用户接口。
因此，能够将用户接口变更为存在于便携式终端被用户指向的方向上的电器用品的用户接口。例如，即使在便携式终端的周围存在多个电器用品，也能够将用户接口变更为存在于便携式终端的上面方向的延长线路径上的一个电器用品的用户接口。
有关本发明的第四个特征提供与本发明的第三个特征相关的便携式终端，其中，所述方向检测识别装置根据由两个或两个以上的位置检测识别部所检测识别的位置信息之差，检测识别该便携式终端的上面的朝向。
根据本发明的第四个特征，便携式终端根据由两个或两个以上的位置检测识别部检测识别的位置信息之差，检测识别该便携式终端的上面的朝向。
因此，只用位置检测识别部(GPS设备等)，例如，即使不具备电子罗盘或倾斜传感器等也能够检测识别便携式终端的上面的朝向。
有关本发明的第五个特征提供与本发明的第三个特征相关的便携式终端，其中，所述方向检测识别装置通过电子罗盘和倾斜传感器中的至少一种检测识别该便携式终端的上面的朝向。
根据本发明的第五个特征，便携式终端通过电子罗盘和倾斜传感器中的至少一个来检测识别该便携式终端的上面的朝向。
有关本发明的第六个特征提供与本发明的第一个特征相关的便携式终端，该便携式终端还具备通过接收无线电波的信号，识别接入点SSID的SSID识别装置，其中，只有在所述SSID识别装置识别到指定的SSID时，所述电器用品检测识别装置根据所述指定的电器用品输出的近距离无线信号，执行检测识别电器用品的处理。
根据本发明的第六个特征，便携式终端通过接收无线电波的信号识别SSID，只有在识别到指定的SSID时，根据指定的电器用品所输出的近距离无线信号检测识别电器用品。
因此，当便携式终端检测识别到指定的SSID时，即只在能够接收与便携式终端设定好对应关系的SSID的无线电波的范围内时，才能变更用户接口。例如，只在便携式终端位于自己的家里或自己的公司时，才能将用户接口变更为电器用品的用户接口。
有关本发明的第七个特征提供与本发明的第一个特征相关的便携式终端，其中，所述电器用品检测识别装置根据通过安装在该便携式终端的机壳的上面的摄像机拍摄电器用品而得到的摄影图像检测识别所述电器用品。
因此，当用户拿着该便携式终端时，因为摄像机所在的机壳的上面朝向用户自然地拿着该便携式终端时的用户的前方方向，所以摄像机所在的机壳的上面成为容易拍摄电器用品的面。
有关本发明的第八个特征提供与本发明的第七个特征相关的便携式终端，其中，所述电器用品检测识别装置在通过该便携式终端的摄像机检测识别该电器用品时，根据拍摄附加在该电器用品的标记而得到的摄影图像进行检测识别。
因此，当检测识别电器用品时，不是拍摄电器用品本身，而是通过拍摄标记检测识别电器用品，所以可以提高检测识别率。也就是说，即使拍摄电器用品本身，根据相对于整个电器用品摄影图像所拍摄到的部分、电器用品的明暗以及色调等，检测识别率有可能会降低。但是，如果摄影对象是二维代码等标记的话，检测识别率有可能会提高。
有关根据本发明的第九个特征提供与本发明的第一个特征相关的便携式终端，其中，所述电器用品检测识别装置将由所述SSID识别装置识别到的SSID发送到可通信连接的服务器并接收与该SSID设定好对应关系且用于根据摄影图像或电波信号检测识别电器用品的数据，以此对所述电器用品进行检测识别。
因此，基于便携式终端从服务器接收的数据，可以根据摄影图像或电波信号检测识别存在于周围的电器用品。在此，因为便携式终端将SSID发送到服务器并接收与SSID设定好对应关系的数据，所以不需要向便携式终端存储用于检测识别有可能被检测识别到的多个电器用品的数据，且只识别限定于SSID的电器用品即可，这有助于提高检测识别率和缩短检测识别所需的时间。
有关本发明的第十个特征提供与本发明的第一个特征相关的便携式终端，其中，当所述电器用品检测识别装置检测识别到两个或两个以上的电器用品时，用户接口变更装置根据检测识别时的日期和时间，将用户接口变更为与所述指定的电器用品中的一个电器用品相对应的应用程序的用户接口。
因此，本发明可提供一种便携式终端，该便携式终端即使用户不特意用键操作等来显示与电器用品相对应的用户接口，也能够根据检测识别时的日期和时间，将显示和输入接受变更为估计用户所希望的电器用品的用户接口。
有关本发明的第十一个特征提供与本发明的第一个特征相关的便携式终端，其中，所述电器用品检测识别装置当检测识别到两个或两个以上的电器用品时，用户接口变更装置根据预先规定的优先顺序，将用户接口变更为与所述指定的电器用品中的一个电器用品相对应的应用程序的用户接口。
因此，即使在检测识别到两个或两个以上的电器用品的情况，也能够根据预先规定的优先顺序(比如，以前的操作顺序或便携式终端和电器用品的距离近的顺序等)变更用户接口。
发明效果
根据本发明，即使用户不特意变更便携式终端的用户接口，也能够将用户接口变更为用户所希望的恰当的电器用品的用户接口。
附图说明
图1为本发明的最佳实施方式的UI变更系统1的整体图。
图2为第一基本处理的便携式终端10的功能框图。
图3为表示便携式终端10执行的第一基本处理流程的图。
图4为表示便携式终端10存储的UI位置对应表的图。
图5为表示便携式终端10的上面的朝向的模式图。
图6为第二基本处理的便携式终端10的功能框图。
图7为表示便携式终端10执行的第二基本处理流程的图。
图8为表示显示在便携式终端10的用户接口的屏幕显示例的图。
图9为表示便携式终端10备有的摄像机的位置的图。
图10为表示便携式终端10存储的UI对应表1的图。
图11为表示便携式终端10存储的UI对应表2的图。
图12为表示便携式终端10存储的UI对应表3的图。
图13为表示便携式终端10存储的UI对应表4的图。
图14为表示根据图像检测识别电器用品100a时的摄影范围的图。
图15为表示根据图像检测识别电器用品100a时的标记的摄影范围的图。
图16为表示便携式终端10存储的UI对应表5的图。
图17为表示便携式终端10存储的UI对应表6的图。
图18为表示便携式终端10存储的UI对应表7的图。
图19为表示便携式终端10执行的第三基本处理流程的图。
图20为表示便携式终端10存储的与优先顺序设定好对应关系的UI对应表8的图。
图21为表示显示在便携式终端10的用户接口的屏幕显示例的图。
图中符号的说明
10：便携式终端，      100：电器用品
具体实施方式
下面参照附图对本发明的最佳实方式进行说明。然而，这些说明只不过是一个例子，本发明的技术范围不限于此。
UI变更系统的说明
图1为本发明的最佳实施方式的UI变更系统1的整体图。UI变更系统1由便携式终端1、电器用品100a～c(以下、只以“100”表示)以及发送无线电波信号的无线机器50构成。
如图1的便携式终端10所示，比如，当便携式终端10被用户拿到电器用品100b的周围时，显示在便携式终端10的显示部上的用户接口变更为用于电器用品100b的用户接口。
电器用品100可以是手机、便携式信息终端、计算机(个人电脑)、电视机100a以及电话机，还有，智能手机、网络书籍终端、平板终端、电子书籍终端、便携式音乐播放机、组合音响、内容重放和录像机、打印机、传真机、拷贝机、扫描机以及MFP 100c(多功能周边装置、多功能打印机)等信息家电，或者也可以是电冰箱100b、洗衣机、微波炉、安全门、电饭煲等家用电器。而且，电器用品100也可以是NFC(Near FieldCommunication)标签。
电器用品100最好是能够接收和发送(输入和输出)符合近距离无线通信规格Bluetooth标准等的电波信号。在此例中，电视机100a、MFP 100c具有能够接收和发送Bluetooth的电波信号的设备，而冰箱100b就不具备这样的设备。
无线机器50从电器用品100和便携式终端10接收符合IEEE802.11标准等的无线LAN(Local Area Network)的电波信号使这些终端能够相互进行通信，并具有与公众网路因特网相连接的功能。每个无线机器50具有专有的SSID(Service Set Identifier)。所谓的SSID就是无线LAN的接入点的标识符。
便携式终端10也可以是，例如，手机、便携式信息终端、计算机(个人电脑)、电视机、电话机的分机，还有，智能手机、网络书籍终端、平板终端、电子书籍终端、便携式音乐播放机、遥控器、电子书籍等信息家电。
如图2所示，便携式终端10作为控制部21具备CPU(CentralProcessing Unit)等中央演算处理装置以及RAM(Random Access Memory)和ROM(Read Only Memory)等内存。另外，作为通信部还具备对应有线和无线的通信设备的一部分IEEE802.11等无线LAN设备24。
便携式终端10也可以具备接收GPS(Global Positioning System)信号并确定便携式终端10的物理位置的GPS设备。在此，如后所述，为了检测识别便携式终端10的方向，在便携式终端10的正面(有显示部的面)的不同位置，也可以配置多个设备(图2中，第一GPS设备22和第二GPS设备23)。另外，也可以具备检测便携式终端10的倾斜度的倾斜传感器25。还有，也可以具备实现电子罗盘功能的地磁传感器26。GPS设备和倾斜传感器25以及地磁传感器26可以单独工作，为了提高检测识别方向的精度它们也可以协同工作。
并且，便携式终端10作为通信部也可具备符合Bluetooth标准的无线设备。另外，作为存储部还可具备SSD(Solid State Drive)等。还有，具备显示图像的液晶显示器等显示部和接受来自用户输入的触摸屏等输入部。便携式终端10还可以具备用于拍摄电器用品100和后述的机种名以及标记的摄像机。
便携式终端10的控制部可以执行指定的应用程序，还可以启动应用程序并将其驻留在便携式终端10的内存里。在以下的说明中，所谓的应用程序就是不依赖于电器用品100的种类的一个统一的应用程序，并按照电器用品100的种类变更用户接口的应用程序。也就是说，一个应用程序根据每个电器用品100具有不同的用户接口。但是，也可以是如下的情况：根据电器用品100的种类驻留有不同的多个应用程序，根据指定的条件切换成对应的应用程序，以此变更用户接口。
例如，如图8所示，如果是电视机100a的应用程序，应用程序的用途可以是用于遥控电视机(切换频道的遥控器)的应用程序，如果是冰箱100b的应用程序，应用程序的用途就可以是确认冰箱100b的设定的应用程序或者是说明书的一览表、故障咨询或用于遥控操作冰箱的应用程序。
第一基本处理的流程图
在本处理过程中，便携式终端10具备：电器用品检测识别装置、应用程序驻留装置、用户接口变更装置、作为位置信息存储有物理位置的存储装置、方向检测识别装置、位置信息确定装置以及对象物确定装置。这些装置通过上述的控制部、通信部、存储部、显示部以及输入部等硬件的协同工作实现各自的功能。下面根据流程图对每个装置的功能进行说明。
图3为便携式终端10执行的第一基本处理的流程图。开始，便携式终端10的应用程序驻留装置12将应用程序启动起来并将应用程序驻留在便携式终端10的内存里(步骤S10)。
便携式终端10的电器用品检测识别装置判断是不是检测识别到无线LAN的SSID(步骤S11)。例如，便携式终端10接收设置在家里或办公室的无线机器50所发来的无线LAN的电波信号并判断是不是检测识别到SSID。
在检测识别到无线LAN的SSID时(步骤S11：“YES”)，电器用品检测识别装置读取与接收到的SSID相对应的电器用品一览表(步骤S12)。电器用品一览表是将SSID与在具有该SSID的LAN中可连接的一个以上的电器用品100设定好对应关系的表。该表可以存储在便携式终端10的存储部，也可以向能够与便携式终端10进行通信的服务器提出要求并接收该表，或便携式终端10只接收并读取作为结果的电器用品一览表的数据。在没有检测识别到无线LAN的SSID时(步骤S11：“NO”)，将处理退回本步骤的开始。
其次，便携式终端10的方向检测识别装置对便携式终端10的上面的朝向(a、b、c)进行检测识别(步骤S13)。便携式终端10的上面是图9中(X)所指的面。将便携式终端10的机壳的六面体或者相当于机壳的六面的立体的面，分为上面、下面、正面、背面、右侧面以及左侧面，正面有便携式终端的显示部和输入部，在用户能够自然地阅览显示在显示部的文字的文字方向，文字的上下方向的上边就是上面。
如图5所示，用具有电子罗盘功能的地磁传感器26和倾斜传感器25等检测识别便携式终端10的上面的朝向(X的负方向)。另外，也可以从第一GPS设备22和第二GPS设备23之间的位置信息之差检测识别方向。例如，第一GPS设备22位于便携式终端10的上部，第二GPS设备23位于便携式终端10的下部(两者分开)，并且，当两者位于同一平面上时，根据连接两个GPS设备检测出来的位置坐标(经度、纬度、高度)的方向向量，可以检测识别便携式终端10的上面的朝向。
其次，对象物确定装置确定根据方向检测识别装置确定的方向而确定的延长线路经(步骤S14)。首先，位置信息确定装置根据第一GPS设备22或第二GPS设备23(或两者)确定便携式终端10的物理位置。在图5的例子中是点(XO，YO，ZO)。点(XO，YO，ZO)在一条与方向检测识别装置所确定的方向(a，b，c)平行的线上，可以是便携式终端10的上面的中心点，也可以是便携式终端10的重心。
接下来，对象物确定装置生成通过点(XO，YO，ZO)并具有方向检测识别装置所确定的方向(倾斜方向为a，b，c)的三维直线方程式：a(X-XO)+b(Y-YO)+c(Z-ZO)＝0，并由此确定延长线路径。
其次，对象物确定装置读取先前读取的电器用品一览表内的电器用品100的位置信息(步骤S15)。例如，如图4所示，UI位置对应表存储在便携式终端10里，读取对应的电器用品机种名的位置信息。在此，电器用品100的位置信息不是某一处的点，而是如(X1～X2，Y1～Y2，Z1～Z2)，按照电器用品100的大小具有扩展的平面(区域)。
读取位置信息之后，对象物确定装置判断便携式终端10的上面方向的延长线路径上是否存在电器用品100(步骤S16)。也就是说，对象物确定装置判断所生成的三维直线方程式和电器用品的位置区域(X1～X2，Y1～Y2，Z1～Z2)是否交叉，并以此判断是不是存在符合条件的电器用品100。
当判断便携式终端10的上面方向的延长线路径上存在电器用品100时(步骤S16：“YES”)，确定作为对象物的电器用品100，便携式终端10的用户接口变更装置13从被检测识别的电器用品100的用户接口的名称选择对应的用户接口(步骤S19)。例如，当判断位置区域(X1～X2，Y1～Y2，Z1～Z2)与所生成的三维直线方程式交叉时，判断存在“TV-100”的电器用品机种名，并选择“TV-100用UI”作为用户接口的名称。
当判断便携式终端10的上面方向的延长线路径上不存在电器用品100时(步骤S16：“NO”)，可以考虑用户可能没有使便携式终端10朝向正确的方向。这种情况下，显示选择屏幕以便选择先前读取的电器用品一览表中的电器用品100的用户接口(例如，图21)，并通过用户的手动操作接受电器用品100的用户接口(步骤S18)。根据用户的输入，便携式终端10选择用户接口。
无论哪一种情况，当便携式终端10选择了用户接口时(步骤S16)，用户接口变更装置就将用户接口变更为所选择的用户接口(步骤20)以便用户能够优先查看确认。例如，假设便携式终端10的内存中驻留有TV-100用的应用程序和RZ-001用的应用程序以及电子邮件的应用程序。在这种情况，如果选择了“TV-100用UI”的用户接口的名称，则显示TV-100用的应用程序的用户接口以便用户能够容易查看确认。
而且，在第一基本处理中，尽管步骤S11的处理是便携式终端10检测识别SSID的处理，但是也可以是便携式终端10通过GPS功能检测识别位于指定区域的处理。在这种情况下，用户所指定的指定区域(家里或办公室等)和需要在该指定区域进行检测识别的电器用品100作为电器用品一览对应表设定好对应关系。当便携式终端10位于指定区域时，在该区域从电器用品一览对应表读取一个或一个以上的需要检测识别的电器用品100。
第二基本处理的流程图
在本处理中，如图6所示，便携式终端10具备电器用品检测识别装置11、应用程序驻留装置12、用户接口变更装置13、以及SSID识别装置14。这些装置通过与上述的控制部、通信部、存储部、显示部、以及输入部等硬件的协同工作实现各自的功能。下面根据流程图对每个装置的功能进行说明。
图7为便携式终端10执行的第二基本处理的流程图。开始，便携式终端10的应用程序驻留装置12启动应用程序并将应用程序驻留在便携式终端10的内存里(步骤S100)。
接下来，便携式终端10的SSID识别装置14判断是不是检测识别到无线LAN的SSID(步骤S110)。比如，便携式终端10接收安装在家里或办公室里的无线机器50所发出的无线LAN的电波信号并判断是不是检测识别到SSID。当检测识别到该无线机器50的SSID时，便携式终端10即使不具备GPS功能也能够检测识别在家里或办公室里。
当便携式终端10的SSID识别装置14检测识别到无线LAN的SSID时(步骤S110：“YES”)，接通SSID的标记(flag)(步骤S120)使便携式终端10能够进行无线通信。当便携式终端10的SSID识别装置14没有检测识别到无线LAN的SSID时(步骤S110：“NO”)，循环步骤S110。
本处理是根据下述的理由而设置的。例如，大多数情况不希望用户的家和办公室以外的其他地方的电器用品100的用户接口显示在该用户的便携式终端10上。因为，用于变更电器用品100的设定的用户接口会被毫无相干的人操作。因此，为了将SSID当作安全认证使用，安排了步骤S110的处理。
其次，电器用品检测识别装置11通过接收Bluetooth等近距离通信的电波信号判断是不是检测识别到电器用品100的存在(步骤S130)。例如，用户将便携式终端10拿到电视机100a或MFP100c的周围的情况。电视机100a或MFP100c的电器用品100输出近距离通信的电波信号。当便携式终端10位于该电波到达范围内时，便携式终端10的电器用品检测识别装置11接收电波信号，并自己也发送与接收到的近距离通信相对应的电波信号。于是，按照指定的协议，便携式终端10和电器用品100开始进行通信，由此便携式终端10检测识别电器用品100。
例如，如图10所示，假设用近距离通信接收到的电波的种类和电器用品的机种名以及用户接口的名称作为UI对应表1已设定好对应关系，且该UI对应表1已存储在便携式终端10里。在这种情况，当作为电器用品100的接收电波，接收到器械ID“PIN号555”时，检测识别电器用品100的机种名为“TV-100”。
当电器用品检测识别装置11检测识别到电器用品100时(步骤S130：“YES”)，将处理转到步骤S150。当电器用品检测识别装置11没有检测识别到电器用品100时(步骤S130：“NO”)，将处理转到步骤S140。
其次，电器用品检测识别装置11启动便携式终端10的摄像机，并根据拍摄的图像(摄影图像)来判断是否检测识别到电器用品100(步骤S140)。
例如，如图11所示，假设摄影图像的种类与电器用品的机种名以及用户接口的名称作为UI对应表2已设定好对应关系，且该UI对应表2已存储在便携式终端10里。假设在这种情况，便携式终端10的摄像机拍摄到与摄影图像相同或类似的图像。在这种情况，根据众所周知的判别图像的算法来判断是不是拍摄到与摄影图像相同的电器用品100。当拍摄到与摄影图像相同的电器用品100时，与图11中的UI对应表2进行对比，并检测识别电器用品100的机种名为“TV-100”等。
如图14所示，作为电视机100a的摄影范围，如图中的摄影范围70，可以拍摄整个电视机100a并以此检测识别电视机100a，也可以将机种名的一部分“TV-100”72作为摄影范围71并以此检测识别电视机100a。
在这种情况下，如图12所示，假设通过摄影检测识别的文字的种类(检测识别的文字)与电器用品的机种名以及用户接口的名称，作为对应表3已设定好对应关系，且该UI对应表3已存储在便携式终端10里。而且，检测识别文字不仅包含机种名还可以包含厂商名，也可以是附加在序列号、MAC(Media Access Control)网址、IP网址以及电器用品100上的任意文字。
还有，如图15所示，被检测识别的部分73可以是标记74。所谓的标记就是不能作为文字来检测识别的图形、记号以及图像等。图15中所示的是QR代码，也可以是像这样的二维代码。在这种情况也同样，通过摄影检测识别的标记的种类与电器用品的机种名以及用户接口的名称，作为表已设定好对应关系，且该表已存储在便携式终端10里。
当电器用品检测识别装置11根据摄影图像检测识别到电器用品100时(步骤S140：“YES”)，将处理转到步骤S150。当电器用品检测识别装置11根据摄影图像没有检测识别到电器用品100时(步骤S140：“NO”)，将处理转到步骤S110。这种情况下，说明便携式终端10的周围不存在电器用品100，所以反复进行步骤S110至S140的处理。
其次，便携式终端10的用户接口变更装置13根据被检测识别的电器用品100的用户接口的名称，选择对应的用户接口(步骤S150)。例如，当检测识别到“TV-100”的电器用品的机种名时，就选择“TV-100用UI”作为用户接口的名称。
当选择了用户接口时(步骤S150)，用户接口变更装置13就将用户接口变更为所选择的用户接口(步骤S160)以便用户能够优先查看确认。例如，假设便携式终端10的内存中驻留有TV-100用的应用程序和RZ-001用的应用程序以及电子邮件的应用程序。在这种情况，如果作为用户接口名称选择了“TV-100用UI”，则显示TV-100用的应用程序的用户接口以便用户能够容易查看确认。
所谓用户能够优先查看确认被变更的用户接口，就是在该时刻用户查看便携式终端10的显示部时能够容易确认被变更的用户接口的状态(例如，图8所示)。
图9为表示便携式终端10的摄像机的位置的图。作为一个例子，可以想象将便携式终端10当作电器用品100的遥控器来使用的情况。在这种情况下，从(X)的方向观察便携式终端10时容易看得出在便携式终端10的机壳的上面(将六面体分为上面、下面、正面、背面、右侧面以及左侧面，并认为在正面有便携式终端的显示部和输入部。所谓上面的“上”就是在能够很自然地阅览显示在显示部的文字的文字方向，文字的上部作为“上”)安装摄像机200是最佳的实施方式。之所以这么说，是因为当用户拿着便携式终端10时，摄像机200所在的便携式终端10的机壳的上面大约与显示部和输入部垂直，而且朝向用户自然地拿着便携式终端10时的用户的前方方向，所以上面成为容易拍摄电器用品100的面。
其他实施例
SSID与连接在具有该SSID的LAN内的电器用品100的机种名可以预先设定好对应关系并存储在服务器里。也就是说，当便携式终端10在步骤S110检测识别到SSID时，向该服务器咨询与该SSID相对应的电器用品100的种类。服务器在通知电器用品100的种类的同时，发送从如图10至图12所示的设定好机种名、检测识别对象(近距离接收电波、摄影图像、检测识别文字)、用户接口的名称的对应关系的数据。在这种情况下，因为不需要在便携式终端10存储如图10至图12所示的表，所以需要发送该数据。并且，因为用于检测识别的电器用品100的种类被SSID所限制，所以会提高电器用品的检测识别率并缩短检测识别所需的时间。
还有，便携式终端10从服务器接收数据的时机可以是，例如，启动摄像机的时候，也可以是从电器用品100接收近距离通信的电波信号的时候。通过在这种时候接收数据或启动摄像机，可以不必经常对电器用品100进行检测识别。
其他实施方式
接下来，对其他实施方式进行说明。当便携式终端10接收到GPS的电波信号或接收到接入点SSID的电波信号时，变更电器用品100的用户接口。在这种情况，便携式终端有时会几乎同时检测识别到两个或两个以上的电器用品100。下面，作为其他实施方式对这样的处理进行说明。
图19为便携式终端10执行的第三基本处理的流程图。开始，便携式终端10的应用程序驻留装置12启动按每个电器用品100具有不同用户接口的应用程序，并将应用程序驻留在便携式终端10的内存里(步骤S200)。
其次，电器用品检测识别装置11通过接收电波信号，判断是不是检测识别到电器用品100(步骤S210)。也就是说，电器用品检测识别装置11判断是否接收到位置信息GPS的电波信号或接入点SSID的电波信号。当判断接收到的时候(步骤S210：“YES”)，将处理转到步骤S220，当判断没有接收到的时候(步骤S210：“NO”)，循环本处理步骤。
电器用品检测识别装置11，当判断接收到GPS的电波信号时，根据接收到的电波信号计算便携式终端10的纬度和经度。其次，电器用品检测识别装置11参照如图16所示的设定好电器用品机种名和位置信息(经度、纬度)以及用户接口的名称的对应关系的UI对应表5。该UI对应表5存储在便携式终端10里。电器用品检测识别装置11根据算出的纬度和经度，并通过参照UI对应表5，选择用户接口。
电器用品检测识别装置11，当判断接收到接入点SSID的电波信号时，参照如图17所示的设定好电器用品机种名和SSID以及用户接口的名称的对应关系的UI对应表6。该UI对应表6存储在便携式终端10里。电器用品检测识别装置11根据SSID，并通过参照UI对应表6，选择用户接口。
并且，电器用品检测识别装置11也可以在上述处理的基础上，与第二基本处理一样，根据摄影图像检测识别电器用品100。
在这里，假设电器用品检测识别装置11判断检测识别到的电器用品为一个(步骤S220：“NO”)，则在步骤S240中，用户接口变更装置13将用户接口变更为电器用品检测识别装置11选择的用户接口
例如，当通过GPS检测识别到电器用品100，而且，通过SSID的电波信号检测识别到电器用品100时，电器用品检测识别装置11有时会检测识别到多个电器用品100。在这种情况下，步骤S220作为“YES”将处理转到步骤S230。
假设电器用品检测识别装置11判断检测识别到的电器用品为两个或两个以上(步骤S220：“YES”)，在两个或两个以上的用户接口中确定应该优先显示哪一个的优先顺序(步骤S230)。也就是说，电器用品检测识别装置11，当判断检测识别到多个电器用品100时，参照如图20所示的设定好优先顺序和电器用品的机种名以及用户接口的名称的对应关系的UI对应表8。该表存储在便携式终端10里。电器用品检测识别装置11根据接收到的电波信号(GPS或SSID)或摄影图像，基于图10、图11、图12、图13、图16、图17以及图18的各个表，判断电器用品机种名。然后，根据该电器用品机种名，并通过参照图20的UI对应表8，判断优先顺序。
例如，当几乎同时检测识别到“TV-100”、“RZ-001”以及“MP500”等多个电器用品100时，根据UI对应表8的优先顺序，按第一“RZ-001”、第二“TV-100”、第三“MP500”的顺序确定优先顺序。
其次，便携式终端10的用户接口变更装置13依次显示被优先的电器用品100的用户接口(步骤S250)。在此，所谓依次显示用户接口就是按确定的优先顺序显示用户接口。如下面所述，当在便携式终端10上满足了规定的条件时，顺序就变更为下一个用户接口。
例如，当对显示在便携式终端10的第一用户接口进行指定的操作时，变更为下一个的第二用户接口。这种情况下，预先存储好对第一用户接口用户输入的项目(选择指定的图标或键输入等)，当结束该输入项目的输入时，变更为第二用户接口。
另外，当对显示在便携式终端10的第一用户接口进行规定的显示时，变更为下一个的第二用户接口。这种情况下，预先存储好作为第一用户接口所显示的项目(显示指定的图标或切换窗口)，当结束该显示项目的显示时，变更为第二用户接口。
还有，也可以在显示在便携式终端10的第一用户接口显示了规定的时间之后变更为下一个的第二用户接口。
另外，如图20所示的UI对应表8的优先顺序，也可以根据从操作便携式终端10的用户输入履历的学习而确定。也就是说，当检测识别到多个电器用品100时，便携式终端10显示如图21所示的屏幕图像80。此时，假设用户从多个电器用品100中进行了一个电器用品“TV-100”的选择操作后，进行了下一个电器用品“MP500”的选择操作。在这种情况，便携式终端10学习第一电器用品“TV-100”，第二电器用品“MP500”作为优先顺序。
并且，该优先顺序不限于上述的时间上的优先顺序，如图21所示，也可以适用于显示在屏幕图像80的位置。也就是说，也可以从便携式终端10的显示部的上方至下方按优先顺序高的顺序进行显示。
而且，如图20所示的UI对应表8也可以存储在与便携式终端10可通信连接的服务器中。这种情况下，便携式终端10通过向服务器咨询UI对应表8的优先顺序确定优先顺序。
另外，如图18的UI对应表7所示，当检测识别到多个用户接口时，也可以根据检测识别时的日期和时间(星期、日期、时间)，选择和变更优先显示的用户接口。例如，图18的例子中，当周六下午7点左右检测识别到多个电器用品100时，根据表优先“RZ-001”的用户接口。不只是星期，也可以是日期的指定。
另外，也可以根据检测识别时的气温和湿度选择优和变更先显示的用户接口。这个方法最适合电器用品100为空调等的情况。
图21为当便携式终端10检测识别到多个电器用品100时显示在便携式终端10的屏幕图像80，显示这样的选择屏幕以便能够从多个电器用品100中选择某一个用户接口。在此，如提示82，也可以同时显示需要显示的用户接口的推荐信息。
而且，用户接口也可以根据摄影图像里拍摄到的人物、人物的脸、人物的数量，动物、动物的数量、植物、植物的数量以及指定的物体进行变更。例如，当检测识别到被拍摄的人物的脸(如，自己的脸)使用户接口变更为数码相机的用户接口时，可以对该人物(自己)进行远程拍摄。
上述的装置和功能通过计算机(包括CPU、信息处理装置以及各种终端)读取指定的程序并执行该程序而得到实现。应用程序以记录在软磁盘、CD(CD-ROM等)、DVD(DVD-ROM、DVD-RAM等)等计算机能够读取的记录媒体上的形式提供。在这种情况，计算机从该记录媒体读取应用程序并转送到内部存储装置或外部存储装置存储起来，然后执行该应用程序。还有，也可以将该程序事先记录在磁盘、光盘以及光磁盘等存储装置(记录媒体)里，然后通过通信回路从该存储装置提供给计算机。
以上，对本发明的实施方式进行了说明，但是本发明不限于上述的这些实施方式。另外，本发明的实施方式中所记载的效果只不过是列举了本发明所产生的最佳效果，本发明的效果不受本发明的实施方式中所记载的内容的限制。

Claims (13)

1.一种便携式终端，包括：
电器用品检测识别装置，根据摄影图像或电波信号检测识别存在于周围的电器用品；
应用程序驻留装置，用于启动与所述电器用品相关且对每个该电器用品具有不同的用户接口的应用程序，并将其驻留在该便携式终端的内存里；以及
用户接口变更装置，当所述电器用品检测识别装置检测识别到指定的电器用品时，将显示在该便携式终端的显示部以及输入部的用户接口变更为所述应用程序驻留装置驻留在内存里的应用程序中与检测识别到的所述指定的电器用品相对应的应用程序的用户接口，以便查看该便携式终端的用户能够进行确认。
2.根据权利要求1所述的便携式终端，其中，所述电器用品检测识别装置通过接收GPS电波信号、SSID电波信号以及近距离无线信号中的至少一种信号检测识别所述电器用品。
3.根据权利要求1所述的便携式终端，还包括：
存储装置，用于存储作为位置信息的所述电器用品的物理位置；
方向检测识别装置，用于检测识别该便携式终端的上面的朝向；
位置信息确定装置，用于确定该便携式终端的物理位置；以及
对象物确定装置，用于确定在存储有位置信息的所述电器用品中，存在于该便携式终端的上面方向的延长线路径上的电器用品，
其中，所述用户接口变更装置将用户接口变更为与所述对象物确定装置所确定的电器用品相对应的应用程序的用户接口。
4.根据权利要求3所述的便携式终端，其中，所述方向检测识别装置根据由两个或两个以上的位置检测识别部所检测识别的位置信息之差，检测识别该便携式终端的上面的朝向。
5.根据权利要求3所述的便携式终端，其中，所述方向检测识别装置通过电子罗盘和倾斜传感器中的至少一种检测识别该便携式终端的上面的朝向。
6.根据权利要求1所述的便携式终端，还具备通过接收无线电波信号识别接入点SSID的SSID识别装置，
其中，只有在所述SSID识别装置识别到指定的SSID时，所述电器用品检测识别装置根据所述指定的电器用品输出的近距离无线信号，执行检测识别电器用品的处理。
7.根据权利要求1所述的便携式终端，其中，所述电器用品检测识别装置根据通过安装在该便携式终端的机壳的上面的摄像机拍摄电器用品而得到的摄影图像检测识别所述电器用品。
8.根据权利要求7所述的便携式终端，其中，所述电器用品检测识别装置在通过该便携式终端的摄像机检测识别该电器用品时，根据拍摄附加在该电器用品上的标记而得到的摄影图像检测识别所述电器用品。
9.根据权利要求2所述的便携式终端，其中，所述电器用品检测识别装置将由所述SSID识别装置识别到的SSID发送到可通信连接的服务器并接收与该SSID设定好对应关系且用于根据摄影图像或电波信号检测识别电器用品的数据，以此对所述电器用品进行检测识别。
10.根据权利要求1所述的便携式终端，其中，所述用户接口变更装置根据检测识别时的日期和时间，将用户接口变更为与所述指定的电器用品中的一个电器用品相对应的应用程序的用户接口。
11.根据权利要求1所述的便携式终端，其中，所述用户接口变更装置根据预先规定的优先顺序，将用户接口变更为与所述指定的电器用品中的一个电器用品相对应的应用程序的用户接口。
12.一种变更用户接口的方法，包括：
电器用品检测识别步骤，根据摄影图像或电波信号检测识别存在于便携式终端周围的电器用品；
应用程序驻留步骤，启动与所述电器用品相关且对每个电器用品具有不同用户接口的应用程序，并将其驻留在该便携式终端的内存里；以及用户接口变更步骤，在所述电器用品检测识别步骤中，当检测识别到指定的电器用品时，将显示在该便携式终端的显示部以及输入部的用户接口变更为驻留在所述内存里的应用程序中与检测识别到的所述指定的电器用品相对应的应用程序的用户接口，以便查看该便携式终端的用户能够进行确认。
13.一种变更用户接口的程序，用于在便携式终端上执行如下步骤：电器用品检测识别步骤，根据摄影图像或电波信号检测识别存在于便携式终端周围的电器用品；
应用程序驻留步骤，启动与所述电器用品相关且对每个电器用品具有不同用户接口的应用程序，并将其驻留在该便携式终端的内存里；以及
用户接口变更步骤，在所述电器用品检测识别步骤中，当检测识别到指定的电器用品时，将显示在该便携式终端的显示部以及输入部的用户接口变更为驻留在所述内存里的应用程序中与检测识别到的所述指定的电器用品相对应的应用程序的用户接口，以便查看该便携式终端的用户能够进行确认。
CN201110243251.9A 2010-12-16 2011-08-23 变更用户接口的便携式终端、方法 Active CN102567240B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010280674 2010-12-16
JP2010-280674 2010-12-16

Publications (2)

Publication Number Publication Date
CN102567240A true CN102567240A (zh) 2012-07-11
CN102567240B CN102567240B (zh) 2016-08-10

Family

ID=46233631

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110243251.9A Active CN102567240B (zh) 2010-12-16 2011-08-23 变更用户接口的便携式终端、方法

Country Status (3)

Country Link
US (1) US8952779B2 (zh)
JP (1) JP5620287B2 (zh)
CN (1) CN102567240B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103634460A (zh) * 2012-08-27 2014-03-12 Lg电子株式会社 移动终端及其控制方法
CN104035656A (zh) * 2013-03-04 2014-09-10 霍尼韦尔国际公司 用户界面和方法
CN104065654A (zh) * 2014-06-12 2014-09-24 苏州佳世达电通有限公司 定位系统
CN104521185A (zh) * 2012-08-07 2015-04-15 松下知识产权经营株式会社 信息终端、信息显示方法、控制程序及服务器
CN105204742A (zh) * 2015-09-28 2015-12-30 小米科技有限责任公司 电子设备的控制方法、装置及终端
CN110691015A (zh) * 2013-09-27 2020-01-14 搜诺思公司 多家庭支持
CN111476988A (zh) * 2014-07-25 2020-07-31 7哈格斯实验室 确定和控制待控设备的方法及该方法的装置、使用和系统
CN111602185A (zh) * 2018-01-29 2020-08-28 谷歌有限责任公司 基于方位的位置指示和设备控制

Families Citing this family (72)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101276861B1 (ko) 2011-07-27 2013-06-18 엘지전자 주식회사 가전제품 및 이를 포함하여 이루어지는 온라인 시스템
KR101276857B1 (ko) 2011-07-27 2013-06-18 엘지전자 주식회사 가전제품 및 이를 포함하여 이루어지는 온라인 시스템
KR101819510B1 (ko) 2011-08-22 2018-01-17 엘지전자 주식회사 세탁장치 및 이를 포함하여 이루어지는 온라인 시스템
JP5647966B2 (ja) * 2011-10-07 2015-01-07 株式会社オプティム 端末修復方法、端末修復システム、及び、端末修復システム用プログラム
JP5734810B2 (ja) * 2011-11-14 2015-06-17 株式会社東芝 機器制御装置、その方法、及び、そのプログラム
JP6056002B2 (ja) * 2012-08-08 2017-01-11 パナソニックＩｐマネジメント株式会社 洗濯機通信システム
KR20140032262A (ko) 2012-09-06 2014-03-14 엘지전자 주식회사 가전제품 및 이를 포함하여 이루어지는 온라인 시스템
KR101797493B1 (ko) 2012-09-06 2017-11-15 엘지전자 주식회사 가전제품 및 이를 포함하여 이루어지는 온라인 시스템
AU2013351227B2 (en) * 2012-11-29 2019-01-03 Vorwerk & Co. Interholding Gmbh Food processor
MX2015006623A (es) 2012-11-29 2015-08-05 Vorwerk Co Interholding Aparato de cocina.
DE102013113083A1 (de) 2012-11-29 2014-06-05 Vorwerk & Co. Interholding Gmbh Elektrisch betriebene Küchenmaschine
FR3000242A1 (fr) * 2012-12-21 2014-06-27 France Telecom Procede de gestion d’un systeme d’information geographique adapte pour etre utilise avec au moins un dispositif de pointage, avec creation d’associations entre objets numeriques.
WO2014103307A1 (ja) * 2012-12-28 2014-07-03 パナソニック株式会社 制御方法
WO2014103304A1 (ja) * 2012-12-28 2014-07-03 パナソニック株式会社 制御方法
JP6157588B2 (ja) * 2013-03-21 2017-07-05 三菱電機株式会社 遠隔制御システム、端末装置、遠隔制御方法及びプログラム
JP6020353B2 (ja) * 2013-05-29 2016-11-02 コニカミノルタ株式会社 情報処理装置、画像形成装置、遠隔操作方法、遠隔制御方法、遠隔操作プログラムおよび遠隔制御プログラム
FR3007860A1 (fr) * 2013-06-27 2015-01-02 France Telecom Procede d'interaction entre un objet numerique, representatif d'au moins un objet reel ou virtuel localise dans un perimetre geographique distant, et un dispositif de pointage local
DE102013219053B4 (de) * 2013-09-23 2021-06-24 BSH Hausgeräte GmbH Verfahren zum Bereitstellen einer graphischen Benutzeroberfläche für einen Benutzer eines Haushaltsgeräts mittels eines tragbaren Kommunikationsendgeräts, Computerprogrammprodukt und tragbares Kommunikationsendgerät
US9613202B2 (en) * 2013-12-10 2017-04-04 Dell Products, Lp System and method for motion gesture access to an application and limited resources of an information handling system
US9772612B2 (en) 2013-12-11 2017-09-26 Echostar Technologies International Corporation Home monitoring and control
US9900177B2 (en) 2013-12-11 2018-02-20 Echostar Technologies International Corporation Maintaining up-to-date home automation models
US9769522B2 (en) 2013-12-16 2017-09-19 Echostar Technologies L.L.C. Methods and systems for location specific operations
JP6484914B2 (ja) * 2014-01-14 2019-03-20 船井電機株式会社 情報処理機器および操作システム
US9429925B2 (en) * 2014-01-15 2016-08-30 Haier Us Appliance Solutions, Inc. Method for operating an appliance and a refrigerator appliance
US9163441B1 (en) * 2014-03-14 2015-10-20 John Taylor, III Emergency entry prevention system
US9723393B2 (en) 2014-03-28 2017-08-01 Echostar Technologies L.L.C. Methods to conserve remote batteries
JP6378766B2 (ja) 2014-07-15 2018-08-22 マクセル株式会社 携帯端末装置
US9621959B2 (en) 2014-08-27 2017-04-11 Echostar Uk Holdings Limited In-residence track and alert
US9824578B2 (en) * 2014-09-03 2017-11-21 Echostar Technologies International Corporation Home automation control using context sensitive menus
US10310704B2 (en) * 2014-09-18 2019-06-04 Ademco Inc. System and method to have location based personalized UI updates on mobile app for connected users in security, video and home automation applications
US9989507B2 (en) 2014-09-25 2018-06-05 Echostar Technologies International Corporation Detection and prevention of toxic gas
KR101770240B1 (ko) * 2014-09-29 2017-08-22 삼성전자주식회사 Ui 제공을 위한 디스플레이 장치, 시스템 및 그 제공 방법
US9511259B2 (en) 2014-10-30 2016-12-06 Echostar Uk Holdings Limited Fitness overlay and incorporation for home automation system
US9983011B2 (en) 2014-10-30 2018-05-29 Echostar Technologies International Corporation Mapping and facilitating evacuation routes in emergency situations
US10791444B2 (en) * 2014-12-02 2020-09-29 Carrier Corporation Capturing user intent when interacting with multiple access controls
WO2016089832A1 (en) 2014-12-02 2016-06-09 Carrier Corporation Access control system with virtual card data
CN104506397B (zh) * 2014-12-09 2018-08-31 深圳市共进电子股份有限公司 智能设备接入局域网的方法及系统
US9473892B2 (en) * 2014-12-11 2016-10-18 Whirlpool Corporation Appliances that trigger applications on consumer devices based on user proximity to appliance
US9967614B2 (en) 2014-12-29 2018-05-08 Echostar Technologies International Corporation Alert suspension for home automation system
US9729989B2 (en) 2015-03-27 2017-08-08 Echostar Technologies L.L.C. Home automation sound detection and positioning
US9948477B2 (en) 2015-05-12 2018-04-17 Echostar Technologies International Corporation Home automation weather detection
US9946857B2 (en) 2015-05-12 2018-04-17 Echostar Technologies International Corporation Restricted access for home automation system
US9632746B2 (en) 2015-05-18 2017-04-25 Echostar Technologies L.L.C. Automatic muting
CN105093949A (zh) * 2015-07-13 2015-11-25 小米科技有限责任公司 一种控制设备的方法及装置
US9960980B2 (en) 2015-08-21 2018-05-01 Echostar Technologies International Corporation Location monitor and device cloning
CN105160854B (zh) * 2015-09-16 2019-01-11 小米科技有限责任公司 设备控制方法、装置和终端设备
US9996066B2 (en) 2015-11-25 2018-06-12 Echostar Technologies International Corporation System and method for HVAC health monitoring using a television receiver
KR102409903B1 (ko) * 2015-12-09 2022-06-16 삼성전자주식회사 사용자 정보를 제공하는 전자 장치 및 방법
US10101717B2 (en) 2015-12-15 2018-10-16 Echostar Technologies International Corporation Home automation data storage system and methods
US9798309B2 (en) 2015-12-18 2017-10-24 Echostar Technologies International Corporation Home automation control based on individual profiling using audio sensor data
US10091017B2 (en) 2015-12-30 2018-10-02 Echostar Technologies International Corporation Personalized home automation control based on individualized profiling
US10060644B2 (en) 2015-12-31 2018-08-28 Echostar Technologies International Corporation Methods and systems for control of home automation activity based on user preferences
US10073428B2 (en) 2015-12-31 2018-09-11 Echostar Technologies International Corporation Methods and systems for control of home automation activity based on user characteristics
US9628286B1 (en) 2016-02-23 2017-04-18 Echostar Technologies L.L.C. Television receiver and home automation system and methods to associate data with nearby people
CN109074690A (zh) 2016-04-11 2018-12-21 开利公司 在与多个访问控制装置交互时捕获通信用户意图
CN109074692A (zh) * 2016-04-11 2018-12-21 开利公司 在与多个访问控制装置交互时捕获行为用户意图
US11164411B2 (en) 2016-04-11 2021-11-02 Carrier Corporation Capturing personal user intent when interacting with multiple access controls
US9882736B2 (en) 2016-06-09 2018-01-30 Echostar Technologies International Corporation Remote sound generation for a home automation system
US10294600B2 (en) 2016-08-05 2019-05-21 Echostar Technologies International Corporation Remote detection of washer/dryer operation/fault condition
US10049515B2 (en) 2016-08-24 2018-08-14 Echostar Technologies International Corporation Trusted user identification and management for home automation systems
KR102316024B1 (ko) * 2017-03-02 2021-10-26 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 사용자 인터페이스 표시 방법
CN110382806B (zh) * 2017-03-02 2022-06-07 开利公司 具有动态性能调谐的门禁系统
JP2018182425A (ja) * 2017-04-06 2018-11-15 文化シヤッター株式会社 遠隔操作システム
RU2673464C1 (ru) * 2017-10-06 2018-11-27 Дмитрий Владимирович Клепиков Способ распознавания и управления бытовой техникой мобильным телефоном и мобильный телефон для его реализации
US10559194B2 (en) * 2018-02-23 2020-02-11 Samsung Electronics Co., Ltd. System and method for providing customized connected device functionality and for operating a connected device via an alternate object
JP2020043471A (ja) * 2018-09-11 2020-03-19 本田技研工業株式会社 遠隔操作装置、及び遠隔操作システム
JP7369611B2 (ja) 2019-01-08 2023-10-26 東芝ライフスタイル株式会社 遠隔操作端末、プログラム、遠隔制御装置及び遠隔操作システム
US11626010B2 (en) * 2019-02-28 2023-04-11 Nortek Security & Control Llc Dynamic partition of a security system
US11541305B2 (en) * 2020-09-28 2023-01-03 Snap Inc. Context-sensitive remote eyewear controller
JP7061326B1 (ja) 2021-05-10 2022-04-28 ガレージバンク株式会社 情報処理装置、情報処理システムおよび情報処理方法
US20230050526A1 (en) * 2021-08-10 2023-02-16 International Business Machines Corporation Internet of things configuration using eye-based controls
JP2024007209A (ja) * 2022-07-05 2024-01-18 キヤノン株式会社 情報処理装置、その制御方法、プログラム、及び画像形成装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007112763A1 (en) * 2006-04-03 2007-10-11 Aureola Swedish Engineering Ab Method and apparatus for cooling and ventilation
CN100474938C (zh) * 2002-09-27 2009-04-01 松下电器产业株式会社 遥控装置
JP2010074782A (ja) * 2008-09-22 2010-04-02 Optim Corp 携帯機器および実行制御方法

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001231083A (ja) 2000-02-17 2001-08-24 Mitsubishi Electric Corp 機器の自動制御システム
AU2003900055A0 (en) * 2003-01-06 2003-01-23 Concept Development Pty Ltd A method and system of web site construction
CN1768508A (zh) * 2003-04-04 2006-05-03 皇家飞利浦电子股份有限公司 发现无线网络中最近的设备和服务
JP2005065118A (ja) * 2003-08-19 2005-03-10 Hitachi Ltd リモコン機能付き携帯端末及びリモコンサーバ
JP2005072764A (ja) * 2003-08-21 2005-03-17 Hitachi Ltd 機器制御システムとそのための装置及び機器制御方法
KR100580648B1 (ko) * 2004-04-10 2006-05-16 삼성전자주식회사 3차원 포인팅 기기 제어 방법 및 장치
KR100809395B1 (ko) 2005-12-08 2008-03-05 한국전자통신연구원 원격 제어 기능을 구비한 휴대 단말 장치 및 이를 이용한원격 제어 방법
JP2007324926A (ja) * 2006-05-31 2007-12-13 Toshiba Corp 通信装置
JP2008306255A (ja) * 2007-06-05 2008-12-18 Funai Electric Co Ltd 入力切換え装置
DE102008021160A1 (de) * 2008-04-28 2009-10-29 Beckhoff Automation Gmbh Fernbedienung
US9014685B2 (en) * 2009-06-12 2015-04-21 Microsoft Technology Licensing, Llc Mobile device which automatically determines operating mode
US8285248B2 (en) * 2010-02-26 2012-10-09 Thl Holding Company, Llc Multi-function adjunct device for use with a handheld wireless communication device
US20110298581A1 (en) * 2010-06-08 2011-12-08 Wei Hsu Universal remote controller
US20120068857A1 (en) * 2010-09-22 2012-03-22 Apple Inc. Configurable remote control
US8937534B2 (en) * 2010-12-08 2015-01-20 At&T Intellectual Property I, L.P. Remote control of electronic devices via mobile device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100474938C (zh) * 2002-09-27 2009-04-01 松下电器产业株式会社 遥控装置
WO2007112763A1 (en) * 2006-04-03 2007-10-11 Aureola Swedish Engineering Ab Method and apparatus for cooling and ventilation
JP2010074782A (ja) * 2008-09-22 2010-04-02 Optim Corp 携帯機器および実行制御方法

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104521185A (zh) * 2012-08-07 2015-04-15 松下知识产权经营株式会社 信息终端、信息显示方法、控制程序及服务器
CN104521185B (zh) * 2012-08-07 2018-03-30 松下知识产权经营株式会社 信息终端、信息显示方法、计算机可读记录介质及服务器
CN105913643B (zh) * 2012-08-27 2019-08-02 Lg电子株式会社 移动终端及其控制方法
US9844096B2 (en) 2012-08-27 2017-12-12 Lg Electronics Inc. Mobile terminal and controlling method thereof
CN103634460A (zh) * 2012-08-27 2014-03-12 Lg电子株式会社 移动终端及其控制方法
CN103634460B (zh) * 2012-08-27 2016-06-22 Lg电子株式会社 移动终端及其控制方法
CN105913643A (zh) * 2012-08-27 2016-08-31 Lg电子株式会社 移动终端及其控制方法
CN104035656A (zh) * 2013-03-04 2014-09-10 霍尼韦尔国际公司 用户界面和方法
CN110691015B (zh) * 2013-09-27 2021-12-03 搜诺思公司 多家庭支持
CN110691015A (zh) * 2013-09-27 2020-01-14 搜诺思公司 多家庭支持
US11494060B2 (en) 2013-09-27 2022-11-08 Sonos, Inc. Multi-household support
US11829590B2 (en) 2013-09-27 2023-11-28 Sonos, Inc. Multi-household support
CN104065654A (zh) * 2014-06-12 2014-09-24 苏州佳世达电通有限公司 定位系统
CN111476988A (zh) * 2014-07-25 2020-07-31 7哈格斯实验室 确定和控制待控设备的方法及该方法的装置、使用和系统
CN111476988B (zh) * 2014-07-25 2022-05-10 7哈格斯实验室 确定和控制待控设备的方法及该方法的装置、使用和系统
WO2017054356A1 (zh) * 2015-09-28 2017-04-06 小米科技有限责任公司 电子设备的控制方法、装置及终端
CN105204742A (zh) * 2015-09-28 2015-12-30 小米科技有限责任公司 电子设备的控制方法、装置及终端
CN111602185A (zh) * 2018-01-29 2020-08-28 谷歌有限责任公司 基于方位的位置指示和设备控制
US11054918B2 (en) 2018-01-29 2021-07-06 Google Llc Position-based location indication and device control
CN111602185B (zh) * 2018-01-29 2022-04-01 谷歌有限责任公司 基于方位的位置指示和设备控制

Also Published As

Publication number Publication date
JP2012142907A (ja) 2012-07-26
US20120154108A1 (en) 2012-06-21
CN102567240B (zh) 2016-08-10
US8952779B2 (en) 2015-02-10
JP5620287B2 (ja) 2014-11-05

Similar Documents

Publication Publication Date Title
CN102567240A (zh) 变更用户接口的便携式终端、方法以及程序
EP3208700B1 (en) Iot device, mobile terminal and method for controlling the iot device with vibration pairing
JP5649681B2 (ja) 通信装置
CN110034986B (zh) 在家庭网络系统中用于内容备份的装置和方法
WO2011065007A1 (ja) 携帯型通信装置、通信方法、集積回路、プログラム
WO2010150505A1 (ja) 通信装置
WO2010073732A1 (ja) 通信装置
CN101996145B (zh) 用于产生或者使用交互作用活动信息的方法和装置
US20230284000A1 (en) Mobile information terminal, information presentation system and information presentation method
CA2894937C (en) Intercommunication methods and devices based on digital networks
CN106358064A (zh) 控制电视机的方法及设备
CN104904191A (zh) 移动装置与用于建立无线链路的方法
US9332172B1 (en) Terminal device, information display system and method of controlling therefor
EP2620869B1 (en) Portable terminal, method, and program of changing user interface
CN106301946A (zh) 设备标识方法及装置
KR101204276B1 (ko) 유저 인터페이스를 변경하는 휴대단말, 방법 및 프로그램
CN105630286A (zh) 图标排列方法及装置
CN109417463A (zh) 确定需要传输的pucch的方法和装置
US20220276822A1 (en) Information processing apparatus and information processing method
JP6310624B1 (ja) コンピュータシステム、設定方法及びプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant