JP2010041344A - Household electrical appliance control system - Google Patents

Household electrical appliance control system Download PDF

Info

Publication number
JP2010041344A
JP2010041344A JP2008201371A JP2008201371A JP2010041344A JP 2010041344 A JP2010041344 A JP 2010041344A JP 2008201371 A JP2008201371 A JP 2008201371A JP 2008201371 A JP2008201371 A JP 2008201371A JP 2010041344 A JP2010041344 A JP 2010041344A
Authority
JP
Japan
Prior art keywords
home appliance
priority
information
appliance control
home
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008201371A
Other languages
Japanese (ja)
Other versions
JP5081093B2 (en
Inventor
Takeaki Suenaga
健明 末永
Norio Ito
典男 伊藤
Akiyoshi Ohara
明美 大原
Ryuji Kitaura
竜二 北浦
Yoshiaki Ogisawa
義昭 荻澤
Yasuaki Tokuge
靖昭 徳毛
Masahiro Shioi
正宏 塩井
Osamu Inoue
理 井上
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2008201371A priority Critical patent/JP5081093B2/en
Publication of JP2010041344A publication Critical patent/JP2010041344A/en
Application granted granted Critical
Publication of JP5081093B2 publication Critical patent/JP5081093B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Computer And Data Communications (AREA)
  • Selective Calling Equipment (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To raise operability to household electrical appliances. <P>SOLUTION: Distance to be a criterion for constructing a user interface is acquired (a step S01). Next, presence/absence of a new piece of household electrical appliance information is determined, when there is the new piece of household electrical appliance information, pieces of household electrical appliance information from each of the household electrical appliances connected to a network from a household electrical appliance information acquisition part are acquired in a step S02 to progress to a step S03. When there is no new piece of household electrical appliance information to be updated, the step S02 is passed through to progress to the step S03. In the step S03, priority of information to be displayed on a display part is determined based on determination information and the household electrical appliance information. Next, the constructed interface is displayed on the display part based on the priority. Next, whether or not there is change of distance to the household electrical appliances is determined, when there is the change of distance, the step returns to the step S01, the above processing for constructing a new interface is performed, and when there is no change of the distance, the processing is terminated. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、家電機器制御システムに関し、特にネットワークに接続された電気製品等のネットワーク機器を一元管理、操作するネットワーク家電機器制御システムにおいて、多数存在する操作対象のネットワーク家電機器を効率的に操作することができるユーザインタフェースを構築し、提供するシステムに関する。   The present invention relates to a home appliance control system, and in particular, in a network home appliance control system that centrally manages and operates network devices such as electrical appliances connected to a network, efficiently operates a large number of operation target network home appliances. The present invention relates to a system that builds and provides a user interface that can perform such operations.

近年、光ケーブル網などのネットワークの普及と共に、ネットワーク家電が注目されている。ここで、ネットワーク家電とは、様々な家庭用電気製品(家電機器)をネットワーク、例えばインターネットに接続することにより、ネットワークを介して外部から操作を可能としたり、互いの特徴、機能を組み合わせた協調動作を行わせたりすることが可能な家電機器の総称であるが、以下、本明細書では、ネットワーク家電機器と称する。   In recent years, network home appliances have attracted attention with the spread of networks such as optical cable networks. Here, network home appliances are various home appliances (home appliances) connected to a network, such as the Internet, so that they can be operated from the outside via the network, or a combination of features and functions of each other. Although it is a general term for household electrical appliances that can be operated, it is hereinafter referred to as a network household electrical appliance in this specification.

家庭に設置されている様々な家電機器をネットワーク越しに操作することが可能になると、これら家電機器を一元的に操作することができる端末(リモコン装置などの制御装置)が望まれる。家庭に存在する大量の家電機器を一元的に管理するためには、これらを効率的に操作するためのユーザインタフェースが必要となる。例えば、下記特許文献1では、各部屋にどの家電が存在するかを予め把握しておき、各部屋に埋め込まれた位置把握のためのタグ(例えば位置情報を記録したICチップなど)を用いて、家電操作端末がどの部屋に位置するかを認識し、数ある家電の中からその部屋の中に存在する家電のみを操作対象とすることが提案されている。   When various home appliances installed in a home can be operated over a network, a terminal (control device such as a remote control device) capable of operating these home appliances in an integrated manner is desired. In order to centrally manage a large amount of home appliances existing in the home, a user interface for operating them efficiently is required. For example, in Patent Document 1 below, it is known in advance which home appliances exist in each room, and a tag (for example, an IC chip in which position information is recorded) embedded in each room is used. It has been proposed that the home appliance operation terminal is recognized in which room, and only the home appliances in the room are selected as the operation target from among a number of home appliances.

特表2006−525597号公報JP-T-2006-5255597

ところが、上記特許文献1に示されるような、家電操作端末が位置する部屋と同室内に存在するか否かのみで操作対象の家電を限定する技術では、部屋の外に設置されているネットワーク上の家電機器を操作することができない。例えば、書斎に存在するDVDレコーダをリビングから操作することはできない。   However, as shown in the above-mentioned Patent Document 1, in the technology for limiting home appliances to be operated only by whether or not the home appliance operation terminal is located in the same room as the room where the home appliance operation terminal is located, the network is installed outside the room. Can't operate other home appliances. For example, a DVD recorder existing in the study cannot be operated from the living room.

また、一般的に家電を操作する家電操作端末において、例えば家電操作端末にディスプレイが備えられているものもあるが、ディスプレイの大きさがそれほど大きくないため、一度に表示可能な家電機器に関する情報量は限られている。これらの限られた機能を効率的に使用し、ユーザの操作しやすいインタフェースを構築することが望まれている。しかしながら、特許文献1に示されるような部屋単位で操作対象の家電を決定する方法は、家電単位で操作対象か否かを決定することしかできず、ネットワーク家電機器に対する操作インタフェースとしては不十分であった。
本発明は、家電機器に対する操作性を向上させることを目的とする。
In addition, some home appliance operation terminals that operate home appliances generally have a display on the home appliance operation terminal, for example, but the amount of information related to home appliances that can be displayed at a time because the display is not so large. Is limited. It is desired to construct an interface that can efficiently use these limited functions and is easy for the user to operate. However, the method of determining the household appliance to be operated in room units as shown in Patent Document 1 can only determine whether the household appliance is an operation target, and is not sufficient as an operation interface for network household appliances. there were.
An object of this invention is to improve the operativity with respect to a household appliance.

本発明の一観点によれば、表示部を有し、複数の家電機器を制御する家電機器制御装置であって、それぞれの家電機器における操作コマンド毎の優先度情報を取得する家電機器情報取得部と、制御装置側で決定する操作コマンド各々に対する優先度を決定するための判断情報を取得する判断情報取得部と、前記優先度情報と、前記判断情報とに基づいて、各家電のコマンド毎の表示優先度を決定し、該表示優先度に基づいて操作ボタンを前記表示部に優先的に表示させるインタフェース構築部と、を有することを特徴とする家電機器制御装置が提供される。   According to one aspect of the present invention, there is provided a home appliance control apparatus that has a display unit and controls a plurality of home appliances, and obtains priority information for each operation command in each home appliance. And a determination information acquisition unit that acquires determination information for determining the priority for each operation command determined on the control device side, the priority information, and the determination information, for each command of each home appliance There is provided an electric home appliance control apparatus comprising: an interface construction unit that determines a display priority and preferentially displays an operation button on the display unit based on the display priority.

前記判断情報取得部は、それぞれの家電機器との間の距離情報を第1の判断情報としてリアルタイムに取得し、前記インタフェース構築部は、前記優先度情報と、前記距離情報と、に基づいて、前記優先度情報が高く、前記距離情報が近い距離を示すほど高い表示優先度として算出し、該表示優先度に基づいて操作ボタンを前記表示部に優先的に操作ボタンを表示させることが好ましい。前記距離情報を、各家電機器との近距離通信により取得することが好ましい。尚、「距離情報を第1の判断情報としてリアルタイムに取得する」とは、常に取得していなくても、例えば、1s、10s周期などで取得する場合、リモコン装置に動きセンサを設けておき、動きを検出したタイミングで取得する場合も含むものとする。   The determination information acquisition unit acquires distance information between each home appliance in real time as first determination information, and the interface construction unit, based on the priority information and the distance information, Preferably, the higher the priority information is, the higher the display priority is calculated as the distance information indicates a closer distance, and the operation buttons are preferentially displayed on the display unit based on the display priority. It is preferable to acquire the distance information by short-range communication with each home appliance. “Acquisition of distance information in real time as first determination information” means that even if it is not always acquired, for example, when it is acquired in a cycle of 1 s, 10 s, etc., a motion sensor is provided in the remote control device, The case where it acquires at the timing which detected a motion shall also be included.

また、前記判断情報取得部は、それぞれの家電機器の操作のためのコマンド毎の操作回数を第2の判断情報として取得し、前記インタフェース構築部は、前記優先度情報と、前記操作回数と、に基づいて、前記優先度情報が高く、前記操作回数が多いほど高い表示優先度として算出し、該表示優先度に基づいて前記表示部に優先的に操作ボタン表示させることが好ましい。   Further, the determination information acquisition unit acquires the number of operations for each command for operation of each home appliance as second determination information, and the interface construction unit includes the priority information, the number of operations, Preferably, the higher the priority information is, the higher the number of operations is, the higher the display priority is calculated, and the operation buttons are preferentially displayed on the display unit based on the display priority.

前記家電機器を操作の関連性の近いカテゴリ毎に分類し、直前の操作に基づいて、前記近いカテゴリの操作又は家電機器に関する優先度を高くすることもできる。前記家電機器の操作に基づいて変化する異なる状態に対して、異なる優先度情報を有するようにしても良い。前記表示部は、タッチパネル式となっており、操作ボタンに基づいて操作可能となっていても良い。   It is also possible to classify the home appliances into categories that are closely related to operations, and to increase the priority of the operations in the close categories or the home appliances based on the previous operation. You may make it have different priority information with respect to the different state which changes based on operation of the said household appliances. The display unit is a touch panel type, and may be operable based on operation buttons.

上記に記載の家電機器制御装置と、前記家電機器制御装置との間で短距離通信により両者間の距離を取得する距離取得部を有する家電機器と、を有することを特徴とする家電機器制御システムであっても良い。   A home appliance control system comprising: the home appliance control device described above; and a home appliance having a distance acquisition unit that acquires a distance between the home appliance control device and the home appliance control device through short-range communication. It may be.

本発明は、上記の制御を行う方法、該方法をコンピュータに実行させるためのプログラム、該プログラムを記録する記録媒体であっても良い。プログラムは、インターネットなどの伝送媒体によって取得されるようにしても良い。   The present invention may be a method for performing the above control, a program for causing a computer to execute the method, and a recording medium for recording the program. The program may be acquired by a transmission medium such as the Internet.

本発明の家電機器制御装置によれば、携帯性を重視した制御装置の限られた表示領域に、家電機器を操作するための適切なユーザインタフェースを構築することができる。   According to the home appliance control device of the present invention, it is possible to construct an appropriate user interface for operating the home appliance in the limited display area of the control device that places importance on portability.

図面を参照しながら、本発明の各実施の形態によるネットワーク家電機器制御システムについて説明を行う。尚、以下では、ネットワーク家電機器制御システムを例にして説明したが、家電機器制御装置が、複数の家電機器の情報を取得できる構成であれば、全ての家電機器がネットワーク接続されていない場合であっても、利用可能である。   A network home appliance control system according to each embodiment of the present invention will be described with reference to the drawings. In the following description, the network home appliance control system has been described as an example. However, if the home appliance control device is configured to acquire information on a plurality of home appliances, all home appliances are not connected to the network. Even if it is available.

<第1の実施の形態>
図1Aは、本発明の第1の実施の形態によるネットワーク家電機器制御システムの一構成例を示す機能ブロック図である。図1Aに示すように、本実施の形態によるネットワーク家電機器制御システムAは、家電機器制御装置1と、家電機器31と、を有している。家電機器31をここでは1つだけ示しているが、実際には、多数のネットワーク家電機器が存在する場合を想定している。
<First Embodiment>
FIG. 1A is a functional block diagram showing a configuration example of a network home appliance control system according to the first embodiment of the present invention. As shown in FIG. 1A, network home appliance control system A according to the present embodiment includes home appliance control device 1 and home appliance 31. Although only one home appliance 31 is shown here, it is assumed that there are actually a large number of network home appliances.

家電機器制御装置1は、各家電機器31等から受け取った操作情報を蓄積する蓄積部3と、家電機器制御装置1のユーザインタフェースを構築するインタフェース構築部5と、構築したインタフェースを表示する表示部7と、家電機器31等から送信された各種の情報L2を受け取る家電情報取得部11と、ユーザインタフェースを構築するための判断基準となる判断情報を取得する判断情報取得部15と、ユーザからの操作を受け付ける操作入力部17(タッチパネル式の操作部でも良い。)と、これら各部の動作を制御する制御部(CPU)21と、家電機器に対し制御のためのデータを送信する操作コマンド送信部23と、を含んで構成される。   The home appliance control device 1 includes a storage unit 3 that stores operation information received from each home appliance 31 and the like, an interface construction unit 5 that constructs a user interface of the home appliance control device 1, and a display unit that displays the constructed interface. 7, a home appliance information acquisition unit 11 that receives various information L2 transmitted from the home appliance 31, a determination information acquisition unit 15 that acquires determination information that is a determination criterion for constructing a user interface, An operation input unit 17 (which may be a touch panel type operation unit) that receives an operation, a control unit (CPU) 21 that controls the operation of each unit, and an operation command transmission unit that transmits data for control to the home appliance. 23.

図1Bは、家電機器31の概略構成例を示す機能ブロック図である。図1Bに示すように、家電機器31は、家電機器の機能を発揮する機能部33と、制御部(CPU)35と、家電機器の家電情報を家電機器制御装置1の家電情報取得部11に送信する(L2)家電情報送信部37bと、家電機器制御装置1の操作コマンド送信部23から送信された操作コマンドを受ける操作コマンド受信部37aと、を有している。   FIG. 1B is a functional block diagram illustrating a schematic configuration example of the home appliance 31. As illustrated in FIG. 1B, the home appliance 31 includes a function unit 33 that performs a function of the home appliance, a control unit (CPU) 35, and home appliance information of the home appliance to the home appliance information acquisition unit 11 of the home appliance control apparatus 1. (L2) The household appliance information transmission part 37b to transmit, and the operation command reception part 37a which receives the operation command transmitted from the operation command transmission part 23 of the household appliance control apparatus 1 are provided.

図3は、本実施の形態によるネットワーク家電機器制御システムに登録されている家電機器の部屋における配置例を示す図である。図3に示す配置例は、単なる一例であるが、ここでは、隣接する2つの部屋41、42を含む家X内に複数の家電が配置された場合を例にして説明を行う。本実施例では、図3に示すように、テレビ43、エアコン45、空気清浄機47、DVDレコーダ51、が、部屋41と部屋42とにそれぞれ配置されているものとして説明を行う。各家電機器には、それぞれ、後述するようにUWB(Ultra Wide Band)などの無線電波発信モジュール43a、45a、47a、51aが備えられており、このUWB発信モジュールから発信される電波に基づいて、符号53、55などで示されるようにユーザに従って移動する家電機器制御装置1の位置が変化した場合の、各家電機器との間の距離を算出することができる。また、ここでは説明のためにUMBを用いた通信、測距方法を示すが、その他の無線技術、例えば、ZigBeeやBlueTooth、赤外線通信(Ir)、2.4GHz帯無線通信などを用いても良い。また前述の無線通信技術や有線通信技術と、赤外線や超音波などを用いた測距モジュールを組み合わせても良いことは言うまでもない。   FIG. 3 is a diagram illustrating an arrangement example of the home appliances registered in the network home appliance control system according to the present embodiment in a room. The arrangement example shown in FIG. 3 is merely an example, but here, a case where a plurality of home appliances are arranged in the house X including the two adjacent rooms 41 and 42 will be described as an example. In the present embodiment, as shown in FIG. 3, description will be made assuming that a television 43, an air conditioner 45, an air purifier 47, and a DVD recorder 51 are arranged in a room 41 and a room 42, respectively. Each home appliance is provided with a radio wave transmission module 43a, 45a, 47a, 51a such as UWB (Ultra Wide Band) as will be described later, and based on the radio wave transmitted from this UWB transmission module, As indicated by reference numerals 53, 55, etc., it is possible to calculate the distance to each home appliance when the position of the home appliance control apparatus 1 that moves according to the user changes. In addition, although communication and ranging methods using UMB are shown here for explanation, other wireless technologies such as ZigBee and BlueTooth, infrared communication (Ir), and 2.4 GHz band wireless communication may be used. . Needless to say, the above-described wireless communication technique or wired communication technique may be combined with a distance measuring module using infrared rays or ultrasonic waves.

図2は、家電機器制御装置1における動作の流れを示すフローチャート図である。処理が開始されると(開始)、ユーザインタフェースを構築するための判断基準となる判断情報を取得する(ステップS01)。次いで、新たな家電情報の有無を判定し(ステップS011:家電機器から送られてくる家電情報と、自己が既に記憶している家電情報を比較する)、新しい家電情報があれば(Yes)、ステップS02において家電情報取得部11からネットワークに接続された家電各々からの家電情報を取得(記憶)してステップS03に進む。家電情報は、後述するように、例えば家電操作コマンドリストに基づくコマンド毎の優先度の情報である。   FIG. 2 is a flowchart showing an operation flow in the home appliance control apparatus 1. When the process is started (start), determination information serving as a determination criterion for constructing the user interface is acquired (step S01). Next, the presence / absence of new home appliance information is determined (step S011: home appliance information sent from the home appliance is compared with home appliance information that is already stored), and if there is new home appliance information (Yes), In step S02, home appliance information from each home appliance connected to the network is acquired (stored) from the home appliance information acquisition unit 11, and the process proceeds to step S03. As will be described later, the home appliance information is, for example, priority information for each command based on a home appliance operation command list.

更新すべき新たな家電情報がなければ(No)、ステップS02をスルーしてステップS03に進む。ステップS03において、判断情報と家電情報とに基づいて、表示部7に表示させる情報の優先順位を決定する。次いで、この優先順位に基づいて各情報の表示の有無などを決定し、ステップS04において、構築したインタフェースを表示部に表示させる。次いで、家電機器との間の判断情報の更新、例えば距離の変化があった場合はステップS01に戻り、新たなインタフェースを構築するための上記処理を行う。他方、距離の変化がなければ(No)、処理を終了させる(終了)。   If there is no new home appliance information to be updated (No), the process proceeds to step S03 through step S02. In step S03, the priority order of information to be displayed on the display unit 7 is determined based on the determination information and the home appliance information. Next, whether or not each information is displayed is determined based on the priority order, and the constructed interface is displayed on the display unit in step S04. Next, when there is an update of the judgment information with respect to the home appliance, for example, when there is a change in distance, the process returns to step S01, and the above processing for constructing a new interface is performed. On the other hand, if there is no change in distance (No), the process is terminated (end).

上記のフローチャート図では、ステップS02において家電情報取得部11から家電情報の取得を行う例について説明したが、このような情報をあらかじめ蓄積部3に蓄積しておき、これを読み出すことでステップS02における家電情報取得を行っても良い。また、家電情報取得処理についても、判断情報の変化を起因としてこの処理を行うようにしても良いし、ユーザ操作に応じて明示的に家電情報取得対象の家電を指示するようにしても良い。また、ステップS05において距離の変化を常に監視しながら待ち続け、インタフェースの更新を継続するようにしても良い。また、上記の例では、判断情報として、距離を用いた例を説明したが、その他の情報、例えば家電の動作状態(高負荷な処理を行っているか否か)を判断情報とし、直ぐに動作可能な家電の優先順位を上げるようにしても良いし、天気や湿度などの環境情報を取得してユーザの次の動作を推定し、ユーザが次に操作をしそうな家電の優先順位を上昇させるような判断情報を設定するものとしても良い。   In the above flowchart, the example in which the home appliance information is acquired from the home appliance information acquisition unit 11 in step S02 has been described. However, such information is stored in the storage unit 3 in advance, and read out in step S02. You may acquire household appliance information. In addition, regarding the home appliance information acquisition process, this process may be performed based on a change in the determination information, or the home appliance from which the home appliance information is to be acquired may be explicitly specified in accordance with a user operation. Further, in step S05, the interface may be updated by continuing to wait while constantly monitoring the change in distance. In the above example, the example using the distance as the determination information has been described. However, other information, for example, the operation state of the home appliance (whether or not high-load processing is performed) is used as the determination information, and it can be operated immediately. It may be possible to increase the priority of home appliances, or obtain environmental information such as weather and humidity to estimate the user's next action and increase the priority of home appliances that the user is likely to operate next It is good also as what sets simple judgment information.

以下に、本実施の形態による家電機器制御装置1の各構成部について、さらに詳細に説明する。まず、蓄積部3について説明する。家電機器制御装置1は、家電機器31から得られる情報を記録した蓄積部3を有する。ここで、家電から得られる情報とは、家電を操作するためのコマンド群(以下、「家電操作コマンドリスト」と称する。)、並びに、それに付随するメタデータ情報(以下、「家電操作コマンドメタデータ」と称する。)を指す。本実施の形態では、説明を簡単にするために、家電操作コマンドリストは、ネットワークに家電機器が登録される際に家電機器制御装置1にネットワークを介して送信され、既に蓄積部3に記録されているものとして説明する。但し、家電操作コマンドリストが必要になるタイミング、例えばユーザが操作対象の家電機器を特定したタイミングで逐次家電機器から家電操作コマンドリストが送信されるようにしても良い。   Below, each structural part of the household appliance control apparatus 1 by this Embodiment is demonstrated in detail. First, the storage unit 3 will be described. The home appliance control apparatus 1 includes a storage unit 3 that records information obtained from the home appliance 31. Here, the information obtained from home appliances includes a command group for operating home appliances (hereinafter referred to as “home appliance operation command list”) and accompanying metadata information (hereinafter referred to as “home appliance operation command metadata”). "). In this embodiment, in order to simplify the description, the home appliance operation command list is transmitted to the home appliance control apparatus 1 via the network when the home appliance is registered in the network, and is already recorded in the storage unit 3. Explain that it is. However, the home appliance operation command list may be sequentially transmitted from the home appliance at the timing when the home appliance operation command list is required, for example, when the user specifies the home appliance to be operated.

この家電操作コマンドリストに付随する、家電操作コマンドメタデータは、家電操作コマンドリスト内のコマンドのそれぞれに対する付加情報を記したデータである。ここで、付加情報とは、コマンドの詳細を示す付随情報のことを示すが、本実施例では、コマンドの付加情報として、コマンドの識別子(ID)、優先順位(Priority)が存在するものとして説明を行う。また、本実施例で扱う、各コマンドに付加された優先度は、コマンドを持つ家電機器がコマンド表示の優先順位として付加しているものであり、本実施例では、値が高い方の優先度が高いものとしている。   The home appliance operation command metadata accompanying the home appliance operation command list is data describing additional information for each command in the home appliance operation command list. Here, the additional information refers to accompanying information indicating the details of the command. In the present embodiment, the command identifier (ID) and priority (Priority) are described as additional information of the command. I do. In addition, the priority added to each command handled in this embodiment is a priority given to the home appliance that has the command as a command display priority. In this embodiment, the priority with the higher value is shown. Is high.

本実施の形態では、このメタデータをXML形式で記述する例について説明するが、他の形式でメタデータを記述するようにしても良い。   In the present embodiment, an example in which the metadata is described in the XML format will be described, but the metadata may be described in another format.

図5から図8までは、家電操作コマンドメタデータの記述例を示す図である。図5では、テレビ43の操作コマンドとして、“電源”63、“音量”65、“チャンネル”67の、それぞれの表示優先度を、メタデータとして記載する例を示している。<テレビ>から</テレビ>で挟まれた中には、テレビの操作コマンド各々に付されるメタデータの一覧が記載されている。各操作コマンドのメタデータ63、65、67は、<command>と</command>に挟まれた中に記載されており、各操作コマンドとの対応をとるための識別子を<id>と</id>に挟まれた位置に、各操作コマンドの優先度を<priority>と</priority>に挟まれた位置に記載している。各操作コマンドの優先度は1〜5の5段階で設定され、数字が大きいほど家電を操作するのに重要なコマンド、すなわち、ユーザインタフェース上に表示する場合の優先度が高いものとする。例えば、図5に示すテレビでは、電源の優先度が5と高く、次いで、音量が4、チャネルも4として決められている。図6は、エアコン45の家電操作コマンドメタデータの例を示す図である。このエアコン45の家電操作コマンドメタデータ71では、操作コマンドとして、電源73が優先度5であり、温度75が優先度4であり、モード選択77が優先度2である。同様に、図7は、空気清浄機47の家電操作コマンドメタデータの例を示す図である。この空気清浄機47の家電操作コマンドメタデータ81では、操作コマンドとして、電源83が優先度5であり、モード選択85が優先度3であり、タイマー操作87が優先度2として設定されている。   FIG. 5 to FIG. 8 are diagrams showing description examples of home appliance operation command metadata. FIG. 5 shows an example in which display priorities of “power” 63, “volume” 65, and “channel” 67 are described as metadata as operation commands of the television 43. Between <TV> and </ TV>, a list of metadata attached to each operation command of the TV is described. The metadata 63, 65, and 67 of each operation command is described between <command> and </ command>, and identifiers for taking correspondence with each operation command are <id> and </ The priority of each operation command is described at the position between <priority> and </ priority> at the position between id>. The priority of each operation command is set in five stages of 1 to 5, and it is assumed that the higher the number, the higher the priority for displaying commands on the user interface that are important for operating home appliances. For example, in the television shown in FIG. 5, the priority of the power source is as high as 5, and then the volume is determined to be 4 and the channel is also set to 4. FIG. 6 is a diagram illustrating an example of home appliance operation command metadata of the air conditioner 45. In the home appliance operation command metadata 71 of the air conditioner 45, as operation commands, the power source 73 has priority 5, the temperature 75 has priority 4, and the mode selection 77 has priority 2. Similarly, FIG. 7 is a diagram illustrating an example of home appliance operation command metadata of the air purifier 47. In the home appliance operation command metadata 81 of the air purifier 47, the power supply 83 is set to priority 5, the mode selection 85 is set to priority 3, and the timer operation 87 is set to priority 2 as operation commands.

尚、家電操作コマンドメタデータは、家電の動作状況に合わせて動的に変化するようにしても良い。すなわち、電源がオンされている場合は、電源をオフするよりも、録画の操作が行われる可能性が高いため、その操作コマンドの優先度を高くするなど、家電の動作状態に応じて各コマンドの優先度を変化させるようにしても設定しておいても良い。   The home appliance operation command metadata may be dynamically changed according to the operation status of the home appliance. In other words, when the power is turned on, there is a higher possibility that a recording operation will be performed than when the power is turned off. The priority may be changed or set.

例えば、DVDレコーダの家電操作コマンドメタデータについて、図8A、図8Bを参照しながら説明する。図8Aは、DVDレコーダの電源がOFFの時の家電操作コマンドメタデータの例を示す図であり、図8Bは、DVDレコーダの電源がON時の家電操作コマンドメタデータの例を示す図である。図8Aに示すように、DVDレコーダの電源がOFFの時の家電操作コマンドメタデータ91は、コマンドの優先度として、この場合には、電源93の操作コマンドには優先度5が、録画95の操作コマンドには優先度4が、録画リスト表示97の操作コマンドには優先度3が設定されている。一方、図8Bに示すように、DVDレコーダの電源がONの時の家電操作コマンドメタデータ101は、コマンドの優先度として、この場合には、電源103の操作コマンドには優先度4が、録画105の操作コマンドには優先度5が、録画リスト表示107の操作コマンドには優先度3が設定されている。   For example, home appliance operation command metadata of a DVD recorder will be described with reference to FIGS. 8A and 8B. FIG. 8A is a diagram illustrating an example of home appliance operation command metadata when the power of the DVD recorder is OFF, and FIG. 8B is a diagram illustrating an example of home appliance operation command metadata when the power of the DVD recorder is ON. . As shown in FIG. 8A, the home appliance operation command metadata 91 when the power of the DVD recorder is OFF is the command priority. In this case, the operation command of the power supply 93 has a priority 5 and a recording 95. The priority 4 is set for the operation command, and the priority 3 is set for the operation command of the recording list display 97. On the other hand, as shown in FIG. 8B, the home appliance operation command metadata 101 when the power of the DVD recorder is ON is given as a command priority. In this case, the operation command of the power supply 103 has a priority of 4 and recording. Priority 5 is set for the operation command 105, and priority 3 is set for the operation command for the recording list display 107.

次に家電情報取得部11について説明する。家電情報取得部11は、家電機器から情報を取得する(図1のL2参照)。家電機器から取得する情報としては、図5から図8までで説明した家電操作コマンドリスト、家電操作コマンドメタデータの他に、家電が動作完了時などにその旨を通知するメッセージなどを含んでも良い。本実施の形態では、各家電機器と家電制御装置との通信手段は、特に限定されるものではないが、例えば、超広域無線技術や無線LAN、Bluetooth、赤外線通信技術などの無線通信技術や電力線通信、有線LANなどの有線通信技術を用いて通信するものとする。   Next, the household appliance information acquisition part 11 is demonstrated. The household appliance information acquisition part 11 acquires information from household appliances (refer L2 of FIG. 1). The information acquired from the home appliance may include a message that notifies the home appliance when the operation is completed, in addition to the home appliance operation command list and the home appliance operation command metadata described with reference to FIGS. . In the present embodiment, the communication means between each home appliance and the home appliance control device is not particularly limited, but for example, wireless communication technology such as ultra wide area wireless technology, wireless LAN, Bluetooth, infrared communication technology, or power line It is assumed that communication is performed using wired communication technology such as communication and wired LAN.

次に、判断情報取得部15について説明する。判断情報取得部15は、ユーザインタフェースを構築するための判断基準となる情報(以下、「判断情報」と称する。)を取得する。判断情報とは、例えば、家電機器制御装置1と各家電機器31との物理的な距離であり、その他、各コマンドの実行回数などを加味しても良い。判断情報取得部15は、家電機器制御装置1自身に内蔵されていても良く、或いは、外部の情報取得装置と連携して判断情報を取得するようにしても良い。家電機器制御装置1と各家電31等との距離は、例えば、超広域無線技術(Ultra Wide Band、UMB)を利用し、各家電31に備えられたUWB発信モジュールから発せられる電波が、家電制御装置1に接続されたUMB受信モジュールに到達するまでの時間を測ることにより距離を測定することができる(参考文献、神谷 泉著「測位技術の調査とICタグ、UWBの側位への応用」国土地理院時報、2005 No.106)。ここでは説明のために、UWBでの測距を用いたが、前述した他の通信方式による測距、例えばZigBeeを用いた測距方式であっても良い。(参考文献、高島雅弘, ZHAO Dapeng, 柳原健太郎, 武次潤平, 原晋介, 北山研一, 福井潔, 福永茂「ZigBeeを用いた屋内位置推定方式」電子情報通信学会大会講演論文集 Vol.2005)また、その他赤外線や超音波を用いた専用の測距モジュールを用いて距離を計測するものとしても良い。   Next, the determination information acquisition unit 15 will be described. The determination information acquisition unit 15 acquires information (hereinafter referred to as “determination information”) that serves as a determination criterion for constructing a user interface. The determination information is, for example, the physical distance between the home appliance control device 1 and each home appliance 31 and may include the number of executions of each command. The determination information acquisition unit 15 may be incorporated in the home appliance control apparatus 1 itself, or may acquire determination information in cooperation with an external information acquisition apparatus. The distance between the home appliance control device 1 and each home appliance 31 or the like is, for example, using ultra wide band technology (Ultra Wide Band, UMB), and radio waves emitted from the UWB transmission module provided in each home appliance 31 are controlled by the home appliance. The distance can be measured by measuring the time to reach the UMB receiver module connected to the device 1 (reference, Izumi Kamiya, “Investigation of positioning technology and application to IC tag, UWB side”) Geographical Survey Institute, 2005 No. 106). Here, for the purpose of explanation, distance measurement using UWB is used, but distance measurement using another communication method described above, for example, a distance measurement method using ZigBee may be used. (Reference, Masahiro Takashima, ZHAO Dapeng, Kentaro Yanagihara, Junpei Takeji, Junsuke Hara, Kenichi Kitayama, Kiyoshi Fukui, Shigeru Fukunaga, "Indoor Position Estimation Method Using ZigBee" IEICE Conference Proceedings Vol. 2005) Alternatively, the distance may be measured using a dedicated distance measuring module using infrared rays or ultrasonic waves.

次にインタフェース構築部5について説明する。インタフェース構築部5は、家電情報取得部11及び判断情報取得部15で取得した各種情報をもとに、家電機器制御装置1のユーザインタフェースを構築する。   Next, the interface construction unit 5 will be described. The interface construction unit 5 constructs a user interface of the home appliance control apparatus 1 based on various information acquired by the home appliance information acquisition unit 11 and the determination information acquisition unit 15.

さらに、各家電31から家電機器制御装置1には、それぞれ図5、図6、図7、図8A、図8Bに示すような、家電操作コマンドメタデータが送信されており、また、判断情報として、各家電31と家電機器制御装置1との距離が上記のように測定されて、判断情報取得部15から入力されたものとして説明を行う。   Furthermore, home appliance operation command metadata as shown in FIGS. 5, 6, 7, 8 </ b> A, and 8 </ b> B is transmitted from each home appliance 31 to the home appliance control apparatus 1. The distance between each home appliance 31 and the home appliance control apparatus 1 is measured as described above and will be described as being input from the determination information acquisition unit 15.

インタフェース構築部5は、まず判断情報取得部15から、家電31との間の距離情報Dを取得する。さらに、家電情報取得部11から取得した家電操作コマンドメタデータ内から各コマンドの優先度P_hを取得する。ここで、コマンドの優先度P_hは、前述したように、<priority>と</priority>に挟まれた例えば1〜5までの5段階の例えば整数値であり、その数値が大きいほど家電を操作するのに重要なコマンドであると規定されているものとする。   The interface construction unit 5 first acquires distance information D from the home appliance 31 from the determination information acquisition unit 15. Furthermore, the priority P_h of each command is acquired from the home appliance operation command metadata acquired from the home appliance information acquisition unit 11. Here, as described above, the command priority P_h is, for example, an integer value in five stages from 1 to 5 between <priority> and </ priority>. It is assumed that it is an important command.

次に、取得したこれら二つの情報(家電操作コマンドメタデータ、距離情報D)を用いて、家電各々の操作コマンド毎に、家電制御装置A1上での表示の優先度P_i(以下、「表示優先度」)を判定する。表示優先度P_iの計算には、例えば以下のような計算式を用いる。
P_i=a×P_h+b×1/D … (式1)
Next, using these two pieces of acquired information (home appliance operation command metadata, distance information D), display priority P_i (hereinafter referred to as “display priority”) on the home appliance control device A1 for each operation command of each home appliance. Degree "). For example, the following calculation formula is used to calculate the display priority P_i.
P_i = a * P_h + b * 1 / D (Formula 1)

ここで、a、bは、予め、家電機器制御装置A1に設定されている任意の係数である。
例えば、図3の符号53の位置に家電機器制御装置1が位置している場合の例について説明する。図4においては、家電と距離との関係が示されており、テレビが0.5m、エアコンが1.5m、空気清浄機が4m、DVDレコーダが5mとなっている。すなわち、距離だけの関係から言えば、距離が近い順番に優先度が高くなる。これと、各操作コマンドの優先度P_hとにより、表示の優先度P_iが求まる。
Here, a and b are arbitrary coefficients set in advance in the home appliance control apparatus A1.
For example, an example in which the home appliance control apparatus 1 is located at the position of reference numeral 53 in FIG. 3 will be described. In FIG. 4, the relationship between home appliances and distance is shown. The TV is 0.5 m, the air conditioner is 1.5 m, the air cleaner is 4 m, and the DVD recorder is 5 m. In other words, in terms of only the distance, the priority increases in order of increasing distance. The display priority P_i is obtained from this and the priority P_h of each operation command.

判断情報取得部15から取得した各家電31と家電機器制御装置1との距離が、例えば、図4に示されるものであった場合に、上記式1に基づき計算された各操作コマンドの表示優先度P_iを、図9に示す。但し、ここで、係数a=10、b=50としている。尚、係数bは、距離を重視した場合に、aは、距離よりもコマンドの優先度を重視した場合に各々大きくする係数である。図9に示すように、家電毎に、各操作コマンドに関する表示優先度P_iが求められており、ここではテレビの電源コマンドが150と高く、DVDレコーダの録画リスト表示は40と低い。なお、係数a,bはユーザの嗜好に応じて変化するようにしても良い。例えば、係数a,bに値を設定するための設定画面を通じて、ユーザが任意の値を入力できるようにしても良いし、ユーザの操作履歴に応じて係数a,bが動的に変化するようにしても良い。   For example, when the distance between each home appliance 31 acquired from the determination information acquisition unit 15 and the home appliance control apparatus 1 is as shown in FIG. The degree P_i is shown in FIG. However, here, the coefficients a = 10 and b = 50. The coefficient b is a coefficient to be increased when the distance is emphasized, and a is increased when the priority of the command is more important than the distance. As shown in FIG. 9, the display priority P_i regarding each operation command is calculated | required for every household appliance, Here, the power command of a television is as high as 150, and the recording list display of a DVD recorder is as low as 40. The coefficients a and b may be changed according to the user's preference. For example, the user may be able to input an arbitrary value through a setting screen for setting values for the coefficients a and b, or the coefficients a and b may change dynamically according to the user's operation history. Anyway.

インタフェース構築部5は、求めた表示優先度P_iを基に、ユーザインタフェースを構築する処理を行う。図12は、家電機器制御装置1の表示部7上に操作コマンドをアイコンとして並べた例を示した図である。図12に示すように、表示部7において、操作コマンドを示すアイコン121、123、125、…は、表示優先度P_iが高い順に上から並べられている。表示優先度P_iが同じものが複数存在する場合は、例えば、ランダムに表示する順番を決めるものとしても良い。タッチパネル式のユーザインタフェースにすれば、そのGUIに基づいて、直接操作ができるため便利である。   The interface construction unit 5 performs processing for constructing a user interface based on the obtained display priority P_i. FIG. 12 is a diagram illustrating an example in which operation commands are arranged as icons on the display unit 7 of the home appliance control apparatus 1. As shown in FIG. 12, in the display unit 7, icons 121, 123, 125,... Indicating operation commands are arranged from the top in descending order of display priority P_i. When there are a plurality of items having the same display priority P_i, for example, the display order may be determined at random. A touch-panel user interface is convenient because it can be directly operated based on the GUI.

家電機器制御装置1の表示解像度が低い、表示領域が狭いなどの理由により全てのコマンドを表示しきれない場合は、複数ページに表示を分け、符号111、113、115に示すスクロールバーのようなページを送る為のインタフェースを設けることにより、全てのコマンドを見ることができるようにしても良いし、符号137に示すような一覧表示のためのボタンを設けておき、表示されていないコマンドを一覧にして表示させ、そこから操作を行うなどの手段を設けるようにしても良い。また、本実施の形態では、表示優先度P_iが高いコマンドをユーザの目に付きやすい画面上部に配置するようにインタフェースを構築する例について説明したが、図14に示すように表示優先度P_iが高いコマンドを、上位から選出し、家電ごとに(161、171、181、191)まとめて表示(161)するものとしてもよい。   When all the commands cannot be displayed due to the display resolution of the home appliance control device 1 being low or the display area being narrow, the display is divided into a plurality of pages, such as scroll bars denoted by reference numerals 111, 113, and 115. By providing an interface for sending a page, all commands may be viewed, or a button for displaying a list as shown by reference numeral 137 is provided to display a list of commands that are not displayed. It is also possible to provide means for displaying the information and operating from there. Further, in the present embodiment, an example has been described in which an interface is constructed so that a command having a high display priority P_i is arranged at the top of the screen, which is easily noticeable by the user. However, as shown in FIG. High commands may be selected from the top and displayed (161) collectively for each home appliance (161, 171, 181, 191).

符号53の位置では、家電機器制御装置1に最も近い位置にあるテレビの操作コマンドの表示優先度P_iが高くなり、本実施の形態では、テレビの操作コマンドのアイコンが優先的に表示されるようになる。2番目に近い位置にあるエアコンの操作コマンド各々も、全体的に表示優先度P_iは高くなるが、端末と家電の距離関係に加え、各操作コマンドの優先度も加味していることから、コマンドの優先度が低いエアコンの操作コマンド“モード選択”よりも、DVDレコーダ、空気清浄機の操作コマンド“電源”の方が優先して表示されている。   At the position indicated by reference numeral 53, the display priority P_i of the television operation command closest to the home appliance control apparatus 1 is increased, and in this embodiment, the television operation command icon is preferentially displayed. become. Each of the operation commands for the air conditioner closest to the second position also has a higher display priority P_i as a whole. The operation command “power” for the DVD recorder and the air purifier is displayed with priority over the operation command “mode selection” for the air conditioner having a low priority.

同様に、図3の符号55の位置に、家電機器制御装置1が位置した場合の各家電との距離が、図10の表で示される値であった場合には、上記式1に基づく表示優先度P_iは図11に示される表のようになる。この場合には、エアコンとの距離が図10に示すように0.5mと近くなったため、図11に示すように、表示優先度P_iは、エアコンの電源に関する値が高くなっている。このように、家電機器制御装置1の位置に依存して、表示優先度P_iは適宜変更され、更新されるため、表示部に表示される表示インタフェースも使いやすいように変更されるという特徴を有する。この場合における操作コマンドを、その表示優先度P_iが高い順にアイコンとして、上から並べると、図13に示すようになる(ここでも、係数a=10、b=50とする。)。   Similarly, if the distance from each home appliance when the home appliance control apparatus 1 is located at the position of reference numeral 55 in FIG. 3 is the value shown in the table of FIG. The priority P_i is as shown in the table shown in FIG. In this case, since the distance to the air conditioner is close to 0.5 m as shown in FIG. 10, the display priority P_i has a high value regarding the power supply of the air conditioner as shown in FIG. As described above, the display priority P_i is appropriately changed and updated depending on the position of the home appliance control apparatus 1, and thus the display interface displayed on the display unit is also changed to be easy to use. . If the operation commands in this case are arranged from the top as icons in descending order of the display priority P_i, they are as shown in FIG. 13 (again, coefficients a = 10 and b = 50).

このように、家電機器31と家電機器制御装置1との距離のみからではなく、家電機器31から取得した各コマンドに依存する優先度も加味した表示優先度を計算することにより、家電機器制御装置1の周囲に存在する家電機器31等を操作するためのコマンドをより効率的に配置したインタフェースを構築することが可能になる。   In this way, the home appliance control apparatus calculates not only the distance between the home appliance 31 and the home appliance control apparatus 1 but also the display priority including the priority depending on each command acquired from the home appliance 31. It is possible to construct an interface in which commands for operating home appliances 31 and the like existing around 1 are arranged more efficiently.

次に操作入力部17について説明する。操作入力部17は、家電制御装置1に表示されたユーザインタフェースに対するユーザの操作を受けつける。ここで、操作入力部17は、例えば表示部7上に配置にされたタッチパネルによってユーザの入力を受け付けるようにしても良いし、一般的なリモコンや携帯電話で用いられているボタンやキーボードで入力を受けつけるようにしても良い。   Next, the operation input unit 17 will be described. The operation input unit 17 receives user operations on the user interface displayed on the home appliance control device 1. Here, the operation input unit 17 may accept a user input by a touch panel arranged on the display unit 7, for example, or may be input by a button or a keyboard used in a general remote control or a mobile phone. You may make it accept.

最後に操作コマンド送信部23について説明する。操作コマンド送信部23は、操作入力部17で受け付けたユーザの操作に基づき、対応する操作コマンドを家電機器31に送信する。本実施の形態では、家電情報取得部11の説明において述べたように、家電機器31と家電制御装置1との通信手段を特に限定するものではなく、前述したような各種有線、無線通信技術を用いて、通信を行うことができる。   Finally, the operation command transmission unit 23 will be described. The operation command transmission unit 23 transmits a corresponding operation command to the home appliance 31 based on the user operation received by the operation input unit 17. In the present embodiment, as described in the explanation of the home appliance information acquisition unit 11, the communication means between the home appliance 31 and the home appliance control device 1 is not particularly limited, and various wired and wireless communication technologies as described above are used. Can be used for communication.

<第2の実施の形態>
次に、本発明の第2の実施の形態について説明する。本実施の形態では、ユーザが選択した操作コマンド履歴を家電機器制御装置1のユーザインタフェースの構築に反映させる点において第1の実施の形態とは異なる。
<Second Embodiment>
Next, a second embodiment of the present invention will be described. This embodiment is different from the first embodiment in that the operation command history selected by the user is reflected in the construction of the user interface of the home appliance control apparatus 1.

本発明の第2の実施の形態によるシステムの一構成例を示す機能ブロック図を図15に示す。   FIG. 15 is a functional block diagram showing a configuration example of the system according to the second embodiment of the present invention.

本実施の形態によるシステムBでは、家電制御装置201は、第1の実施の形態に示した家電制御装置1の各機能部203等に加えて、操作履歴蓄積部209が備えられている点を特徴とする。図15では、図1を参照しながら説明した各機能部と同等の機能を持つ各機能部には同名の機能部の名称を付すものとし、その説明は省略する。   In the system B according to the present embodiment, the home appliance control device 201 is provided with an operation history storage unit 209 in addition to the functional units 203 and the like of the home appliance control device 1 shown in the first embodiment. Features. In FIG. 15, functional units having the same functions as the functional units described with reference to FIG. 1 are given the same functional unit names, and the description thereof is omitted.

操作履歴蓄積部209には、操作入力部217でユーザが実行した、家電機器操作のためのコマンドの実行回数をコマンド毎に記録しておく。   The operation history storage unit 209 records, for each command, the number of executions of commands for home appliance operation performed by the user using the operation input unit 217.

判断情報取得部215では、蓄積部209に記録されたコマンド毎の実行回数H_comを取得し、インタフェース構成部205では、表示優先度P_iの計算式に、第1の実施の形態において示した式1の代わりに、以下のような計算式を用いる。
P_i=a’×P_h+b’×H_com … (式2)
The determination information acquisition unit 215 acquires the number of executions H_com for each command recorded in the storage unit 209, and the interface configuration unit 205 uses the formula 1 shown in the first embodiment as the calculation formula for the display priority P_i. Instead of, the following calculation formula is used.
P_i = a ′ × P_h + b ′ × H_com (Formula 2)

ここで、a’、b’は、あらかじめ家電制御装置201に設定された任意の係数であり、第1の実施の形態と同様の係数である。上記の第1の実施の形態と同様、ユーザの嗜好に応じて任意の値が設定できるものとしても良いし、動的に変更しても良いことは言うまでもない。その他の処理は、第1の実施の形態と同等であるため説明を省略するが、上記式2を使用することによって、ユーザが頻繁に実行するコマンドが優先的に表示されやすくなり、利便性が高まるという利点がある。   Here, a ′ and b ′ are arbitrary coefficients set in advance in the home appliance control apparatus 201, and are the same coefficients as in the first embodiment. Needless to say, as in the first embodiment, an arbitrary value may be set according to the user's preference or may be changed dynamically. The other processing is the same as that of the first embodiment, and thus the description thereof is omitted. However, by using the above formula 2, commands that are frequently executed by the user can be preferentially displayed, which is convenient. There is an advantage to increase.

変形例として以下の式を用いても良い。
P_i=a×P_h+b×1/D+b’×H_com (式3)
The following formula may be used as a modification.
P_i = a * P_h + b * 1 / D + b '* H_com (Formula 3)

この式によれば、距離Dとコマンドの履歴とも加味してインタフェースの表示の優先度を決定するため、よりきめ細かい制御に基づくインタフェース表示が可能になる。   According to this equation, the interface display priority is determined in consideration of the distance D and the command history, so that interface display based on finer control becomes possible.

<第3の実施の形態>
次に、本発明の第3の実施の形態について説明する。本実施の形態では、第1、2の実施の形態例などで作成されたインタフェースに関する、ユーザが操作した後のインタフェースの組み換え処理に特徴がある。
<Third Embodiment>
Next, a third embodiment of the present invention will be described. The present embodiment is characterized by the recombination processing of the interface after the user's operation related to the interface created in the first and second embodiments.

例えば、家電制御装置1の表示部7に、図12に示すようなユーザインタフェースが示され、ユーザがこれに基づいてテレビの電源を押した場合に、家電制御装置1は以下の手順でユーザインタフェースを組み替える処理を行う。   For example, when the user interface as shown in FIG. 12 is shown on the display unit 7 of the home appliance control device 1 and the user presses the power of the television based on the user interface, the home appliance control device 1 performs the user interface according to the following procedure. The process which rearranges is performed.

まず、既に取得している家電操作コマンドメタデータから、各家電の家電カテゴリ種別を取得する。本実施の形態の場合、図5、図6、図7、図8に示すように、テレビ及びDVDレコーダの家電カテゴリ種別は“AV家電”(category 62、category 102)、エアコンは“白物家電”(category 72)、空気清浄機は“健康家電”(category 82)に分類されている。   First, the home appliance category type of each home appliance is acquired from the already acquired home appliance operation command metadata. In the case of the present embodiment, as shown in FIGS. 5, 6, 7, and 8, the home appliance category type of the TV and DVD recorder is “AV home appliance” (category 62, category 102), and the air conditioner is “white goods home appliance”. “(Category 72), air purifiers are classified as“ health appliances ”(category 82).

次に、既に求められている各家電のコマンドの表示優先度P_iを、以下の条件に基づき更新する。
1) ユーザが直前に操作した家電と同一カテゴリに分類される家電である場合に、その家電の優先度P_i’に対してある値cの優先度を加える。
P_i=P_i’+c
Next, the display priority P_i of the command of each home appliance that has already been obtained is updated based on the following conditions.
1) When the home appliance is classified into the same category as the home appliance operated by the user immediately before, a priority of a certain value c is added to the priority P_i ′ of the home appliance.
P_i = P_i ′ + c

2)1)以外のカテゴリに分類される家電である場合には、その優先度P_i’をdだけ下げる。
P_i=P_i’−d
2) If the appliance is classified into a category other than 1), its priority P_i ′ is lowered by d.
P_i = P_i'-d

ここで、c、dは家電制御装置A1にあらかじめ設定されている、任意の定数であるものとして説明するが、実施例1、2で示したように、ユーザの嗜好などに基づきユーザが設定できるものとしても良いし、動的に変化するものとしても良い。   Here, although c and d are described as being arbitrary constants set in advance in the home appliance control apparatus A1, as shown in the first and second embodiments, the user can set them based on user preferences and the like. It may be a thing, or may change dynamically.

3)最後に、上記の式により更新された表示優先度P_i’に基づき、新たな、ユーザインタフェースを構築する。 3) Finally, a new user interface is constructed based on the display priority P_i ′ updated by the above formula.

以上に示した表示優先度P_i’に基づき、ユーザインタフェースを再構築することにより、ユーザが直前に操作した家電と同一カテゴリに分類される家電の操作コマンドの優先度が高くなり、優先されて表示されるようになる。   Based on the display priority P_i ′ shown above, by reconstructing the user interface, the priority of operation commands for home appliances that are classified in the same category as the home appliance that the user has operated immediately before becomes higher and displayed with priority. Will come to be.

例えば、第1の実施の形態においては、図3の符号53で示す位置に家電機器制御装置1が存在すると、距離が近いテレビ43の操作コマンドが優先的に表示されやすくなり、逆に距離が遠いDVDレコーダ51の操作コマンドは表示されにくい。一方、本実施の形態において説明したように、家電機器制御装置1を通じてテレビ43を操作すると、表示優先度P_iが更新され、テレビ43と同一カテゴリであるDVDレコーダ51の操作コマンドの表示優先度が上がり、ユーザインタフェース上の上位に表示されやすくなる。これにより、同一カテゴリ間の家電での連携、例えばテレビ43で表示している番組をDVDレコーダで録画するなどの連携操作が行いやすくなるという利点がある。もちろん、表示部におけるDVDレコーダの表示を目立つように点滅等させて、実質的に優先度の高い表示を行った場合と同様にすることも可能である。   For example, in the first embodiment, if the home appliance control apparatus 1 is present at the position indicated by reference numeral 53 in FIG. 3, the operation commands of the television 43 that are close to each other are easily displayed preferentially, and conversely the distance is The operation command of the remote DVD recorder 51 is difficult to be displayed. On the other hand, as described in the present embodiment, when the television 43 is operated through the home appliance control apparatus 1, the display priority P_i is updated, and the display priority of the operation command of the DVD recorder 51 that is in the same category as the television 43 is set. It will be easier to display on the user interface. Accordingly, there is an advantage that cooperation between home appliances between the same categories, for example, cooperation operation such as recording a program displayed on the television 43 with a DVD recorder can be easily performed. Of course, the display of the DVD recorder on the display unit can be made to blink conspicuously, and the display can be made substantially the same as the case where a display with substantially high priority is performed.

(まとめ)
本実施の形態による家電機器制御装置によれば、携帯性を重視した制御装置の限られた表示領域に、家電機器を操作するための適切なユーザインタフェースを構築することができる。
(Summary)
According to the home appliance control apparatus according to the present embodiment, it is possible to construct an appropriate user interface for operating the home appliance in a limited display area of the control apparatus that places importance on portability.

本発明は、家電機器における制御端末装置に利用できる。   The present invention can be used for a control terminal device in home appliances.

本発明の第1の実施の形態によるネットワーク家電機器制御システムの一構成例を示す機能ブロック図である。It is a functional block diagram which shows the example of 1 structure of the network household appliance control system by the 1st Embodiment of this invention. 家電機器31の概略構成例を示す機能ブロック図である。2 is a functional block diagram illustrating a schematic configuration example of a home appliance 31. FIG. 家電機器制御装置1における動作の流れを示すフローチャート図である。It is a flowchart figure which shows the flow of operation | movement in the household appliance control apparatus 1. FIG. 本実施の形態によるネットワーク家電機器制御システムに登録されている家電機器の部屋における配置例を示す図である。It is a figure which shows the example of arrangement | positioning in the room of the household appliances registered into the network household appliance control system by this Embodiment. 図3の符号53で示す位置から家電までの距離を家電毎に示した図である。It is the figure which showed the distance from the position shown with the code | symbol 53 of FIG. 3 to a household appliance for every household appliance. テレビの家電操作コマンドメタデータの記述例を示す図である。It is a figure which shows the example of description of the household appliance operation command metadata of a television. エアコンの家電操作コマンドメタデータの記述例を示す図である。It is a figure which shows the example of description of the household appliance operation command metadata of an air conditioner. 空気清浄機の家電操作コマンドメタデータの記述例を示す図である。It is a figure which shows the example of description of the household appliance operation command metadata of an air cleaner. DVDレコーダにおけるオフ時の家電操作コマンドメタデータの記述例を示す図である。It is a figure which shows the example of a description of the household appliance operation command metadata at the time of OFF in a DVD recorder. DVDレコーダにおけるオン時の家電操作コマンドメタデータの記述例を示す図である。It is a figure which shows the example of description of the household appliance operation command metadata at the time of ON in a DVD recorder. 図4に示される配置における、各操作コマンドの表示優先度P_iの計算結果を示す図である。FIG. 5 is a diagram illustrating a calculation result of display priority P_i of each operation command in the arrangement illustrated in FIG. 4. 図3の符号55の位置に、家電機器制御装置が位置した場合の各家電との距離を示す図である。It is a figure which shows the distance with each household appliance when a household appliance control apparatus is located in the position of the code | symbol 55 of FIG. 図10に基づいて算出した表示優先度P_iの計算結果を示す図である。It is a figure which shows the calculation result of the display priority P_i calculated based on FIG. 操作コマンドを、その表示優先度P_iが高い順にアイコンとして、上から並べて表示させたインタフェースの第1例を示す図である。It is a figure which shows the 1st example of the interface which displayed the operation command side by side as an icon in order with the high display priority P_i from the top. 操作コマンドを、その表示優先度P_iが高い順にアイコンとして、上から並べて表示させたインタフェースの第2例を示す図であり、家電機器制御装置が移動した場合の例を示す図である。It is a figure which shows the 2nd example of the interface which displayed the operation command side by side as an icon in order with the high display priority P_i from the top, and is a figure which shows the example when a household appliance control apparatus moves. 表示優先度P_iが高いコマンドを、上位からいくつか選出し、家電ごとにまとめて表示させたインタフェース例を示す図である。It is a figure which shows the example of an interface which selected several commands with high display priority P_i from the upper rank, and was displayed collectively for every household appliance. 本発明の第2の実施の形態によるシステムの一構成例を示す機能ブロック図を示す図である。It is a figure which shows the functional block diagram which shows the example of 1 structure of the system by the 2nd Embodiment of this invention.

符号の説明Explanation of symbols

A…ネットワーク家電機器制御システム、1…家電機器制御装置、3…蓄積部、5…インタフェース構築部、7…表示部、11…家電情報取得部、15…判断情報取得部、17…操作入力部、21…制御部(CPU)、23…操作コマンド送信部、31…家電機器。 DESCRIPTION OF SYMBOLS A ... Network home appliance control system, 1 ... Home appliance control apparatus, 3 ... Accumulation part, 5 ... Interface construction part, 7 ... Display part, 11 ... Home appliance information acquisition part, 15 ... Judgment information acquisition part, 17 ... Operation input part , 21 ... control unit (CPU), 23 ... operation command transmission unit, 31 ... home appliances.

Claims (8)

表示部を有し、複数の家電機器を制御する家電機器制御装置であって、
それぞれの家電機器における操作コマンド毎の優先度情報を取得する家電機器情報取得部と、
制御装置側で決定する操作コマンド各々に対する優先度を決定するための判断情報を取得する判断情報取得部と、
前記優先度情報と、前記判断情報とに基づいて、各家電のコマンド毎の表示優先度を決定し、該表示優先度に基づいて操作ボタンを前記表示部に優先的に表示させるインタフェース構築部と
を有することを特徴とする家電機器制御装置。
A home appliance control apparatus that has a display unit and controls a plurality of home appliances,
Home appliance information acquisition unit for acquiring priority information for each operation command in each home appliance,
A determination information acquisition unit for acquiring determination information for determining the priority for each operation command determined on the control device side;
An interface construction unit that determines a display priority for each command of each home appliance based on the priority information and the determination information, and that preferentially displays an operation button on the display unit based on the display priority; A home appliance control device characterized by comprising:
前記判断情報取得部は、それぞれの家電機器との間の距離情報を第1の判断情報としてリアルタイムに取得し、
前記インタフェース構築部は、前記優先度情報と、前記距離情報と、に基づいて、前記優先度情報が高く、前記距離情報が近い距離を示すほど高い表示優先度として算出し、該表示優先度に基づいて操作ボタンを前記表示部に優先的に操作ボタンを表示させることを特徴とする請求項1に記載の家電機器制御装置。
The determination information acquisition unit acquires distance information between each home electric appliance as first determination information in real time,
The interface construction unit calculates, based on the priority information and the distance information, a higher display priority as the priority information is higher and the distance information indicates a closer distance. The home appliance control apparatus according to claim 1, wherein the operation button is preferentially displayed on the display unit based on the operation button.
前記距離情報を、各家電機器との近距離通信により取得することを特徴とする請求項2に記載の家電機器制御装置。   The home appliance control apparatus according to claim 2, wherein the distance information is acquired by short-range communication with each home appliance. 前記判断情報取得部は、それぞれの家電機器の操作のためのコマンド毎の操作回数を第2の判断情報として取得し、
前記インタフェース構築部は、前記優先度情報と、前記操作回数と、に基づいて、前記優先度情報が高く、前記操作回数が多いほど高い表示優先度として算出し、該表示優先度に基づいて前記表示部に優先的に操作ボタン表示させることを特徴とする請求項1又は2に記載の家電機器制御装置。
The determination information acquisition unit acquires the number of operations for each command for operating each home appliance as second determination information,
The interface construction unit calculates a higher display priority as the priority information is higher and the operation count is higher based on the priority information and the number of operations, and based on the display priority The home appliance control device according to claim 1, wherein the operation button is preferentially displayed on the display unit.
前記家電機器を操作の関連性の近いカテゴリ毎に分類し、直前の操作に基づいて、前記近いカテゴリの操作又は家電機器に関する優先度を高くすることを特徴とする請求項1から4までのいずれか1項に記載の家電機器制御装置。   The said household appliances are classified for every category with close relevance of operation, Based on the last operation, the priority regarding the operation of the said near category or household appliances is made high, Any one of Claim 1 to 4 characterized by the above-mentioned. The household electrical appliance control apparatus of Claim 1. 前記家電機器の操作に基づいて変化する異なる状態に対して、異なる優先度情報を有することを特徴とする請求項1から5までのいずれか1項に記載の家電機器制御装置。   6. The home appliance control apparatus according to claim 1, comprising different priority information for different states that change based on an operation of the home appliance. 前記表示部は、タッチパネル式となっており、操作ボタンに基づいて操作可能となっていることを特徴とする請求項1から6までのいずれか1項に記載の家電機器制御装置。   The home appliance control apparatus according to any one of claims 1 to 6, wherein the display unit is a touch panel type and can be operated based on an operation button. 請求項1から3までのいずれか1項に記載の家電機器制御装置と、
前記家電機器制御装置との間で短距離通信により両者間の距離を取得する距離取得部を有する家電機器と
を有することを特徴とする家電機器制御システム。
The home electric appliance control device according to any one of claims 1 to 3,
A home appliance control system comprising: a home appliance having a distance acquisition unit that acquires a distance between the two by short-range communication with the home appliance control apparatus.
JP2008201371A 2008-08-05 2008-08-05 Home appliance control system Expired - Fee Related JP5081093B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008201371A JP5081093B2 (en) 2008-08-05 2008-08-05 Home appliance control system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008201371A JP5081093B2 (en) 2008-08-05 2008-08-05 Home appliance control system

Publications (2)

Publication Number Publication Date
JP2010041344A true JP2010041344A (en) 2010-02-18
JP5081093B2 JP5081093B2 (en) 2012-11-21

Family

ID=42013420

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008201371A Expired - Fee Related JP5081093B2 (en) 2008-08-05 2008-08-05 Home appliance control system

Country Status (1)

Country Link
JP (1) JP5081093B2 (en)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012090459A (en) * 2010-10-20 2012-05-10 Panasonic Corp Electric appliance, electric appliance control method, electric appliance control program, and electric appliance control device
WO2013069286A1 (en) * 2011-11-08 2013-05-16 パナソニック株式会社 Appliance control system and remote controller
WO2014103307A1 (en) * 2012-12-28 2014-07-03 パナソニック株式会社 Control method
JP2015128283A (en) * 2013-11-28 2015-07-09 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America Control method, program, method for providing program, communication terminal, and control system
JP2015149710A (en) * 2014-01-10 2015-08-20 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America Control method and program for portable terminal
JP2016174433A (en) * 2016-07-07 2016-09-29 パナソニックIpマネジメント株式会社 Device control system, program and controller
WO2016155109A1 (en) * 2015-04-03 2016-10-06 绿仕科技控股有限公司 Environment control system
JP2017199962A (en) * 2016-04-25 2017-11-02 住友電気工業株式会社 Apparatus control system, management device, apparatus control method, and control program
JP2018503907A (en) * 2014-11-24 2018-02-08 シー−ラブズ コーポレイション Method for dynamic and automatic creation of user interfaces
JP2019149802A (en) * 2019-03-28 2019-09-05 株式会社ニコン Electronic device and program
CN110989372A (en) * 2019-11-18 2020-04-10 北京小米移动软件有限公司 Equipment control method, device and system based on position information
JP7046273B1 (en) * 2020-10-30 2022-04-01 三菱電機株式会社 Control system, control device, list information generation method and program
US11561665B2 (en) 2017-04-21 2023-01-24 Panasonic Intellectual Property Management Co., Ltd. Display method, recording medium, and display system
JP7567056B2 (en) 2020-11-18 2024-10-15 グーグル エルエルシー Proximity-Based Control of a Second Device

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003219485A (en) * 2002-01-23 2003-07-31 Mitsubishi Electric Corp Household electric apparatus control system and controller, household electric apparatus and remote controller
JP2004235962A (en) * 2003-01-30 2004-08-19 Sony Corp Controller and control method, information processor and information processing method, recording medium, and program
JP2004320296A (en) * 2003-04-15 2004-11-11 Matsushita Electric Ind Co Ltd Remote control system
JP2005136518A (en) * 2003-10-28 2005-05-26 Sanyo Electric Co Ltd Remote operation system
JP2005142905A (en) * 2003-11-07 2005-06-02 Matsushita Electric Ind Co Ltd Remote controller and remote control system
JP2005303423A (en) * 2004-04-07 2005-10-27 Sony Corp Control system, controller, control method and program, and recording medium
JP2007181068A (en) * 2005-12-28 2007-07-12 Funai Electric Co Ltd Remote controller

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003219485A (en) * 2002-01-23 2003-07-31 Mitsubishi Electric Corp Household electric apparatus control system and controller, household electric apparatus and remote controller
JP2004235962A (en) * 2003-01-30 2004-08-19 Sony Corp Controller and control method, information processor and information processing method, recording medium, and program
JP2004320296A (en) * 2003-04-15 2004-11-11 Matsushita Electric Ind Co Ltd Remote control system
JP2005136518A (en) * 2003-10-28 2005-05-26 Sanyo Electric Co Ltd Remote operation system
JP2005142905A (en) * 2003-11-07 2005-06-02 Matsushita Electric Ind Co Ltd Remote controller and remote control system
JP2005303423A (en) * 2004-04-07 2005-10-27 Sony Corp Control system, controller, control method and program, and recording medium
JP2007181068A (en) * 2005-12-28 2007-07-12 Funai Electric Co Ltd Remote controller

Cited By (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012090459A (en) * 2010-10-20 2012-05-10 Panasonic Corp Electric appliance, electric appliance control method, electric appliance control program, and electric appliance control device
CN103918279B (en) * 2011-11-08 2017-09-05 松下知识产权经营株式会社 Equipment control system and remote controller
WO2013069286A1 (en) * 2011-11-08 2013-05-16 パナソニック株式会社 Appliance control system and remote controller
JP2013102340A (en) * 2011-11-08 2013-05-23 Panasonic Corp Equipment control system and remote controller
US9618948B2 (en) 2011-11-08 2017-04-11 Panasonic Intellectual Property Management Co., Ltd. Appliance control system and remote controller
EP2782358A1 (en) * 2011-11-08 2014-09-24 Panasonic Corporation Appliance control system and remote controller
EP2782358A4 (en) * 2011-11-08 2014-09-24 Panasonic Corp Appliance control system and remote controller
CN103918279A (en) * 2011-11-08 2014-07-09 松下电器产业株式会社 Equipment control system and remote controller
WO2014103307A1 (en) * 2012-12-28 2014-07-03 パナソニック株式会社 Control method
US10318121B2 (en) 2012-12-28 2019-06-11 Panasonic Intellectual Property Corporation Of America Control method
JP2015128283A (en) * 2013-11-28 2015-07-09 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America Control method, program, method for providing program, communication terminal, and control system
JP2015149710A (en) * 2014-01-10 2015-08-20 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America Control method and program for portable terminal
US10484488B2 (en) 2014-11-24 2019-11-19 C-Labs Corporation Method for dynamic and automatic creation of user interfaces
JP2018503907A (en) * 2014-11-24 2018-02-08 シー−ラブズ コーポレイション Method for dynamic and automatic creation of user interfaces
US10502442B2 (en) 2015-04-03 2019-12-10 Lucis Technologies Holdings Limited Device control system
US11231193B2 (en) 2015-04-03 2022-01-25 Chengdu Qixingtian Intellectual Property Agency Ltd. Device control system
WO2016155109A1 (en) * 2015-04-03 2016-10-06 绿仕科技控股有限公司 Environment control system
US10508823B2 (en) 2015-04-03 2019-12-17 Lucis Technologies Holdings Limited Device control system
US11287150B2 (en) 2015-04-03 2022-03-29 Chengdu Qixingtian Intellectual Property Agency Ltd. Device control system
WO2017187664A1 (en) * 2016-04-25 2017-11-02 住友電気工業株式会社 Measurement information transmission device, management system, and information processing program
JP2017199962A (en) * 2016-04-25 2017-11-02 住友電気工業株式会社 Apparatus control system, management device, apparatus control method, and control program
JP2016174433A (en) * 2016-07-07 2016-09-29 パナソニックIpマネジメント株式会社 Device control system, program and controller
US11561665B2 (en) 2017-04-21 2023-01-24 Panasonic Intellectual Property Management Co., Ltd. Display method, recording medium, and display system
JP2019149802A (en) * 2019-03-28 2019-09-05 株式会社ニコン Electronic device and program
CN110989372A (en) * 2019-11-18 2020-04-10 北京小米移动软件有限公司 Equipment control method, device and system based on position information
CN110989372B (en) * 2019-11-18 2024-05-24 北京小米移动软件有限公司 Device control method, device and system based on position information
JP7046273B1 (en) * 2020-10-30 2022-04-01 三菱電機株式会社 Control system, control device, list information generation method and program
WO2022091340A1 (en) * 2020-10-30 2022-05-05 三菱電機株式会社 Control system, control device, list information generation method, and program
JP7567056B2 (en) 2020-11-18 2024-10-15 グーグル エルエルシー Proximity-Based Control of a Second Device

Also Published As

Publication number Publication date
JP5081093B2 (en) 2012-11-21

Similar Documents

Publication Publication Date Title
JP5081093B2 (en) Home appliance control system
US11314379B2 (en) Method and system for providing user interface for device control
CN105634881B (en) Application scene recommendation method and device
KR101958902B1 (en) Method for group controlling of electronic devices and electronic device management system therefor
US8887049B2 (en) Device, method and timeline user interface for controlling home devices
KR101563487B1 (en) Portable terminal controlling home appliance
KR100546674B1 (en) Apparatus and Method for Realizing Multi Brand Remote Controller
KR102252258B1 (en) Method and apparatus for controlling a group of home devices in a home network system
US9773408B2 (en) Mobile terminal and operation method thereof
JP6576021B2 (en) Server apparatus, control system, and control method
KR101913633B1 (en) Method for controlling electric-device and apparatus having the same
KR101588595B1 (en) AN INTEGRATED REMOTE CONTROLLER SUPPORTING INTERNET OF THINGS(IoT) AND THE CONTROL METHOD THEREOF
KR20100122030A (en) A portable terminal controlling washing machine and operation method for the same
CN102208130A (en) Method for remotely controlling household appliances through remote controller and remote controller
JP2012209879A (en) Control apparatus, and control method, program and system
US10242564B2 (en) Integrated remote control system and computer readable recording medium for storing remote controlling method
KR101615977B1 (en) A Portable terminal controlling air-conditioner and operation method for the same
KR20150005800A (en) Remote controlled home appliances and mobile communication terminal and system for managing of home appliances therefor
JP4621961B2 (en) Mobile phone
CN111599148A (en) Electronic equipment and connection method thereof
JP2007036394A (en) Remote control unit and operating program thereof
JP6173390B2 (en) Communication terminal, program, network system, and server
KR101923434B1 (en) An information management system for home appliance
KR100761503B1 (en) Home automation system
KR20150032100A (en) home appliance, and method for operating the same

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100826

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120208

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120214

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120402

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120807

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120831

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150907

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees