WO2006030742A1 - 機器制御システムおよび機器制御方法 - Google Patents

機器制御システムおよび機器制御方法 Download PDF

Info

Publication number
WO2006030742A1
WO2006030742A1 PCT/JP2005/016770 JP2005016770W WO2006030742A1 WO 2006030742 A1 WO2006030742 A1 WO 2006030742A1 JP 2005016770 W JP2005016770 W JP 2005016770W WO 2006030742 A1 WO2006030742 A1 WO 2006030742A1
Authority
WO
WIPO (PCT)
Prior art keywords
situation
user
information
relationship
future
Prior art date
Application number
PCT/JP2005/016770
Other languages
English (en)
French (fr)
Inventor
Kakuya Yamamoto
Original Assignee
Matsushita Electric Industrial Co., Ltd.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co., Ltd. filed Critical Matsushita Electric Industrial Co., Ltd.
Priority to CN200580030835.0A priority Critical patent/CN101027684B/zh
Priority to JP2006535877A priority patent/JP4741500B2/ja
Priority to US11/662,546 priority patent/US20070233285A1/en
Publication of WO2006030742A1 publication Critical patent/WO2006030742A1/ja

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2807Exchanging configuration information on appliance services in a home automation network
    • H04L12/2809Exchanging configuration information on appliance services in a home automation network indicating that an appliance service is present in a home automation network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2816Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/2818Controlling appliance services of a home automation network by calling their functionalities from a device located outside both the home and the home network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2823Reporting information sensed by appliance or service execution status of appliance services in a home automation network
    • H04L12/2825Reporting to a device located outside the home and the home network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/535Tracking the activity of the user

Definitions

  • the device control apparatus of the device control system is a behavior-situation relationship management unit that holds behavior-situation relationship information that represents a relationship between the behavior information and a situation in which the user can be placed.
  • Current situation judgment means for judging the current situation of the user using the behavior situation relation information
  • situation relation management that holds situation relation information representing a relation between two situations in which the user can be placed
  • a future situation estimation means for predicting a user's future situation using the current situation judged by the current situation judging means and the situation relation information, and identifying prediction information representing the prediction result.
  • devices in the present invention specifically refers to home appliances such as air conditioners and washing machines, AV devices such as televisions, speakers and cameras, light bulbs, bells, switches, vibrators and various sensors.
  • Electrical devices that can input and output information
  • information display devices such as liquid crystal displays and head mount displays, small devices that can input and output information, such as stuffed robots, umbrellas with lamps, hangers with liquid crystal displays, and telephones Or fax
  • Information provision equipment such as information communication equipment, information processing equipment such as Nosocon and home servers, mobile equipment such as mobile phones and GPS terminals, public equipment such as automatic doors and traffic signals, weather forecast servers, traffic information servers and ranking information servers Servers, mail servers, schedule user servers, TV program recording servers, household account servers, servers that handle information about individuals and groups, dictionary servers, language translation servers, speech recognition servers, image recognition servers, format conversion servers, data evaluation Servers and motion detection function providing servers include sanos that provide functions such as node disk rental servers and authentication servers, and IC power cards include information providing devices such as RFID (
  • “sensor” refers to an element or device that acquires information related to user behavior that can be provided to the device or the like.
  • Equipment such as televisions and lighting operated by users, door sensors and video cameras that recognize user actions, devices such as GPS, thermometers, posture detection devices, and traffic jam information providing information that affects user actions It includes devices such as servers, weather forecast servers, scheduler servers, and mail servers, devices operated by others that may affect user behavior, devices that recognize other people's behavior, and other devices.
  • “behavior information” in the present invention means information, data, etc. acquired from the sensor.
  • FIG. 2 is a block diagram showing a functional configuration of the device control system 10. As shown in FIG. 2, the device control system 10 includes a sensor 110, a device control device 120, and a device 130.
  • the sensor 110 is, for example, a television 40, a remote controller (hereinafter referred to as "remote controller") or an infrared sensor, and the situation where the user is placed and the user's behavior (operation of the remote controller or movement of the user's location). Etc.) is notified to the device control device 120 .
  • the sensor 110 may be a portable terminal 90 having a GPS function that can identify the user's location.
  • the device control device 120 is a personal computer, for example, and controls the entire device control system 10 and also controls communication between devices performed via the LAN 20. Furthermore, the device control apparatus 120 determines the current situation and estimates the future situation based on the behavior information acquired from the sensor 110 and notifies the device 130 of the estimation result. As shown in FIG. 2, the device control device 120 includes an action-situation relationship management unit 121, a current situation determination unit 122, a situation relationship management unit 123, a future situation estimation unit 124, and a situation-equipment relationship management unit. 125, a control device determination unit 126 and a timing unit 127 are provided.
  • the situation-to-device relationship management unit 125 includes a storage device such as a RAM, and manages information representing the relationship between the situation and the device in which the user can be placed (for example, the situation-to-device relationship table).
  • Figure 9 shows a specific example of the situation-equipment relationship table.
  • the timekeeping unit 127 starts timekeeping in response to an instruction from the current state determination unit 122, and notifies the current state determination unit 122 of information representing time by timekeeping periodically (for example, every 1 msec).
  • the device 130 is, for example, an air conditioner in a toilet room, and performs an operation (for example, temperature control in the toilet room) in accordance with an instruction from the device control device 120.
  • the device 130 includes a prediction information acquisition unit 1 31, an operation content determination unit 132, a determination condition management unit 133, and an operation control unit 134.
  • the determination condition management unit 133 manages information representing the operation content of the device 130 (for example, device operation content determination table) used in the operation content determination unit 132.
  • Figure 10 A specific example of the contents determination table is shown.
  • the operation control unit 134 controls the operation of the device 130 according to the result determined by the operation content determination unit 132.
  • the current situation determination unit 122 performs initial settings (including user instructions and settings) necessary for this processing (S10), and then uses the time information notified from the clock unit 127. Thus, it is determined whether or not the force has passed a predetermined time (S11), or whether or not action information is input from the sensor 110 (S12).
  • the current situation determination unit 122 uses the action-situation relation table 300 (see FIG. 3) managed by the action-situation relation management unit 121 to display “TV: ⁇ Start program '' Then, “living room: watching TV program” is specified from the status column 320 as a situation corresponding to “TV: program start”. Furthermore, the current situation determination unit 122 holds the identified “living room: watching TV program” in the current situation table 400, and starts measuring the elapsed time since the situation has been determined (see FIG. 4). .
  • the current situation is “Living: TV program viewing”, and the elapsed time after being judged as this situation is “2 minutes”.
  • the elapsed time in the current status table 400 is updated every elapse of a predetermined time (for example, every minute), and the current status is also updated according to the action information acquired from the sensor 110.
  • the original situation is "living” in the situation relation table 500 of FIG. : "View TV program” is specified.
  • the column “Living: Watch TV” is “Table 6XX”
  • the column “Living: TV CM” is “Table 600”
  • “Living: Other” Since the column in the column contains “Table 6YY”, these three situations are presumed to be the next situation for the original situation “Living: Viewing TV programs”.
  • the forecast of the next situation for each original situation is estimated with reference to the separate table as shown in Table 6 IV, Table 600, and Table 6 IV.
  • “None” is written in the columns of the columns “in use of toilet” and “in use of bath” corresponding to the row of “living room: watching TV program”, Therefore, the next situation is not estimated.
  • the future situation estimation unit 124 determines whether or not the above estimation is completed (S15).
  • the device to be operated is determined (S16), and the prediction information indicating the predicted result is notified to the device (S17).
  • the process returns to the above-described process S 14.
  • the judgment of whether or not the above estimation has been completed can be determined by a method of completing once processing S14, a method of completing a predetermined number of times, for example, twice of processing S14, A method of predicting the situation one after another, such as a situation next to the situation after the situation, and repeating the process S14 until it is finally impossible to predict, or a combination of these methods can be considered.
  • the estimation is completed by repeating the process S14 twice. Therefore, process S14 is performed once again. The contents of the second processing S14 are described below.
  • the situation transition probability corresponding to the elapsed time of 0 minutes is “20%”. Therefore, from the “living room: watching TV program” identified in FIG. Using the situation transition probability “7%” to transition to “Reping: TV commercial viewing”, from the current “TV program viewing” to “TV commercial viewing” status, “to use toilet” The transition probability is “1.4%” multiplied by “7%” and “20%”.
  • the prediction status table 800 in Fig. 8 is a summary of the calculation statuses of the two stages ahead from the present.
  • the predicted situation table 800 in Fig. 8 is a summary of the calculated transition probabilities. As described above, the transition probability from the current (that is, 2 minutes after transition to “TV program viewing”) to the predicted status “to use toilet” after “TV program viewing” through “TV commercial viewing” is Calculated as “1.4%”. Similarly, the transition probability of “to use toilet” one minute after the current situation is the sum of the transition probabilities for the two routes.
  • the transition probability of reaching “busy in use” 2 minutes after the present is the sum of the transition probabilities for the three routes.
  • the transition probability of “busy in use” 2 minutes after the transition to “TV commercial viewing” immediately after the present is approximately “0.2%” multiplied by “7%” and “3%”. is there.
  • the transition probability of transitioning to “TV commercial viewing” one minute later and “busy in use” one minute later is “1.0%” multiplied by “10%” and “10%”. is there.
  • the transition probability of transitioning to “TV commercial viewing” two minutes later and “busy in use” immediately after that is “4.0%” multiplied by “20%” and “20%”. . Therefore, the above “0.2%”, “1.0%”, and “4.0%” are “5.2%”, which is the transition probability.
  • the current transition probability after 3 minutes is calculated as "8.4%” from “7% X 2% + 10% X 3% + 20% X 10% + 30% X 20%”
  • the transition probability after 4 minutes is calculated as “6.9%” from “7% X 1% + 10% X 2% + 20% X 3% + 30% X 10% + 15% X 20%” Is done.
  • the transition probability of transitioning from “viewing TV program” in the current situation to “using toilet” through “viewing TV CM” is calculated, and the prediction situation table 800 in FIG. 8 is generated.
  • the control device determination unit 126 determines a device to be controlled based on the prediction result estimated in the processing S14 (S16).
  • Situation—Managed by device relation management unit 125 Use the device-device relationship table 900 (see Figure 9) to determine the device to be controlled. The device is determined for each of the situations estimated in the above processing S14. From the device-situation relationship table 900 in FIG. 9, regarding the predicted situation of “in use of toilet”, “air conditioner in toilet room” can be specified as the device to be controlled.
  • control device determination unit 126 notifies the prediction result to the device 130 identified in the processing S16 (S17). In this case, the control device determination unit 126 notifies the air conditioner 50 in the toilet room of the prediction information related to “use of toilet” shown in FIG.
  • FIG. 12 is a flowchart showing a process flow in the device control apparatus 120.
  • the prediction information acquisition unit 131 acquires a prediction result from the device control apparatus 120 (S2 Do, for example, acquires the prediction situation table 800 generated in FIG. 11 described above as a prediction result.
  • the content can be judged as “ON (energy saving)”.
  • Fig. 8 Since it is ⁇ 1.4% after 0 minutes '' and ⁇ 2.7% after 1 minute '', it can be judged as ⁇ OFF '' from Fig. 10.
  • judgment is made based on the priority order of “ON (normal)> ON (energy saving)> OFF”.
  • it may be determined based on the highest transition probability, or may be determined based on the closest transition time V and future transition probability!
  • the operation control unit 134 controls the device 130 according to the content determined by the operation content determination unit 132 (S23). In other words, it is set to “ON (energy saving)” for the air conditioner in the toilet room.
  • the toilet heating is controlled to be “OFF” according to the difference between whether the user's situation remains “TV program viewing” or “TV CM viewing”. “ON (normal)” or the like so that the device 130 (that is, the air conditioner 50 in the toilet room) is appropriately controlled in accordance with changes in the user's situation.
  • the device acquires the prediction result of the future situation that is chain-inferred based on the current situation and determines the operation content. It is possible to realize a device control system that can complete a time-consuming process in accordance with the user's behavior or can start control prior to the user's behavior.
  • the behavior-situation relationship management unit 121, the situation-situation relationship management unit 123, the situation-one-device relationship management unit 125, and the judgment condition management unit 133 have files that record the respective relationship tables and condition tables. It's a saved file system! /.
  • the behavior-situation relationship management unit 121, the situation-situation relationship management unit 123, the situation-device relationship management unit 125, and the judgment condition management unit 133 send the respective relationship tables and condition tables via the network. Then, it may be changed, added or deleted by downloading.
  • the information representing the relationship between situations managed by the situation relationship management 123 is limited to a table format. It may be other than tabular format.
  • a situation graph may be used in which the situation is represented as a node and the relationship is represented as a branch between the nodes.
  • the current situation determination unit 122 determines the current situation, a similar situation may be regarded as the current situation even if the situation does not completely match the current situation.
  • the device 130 registers in advance, in the device control apparatus 120, situation identification information that can identify the situation of one or a plurality of specific users, and the device control apparatus 120 identifies the situation identification information.
  • situation identification information that can identify the situation of one or a plurality of specific users
  • notification of this situation identification information may be received.
  • the air conditioner 50 in the toilet room is registered in advance as a notification destination in the case where the toilet control is predicted in the device control device 120. You may keep it.
  • the device ID for identifying the air conditioner 50 in the toilet room is notified to the device control device 120, and the device control device 120 determines an appropriate situation using the device ID, and updates the situation-device relationship table. That's fine.
  • the current situation determination unit 122 may determine a plurality of situations as the current situation according to the type of situation. For example, it may be decided that the current situation is a work-in-progress situation and a break-in situation.
  • the temperature control of the toilet room and the processing requiring time are described as examples. However, according to the present invention, the control of the processing requiring time as described above can be performed. Similarly, control prior to changes in the user's situation may be performed. For example, by applying the present invention, the next transfer station is estimated from information such as the current train! /, And the train, etc., and information on the nearest store of the transfer station is obtained before the user arrives at the transfer station. It is also possible to present it. [0079] Note that each unit in FIG. 2 may be provided in one computer or may not be provided in one computer.
  • the senor 110 may be in the device 130, or the current state determination unit 122 may be included in the sensor 110, and the future state estimation unit 124 and the state relationship management unit 123 may be on the network. It may be located on a different computer.
  • the operation content determination unit 132, the determination condition management unit 133, and the operation control unit 134 may be arranged in different computers. Furthermore, each part may be distributed to a plurality of computers.
  • each unit in FIG. there may be as many future situation estimation units 124 as the number of users, and there may be only one future situation estimation unit shared by each user.
  • each of the above-described embodiments is realized by being interpreted and executed by a predetermined program data power CPU capable of executing the above-described processing procedure stored in a storage device (ROM, RAM, hard disk, etc.). Is done.
  • the program data may be introduced into the storage device via the recording medium, or may be directly executed on the recording medium.
  • the recording medium refers to a recording medium such as a semiconductor memory such as ROM, RAM and flash memory, a magnetic disk memory such as a flexible disk and a hard disk, an optical disk such as a CD-ROM, DVD and BD, and a memory card.
  • the recording medium is a concept including a communication medium such as a telephone line or a conveyance path.
  • the device control system according to the present invention can be applied to a device control system that controls the cooperative operation of a plurality of devices.
  • the device control system is connected to each other via a home LAN mainly including a personal computer. It is possible to use it for the network system that is used.

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Selective Calling Equipment (AREA)
  • Air Conditioning Control Device (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Computer And Data Communications (AREA)

Abstract

 連携動作の制御中にユーザの行動が変化した場合であっても、その変化に合わせて、時間を要する処理を好適に完了させることが可能な機器制御システム等を実現する。  機器制御装置120が将来状況推定部124および制御機器決定部126等を、機器130が予測情報取得部131および動作内容決定部132等をそれぞれ備えることにより、ユーザに関する現状況の変化に応じて将来状況の予測が変更され、その予測変化に応じて機器の動作内容を決定するため、ユーザの行動が変化しても、そのユーザの行動に合わせて時間を要する処理を完了させたり、そのユーザの行動に先行させて機器の制御を開始したりすることができる。

Description

明 細 書
機器制御システムおよび機器制御方法
技術分野
[0001] 本発明は、複数の機器の連携動作を制御する技術に関し、特に、ユーザの行動パ ターンを利用して上記連携動作を制御する機器制御システムに関する。
背景技術
[0002] 従来、複数の機器 (例えば、家電機器)を連携動作させる方法として、ある家電機器 の動作を別の家電機器の動作開始のきっかけとして順次制御を行う方式がある (例 えば、特許文献 1参照)。この方式は、家電機器を次々と制御するような「一連動作」 の自動化に適する。例えば、「DVDプレーヤの電源を ONにし、テレビの電源を ON にし、テレビの外部入力をビデオ入力に切り替え、 DVDプレーヤの再生を開始し、 エアコンの暖房を開始する」ような、複数の家電機器に対する一連の動作の自動化 には適する。
特許文献 1:特開 2002— 281574号公報
発明の開示
発明が解決しょうとする課題
[0003] し力しながら、前記従来の方式では、エアコンによる「室温の制御」や電気炊飯器に よる「炊飯」など、制御に一定の時間を要する家電機器等を含むシステムであって、 その途中にユーザの行動が変化した場合に合わせて、上記一定の時間を要する処 理の完了時刻を変更させた ヽ場合には、対応することができな 、。
[0004] つまり、従来方式は、一定の時間を要する家電機器を含む連携動作について制御 を行う場合に、ユーザの行動の変化に対応できないため、好適な時刻に制御が完了 できず、利便性に欠けるという課題を有する。
[0005] そこで、本発明は、上記従来の課題を解決するものであり、連携動作の制御中にュ 一ザの行動が変化した場合であっても、その変化に合わせて、時間を要する処理を 好適に完了させることが可能な機器制御システム等を提供することを目的とする。 課題を解決するための手段 [0006] 上記課題を解決するために、本発明に係る機器制御システムは、ユーザに関する 環境又は当該ユーザの行動を表す行動情報を取得するセンサと、前記ユーザの将 来の状況を、前記センサによって取得された前記行動情報と、現状況からの経過時 間によつて異なる遷移確率とに基づいて予測し、当該予測された状況を表す予測情 報を生成する機器制御装置と、前記機器制御装置によって生成された前記予測情 報に従って動作する機器とを備えることを特徴とする。
[0007] 本構成によって、ユーザの現状況からの経過時間に伴う遷移確率の変化に応じて 将来状況の予測が変更され、その予測変化に応じて機器の動作内容を決定するた め、たとえユーザの行動が変化しても、その変化に合わせて機器を制御することが可 能なシステムを実現することができる。
[0008] また、本発明に係る機器制御システムの前記機器制御装置は、前記行動情報と前 記ユーザが置かれ得る状況との関係を表す行動 状況間関係情報を保持する行動 状況間関係管理手段と、前記行動 状況間関係情報を用いて前記ユーザの現状 況を判定する現状況判定手段と、ユーザが置かれ得る 2つの状況間の関係を表す状 況間関係情報を保持する状況間関係管理手段と、前記現状況判定手段で判定され た現状況と前記状況間関係情報を用いてユーザの将来状況を予測し、当該予測結 果を表す予測情報を特定する将来状況推定手段と、予測された前記将来状況と制 御対象の機器との関係を表す状況一機器間関係情報を保持する状況一機器間関 係管理手段と、予測された前記将来状況と前記状況一機器間関係情報とを用いて 制御対象の機器を決定すると共に、当該機器に、前記予測情報を通知する制御機 器決定手段とを備えることとしてもょ ヽ。
[0009] さらに、前記機器制御装置は、前記ユーザの行動履歴を表す履歴情報を収集する 情報収集手段を備え、前記状況間関係管理手段は、さらに、収集された前記履歴情 報を用いて前記状況間関係情報を修正することとしてもょ 、。
[0010] さらに、本発明に係る前記機器は、当該機器の制御に関する判定条件を保持する 判定条件管理手段と、前記機器制御装置から予測情報を取得する予測情報取得手 段と、取得された前記予測情報と前記判定条件とを用いて、当該機器の動作内容を 決定する動作内容決定手段と、決定された前記動作内容に応じて、当該機器を制御 する動作制御手段とを備えることを特徴とする。
[0011] また、前記予測情報は、現状況からの経過時間と前記将来の状況への遷移確率を 含み、前記動作内容決定手段は、前記判定条件を満たす前記将来の状況への遷移
Figure imgf000005_0001
ヽて動作内容を特定することを特徴とする。
[0012] また、前記機器制御装置は、さらに、現状況からの経過時間に沿って予測された中 間状況を予測し、さらに当該中間状況力 の経過時間に沿って前記ユーザの将来の 状況を予測し、当該予測された将来状況を表す予測情報を生成することを特徴とす る。
[0013] なお、本発明は、上記機器制御システム又は機器制御装置における特徴的な構成 手段をステップとする機器制御方法として実現したり、それらステップをパーソナルコ ンピュータ等に実行させるためのプログラムとして実現したりすることもできる。そして 、そのプログラムを DVD等の記録媒体やインターネット等の伝送媒体を介して広く流 通させることができるのは云うまでもない。
発明の効果
[0014] 本発明の機器制御システムによれば、ユーザの現状況からの経過時間に伴う遷移 確率の変化に応じて将来状況の予測が変更され、その予測変化に応じて機器の動 作内容を決定するため、たとえユーザの行動が変化しても、その変化に合わせて時 間を要する処理を完了させたり、ユーザの行動に先んじて処理を開始させることが可 能なシステムを実現することができる。
[0015] また、ユーザの行動や行動履歴を状況間関係表に反映させることで、状況間関係 を過去の履歴や他人の経験から学習でき、より適切に将来状況の予測をすることが 可能となる。
図面の簡単な説明
[0016] [図 1]図 1は、本発明に係る機器制御システムの概略を示すノヽードウエア構成図であ る。
[図 2]図 2は、本発明に係る機器制御システムの機能構成を示すブロック図である。
[図 3]図 3は、行動—状況間関係表の一例を示す図である。
[図 4]図 4は、現状況表の一例を示す図である。 [図 5]図 5は、状況間関係表の一例を示す図である。
[図 6]図 6は、状況間関係表の一例を示す図である。
[図 7]図 7は、状況間関係表の一例を示す図である。
[図 8]図 8は、予測状況表の一例を示す図である。
[図 9]図 9は、状況一機器間関係表の一例を示す図である。
[図 10]図 10は、動作内容決定表の一例を示す図である。
[図 11]図 11は、機器制御装置の処理の流れを示すフローチャートである。
[図 12]図 12は、機器の処理の流れを示すフローチャートである。
[図 13]図 13は、現状況表の一例を示す図である。
[図 14]図 14は、現状況表の一例を示す図である。
[図 15]図 15は、予測状況表の一例を示す図である。
[図 16]図 16は、予測状況表の一例を示す図である。
符号の説明
10 機器制御システム
20 LAN
30 電灯
40 テレビ
50 エアコン(トイレ室)
60 電気湯沸器 (浴室)
70 電気カーペット
80 ネットワーク
90 携帯端末
110 センサ
120 機器制御装置
121 行動 状況間関係管理部
122 現状況判定部
123 状況間関係管理部
124 将来状況推定部 125 状況一機器間関係管理部
126 制御機器決定部
130 機器
131 予測情報取得部
132 動作内容決定部
133 判定条件管理部
134 動作制御部
発明を実施するための最良の形態
[0018] 以下、本発明に係る実施の形態について、図面を参照しながら説明する。なお、以 下の実施の形態において本発明について図面を用いて説明するが、本発明をこれ らに限定することを意図するものではない。
[0019] (実施の形態)
図 1は、本実施の形態に係る機器制御システム 10の概略を示すノヽードウエア構成 図である。この機器制御システム 10は、ユーザの行動の予測を行い、この予測結果 に基づ!/、て家電機器や電気器具など (以下「機器等」 t 、う。 )を対象とする連携動作 の制御を行うシステムであり、センサ 110、機器制御装置 120、電灯 30、テレビ 40、 エアコン 50、電気湯沸器 60、電気カーペット 70、携帯端末 90を備え、これらはィー サネット (登録商標)等の LAN20 (さらに、機器制御装置 120およびインターネット等 のネットワーク 80)を介して接続されている。そして、この機器制御装置 120による連 携動作の制御については、携帯端末 90からの遠隔制御が可能である。
[0020] なお、上記機器制御システム 10における電灯 30、テレビ 40、エアコン 50、電気湯 沸器 60および電気カーペット 70は機器等の一例であり、これら以外の機器等であつ てもよい。
[0021] ここで、本発明における「機器等」は、具体的には、エアコンや洗濯機などの家電機 器、テレビやスピーカやカメラなどの AV機器、電球やベルやスィッチやバイブレータ や各種センサなど情報の入出力が可能な電気機器、液晶ディスプレイやヘッドマウ ントディスプレイなどの情報表示機器、ぬ ヽぐるみ型ロボットやランプ付傘や液晶ディ スプレイ付きハンガーなど情報の入出力が可能な小物機器、電話やファックスなどの 情報通信機器、ノソコンやホームサーバなどの情報処理機器、携帯電話や GPS端 末などの携帯機器、自動ドアや交通信号などの公共機器、天気予報サーバや交通 情報サーバやランキング情報サーバなどの情報提供サーバ、メールサーバやスケジ ユーラサーバやテレビ番組録画サーバや家計簿サーバなど個人やグループに関す る情報を扱うサーバ、辞書サーバや言語翻訳サーバや音声認識サーバや画像認識 サーバやフォーマット変換サーバやデータ評価サーバや動き検出機能提供サーバ ゃノヽードディスクレンタルサーバや認証サーバなどの機能を提供するサーノ 、 IC力 ードゃ RFID (Radio Frequency Identification System)などの情報提供装置等を含む ものとする。
[0022] また、本発明における「センサ」とは、前記機器等に提供し得る、ユーザの行動に関 連する情報を取得する素子又は装置をいう。ユーザが操作するテレビや照明などの 機器、ユーザの行動を認識するドアセンサやビデオカメラや GPSや体温計や姿勢検 出装置などの機器、ユーザの行動に影響を与える情報を提供する交通渋滞情報提 供サーバや天気予報サーバやスケジューラサーバやメールサーバなどの機器、ユー ザの行動に影響を与え得る他人が操作した機器および他人の行動を認識する機器 およびその他の機器等を含むものとする。
[0023] また、本発明における「行動情報」は、前記センサから取得する情報やデータ等を 意味する。
[0024] また、本発明における「状況」とは、ユーザ自身の状態又はユーザが置かれて!/、る 周囲の状態を意味する。状況の具体例としては、身体的な状況、精神的な状況、位 置的状況、社会的状況、周辺環境状況等を含む。身体的な状況としては、体温が高 い状況、腕を上げている状況、歩いている状況、寝ている状況および食事中の状況 等を含む。精神的な状況としては、疲れている状況、喜んでいる状況、困っている状 況、ストレスを受けている状況、興奮している状況およびダイエットや健康など特定の 興味対象に関心がある状況等を含む。位置的状況は、ユーザが存在する地域、部 屋、特定の物体や生物からの距離、 1階以外にいる状況および移動中の状況等を含 む。社会的状況としては、勤務中の状況、会議中の状況、上司との会話中の状況、 監視されている状況、担当している仕事の締切りが近い状況、会議に遅刻しそうな状 況、失敗後の状況、道に迷った状況、抱えている課題が多い状況、人間関係に悩ん でいる状況およびひつたくり等の犯罪が多い道路にいる状況等を含む。また、周辺 環境状況としては、寒い状況、狭い状況、うるさい状況、ネットワーク接続できない状 況、周辺にある機器の存在や特徴を表す状況等を含むものとする。
[0025] なお、前述した各用語の説明は、本実施の形態の内容の理解を容易にするために 記載したものであり、本発明を限定するものではな 、。
[0026] 以下、本実施の形態に係る機器制御システム 10の各構成要素の機能について具 体的に説明する。図 2は、機器制御システム 10の機能構成を示すブロック図である。 図 2に示されるように、機器制御システム 10は、センサ 110、機器制御装置 120およ び機器 130を備える。
[0027] センサ 110は、例えば、テレビ 40、リモートコントローラ(以下「リモコン」という。)又 は赤外線センサであり、ユーザが置かれている状況やユーザの行動(リモコンの操作 やユーザの居場所の移動など)の内容を示す行動情報を機器制御装置 120に通知 する。なお、センサ 110は、ユーザの居場所を特定することが可能な GPS機能を有 する携帯端末 90であってもよ 、。
[0028] 機器制御装置 120は、例えばパーソナルコンピュータであり、機器制御システム 10 全体を制御すると共に、 LAN20を介して行われる機器間の通信を制御する。さらに 、機器制御装置 120は、センサ 110から取得した行動情報に基づいて、現状況を判 断すると共に将来状況を推定し、この推定結果を機器 130に通知する。図 2に示され るように、機器制御装置 120は、行動-状況間関係管理部 121、現状況判定部 122 、状況間関係管理部 123、将来状況推定部 124、状況一機器間関係管理部 125、 制御機器決定部 126および計時部 127を備える。
[0029] 行動—状況間関係管理部 121は、例えば RAM等の記憶装置を備え、センサ 110 から取得した行動情報とユーザが置かれ得る状況との関係を表す情報 (例えば、行 動 状況間関係表)を管理する。図 3に、行動 状況間関係表の具体例を示す。
[0030] 現状況判定部 122は、例えば、制御プログラムを記憶する ROMおよび RAM等を 備えるマイクロコンピュータであり、機器制御装置 120全体を制御する。さらに、現状 況判定部 122は、センサ 110から取得した行動情報と、行動-状況間関係管理部 1 21における行動 状況間関係表とを用いて、ユーザの現状況を判定し、この判定結 果を将来状況推定部 124に通知する。
[0031] 状況間関係管理部 123は、例えば RAM等の記憶装置を備え、ユーザが置かれ得 る状況間の関係を表す情報 (例えば、状況間関係表)を管理する。図 5に、状況間関 係表の具体例を示す。
[0032] 将来状況推定部 124は、現状況判定部 122において判定された現状況と、状況間 関係管理部 123における状況間関係表とを用いて、ユーザの将来の状況「次状況」 ともいう。)を予測し、この予測結果を制御機器決定部 126に通知する。
[0033] 状況一機器間関係管理部 125は、例えば RAM等の記憶装置を備え、ユーザが置 かれ得る状況と機器との関係を表す情報 (例えば、状況一機器間関係表)を管理す る。図 9に、状況一機器間関係表の具体例を示す。
[0034] 制御機器決定部 126は、将来状況推定部 124において予測された次状況と状況 —機器間関係管理部 125における状況—機器間関係表を用いて、制御対象の機器 を特定し、この機器に対して予測情報 (例えば、経過時間および遷移確率)を送信す る。
[0035] 計時部 127は、現状況判定部 122の指示によって計時を開始し、計時による時間 を表す情報を定期的(例えば、 1msec毎)に現状況判定部 122に通知する。
[0036] 機器 130は、例えばトイレ室のエアコンであり、機器制御装置 120の指示に従った 動作 (例えば、トイレ室内の温度の制御)を行う。この機器 130は、予測情報取得部 1 31、動作内容決定部 132、判定条件管理部 133および動作制御部 134を備える。
[0037] 予測情報取得部 131は、上記機器制御装置 120の制御機器決定部 126から受信 した予測情報 (例えば、経過時間と遷移確率)を動作内容決定部 132に通知する。
[0038] 動作内容決定部 132は、予測情報取得部 131から取得した予測情報 (例えば、経 過時間と遷移確率)と、判定条件管理部 133における当該機器 130の動作内容を決 定する情報 (例えば、機器動作内容決定表)とを用いて当該機器 130の動作内容( 例えば、トイレ室のエアコンの ONZOFFのタイミング)を決定する。
[0039] 判定条件管理部 133は、動作内容決定部 132において用いる、当該機器 130の 動作内容を表す情報 (例えば、機器動作内容決定表)を管理する。図 10に、機器動 作内容決定表の具体例を示す。
[0040] 動作制御部 134は、動作内容決定部 132において決定された結果に応じて、当該 機器 130の動作を制御する。
[0041] 以上のように、本実施の形態に係る機器制御システム 10によれば、将来状況推定 部 124と、動作内容決定部 132等を備えることにより、ユーザの現状況力もの経過時 間に伴う、状況間の遷移確率の変化に応じて将来状況の予測が変更され、その予測 変化に応じて機器 130の動作内容を決定するため、たとえユーザの行動が変化して も、その変化に合わせて時間を要する処理を完了させたり、ユーザの行動に先んじ て処理を開始させることが可能なシステムを実現することができる。
[0042] 次に、上記のように構成される機器制御システム 10の動作について、図面を参照し ながら説明する。以下では、実施例として、ユーザが自宅のリビングにおいてテレビ 番組を視聴している状況を想定し、将来、このユーザがトイレを使用する状況を予測 して、その予測結果に基づいてトイレ室のエアコンを制御する場合について説明する 。上記の制御を行うことによって、ユーザが実際にトイレを使用する時のトイレ室の室 温を適温にすることができる。
[0043] 図 11は、機器制御装置 120における処理の流れを示すフローチャートである。
[0044] 最初に、現状況判定部 122は、本処理に必要な初期設定 (ユーザによる指示ゃ設 定を含む。)を行った後(S10)、計時部 127から通知される時間情報を用いて、予め 規定された一定の時間が経過した力否か (S 11)、又はセンサ 110から行動情報が入 力されたか否かを判定する(S12)。
[0045] 上記の一定時間の経過(SI 1 : Yes)又はセンサ 110から行動情報が入力されると( Sl l :Noかつ S12 :Yes)、現状況判定部 122は、一定時間前の現状況又は入力さ れた行動情報を用いて現状況の判定を行う(S13)。
[0046] より具体的に説明すると、ユーザが自宅のリビングにお 、てテレビ番組の視聴を開 始した場合、現状況判定部 122は、センサ 110としてのテレビから、ユーザの行動情 報として「番組開始」を取得する。
[0047] 次に、現状況判定部 122は、行動-状況間関係管理部 121が管理する行動-状 況間関係表 300 (図 3参照)を用いて、その行動情報欄 310から「TV:番組開始」を 特定し、この「TV:番組開始」に対応する状況として状況欄 320から「リビング:テレビ 番組視聴」を特定する。さらに、現状況判定部 122は、特定した「リビング:テレビ番組 視聴」を現状況表 400に保持すると共に、この状況になったと判定されてからの経過 時間の計時を開始する(図 4参照)。
[0048] 図 4の現状況表 400の例では、現状況が「リビング:テレビ番組視聴」であり、この状 況と判定されてからの経過時間は「2分」であることを示して 、る。現状況表 400の経 過時間は、予め決められた時間の経過毎 (例えば、 1分毎)に更新され、現状況もセ ンサ 110から取得した行動情報に応じて更新される。
[0049] この後、将来状況推定部 124は、現状況判定部 122において特定された現状況か ら将来の次状況を推定する(または、推定された次状況から更に将来の次状況を推 定する。 ) (S14)。より具体的に説明すると、将来状況推定部 124は、状況間関係管 理部 123が管理する状況間関係表 500 (図 5参照)を用いて、次状況を予測する。
[0050] 例えば、現状況判定部 122において特定された現状況である「リビング:テレビ番組 視聴」の次状況を予測するために、図 5の状況間関係表 500において、元状況が「リ ビング:テレビ番組視聴」の行を特定する。この行にっ 、て、「リビング:テレビ番組視 聴」の列の欄には「表 6XX」、「リビング:テレビ CM視聴」の列の欄には「表 600」、「リ ビング:その他」の列の欄には「表 6YY」とあるので、これら 3状況を元状況「リビング: テレビ番組視聴」に対する次状況と推定する。それぞれの元状況に対する次状況の 予測は、「表 6ΧΧ」、「表 600」、「表 6ΥΥ」のように、別表を参照して推定する。一方、 状況間関係表 500において、元状況が「リビング:テレビ番組視聴」の行に対応する する「トイレ使用中」と「風呂使用中」の列の欄には「なし」と記されて 、るため、次状況 の推定は行わない。
[0051] 図 6に示す状況間関係表 600は、上記図 5における「表 600」の内容を表す状況間 関係表の具体例であり、「リビング:テレビ番組視聴」という状況になった後、「リビング :テレビ番組視聴」から「リビング:テレビ CM視聴」と 、う状況に変わる遷移確率が経 過時間に対応付けて定義されて 、る。上記現状況判定部 122にお 、て保持された 現状況表 400では、現状況は「リビング:テレビ番組視聴」で、経過時間は「2分」であ るので、図 6で経過時間「2分」に対応する状況遷移確率は「7%」であることが判明す る。同様に、現在から 1分後、即ち現状況力もの経過時間が 3分後に予測状況に変 わる遷移確率は「10%」であることが判明する。同様に、現在から 2分後は「20%」、 3 分後は「30%」、 4分後は「15%」であることが判明する。このように、次状況として「リ ビング:テレビ CM視聴」が推定され、現状況「リビング:テレビ番組視聴」から状況「リ ビング:テレビ CM視聴」に遷移する遷移確率としては、現在 7%、 1分後 10%、 2分 後 20%、 3分後 30%、 4分後 15%、と算出される (将来状況推定部 124は、算出され たこれらの値を保持しておく)。
[0052] さらに、将来状況推定部 124は、上記推定が完了した力否かを判断する(S15)。
推定が完了した場合は(S 15: Yes)、動作させるべき機器が決定されるので (S 16)、 その機器に予測した結果を表す予測情報を通知する(S17)。
[0053] 一方、推定が完了していない場合は(S 14 : No)、上記処理 S 14に戻る。ここで、上 記推定が完了した力しないかの判断は、 1度 S14を処理したら完了とする方法や、あ る決められた回数、例えば 2回処理 S14を繰り返したら完了とする方法や、次状況の 次状況の次状況というように次々と状況を予測して、最終的に予測できなくなるまで 処理 S 14を繰り返す方法や、それらの方法を組み合わせる方法などが考えられる。 本実施の形態では、処理 S14を 2回繰り返すことによって推定を完了するものとする 。従って、もう 1度処理 S14を行う。 2回目の処理 S14の内容を以下に記す。
[0054] (S14の 2回目)前記処理 S14において、次状況として 3状況が推定されたので、そ れぞれの状況の更に次の状況を推定する。本説明では、「リビング:テレビ CM視聴」 の次状況についてのみ記す。図 5の状況間関係表 500において、元状況が「リビング :テレビ CM視聴」の行を参照すると、次状況の「リビング:テレビ番組視聴」と「トイレ使 用中」の欄に記載がある(即ち、「なし」の記載ではない)ので、これら 2状況を次状況 と推定する。「トイレ使用中」の欄の「表 700」の具体例を図 7に示す。
[0055] 図 7の状況間関係表 700において、経過時間 0分に対応する状況遷移確率は「20 %」であるので、上記図 6にお 、て特定された「リビング:テレビ番組視聴」から「リピン グ:テレビ CM視聴」に遷移する状況遷移確率「7%」を用い、現状況の「テレビ番組 視聴」から「テレビ CM視聴」の状況を経て「トイレ使用中」 t 、う状況に至る遷移確率 は、「7%」と「20%」を乗じて「1. 4%」という値となる。 [0056] このように、現在から 2段階先の予測状況を算出してまとめたものが図 8の予測状況 表 800である。つまり、現在以降 (即ち、現状況から 2分経過以降)の経過時間に対 応させて、現状況「テレビ番組視聴」から次状況「トイレ使用中」を経て予測状況「トイ レ使用中」に至る遷移確率を算出してまとめたものが図 8の予測状況表 800である。 上述したように、現在 (即ち、「テレビ番組視聴」に遷移してから 2分経過後)の「テレビ 番組視聴」から「テレビ CM視聴」を経て予測状況「トイレ使用中」に至る遷移確率は「 1. 4%」と算出される。同様に、現状況から 1分後に「トイレ使用中」に至る遷移確率 は 2つのルートにおける遷移確率の合計である。つまり、現在の直後に「テレビ CM視 聴」に変わり、その 1分後に「トイレ使用中」となる場合は、上記図 6の「7%」と図 7の「1 0%」を乗じて「0. 7%」となる。一方、現在の 1分後に「テレビ CM視聴」に変わり、そ の直後に「トイレ使用中」に変わる遷移確率は、上記図 6の「10%」に図 7の「20%」を 乗じて「2%」と算出される。従って、上記「0. 7%」と「2%」とを合計して「2. 7%」と算 出される。
[0057] さらに、現在から 2分後に「トイレ使用中」に至る遷移確率は、 3つのルートにおける 遷移確率の合計である。つまり、現在直後に「テレビ CM視聴」に遷移してから 2分後 に「トイレ使用中」となる遷移確率は、「7%」と「3%」を乗じて約「0. 2%」である。また 、現在の 1分後に「テレビ CM視聴」に遷移し、その 1分後に「トイレ使用中」となる遷移 確率は、「10%」と「10%」を乗じて「1. 0%」である。さらに、現在の 2分後に「テレビ CM視聴」に遷移し、その直後に「トイレ使用中」となる遷移確率は、「20%」に「20% 」を乗じて「4. 0%」である。従って、上記の「0. 2%」、 「1. 0%」および「4. 0%」を合 計した「5. 2%」と 、う遷移確率となる。
[0058] 同様に、現在の 3分後の遷移確率は、「7% X 2% + 10% X 3% + 20% X 10% + 30% X 20%」より「8. 4%」と算出され、 4分後の遷移確率は、「7% X 1% + 10% X 2% + 20% X 3% + 30% X 10% + 15% X 20%」より「6. 9%」と算出される。このよ うに、現状況の「テレビ番組視聴」から「テレビ CM視聴」を経て「トイレ使用中」に遷移 する遷移確率を算出して、図 8の予測状況表 800を生成する。
[0059] 次に、制御機器決定部 126は、上記処理 S14において推定した予測結果に基づ いて、制御対象の機器を決定する (S16)。状況—機器間関係管理部 125が管理す る状況—機器間関係表 900 (図 9参照)を用いて、制御対象の機器を決定する。上記 の処理 S 14において推定した状況のそれぞれについて機器を判定する。図 9の機器 —状況間関係表 900より、「トイレ使用中」という予測状況に関しては、制御対象の機 器として「トイレ室のエアコン」を特定することができる。
[0060] 最後に、制御機器決定部 126において、上記の処理 S16で特定された機器 130に 予測結果を通知する(S 17)。この場合、制御機器決定部 126は、図 8に示す「トイレ 使用中」に関する予測情報をトイレ室のエアコン 50に通知する。
[0061] 以上の処理により、機器制御装置 120における将来状況予測処理を終了する。
[0062] 図 12は、機器制御装置 120における処理の流れを示すフローチャートである。
[0063] 最初に、予測情報取得部 131は、機器制御装置 120から予測結果を取得する(S2 D o例えば、上記図 11において生成した予測状況表 800を予測結果として取得す る。
[0064] 次に、動作内容決定部 132は、取得した予測結果に応じた動作内容を決定する(S 22)。具体的には、動作内容決定部 132は、判定条件管理部 133が管理する機器 動作内容決定表 1000 (図 10)を用いて、トイレ室のエアコン 50の動作内容を決定す る。本実施の形態では、トイレ室のエアコン 50の動作内容として、「ON (通常)」と「0 N (省エネ)」と「OFF」の 3種類があるものとする。上記の将来状況予測処理によると 、 「テレビ番組視聴」の 2分後に「5. 2%」の遷移確率で「トイレ使用中」となり、「30% 未満、 5%以上」に該当するので、動作内容は「ON (省エネ)」と判定することができ る。ここで、図 8をみると、「0分後に 1. 4%」および「1分後に 2. 7%」であるため、図 1 0より「OFF」と判定することもできるが、本実施の形態では、「ON (通常) >ON (省ェ ネ) >OFF」の優先順位に基づ 、て判定することとする。
[0065] なお、他の方式として、最も高い遷移確率に基づいて決定したり、最も時間的に近 V、将来の遷移確率に基づ 、て決定したりしてもよ!、。
[0066] これにより、動作制御部 134は、上記動作内容決定部 132において決定された内 容に従って機器 130を制御する(S23)。即ち、トイレ室のエアコンに対して「ON (省 エネ)」に設定する。
[0067] 以上の動作により、ユーザが「テレビ番組視聴」状況にある場合に、将来「テレビ C M視聴」状況を経て「トイレ使用中」状況に至ることを推定すると共に、その遷移確率 を算出する。トイレ室のエアコン 50は、この予測結果を取得することで、省エネモード で暖房を開始して、将来のユーザのトイレ使用のために制御を開始する。
[0068] (変形例)
上記の実施の形態では、「テレビ番組視聴」状況から 2分経過時の現状況に対する 予測結果を示したが、本変形例では、更にそのまま 2分経過して (即ち、 4分経過後も )「テレビ番組視聴」の状況が続いた場合と(図 13の現状況表 1300参照)、 2分経過 後に(即ち、 4分経過後は)「テレビ CM視聴」の状況に変化した場合(図 14の現状況 表 1400参照)とを比較する。現状況表 1300の場合は、上記の実施の形態の場合と 同様に予測を行って図 15に示す予測状況表 1500の遷移確率を算出する。一方、 現状況表 1400の場合も同様に予測を行って図 16に示す予測状況表 1600の遷移 確率を算出する。それぞれの予測結果をトイレ室のエアコン 50が取得した場合、い ずれも ΓΟΝ (通常)」動作となる。
[0069] 以上の動作により、ユーザの状況が「テレビ番組視聴」のままである力、「テレビ CM 視聴」に変化するかの違いに応じて、トイレ暖房を「OFF」と制御したり、「ON (通常) 」と制御したりして、ユーザの状況の変化に合わせて適切に機器 130 (即ち、トイレ室 のエアコン 50)を制御する。
[0070] 以上の動作により、本発明では、現状況を基づいて連鎖的に推論した将来状況の 予測結果を機器が取得して動作内容を決定するため、ユーザの行動が変化しても、 ユーザの行動に合わせて、時間を要する処理を完了させたり、ユーザの行動に先ん じて制御を開始することができる機器制御システムを実現することが可能となる。
[0071] なお、行動 状況間関係管理部 121や状況間関係管理部 123や状況一機器間関 係管理部 125や判定条件管理部 133は、それぞれの関係表や条件表を記録したフ アイルが保存されて 、るファイルシステムでもよ!/、。
[0072] なお、行動 状況間関係管理部 121や状況間関係管理部 123や状況一機器間関 係管理部 125や判定条件管理部 133は、それぞれの関係表や条件表を、ネットヮー クを経由してダウンロードすることで、変更、追加または削除を行うこととしてもよい。
[0073] なお、状況間関係管理 123で管理する状況間関係を表す情報は、表形式に限定 するものではなぐ表形式以外であってもよい。例えば、状況をノードとして、関係をノ ード間の枝として表現する状況グラフとしてもよい。
[0074] なお、現状況判定部 122が現状況を判定する際に、現状に完全に一致する状況で なくても、類似する状況を現状況とみなしてもよい。
[0075] なお、機器 130は、 1つあるいは複数の特定のユーザの状況を識別し得る状況識 別情報を機器制御装置 120に予め登録しておき、機器制御装置 120が、状況識別 情報によって識別された状況とユーザの予測状況とがー致したと判定した場合に、こ の状況識別情報の通知を受けることとしてもよい。例えば、前述のトイレ室におけるェ アコン 50の場合は、機器制御装置 120にお 、て「トイレ使用中」 t 、う状況が予測さ れた場合の通知先として、トイレ室のエアコン 50を予め登録しておいてもよい。また、 トイレ室のェアコン 50を識別する機器 IDを機器制御装置 120に通知し、機器制御装 置 120がその機器 IDを用いて適切な状況を決定し、状況-機器間関係表を更新す ることとしてちよい。
[0076] なお、現状況判定部 122は、状況の種別に応じて、複数の状況を現状況として判 定してもよい。例えば、「現状況が仕事中状況であると共に、休憩中状況でもある」と 半 IJ定してちよい。
[0077] なお、状況間関係管理部 123は、 1人のユーザあるいは複数のユーザの行動や行 動履歴を用いて状況間関係表を更新することとしてもよい。例えば、テレビ CM視聴 中にトイレに行く回数が増えるほど、状況間関係表における「テレビ CM視聴中」状況 から「トイレ使用中」状況へと変わる遷移確率を増加させるなど、学習処理を行っても よい。また、状況間関係表の一部あるいは全部を複数人で共有してもよいし、あるュ 一ザの状況間関係表の変更内容を、別のユーザの状況間関係表に反映させてもよ い。
[0078] なお、本実施の形態では、トイレ室の温度調節と!/、う時間を要する処理を実施例と して記載したが、本発明により、上記のような時間を要する処理の制御と同様に、ュ 一ザの状況変化に先んじた制御を実施してもよい。例えば、本発明を適用して、現在 乗車して!/、る電車等の情報からの次の乗換駅を推定し、その乗換駅の最寄りの店の 情報を、ユーザが乗換駅に到着する前に提示することも可能である。 [0079] なお、図 2における各部は、 1台のコンピュータ内に備えてもよいし、 1台のコンビュ ータ内に備えなくてもよい。例えば、センサ 110が機器 130内にあってもよいし、現状 況判定部 122がセンサ 110に含まれて 、てもよ 、し、将来状況推定部 124と状況間 関係管理部 123がネットワーク上の異なるコンピュータに配置されていてもよい。また 、動作内容判定部 132と判定条件管理部 133と動作制御部 134が異なるコンビユー タに配置されていてもよい。さらに、複数のコンピュータに各部が分散していてもよい
[0080] なお、図 2における各部は、複数存在してもよ 、。例えば、ユーザの数だけ将来状 況推定部 124があってもよ 、し、各ユーザで共有する将来状況推定部が 1つだけあ つてもよい。
[0081] なお、上記した各実施の形態は、記憶装置 (ROM、 RAM,ハードディスク等)に格 納された上述した処理手順を実行可能な所定のプログラムデータ力 CPUによって 解釈実行されることで実現される。この場合、プログラムデータは、記録媒体を介して 記憶装置内に導入されてもよいし、記録媒体上カゝら直接実行されてもよい。なお、記 録媒体は、 ROM, RAM,フラッシュメモリ等の半導体メモリ、フレキシブルディスクや ハードディスク等の磁気ディスクメモリ、 CD— ROMや DVD、 BD等の光ディスク、メ モリカード等の記録媒体をいう。また、記録媒体は、電話回線や搬送路等の通信媒 体も含む概念である。
産業上の利用可能性
[0082] 本発明に係る機器制御システムは、複数の機器の連携動作を制御する機器制御 システムに適用が可能であり、特にパーソナルコンピュータ等を中心とする家庭内 L AN等を介して相互に接続されているネットワークシステムに利用が可能である。

Claims

請求の範囲
[1] ユーザに関する環境又は当該ユーザの行動を表す行動情報を取得するセンサと、 前記ユーザの将来の状況を、前記センサによって取得された前記行動情報と、現 状況からの経過時間によって異なる遷移確率とに基づいて予測し、当該予測された 状況を表す予測情報を生成する機器制御装置と、
前記機器制御装置によって生成された前記予測情報に従って動作する機器と を備えることを特徴とする機器制御システム。
[2] 前記機器制御装置は、
前記行動情報と前記ユーザが置かれ得る状況との関係を表す行動 状況間関係 情報を保持する行動 状況間関係管理手段と、
前記行動 状況間関係情報を用いて前記ユーザの現状況を判定する現状況判定 手段と、
ユーザが置かれ得る 2つの状況間の関係を表す状況間関係情報を保持する状況 間関係管理手段と、
前記現状況判定手段で判定された現状況と前記状況間関係情報を用いてユーザ の将来状況を予測し、当該予測結果を表す予測情報を特定する将来状況推定手段 と、
予測された前記将来状況と制御対象の機器との関係を表す状況一機器間関係情 報を保持する状況一機器間関係管理手段と、
予測された前記将来状況と前記状況一機器間関係情報とを用いて制御対象の機 器を決定すると共に、当該機器に、前記予測情報を通知する制御機器決定手段とを 備える
ことを特徴とする請求項 1記載の機器制御システム。
[3] 前記機器制御装置は、さらに、
前記ユーザの行動履歴を表す履歴情報を収集する情報収集手段を備え、 前記状況間関係管理手段は、さらに、
収集された前記履歴情報を用いて前記状況間関係情報を修正する
ことを特徴とする請求項 2記載の機器制御システム。
[4] 前記機器は、
当該機器の制御に関する判定条件を保持する判定条件管理手段と、 前記機器制御装置から予測情報を取得する予測情報取得手段と、
取得された前記予測情報と前記判定条件とを用いて、当該機器の動作内容を決定 する動作内容決定手段と、
決定された前記動作内容に応じて、当該機器を制御する動作制御手段とを備える ことを特徴とする請求項 1記載の機器制御システム。
[5] 前記予測情報は、現状況からの経過時間と前記将来の状況への遷移確率を含み 前記動作内容決定手段は、前記判定条件を満たす前記将来の状況への遷移確率 に基づ!/、て動作内容を特定する
ことを特徴とする請求項 4記載の機器制御システム。
[6] 前記機器制御装置は、さらに、
現状況からの経過時間に沿って予測された中間状況を予測し、さらに当該中間状 況からの経過時間に沿って前記ユーザの将来の状況を予測し、当該予測された将 来状況を表す予測情報を生成する
ことを特徴とする請求項 1記載の機器制御システム。
[7] ユーザに関する環境又は当該ユーザの行動を表す行動情報をセンサを介して取 得する情報取得ステップと、
前記ユーザの将来の状況を、取得された前記行動情報と、現状況からの経過時間 によって異なる遷移確率とに基づ 、て予測し、当該予測された状況を表す予測情報 を生成する予測情報生成ステップと、
前記予測情報生成ステップによって生成された前記予測情報に従って機器を制御 する機器制御ステップと
を含むことを特徴とする機器制御方法。
[8] 機器制御装置のための、コンピュータに実行させるためのプログラムであって、 ユーザに関する環境又は当該ユーザの行動を表す行動情報と前記ユーザが置か れ得る状況との関係を表す行動 状況間関係情報を用 V、て前記ユーザの現状況を 判定する現状況判定ステップと、
ユーザが置かれ得る 2つの状況間の関係を表す状況間関係情報と、前記現状況 判定ステップで判定された現状況とを用いてユーザの将来状況を予測し、当該予測 結果を表す予測情報を特定する将来状況推定ステップと、
予測された前記将来状況と制御対象の機器との関係を表す状況一機器間関係情 報と、前記予測された前記将来状況とを用いて制御対象の機器を決定すると共に、 当該機器に、前記予測情報を通知する制御機器決定ステップと
を含むプログラム。
PCT/JP2005/016770 2004-09-14 2005-09-12 機器制御システムおよび機器制御方法 WO2006030742A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN200580030835.0A CN101027684B (zh) 2004-09-14 2005-09-12 机器控制系统及机器控制方法
JP2006535877A JP4741500B2 (ja) 2004-09-14 2005-09-12 機器制御装置、機器、機器制御装置の制御方法、プログラムおよび機器制御システム
US11/662,546 US20070233285A1 (en) 2004-09-14 2005-09-12 Apparatus Control System and Apparatus Control Method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2004266382 2004-09-14
JP2004-266382 2004-09-14

Publications (1)

Publication Number Publication Date
WO2006030742A1 true WO2006030742A1 (ja) 2006-03-23

Family

ID=36059995

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2005/016770 WO2006030742A1 (ja) 2004-09-14 2005-09-12 機器制御システムおよび機器制御方法

Country Status (4)

Country Link
US (1) US20070233285A1 (ja)
JP (1) JP4741500B2 (ja)
CN (1) CN101027684B (ja)
WO (1) WO2006030742A1 (ja)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008267741A (ja) * 2007-04-24 2008-11-06 Toyota Motor Corp 機器制御システム
WO2008153131A1 (ja) * 2007-06-15 2008-12-18 Olympus Corporation 携帯型電子機器、プログラム及び情報記憶媒体
WO2008153132A1 (ja) * 2007-06-15 2008-12-18 Olympus Corporation 制御システム、プログラム及び情報記憶媒体
JP2010028687A (ja) * 2008-07-24 2010-02-04 Mitsubishi Electric Building Techno Service Co Ltd 建物遠隔監視システム
WO2010013572A1 (ja) * 2008-07-28 2010-02-04 国立大学法人筑波大学 建物内制御装置
JP2015508523A (ja) * 2011-12-23 2015-03-19 インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation モノのインターネットにおけるサービス・インスタンス指向のエネルギー管理のための方法、システム、およびコンピュータ・プログラム
JP2015146514A (ja) * 2014-02-03 2015-08-13 パナソニックIpマネジメント株式会社 センサ管理システム、センサ管理方法及びセンサ管理プログラム
WO2019132052A1 (ko) * 2017-12-26 2019-07-04 엘지전자 주식회사 동작 상황에 기반하여 유관 장치를 제어하는 장치, 이를 제어하는 스케줄 봇 및 서버

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7577548B1 (en) * 2006-03-04 2009-08-18 Hrl Laboratories Integrated framework for diagnosis and prognosis of components
JP5215099B2 (ja) * 2008-09-17 2013-06-19 オリンパス株式会社 情報処理システム、デジタルフォトフレーム、プログラム及び情報記憶媒体
US8504505B2 (en) * 2008-10-31 2013-08-06 Caterpillar Inc. System and method for controlling an autonomous worksite
JP4812910B2 (ja) * 2010-02-02 2011-11-09 パナソニック株式会社 稼動状況判定装置および稼動状況判定方法
FR2962269B1 (fr) * 2010-07-01 2017-05-12 Somfy Sas Supervision energetique d'un local
DE102011052467B4 (de) * 2011-08-08 2014-12-04 tado GmbH Nutzer-zustand und -verhalten basiertes steuerungssystem und -verfahren für gebäudetechnische systeme und komponenten
JP5339316B1 (ja) * 2012-05-31 2013-11-13 楽天株式会社 識別情報管理システム、識別情報管理システムの制御方法、情報処理装置、及びプログラム
DE102012014562A1 (de) 2012-07-23 2014-01-23 tado GmbH Verfahren und Vorrichtung zur geopositionsbasierten Steuerung von verzögerungsbehafteten Systemen
DE102012108065A1 (de) * 2012-08-30 2014-03-06 EnBW Energie Baden-Württemberg AG Energieverbrauchersteuerverfahren und Steuervorrichtung auf Basis eines Energieverbrauchsprofils
IN2013CH01206A (ja) * 2013-03-20 2015-08-14 Infosys Ltd
JP5820986B2 (ja) * 2013-03-26 2015-11-24 パナソニックIpマネジメント株式会社 映像受信装置及び受信映像の画像認識方法
JP6281126B2 (ja) 2013-07-26 2018-02-21 パナソニックIpマネジメント株式会社 映像受信装置、付加情報表示方法および付加情報表示システム
JP6194484B2 (ja) 2013-07-30 2017-09-13 パナソニックIpマネジメント株式会社 映像受信装置、付加情報表示方法および付加情報表示システム
US9207659B1 (en) * 2013-08-05 2015-12-08 Ameer Sami System and method for automating electrical devices at a building structure
US9900650B2 (en) 2013-09-04 2018-02-20 Panasonic Intellectual Property Management Co., Ltd. Video reception device, video recognition method, and additional information display system
US9906843B2 (en) 2013-09-04 2018-02-27 Panasonic Intellectual Property Management Co., Ltd. Video reception device, video recognition method, and display system for providing additional information to be superimposed on displayed image
CN103533706A (zh) * 2013-09-25 2014-01-22 浙江生辉照明有限公司 无线led照明装置、无线照明控制系统及控制方法
JP6664069B2 (ja) * 2013-12-31 2020-03-13 イマージョン コーポレーションImmersion Corporation 触覚コンテンツを伴う視点動画を記録及び再生するシステム並びに方法
JP6340596B2 (ja) 2014-03-26 2018-06-13 パナソニックIpマネジメント株式会社 映像受信装置、映像認識方法および付加情報表示システム
JP6194483B2 (ja) 2014-03-26 2017-09-13 パナソニックIpマネジメント株式会社 映像受信装置、映像認識方法および付加情報表示システム
CN106233747B (zh) 2014-07-17 2019-07-09 松下知识产权经营株式会社 辨识数据生成装置及方法、图像辨识装置以及记录介质
WO2016027457A1 (ja) 2014-08-21 2016-02-25 パナソニックIpマネジメント株式会社 コンテンツ認識装置およびコンテンツ認識方法
US10270609B2 (en) * 2015-02-24 2019-04-23 BrainofT Inc. Automatically learning and controlling connected devices
DE102017206299A1 (de) * 2017-04-12 2018-10-18 Siemens Schweiz Ag Verfahren zum Steuern einer Betriebseinrichtung eines Gebäudes und Gebäudeautomationssystem
US11061374B2 (en) * 2019-03-06 2021-07-13 Ademco Inc. Multi-factor event sequencing and analytics systems
KR20220052498A (ko) * 2020-10-21 2022-04-28 삼성전자주식회사 전자 장치 및 그 제어 방법
CN114167801B (zh) * 2021-12-06 2022-07-08 中成卓越(北京)厨房设备有限公司 一种基于联动控制的厨房设备管理系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001056805A (ja) * 1999-08-18 2001-02-27 Sony Corp 行動予測方法及びその装置
JP2001273395A (ja) * 2000-03-24 2001-10-05 Matsushita Electric Ind Co Ltd 電気機器制御装置
JP2004185612A (ja) * 2002-11-22 2004-07-02 Matsushita Electric Ind Co Ltd 操作履歴利用システム及びその方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6850252B1 (en) * 1999-10-05 2005-02-01 Steven M. Hoffberg Intelligent electronic appliance system and method
US6400996B1 (en) * 1999-02-01 2002-06-04 Steven M. Hoffberg Adaptive pattern recognition based control system and method
CN2424493Y (zh) * 2000-06-06 2001-03-21 董春晓 智能住宅一体化控制器
EP1256875A1 (en) * 2001-05-10 2002-11-13 Nokia Corporation Method and device for context dependent user input prediction
US7233933B2 (en) * 2001-06-28 2007-06-19 Microsoft Corporation Methods and architecture for cross-device activity monitoring, reasoning, and visualization for providing status and forecasts of a users' presence and availability
US7689521B2 (en) * 2001-06-28 2010-03-30 Microsoft Corporation Continuous time bayesian network models for predicting users' presence, activities, and component usage
JP3735754B2 (ja) * 2001-10-26 2006-01-18 鹿島建設株式会社 設備制御監視方法及び設備制御監視装置
JP3996428B2 (ja) * 2001-12-25 2007-10-24 松下電器産業株式会社 異常検知装置及び異常検知システム
US7552030B2 (en) * 2002-01-22 2009-06-23 Honeywell International Inc. System and method for learning patterns of behavior and operating a monitoring and response system based thereon
CN1701287A (zh) * 2002-09-20 2005-11-23 松下电器产业株式会社 对话型装置
WO2004042531A2 (en) * 2002-11-04 2004-05-21 Smartsignal Corporation System state monitoring using recurrent local learning machine
CN100595786C (zh) * 2002-11-22 2010-03-24 松下电器产业株式会社 操作历史利用系统及其方法
JP2004309998A (ja) * 2003-02-18 2004-11-04 Nec Corp 確率分布推定装置および異常行動検出装置,ならびにその確率分布推定方法および異常行動検出方法
US20060167592A1 (en) * 2003-02-25 2006-07-27 Takahiro Kudo Execution support system and execution support method
US7698055B2 (en) * 2004-11-16 2010-04-13 Microsoft Corporation Traffic forecasting employing modeling and analysis of probabilistic interdependencies and contextual data
JP4783181B2 (ja) * 2006-03-13 2011-09-28 株式会社東芝 行動予測装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001056805A (ja) * 1999-08-18 2001-02-27 Sony Corp 行動予測方法及びその装置
JP2001273395A (ja) * 2000-03-24 2001-10-05 Matsushita Electric Ind Co Ltd 電気機器制御装置
JP2004185612A (ja) * 2002-11-22 2004-07-02 Matsushita Electric Ind Co Ltd 操作履歴利用システム及びその方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
ISODA Y.: "Ubiquitous Kankyo deno Jyotai Keiretsu Model o Mochiita User Shien System. (A User Activity Assistance System Using State-sequence Models in Ubiquitous Environment)", TRANSACTIONS OF INFORMATION PROCESSING SOCIETY OF JAPAN, vol. 44, no. 12, 15 December 2003 (2003-12-15), pages 3014 - 3023, XP002998811 *

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008267741A (ja) * 2007-04-24 2008-11-06 Toyota Motor Corp 機器制御システム
WO2008153131A1 (ja) * 2007-06-15 2008-12-18 Olympus Corporation 携帯型電子機器、プログラム及び情報記憶媒体
WO2008153132A1 (ja) * 2007-06-15 2008-12-18 Olympus Corporation 制御システム、プログラム及び情報記憶媒体
JP2008312047A (ja) * 2007-06-15 2008-12-25 Olympus Corp 携帯型電子機器、プログラム及び情報記憶媒体
JP2008310680A (ja) * 2007-06-15 2008-12-25 Olympus Corp 制御システム、プログラム及び情報記憶媒体
JP2010028687A (ja) * 2008-07-24 2010-02-04 Mitsubishi Electric Building Techno Service Co Ltd 建物遠隔監視システム
US8650135B2 (en) 2008-07-28 2014-02-11 University Of Tsukuba Building management apparatus
JPWO2010013572A1 (ja) * 2008-07-28 2012-01-12 国立大学法人 筑波大学 建物内制御装置
WO2010013572A1 (ja) * 2008-07-28 2010-02-04 国立大学法人筑波大学 建物内制御装置
JP2015508523A (ja) * 2011-12-23 2015-03-19 インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation モノのインターネットにおけるサービス・インスタンス指向のエネルギー管理のための方法、システム、およびコンピュータ・プログラム
US9335816B2 (en) 2011-12-23 2016-05-10 Globalfoundries Inc. System and method for efficient service-instance oriented energy management in the internet of things
JP2015146514A (ja) * 2014-02-03 2015-08-13 パナソニックIpマネジメント株式会社 センサ管理システム、センサ管理方法及びセンサ管理プログラム
WO2019132052A1 (ko) * 2017-12-26 2019-07-04 엘지전자 주식회사 동작 상황에 기반하여 유관 장치를 제어하는 장치, 이를 제어하는 스케줄 봇 및 서버
KR20190078507A (ko) * 2017-12-26 2019-07-04 엘지전자 주식회사 인공지능을 이용하여 동작 상황에 기반하여 유관 장치를 제어하는 장치, 이를 제어하는 스케줄 봇 및 서버
KR102050425B1 (ko) * 2017-12-26 2020-01-08 엘지전자 주식회사 인공지능을 이용하여 동작 상황에 기반하여 유관 장치를 제어하는 장치, 이를 제어하는 스케줄 봇 및 서버
US11310068B2 (en) 2017-12-26 2022-04-19 Lg Electronics Inc. Device of controlling related device using artificial intelligence based on operation situation, schedule bot and server controlling thereof

Also Published As

Publication number Publication date
CN101027684B (zh) 2011-01-12
US20070233285A1 (en) 2007-10-04
JP4741500B2 (ja) 2011-08-03
CN101027684A (zh) 2007-08-29
JPWO2006030742A1 (ja) 2008-05-15

Similar Documents

Publication Publication Date Title
WO2006030742A1 (ja) 機器制御システムおよび機器制御方法
US10992491B2 (en) Smart home automation systems and methods
US11050577B2 (en) Automatically learning and controlling connected devices
CN108076224B (zh) 应用程序控制方法、装置及存储介质和移动终端
KR101474645B1 (ko) 무선 통신 장치/사람의 위치에 기초하여 장치의 동작을 제어/조정하기 위해 그 위치를 결정하는 시스템 및 방법
JPWO2019013316A1 (ja) 機器制御システム
JP6400871B1 (ja) 発話制御装置、発話制御方法、および発話制御プログラム
CN111754997B (zh) 控制装置及其操作方法,和语音交互装置及其操作方法
JP7491221B2 (ja) 応答生成装置、応答生成方法及び応答生成プログラム
WO2019082630A1 (ja) 情報処理装置、及び情報処理方法
US20140288678A1 (en) Electrical appliance control apparatus, electrical appliance control method, electrical appliance control system, input device, and electrical appliance
JPWO2015129566A1 (ja) 管理装置、動作制御装置、電気機器管理システム、管理方法、動作制御方法及びプログラム
JP6557376B1 (ja) 出力制御装置、出力制御方法、および出力制御プログラム
JP6152853B2 (ja) 制御方法及びプログラム
JP6373709B2 (ja) 対話装置
KR20200084268A (ko) 홈 네트워크에서 사용자의 활동 상태를 추정하는 사용자 단말 및 그 제어 방법
JP6787957B2 (ja) 発話制御装置、発話制御方法、および発話制御プログラム
JP6499343B1 (ja) 情報処理装置、情報処理方法、および情報処理プログラム
JP2009222456A (ja) アラーム通知時刻変更方法
EP3992877A1 (en) Social interaction opportunity detection method and system
WO2021065076A1 (ja) 機器の制御方法及び情報処理装置
CN113534674A (zh) 生活服务方法、控制终端、装置及存储介质
WO2023215008A1 (en) Battery management and optimization using voice integration systems
CN117496970A (zh) 设备控制指令生成方法、装置、电子设备及存储介质
JP2022171390A (ja) 行動レコメンドシステム

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BW BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE EG ES FI GB GD GE GH GM HR HU ID IL IN IS JP KE KG KM KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NA NG NI NO NZ OM PG PH PL PT RO RU SC SD SE SG SK SL SM SY TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): BW GH GM KE LS MW MZ NA SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IS IT LT LU LV MC NL PL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

WWE Wipo information: entry into national phase

Ref document number: 2006535877

Country of ref document: JP

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 11662546

Country of ref document: US

Ref document number: 2007233285

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 200580030835.0

Country of ref document: CN

NENP Non-entry into the national phase

Ref country code: DE

WWP Wipo information: published in national office

Ref document number: 11662546

Country of ref document: US

122 Ep: pct application non-entry in european phase