JP2017533481A - 情報生成方法、情報生成装置、コンピュータプログラム及びコンピュータ読み取り可能な記憶媒体 - Google Patents

情報生成方法、情報生成装置、コンピュータプログラム及びコンピュータ読み取り可能な記憶媒体 Download PDF

Info

Publication number
JP2017533481A
JP2017533481A JP2016536135A JP2016536135A JP2017533481A JP 2017533481 A JP2017533481 A JP 2017533481A JP 2016536135 A JP2016536135 A JP 2016536135A JP 2016536135 A JP2016536135 A JP 2016536135A JP 2017533481 A JP2017533481 A JP 2017533481A
Authority
JP
Japan
Prior art keywords
food
information
refrigerator
user
people
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016536135A
Other languages
English (en)
Other versions
JP6421184B2 (ja
Inventor
珂 ▲呉▼
珂 ▲呉▼
新宇 ▲劉▼
新宇 ▲劉▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xiaomi Inc
Original Assignee
Xiaomi Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiaomi Inc filed Critical Xiaomi Inc
Publication of JP2017533481A publication Critical patent/JP2017533481A/ja
Application granted granted Critical
Publication of JP6421184B2 publication Critical patent/JP6421184B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/08Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/087Inventory or stock management, e.g. order filling, procurement or balancing against orders
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D29/00Arrangement or mounting of control or safety devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0631Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0633Lists, e.g. purchase orders, compilation or processing
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18Status alarms
    • G08B21/182Level alarms, e.g. alarms responsive to variables exceeding a threshold
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18Status alarms
    • G08B21/24Reminder alarms, e.g. anti-loss alarms
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/0092Nutrition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2823Reporting information sensed by appliance or service execution status of appliance services in a home automation network
    • H04L12/2827Reporting to a device within the home network; wherein the reception of the information reported automatically triggers the execution of a home appliance functionality
    • H04L12/2829Reporting to a device within the home network; wherein the reception of the information reported automatically triggers the execution of a home appliance functionality involving user profiles according to which the execution of a home appliance functionality is automatically triggered
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L2012/284Home automation networks characterised by the type of medium used
    • H04L2012/2841Wireless
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L2012/2847Home automation networks characterised by the type of home appliance used
    • H04L2012/285Generic home appliances, e.g. refrigerators

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Economics (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Theoretical Computer Science (AREA)
  • Strategic Management (AREA)
  • Human Resources & Organizations (AREA)
  • Development Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Quality & Reliability (AREA)
  • Operations Research (AREA)
  • Tourism & Hospitality (AREA)
  • Emergency Management (AREA)
  • Educational Administration (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Nutrition Science (AREA)
  • Signal Processing (AREA)
  • Educational Technology (AREA)
  • Game Theory and Decision Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Mechanical Engineering (AREA)
  • Thermal Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

【課題】本発明は、スマートホームの分野に属する情報生成方法及び情報生成装置に関し、特に、冷蔵庫が単に食物を保存するためだけに使われ、ユーザが料理中に冷蔵庫の中の食物が不足していることに気付く、という問題を解決する手段を提供する。【解決手段】本発明に係る情報生成方法は、冷蔵庫の中の食物の食物残余情報を取得するステップと、食物の食物消費速度を取得するステップと、食物残余情報及び食物消費速度に基づいて食物の推定食用回数を計算するステップと、推定食用回数が既定の食用回数よりも少ない場合、リマインド情報を生成するステップと、を含む。【選択図】図2

Description

[関連出願への相互参照]
本出願は、中華人民共和国国家知識産権局に対して2015年8月18日に出願された出願番号201510509014.0の中国特許出願に基づき優先権を主張し、この中国特許出願の全ての内容を援用する。
本発明は、概してスマートホームの分野に関し、特に、情報生成方法及び情報生成装置に関する。
一般の家庭機器としての冷蔵庫は、通常、人間によって食物を保存するために用いられる。ユーザは、食物の保存期間を延ばすために、購入した食物を低温保管庫としての冷蔵庫の中に保管する。しかし、ユーザは、普段は冷蔵庫の中に残っている食物の量を把握することができないため、自分が料理している間は冷蔵庫の中の食物の不足に気付く。
特開2015−007851号公報
本開示の実施形態の第1の側面によれば、冷蔵庫の中の食物の食物残余情報を取得するステップと、前記食物の食物消費速度を取得するステップと、前記食物残余情報及び前記食物消費速度に基づいて前記食物の推定食用回数を計算するステップと、前記推定食用回数が既定の食用回数よりも少ない場合、リマインド情報を生成するステップと、を含む情報生成方法が提供される。
或いは、前記食物残余情報は前記食物の種類及び前記食物の残量を含み、前記冷蔵庫の中の前記食物の前記食物残余情報を取得するステップは、前記冷蔵庫の中に配置されるカメラによって取得される前記冷蔵庫内部の画像に基づいて、異なる保存領域に保存される前記食物の前記種類及び前記食物の前記残量を決定するステップ、又は、カメラによって取得される前記冷蔵庫内部の画像に基づいて、異なる保存領域に保存される前記食物の前記種類を決定し、前記保存領域に設置される圧力センサによって取得される圧力データに基づいて、前記保存領域における前記食物の前記残量を決定するステップ、を含む
或いは、前記食物の前記食物消費速度を取得するステップは、食物消費の履歴記録に基づいて、ユーザによって消費される指定の食物の単一の食用量及び食用頻度を示すユーザの食習慣情報を取得するステップと、前記単一の食用量及び前記食用頻度に基づいて、前記食物消費速度を決定するステップと、を含む。
或いは、実際に食事する人の人数を取得するステップと、前記実際に食事する人の人数及び前記食物の標準食用量に基づいて、前記食物消費速度を修正するステップと、を更に含む。
或いは、前記実際に食事する人の人数を取得するステップは、前記冷蔵庫に関連付けられるホームカメラ、又は前記冷蔵庫の外に設置されるカメラによって取得される屋内画像情報を取得し、前記屋内画像情報に基づいて前記実際に食事する人の人数を決定するステップ、ホームゲートウェイ装置に接続される携帯端末の数を取得し、前記携帯端末の数に基づいて前記実際に食事する人の人数を決定するステップ、前記冷蔵庫に関連付けられる端末において、少なくとも訪問客の人数が含まれる訪問客情報を取得し、前記訪問客の人数に基づいて前記実際に食事する人の人数を決定するステップ、前記冷蔵庫に関連付けられる端末において、少なくとも旅行日数が含まれる旅行情報を取得し、前記旅行日数の間の前記実際に食事する人の人数を決定するステップ、又は既定の料理期間である既定の期間の間、前記冷蔵庫に関連付けられる携帯端末の地理的な位置情報を取得し、前記地理的な位置情報が、前記携帯端末と前記冷蔵庫との距離が既定の距離の閾値よりも大きいことを示すとき、前記携帯端末に対応するユーザは食事をしない人であると決定し、前記食事をしない人及び前記既定の食事をする人の人数に基づいて、前記実際に食事をする人の人数を決定するステップ、を含む。
或いは、前記推定食用回数が前記既定の食用回数よりも少ない場合、前記リマインド情報を生成するステップは、前記食物の購入のリンクを取得するステップと、前記リマインド情報に前記購入のリンクを付与するステップと、を含む。
或いは、前記ユーザの前記食習慣情報に基づいて、前記ユーザの好物を決定するステップと、前記食物の量、調理機器、及び前記調理機器に対応する調理作動パラメータを含み、前記ユーザの前記好物に対応する調理パラメータを検索するステップと、電気調理器、電磁オーブン、電子レンジ、又はオーブンからなる前記調理機器に前記調理パラメータを送信するステップと、を更に含む。
或いは、前記食物の実際の保存期間を取得し、前記実際の保存期間が前記食物に対応する推奨保存期間に到達した時、出来る限り速やかにユーザに前記食物を食用とすることを思い出させるための食用リマインド情報を生成するステップ、又は、前記冷蔵庫の中に設置されるカメラ又は匂いセンサによって前記食物の保存状態を決定し、前記保存状態が前記食物の劣化を示している時、ユーザに前記食物を処分することを思い出させるための食物処分情報を生成するステップ、を更に含む。
本開示の実施形態の第2の側面によれば、冷蔵庫の中の食物の食物残余情報を取得するように構成される第1取得モジュールと、前記食物の食物消費速度を取得するように構成される第2取得モジュールと、前記食物残余情報及び前記食物消費速度に基づいて前記食物の推定食用回数を計算するように構成される計算モジュールと、前記推定食用回数が既定の食用回数よりも少ない場合、リマインド情報を生成するように構成される第1生成モジュールと、を含む情報生成装置が提供される。
或いは、前記食物残余情報は前記食物の種類及び前記食物の残量を含み、前記第1取得モジュールは、前記冷蔵庫の中に配置されるカメラによって取得される前記冷蔵庫内部の画像に基づいて、異なる保存領域に保存される前記食物の前記種類及び前記食物の前記残量を決定するように構成される第1決定サブモジュール、又は、カメラによって取得される前記冷蔵庫内部の画像に基づいて、異なる保存領域に保存される前記食物の前記種類を決定し、前記保存領域に設置される圧力センサによって取得される圧力データに基づいて、前記保存領域における前記食物の前記残量を決定するように構成される第2決定サブモジュール、を含む。
或いは、前記第2取得モジュールは、食物消費の履歴記録に基づいて、ユーザによって消費される指定の食物の単一の食用量及び食用頻度を示すユーザの食習慣情報を取得するように構成される情報取得サブモジュールと、前記単一の食用量及び前記食用頻度に基づいて、前記食物消費速度を決定するように構成される速度決定サブモジュールと、を含む。
或いは、実際に食事する人の人数を取得するように構成される第3取得モジュールと、前記実際に食事する人の人数及び前記食物の標準食用量に基づいて、前記食物消費速度を修正するように構成される修正モジュールと、を更に含む。
或いは、前記第3取得モジュールは、前記冷蔵庫に関連付けられるホームカメラ、又は前記冷蔵庫の外に設置されるカメラによって取得される屋内画像情報を取得し、前記屋内画像情報に基づいて前記実際に食事する人の人数を決定するように構成される第3決定サブモジュール、ホームゲートウェイ装置に接続される携帯端末の数を取得し、前記携帯端末の数に基づいて前記実際に食事する人の人数を決定するように構成される第4決定サブモジュール、前記冷蔵庫に関連付けられる端末において、少なくとも訪問客の人数が含まれる訪問客情報を取得し、前記訪問客の人数に基づいて前記実際に食事する人の人数を決定するように構成される第5決定サブモジュール、前記冷蔵庫に関連付けられる端末において、少なくとも旅行日数が含まれる旅行情報を取得し、前記旅行日数の間の前記実際に食事する人の人数を決定するように構成される第6決定サブモジュール、又は、既定の料理期間である既定の期間の間、前記冷蔵庫に関連付けられる携帯端末の地理的な位置情報を取得し、前記地理的な位置情報が、前記携帯端末と前記冷蔵庫との距離が既定の距離の閾値よりも大きいことを示すとき、前記携帯端末に対応するユーザは食事をしない人であると決定し、前記食事をしない人及び前記既定の食事をする人の人数に基づいて、前記実際に食事をする人の人数を決定するように構成される第7決定サブモジュール、を含む。
或いは、前記第1生成モジュールは、前記食物の購入のリンクを取得するように構成されるリンク取得サブモジュールと、前記リマインド情報に前記購入のリンクを付与するように構成される付与サブモジュールと、を含む。
或いは、前記ユーザの前記食習慣情報に基づいて、前記ユーザの好物を決定するように構成される好物決定モジュールと、前記食物の量、調理機器、及び前記調理機器に対応する調理作動パラメータを含み、前記ユーザの前記好物に対応する調理パラメータを検索するように構成される検索モジュールと、電気調理器、電磁オーブン、電子レンジ、又はオーブンからなる前記調理機器に前記調理パラメータを送信するように構成される送信モジュールと、を更に含む。
或いは、前記食物の実際の保存期間を取得し、前記実際の保存期間が前記食物に対応する推奨保存期間に到達した時、出来る限り速やかにユーザに前記食物を食用とすることを思い出させるための食用リマインド情報を生成するように構成される第2生成モジュール、又は、前記冷蔵庫の中に設置されるカメラ又は匂いセンサによって前記食物の保存状態を決定し、前記保存状態が前記食物の劣化を示している時、ユーザに前記食物を処分することを思い出させるための食物処分情報を生成するように構成される第3生成モジュール、を更に含む。
本開示の実施形態の第3の側面によれば、プロセッサと、前記プロセッサによって実行される命令を記憶するメモリと、を備え、前記プロセッサは、冷蔵庫の中の食物の食物残余情報を取得し、前記食物の食物消費速度を取得し、前記食物残余情報及び前記食物消費速度に基づいて前記食物の推定食用回数を計算し、前記推定食用回数が既定の食用回数よりも少ない場合、リマインド情報を生成するように構成される情報生成装置が提供される。
本開示の実施形態において規定される技術的な解決手段は、次のような有利な効果を奏するであろう。冷蔵庫の中の食物の食用回数(=食事のために用いられる回数)は、冷蔵庫の中の食物残余情報と、食物に対応する食物消費速度に基づいて推定される。そして、食用回数が既定の食用回数よりも少ない場合、ユーザに食物の購入を思い出させるために、リマインド情報が生成される。この手段によって、冷蔵庫が単に食物を保存するためだけに使われ、ユーザが料理中に冷蔵庫の中の食物が不足していることに気付く、という問題が解決されるであろう。ユーザが料理中に冷蔵庫の中の食物が不足していることに気付くという問題が回避されるように、冷蔵庫は、冷蔵庫の中に保存されている食物の残量を取得し、食物の残量が不足している場合、ユーザに思い出させるためにリマインド情報を生成するようにしても良い。
前述の一般的な説明及び後述する詳細な説明の両方とも典型的かつ説明的なものに過ぎず、本開示を限定するものではないと理解されるべきである。
本開示に取り入れられ、詳細な説明とともに本開示の一部を構成する添付の図面は、本発明に合致する実施形態を例示し、詳細な説明とともに本発明の原理を説明するためのものである。
本開示のいくつかの例示的な実施形態に関する実装環境を示す概略図である。 例示的な実施形態に係る情報生成方法を示すフローチャートである。 他の例示的な実施形態に係る情報生成方法を示すフローチャートである。 他の例示的な実施形態に係る情報生成方法に含まれる食物残余情報を決定するステップを示すフローチャートである。 他の例示的な実施形態に係る情報生成方法に関する冷蔵庫内部の画像を示す概略図である。 他の例示的な実施形態に係る情報生成方法に含まれる食物消費速度を決定するステップを示すフローチャートである。 他の例示的な実施形態に係る情報生成方法に含まれるリマインド情報を生成するステップを示すフローチャートである。 他の例示的な実施形態に係る情報生成方法に係る実装を示す概略図である。 他の例示的な実施形態に係る情報生成方法に含まれる料理パラメータを送信するプロセスを示すフローチャートである。 他の例示的な実施形態に係る情報生成方法に係る実装を示す概略図である。 例示的な実施形態に係る情報生成装置を示すブロック図である。 他の例示的な実施形態に係る情報生成装置を示すブロック図である。 例示的な実施形態に係る情報生成装置を示すブロック図である。
前述の添付図面によって例示されている本開示の具体的な実施形態は、以下に詳細に説明される。これらの添付図面及び説明は、いかなる方法でも本開示の範囲を限定するものではなく、参照する具体的な実施形態を介して当業者に本開示の概念を説明するものである。
符号は、添付の図面に図示される典型的な実施形態や実施例に対して詳細に付与される。以下の詳細な説明で参照する添付の図面では、特に示さない限り、異なる図面において同じ番号は同じ要素又は類似の要素を意味する。以下の典型的な実施形態の詳細な説明において明らかにされる実装は、本開示の記載と合致する全ての実装を表すものではない。むしろ、それらは、添付の特許請求の範囲において列挙されるように、本開示に関連する側面と一致する装置及び方法の単なる一例に過ぎない。
図1は、本開示のいくつかの例示的な実施形態に関する実装環境を示す概略図である。図1を参照すれば、実装環境は、冷蔵庫110と、ホームゲートウェイ装置120と、バックグラウンドサーバ130と、端末140とを含む。
冷蔵庫110の中には少なくとも一つのセンサが配置される。センサは、冷蔵庫110の中に保存される食物の食物情報を取得するように構成される。センサは、これらに限定されるわけではないが、温度センサ、匂いセンサ、圧力センサ及び光センサを含む。冷蔵庫110の中には少なくとも一つのカメラが配置されるであろう。カメラは、冷蔵庫内部の画像を取得するように構成される。
冷蔵庫110は、有線又は無線のネットワークを介してホームゲートウェイ装置120に接続される。
ホームゲートウェイ装置120は、ルータでも良いし、ルータ機能が起動された装置でも良い。ホームゲートウェイ装置120は、冷蔵庫110から送信される情報を受信し、冷蔵庫110に対応するバックグラウンドサーバ130に受信される情報を送信するように構成される。
ホームゲートウェイ装置120は、無線ネットワークを介してバックグラウンドサーバ130に接続される。
バックグラウンドサーバ130は、一つのサーバでも良いし、複数のサーバによって構成されるサーバクラスタでも良い。バックグラウンドサーバ130は、ホームゲートウェイ装置120を介して冷蔵庫110から送信される情報を受信し、冷蔵庫110に関連付けられる端末140に情報を送信するように構成される。
バックグラウンドサーバ130は、無線ネットワークを介して端末140に接続される。
端末140は、スマートフォン、タブレットコンピュータ、スマートTV、ウェアラブル装置、パーソナルコンピュータのように、データ処理機能及び表示機能を有する電子機器であれば良い。端末140及び冷蔵庫110は、予め関連付けられていることに留意が必要である。また、端末140及びホームゲートウェイ装置120も、有線又は無線のネットワークを介して接続されていても良い。
本開示のいくつかの実施形態によって規定される情報生成方法は、バックグラウンドサーバ130又は端末140によって実行されても良いし、もし提供されるならば、冷蔵庫110の中のプロセッサによって実行されても良く、本開示によって限定されない。
説明の都合上、後述する実施形態では、端末140において実行される情報生成方法を例に挙げて説明するが、本開示を限定するものと解釈されない。
図2は、例示的な実施形態に係る情報生成方法を示すフローチャートである。この実施形態では、図1に示される端末140において実行される情報生成方法が説明される。その情報生成方法は次のステップを含んでも良い。
ステップ201において、冷蔵庫の中の食物の食物残余情報が取得される。
ステップ202において、その食物の食物消費速度が取得される。
ステップ203において、食物の残余情報及び食物消費速度に基づいて、その食物の推定食用回数が計算される。
ステップ204において、推定食用回数が既定の食用回数よりも少ない場合、リマインド情報が生成される。
特に、本実施形態によって規定される情報生成方法では、冷蔵庫の中の食物の食用回数が、冷蔵庫の中の食物の食物残余情報及びその食物に対応する食物消費速度に基づいて推定され、その食用回数が既定の食用回数よりも少ない場合、ユーザに食物の購入を思い出させるために、リマインド情報が生成される。この手段によって、冷蔵庫が単に食物を保存するためだけに使われ、ユーザが料理中に冷蔵庫の中の食物が不足していることに気付く、という問題が解決される。ユーザが料理中に冷蔵庫の中の食物が不足していることに気付くという問題が回避されるように、冷蔵庫は、冷蔵庫の中に保存されている食物の残量を取得し、食物の残量が不足している場合、ユーザに思い出させるためにリマインド情報を生成するようにしても良い。
図3Aは、他の例示的な実施形態に係る情報生成方法を示すフローチャートである。この実施形態では、図1に示される端末140において実行される情報生成方法が説明される。その情報生成方法は次のステップを含んでも良い。
ステップ301において、冷蔵庫の中の食物の食物残余情報が取得される。
冷蔵庫の中の食物が既定の食用回数を満たすことができるか否かを決定するために、端末は、最初に、冷蔵庫の中の様々な食物の食物残余情報を得る必要がある。食物残余情報は、限定されるわけではないが、食物の種類及び食物の残量を含む。
異なる食物は、異なる食用方法に対応する。いくつかの食物(例えば、マッシュルーム、カリフラワー、小豆、大麦等)は、通常、重量で取り出される一方、他の食物(例えば、林檎、西瓜等)は、通常、数量で取り出される。例えば、ユーザが料理で小豆を使う場合、通常、グラム数で消費される一方、ユーザが林檎を取り出す場合、通常、個数で消費される。従って、食物の残量を決定するために、異なる計測方法が端末によって用いられても良い。
食物が重量で取り出される場合、端末は、食物の残量として食物の重さを決定し、食物が数量で取り出される場合、端末は、食物の残量として食物の数量を決定する。図3Bに示されるように、このステップは、ステップ301A及び301Bを含んでも良い。
ステップ301Aにおいて、異なる保存領域に保存される食物の種類及び食物の残量が、冷蔵庫の中に配置されるカメラによって取得される冷蔵庫内部の画像に基づいて決定される。
冷蔵庫は、予め冷蔵庫に設置されている少なくとも一つのカメラによって冷蔵庫内部の画像を取得し、ホームゲートウェイ装置を介してバックグランドサーバに冷蔵庫内部の画像を送信する。バックグランドサーバは、冷蔵庫に関連付けられている端末に冷蔵庫内部の画像を転送する。端末は、冷蔵庫内部の画像を受信した後、食物の種類を決定するために、画像の中の食物を識別する。食物が数量によって取り出されることが決定されると、端末は、食物の残量として食物の数を決定するために、その食物に対応する画像における輪郭分析を実行する。更に、冷蔵庫の中が異なる領域に分割されているので、端末は、冷蔵庫内部の画像に基づいて食物の様々な種類に対応する保存領域も決定する必要がある。
例えば、図3Cは、端末によって受信される冷蔵庫内部の画像を示している。画像を識別した後、端末は、西瓜及び林檎が保存領域33に保存されており、両方とも数量によって取り出されることを決定する。更に、端末は、画像における輪郭分析を実行して、西瓜が4個、林檎が3個あることを決定する。
ステップ301Bにおいて、異なる保存領域に保存される食物の種類が、カメラによって取得される冷蔵庫内部の画像に基づいて決定される。そして、保存領域における食物の残量が、保存領域に設置される圧力センサによって取得される圧力データに基づいて決定される。
重量によって取り出される食物については、端末が、カメラによって取得される冷蔵庫内部の画像のみに基づいて食物の重量を決定することはできない。この場合、端末は、冷蔵庫内部の画像と、それぞれの保存領域に設置される圧力センサによって取得される圧力データに基づいて、異なる保存領域に保存される食物の重量を決定する必要がある。
冷蔵庫の中は、いくつかの保存領域に分割されている。端末は、カメラによって取得される冷蔵庫内部の画像を受信した後、冷蔵庫内部の画像に含まれている食物を識別し、異なる保存領域に保存される食物の種類を決定する。
例えば、図3Cは、端末によって受信される冷蔵庫内部の画像を示している。端末は、冷蔵庫内部の画像に含まれている食物を識別し、予め分割されている保存領域に基づいて、小豆及び大麦が1段目の保存領域31に保存され、カリフラワー、葉菜類及びマッシュルームが2段目の保存領域32に保存され、西瓜及び林檎が3段目の保存領域33に保存されていることを決定する。
冷蔵庫の中の各保存領域には、少なくとも1つの圧力センサが供給されている。圧力センサによって取得される圧力データは、保存領域に保存されている食物の重量である。冷蔵庫は、それぞれの既定の間隔、又は圧力データの変化を検出した時、ホームゲートウェイ装置を介してバックグランドサーバに取得される圧力データを送信する。そして、バックグランドサーバは、冷蔵庫に関連付けられている端末に圧力データを送信する。
各圧力センサと対応する保存領域との関係は、予め端末に保存されている。端末は、バックグランドサーバから圧力データを受信した時、異なる保存領域に保存される食物の重量、すなわち食物の残量を決定しても良い。
冷蔵庫内部の画像に基づいて冷蔵庫の中に缶又は瓶の食物(例えば、瓶ソース又は瓶飲料)が保存されていることを確認すると、端末は、更に缶/瓶の中の食物の残量を決定するために、画像に基づいて缶/瓶の容量及び缶/瓶の中の食物の高さを識別しても良いことに留意が必要である。また、本開示によって限定するわけではないが、端末は、圧力センサによって取得される缶/瓶の重量及び食物の重量の合計、並びに予め保存されている缶/瓶の参考重量に基づいて、缶/瓶の中の食物の重量を決定しても良い。
冷蔵庫の中に設置されるカメラの数及びカメラの位置は、本開示によって限定されるものではないことに留意が必要である。加えて、この実施形態では、冷蔵庫の中は、例示的な説明として3つの保存領域に分割されている。また、他の可能な実装では、図3Cにおける各保存領域は、いくつかの保存サブ領域に再分割されていても良い。冷蔵庫の中の保存領域に関する分割方法は、本開示によって限定されない。加えて、圧力センサの数や圧力センサの位置も、本開示によって限定されない。
図3Cにおいて示される冷蔵庫内部の画像と対応する圧力データに基づいて端末によって得られる食物残余情報は、表1にリスト化されている。
Figure 2017533481
本開示においては、冷蔵庫の中の食物の残量は、冷蔵庫内部の画像及び圧力データに基づいて冷蔵庫によって決定され、バックグランドサーバを介して、関連付けられている端末に送信されても良いし、冷蔵庫から送信される冷蔵庫内部の画像及び圧力データに基づいてバックグランドサーバによって決定され、関連付けられている端末に送信されても良い。
ステップ302において、食物の食物消費速度が取得される。
冷蔵庫の中の異なる食物に対応する食物消費速度同士が異なるので、推定食用回数の計算の正確性を保証するために、端末は、更に、食物の消費の履歴記録に基づいてユーザの食習慣情報を取得し、食習慣情報に基づいて異なる食物の食物消費速度を決定するようにしても良い。可能な実装として、図3Dに示すように、ステップ302は、ステップ302A及び302Bを含んでも良い。
ステップ302Aにおいて、ユーザの食習慣情報は、食物の消費の履歴記録に基づいて取得される。食習慣情報は、ユーザによって消費される指定の食物の単一の食用量及び食用頻度を示すためにある。
冷蔵庫は、毎回ユーザが冷蔵庫を開けた後、冷蔵庫の中に設置されているカメラによって取得される冷蔵庫内部の画像と、圧力センサによって取得される圧力データに基づいて、ユーザが食物を消費するかどうかを検出しても良い。冷蔵庫は、ユーザが食物を消費したことを検出すると、対応する食物の消費の履歴記録を生成するために、更に、消費される食物の種類及び食用量を決定する。消費される食物の種類及び食用量を決定する処理は、前述のステップ301と同様であり、ここでは詳細に説明しない。食物の消費の履歴記録は、模式的に表2において示される。
Figure 2017533481
端末は、食物の消費の履歴記録に基づいてユーザの食習慣情報を決定しても良い。例えば、端末は、表2に記録されている食物の消費の履歴記録に基づいてユーザの食習慣情報を決定しても良い。また、食習慣情報は、表3に示されるような記憶構造で保存されても良い。
Figure 2017533481
ステップ302Bにおいて、食物消費速度が、単一の食用量及び食用頻度に基づいて決定される。
更に、端末は、単一の食用量及び食用頻度に基づいて、ユーザによって消費される指定の食物の食物消費速度を決定する。
例えば、表3に示される食習慣情報によれば、端末は、小豆及び大麦の食物消費速度が各150グラム/日、マッシュルームの食物消費速度が100グラム/2日であると決定する。
ステップ303において、実際に食事する人の人数が取得される。
家で食事する人の人数は比較的固定されているので、冷蔵庫の中の食物の食物消費速度は比較的固定されている。従って、ユーザは、既定の食事する人の人数を設定しても良い。そして、ユーザの食習慣情報に基づいて決定される食物消費速度は、既定の食事する人の人数の食物消費速度である。しかし、家に訪問客がいたり、一部の家族がビジネス旅行中だったりすると、実際に食事する人の人数が変更され、それに応じて食物消費速度も変更されるであろう。推定食用回数の正確性を更に高めるために、端末は、更に実際に食事する人の人数を取得し、実際に食事する人の人数に基づいて食物消費速度を修正する必要もある。或いは、ステップ303は、次の5つの可能な実装を含んでも良い。
第1の可能な実装においては、屋内画像情報が、冷蔵庫に関連付けられるホームカメラ又は冷蔵庫の外に設置されるカメラによって取得される。実際に食事する人の人数は、屋外画像情報に基づいて決定される。
冷蔵庫は、冷蔵庫に関連付けられるホームカメラ、又は冷蔵庫の外に設置されるカメラを介して屋内画像情報を取得し、ホームゲートウェイ装置を介してバックグランドサーバに屋内画像情報を送信しても良い。バックグランドサーバは、冷蔵庫に関連付けられる端末に屋内画像情報を転送する。端末は、屋内画像情報を受信した後、屋内画像情報に基づいて家にいる人の人数を決定し、実際に食事する人の人数を決定する。
端末は、屋内画像情報を受信した後、食物消費速度を後で修正し易くなるように、実際に食事する人の性別、年齢及び身長に関する情報を更に決定しても良いことに留意が必要である。
第2の可能な実装においては、ホームゲートウェイ装置に接続される携帯端末の数が取得され、実際に食事する人の人数が携帯端末の数に基づいて決定される。
一般に、家に訪問客がいない時、ホームゲートウェイ装置に接続される携帯端末の数は変わらないままである。しかし、ユーザが家で訪問客に会う時、訪問客の携帯端末がホームゲートウェイ装置に接続されることで、端末がホームゲートウェイ装置に接続される携帯端末の数に基づいて実際に食事する人の人数を決定しても良い。
可能な実装として、ゲートウェイ装置に接続される携帯端末の数が、既定のホームゲートウェイ装置に接続される携帯端末の数よりも多いことを検出した時(既定のホームゲートウェイ装置に接続される携帯端末の数は、訪問客がいない場合におけるホームゲートウェイ装置に接続される端末の数でも良い。)、ホームゲートウェイ装置は、現在のホームゲートウェイ装置に接続される携帯端末の数を端末に送信し、端末は、現在のホームゲートウェイ装置に接続される携帯端末の数に基づいて実際に食事する人の人数を決定する。実際に食事する人の人数の正確性を保証するために、端末は、実際に食事する人の人数を決定した後、実際に食事する人の人数が正しいかどうかをユーザに問い合わせるための照会情報を送信し、ユーザからのフィードバックに基づいて実際に食事する人の人数を修正しても良い。
加えて、ホームゲートウェイ装置は、バックグランドサーバにホームゲートウェイ装置と接続される携帯端末の識別(ID)を送信しても良い。そして、バックグランドサーバは、後で食物消費速度を修正し易くなるように、携帯端末に対応するユーザの情報が予め記憶されているかどうかを検出する。その情報は、実際に食事する人の性別、年齢、身長及び食習慣に関する情報等を含む。
第3の可能な実装においては、冷蔵庫に関連付けられる端末の中の訪問客情報が取得され、訪問客情報には少なくとも訪問客の人数が含まれ、実際に食事する人の人数が訪問客の人数に基づいて決定される。
一般に、ユーザは、スケジュールの中に訪問客情報を記録する。訪問客情報は、訪問客の人数に関する情報等を含む。冷蔵庫に関連付けられる端末は、新しい訪問客情報がスケジュールに加えられたことを検出すると、訪問客情報に含まれる訪問客の人数を取得し、訪問客の人数に基づいて実際に食事する人の人数を決定する。
第4の可能な実装においては、冷蔵庫に関連付けられる端末の旅行情報が取得され、旅行情報には少なくとも旅行日数が含まれ、旅行日数の間の実際に食事する人の人数が決定される。
一般に、ユーザは、スケジュールの中に旅行情報を記録する。旅行情報は、旅行日数に関する情報等を含む。ユーザの旅行日数の間、食物の食物消費速度が実際に食事する人の人数の変更とともに変更され、推定食用回数の計算に反映される。従って、端末は、旅行情報に含まれる旅行日数に基づいて旅行日数の間に実際に食事する人の人数を決定し、実際に旅行する人の人数に基づいて旅行日の間の食物消費速度を修正する必要がある。
前述の訪問客情報又は旅行情報は、メッセージ記録、電子メール、又はインスタントコミュニケーションチャット記録から取得されても良いことに留意が必要である。端末によってスケジュールから前述の訪問客情報又は旅行情報を取得することは、例示のための一例であり、本開示を限定するものと解釈されない。
第5の可能な実装においては、既定の期間の間、冷蔵庫に関連付けられる携帯端末の地理的な位置情報が取得され、既定の期間は既定の料理期間である。地理的な位置情報が、携帯端末と冷蔵庫との距離が既定の距離の閾値よりも大きいことを示すとき、携帯端末に対応するユーザは、食事をしない人である。そして、実際に食事をする人の人数は、食事をしない人と、既定の食事をする人の人数に基づいて決定される。
ユーザの既定の料理期間の時、端末は、冷蔵庫に関連付けられる携帯端末の地理的な位置情報を取得し、携帯端末に対応するユーザと冷蔵庫との距離を決定する。決定される距離が既定の距離の閾値(例えば、会社とユーザの家との距離)よりも小さい場合、ユーザは夕食の為に家に向かっていると決定される。決定される距離が既定の距離の閾値よりも大きい場合、ユーザが残業して働くことを示しており、そのユーザは食事をしない人と決定される。端末は、食事をしない人と、既定の食事する人の人数に基づいて実際に食事をする人の人数を決定し、実際に食事をする人の人数に基づいて食物消費速度を修正する。
例えば、ユーザが、既定の食事をする人の人数が3人であることを予め決定しておくが、食事をしない人の人数が1人であれば、端末は、実際に食事をする人の人数が2人と決定する。
ステップ304において、食物消費速度は、実際に食事をする人の人数と、標準的な食物の食用量に基づいて修正される。
端末は、実際に食事をする人の人数と既定の食事をする人の人数との差異を計算し、計算される差異及び標準的な食物の食用量に基づいて、食物消費速度を修正する。
例えば、端末が、実際に食事をする人の人数が7人、既定の食事をする人の人数が3人であることを取得すると、その差異は4人である。小豆については、標準的な食用量が50グラム/人/日であり、既定の食事をする人の人数に関する食物消費速度が150グラム/日であるから、小豆に関する修正食物消費速度は、150+4×50=350グラム/日である。
他の例では、端末が、今後の4日間に実際に食事をする人の人数が2人、既定の食事をする人の人数が3人であることを取得すると、計算される差異は1人である。小豆については、標準的な食用量が50グラム/人/日であり、既定の食事をする人の人数に関する食物消費速度が150グラム/日であるから、小豆に関する食物消費速度は、今後の4日間、150−1×50=100グラム/日である。
前述のステップ303において、端末は、更に、実際に食事をする人の身長、年齢、性別及び食習慣に関する情報を取得し、その情報に基づいて食事をする人の個々の標準的な食用量を決定し、動的に食物消費速度を修正し、修正食物消費速度の正確性を改善するようにしても良いことに留意が必要である。
ステップ305において、食物の推定食用回数が、食物残余情報及び食物消費速度に基づいて計算される。
端末によって取得される食物残余情報をm、修正食物消費速度をnとすると、推定食物食用回数は、[m/n]となる。
前述のステップ303において言及された第3の可能な実装において、訪問客情報は訪問時間も含むことに留意が必要である。食物の推定食用回数を算出する時、端末は、現在時刻及び訪問時間に基づいて、訪問時間での冷蔵庫の中の食物の推定残量を決定し、食物の推定残量に基づいて、冷蔵庫の中の食物の推定食用回数を決定する必要がある。
例えば、端末は、訪問時間と現在時刻との間隔が3日、冷蔵庫の中の葉菜類の残量が1000グラム、既定の食事をする人の人数による葉菜類の消費速度が200グラム/日/回、実際に食事をする人の人数による葉菜類の消費速度が500グラム/回、と計算する。端末は、訪問時間になると、葉菜類の推定食物残量が1000−3×200=400グラム、訪問時間での葉菜類の推定食用回数は[400/500]=0、と計算する。
ステップ306において、推定食用回数が既定の食用回数よりも少ない場合、リマインド情報が生成される。
計算される推定食用回数が既定の食用回数より少ない場合、端末は、リマインド情報を生成し、表示する。或いは、冷蔵庫が表示画面を備えていれば、ユーザが冷蔵庫の中の食物の不足に気付き易いように、端末は、バックグラウンドサーバを介して冷蔵庫にリマインド情報を送信しても良い
また、実際に食事をする人の人数を決定した後、端末は、更に、実際に食事をする人の人数と既定の食事をする人の人数との差異が既定の閾値よりも大きいか否かを検出する必要がある。その差異が既定の閾値よりも大きければ、訪問モードになり、既定の食用回数が調整される。例えば、端末が、実際に食事をする人の人数が6人、既定の食事をする人の人数が3人、実際に食事をする人の人数と既定の食事をする人の人数との差異が3人(3は既定の閾値2よりも大きい)と検出すると、訪問モードになり、既定の食用回数が、冷蔵庫の中の食物が今回の訪問で必要とされる食物量を満たすことを示す、すなわち、リマインド情報を生成する必要がないことを示す、1に調整される。
ユーザが丁度良い時に食物を補充できるように、食物の不足を検出した時、端末は、更に、食物の購入のリンクを取得し、リマインド情報に食物の購入のリンクを付加する。図3Eに示されるように、ステップ306は、ステップ306A及び306Bを含む。
ステップ306Aにおいて、食物の購入のリンクが取得される。
端末は、食物に対して少なくとも2つのリンクを取得し、これらを比較し、最も安い価格に対応する購入のリンクを取得する。本開示によって限定されるわけではないが、端末は、食物の販売量や良いコメントの度合に基づいて、対応する購入のリンクも取得しても良いことに留意が必要である。
ステップ306Bにおいて、購入のリンクは、リマインド情報に付与される。
端末は、取得される購入のリンクをリマインド情報に付与し、ユーザに購入を思い出させる。
図3Fに示されるように、端末34は、冷蔵庫の中の林檎及び小豆の残量が不足していることを検出し、出来る限り速やかにユーザに補充を思い出させるために、対応するリマインド情報35が生成される。リマインド情報35は、更に、林檎及び小豆の購入のリンクを含む。
特に、本情報生成方法では、冷蔵庫の中の食物の食用回数が、冷蔵庫の中の食物の食物残余情報及び食物に対応する食物消費速度に基づいて推定され、食用回数が既定の食用回数よりも少ない場合、ユーザに食物の購入を思い出させるために、リマインド情報が生成される。この手段によって、冷蔵庫が単に食物を保存するためだけに使われ、ユーザが料理中に冷蔵庫の中の食物が不足していることに気付く、という問題が解決されるであろう。ユーザが料理中に冷蔵庫の中の食物が不足していることに気付くという問題が回避されるように、冷蔵庫は、冷蔵庫の中に保存されている食物の残量を取得し、食物の残量が不足している場合、ユーザに思い出させるためにリマインド情報を生成するようにしても良い。
本実施形態では、端末が、冷蔵庫内部の画像及び保存領域ごとの圧力センサによって取得される圧力データに基づいて、各保存領域に保存される食物の種類及び食物の残量を決定することによって、取得される食物残余情報の正確性を改善する。
本実施形態では、端末が、食物消費の履歴記録に基づいて、ユーザの食習慣情報を取得し、更に、食習慣情報に基づいて、食物消費速度を決定することによって、計算によって得られる食物の推定食用回数の正確性を改善する。
本実施形態では、端末が、屋内画像情報を解析する手段、接続される携帯端末の数、訪問客情報、旅行情報、又は地理的位置情報によって、実際に食事をする人の人数を決定し、実際に食事をする人の人数に基づいて食物消費速度を修正することによって、更に食物の推定食用回数の正確性を改善する。
本実施の形態では、端末が、冷蔵庫の中の食物の残量が不足していることを検出すると、出来る限り速やかにユーザに補充を思い出させるために、リマインド情報が生成され、ユーザが食物を購入し易いように、食物に対応する購入のリンクがリマインド情報に付与される。
家の他の調理機器に接続するために、端末は、食物消費の履歴記録に基づいてユーザの食習慣情報を取得した後、更に、ユーザの食習慣情報に基づいてユーザの好物を決定し、好物に対応する調理パラメータを家の調理機器に送信することによって、ユーザに好物を調理し易くする。図3Gに示されるように、その方法は、更に次のステップを含んでも良い。
ステップ307において、ユーザの好物が、ユーザの食習慣情報に基づいて決定される。
可能な実装として、端末は、ユーザの好物として、既定の頻度の閾値よりも多い食用頻度に係る食物を決定しても良い。
例えば、既定の頻度の閾値が1日/回とすると、端末は、表3に示される食習慣情報に基づいて、ユーザの好物として、小豆、大麦、西瓜及び林檎を決定する。
ステップ308において、ユーザの好物に対応する調理パラメータが検索される。調理パラメータは、食物の量、調理機器、及び調理機器に対応する調理作動パラメータを含む。
端末は、ユーザの好物を確定し、その好物に対応する食材の量、調理機器、及び採用した調理機器に対応する調理作動パラメータを含む調理パラメータを検索する。例えば、端末は、ユーザの好物が小豆及び大麦であることを得て、小豆及び大麦のおかゆを調理するために用いられる調理機器が電気調理器、食物量が小豆150グラム、大麦150グラム、及び水300グラムであることを検索し、料理中の電気調理器の出力曲線を検索する。
ステップ309において、調理パラメータは、調理機器に送信される。調理機器は、電気調理器、電磁オーブン、電子レンジ、又はオーブンからなる。
端末は、対応する調理パラメータを検索した後、対応する調理機器が関連付けられているかどうかを検出し、関連付けられていれば、端末は、対応する調理機器に調理パラメータを送信する。ユーザは、その後に調理のために調理機器を使用する時、調理パラメータに含まれる調理作動パラメータに基づいて調理するようにしても良い。これによって、ユーザによる調理の効率が大きく改善される。
端末は、ユーザの好物を決定した後、予め既定の料理の段階に基づいて、食物の解凍や他の作業を行うようにしても良い。これによって、ユーザが食物を直接食べたり、調理したりし易くなる。
本実施の形態では、端末が、ユーザの食習慣情報に基づいてユーザの好物を決定し、家の調理機器に好物に関する調理パラメータを送信することによって、ユーザによる調理の効率を大きく改善する。
冷蔵庫の中に保存される食物の保存期間には限界があるので、食物の劣化を避けるために、冷蔵庫は、食物の食物残余情報を取得すると、異なる食物の食物保存状態を取得し、出来る限り速やかにユーザが食用としたり、片づけたりすることを思い出させるために、対応するリマインド情報を生成しても良い。
第1の可能な実装では、食物の実際の保存期間が取得され、実際の保存期間が食物に対応する推奨保存期間に到達した時、出来る限り速やかにユーザにその食物を食用とすることを思い出させるための食用リマインド情報が生成される。
冷蔵庫は、新しい食物が保存されることを検出した時、自動的にその食物の保管時刻を記録し、冷蔵庫に対応付けられる端末に保管時刻を送信する。端末は、保管時刻と現在の時刻に基づいて、食物の実際の保存期間を決定する。端末は、ステップ301において取得される食物の種類に基づいて、食物の推奨保存期間を更に取得し、実際の保存期間が推奨保存期間に到達した時、出来る限り速やかにユーザにその食物を食用とすることを思い出させるための食用リマインド情報を生成するようにしても良い。
図3Hに示されるように、端末34は、冷蔵庫の中の林檎の実際の保存期間が対応する推奨保存期間に到達したことを検出し、出来る限り速やかにユーザにその食物を食用とすることを思い出させるための食用リマインド情報36が生成される。
第2の可能な実装では、食物の保存状態が、冷蔵庫の中に設置されるカメラ又は匂いセンサによって決定される。そして、食物の保存状態が食物の劣化を示している時、ユーザに食物を処分することを思い出させるために、食物処分情報が生成される。
また、端末は、冷蔵庫の中のカメラによって取得される食物の外観、又は冷蔵庫の中の匂いセンサによって取得される食物の匂いによって、食物の保存状態を決定しても良い。
可能な実装として、端末は、食物の全ての種類に対応する劣化特徴情報を保存する。劣化特徴情報は、外観の特徴及び匂いの特徴等を含む。例えば、劣化したバナナに対応する外観の特徴は、バナナの表面に現れる多くの黒い斑点である。また、劣化した卵に対応する匂いの特徴は、腐った卵の匂いを発する硫化水素ガスの匂いである。端末は、食物の外観、及び/又は食物の匂いに基づいて、食物の保存状態を決定する。食物の外観、及び/又は食物の匂いが食物の劣化を示している時、ユーザに食物を処分することを思い出させるために、食物処分情報が生成される。
本実施の形態では、端末は、食物の実際の保存期間、又は食物の保存状態に基づいて、食物が出来る限り速やかに食用とされる必要があるかどうかを決定し、ユーザに出来る限り速やかに食用とする、又は処分することを思い出させるために、対応する食用リマインド情報、又は食物処分情報を生成する。これによって、ユーザが冷蔵庫の中の食物の保存状態を知らないために食物が劣化するという事態が回避される。
以下に示す本開示の情報生成装置の実施形態は、本開示の情報生成方法の実施形態を実行するために用いられても良い。本開示の情報生成装置の実施形態において開示されない詳細については、本開示の情報生成方法の実施形態を参照する。
図4は、例示的な実施形態に係る情報生成装置を示すブロック図である。この情報生成装置は、ソフトウェア、ハードウェア、又はそれらの組合せによって、図1における端末140の全部又は一部として実装されても良い。この情報生成装置は、冷蔵庫の中の食物の食物残余情報を取得するように構成される第1取得モジュール401と、食物の食物消費速度を取得するように構成される第2取得モジュール402と、食物残余情報及び食物消費速度に基づいて、食物の推定食用回数を計算するように構成される計算モジュール403と、推定食用回数が既定の食用回数よりも少ない場合、リマインド情報を生成するように構成される第1生成モジュール404と、を含んでも良い。
特に、実施形態によって規定される情報生成装置では、冷蔵庫の中の食物の食用回数が、冷蔵庫の中の食物の食物残余情報と、食物に対応する食物消費速度に基づいて推定され、その食用回数が既定の食用回数よりも少ない場合、ユーザに食物を購入することを思い出させるために、リマインド情報が生成される。この手段によって、冷蔵庫が単に食物を保存するためだけに使われ、ユーザが料理中に冷蔵庫の中の食物が不足していることに気付く、という問題が解決される。ユーザが料理中に冷蔵庫の中の食物が不足していることに気付くという問題が回避されるように、冷蔵庫は、冷蔵庫の中に保存されている食物の残量を取得し、食物の残量が不足している場合、ユーザに思い出させるためにリマインド情報を生成するようにしても良い。
図5は、他の例示的な実施形態に係る情報生成装置を示すブロック図である。この情報生成装置は、ソフトウェア、ハードウェア、又はそれらの組合せによって、図1における端末140の全部又は一部として実装されても良い。この情報生成装置は、冷蔵庫の中の食物の食物残余情報を取得するように構成される第1取得モジュール501と、食物の食物消費速度を取得するように構成される第2取得モジュール502と、食物残余情報及び食物消費速度に基づいて、食物の推定食用回数を計算するように構成される計算モジュール503と、推定食用回数が既定の食用回数よりも少ない場合、リマインド情報を生成するように構成される第1生成モジュール504と、を含んでも良い。
或いは、食物残余情報は、食物の種類及び食物の残量を含み、第1取得モジュール501は、冷蔵庫の中に設置されるカメラによって取得される冷蔵庫内部の画像に基づいて、異なる保存領域に保存される食物の種類及び食物の残量を決定するように構成される第1決定サブモジュール501A、又は、カメラによって取得される冷蔵庫内部の画像に基づいて、異なる保存領域に保存される食物の種類を決定し、保存領域に設置される圧力センサによって取得される圧力データに基づいて、保存領域の食物の残量を決定するように構成される第2決定サブモジュール501B、を含む。
或いは、第2取得モジュール502は、食物消費の履歴記録に基づいて、単一の食用量を示す食習慣情報、及びユーザによって消費される指定の食物の食用頻度を示すユーザの食習慣情報を取得するように構成される情報取得サブモジュール502Aと、単一の食用量及び食用頻度に基づいて、食物消費速度を決定するように構成される速度決定サブモジュール502Bと、を含む。
或いは、情報生成装置は、更に、実際に食事する人の人数を取得するように構成される第3取得モジュール505と、実際に食事する人の人数と、食物の標準食用量に基づいて、食物消費速度を修正するように構成される修正モジュール506と、を含む。
或いは、第3取得モジュール505は、冷蔵庫に関連付けられるホームカメラ、又は冷蔵庫の外に設置されるカメラによって取得される屋内画像情報を取得し、屋内画像情報に基づいて実際に食事する人の人数を決定する第3決定サブモジュール505A、ホームゲートウェイ装置に接続される携帯端末の数を取得し、携帯端末の数に基づいて実際に食事する人の人数を決定するように構成される第4決定サブモジュール505B、冷蔵庫に関連付けられる端末において、少なくとも訪問客の人数が含まれる訪問客情報を取得し、訪問客の人数に基づいて実際に食事する人の人数を決定するように構成される第5決定サブモジュール505C、冷蔵庫に関連付けられる端末において、少なくとも旅行日数が含まれる旅行情報を取得し、旅行日数の間の実際に食事する人の人数を決定するように構成される第6決定サブモジュール505D、又は、既定の料理期間である既定の期間の間、冷蔵庫に関連付けられる携帯端末の地理的な位置情報を取得し、地理的な位置情報が、携帯端末と冷蔵庫との距離が既定の距離の閾値よりも大きいことを示すとき、携帯端末に対応するユーザは食事をしない人であると決定し、食事をしない人と、既定の食事をする人の人数に基づいて、実際に食事をする人の人数を決定するように構成される第7決定サブモジュール505E、を含む。
或いは、第1生成モジュール504は、食物の購入のリンクを取得するように構成されるリンク取得サブモジュール504Aと、リマインド情報に購入のリンクを付与するように構成される付与サブモジュール504Bと、を含む。
或いは、情報生成装置は、更に、ユーザの食習慣情報に基づいて、ユーザの好物を決定するように構成される好物決定モジュール507と、食物の量、調理機器、及び調理機器に対応する調理作動パラメータを含み、ユーザの好物に対応する調理パラメータを検索するように構成される検索モジュール508と、電気調理器、電磁オーブン、電子レンジ、又はオーブンからなる調理機器に調理パラメータを送信するように構成される送信モジュール509と、を含む。
或いは、情報生成装置は、更に、食物の実際の保存期間を取得し、実際の保存期間が食物に対応する推奨保存期間に到達した時、出来る限り速やかにユーザにその食物を食用とすることを思い出させるための食用リマインド情報を生成するように構成される第2生成モジュール510、又は、冷蔵庫の中に設置されるカメラ又は匂いセンサによって食物の保存状態を決定し、食物の保存状態が食物の劣化を示している時、ユーザに食物を処分することを思い出させるための食物処分情報を生成するように構成される第3生成モジュール511、を含む。
特に、本実施形態によって規定される情報生成装置では、冷蔵庫の中の食物の食用回数が、冷蔵庫の中の食物の食物残余情報及びその食物に対応する食物消費速度に基づいて推定され、その食用回数が既定の食用回数よりも少ない場合、ユーザに食物の購入を思い出させるために、リマインド情報が生成される。この手段によって、冷蔵庫が単に食物を保存するためだけに使われ、ユーザが料理中に冷蔵庫の中の食物が不足していることに気付く、という問題が解決される。ユーザが料理中に冷蔵庫の中の食物が不足していることに気付くという問題が回避されるように、冷蔵庫は、冷蔵庫の中に保存されている食物の残量を取得し、食物の残量が不足している場合、ユーザに思い出させるためにリマインド情報を生成するようにしても良い。
本実施形態では、端末が、冷蔵庫内部の画像及び保存領域ごとの圧力センサによって取得される圧力データに基づいて、各保存領域に保存される食物の種類及び食物の残量を決定することによって、取得される食物残余情報の正確性を改善する。
本実施形態では、端末が、食物消費の履歴記録に基づいて、ユーザの食習慣情報を取得し、更に、食習慣情報に基づいて、食物消費速度を決定することによって、計算によって得られる食物の推定食用回数の正確性を改善する。
本実施形態では、端末が、屋内画像情報の解析、接続される携帯端末の数、旅行情報、又は地理的位置情報によって、実際に食事をする人の人数を決定し、実際に食事をする人の人数に基づいて食物消費速度を修正することによって、更に食物の推定食用回数の正確性を改善する。
本実施の形態では、端末が、冷蔵庫の中の食物の残量が不足していることを検出すると、出来る限り速やかにユーザに補充を思い出させるために、リマインド情報が生成され、ユーザが購入し易いように、食物に対応する購入のリンクがリマインド情報に付与される。
本実施の形態では、端末が、ユーザの食習慣情報に基づいてユーザの好物を決定し、家の調理機器に調理パラメータを送信することによって、ユーザによる調理の効率を大きく改善する。
本実施の形態では、端末は、食物の実際の保存期間、又は食物の保存状態に基づいて、食物が出来る限り速やかに食用とされる必要があるかどうかを決定し、ユーザに出来る限り速やかに食用とする、又は処分することを思い出させるために、対応する食用リマインド情報、又は食物処分情報を生成する。これによって、ユーザが冷蔵庫の中の食物の保存状態を知らないために食物が劣化するという事態が回避される。
上記の実施形態における情報生成装置に関しては、個々のモジュールに対する動作の実行のための特定の方法が、本開示の情報生成方法の実施形態において詳細に説明されていたので、ここでは詳細な説明を加えない。
図6は、例示的な実施形態に係る情報生成装置600のブロック図である。例えば、情報生成装置600は、図1における冷蔵庫110又は端末140でも良い。
図6を参照すると、情報生成装置600は、以下の1つ又はより多くの構成要素を含んでも良い。その構成要素は、処理部602、メモリ604、電源部606、マルチメディア部608、入出力(I/O)インタフェース部612、センサ部614、及び通信部616である。或いは、情報生成装置600が端末ならば、情報生成装置600は、更に、オーディオ部610を含んでも良い。
処理部602は、一般的に、情報生成装置600全体の動作を制御する。処理部602は、前述した実現方法における全て又は一部のステップを行うための命令を実行するために、1つ又はより多くのプロセッサ620を含んでも良い。更に、処理部602は、処理部602と他の構成要素との間のインタフェースを容易にするための1つ又はより多くのモジュールを含んでも良い。例えば、処理部602は、マルチメディア部608と処理部602との間のインタフェースを容易にするためのマルチメディアモジュールを含んでも良い。
メモリ604は、情報生成装置600の動作を支援するための様々な種類のデータを記憶するように構成される。そのようなデータの例は、情報生成装置600において動作される任意のアプリケーションまたは方法のための命令を含む。メモリ604は、スタティックランダムアクセスメモリ(SRAM)、電気的に消去可能なプログラマブル読出専用メモリ(EEPROM)、消去可能なプログラマブル読出専用メモリ(EPROM)、プログラマブル読出専用メモリ(PROM)、読出専用メモリ(ROM)、磁気メモリ、フラッシュメモリ、磁気又は光学ディスクのように、揮発性記憶装置或いは不揮発性記憶装置、又はそれらの組合せの任意の種類を用いて実装されても良い。
電源部606は、情報生成装置600の様々な構成要素に電力を供給する。電源部606は、電源管理システム、1つ又はより多くの電源、並びに情報生成装置600において電力の生成、制御及び配電と関連する他の構成要素を含んでも良い。
マルチメディア部608は、情報生成装置600とユーザとの間の外部インタフェースを提供するように構成される画面を含む。いくつかの実施形態では、その画面は、液晶ディスプレイ(LCD)及びタッチパネル(TP)を含んでも良い。画面がタッチパネルを含む場合、その画面はユーザから入力信号を受信するタッチ画面として実装されても良い。タッチパネルは、タッチパネル上のタッチ、スワイプ及びジェスチャーを検出するための1つ又はより多くのタッチセンサを含む。タッチセンサは、タッチ又はスワイプ操作の境界を検出するだけでなく、タッチ又はスワイプ操作と関連する期間及び圧力も検出する。いくつかの実施形態では、マルチメディア部608は、少なくとも一つのカメラを含む。カメラは、情報生成装置600が動作モードの間、外部のマルチメディアデータを受信するようにしても良い。カメラは、固定焦点レンズシステムでも良いし、又はフォーカス及び光学ズーム性能を有しても良い。情報生成装置600が冷蔵庫ならば、屋内画像及び冷蔵庫内部の画像のそれぞれを取得するために、カメラは冷蔵庫の外部及び内部に設置されることに留意が必要である。
オーディオ部610は、オーディオ(音声・音響)信号を出力する、及び/又は入力するように構成される。例えば、オーディオ部610は、情報生成装置600が電話モード、記録モード及び音声認識モードのような動作モードの時、外部オーディオ信号を受信するように構成されるマイクロフォン(「MIC」)を含む。受信されるオーディオ信号は、更にメモリ604に記憶されても良いし、又は通信部616を介して送信されるようにしても良い。いくつかの実施形態では、オーディオ部610は、更にオーディオ信号を出力するためのスピーカを含む。
I/Oインタフェース部612は、キーボード、ボタン等のような処理部602及び周辺装置インタフェースモジュールとの間のインタフェースを提供する。
センサ部614は、情報生成装置600の様々な側面の状態評価を提供するための1つ又はより多くのセンサを含む。例えば、センサ部614は、情報生成装置600のオン/オフ状態、構成要素(例えば、情報生成装置600のディスプレイ画面及びキーパッド)の相対位置、情報生成装置600又は情報生成装置600の構成要素の位置の変化、情報生成装置600に対するユーザ接触の存在又は不存在、情報生成装置600の方向又は加速/減速、及び情報生成装置600の温度の変化を検出しても良い。センサ部614は、物理的な接触なしに近傍の物体の存在を検出するように構成される近接センサを含んでも良い。また、センサ部614は、画像アプリケーションの用途のために、CMOS又はCCD画像センサのような光センサを含んでも良い。また、情報生成装置600が端末ならば、センサ部614は、加速度センサ、ジャイロセンサ、磁気センサ、圧力センサ、又は温度センサを含んでも良い。情報生成装置600が冷蔵庫ならば、センサ部614は、匂いセンサ及び冷蔵庫の各保存領域に設置される圧力センサを更に含んでも良い。
通信部616は、情報生成装置600と他の装置との間の有線又は無線の通信を容易にするように構成される。情報生成装置600は、WiFi、2G或いは3G、又はそれらの組合せのような通信規格に基づく無線ネットワークにアクセスすることができる。ある例示的な実施形態では、通信部616は、放送チャネルを介する外部放送制御システムからの放送信号又は放送関連情報を受信する。ある例示的な実施形態では、通信部616は、更に短距離の通信を容易にするための近距離無線通信(NFC)モジュールを含む。例えば、NFCモジュールは、無線ID(RFID)技術、赤外線通信規格(IrDA)技術、超広域無線(UWB)技術、Bluetooth(登録商標)(BT)技術、又はその他の技術に基づいて実装されても良い。
例示的な実施形態では、情報生成装置600は、前述の実現方法を行うために、特定用途向け集積回路(ASICs)、デジタルシグナルプロセッサ(DSPs)、デジタルシグナルプロセッシングデバイス(DSPDs)、プログラマブルロジックデバイス(PLDs)、フィールドプログラマブルゲートアレイ(FPGAs)、コントローラ、マイクロコントローラ、マイクロプロセッサ、又はそのほかの電子部品のような1つ又はより多くの電子的要素によって実装されても良い。
例示的な実施形態では、前述の方法を行うために、情報生成装置600の中のメモリ604に含まれ、プロセッサ620によって実行される命令を含む非一時的なコンピュータ読み取り可能な記憶媒体も提供される。例えば、非一時的なコンピュータ読み取り可能な記憶媒体は、読出専用メモリ(ROM)、ランダムアクセスメモリ(RAM)、コンパクトディスク読出専用メモリ(CD−ROM)、磁気テープ、フロッピー(登録商標)ディスク、光学データ記憶装置等であっても良い。
記憶媒体の命令が情報生成装置600のプロセッサによって実行される時、非一時的なコンピュータ読み取り可能な記憶媒体は、情報生成装置600に情報生成方法を実行させることができる。その情報生成方法は、冷蔵庫の中の食物の食物残余情報を取得するステップと、食物の食物消費速度を取得するステップと、食物残余情報及び食物消費速度に基づいて食物の推定食用回数を計算するステップと、推定食用回数が既定の食用回数よりも少ない場合、リマインド情報を生成するステップと、を含む。
本開示の他の実施形態は、明細書の留意事項及びここで開示される発明のプラクティスから当業者によって明らかにされるであろう。この出願は、本発明から出発し、この分野における公知又は周知のプラクティスの範囲内で想到する一般的な原理及び構成に従う本発明の任意の変更、利用、又は改良が含まれる。明細書及び実施例は、後述する請求項によって示される本発明の真の範囲及び意味において、単なる例示として考慮される。
本発明の正確な解釈は、前述の説明及び添付図面の例、並びにその範囲から出発せずになされる様々な修正及び変更に制限されないと解釈して頂ければ幸いである。本発明の範囲は、添付の請求項によってのみ限定されることを意図している。
本開示の実施形態の第3の側面によれば、コンピュータ上で動作する前述の情報生成方法を前記コンピュータに実行させるためのコンピュータプログラムが提供される。本開示の実施形態の第4の側面によれば、前述のコンピュータプログラムが記憶されるように構成されるコンピュータ読み取り可能な記憶媒体が提供される。

Claims (17)

  1. 冷蔵庫の中の食物の食物残余情報を取得するステップと、
    前記食物の食物消費速度を取得するステップと、
    前記食物残余情報及び前記食物消費速度に基づいて前記食物の推定食用回数を計算するステップと、
    前記推定食用回数が既定の食用回数よりも少ない場合、リマインド情報を生成するステップと、
    を含む情報生成方法。
  2. 前記食物残余情報は前記食物の種類及び前記食物の残量を含み、
    前記冷蔵庫の中の前記食物の前記食物残余情報を取得するステップは、
    前記冷蔵庫の中に配置されるカメラによって取得される前記冷蔵庫内部の画像に基づいて、異なる保存領域に保存される前記食物の前記種類及び前記食物の前記残量を決定するステップ、又は、
    カメラによって取得される前記冷蔵庫内部の画像に基づいて、異なる保存領域に保存される前記食物の前記種類を決定し、前記保存領域に設置される圧力センサによって取得される圧力データに基づいて、前記保存領域における前記食物の前記残量を決定するステップ、
    を含む請求項1に記載の情報生成方法。
  3. 前記食物の前記食物消費速度を取得するステップは、
    食物消費の履歴記録に基づいて、ユーザによって消費される指定の食物の単一の食用量及び食用頻度を示すユーザの食習慣情報を取得するステップと、
    前記単一の食用量及び前記食用頻度に基づいて、前記食物消費速度を決定するステップと、
    を含む請求項1又は請求項2に記載の情報生成方法。
  4. 実際に食事する人の人数を取得するステップと、
    前記実際に食事する人の人数及び前記食物の標準食用量に基づいて、前記食物消費速度を修正するステップと、
    を更に含む請求項1に記載の情報生成方法。
  5. 前記実際に食事する人の人数を取得するステップは、
    前記冷蔵庫に関連付けられるホームカメラ、又は前記冷蔵庫の外に設置されるカメラによって取得される屋内画像情報を取得し、前記屋内画像情報に基づいて前記実際に食事する人の人数を決定するステップ、
    ホームゲートウェイ装置に接続される携帯端末の数を取得し、前記携帯端末の数に基づいて前記実際に食事する人の人数を決定するステップ、
    前記冷蔵庫に関連付けられる端末において、少なくとも訪問客の人数が含まれる訪問客情報を取得し、前記訪問客の人数に基づいて前記実際に食事する人の人数を決定するステップ、
    前記冷蔵庫に関連付けられる端末において、少なくとも旅行日数が含まれる旅行情報を取得し、前記旅行日数の間の前記実際に食事する人の人数を決定するステップ、又は、
    既定の料理期間である既定の期間の間、前記冷蔵庫に関連付けられる携帯端末の地理的な位置情報を取得し、前記地理的な位置情報が、前記携帯端末と前記冷蔵庫との距離が既定の距離の閾値よりも大きいことを示すとき、前記携帯端末に対応するユーザは食事をしない人であると決定し、前記食事をしない人及び前記既定の食事をする人の人数に基づいて、前記実際に食事をする人の人数を決定するステップ、
    を含む請求項4に記載の情報生成方法。
  6. 前記推定食用回数が前記既定の食用回数よりも少ない場合、前記リマインド情報を生成するステップは、
    前記食物の購入のリンクを取得するステップと、
    前記リマインド情報に前記購入のリンクを付与するステップと、
    を含む請求項1に記載の情報生成方法。
  7. 前記ユーザの前記食習慣情報に基づいて、前記ユーザの好物を決定するステップと、
    前記食物の量、調理機器、及び前記調理機器に対応する調理作動パラメータを含み、前記ユーザの前記好物に対応する調理パラメータを検索するステップと、
    電気調理器、電磁オーブン、電子レンジ、又はオーブンからなる前記調理機器に前記調理パラメータを送信するステップと、
    を更に含む請求項3に記載の情報生成方法。
  8. 前記食物の実際の保存期間を取得し、前記実際の保存期間が前記食物に対応する推奨保存期間に到達した時、出来る限り速やかにユーザに前記食物を食用とすることを思い出させるための食用リマインド情報を生成するステップ、又は、
    前記冷蔵庫の中に設置されるカメラ又は匂いセンサによって前記食物の保存状態を決定し、前記保存状態が前記食物の劣化を示している時、ユーザに前記食物を処分することを思い出させるための食物処分情報を生成するステップ、
    を更に含む請求項1に記載の情報生成方法。
  9. 冷蔵庫の中の食物の食物残余情報を取得するように構成される第1取得モジュールと、
    前記食物の食物消費速度を取得するように構成される第2取得モジュールと、
    前記食物残余情報及び前記食物消費速度に基づいて前記食物の推定食用回数を計算するように構成される計算モジュールと、
    前記推定食用回数が既定の食用回数よりも少ない場合、リマインド情報を生成するように構成される第1生成モジュールと、
    を含む情報生成装置。
  10. 前記食物残余情報は前記食物の種類及び前記食物の残量を含み、
    前記第1取得モジュールは、
    前記冷蔵庫の中に配置されるカメラによって取得される前記冷蔵庫内部の画像に基づいて、異なる保存領域に保存される前記食物の前記種類及び前記食物の前記残量を決定するように構成される第1決定サブモジュール、又は、
    カメラによって取得される前記冷蔵庫内部の画像に基づいて、異なる保存領域に保存される前記食物の前記種類を決定し、前記保存領域に設置される圧力センサによって取得される圧力データに基づいて、前記保存領域における前記食物の前記残量を決定するように構成される第2決定サブモジュール、
    を含む請求項9に記載の情報生成装置。
  11. 前記第2取得モジュールは、
    食物消費の履歴記録に基づいて、ユーザによって消費される指定の食物の単一の食用量及び食用頻度を示すユーザの食習慣情報を取得するように構成される情報取得サブモジュールと、
    前記単一の食用量及び前記食用頻度に基づいて、前記食物消費速度を決定するように構成される速度決定サブモジュールと、
    を含む請求項9又は請求項10に記載の情報生成装置。
  12. 実際に食事する人の人数を取得するように構成される第3取得モジュールと、
    前記実際に食事する人の人数及び前記食物の標準食用量に基づいて、前記食物消費速度を修正するように構成される修正モジュールと、
    を更に含む請求項9に記載の情報生成装置。
  13. 前記第3取得モジュールは、
    前記冷蔵庫に関連付けられるホームカメラ、又は前記冷蔵庫の外に設置されるカメラによって取得される屋内画像情報を取得し、前記屋内画像情報に基づいて前記実際に食事する人の人数を決定するように構成される第3決定サブモジュール、
    ホームゲートウェイ装置に接続される携帯端末の数を取得し、前記携帯端末の数に基づいて前記実際に食事する人の人数を決定するように構成される第4決定サブモジュール、
    前記冷蔵庫に関連付けられる端末において、少なくとも訪問客の人数が含まれる訪問客情報を取得し、前記訪問客の人数に基づいて前記実際に食事する人の人数を決定するように構成される第5決定サブモジュール、
    前記冷蔵庫に関連付けられる端末において、少なくとも旅行日数が含まれる旅行情報を取得し、前記旅行日数の間の前記実際に食事する人の人数を決定するように構成される第6決定サブモジュール、又は、
    既定の料理期間である既定の期間の間、前記冷蔵庫に関連付けられる携帯端末の地理的な位置情報を取得し、前記地理的な位置情報が、前記携帯端末と前記冷蔵庫との距離が既定の距離の閾値よりも大きいことを示すとき、前記携帯端末に対応するユーザは食事をしない人であると決定し、前記食事をしない人及び前記既定の食事をする人の人数に基づいて、前記実際に食事をする人の人数を決定するように構成される第7決定サブモジュール、
    を含む請求項12に記載の情報生成装置。
  14. 前記第1生成モジュールは、
    前記食物の購入のリンクを取得するように構成されるリンク取得サブモジュールと、
    前記リマインド情報に前記購入のリンクを付与するように構成される付与サブモジュールと、
    を含む請求項9に記載の情報生成装置。
  15. 前記ユーザの前記食習慣情報に基づいて、前記ユーザの好物を決定するように構成される好物決定モジュールと、
    前記食物の量、調理機器、及び前記調理機器に対応する調理作動パラメータを含み、前記ユーザの前記好物に対応する調理パラメータを検索するように構成される検索モジュールと、
    電気調理器、電磁オーブン、電子レンジ、又はオーブンからなる前記調理機器に前記調理パラメータを送信するように構成される送信モジュールと、
    を更に含む請求項11に記載の情報生成装置。
  16. 前記食物の実際の保存期間を取得し、前記実際の保存期間が前記食物に対応する推奨保存期間に到達した時、出来る限り速やかにユーザに前記食物を食用とすることを思い出させるための食用リマインド情報を生成するように構成される第2生成モジュール、又は、
    前記冷蔵庫の中に設置されるカメラ又は匂いセンサによって前記食物の保存状態を決定し、前記保存状態が前記食物の劣化を示している時、ユーザに前記食物を処分することを思い出させるための食物処分情報を生成するように構成される第3生成モジュール、
    を更に含む請求項9に記載の情報生成装置。
  17. プロセッサと、
    前記プロセッサによって実行される命令を記憶するメモリと、
    を備え、
    前記プロセッサは、
    冷蔵庫の中の食物の食物残余情報を取得し、
    前記食物の食物消費速度を取得し、
    前記食物残余情報及び前記食物消費速度に基づいて前記食物の推定食用回数を計算し、
    前記推定食用回数が既定の食用回数よりも少ない場合、リマインド情報を生成する
    ように構成される情報生成装置。
JP2016536135A 2015-08-18 2015-12-25 情報生成方法、情報生成装置、コンピュータプログラム及びコンピュータ読み取り可能な記憶媒体 Active JP6421184B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201510509014.0A CN105091499B (zh) 2015-08-18 2015-08-18 信息生成方法及装置
CN201510509014.0 2015-08-18
PCT/CN2015/099046 WO2017028451A1 (zh) 2015-08-18 2015-12-25 信息生成方法及装置

Publications (2)

Publication Number Publication Date
JP2017533481A true JP2017533481A (ja) 2017-11-09
JP6421184B2 JP6421184B2 (ja) 2018-11-07

Family

ID=54572470

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016536135A Active JP6421184B2 (ja) 2015-08-18 2015-12-25 情報生成方法、情報生成装置、コンピュータプログラム及びコンピュータ読み取り可能な記憶媒体

Country Status (8)

Country Link
US (1) US9922530B2 (ja)
EP (1) EP3133548B1 (ja)
JP (1) JP6421184B2 (ja)
KR (1) KR102003149B1 (ja)
CN (1) CN105091499B (ja)
MX (1) MX2017006549A (ja)
RU (1) RU2650561C1 (ja)
WO (1) WO2017028451A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019175247A (ja) * 2018-03-29 2019-10-10 東京瓦斯株式会社 食材管理のシステム、そのプログラム、その装置、その方法および解凍制御装置
WO2019198865A1 (ko) * 2018-04-13 2019-10-17 삼성전자 주식회사 냉장고 및 냉장고의 사용자 인터페이스 표시 방법, 사용자 단말 및 사용자 단말의 기능 수행 방법
JP2022080652A (ja) * 2020-11-18 2022-05-30 トヨタ自動車株式会社 情報処理装置、情報処理方法、およびプログラム

Families Citing this family (67)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105091499B (zh) 2015-08-18 2017-06-16 小米科技有限责任公司 信息生成方法及装置
CN105302008A (zh) * 2015-12-03 2016-02-03 合肥联宝信息技术有限公司 一种智能开关系统及其控制方法
CN105571265B (zh) * 2015-12-15 2018-04-20 四川长虹电器股份有限公司 带自清理功能的智能冰箱设备、移动终端及系统
CN105574711A (zh) * 2015-12-18 2016-05-11 小米科技有限责任公司 智能提醒用户购物的方法及装置
CN105491147B (zh) * 2015-12-21 2018-11-20 美的集团股份有限公司 冰箱食材保鲜的提醒方法、系统、冰箱和云服务器
CN105402989B (zh) * 2015-12-30 2018-11-30 合肥美的电冰箱有限公司 冰箱的食品存储方法及冰箱
CN107403249A (zh) * 2016-05-19 2017-11-28 阿里巴巴集团控股有限公司 物品管理方法、装置、智能储藏设备和操作系统
CN107403248A (zh) * 2016-05-19 2017-11-28 阿里巴巴集团控股有限公司 物品管理方法、装置、智能储藏设备和操作系统
CN106125590A (zh) * 2016-06-15 2016-11-16 北京小米移动软件有限公司 智能家电的提醒方法、装置及智能家电
US11315071B1 (en) * 2016-06-24 2022-04-26 Amazon Technologies, Inc. Speech-based storage tracking
US10853761B1 (en) 2016-06-24 2020-12-01 Amazon Technologies, Inc. Speech-based inventory management system and method
CN106056870B (zh) * 2016-06-29 2018-01-09 陈群 一种基于智能家居的变质食物食用警示方法及其系统
CN106529892A (zh) * 2016-08-24 2017-03-22 深圳博科智能科技有限公司 一种基于物联网的数据处理的方法及装置
CN107942735B (zh) * 2016-10-12 2020-05-26 佛山市顺德区美的电热电器制造有限公司 烹饪器具的控制方法及装置、烹饪器具
US10267670B2 (en) 2016-10-17 2019-04-23 Bradley Charles Ashmore Meal lifecycle management system
CN106384488A (zh) * 2016-11-17 2017-02-08 东华大学 一种智能元器件盒
CN106959615B (zh) * 2017-04-17 2020-10-30 青岛海尔股份有限公司 一种智能家居系统的控制方法
US10277714B2 (en) * 2017-05-10 2019-04-30 Facebook, Inc. Predicting household demographics based on image data
TWI711985B (zh) * 2017-05-19 2020-12-01 中華電信股份有限公司 結合物聯網提供行程規劃服務的方法
CN108006736B (zh) * 2017-06-07 2023-10-20 宁波方太厨具有限公司 一种智能吸油烟机及其控制方法
CN107477974B (zh) * 2017-09-12 2018-06-01 盐城三鼎电子科技有限公司 一种基于手机的冰箱管理方法及系统
CN109507941A (zh) * 2017-09-15 2019-03-22 佛山市顺德区美的电热电器制造有限公司 一种提醒方法、服务器、系统及计算机可读存储介质
CN107918798B (zh) * 2017-10-31 2020-11-27 珠海格力电器股份有限公司 食物处理方法及装置
CN109924391B (zh) * 2017-12-18 2022-10-21 宁波方太厨具有限公司 基于食物状况的微波炉自适应解冻方法及自适应解冻系统
CN108298209B (zh) * 2017-12-27 2019-09-20 温州职业技术学院 一种智能控制环保型鸡蛋保鲜盒装置
CN108303911A (zh) * 2018-01-29 2018-07-20 重庆羽狐科技有限公司 智能电饭煲、智能电饭煲的烹饪指令推荐方法及介质
CN108481949B (zh) * 2018-03-28 2020-01-03 北京小米移动软件有限公司 智能钢笔的控制方法、装置及智能钢笔
CN110322304B (zh) * 2018-03-30 2022-06-17 九阳股份有限公司 一种烹饪设备的料包配送方法及系统
JP2019184167A (ja) * 2018-04-11 2019-10-24 東芝ライフスタイル株式会社 家電機器、冷蔵庫
KR102535152B1 (ko) 2018-04-17 2023-05-22 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 제어 방법
KR20190140509A (ko) * 2018-05-25 2019-12-20 삼성전자주식회사 재고 추적 방법 및 장치
CN108991913B (zh) * 2018-06-27 2020-12-29 佛山市云米电器科技有限公司 一种实现食材管理的蒸烤设备及方法
CN108852023B (zh) * 2018-06-27 2021-01-15 佛山市云米电器科技有限公司 一种可实现智能互联的蒸烤设备
CN108937554B (zh) * 2018-06-27 2021-09-21 佛山市云米电器科技有限公司 一种利用终端进行饮食提醒的蒸烤设备及方法
CN108959593A (zh) * 2018-07-12 2018-12-07 四川虹美智能科技有限公司 一种实现配菜的智能烟机、系统和方法
CN109447745A (zh) * 2018-10-22 2019-03-08 中国联合网络通信集团有限公司 购物方法、装置、系统及存储介质
US11506448B2 (en) 2018-11-14 2022-11-22 Samsung Electronics Co.. Ltd. Method and device for managing food in refrigerator
CN111238119A (zh) * 2018-11-28 2020-06-05 宁波泽锦电器科技有限公司 基于食品充足性检测的台式冰柜
US11386621B2 (en) * 2018-12-31 2022-07-12 Whirlpool Corporation Augmented reality feedback of inventory for an appliance
KR102614283B1 (ko) * 2019-01-08 2023-12-18 삼성전자주식회사 외부 전자 장치의 내부 공간을 관리하는 전자 장치 및 방법
CN109947059A (zh) * 2019-02-26 2019-06-28 广东工业大学 一种基于物联网的智能厨房系统
CN111752175B (zh) * 2019-03-27 2024-03-01 佛山市顺德区美的电热电器制造有限公司 运行控制方法、装置、烹饪器具、拾音设备和存储介质
CN111986452B (zh) * 2019-05-21 2022-11-22 佛山市顺德区美的电热电器制造有限公司 一种提醒方法、系统、设备和存储介质
US11506445B2 (en) * 2019-06-19 2022-11-22 Vince Lubben Refrigerated delivery receiving furniture system
CN110619266B (zh) * 2019-08-02 2024-01-19 青岛海尔智能技术研发有限公司 目标物识别方法、装置和冰箱
CN112696866A (zh) * 2019-10-23 2021-04-23 青岛海高设计制造有限公司 用于冰箱的控制方法及装置、冰箱
CN110765985A (zh) * 2019-11-11 2020-02-07 上海秒针网络科技有限公司 自助餐厅菜品补充监控方法及系统
CN110953838B (zh) * 2019-12-16 2021-04-23 珠海格力电器股份有限公司 一种冰箱内食材采买提示方法、存储介质和冰箱
CN111276214A (zh) * 2020-01-16 2020-06-12 珠海格力电器股份有限公司 食谱的推荐方法和装置、存储介质和电子装置
CN113154786B (zh) * 2020-01-22 2022-10-04 青岛海尔电冰箱有限公司 食物提醒方法、冰箱、计算机可读存储介质
CN113154785A (zh) * 2020-01-22 2021-07-23 青岛海尔电冰箱有限公司 食物提醒方法、冰箱、计算机可读存储介质
CN113154784A (zh) * 2020-01-22 2021-07-23 青岛海尔电冰箱有限公司 食物提醒方法、冰箱、计算机可读存储介质
JP7425620B2 (ja) * 2020-02-13 2024-01-31 東芝ライフスタイル株式会社 食材管理システム
US20220319666A1 (en) * 2020-04-16 2022-10-06 Samsung Electronics Co., Ltd. Electronic device for providing plan, and method of operating the same
US11932080B2 (en) 2020-08-20 2024-03-19 Denso International America, Inc. Diagnostic and recirculation control systems and methods
US11813926B2 (en) 2020-08-20 2023-11-14 Denso International America, Inc. Binding agent and olfaction sensor
US11828210B2 (en) 2020-08-20 2023-11-28 Denso International America, Inc. Diagnostic systems and methods of vehicles using olfaction
US11760169B2 (en) 2020-08-20 2023-09-19 Denso International America, Inc. Particulate control systems and methods for olfaction sensors
US11760170B2 (en) 2020-08-20 2023-09-19 Denso International America, Inc. Olfaction sensor preservation systems and methods
US11636870B2 (en) 2020-08-20 2023-04-25 Denso International America, Inc. Smoking cessation systems and methods
US12017506B2 (en) 2020-08-20 2024-06-25 Denso International America, Inc. Passenger cabin air control systems and methods
US11881093B2 (en) 2020-08-20 2024-01-23 Denso International America, Inc. Systems and methods for identifying smoking in vehicles
CN112019743A (zh) * 2020-08-26 2020-12-01 海尔优家智能科技(北京)有限公司 对象信息的提示方法及装置、存储介质、电子装置
US20220067642A1 (en) * 2020-08-27 2022-03-03 Walmart Apollo, Llc Systems and methods for auto-replenishment of products using pressure mapping sensors and machine learning
DE102020213160A1 (de) 2020-10-19 2022-04-21 BSH Hausgeräte GmbH Lagern von Lagergut in einer Lagerungsvorrichtung
CN115486682B (zh) * 2021-06-18 2024-03-26 佛山市顺德区美的电热电器制造有限公司 烹饪设备的控制方法、装置、烹饪设备和存储介质
CN114527682B (zh) * 2022-02-08 2024-05-24 海信冰箱有限公司 一种冰箱和烹饪控制方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10316210A (ja) * 1997-05-21 1998-12-02 Hitachi Ltd 保管庫
JP2001195385A (ja) * 2000-01-07 2001-07-19 Seagull Inc レシピ提供システム
JP2004005027A (ja) * 2002-05-30 2004-01-08 Denso Wave Inc 商品購入方法
JP2005276171A (ja) * 2004-02-27 2005-10-06 Matsushita Electric Ind Co Ltd 調理アシストシステム、情報端末、及びサーバ

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6204763B1 (en) 1999-03-22 2001-03-20 Jujitsu Limited Household consumable item automatic replenishment system including intelligent refrigerator
US8429026B1 (en) * 1999-06-28 2013-04-23 Dietfood Corp. System and method for creating and submitting electronic shopping lists
US7340414B2 (en) * 2001-05-25 2008-03-04 Lg Electronics Inc. Refrigerator having automatic food ordering function and method for operating the same
CN100375880C (zh) * 2003-04-11 2008-03-19 乐金电子(天津)电器有限公司 网络冰箱的食品自动定购系统
US9821344B2 (en) * 2004-12-10 2017-11-21 Ikan Holdings Llc Systems and methods for scanning information from storage area contents
JP2006298554A (ja) * 2005-04-20 2006-11-02 Matsushita Electric Ind Co Ltd 食品の在庫管理グッズ、食品の在庫管理装置
KR101517083B1 (ko) * 2009-05-11 2015-05-15 엘지전자 주식회사 냉장고를 제어하는 휴대 단말기 및 그 동작 방법
WO2011105768A2 (ko) * 2010-02-23 2011-09-01 엘지전자 주식회사 단말기를 구비하는 냉장고 및 그 제어방법
US20120101876A1 (en) 2010-10-21 2012-04-26 S. C. Johnson, Inc. Method of managing household product inventory
DE102011006951A1 (de) * 2011-04-07 2012-10-11 BSH Bosch und Siemens Hausgeräte GmbH Verfahren zur Regelung eines Kältegeräts
KR20120116207A (ko) * 2011-04-12 2012-10-22 엘지전자 주식회사 디스플레이 장치 및 이를 구비하는 냉장고
KR101774054B1 (ko) * 2011-04-15 2017-09-12 엘지전자 주식회사 네트워크 시스템 및 그 제어방법
KR20120118641A (ko) * 2011-04-19 2012-10-29 엘지전자 주식회사 냉장고의 제어방법
EP2562967B1 (en) * 2011-08-22 2015-01-14 LG Electronics Inc. Information management system for home appliance
CN103363751B (zh) * 2012-03-30 2016-12-07 海尔集团公司 冰箱及其库存管理法
JP2013250698A (ja) 2012-05-31 2013-12-12 Nikon Corp 購入支援装置、購入支援方法、購入支援システム
CN102706093A (zh) * 2012-06-21 2012-10-03 深圳市国显科技有限公司 一种基于物联网的智能冰箱及其应用系统
CN102889747A (zh) * 2012-10-24 2013-01-23 合肥美菱股份有限公司 一种应用于联网冰箱的食品管理系统
KR20140122095A (ko) * 2013-04-09 2014-10-17 삼성전자주식회사 식품관리를 위한 냉장고 및 이동단말기
EP2985553B1 (en) * 2013-04-10 2020-08-26 LG Electronics Inc. Method for managing storage product in refrigerator using image recognition, and refrigerator for same
US20150002660A1 (en) * 2013-06-28 2015-01-01 Lg Electronics Inc. Electric product
CN103363571B (zh) * 2013-08-08 2016-03-09 邹平伟瑞制冷材料有限公司 超导热管电加热器
US20150149298A1 (en) 2013-11-22 2015-05-28 John Tapley Dynamic list creation
CN104050531A (zh) * 2014-06-16 2014-09-17 黄仕强 食品供应系统、装置及其方法
CN104279835A (zh) * 2014-10-27 2015-01-14 宁夏天纵泓光余热发电技术有限公司 建议食用存储食品的系统
CN105091499B (zh) * 2015-08-18 2017-06-16 小米科技有限责任公司 信息生成方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10316210A (ja) * 1997-05-21 1998-12-02 Hitachi Ltd 保管庫
JP2001195385A (ja) * 2000-01-07 2001-07-19 Seagull Inc レシピ提供システム
JP2004005027A (ja) * 2002-05-30 2004-01-08 Denso Wave Inc 商品購入方法
JP2005276171A (ja) * 2004-02-27 2005-10-06 Matsushita Electric Ind Co Ltd 調理アシストシステム、情報端末、及びサーバ

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019175247A (ja) * 2018-03-29 2019-10-10 東京瓦斯株式会社 食材管理のシステム、そのプログラム、その装置、その方法および解凍制御装置
WO2019198865A1 (ko) * 2018-04-13 2019-10-17 삼성전자 주식회사 냉장고 및 냉장고의 사용자 인터페이스 표시 방법, 사용자 단말 및 사용자 단말의 기능 수행 방법
US11954626B2 (en) 2018-04-13 2024-04-09 Samsung Electronics Co., Ltd. Refrigerator and method for displaying user interface on refrigerator, user terminal, and method for performing function in user terminal
JP2022080652A (ja) * 2020-11-18 2022-05-30 トヨタ自動車株式会社 情報処理装置、情報処理方法、およびプログラム
JP7392636B2 (ja) 2020-11-18 2023-12-06 トヨタ自動車株式会社 情報処理装置、情報処理方法、およびプログラム

Also Published As

Publication number Publication date
KR102003149B1 (ko) 2019-07-23
WO2017028451A1 (zh) 2017-02-23
JP6421184B2 (ja) 2018-11-07
EP3133548B1 (en) 2019-01-23
US9922530B2 (en) 2018-03-20
EP3133548A1 (en) 2017-02-22
US20170053516A1 (en) 2017-02-23
CN105091499A (zh) 2015-11-25
MX2017006549A (es) 2017-08-09
RU2650561C1 (ru) 2018-04-16
CN105091499B (zh) 2017-06-16
KR20170133448A (ko) 2017-12-05

Similar Documents

Publication Publication Date Title
JP6421184B2 (ja) 情報生成方法、情報生成装置、コンピュータプログラム及びコンピュータ読み取り可能な記憶媒体
CN104865857B (zh) 启动饭煲的方法及装置
US9269133B2 (en) Method and system for providing cooking information about food
EP3211836B1 (en) Cooking state alerting method and apparatus, computer program and recording medium
US20140095479A1 (en) Device, method, and system for recipe recommendation and recipe ingredient management
CN106871567B (zh) 基于智能冰箱的食物推荐处理方法、装置及智能冰箱
EP3131048A1 (en) Automatic semantic labeling based on activity recognition
WO2016206338A1 (zh) 垃圾袋更换提示方法及装置
JP2017534415A (ja) 電磁調理器の内釜加熱方法及び装置、電子装置
JP6143453B2 (ja) 冷蔵庫
CN106647532B (zh) 烹饪设备的推荐方法和装置
CN111568153A (zh) 一种实现菜品烹饪工序推荐的厨电系统
CN106094541B (zh) 智能家居的清洗方法及装置
US20210406545A1 (en) System for integrated device connectivity and agile device control for dynamic object tracking and management
CN107080460A (zh) 防止锅内液体溢出的方法及装置
WO2017020509A1 (zh) 调整模式的方法及装置
US10161674B2 (en) Method for controlling a refrigerator and refrigerator
US20220273139A1 (en) System and Method for Optimal Food Cooking or Heating Operations
JP6495371B2 (ja) 冷蔵庫
CN106594825B (zh) 抽烟机进行信息提醒方法、装置及终端
WO2022118081A1 (en) System and method for remotely inspecting process of food preparation and measuring parameters in real-time
CN107145566B (zh) 推荐烹饪设备的清洁方式的方法、装置及存储介质
JP2022093365A (ja) キッチン情報提示プログラム
JP2023136970A (ja) 調理支援システムおよび調理支援装置
CN107145099A (zh) 提示烹饪操作的方法、装置及存储介质

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171024

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180124

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180306

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180605

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181002

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181015

R150 Certificate of patent or registration of utility model

Ref document number: 6421184

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250