JP6692960B1 - 調理支援システム - Google Patents
調理支援システム Download PDFInfo
- Publication number
- JP6692960B1 JP6692960B1 JP2019066445A JP2019066445A JP6692960B1 JP 6692960 B1 JP6692960 B1 JP 6692960B1 JP 2019066445 A JP2019066445 A JP 2019066445A JP 2019066445 A JP2019066445 A JP 2019066445A JP 6692960 B1 JP6692960 B1 JP 6692960B1
- Authority
- JP
- Japan
- Prior art keywords
- cooking
- food
- unit
- size
- cooking time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000010411 cooking Methods 0.000 title claims abstract description 293
- 235000013305 food Nutrition 0.000 claims abstract description 174
- 239000000463 material Substances 0.000 claims abstract description 89
- 238000010801 machine learning Methods 0.000 claims abstract description 7
- 238000000034 method Methods 0.000 claims description 152
- 239000004615 ingredient Substances 0.000 claims description 21
- 238000013179 statistical model Methods 0.000 claims description 6
- 239000000284 extract Substances 0.000 claims description 3
- 238000000605 extraction Methods 0.000 claims description 2
- 239000004984 smart glass Substances 0.000 abstract description 20
- 238000010586 diagram Methods 0.000 abstract description 10
- 238000010438 heat treatment Methods 0.000 description 16
- 235000013311 vegetables Nutrition 0.000 description 16
- 235000013399 edible fruits Nutrition 0.000 description 12
- 241000251468 Actinopterygii Species 0.000 description 9
- 235000019688 fish Nutrition 0.000 description 9
- 235000013372 meat Nutrition 0.000 description 9
- 230000004048 modification Effects 0.000 description 9
- 238000012986 modification Methods 0.000 description 9
- 235000012041 food component Nutrition 0.000 description 6
- 239000005417 food ingredient Substances 0.000 description 6
- 230000006870 function Effects 0.000 description 4
- 238000013528 artificial neural network Methods 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 235000015278 beef Nutrition 0.000 description 1
- 235000015219 food category Nutrition 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000012706 support-vector machine Methods 0.000 description 1
Images
Landscapes
- Image Analysis (AREA)
Abstract
Description
本発明の一実施形態に係るスマートグラス1について、図面を参照して説明する。このスマートグラス1は、調理者により装着されて、調理を支援するための装置である。
図1は、スマートグラス1の構成の一例を示すブロック図である。同図に示すスマートグラス1は、大略、CPU等のプロセッサ2、フラッシュメモリ等のメモリ3、光学透過型のディスプレイ4、タッチパネル5、マイク6、カメラ7及び通信部8を備える。これらの構成要素のうち、ディスプレイ4は、スマートグラス1装着時に調理者の眼前に配置され、調理者の視線方向の景色に重ねて画像を表示する。マイク6は、調理者の音声を収音して音声データを生成する。カメラ7は、スマートグラス1装着時に調理者の視線方向を撮影可能なように配置され、撮影された画像データを生成する。通信部8は、無線LANやインターネット等のネットワークを介して他の装置と無線通信を行う。
後続調理工程IDは、当該調理工程に後続する調理工程を識別するためのIDである。この後続調理工程IDは、同じレシピIDに対応付けられている複数の調理工程間の順序(言い換えると、調理手順)を規定する。
なお、本実施形態では人差し指を基準の一例として説明するが、サイズが既知のものであれば別の物で代用してもよい。
以上が、プロセッサ2により実現される各機能についての説明である。
次に、以上説明したスマートグラス1により実行される調理支援処理について、図9に示すフロー図を参照して説明する。
上記のステップS601の判定の結果、食材に肉又は魚が含まれていない場合には(ステップS601のNO)、ステップS602〜S607はスキップされる。
上記のステップS608の判定の結果、食材に野菜又は果物が含まれていない場合には(ステップS608のNO)、ステップS609〜S615はスキップされる。
以上が、食材分量特定処理についての説明である。
以上が、カット特定処理についての説明である。
以上が、調理時間推定処理についての説明である。
調理工程説明文表示処理が終了すると、本調理支援処理は終了する。
以上が、調理支援処理についての説明である。
上記の実施形態は下記のように変形してもよい。なお、以下に記載する2以上の変形例は互いに組み合わせてもよい。
食材分量特定部23は、野菜や果物の分量を特定するにあたり、肉や魚と同様に、調理者に分量を入力するよう促すメッセージをディスプレイ4に表示させ、このメッセージを見た調理者により発声された分量を、その食材名と対応付けて作業テーブルT4に格納するようにしてもよい。
カットサイズ特定部252は、食材片のカットサイズを特定するにあたり、調理者にカットサイズを入力するよう促すメッセージをディスプレイ4に表示させ、このメッセージを見た調理者により発声されたカットサイズを、その食材名と対応付けて作業テーブルT4に格納するようにしてもよい。
モデル生成部29は、推定モデルを生成するにあたり、重回帰モデル以外の統計モデルにレシピデータを学習させるようにしてもよい。例えば、ニューラルネットワークやサポートベクターマシンを統計モデルとして用いてもよい。
調理時間変更要否判定部26は、調理時間の変更の要否を判定するにあたって、調理者に対する問い合わせを省略してもよい。すなわち、調理対象の食材の中に、加熱調理の調理時間を変更すべき食材が含まれている場合に、調理者に対する調理時間の変更要否の問い合わせをせずに、調理時間の変更が必要と判定してもよい。
スマートグラス1は、食材をカットする調理工程において、カット対象の食材に重ねて、カットすべきラインを示す補助線をディスプレイ4に表示するようにしてもよい。その際、スマートグラス1は、カメラ7により生成される画像データに基づいて、カメラ撮影領域内におけるカット対象食材の輪郭座標を特定する。そして、特定した輪郭座標を、所定の変換テーブルを参照して、ディスプレイ4の画像表示領域における輪郭座標に変換する。カットすべきラインを示す補助線は、この変換された輪郭座標により囲まれた領域を横切るように表示される。
スマートグラス1のディスプレイ4に代えて又は加えて、スピーカから情報を出力するようにしてもよい。
スマートグラス1は、上記の調理支援処理を実行可能な調理支援システムの一例にすぎない。上記の調理支援処理は、スマートグラス1以外の情報処理装置(例えば、ヘッドマウントディスプレイ、スマートフォン、タブレット端末等)により実行されてもよい。
スマートグラス1が備える機能及びテーブルの一部を、スマートグラス1と通信可能なサーバに持たせるようにしてもよい。
Claims (7)
- 調理者により食材がカットされて生成された食材片のサイズを特定する第1特定部と、
前記特定された食材片のサイズを入力として、機械学習により生成された推定モデルを用いて、前記食材片の最適な加熱調理時間を推定する推定部と、
前記推定された加熱調理時間を前記調理者に通知する通知部と
を備える調理支援システム。 - 前記食材がカットされた際のカット方法を特定する第2特定部をさらに備え、
前記推定部は、前記特定された食材片のサイズと前記特定されたカット方法を入力として、前記推定モデルを用いて、前記食材片の最適な加熱調理時間を推定する
ことを特徴とする、請求項1に記載の調理支援システム。 - 前記食材の分量を特定する第3特定部をさらに備え、
前記推定部は、前記特定された食材片のサイズと前記特定された分量を入力として、前記推定モデルを用いて、前記食材片の最適な加熱調理時間を推定する
ことを特徴とする、請求項1又は2に記載の調理支援システム。 - 複数のレシピ情報を解析して、前記食材の調理に関連する変数の組を複数抽出する抽出部と、
前記抽出された複数の変数の組を統計モデルに学習させることで前記推定モデルを生成する生成部と
をさらに備えることを特徴とする、請求項1乃至3のいずれか1項に記載の調理支援システム。 - 前記食材に予め対応付けられている食材片の基準サイズを特定する第4特定部と、
前記第1特定部により特定された食材片のサイズと前記第4特定部により特定された食材片の基準サイズの差分が第1閾値を超えるか否かを判定する第1判定部と
をさらに備え、
前記推定部は、前記差分が前記第1閾値を超えると判定された場合に、前記特定された食材片のサイズを入力として、前記推定モデルを用いて、前記食材片の最適な加熱調理時間を推定する
ことを特徴とする、請求項1乃至4のいずれか1項に記載の調理支援システム。 - 前記第1特定部は、同時に加熱調理される複数の食材の各々について、当該食材がカットされて生成された食材片のサイズを特定し、
前記推定部は、前記複数の食材の各々について、当該食材について特定された食材片のサイズを入力として、前記推定モデルを用いて、当該食材片の最適な加熱調理時間を推定し、
前記複数の食材の各々について推定された加熱調理時間のうち、最長の加熱調理時間を特定する第5特定部をさらに備え、
前記通知部は、前記特定された加熱調理時間を前記調理者に通知する
ことを特徴とする、請求項1乃至5のいずれか1項に記載の調理支援システム。 - 前記調理者の眼前に配置され、前記調理者の視線方向の景色に重ねて画像を表示する表示装置と、
前記食材においてカットすべきラインを示す補助線を前記食材と重なるように前記表示装置に表示させる表示制御部と、
前記表示装置の画像表示領域における前記補助線の位置と、前記画像表示領域における前記食材の切断線の位置の間の距離が第2閾値を超えるかを判定する第2判定部と
をさらに備え、
前記推定部は、前記距離が前記第2閾値を超えると判定された場合に、前記特定された食材片のサイズを入力として、前記推定モデルを用いて、前記食材片の最適な加熱調理時間を推定する
ことを特徴とする、請求項1乃至6のいずれか1項に記載の調理支援システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019066445A JP6692960B1 (ja) | 2019-03-29 | 2019-03-29 | 調理支援システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019066445A JP6692960B1 (ja) | 2019-03-29 | 2019-03-29 | 調理支援システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6692960B1 true JP6692960B1 (ja) | 2020-05-13 |
JP2020166557A JP2020166557A (ja) | 2020-10-08 |
Family
ID=70549750
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019066445A Active JP6692960B1 (ja) | 2019-03-29 | 2019-03-29 | 調理支援システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6692960B1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020261028A1 (ja) * | 2019-06-25 | 2020-12-30 | 株式会社半導体エネルギー研究所 | 情報処理システム、および情報処理方法 |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP4248753A4 (en) * | 2020-11-20 | 2024-04-24 | Juchheim Co., Ltd. | BUM CAKE BAKING SYSTEM, BUM CAKE BAKING AID SYSTEM, PROGRAM AND METHOD FOR PRODUCING BUM CAKES |
CN117795256A (zh) * | 2021-08-10 | 2024-03-29 | 索尼集团公司 | 信息处理装置、信息处理方法和程序 |
WO2024161686A1 (ja) * | 2023-01-30 | 2024-08-08 | ソニーグループ株式会社 | 情報処理装置、情報処理方法、プログラム、配信システム |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5193988B2 (ja) * | 2009-12-03 | 2013-05-08 | 東芝テック株式会社 | 調理補助端末及びプログラム |
US20160005329A1 (en) * | 2013-02-28 | 2016-01-07 | Sony Corporation | Information processing device and storage medium |
US10555633B2 (en) * | 2015-03-27 | 2020-02-11 | Prashant Choudhary | Autonomous cooking device to prepare food from a recipe file and method for creating recipe files |
WO2019033089A1 (en) * | 2017-08-11 | 2019-02-14 | Brava Home, Inc. | CONFIGURABLE COOKING SYSTEMS AND METHODS |
-
2019
- 2019-03-29 JP JP2019066445A patent/JP6692960B1/ja active Active
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020261028A1 (ja) * | 2019-06-25 | 2020-12-30 | 株式会社半導体エネルギー研究所 | 情報処理システム、および情報処理方法 |
US11922690B2 (en) | 2019-06-25 | 2024-03-05 | Semiconductor Energy Laboratory Co., Ltd. | Data processing system and data processing method |
Also Published As
Publication number | Publication date |
---|---|
JP2020166557A (ja) | 2020-10-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6692960B1 (ja) | 調理支援システム | |
US7454390B2 (en) | Ingredient cooking-operation recognition system and computer-readable recording medium which is recorded with ingredient cooking-operation recognition program | |
JP6055160B1 (ja) | 化粧品情報提供システム、化粧品情報提供装置、化粧品情報提供方法、及びプログラム | |
EP3047884A1 (en) | Program, information-processing device, information-processing system, and avatar generating method | |
CN105373929B (zh) | 提供拍照推荐信息的方法及装置 | |
US20160320622A1 (en) | Information display terminal, information display system, and information display method | |
CN109196491A (zh) | 机器智能预测通信和控制系统 | |
US20190114941A1 (en) | Work assistance system, kitchen assistance system, work assisting method, and non-transitive computer-readable medium recording program | |
WO2016036478A1 (en) | Method and apparatus for creating photo-taking template database and for providing-taking recommendation information | |
KR101789732B1 (ko) | 식품 정보 제공 방법 및 장치 | |
JP2018084890A (ja) | 情報処理装置、情報処理方法、およびプログラム | |
KR20170015313A (ko) | 장소 기반 정보 처리 방법 및 장치 | |
JP2013168132A (ja) | 商品検索装置、方法、及びプログラム | |
WO2017064891A1 (ja) | 情報処理システム、情報処理方法、および記憶媒体 | |
JP2018027613A (ja) | 接客装置、接客方法及び接客システム | |
CN105512501A (zh) | 一种智能饮食分析系统 | |
CN108742125A (zh) | 一种可以进行烹饪分享的蒸烤设备及方法 | |
TW201901598A (zh) | 飲食資訊建議系統及其飲食資訊建議方法 | |
KR20160029980A (ko) | 맞춤형 건강 식단 정보를 참조로 하여 자동으로 식재료를 주문하는 방법, 단말 및 컴퓨터 판단 가능한 기록 매체 | |
CN112579873A (zh) | 烹饪食谱推荐方法、装置、存储介质及电子设备 | |
US20200175309A1 (en) | Information processing apparatus and non-transitory computer readable medium storing information processing program | |
US20180158363A1 (en) | Information processing method, information processing system, and terminal | |
KR102577604B1 (ko) | 인공지능에 기반한 일식 주점 메뉴 추천 시스템 | |
JP2017167759A (ja) | コーディネート推薦装置、及びプログラム | |
CN110264544B (zh) | 图片处理方法和装置、存储介质及电子装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190329 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200306 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200324 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200415 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6692960 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |