JP7409314B2 - 情報処理装置、情報処理システム、および情報処理方法、並びにプログラム - Google Patents
情報処理装置、情報処理システム、および情報処理方法、並びにプログラム Download PDFInfo
- Publication number
- JP7409314B2 JP7409314B2 JP2020550361A JP2020550361A JP7409314B2 JP 7409314 B2 JP7409314 B2 JP 7409314B2 JP 2020550361 A JP2020550361 A JP 2020550361A JP 2020550361 A JP2020550361 A JP 2020550361A JP 7409314 B2 JP7409314 B2 JP 7409314B2
- Authority
- JP
- Japan
- Prior art keywords
- cooking
- information processing
- utensils
- utensil
- food
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 110
- 238000003672 processing method Methods 0.000 title claims description 18
- 238000010411 cooking Methods 0.000 claims description 825
- 238000000034 method Methods 0.000 claims description 147
- 230000008569 process Effects 0.000 claims description 138
- 235000013305 food Nutrition 0.000 claims description 105
- 238000012806 monitoring device Methods 0.000 claims description 79
- 239000004615 ingredient Substances 0.000 claims description 66
- 238000012545 processing Methods 0.000 claims description 52
- 238000003860 storage Methods 0.000 claims description 41
- 238000004458 analytical method Methods 0.000 claims description 35
- 235000012041 food component Nutrition 0.000 claims description 16
- 239000005417 food ingredient Substances 0.000 claims description 16
- 239000003550 marker Substances 0.000 claims description 5
- 238000004140 cleaning Methods 0.000 description 29
- 238000005520 cutting process Methods 0.000 description 24
- 235000013372 meat Nutrition 0.000 description 20
- 230000000249 desinfective effect Effects 0.000 description 19
- 235000013311 vegetables Nutrition 0.000 description 16
- 238000004891 communication Methods 0.000 description 13
- 235000015277 pork Nutrition 0.000 description 13
- 238000004659 sterilization and disinfection Methods 0.000 description 12
- 239000000645 desinfectant Substances 0.000 description 11
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 11
- 238000010586 diagram Methods 0.000 description 10
- 235000006886 Zingiber officinale Nutrition 0.000 description 7
- 235000008397 ginger Nutrition 0.000 description 7
- 239000007788 liquid Substances 0.000 description 7
- 238000005406 washing Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 241000251468 Actinopterygii Species 0.000 description 5
- 241000894006 Bacteria Species 0.000 description 5
- 244000273928 Zingiber officinale Species 0.000 description 5
- 230000007246 mechanism Effects 0.000 description 5
- 240000008415 Lactuca sativa Species 0.000 description 4
- 238000009835 boiling Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000005507 spraying Methods 0.000 description 3
- 235000012033 vegetable salad Nutrition 0.000 description 3
- 235000003228 Lactuca sativa Nutrition 0.000 description 2
- 241000234314 Zingiber Species 0.000 description 2
- 235000021438 curry Nutrition 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 235000020995 raw meat Nutrition 0.000 description 2
- 235000012045 salad Nutrition 0.000 description 2
- 239000007921 spray Substances 0.000 description 2
- 244000291564 Allium cepa Species 0.000 description 1
- 235000002732 Allium cepa var. cepa Nutrition 0.000 description 1
- 244000000626 Daucus carota Species 0.000 description 1
- 235000002767 Daucus carota Nutrition 0.000 description 1
- 206010016952 Food poisoning Diseases 0.000 description 1
- 208000019331 Foodborne disease Diseases 0.000 description 1
- 235000014820 Galium aparine Nutrition 0.000 description 1
- 240000005702 Galium aparine Species 0.000 description 1
- 235000007688 Lycopersicon esculentum Nutrition 0.000 description 1
- 240000003768 Solanum lycopersicum Species 0.000 description 1
- 244000061456 Solanum tuberosum Species 0.000 description 1
- 235000002595 Solanum tuberosum Nutrition 0.000 description 1
- 230000002730 additional effect Effects 0.000 description 1
- FFBHFFJDDLITSX-UHFFFAOYSA-N benzyl N-[2-hydroxy-4-(3-oxomorpholin-4-yl)phenyl]carbamate Chemical compound OC1=C(NC(=O)OCC2=CC=CC=C2)C=CC(=C1)N1CCOCC1=O FFBHFFJDDLITSX-UHFFFAOYSA-N 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 235000021186 dishes Nutrition 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 235000012015 potatoes Nutrition 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001954 sterilising effect Effects 0.000 description 1
- 238000012706 support-vector machine Methods 0.000 description 1
- 230000004083 survival effect Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/12—Hotels or restaurants
-
- A—HUMAN NECESSITIES
- A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
- A47J—KITCHEN EQUIPMENT; COFFEE MILLS; SPICE MILLS; APPARATUS FOR MAKING BEVERAGES
- A47J44/00—Multi-purpose machines for preparing food with several driving units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- A—HUMAN NECESSITIES
- A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
- A47J—KITCHEN EQUIPMENT; COFFEE MILLS; SPICE MILLS; APPARATUS FOR MAKING BEVERAGES
- A47J36/00—Parts, details or accessories of cooking-vessels
- A47J36/32—Time-controlled igniting mechanisms or alarm devices
- A47J36/321—Time-controlled igniting mechanisms or alarm devices the electronic control being performed over a network, e.g. by means of a handheld device
-
- A—HUMAN NECESSITIES
- A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
- A47J—KITCHEN EQUIPMENT; COFFEE MILLS; SPICE MILLS; APPARATUS FOR MAKING BEVERAGES
- A47J47/00—Kitchen containers, stands or the like, not provided for in other groups of this subclass; Cutting-boards, e.g. for bread
- A47J47/005—Cutting boards
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J11/00—Manipulators not otherwise provided for
- B25J11/0045—Manipulators used in the food industry
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J19/00—Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
- B25J19/02—Sensing devices
- B25J19/021—Optical sensing devices
- B25J19/023—Optical sensing devices including video camera means
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B15/00—Systems controlled by a computer
- G05B15/02—Systems controlled by a computer electric
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B3/00—Audible signalling systems; Audible personal calling systems
- G08B3/10—Audible signalling systems; Audible personal calling systems using electric transmission; using electromagnetic transmission
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Tourism & Hospitality (AREA)
- General Physics & Mathematics (AREA)
- Human Resources & Organizations (AREA)
- Theoretical Computer Science (AREA)
- Strategic Management (AREA)
- Economics (AREA)
- Entrepreneurship & Innovation (AREA)
- General Business, Economics & Management (AREA)
- Marketing (AREA)
- Food Science & Technology (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Operations Research (AREA)
- Primary Health Care (AREA)
- Quality & Reliability (AREA)
- Game Theory and Decision Science (AREA)
- Educational Administration (AREA)
- Development Economics (AREA)
- Mechanical Engineering (AREA)
- Robotics (AREA)
- General Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Life Sciences & Earth Sciences (AREA)
- Automation & Control Theory (AREA)
- Electromagnetism (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
特許文献1に記載の装置は、調理機器や調理器具情報を登録した調理機器データベースと、ユーザ所有の調理機器の個数等を登録したユーザプロファイルデータベースを参照して、レシピ情報に基づいて、ユーザが利用可能な調理方法を選択してユーザに提示する装置である。
調理対象となる食材と、調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する適正判定部を有し、
前記適正判定部は、
前記調理器具に衛生面の問題があると判定した場合、
警告出力、または調理器具の利用を停止させる制御を実行する情報処理装置にある。
調理を実行する調理ロボットと、
前記調理ロボットが実行する調理を監視する調理監視装置を有する情報処理システムであり、
前記調理監視装置は、
前記調理ロボットの調理対象食材と、調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する適正判定部を有し、
前記適正判定部は、
前記調理器具に衛生面の問題があると判定した場合、
前記調理ロボットに対して、調理器具の利用を停止させる制御情報を出力する情報処理システムにある。
情報処理装置において実行する情報処理方法であり、
適正判定部が、調理対象となる食材と、調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する適正判定処理を実行し、
前記適正判定部は、
前記調理器具に衛生面の問題があると判定した場合、
警告出力、または調理器具の利用を停止させる制御を実行する情報処理方法にある。
調理を実行する調理ロボットと、
前記調理ロボットが実行する調理を監視する調理監視装置を有する情報処理システムにおいて実行する情報処理方法であり、
前記調理監視装置が、
前記調理ロボットの調理対象食材と、調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する適正判定処理を実行し、
前記適正判定処理において、
前記調理器具に衛生面の問題があると判定した場合、
前記調理ロボットに対して、調理器具の利用を停止させる制御情報を出力する情報処理方法にある。
情報処理装置において情報処理を実行させるプログラムであり、
適正判定部に、調理対象となる食材と、調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定させる適正判定処理を実行させ、
前記適正判定処理において、
前記調理器具に衛生面の問題があると判定した場合、
警告の出力、または調理器具の利用を停止させる制御情報の出力を実行させるプログラムにある。
具体的には、例えば、調理対象となる食材と調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する適正判定部を有する。適正判定部は調理器具に衛生面の問題があると判定した場合、警告出力、または調理器具の利用を停止させる制御を実行する。適正判定部は、調理実行者であるユーザに対して、表示情報または音声情報による警告を出力する。または、調理実行者である調理ロボットに、調理器具の交換、または洗浄を実行させるための制御情報を出力する。
本構成により、調理食材と調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定して警告出力、あるいは調理器具の交換制御等を行う構成が実現される。
なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
1.人が調理を行う構成における調理監視装置の構成と処理について
2.人が調理を行う構成における調理監視装置の実行する処理のシーケンスについて
3.調理ロボットが調理を行う構成における調理監視装置の構成と処理について
4.調理ロボットが調理を行う構成における調理監視装置の実行する処理のシーケンスについて
5.調理器具の交換、消毒、洗浄を行う構成例について
6.情報処理装置のハードウェア構成例について
7.本開示の構成のまとめ
本開示の情報処理装置(調理監視装置)は、以下の2つの構成において利用可能である。
(構成例1)人が調理を行う構成
(構成例2)調理ロボットが調理を行う構成
これらの各構成例について、順次、説明する。まず、人が調理を行う構成における調理監視装置の構成と処理について図1以下を参照して説明する。
キッチンシステム30ではユーザ(人)20が調理を行う。
調理監視装置10は、ユーザ(人)20が、衛生面に問題のある調理器具を利用する可能性を検出した場合、アラート(警告)を出力して、危険な調理器具の利用を回避させ、調理器具の交換や消毒を実行させる。この処理により衛生面を担保した調理を可能とする。
ユーザ20は、これらの調理器具から自由に利用器具を選択することができる。
また、キッチンシステム30には例えばタッチパネル形式の入出力部(UI)35が設けられており、ユーザ20は、この入出力部(UI)35を介して様々な情報を調理監視装置10に入力することができる。
ユーザ20は、アラート出力に応じて、食材と調理器具の組み合わせが適正な組み合わせでないことに気付き、調理器具の交換、あるいは消毒、水洗い等の処理を行う。この処理により、例えば生肉を切った包丁で生野菜サラダ用の野菜を切るといった不衛生な調理が防止され、衛生的な調理を行うことができる。
具体的には、肉用包丁で肉を切った後、消毒や水洗い等を行わずに野菜を切ろうとした場合、調理食材と調理器具の組み合わせが適正な組み合わせでない、すなわちマッチングしていないと判定してアラートを出力する。
このマッチングデータの具体例、および利用処理の詳細については後述する。
キッチンシステム30は、データ入力部31とデータ出力部32を有する。
カメラ33は、調理台での調理の様子を撮影し、撮影画像が調理監視装置10に入力される。また、例えば温度センサ、湿度センサ、においセンサ、輝度センサ等の様々なセンサ34の検出したセンサ情報も調理監視装置10に入力される。
また、例えばタッチパネル形式の入出力部(UI)35を介したユーザ入力情報も調理監視装置10に入力される。
図3を参照して調理器具の構成例について説明する。図3には調理器具の例として包丁41とまな板42を示している。
これらの調理器具にもセンサ34が備えられている。このセンサは、通信機能を備えており、直接、調理監視装置10にセンサ検出情報を送信する。
センサは、例えば、ジャイロセンサ、加速度センサ、振動検出センサ、位置センサ、IMU(慣性計測装置:Inertial Measurement unit)等のセンサであり、調理器具の動き、軌道、位置等の情報を取得し、調理監視装置10に送信する。
図2に示すように、調理監視装置10は、入出力I/F(通信部)101、データ処理部102、記憶部103を有する。
データ処理部102は、調理器具識別部111、食材識別部112、調理工程解析部113、食材-調理器具組み合わせ適正(マッチング)判定部114、調理器具状態解析部115を有する。
また、記憶部103は、調理器具識別用辞書121、食材識別用辞書122、レシピ情報123、食材-調理器具マッチングデータ124、調理器具状態情報125を有する。
例えばレシピ情報等は、外部のレシピ情報提供サーバから取得することも可能である。
この識別処理は、記憶部103の調理器具識別用辞書121の登録データを参照して行われる。
識別された利用器具情報は、食材-調理器具組み合わせ適正(マッチング)判定部114に出力される。
この識別処理は、記憶部103の食材識別用辞書122の登録データを参照して行われる。
識別された食材情報は、食材-調理器具組み合わせ適正(マッチング)判定部114に出力される。
さらに、カメラ33やセンサ34等の入力情報を用いて、現在の調理工程を解析する。
さらに、カメラ33やセンサ34等の入力情報を用いて、現在の調理工程を解析する。
この調理工程解析情報は、食材-調理器具組み合わせ適正(マッチング)判定部114に出力される。
調理器具識別部111から、利用中、および利用予定の調理器具情報、
食材識別部112から、調理中、および調理予定の食材情報、
調理工程解析部113から、調理工程解析情報、
食材-調理器具組み合わせ適正(マッチング)判定部114は、これらの入力情報に基づいて、ユーザ20が調理する食材とその調理に利用する調理器具の組み合わせが適正か否か、すなわちマッチングしているか否かを判定する。
図4には、食材-調理器具マッチングデータ124の一部の記録データ例を示している。
図4に示すように、食材-調理器具マッチングデータ124には、以下の各データが記録される。
(a)料理名
(b)食材
(c)使用調理器具
食材-調理器具マッチングデータ124には、これらの各データの対応データが記録される。
(c1)調理器具名称、
(c2)調理器具ID、
(c3)必要な調理器具状態
これらが記録される。
さらに、(c3)必要な調理器具状態として、
(c31)推奨状態
(c32)許容状態
これらの状態情報が記録される。
この場合、食材-調理器具組み合わせ適正(マッチング)判定部114は、以下の各データを入力する。
食材識別部112から、調理予定の食材情報として「豚肉」を入力する。
調理工程解析部113から、調理工程解析情報として生姜焼き調理における「豚肉の肉切り工程」を入力する。
食材-調理器具組み合わせ適正(マッチング)判定部114は、これらの入力情報と、図4に示す食材-調理器具マッチングデータ124の登録データを照合する。
さらに、食材識別部112から入力した食材情報として「豚肉」がまな板上にあると判断する。
料理=生姜焼き
食材=豚肉
このエントリ中に記録されているか否かを判定する。
料理=生姜焼き
食材=豚肉
これらの調理工程に利用可能な調理器具であると判定する。
料理=生姜焼き
食材=豚肉
これらの調理工程に利用可能な調理器具でないと判定する。この判定がなされた場合はアラートを出力する。
すなわち、キッチンシステム30のデータ出力部32の入出力部(UI)35、スピーカー38、サイレン39の少なくともいずれかを利用してアラートを出力して、調理器具の使用を停止させる。
料理=生姜焼き
食材=豚肉
これらの調理工程に利用可能な調理器具であると判定するが、この場合、食材-調理器具組み合わせ適正(マッチング)判定部114は、さらに、これらユーザの利用予定の調理器具の状態を確認する。
包丁識別子(ID)=「H001」の包丁を生姜焼きの豚肉を切るために利用する場合の、
(c3)必要な状態として、
(c31)推奨状態=消毒済み
(c32)許容状態=洗浄済み(水洗い)
これらの各情報が登録されている。
包丁識別子(ID)=「H001」の包丁の現在の状態を確認するため、記憶部103に格納された調理器具状態情報125を参照する。
調理器具状態情報125には、図5に示すように、各調理器具について、
(a)調理器具名称、
(b)調理器具ID、
(c)現在の状態、
これらの各データが対応付けられて記録されている。
(a)調理器具名称=肉切り包丁、
(b)調理器具ID=H001、
この調理器具の(c)現在の状態は、「消毒済み」である。
包丁識別子(ID)=「H001」の包丁を生姜焼きの豚肉を切るために利用する場合の(c3)必要な状態として、
(c31)推奨状態=消毒済み
(c32)許容状態=洗浄済み(水洗い)
これらの各情報が登録されている。
一方、図5に示す調理器具状態情報125には、包丁識別子(ID)=「H001」の包丁の現在の状態として「消毒済み」が登録されている。
食材-調理器具組み合わせ適正(マッチング)判定部114は、これらの記録情報に基づいて、包丁識別子(ID)=「H001」の包丁が利用可能であると判定する。
図4に示す食材-調理器具マッチングデータ124の(c3)必要な状態と、
図5に示す調理器具状態情報125に記録された(c)現在の状態、
これらが一致していない場合は、その調理器具は適正でないと判定してアラート出力を実行する。
図4に示す食材-調理器具マッチングデータ124には、
包丁識別子(ID)=「H001」の包丁を生姜焼きの豚肉を切るために利用する場合の(c3)必要な状態として、
(c31)推奨状態=消毒済み
(c32)許容状態=洗浄済み(水洗い)
これらの各情報が登録されている。
一方、図6に示す調理器具状態情報125には、包丁識別子(ID)=「H001」の包丁の現在の状態として「使用後」が登録されている。
「使用後」とは他の食材の調理に使用した後、消毒も水洗いもなされていない状態である。
図7に示す例は、キッチンシステム30の入出力部(UI)35に表示する警告メッセージの一例である。
図7に示すように、以下のメッセージが表示される。
警告=選択した包丁は、消毒、または水洗いがなされていません。
調理器具を交換するか、または使用前に以下のいずれかの処理を行ってください。
(a)消毒(推奨)
(b)水洗い
なお、このユーザ20による包丁の消毒、または水洗いの処理は、カメラ33によって撮影され、データ処理部102の調理器具状態解析部115に入力され、調理器具状態解析部115が、記憶部103内の調理器具状態情報125の登録データを更新し、包丁の現在の状態を消毒済み、または水洗い済みに変更する。
調理器具状態解析部115は、調理器具識別部111が識別した調理器具識別情報を取得して、その調理器具に関する調理器具状態情報125に記録された現在の状態データを更新する。
次に、人が調理を行う構成における調理監視装置10の実行する処理のシーケンスについて説明する。
なお、図8に示すフローチャートに従った処理は、本開示の情報処理装置である調理監視装置10の記憶部に格納されたプログラムに従って実行することが可能であり、例えばプログラム実行機能を有するCPU等のプロセッサによるプログラム実行処理として行うことができる。
以下、図8に示すフローの各ステップの処理について説明する。
まず、ステップS101において、使用調理器具の識別処理を実行する。
ステップS101~S104の処理は、調理器具識別部111が実行する処理である。
調理器具識別部111は、キッチンシステム30のカメラ33の撮影画像やセンサ34の取得情報を利用して、キッチンシステム30のユーザ20が利用中、および利用予定の調理器具を識別する。
IMUの場合、各時刻での加速度、姿勢角加速度がわかるので、それらを積算処理することにより各時刻での空間位置姿勢の推定ができる。
(A-1)使用中の調理器具の軌跡時系列データと、使用中でない調理器具の軌跡時系列データを学習サンプルとして用いる2値判別学習処理、
(A-2)上記の軌跡時系列データから、空間座標が調理台エリア内に収まり、かつ、速度成分が一定以上かどうかをしきい値処理して利用中か否かを判別する処理、
(B)調理器具に人が把持したことを検知するセンサの検出情報を利用した検出処理。
次に、ステップS102において、調理器具識別部111がステップS101で実行した使用調理器具の識別結果である識別スコアと、予め規定されたしきい値(Th1)を比較する。
識別スコアとは、調理器具識別部111による識別結果の信頼度を示すスコアである。
調理器具識別部111は、調理器具の識別を実行する際、識別結果と、その識別結果の信頼度を示すスコアを併せて生成する。
識別スコア<Th1
上記式が成立する場合は、調理器具識別部111による識別結果の信頼度が低いと判定し、ステップS103に進む。
上記式が成立する場合は、調理器具識別部111による識別結果の信頼度が高いと判定し、ステップS103~S104を省略してステップS105に進む。
ステップS102において、
識別スコア<Th1
上記式が成立すると判定した場合は、調理器具識別部111による識別結果の信頼度が低いと判定し、ステップS103に進む。
ステップS103において、調理器具識別部111は、ユーザに対して、使用調理器具情報の入力を要求する。
ステップS104において、このユーザ入力情報を取得し、使用調理器具を特定する。
なお、ユーザに対する使用調理器具情報の入力要求やユーザによる入力は、音声データを用いてもよい。すなわちスピーカー38からの音声出力で入力要求を行い、マイク(センサ34)を介するユーザ発話を入力して音声解析を実行してもよい。
次に、ステップS105において、調理対象の食材の識別処理を実行する。
ステップS105~S108の処理は、食材識別部112が実行する処理である。
食材識別部112は、キッチンシステム30のカメラ33の撮影画像やセンサ34の取得情報を利用して、キッチンシステム30のユーザ20が調理対象とする食材を識別する。
次に、ステップS106において、食材識別部112がステップS105で実行した食材識別結果である識別スコアと、予め規定されたしきい値(Th2)を比較する。
識別スコアとは、食材識別部112による識別結果の信頼度を示すスコアである。
食材識別部112は、食材識別を実行する際、識別結果と、その識別結果の信頼度を示すスコアを併せて生成する。
識別スコア<Th2
上記式が成立する場合は、食材識別部112による識別結果の信頼度が低いと判定し、ステップS107に進む。
上記式が成立する場合は、食材識別部112による識別結果の信頼度が高いと判定し、ステップS107~S108を省略してステップS109に進む。
ステップS106において、
識別スコア<Th2
上記式が成立すると判定した場合は、食材識別部112による識別結果の信頼度が低いと判定し、ステップS107に進む。
ステップS107において、食材識別部112は、ユーザに対して、調理対象の食材情報の入力を要求する。
ステップS108において、このユーザ入力情報を取得し、調理対象の食材を特定する。
なお、ユーザに対する情報入力要求やユーザによる入力は、音声データを用いてもよい。すなわちスピーカー38からの音声出力で入力要求を行い、マイク(センサ34)を介するユーザ発話を入力して音声解析を実行してもよい。
次に、ステップS109において、カメラ33やセンサ34等の入力情報や、レシピ情報等から調理工程を確認する。
この処理は、調理工程解析部113が実行する処理である。
さらに、カメラ33やセンサ34等の入力情報を用いて、現在の調理工程を解析する。
レシピID:1234
料理名:生姜焼き
調理工程:
工程1:食材=豚肉、量=200g
調理法=包丁で切る、
食材の目標状態:食べやすいサイズ(長手サイズ5cm)、
工程2:食材=レタス、
調理法=包丁で切る、
食材の目標状態:千切り、
工程3:食材=生姜、量=1かけ(10g)
調理法=包丁で切る、
食材の目標状態:みじん切り、
・・・
例えば、現在、キッチンシステム30の調理台に置かれている調理対象食材が「豚肉」であり、その状態が、「食べやすいサイズにカット済み」、であれば、上記レシピデータとの照合で、「工程1」が終わったところであると判定する。
以下のステップS110~S113の処理は、食材-調理器具組み合わせ適正(マッチング)判定部114が実行する処理である。
まず、ステップS110において、チェック対象とする食材を識別する。
次に、食材-調理器具組み合わせ適正(マッチング)判定部114は、ステップS111において、チェック対象食材と、この食材の調理に使用する使用器具との組み合わせが適正か否か、すなわちマッチングしているか否かを判定する。具体的には衛生面で問題がないか否かを判定する。
調理器具識別部111から、利用中、および利用予定の調理器具情報、
食材識別部112から、調理中、および調理予定の食材情報、
調理工程解析部113から、調理工程解析情報、
食材-調理器具組み合わせ適正(マッチング)判定部114は、これらの入力情報に基づいて、ユーザ20が調理する食材とその調理に利用する調理器具の組み合わせが適正か否か、すなわちマッチングしているか否かを判定する。
(a)料理名
(b)食材
(c)使用調理器具
これらの対応データが記録されている。さらに、(c)使用調理器具として、
(c1)調理器具名称、
(c2)調理器具ID、
(c3)必要な調理器具状態
これらのデータが記録されている。さらに、(c3)必要な調理器具状態として、
(c31)推奨状態
(c32)許容状態
これらの状態情報が記録されている。
(a)調理器具名称、
(b)調理器具ID、
(c)現在の状態、
これらの各データが対応付けられて記録されている。
図4に示す食材-調理器具マッチングデータ124の(c3)必要な状態と、
図5に示す調理器具状態情報125に記録された(c)現在の状態、
これらが一致していない場合は、その調理器具は適正でないと判定(ステップS112=No)して、ステップS113においてアラート出力を実行し、調理器具の使用を停止させて、ステップS101に戻る。
なお、ステップS111~S113の処理は、ステップS110において、チェック対象食材が複数、検出された場合は、全ての食材について順次、または並列に実行する。
ステップS112において、食材に対する調理器具は適正であると判定(ステップS112=Yes)した場合は、ステップS114に進む。
ステップS114に進む場合は、ユーザ20の選択した調理器具による調理が実行されている状態となる。
この処理は、調理工程解析部113が実行する。
調理工程が次工程に移行すると判定した場合は、ステップS101に戻り、次工程について、同様の処理を繰り返す。
一方、ユーザの調理により、調理工程が終了したと判定した場合は処理を終了する。
すなわち、本開示の調理監視装置10は、各食材について、ユーザの使用する調理器具が適正、すなわち衛生面で問題がないかを検証し、問題がある場合はアラートを出力してユーザに交換、または消毒、水洗い等の処理を行わせる。この構成により、例えば肉や魚の菌が、生食用の野菜に付着してしまうといった危険を防止することが可能となる。
先に説明したように、本開示の情報処理装置(調理監視装置)は、以下の2つの構成において利用可能である。
(構成例1)人が調理を行う構成
(構成例2)調理ロボットが調理を行う構成
以下、調理ロボットが調理を行う構成における調理監視装置の構成と処理について図9以下を参照して説明する。
調理ロボット50はロボットアーム51を有し、人の代わりにロボットアーム51が動作して調理を行う。
調理監視装置10は、調理ロボット50が、衛生面に問題のある調理器具を利用する可能性を検出した場合、調理器具の交換、消毒、洗浄を実行させる制御情報(コマンド)を生成して調理ロボット50に出力する。
調理ロボット50は、この制御情報に従って、調理器具の交換、消毒、洗浄を実行する。
調理ロボット50はロボットアーム51を利用して、これらの調理器具から自由に利用器具を選択することができる。
また、調理ロボット50には、例えばタッチパネル形式の入出力部(UI)35が設けられており、調理ロボット50は、この入出力部(UI)35を介して様々な情報を調理監視装置10に入力することができる。
調理ロボット50は、調理監視装置10から、調理器具の交換、消毒、洗浄を実行させる制御情報(コマンド)を入力すると、調理器具の交換、あるいは消毒、水洗い等の処理を実行する。この処理により、例えば生肉を切った包丁で生野菜サラダ用の野菜を切るといった不衛生な調理が防止され、衛生的な調理を行うことができる。
具体的には、肉用包丁で肉を切った後、消毒せずに野菜を切ろうとした場合、調理食材と調理器具の組み合わせが適正な組み合わせでない、すなわちマッチングしていないと判定して、調理器具の使用を停止させて調理器具の交換、消毒、洗浄を実行させる制御情報(コマンド)を生成して調理ロボット50に出力する。さらに、必要に応じてアラートを出力する。
図10には、左側に調理ロボット50、右側に調理監視装置10を示している。
調理ロボット50は、データ入力部31とデータ出力部32、調理器具制御部53を有する。
データ出力部32は、入出力部(UI)35、スピーカー38、サイレン39を有する。
これらの構成は、先に図2を参照して説明した構成と同様であるので説明を省略する。
データ処理部102は、調理器具識別部111、食材識別部112、調理工程解析部113、食材-調理器具組み合わせ適正(マッチング)判定部114、調理器具状態解析部115、調理器具制御コマンド生成部116を有する。
また、記憶部103は、調理器具識別用辞書121、食材識別用辞書122、レシピ情報123、食材-調理器具マッチングデータ124、調理器具状態情報125が格納されている。
例えばレシピ情報等は、外部のレシピ情報提供サーバから取得することも可能である。
調理器具制御コマンド生成部116は、調理器具の交換、消毒、洗浄を実行させる制御情報(コマンド)を生成して、入出力I/F101を介して調理ロボット50に制御情報(コマンド)を出力する。
なお、必要に応じてアラートの出力も行う。アラート出力を行うか否かは、ユーザが設定可能である。
次に、調理ロボット50が調理を行う構成における調理監視装置10の実行する処理のシーケンスについて説明する。
なお、図11に示すフローチャートに従った処理は、本開示の情報処理装置である調理監視装置10の記憶部に格納されたプログラムに従って実行することが可能であり、例えばプログラム実行機能を有するCPU等のプロセッサによるプログラム実行処理として行うことができる。
異なる点は、図8に示すステップS113の「アラート出力」を、ステップS201の「調理器具制御コマンドを生成して出力」に変更した点である。
他のステップの処理は、先に説明した図8に示すフローのステップの処理と同様であるので、説明を省略し、相違点であるステップS201の処理を中心として説明する。
ステップS111以下の処理から説明する。
次のステップS111~S112の処理は、食材-調理器具組み合わせ適正(マッチング)判定部114の実行する処理である。
食材-調理器具組み合わせ適正(マッチング)判定部114は、ステップS111において、チェック対象食材と、この食材の調理に使用する使用器具との組み合わせが適正か否か、すなわちマッチングしているか否かを判定する。具体的には衛生面で問題がないか否かを判定する。
調理器具識別部111から、利用中、および利用予定の調理器具情報、
食材識別部112から、調理中、および調理予定の食材情報、
調理工程解析部113から、調理工程解析情報、
食材-調理器具組み合わせ適正(マッチング)判定部114は、これらの入力情報に基づいて、調理ロボット50が調理する食材とその調理に利用する調理器具の組み合わせが適正か否か、すなわちマッチングしているか否かを判定する。
(a)料理名
(b)食材
(c)使用調理器具
これらの対応データが記録されている。さらに、(c)使用調理器具として、
(c1)調理器具名称、
(c2)調理器具ID、
(c3)必要な調理器具状態
これらのデータが記録されている。さらに、(c3)必要な調理器具状態として、
(c31)推奨状態
(c32)許容状態
これらの状態情報が記録されている。
(a)調理器具名称、
(b)調理器具ID、
(c)現在の状態、
これらの各データが対応付けられて記録されている。
図4に示す食材-調理器具マッチングデータ124の(c3)必要な状態と、
図5に示す調理器具状態情報125に記録された(c)現在の状態、
これらが一致していない場合は、その調理器具は適正でないと判定(ステップS112=No)する。
この判定処理がなされると、ステップS201に進む。
一方、これらが一致している場合は、その調理器具は適正であると判定(ステップS112=Yes)して、ステップS114に進む。
なお、ステップS111~S112の処理は、ステップS110において、チェック対象食材が複数、検出された場合は、全ての食材について順次、または並列に実行する。
ステップS201は、ステップS112において、食材-調理器具組み合わせ適正(マッチング)判定部114が、調理ロボット50の調理対象食材と調理器具との組み合わせが適正でない、すなわちすなわちマッチングしておらず衛生面で問題があるという結論を出した場合に実行する処理である。
なお、必要に応じてアラートの出力も行う。アラート出力を行うか否かは、ユーザが設定可能である。
ステップS112において、食材に対する調理器具は適正であると判定(ステップS112=Yes)した場合は、ステップS114に進む。
ステップS114に進む場合は、調理ロボット50の選択した調理器具による調理が実行されている状態となる。
この処理は、調理工程解析部113が実行する。
調理工程が次工程に移行すると判定した場合は、ステップS101に戻り、次工程について、同様の処理を繰り返す。
一方、調理ロボット50の調理により、調理工程が終了したと判定した場合は処理を終了する。
すなわち、本開示の調理監視装置10は、各食材について、調理ロボット50の使用する調理器具が適正、すなわち衛生面で問題がないかを検証し、問題がある場合はアラートを出力して調理ロボット50に交換、または消毒、水洗い等の処理を行わせる。この構成により、例えば肉や魚の菌が、生食用の野菜に付着してしまうといった危険を防止することが可能となる。
次に、調理器具の交換、消毒、洗浄を行う構成例について説明する。
図9以下を参照して説明した調理ロボット50が調理を行う構成では、調理ロボット50自身がロボットアーム51を動作させて調理器具の交換、消毒、洗浄を行うことが必要となる。
この処理を実現するための調理器具の構成例について以下、説明する。
(1)調理器具自動交換構成例1は、いわゆるサバイバルナイフ的な機構を持つ調理器具である。使用しない器具は折りたたまれて器具本体部に格納され、使用する器具のみが作業可能な状態として露出する機構である。
(2)調理器具自動交換構成例2は、アタッチメント機構を持つ調理器具である。使用しない器具をある方向に力を加えて引っ張ることで、器具が本体部から外すことができる。
使用する器具は逆方向に力を加えることで本体部に装着することができる。
これらは着脱にマグネットや吸着、ねじなどいろいろな固定機構による実現が可能である。
図13は、調理器具に消毒液(または洗浄液、熱湯等)噴霧部201を設けた構成である。これは調理器具本体に液体噴霧機構を設けたものであり、例えば車のフロントウィンドウのウィンドウウォッシャー噴霧機構のように、調理器具の食材に接触する部分全体に消毒液または洗浄液を噴霧することを可能としたものである。
なお、蛇口から消毒液等を流出させて、調理器具に流出液体をかける構成としてもよい。
図16は、調理器具のの食材当接部分にバーナー204から出力する炎を当てる構成である。この処理により調理器具の食材当接部分を高温にして殺菌する。
次に、図18を参照して、本開示の調理監視装置10を構成する情報処理装置のハードウェア構成例について説明する。
図18を参照して説明するハードウェアは、先に図6を参照して説明した調理監視装置10を構成する情報処理装置のハードウェア構成の一例である。
入力部306、出力部307は、キッチンシステムや調理ロボットに対するデータ、コマンドの入出力にも利用される。
CPU301は、入力部306から入力される指令に対応して各種の処理を実行し、処理結果を例えば出力部307に出力する。
以上、特定の実施例を参照しながら、本開示の実施例について詳解してきた。しかしながら、本開示の要旨を逸脱しない範囲で当業者が実施例の修正や代用を成し得ることは自明である。すなわち、例示という形態で本発明を開示してきたのであり、限定的に解釈されるべきではない。本開示の要旨を判断するためには、特許請求の範囲の欄を参酌すべきである。
(1) 調理対象となる食材と、調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する適正判定部を有し、
前記適正判定部は、
前記調理器具に衛生面の問題があると判定した場合、
警告出力、または調理器具の利用を停止させる制御を実行する情報処理装置。
調理実行者であるユーザに対して、表示情報または音声情報による警告を出力する(1)に記載の情報処理装置。
調理実行者である調理ロボットに対して、調理器具の交換、または洗浄を実行させるための制御情報を出力する(1)に記載の情報処理装置。
調理対象となる食材を識別する食材識別部を有し、
前記適正判定部は、
前記食材識別部の識別した食材と、該食材の調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する(1)~(3)いずれかに記載の情報処理装置。
調理器具を識別する調理器具識別部を有し、
前記適正判定部は、
前記調理器具識別部の識別した調理器具と、該調理器具を用いた調理対象となる食材との対応を検証し、調理器具に衛生面の問題がないかを判定する(1)~(4)いずれかに記載の情報処理装置。
調理工程を解析する調理工程解析部を有し、
前記適正判定部は、
前記調理工程解析部の解析した調理工程単位で、調理対象となる食材と、調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する(1)~(5)いずれかに記載の情報処理装置。
調理場に備えられたカメラによる撮影画像、またはセンサによる検出情報の少なくともいずれかを解析して、調理対象となる食材と、調理に利用する調理器具を識別する(1)~(6)いずれかに記載の情報処理装置。
調理器具に装着されたセンサからの出力に基づいて、調理に利用されている調理器具を識別する(1)~(7)いずれかに記載の情報処理装置。
調理器具に装着された器具識別データまたはカラーマーカーを含む撮影画像に基づいて、調理に利用されている調理器具を識別する(1)~(8)いずれかに記載の情報処理装置。
食材と調理器具との適正な対応関係データを格納した食材-調理器具マッチングデータを格納した記憶部を有し、
前記適正判定部は、
前記食材-調理器具マッチングデータを参照して、食材と調理器具との対応を検証し、調理器具に衛生面の問題があるか否かを判定する(1)~(9)いずれかに記載の情報処理装置。
現在の調理器具の状態を記録した調理器具状態情報を格納した記憶部を有し、
前記適正判定部は、
前記調理器具状態情報を参照して、調理器具に衛生面の問題があるか否かを判定する(1)~(10)いずれかに記載の情報処理装置。
前記調理ロボットが実行する調理を監視する調理監視装置を有する情報処理システムであり、
前記調理監視装置は、
前記調理ロボットの調理対象食材と、調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する適正判定部を有し、
前記適正判定部は、
前記調理器具に衛生面の問題があると判定した場合、
前記調理ロボットに対して、調理器具の利用を停止させる制御情報を出力する情報処理システム。
前記調理ロボットに対して、調理器具の交換、または洗浄を実行させるための制御情報を出力する(12)に記載の情報処理システム。
調理対象となる食材を識別する食材識別部と、
調理器具を識別する調理器具識別部を有し、
前記適正判定部は、
前記食材識別部の識別した食材と、前記調理器具識別部の識別した調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する(12)または(13)に記載の情報処理システム。
適正判定部が、調理対象となる食材と、調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する適正判定処理を実行し、
前記適正判定部は、
前記調理器具に衛生面の問題があると判定した場合、
警告出力、または調理器具の利用を停止させる制御を実行する情報処理方法。
前記調理ロボットが実行する調理を監視する調理監視装置を有する情報処理システムにおいて実行する情報処理方法であり、
前記調理監視装置が、
前記調理ロボットの調理対象食材と、調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する適正判定処理を実行し、
前記適正判定処理において、
前記調理器具に衛生面の問題があると判定した場合、
前記調理ロボットに対して、調理器具の利用を停止させる制御情報を出力する情報処理方法。
適正判定部に、調理対象となる食材と、調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定させる適正判定処理を実行させ、
前記適正判定処理において、
前記調理器具に衛生面の問題があると判定した場合、
警告の出力、または調理器具の利用を停止させる制御情報の出力を実行させるプログラム。
具体的には、例えば、調理対象となる食材と調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する適正判定部を有する。適正判定部は調理器具に衛生面の問題があると判定した場合、警告出力、または調理器具の利用を停止させる制御を実行する。適正判定部は、調理実行者であるユーザに対して、表示情報または音声情報による警告を出力する。または、調理実行者である調理ロボットに、調理器具の交換、または洗浄を実行させるための制御情報を出力する。
本構成により、調理食材と調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定して警告出力、あるいは調理器具の交換制御等を行う構成が実現される。
20 ユーザ
30 キッチンシステム
31 データ入力部
32 データ出力部
33 カメラ
34 センサ
35 入出力部(UI)
38 スピーカー
39 サイレン
101 入出力I/F(通信部)
102 データ処理部
103 記憶部
111 調理器具識別部
112 食材識別部
113 調理工程解析部
114 食材-調理器具組み合わせ適正(マッチング)判定部
115 調理器具状態解析部
116 調理器具制御コマンド生成部
121 調理器具識別用辞書
122 食材識別用辞書
123 レシピ情報
124 食材-調理器具マッチングデータ
125 調理器具状態情報
201 消毒液噴霧部
202 消毒液貯留部
203 ヒーター
204 バーナー
205 消毒液含浸帯
301 CPU
302 ROM
303 RAM
304 バス
305 入出力インタフェース
306 入力部
307 出力部
308 記憶部
309 通信部
310 ドライブ
311 リムーバブルメディア
Claims (16)
- 調理対象となる食材と、調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する適正判定部と、
食材と調理器具との適正な対応関係データを格納した食材-調理器具マッチングデータを格納した記憶部を有し、
前記適正判定部は、
前記食材-調理器具マッチングデータを参照して、食材と調理器具との対応を検証し、調理器具に衛生面の問題があるか否かを判定し、
前記調理器具に衛生面の問題があると判定した場合、
警告出力、または調理器具の利用を停止させる制御を実行する情報処理装置。 - 前記適正判定部は、
調理実行者であるユーザに対して、表示情報または音声情報による警告を出力する請求項1に記載の情報処理装置。 - 前記適正判定部は、
調理実行者である調理ロボットに対して、調理器具の交換、または洗浄を実行させるための制御情報を出力する請求項1に記載の情報処理装置。 - 前記情報処理装置は、
調理対象となる食材を識別する食材識別部を有し、
前記適正判定部は、
前記食材識別部の識別した食材と、該食材の調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する請求項1に記載の情報処理装置。 - 前記情報処理装置は、
調理器具を識別する調理器具識別部を有し、
前記適正判定部は、
前記調理器具識別部の識別した調理器具と、該調理器具を用いた調理対象となる食材との対応を検証し、調理器具に衛生面の問題がないかを判定する請求項1に記載の情報処理装置。 - 前記情報処理装置は、
調理工程を解析する調理工程解析部を有し、
前記適正判定部は、
前記調理工程解析部の解析した調理工程単位で、調理対象となる食材と、調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する請求項1に記載の情報処理装置。 - 前記情報処理装置は、
調理場に備えられたカメラによる撮影画像、またはセンサによる検出情報の少なくともいずれかを解析して、調理対象となる食材と、調理に利用する調理器具を識別する請求項1に記載の情報処理装置。 - 前記情報処理装置は、
調理器具に装着されたセンサからの出力に基づいて、調理に利用されている調理器具を識別する請求項1に記載の情報処理装置。 - 前記情報処理装置は、
調理器具に装着された器具識別データまたはカラーマーカーを含む撮影画像に基づいて、調理に利用されている調理器具を識別する請求項1に記載の情報処理装置。 - 前記情報処理装置は、
現在の調理器具の状態を記録した調理器具状態情報を格納した記憶部を有し、
前記適正判定部は、
前記調理器具状態情報を参照して、調理器具に衛生面の問題があるか否かを判定する請求項1に記載の情報処理装置。 - 調理を実行する調理ロボットと、
前記調理ロボットが実行する調理を監視する調理監視装置を有する情報処理システムであり、
前記調理監視装置は、
前記調理ロボットの調理対象食材と、調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する適正判定部と、
食材と調理器具との適正な対応関係データを格納した食材-調理器具マッチングデータを格納した記憶部を有し、
前記適正判定部は、
前記食材-調理器具マッチングデータを参照して、食材と調理器具との対応を検証し、調理器具に衛生面の問題があるか否かを判定し、
前記調理器具に衛生面の問題があると判定した場合、
前記調理ロボットに対して、調理器具の利用を停止させる制御情報を出力する情報処理システム。 - 前記調理監視装置の前記適正判定部は、
前記調理ロボットに対して、調理器具の交換、または洗浄を実行させるための制御情報を出力する請求項11に記載の情報処理システム。 - 前記調理監視装置は、
調理対象となる食材を識別する食材識別部と、
調理器具を識別する調理器具識別部を有し、
前記適正判定部は、
前記食材識別部の識別した食材と、前記調理器具識別部の識別した調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する請求項11に記載の情報処理システム。 - 情報処理装置において実行する情報処理方法であり、
前記情報処理装置は、
調理対象となる食材と、調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する適正判定部と、
食材と調理器具との適正な対応関係データを格納した食材-調理器具マッチングデータを格納した記憶部を有し、
前記適正判定部は、
前記食材-調理器具マッチングデータを参照して、食材と調理器具との対応を検証し、調理器具に衛生面の問題があるか否かを判定し、
前記調理器具に衛生面の問題があると判定した場合、
警告出力、または調理器具の利用を停止させる制御を実行する情報処理方法。 - 調理を実行する調理ロボットと、
前記調理ロボットが実行する調理を監視する調理監視装置を有する情報処理システムにおいて実行する情報処理方法であり、
前記調理監視装置は、
前記調理ロボットの調理対象食材と、調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する適正判定部と、
食材と調理器具との適正な対応関係データを格納した食材-調理器具マッチングデータを格納した記憶部を有し、
前記適正判定部は、
前記食材-調理器具マッチングデータを参照して、食材と調理器具との対応を検証し、調理器具に衛生面の問題があるか否かを判定し、
前記調理器具に衛生面の問題があると判定した場合、
前記調理ロボットに対して、調理器具の利用を停止させる制御情報を出力する情報処理方法。 - 情報処理装置において情報処理を実行させるプログラムであり、
前記情報処理装置は、
調理対象となる食材と、調理に利用する調理器具との対応を検証し、調理器具に衛生面の問題がないかを判定する適正判定部と、
食材と調理器具との適正な対応関係データを格納した食材-調理器具マッチングデータを格納した記憶部を有し、
前記プログラムは、前記適正判定部に、
前記食材-調理器具マッチングデータを参照して、食材と調理器具との対応を検証し、調理器具に衛生面の問題があるか否かを判定する処理を実行させ、
前記調理器具に衛生面の問題があると判定した場合、
警告の出力、または調理器具の利用を停止させる制御情報の出力を実行させるプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018193118 | 2018-10-12 | ||
JP2018193118 | 2018-10-12 | ||
PCT/JP2019/037880 WO2020075516A1 (ja) | 2018-10-12 | 2019-09-26 | 情報処理装置、情報処理システム、および情報処理方法、並びにプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2020075516A1 JPWO2020075516A1 (ja) | 2021-09-02 |
JP7409314B2 true JP7409314B2 (ja) | 2024-01-09 |
Family
ID=70164989
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020550361A Active JP7409314B2 (ja) | 2018-10-12 | 2019-09-26 | 情報処理装置、情報処理システム、および情報処理方法、並びにプログラム |
Country Status (6)
Country | Link |
---|---|
US (1) | US20210393083A1 (ja) |
EP (1) | EP3866081A4 (ja) |
JP (1) | JP7409314B2 (ja) |
KR (1) | KR20210075978A (ja) |
CN (1) | CN112771560A (ja) |
WO (1) | WO2020075516A1 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113100637B (zh) * | 2021-04-30 | 2022-09-13 | 广州富港生活智能科技有限公司 | 智能烹饪设备的清洁控制方法及装置、智能橱柜 |
CN113647797B (zh) * | 2021-09-09 | 2023-06-09 | 广东美的厨房电器制造有限公司 | 烹饪设备及其控制方法、装置、存储介质 |
CN113876178B (zh) * | 2021-09-10 | 2022-07-22 | 深圳市三利达电器科技有限公司 | 基于厨师机的智能加工控制方法及其系统 |
EP4241631A1 (de) * | 2022-03-07 | 2023-09-13 | Vorwerk & Co. Interholding GmbH | Küchenmaschinensystem, verfahren zur steuerung eines küchenmaschinensystems und steuerung für ein küchenmaschinensystem |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014018552A (ja) | 2012-07-23 | 2014-02-03 | Sharp Corp | 加熱調理器 |
WO2014132521A1 (ja) | 2013-02-28 | 2014-09-04 | ソニー株式会社 | 情報処理装置および記憶媒体 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100445948C (zh) * | 2001-09-29 | 2008-12-24 | 张晓林 | 自动烹调方法及系统 |
JP2009054042A (ja) | 2007-08-28 | 2009-03-12 | Toshiba Corp | 調理方法抽出装置 |
CN102609814A (zh) * | 2012-02-09 | 2012-07-25 | 盛骏 | 一种用于肉类跟踪装置及跟踪监管方法 |
CN103230212B (zh) * | 2012-03-02 | 2016-09-07 | 福州高奇智芯电源科技有限公司 | 烹饪电器系统、烹饪电器及烹饪电器用外部扩展装置 |
CN103784044A (zh) * | 2013-06-09 | 2014-05-14 | 张家港市南宝涂料装饰有限公司 | 一种厨房用具 |
WO2015125017A2 (en) * | 2014-02-20 | 2015-08-27 | Mark Oleynik | Methods and systems for food preparation in a robotic cooking kitchen |
US20150302569A1 (en) * | 2014-04-22 | 2015-10-22 | General Electric Company | Sensing system for a cooktop appliance with airflow protected sensor |
US10518409B2 (en) * | 2014-09-02 | 2019-12-31 | Mark Oleynik | Robotic manipulation methods and systems for executing a domain-specific application in an instrumented environment with electronic minimanipulation libraries |
CN204501750U (zh) * | 2015-02-04 | 2015-07-29 | 安庆三维电器有限公司 | 一种特种刀具消毒柜 |
CN105128047B (zh) * | 2015-08-21 | 2016-11-30 | 福建省速卖通电子商务有限公司 | 半自动切菜机 |
CN108778634B (zh) * | 2015-12-16 | 2022-07-12 | Mbl有限公司 | 包括机器人、存放装置及其容器的机器人厨房 |
JP2017159279A (ja) * | 2016-03-11 | 2017-09-14 | 大阪瓦斯株式会社 | 洗浄システム |
CN205459992U (zh) * | 2016-03-31 | 2016-08-17 | 王文礼 | 一种带显示功能的砧板干燥消毒器 |
CN105930659A (zh) * | 2016-04-22 | 2016-09-07 | 美的集团股份有限公司 | 一种烹饪方法和烹饪工具的推荐方法和系统 |
CN106308723A (zh) * | 2016-08-25 | 2017-01-11 | 上海卓易科技股份有限公司 | 一种菜板清洗方法、系统及装置 |
CN106600479A (zh) * | 2017-01-23 | 2017-04-26 | 南京小牛智能科技有限公司 | 一种菜品与餐具的对应方法、装置和系统 |
CN107592509A (zh) * | 2017-10-23 | 2018-01-16 | 合肥盈川信息技术有限公司 | 一种食品可视化监管系统 |
-
2019
- 2019-09-26 KR KR1020217008204A patent/KR20210075978A/ko not_active Application Discontinuation
- 2019-09-26 JP JP2020550361A patent/JP7409314B2/ja active Active
- 2019-09-26 US US17/282,914 patent/US20210393083A1/en active Pending
- 2019-09-26 CN CN201980063089.7A patent/CN112771560A/zh active Pending
- 2019-09-26 EP EP19871636.7A patent/EP3866081A4/en active Pending
- 2019-09-26 WO PCT/JP2019/037880 patent/WO2020075516A1/ja unknown
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014018552A (ja) | 2012-07-23 | 2014-02-03 | Sharp Corp | 加熱調理器 |
WO2014132521A1 (ja) | 2013-02-28 | 2014-09-04 | ソニー株式会社 | 情報処理装置および記憶媒体 |
Non-Patent Citations (4)
Title |
---|
丸山 貴之,大量調理施設における食中毒予防のための行動認識,第32回日本ロボット学会学術講演会,一般社団法人日本ロボット学会,2014年09月04日 |
丸山 貴之,大量調理施設のためのアルコール消毒支援システムの提案,ロボティクス・メカトロニクス 講演会2013 講演論文集,一般社団法人日本機械学会,2013年05月21日 |
元田 光一,姿を変える調理空間 「手間をかけずに食を楽しむ」,[online],2017年01月30日,[2019年12月9日検索], インターネット<URL:https://project.nikkeibp.co.jp/mirakoto/atcl/design/h_vol9/> |
滝 聖子,作業分析によるロボット料理レシピの作成手法,日本経営工学会論文誌,日本,社団法人日本経営工学会,2005年10月15日,Vol.56 No.4,P.303-311 |
Also Published As
Publication number | Publication date |
---|---|
EP3866081A1 (en) | 2021-08-18 |
JPWO2020075516A1 (ja) | 2021-09-02 |
KR20210075978A (ko) | 2021-06-23 |
CN112771560A (zh) | 2021-05-07 |
US20210393083A1 (en) | 2021-12-23 |
EP3866081A4 (en) | 2021-11-24 |
WO2020075516A1 (ja) | 2020-04-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7409314B2 (ja) | 情報処理装置、情報処理システム、および情報処理方法、並びにプログラム | |
CN112068526B (zh) | 用于在机器人烹饪厨房中制备食物的方法和系统 | |
KR102286200B1 (ko) | 전자 미소 조작 라이브러리들을 갖춘 기구화된 환경에서 도메인 고유의 애플리케이션을 실행하기 위한 로봇 조작 방법 및 시스템 | |
US11069045B2 (en) | Food preparation assistance using image processing | |
US20220160918A1 (en) | Cleaning system of a medical imaging facility | |
AU2016370628A1 (en) | Robotic kitchen including a robot, a storage arrangement and containers therefor | |
US11308788B2 (en) | Hygiene management for reducing illnesses and infections caused by ineffective hygiene practices | |
WO2020075526A1 (ja) | 調理システム、および調理システムの制御方法、並びにプログラム | |
KR102245579B1 (ko) | 주방용품 살균 건조기 | |
JP2019219766A (ja) | 分析装置、分析システム、及び分析プログラム | |
EP3882830A1 (en) | System and method for the quality control of cooked dishes | |
CN113093572B (zh) | 厨房消杀控制方法、设备及可读存储介质 | |
JP6989683B2 (ja) | 音声制御調理器具プラットフォーム | |
US20180125326A1 (en) | Domestic Appliance Having A Touch-Sensitive Operator Control Device, And Method For Operating The Same | |
US20220065460A1 (en) | Domestic appliance having a proximity detector | |
US20220048196A1 (en) | Information processing device, scheduling method, and computer program | |
JP2010287166A (ja) | 情報処理装置および方法、並びにプログラム | |
CN107184079A (zh) | 智能烹饪系统及智能烹饪方法 | |
WO2021200308A1 (ja) | 制御装置、制御方法 | |
Worsfold | Food safety behaviour in butchers’ shops | |
CN110991417A (zh) | 厨具处理方法、装置和橱柜 | |
WO2021200306A1 (ja) | 情報処理装置、情報処理端末、情報処理方法 | |
WO2024043184A1 (ja) | 情報処理方法、情報処理装置、プログラム | |
CN111986452B (zh) | 一种提醒方法、系统、设备和存储介质 | |
CN113098740A (zh) | 电子设备的控制方法、智能控制系统及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220805 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231024 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231101 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231121 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231204 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7409314 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |