JP2006119924A - 料理レシピ情報処理システム - Google Patents

Abstract

【課題】 使用する調理器具の収納場所を簡単に把握でき、最適な調理器具を容易に選択することができる料理レシピ情報処理システムを提供する。
【解決手段】 調理器具登録時には、撮影装置１で撮影された調理器具の画像に基づいて画像処理部２で抽出された調理器具分類情報、調理器具画像情報が、調理器具情報入力部４から入力された調理器具収納情報とともに調理器具情報記憶部７に保存される。料理レシピ検索時には、料理条件入力部５から料理条件を入力すると、情報統合処理部６は料理レシピ情報記憶部８から所望の料理のレシピ情報を検索し、レシピ情報に含まれる調理器具の情報に基づいて、調理器具情報記憶部７から調理器具画像情報、調理器具収納情報を検索して情報表示部９へ出力し、情報表示部９では、料理レシピとともに実際に調理に使用する調理器具の画像、収納場所が表示される。
【選択図】図１

Description

本発明は、さまざまな料理レシピ情報を提供する料理レシピ情報処理システムに関するものである。

従来、所望の料理およびユーザが実際に所持している調理器具の情報を入力することで、実際に使用する調理器具に対応する調理条件が自動的に表示され、調理者はそれらの情報を見ながら作業することで効率よく調理することができる料理レシピ情報処理システムがある。（例えば、特許文献１，２参照）。
特開２０００−２７９１０３号公報（段落番号［００２４］〜［００２７］、図１，図５） 特開２００２−３４２３３２号公報（段落番号［０００８］、［００２０］、図１）

しかしながら、上記従来の料理レシピ情報処理システムでは、料理レシピを閲覧し、使用すべき調理器具がわかっても、その調理器具がユーザのキッチンのどこに収納されているかがわからず、調理器具を探す手間がかかっていた。

本発明は、上記事由に鑑みてなされたものであり、その目的は、使用する調理器具の収納場所を簡単に把握でき、最適な調理器具を容易に選択することができる料理レシピ情報処理システムを提供することにある。

請求項１の発明は、キッチンに配置された撮影装置と、撮影装置によって撮影された対象物の画像処理を行うもので、少なくとも撮影装置で撮影された調理器具の画像処理結果から調理器具の種類を表す調理器具分類情報を抽出する画像処理部と、調理器具分類情報、および調理器具の収納位置を表す調理器具収納情報を保存する調理器具情報記憶部と、料理のレシピを表す料理レシピ情報を保存する料理レシピ情報記憶部と、所定料理のレシピ情報を料理レシピ情報記憶部から抽出するための料理条件を入力する料理条件入力部と、入力された料理条件に基づいて料理レシピ情報記憶部から料理レシピ情報を抽出し、該抽出した料理レシピ情報に基づいて調理器具情報記憶部から調理器具収納情報を抽出して、料理レシピ情報と調理器具収納情報とを合成して出力する情報統合処理部とを備えることを特徴とする。

この発明によれば、ユーザは料理レシピを閲覧した際に、その調理に使用する調理器具を実際に所持している調理器具の中から簡単に選択することができ、同時に選択された調理器具のキッチン内での収納位置もすぐに把握することができる。すなわち、最適な調理器具を容易に選択することが可能となる。また、新しい調理器具を購入した場合も、調理器具の追加登録を簡単に行うことができる。

請求項２の発明は、請求項１において、前記撮影装置によって撮影された料理の情報を入力する料理情報入力部を備え、前記画像処理部は、撮影装置で撮影された料理の画像処理結果から料理の種類を表す料理分類情報を抽出し、前記料理レシピ情報記憶部は、料理分類情報、料理の画像情報、料理情報を合成して料理レシピ情報として保存することを特徴とする。

この発明によれば、ユーザ自身が創作した新たな料理を料理レシピ情報として簡単な操作で保存することができ、料理レシピ情報を逐次更新することが可能となる。

請求項３の発明は、請求項２において、前記調理器具情報記憶部は、前記撮影装置で撮影された調理器具の画像情報を保存し、前記画像処理部は、料理の画像情報と調理器具の画像情報とに基づいて料理本体の画像情報を抽出して、料理本体の画像と他の調理器具の画像とを合成することを特徴とする。

この発明によれば、様々な調理器具の画像と料理本体の画像とを合成したシミュレーション画像を見ることができ、皿等に実際に盛り付けることなく様々な盛り付けシミュレーションを行うことが可能となる。

請求項４の発明は、請求項３において、前記画像処理装置は、料理本体および調理器具の各重心位置を検出し、各重心位置に基づいて料理本体の画像と調理器具の画像とを合成することを特徴とする。

この発明によれば、様々な調理器具の画像と料理本体の画像とを合成したシミュレーション画像を作成するときに、精度よく合成することができ、正確な盛り付けシミュレーションを行うことが可能となる。

以上説明したように、本発明では、入力された料理条件に基づいて料理レシピ情報とユーザが実際に使用する調理器具の収納位置とを出力するので、ユーザは料理レシピを閲覧した際に、その調理に使用する調理器具を実際に所持している調理器具の中から簡単に選択することができ、同時に選択された調理器具のキッチン内での収納位置もすぐに把握することができて、最適な調理器具を容易に選択することが可能となる。

以下、本発明の実施の形態を図面に基づいて説明する。

（実施形態１）
図１は本実施形態の料理レシピ情報処理システムの構成を示し、撮影装置１と、画像処理部２と、調理器具情報処理部３と、調理器具情報入力部４と、料理条件入力部５と、情報統合処理部６と、調理器具情報記憶部７と、料理レシピ情報記憶部８と、情報表示部９とから構成される。

ユーザは情報表示部９に表示されるＧＵＩ（グラフィカル ユーザ インターフェース）にしたがって、調理器具登録や料理レシピ検索の操作を行う。まず、図２（ａ）〜（ｆ）を用いて調理器具登録時の操作について説明する。最初にメインメニュー画面（図２（ａ））で「調理器具登録」３０ｂを選択すると、調理器具登録トップ画面（図２（ｂ））に遷移する。そして、ユーザが所持する調理器具をキッチンの所定の位置にセットした後、「ＯＫ」３１を選択すると調理器具情報抽出処理を開始する。

調理器具情報抽出処理は、撮影装置１で調理器具を撮影して行われる。撮影装置１はキッチンに配置されており、図３に示すように、キッチンの所定の位置に置かれたお椀、皿等の調理器具２０を真上から撮影する撮影部１００、および真横から撮影する撮影部１０１を備えて、真上から撮影した画像Ａ１、真横から撮影した画像Ａ２を画像情報として画像処理部２に出力する。

そして図４に示すように、画像処理部２は、キッチンの所定の位置に何も置かずに真上と真横から撮影された基本画像Ｂ１，Ｂ２の基本画像情報を予め登録しており、この基本画像Ｂ１，Ｂ２の画像情報と今回撮影された画像Ａ１，Ａ２の画像情報との差分を算出して、画像Ａ１，Ａ２の画像情報中の調理器具２０のエッジ情報Ｃ１，Ｃ２を抽出し、さらに画像Ａ１，Ａ２内の調理器具２０の面積を算出する。そして、画像処理部２では、抽出したエッジ情報や算出された面積情報を、予め登録されている様々な調理器具のエッジおよび面積からなる形状情報Ｄ１，Ｄ２と比較し、真上と真横からの画像情報の各マッチング結果を統合することで、調理器具２０の種類（図４では丼）を推測して抽出することができる。

調理器具２０の種類が抽出されると、調理器具登録情報確認画面（図２（ｃ））に遷移し、画像処理部２が抽出した調理器具２０の種類が正しければ「ＯＫ」３２ａを選択し、間違っていれば「その他」３２ｂを選択する。「その他」３２ｂを選択すると、調理器具種類選択画面（図２（ｄ））に遷移し、表示されている複数の調理器具種類から正しい種類（例えば「お椀」３３）を選択する。このようにして抽出された調理器具２０の種類は調理器具分類情報として、調理器具の画像情報とともに調理器具情報処理部３へ出力される。

調理器具２０の種類が確定した後、調理器具名称・用途入力画面（図２（ｅ））に遷移し、調理器具情報入力部４を操作して調理器具の名称３４ａや、調理器具の用途３４ｂや、調理器具の収納場所を画面上に入力し、「ＯＫ」３４ｃを選択することで、調理器具名称情報、調理器具用途情報、調理器具収納情報が調理器具情報処理部３へ出力される。

そして、調理器具２０を調理器具収納情報と同一の収納場所に収納した後、調理器具登録画面（図２（ｆ））で「ＯＫ」３５を選択すると、調理器具情報処理部３は、調理器具分類情報、調理器具画像情報、調理器具名称情報、調理器具用途情報、調理器具収納情報を調理器具情報記憶部７へ出力し、各情報が調理器具情報記憶部７に保存されて、調理器具登録が完了する。

次に、料理レシピ検索時の操作について説明する。まず、メインメニュー画面（図２（ａ））で「料理レシピ検索」３０ａを選択すると、調理レシピ検索情報入力画面（図５）に遷移する。そして、料理レシピ情報記憶部８は各料理のレシピを表す料理レシピ情報を保存しており、料理条件入力部５を操作して料理名４０、材料名４１、調理方法４２、量４３、シチュエーション４４等の料理条件を画面上に入力し、「検索」４５を選択することで、情報統合処理部６は料理レシピ情報記憶部８から料理条件に合った所望の料理のレシピ情報を検索する。

そして、料理レシピ情報には各料理毎に調理に使用する調理器具の情報が含まれており、情報統合処理部６は、検索した料理レシピ情報に含まれる調理器具の情報に基づいて、調理器具情報記憶部７から調理器具名称情報、調理器具画像情報、調理器具収納情報を検索する。検索された料理レシピ情報、調理器具名称情報、調理器具画像情報、調理器具収納情報は、情報統合処理部６で合成されて情報表示部９へ出力され、情報表示部９では、図６に示すような画面で料理レシピ５０とともに調理に使用する調理器具の名称５１、画像５２、実際のキッチンを模したグラフィック上に収納場所５３が表示される。ここで、下線が引かれた調理器具の名称５１（鍋（６００ｃｃ）、包丁、ガラスの器（小、お客様用））を各々クリックすると、その調理器具が収納されている収納場所５３内の箇所が赤丸５４で囲まれるなどして表示され、且つ画像５２に表示される。

このように、ユーザは料理レシピを閲覧した際に、その調理に使用する調理器具を実際に所持している調理器具の中から簡単に選択することができ、同時に選択された調理器具のキッチン内での収納位置もすぐに把握することができる。すなわち、最適な調理器具を容易に選択することができ、さらには調理時間の短縮も可能になる。

また、新しい調理器具を購入した場合も、撮影装置１を用いて撮影した調理器具の画像から抽出した情報、および調理器具情報入力部４から入力された情報を、調理器具情報記憶部７に保存することで、調理器具の追加登録を簡単に行うことができる。

（実施形態２）
図７は本実施形態の料理レシピ情報処理システムの構成を示し、実施形態１の構成に料理情報入力部１０と、料理情報処理部１１とを設けたもので、実施形態１と同様の構成には同一の符号を付して説明は省略する。

ユーザは情報表示部９に表示されるＧＵＩ（グラフィカル ユーザ インターフェース）にしたがって、調理器具登録、料理レシピ検索、料理登録の操作を行う。調理器具登録、料理レシピ検索の操作については、実施形態１と同様なので説明は省略し、以下、料理登録の操作について図８（ａ）〜（ｆ）を用いて説明する。最初にメインメニュー画面（図８（ａ））で「料理登録」３０ｃを選択すると、料理登録トップ画面（図８（ｂ））に遷移する。そして、キッチンの所定の位置に料理をセットした後、「ＯＫ」６０を選択すると料理分類情報抽出処理を開始する。

料理分類情報抽出処理は、撮影装置１で料理を撮影して行われる。撮影装置１の撮影部１００，１０１で撮影した真上から撮影した画像、および真横から撮影した画像は、画像処理部２に出力され、画像処理部２では、料理の画像情報から料理本体部が盛り付けられた調理器具の情報を抽出し、この調理器具の情報から調理器具に盛り付けられた料理の種類（この場合は丼物）を推測して抽出する。

料理の種類が抽出されると、料理分類情報確認画面（図８（ｃ））に遷移し、画像処理部２が抽出した料理の種類が正しければ「ＯＫ」６１ａを選択し、間違っていれば「その他」６１ｂを選択する。「その他」６１ｂを選択すると、料理種類選択画面（図８（ｄ））に遷移し、表示されている複数の料理種類から正しい種類（例えば「汁物」６２）を選択する。このようにして抽出された料理の種類は料理分類情報として、料理の画像情報とともに料理情報処理部１１へ出力される。

料理の種類が確定した後、料理名称・使用調理器具入力画面（図８（ｅ））に遷移し、料理情報入力部１０を操作して、料理の名称６３ａや使用調理器具６３ｂを画面上に入力し、「ＯＫ」６３ｃを選択すると、作り方登録画面（図８（ｆ））に遷移する。作り方登録画面では、料理情報入力部１０から作り方６４ａを入力した後、「ＯＫ」６４ｂを選択すると、料理名称情報、使用調理器具情報、作り方情報が料理情報処理部１１へ出力され、料理情報処理部１１は、料理分類情報、料理画像情報、料理名称情報、使用調理器具情報、作り方情報を合成して料理レシピ情報記憶部８へ出力し、各情報が料理レシピ情報記憶部８に料理レシピ情報として保存されて、料理登録が完了する。

このように、ユーザ自身が創作した新たな料理レシピ情報を簡単な操作で料理レシピ情報記憶部８に保存することができ、料理レシピ情報を逐次更新することが可能となる。

（実施形態３）
図９は本実施形態の料理レシピ情報処理システムの構成を示し、実施形態２の構成に調理器具条件入力部１２を設けたもので、実施形態２と同様の調理器具登録、料理レシピ検索、料理登録の操作に加えて、盛り付けシミュレーション機能を備えたものであり、実施形態２と同様の構成には同一の符号を付して説明は省略する。

以下、盛り付けシミュレーションについて図１０を用いて説明する。まず、ユーザは調理した料理本体を調理器具に盛り付けた料理画像を撮影装置１で撮影する。画像処理部２では、料理の画像情報から料理本体部が盛り付けられた調理器具の情報を抽出して、調理器具情報記憶部７から該当する調理器具を検索し、撮影装置１で撮影した料理画像と調理器具情報記憶部７から検索した調理器具の画像との差分をとることで料理本体の画像を抽出して、料理本体画像情報を料理情報処理部１１へ出力する。料理情報処理部１１は、料理本体画像情報、および入力される他の情報（料理分類情報、料理画像情報、料理名称情報、使用調理器具情報、作り方情報）を合成して料理レシピ情報記憶部８へ出力し、各情報が料理レシピ情報記憶部８に保存される。

そして、ユーザは、所望の料理を盛り合わせるのに適した皿等の調理器具をシミュレーションする場合、料理条件入力部５から所望の料理の条件を入力し、調理器具条件入力部１２から所望の調理器具の条件を入力して、その料理条件、調理器具条件は情報統合処理部６へ出力される。情報統合処理部６は、受け取った調理器具条件を調理器具情報記憶部７へ出力し、料理条件を料理レシピ情報記憶部８へ出力して、調理器具情報記憶部７および料理レシピ情報記憶部８は各条件に適合する調理器具画像情報および料理本体画像情報を情報統合処理部６へ出力する。情報統合処理部６は、受け取った調理器具画像情報および料理本体画像情報を画像処理部２へ出力し、画像処理部２は受け取った画像情報から調理器具画像Ｅおよび料理本体画像Ｆを合成したシミュレーション画像Ｇを作成し、シミュレーション画像情報を情報統合処理部６へ出力する（図１０参照）。情報統合処理部６は受け取ったシミュレーション画像情報を情報表示部９へ出力し、情報表示部９は所望の料理が所望の調理器具に盛り付けられているシミュレーション画像を表示する。

このように、ユーザは、撮影装置１を使って自分が盛り付けた料理を撮影した画像から料理本体の画像情報を料理レシピ情報記憶部８に保存して、調理器具情報記憶部７に保存されている様々な調理器具の画像と料理本体の画像とを合成したシミュレーション画像を見ることができ、皿等に実際に盛り付けることなく様々な盛り付けシミュレーションを行うことが可能となる。

（実施形態４）
本実施形態の料理レシピ情報処理システムの構成は実施形態３と同様であり、実施形態３と同様の構成には同一の符号を付して説明は省略する。

本実施形態では、盛り付けシミュレーション時の動作が実施形態３とは異なり、撮影装置１で撮影した料理や調理器具の画像情報を受け取った画像処理部２は、料理本体の画像を抽出した後、各画像内の料理本体および調理器具の各面積を算出し、その算出結果から料理本体および調理器具の各重心位置を特定し、その重心位置情報は調理器具情報処理部３、料理情報処理部１１を介して調理器具情報記憶部７、料理レシピ情報記憶部８に各々保存される。

そして、図１１に示すように調理器具を真上から撮影した画像Ｈと料理本体を真上から撮影した画像Ｉとを合成したシミュレーション画像Ｊを作成するときに、画像処理部２は、調理器具Ｈ１の重心位置Ｈ２と料理本体Ｉ１の重心位置Ｉ２とを合わせる（すなわち、合成画像Ｊ１の重心位置Ｊ２が重心位置Ｈ２，Ｉ２と重なる）ことで精度よく合成することができ、正確な盛り付けシミュレーションを行うことが可能となる。

また、調理器具を真横から撮影した画像と料理本体を真横から撮影した画像とを合成したシミュレーション画像を作成するときに、画像処理部２は、調理器具の上部のエッジ位置と、料理本体の下部のエッジ位置とを合わせることで精度よく合成することができ、正確な盛り付けシミュレーションを行うことが可能となる。

（実施形態５）
図１２は本実施形態の料理レシピ情報処理システムの構成を示し、実施形態４の構成にライト１３を設けたもので、実施形態４と同様の構成には同一の符号を付して説明は省略する。

本実施形態では、撮影装置１の撮影部１００が、キッチンの調理面等の金属板上に置かれた調理器具や料理を真上から垂直に撮影可能に設置されており、さらに撮影装置１の横には金属板を照射するライト１３が設置されている。

ライト１３は特定周波数の光を照射するもので、調理器具や料理を置いた金属板上に光を照射し反射させた状態で撮影装置１が撮影を行うことで、画像処理部２で画像処理を行う際に画像情報から特定周波数の光に反射した部分を取り除くことで、調理器具および料理の画像と背景画像とを確実に分離することが容易にできる。したがって、ユーザは、より詳細な盛り付けシミュレーションを行うことが可能となる。

（実施形態６）
図１３は本実施形態の料理レシピ情報処理システムの構成を示し、実施形態５の構成において複数の撮影装置１ａ，１ｂ，．．．を設けたもので、実施形態５と同様の構成には同一の符号を付して説明は省略する。

本実施形態では、キッチンの調理面等の金属板上に置かれた調理器具や料理を様々な角度から撮影できるように３つ以上の撮影部１００，１０１，．．．が撮影装置１として配置され、画像処理部２では、各撮影部１００，１０１，．．．から入力される各画像に基づいて３次元の画像処理を行うことができる。したがって、料理および調理器具を３次元的に表示することが可能となり、料理本体および調理器具の３次元画像を合成した一層詳細なシミュレーション画像を作成できて、ユーザは、より詳細な盛り付けシミュレーションを行うことが可能となる。

本発明の実施形態１の料理レシピ情報処理システムを示す構成図である。 （ａ）〜（ｆ）同上の調理器具登録時の画面を示す図である。 同上の調理器具登録時の撮影動作を示す図である。 同上の調理器具登録時の画像処理動作を示す図である。 同上の料理レシピ検索時の入力画面を示す図である。 同上の料理レシピの検索結果を示す図である。 本発明の実施形態２の料理レシピ情報処理システムを示す構成図である。 （ａ）〜（ｆ）同上の料理登録時の画面を示す図である。 本発明の実施形態３の料理レシピ情報処理システムを示す構成図である。 同上のシミュレーション画像作成手順を示す図である。 本発明の実施形態４のシミュレーション画像作成手順を示す図である。 本発明の実施形態５の料理レシピ情報処理システムを示す構成図である。 本発明の実施形態６の料理レシピ情報処理システムを示す構成図である。

符号の説明

１ 撮影装置
２ 画像処理部
３ 調理器具情報処理部
４ 調理器具情報入力部
５ 料理条件入力部
６ 情報統合処理部
７ 調理器具情報記憶部
８ 料理レシピ情報記憶部
９ 情報表示部

Claims (4)

1. キッチンに配置された撮影装置と、
   撮影装置によって撮影された対象物の画像処理を行うもので、少なくとも撮影装置で撮影された調理器具の画像処理結果から調理器具の種類を表す調理器具分類情報を抽出する画像処理部と、
   調理器具分類情報、および調理器具の収納位置を表す調理器具収納情報を保存する調理器具情報記憶部と、
   料理のレシピを表す料理レシピ情報を保存する料理レシピ情報記憶部と、
   所定料理のレシピ情報を料理レシピ情報記憶部から抽出するための料理条件を入力する料理条件入力部と、
   入力された料理条件に基づいて料理レシピ情報記憶部から料理レシピ情報を抽出し、該抽出した料理レシピ情報に基づいて調理器具情報記憶部から調理器具収納情報を抽出して、料理レシピ情報と調理器具収納情報とを合成して出力する情報統合処理部とを備えることを特徴とする料理レシピ情報処理システム。
2. 前記撮影装置によって撮影された料理の情報を入力する料理情報入力部を備え、前記画像処理部は、撮影装置で撮影された料理の画像処理結果から料理の種類を表す料理分類情報を抽出し、前記料理レシピ情報記憶部は、料理分類情報、料理の画像情報、料理情報を合成して料理レシピ情報として保存することを特徴とする請求項１記載の料理レシピ情報処理システム。
3. 前記調理器具情報記憶部は、前記撮影装置で撮影された調理器具の画像情報を保存し、前記画像処理部は、料理の画像情報と調理器具の画像情報とに基づいて料理本体の画像情報を抽出して、料理本体の画像と他の調理器具の画像とを合成することを特徴とする請求項２記載の料理レシピ情報処理システム。
4. 前記画像処理装置は、料理本体および調理器具の各重心位置を検出し、各重心位置に基づいて料理本体の画像と調理器具の画像とを合成することを特徴とする請求項３記載の料理レシピ情報処理システム。

Images