JPWO2019065304A1 - Food delivery system, food delivery method and management device for food delivery system - Google Patents
Food delivery system, food delivery method and management device for food delivery system Download PDFInfo
- Publication number
- JPWO2019065304A1 JPWO2019065304A1 JP2019544586A JP2019544586A JPWO2019065304A1 JP WO2019065304 A1 JPWO2019065304 A1 JP WO2019065304A1 JP 2019544586 A JP2019544586 A JP 2019544586A JP 2019544586 A JP2019544586 A JP 2019544586A JP WO2019065304 A1 JPWO2019065304 A1 JP WO2019065304A1
- Authority
- JP
- Japan
- Prior art keywords
- food
- data
- unit
- taste
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A23—FOODS OR FOODSTUFFS; TREATMENT THEREOF, NOT COVERED BY OTHER CLASSES
- A23P—SHAPING OR WORKING OF FOODSTUFFS, NOT FULLY COVERED BY A SINGLE OTHER SUBCLASS
- A23P20/00—Coating of foodstuffs; Coatings therefor; Making laminated, multi-layered, stuffed or hollow foodstuffs
- A23P20/20—Making of laminated, multi-layered, stuffed or hollow foodstuffs, e.g. by wrapping in preformed edible dough sheets or in edible food containers
-
- A—HUMAN NECESSITIES
- A23—FOODS OR FOODSTUFFS; TREATMENT THEREOF, NOT COVERED BY OTHER CLASSES
- A23P—SHAPING OR WORKING OF FOODSTUFFS, NOT FULLY COVERED BY A SINGLE OTHER SUBCLASS
- A23P30/00—Shaping or working of foodstuffs characterised by the process or apparatus
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B29—WORKING OF PLASTICS; WORKING OF SUBSTANCES IN A PLASTIC STATE IN GENERAL
- B29C—SHAPING OR JOINING OF PLASTICS; SHAPING OF MATERIAL IN A PLASTIC STATE, NOT OTHERWISE PROVIDED FOR; AFTER-TREATMENT OF THE SHAPED PRODUCTS, e.g. REPAIRING
- B29C64/00—Additive manufacturing, i.e. manufacturing of three-dimensional [3D] objects by additive deposition, additive agglomeration or additive layering, e.g. by 3D printing, stereolithography or selective laser sintering
- B29C64/30—Auxiliary operations or equipment
- B29C64/386—Data acquisition or data processing for additive manufacturing
- B29C64/393—Data acquisition or data processing for additive manufacturing for controlling or regulating additive manufacturing processes
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B33—ADDITIVE MANUFACTURING TECHNOLOGY
- B33Y—ADDITIVE MANUFACTURING, i.e. MANUFACTURING OF THREE-DIMENSIONAL [3-D] OBJECTS BY ADDITIVE DEPOSITION, ADDITIVE AGGLOMERATION OR ADDITIVE LAYERING, e.g. BY 3-D PRINTING, STEREOLITHOGRAPHY OR SELECTIVE LASER SINTERING
- B33Y30/00—Apparatus for additive manufacturing; Details thereof or accessories therefor
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B33—ADDITIVE MANUFACTURING TECHNOLOGY
- B33Y—ADDITIVE MANUFACTURING, i.e. MANUFACTURING OF THREE-DIMENSIONAL [3-D] OBJECTS BY ADDITIVE DEPOSITION, ADDITIVE AGGLOMERATION OR ADDITIVE LAYERING, e.g. BY 3-D PRINTING, STEREOLITHOGRAPHY OR SELECTIVE LASER SINTERING
- B33Y50/00—Data acquisition or data processing for additive manufacturing
- B33Y50/02—Data acquisition or data processing for additive manufacturing for controlling or regulating additive manufacturing processes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
Landscapes
- Engineering & Computer Science (AREA)
- Chemical & Material Sciences (AREA)
- Materials Engineering (AREA)
- Manufacturing & Machinery (AREA)
- Polymers & Plastics (AREA)
- Food Science & Technology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mechanical Engineering (AREA)
- Optics & Photonics (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Computer Graphics (AREA)
- Manipulator (AREA)
- Formation And Processing Of Food Products (AREA)
Abstract
食品提供システムは、注文食品の形状データと色データと味データとを出力するデータ出力部(443)と、データ出力部から出力された形状データと味データとに基づいて食材を積層して注文食品に対応する形状と味とを有する造形食品を製造する三次元造形装置と、ユーザに装着されるとともに、現実空間に合致した三次元画像を表示する表示部を有するユーザ機器と、三次元造形装置により製造された造形食品の三次元画像が注文食品と同一色で表示されるようにデータ出力部から出力された色データに基づいて表示部を制御する表示制御部と、を備える。The food provision system stacks and orders foodstuffs based on a data output unit (443) that outputs shape data, color data, and taste data of ordered foods, and shape data and taste data output from the data output unit. A three-dimensional modeling device that manufactures a shaped food having a shape and taste corresponding to the food, a user device that is attached to the user and has a display unit that displays a three-dimensional image that matches the real space, and three-dimensional modeling. It includes a display control unit that controls the display unit based on the color data output from the data output unit so that the three-dimensional image of the shaped food produced by the apparatus is displayed in the same color as the ordered food.
Description
本発明は、3Dプリンタなどにより製造された食品を提供する食品提供システム、食品提供方法および食品提供システム用管理装置に関する。 The present invention relates to a food providing system for providing food produced by a 3D printer or the like, a food providing method, and a management device for the food providing system.
従来より、3Dプリンタを用いて食品を製造するようにした装置が知られている(例えば特許文献1参照)。この特許文献1記載の装置では、着色料や香味料を添加しながらCADデータの断面図に基づいて食材を積層することにより、所望の色や風味をもった所定形状の食品を製造する。 Conventionally, an apparatus for producing food using a 3D printer has been known (see, for example, Patent Document 1). In the apparatus described in
特許文献1:国際公開第2015/106059号 Patent Document 1: International Publication No. 2015/1060659
ところで、実際の食品には、色とりどりの食材を用いて彩り豊富な状態で提供されるものがある。このような食品を、上記特許文献1記載の3Dプリンタなどを用いて再現しようとすると、食品の製造コストが大幅に上昇するおそれがある。 By the way, some actual foods are provided in a colorful state using colorful ingredients. If an attempt is made to reproduce such a food using the 3D printer described in
本発明の一態様である食品提供システムは、食品の形状データと色データと味データとを出力するデータ出力部と、データ出力部から出力された形状データと味データとに基づいて食材を積層して食品に対応する形状と味とを有する造形食品を製造する三次元造形装置と、ユーザに装着されるとともに、現実空間に合致した三次元画像を表示する表示部を有するユーザ機器と、三次元造形装置により製造された造形食品の三次元画像が食品と同一色で表示されるようにデータ出力部から出力された色データに基づいて表示部を制御する表示制御部と、を備える。 The food providing system, which is one aspect of the present invention, stacks foodstuffs based on a data output unit that outputs food shape data, color data, and taste data, and shape data and taste data output from the data output unit. A three-dimensional modeling device that manufactures a shaped food having a shape and taste corresponding to the food, a user device that is attached to the user and has a display unit that displays a three-dimensional image that matches the real space, and a tertiary. It includes a display control unit that controls the display unit based on the color data output from the data output unit so that the three-dimensional image of the modeled food produced by the original modeling device is displayed in the same color as the food.
本発明の他の態様である食品提供方法は、食品の形状データと色データと味データとを出力し、出力された形状データと味データとに基づいて食材を積層して食品に対応する形状と味とを有する造形食品を製造し、ユーザに装着されたユーザ機器の表示部に、製造された造形食品の現実空間に合致した三次元画像が食品と同一色で表示されるように、出力された色データに基づいて表示部を制御することを含む。 The food providing method according to another aspect of the present invention outputs food shape data, color data, and taste data, and stacks foodstuffs based on the output shape data and taste data to form a shape corresponding to the food. Manufactures a shaped food with the taste and taste, and outputs it so that a three-dimensional image matching the real space of the manufactured shaped food is displayed in the same color as the food on the display unit of the user device attached to the user. It includes controlling the display unit based on the color data.
本発明のさらに他の態様である食品提供システム用管理装置は、ユーザ機器及びロボットから送信されたデータを受信する信号入力部と、信号入力部を介して受信したデータに基づき食品の形状データと色データと味データとを特定し出力するデータ出力部と、データ出力部から出力された形状データと味データとを外部の三次元造形装置に出力するプリンタ制御部と、三次元造形装置により製造される造形食品の三次元画像が食品と同一色で表示されるようにデータ出力部から出力された色データを外部のユーザ機器に出力するユーザ機器制御部と、を備える。 The management device for a food providing system, which is still another aspect of the present invention, includes a signal input unit that receives data transmitted from a user device and a robot, and food shape data based on the data received via the signal input unit. Manufactured by a data output unit that identifies and outputs color data and taste data, a printer control unit that outputs shape data and taste data output from the data output unit to an external three-dimensional modeling device, and a three-dimensional modeling device. It is provided with a user equipment control unit that outputs color data output from a data output unit to an external user equipment so that a three-dimensional image of the shaped food to be produced is displayed in the same color as the food.
本発明によれば、三次元造形装置によって製造される造形食品自体の色を気にする必要がなく、安価に造形食品を製造することができる。 According to the present invention, it is not necessary to worry about the color of the shaped food itself produced by the three-dimensional modeling device, and the shaped food can be produced at low cost.
以下、図1〜図7を参照して本発明の実施形態について説明する。本発明の実施形態に係る食品提供システムは、ロボットシステムに適用され、ユーザからの指令によって動作するロボットが取得した情報を用いてユーザに食品を提供するものである。より具体的には、遠隔地のロボットを用いて取得したカメラの画像信号を介して、その遠隔地で注文可能な食品(注文食品)をユーザに認識させ、ユーザからの指令に応じて注文食品に対応する食品を3Dプリンタで製造し、製造された食品(造形食品)をユーザに提供するように構成する。注文食品と造形食品とは、形状および味が互いに同一であるが、色は異なる。 Hereinafter, embodiments of the present invention will be described with reference to FIGS. 1 to 7. The food providing system according to the embodiment of the present invention is applied to a robot system, and provides food to a user by using information acquired by a robot that operates according to a command from the user. More specifically, the user is made to recognize the food (ordered food) that can be ordered in the remote place through the image signal of the camera acquired by using the robot in the remote place, and the ordered food is ordered according to the command from the user. The food corresponding to the above is manufactured by a 3D printer, and the manufactured food (modeled food) is provided to the user. Custom foods and shaped foods have the same shape and taste, but different colors.
ロボットは、ユーザからの指令により単独で行動することができるが、以下では、単独ではなくロボットがユーザの家族等の第三者とともに行動する例を説明する。例えば、ユーザが家族と一緒に外出(例えば旅行)することが困難な場合に、ユーザの代わりにロボットが家族と一緒に旅行する場合を想定する。このとき、ユーザからの指令によりロボットを動作させるとともに、ロボットにより取得された情報をユーザに提供する。これによりユーザは、例えば自宅にいながら、あたかも家族とともに旅行している気分を味わうことができる。特に本実施形態では、以下のように旅行先の食品の情報を、ロボットを介してユーザに提供し、その情報を用いて3Dプリンタで食品を製造する。これによりユーザは、旅行先で家族と一緒に食事している気分を味わうことができる。 The robot can act independently by a command from the user, but the following describes an example in which the robot acts together with a third party such as the user's family instead of acting alone. For example, suppose that it is difficult for a user to go out (for example, travel) with a family member, and a robot travels with the family member instead of the user. At this time, the robot is operated according to a command from the user, and the information acquired by the robot is provided to the user. As a result, the user can feel as if he / she is traveling with his / her family while staying at home, for example. In particular, in the present embodiment, the information on the food at the travel destination is provided to the user via the robot as follows, and the food is manufactured by the 3D printer using the information. This allows the user to feel as if they are eating with their family while traveling.
図1は、本発明の実施形態に係る食品提供システム100の全体構成を概略的に示す図である。図1に示すように、食品提供システム100は、A地点に位置するユーザ1に装着されたユーザ機器10と、A地点に配置された3Dプリンタ20と、B地点に位置してA地点のユーザ1により操作されるロボット30と、管理サーバ40とを含んで構成される。 FIG. 1 is a diagram schematically showing an overall configuration of a
これらユーザ機器10と、3Dプリンタ20と、ロボット30と、管理サーバ40とは、インターネット回線等の無線通信網を含むネットワーク2で通信可能に接続される。A地点は例えばユーザの自宅であり、B地点はA地点から離れた地点、例えば異なる地域の地点である。なお、A地点とB地点とが互いに異なる国であってもよい。 The
B地点のロボット30は、B地点またはB地点の近傍の店舗3からレンタルされる。すなわち、ロボット30は、店舗3に赴いたユーザ1の家族によりレンタルされ、B地点でユーザ1の家族とともに行動する。ロボット30は、B地点での旅行が終了するときにユーザ1の家族により店舗3に返却される。店舗3の各ロボット30には、予め固有の識別IDが付されている。 The
図2は、ユーザ機器10の構成を示す図である。図2に示すようにユーザ機器10は、例えば全体が略ヘルメット形状を呈するウェアラブルコンピュータであり、ユーザの頭部に装着される。ユーザ機器10は、ユーザの脳波や脳磁波、脳血流の状態等の脳活動を検出する複数のセンサ11を備える。すなわち、ユーザ機器10は、ユーザの思考ないし意図を脳活動信号から検出し、身体を使うことなく機械操作を実現する、いわゆるブレインマシンインタフェース(BMI)を備える。 FIG. 2 is a diagram showing the configuration of the
さらにユーザ機器10は、ディスプレイ12と、マイク13と、スピーカ14と、入力装置15と、コントローラ16と、無線ユニット17と、カメラ18とを有する。ディスプレイ12は、例えば非透過型のヘッドマウントディスプレイであり、ユーザの両眼の周囲を覆うように配置され、ロボット30からのカメラ画像が表示される。なお、ユーザの鼻と口の位置は、ユーザ機器10に覆われずに露出する。 Further, the
ディスプレイ12の外表面には、ユーザの両眼の位置に対応してCCD等の撮像素子を有する一対のカメラ18が設けられる。ディスプレイ12には、カメラ18により撮影された現実空間の三次元画像を表示することもできる。この三次元画像には、仮想の画像を重ねて表示することができる。 On the outer surface of the
マイク13は、ユーザの口元に向けて移動可能に設けられ、ユーザの発話による音声信号を入力する。スピーカ14は、ユーザの耳元に配置され、音声を出力する。入力装置15は、ユーザにより操作されるスイッチやタッチパネル等により構成され、入力装置15を介してユーザの個人情報等、各種情報を入力することができる。 The
コントローラ16は、CPU,ROM,RAM等を有するマイクロコンピュータを含み、無線ユニット17を制御して管理サーバ40と通信する。例えばコントローラ16は、センサ11とマイク13とからの信号を管理サーバ40に送信させる。さらにコントローラ16は、管理サーバ40から送信された信号に基づきディスプレイ12やスピーカ14などに制御信号を出力する。 The
図3は、3Dプリンタ20の概略構成を示すブロック図である。3Dプリンタ20は、三次元モデルの形状データに基づいて材料を積層していくことでオブジェクトを作成するものであり、本実施形態では、食材を積層して食品(造形食品)を製造する。図3に示すように、3Dプリンタ20は、入力装置21と、食材貯蔵部22と、風味貯蔵部23と、掻き混ぜ部24と、ノズル25と、コントローラ26と、無線ユニット27とを有する。 FIG. 3 is a block diagram showing a schematic configuration of the
食材貯蔵部22は、寒天、こんにゃく、ゼリー等の硬さの異なる複数の食材を細切れにされた状態でそれぞれ異なる容器に保管する。食材貯蔵部22は、粉末状の食材を容器に保管することもできる。風味貯蔵部23は、例えば甘味、苦味、酸味、塩味、うま味等の基本の風味を粉末または液体の形態でそれぞれ異なる容器に保管する。掻き混ぜ部24は、食材貯蔵部22から供給された所定種類の所定量の食材と、風味貯蔵部23から供給された所定種類の所定量の風味とを掻き混ぜる。ノズル25は、コントローラ26から出力される座標データに従って移動し、掻き混ぜ部24から供給された風味付き食材を、その先端から射出しながら積層し、これにより三次元形状の造形食品を製造する。 The
コントローラ26は、CPU等の演算部26Aと、ROM,RAM等の記憶部26Bと、各種周辺回路とを有するマイクロコンピュータを含む。演算部26Aは、機能的構成として、データ入力部261と、信号出力部262とを有する。データ入力部261は、入力装置21から入力された信号を取り込むとともに、管理サーバ40から送信された信号(食品データ)を、無線ユニット27を介して取り込む。信号出力部262は、データ入力部261により取り込まれた信号に従い食材貯蔵部22、風味貯蔵部23、掻き混ぜ部24およびノズル25の各動作部(アクチュエータなど)に制御信号を出力し、食材貯蔵部22、風味貯蔵部23、掻き混ぜ部24およびノズル25の動作を制御する。 The
図4は、ロボット30の構成を示す図である。図4に示すようにロボット30は、頭、胴体、2つの腕部、2つの脚部を有する人型ロボットであり、二足歩行によりロボット自身で移動することができる。ロボット30の高さは、成人の身長に近く、例えば140〜160cm程度である。 FIG. 4 is a diagram showing the configuration of the
ロボット30は、外界を感知するための人の感覚機能である五感に対応した検出機能を有する複数のセンサ、すなわち視覚センサ311と、聴覚センサ312と、触覚センサ313と、臭覚センサ314と、味覚センサ315とを有する。これらセンサ311〜315は、人の五感に対応した信号(五感信号)を検出信号として出力する。 The
より具体的には、視覚センサ311はカメラにより構成され、ロボット30の目の位置に設けられたCMOSセンサやCCDセンサ等の画像センサとレンズとを有する撮影部と、撮影部を上下左右に駆動する駆動部と、被写体を拡大縮小するズーム機構とを有し、ロボット30の周囲の画像(動画)を取得する。聴覚センサ312は、例えばロボット30の耳の位置に設けられたマイクにより構成され、ロボット30の周囲の音声を取得する。触覚センサ313は、例えばロボット30のハンドの位置等に設けられた力覚センサにより構成され、ロボット30のハンドに作用する外力を検出する。臭覚センサ314は、ロボット30の鼻の位置に設けられ、臭いを検出する。味覚センサ315は、ロボット30の口の位置に設けられ、味を検出する。 More specifically, the
さらにロボット30は、アクチュエータ32と、スピーカ33と、入力装置34と、GPSセンサ35と、コントローラ36と、無線ユニット37とを有する。アクチュエータ32は、例えばロボット30の関節部に設けられた複数のサーボモータ等により構成され、アクチュエータ32の駆動によりロボット30が動作する。スピーカ33は、ロボット30の口の位置に設けられ、音声を出力する。入力装置34は、電源スイッチ等の各種スイッチを備える。GPSセンサ35は、GPS衛星からのGPS信号を受信する。GPSセンサ35からの信号により、ロボット30の位置を検出することができる。 Further, the
コントローラ36は、CPU,ROM,RAM等を有するマイクロコンピュータを含み、無線ユニット37を制御して管理サーバ40と通信する。例えばコントローラ36は、五感信号を出力するセンサ311〜315とGPSセンサ35とからの信号を管理サーバ40に送信させる。さらにコントローラ36は、管理サーバ40から送信された信号に基づきアクチュエータ32やスピーカ33などに制御信号を出力する。 The
図5は、管理サーバ40の概略構成の一例を示すブロック図である。図5に示すように、管理サーバ40は、入力装置41と、表示装置42と、無線ユニット43と、コントローラ44とを有する。なお、入力装置41と表示装置42とは、省略することができる。また、無線ユニット43は無線だけでなく有線により通信接続される構成であってもよい。 FIG. 5 is a block diagram showing an example of a schematic configuration of the
コントローラ44は、CPU等の演算部44Aと、ROM,RAM,ハードディスク等の記憶部44Bと、その他の周辺回路とを有し、無線ユニット43を制御してユーザ機器10、3Dプリンタ20およびロボット30と通信する。演算部44Aは、機能的構成として、信号入力部441と、注文受付部442と、データ出力部443と、ロボット制御部444と、プリンタ制御部445と、ユーザ機器制御部446とを有する。記憶部44Bは、機能的構成として、食品データベース447を有する。 The
食品データベース447は、単一または複数の食材と風味とにより形成される複数の食品(料理等)の形状データと色データと味データとを含む食品データを、食品の名称とともに記憶する。食品データには、ロボット30(視覚センサ311)を介してユーザが認識した食品、例えば料理店や食品を販売している店舗で注文可能な食品(注文食品)のデータと、注文食品に形状と味とを真似して3Dプリンタ20で食品(造形食品)を製造する場合の造形食品のデータとが含まれる。造形食品のデータは、注文食品のデータに対応付けて食品データベース447に記憶される。食品データベース447には、種々のジャンルの食品の情報が記憶され、この情報は例えば入力装置41を介して定期的に更新あるいは逐次更新される。 The
信号入力部441は、ユーザ機器10(図2のセンサ11やマイク13等)から送信されたデータ、およびロボット30(図4のセンサ311〜315等)から送信されたデータを、無線ユニット43を介して取得する。信号入力部441は、3Dプリンタ20で食品の製造が完了したときに3Dプリンタ20から出力される動作完了信号も取得する。 The
注文受付部442は、3Dプリンタ20で製造すべき食品の注文を受け付ける。例えばロボット30のカメラ(視覚センサ311)で食品を撮影し、食品がユーザ機器10のディスプレイ12に表示されている状態で、ユーザからの指令によりロボット30を介して食品を注文すると、注文受付部431は、その食品の注文を受け付ける。なお、ロボット30は食品を食べることができないので、注文した食品が料理店で実際に作られる必要はない。 The
ユーザからの指令により、ロボット30に実際に食品を注文させてもよいが、単に注文のふりをさせるだけでもよい。注文のふりすらさせずに、ユーザの食品の注文の意思を、注文受付部442が判断して注文を受け付けるようにしてもよい。すなわち、ロボット30による注文動作を介さずに、ユーザがセンサ11やマイク13を介して食品の注文を指令し、これを注文受付部442が受け付けるようにしてもよい。 The
注文受付部442は、ロボット30により食品の注文動作がなされると、その注文された食品の名称をセンサ11や視覚センサ311からの信号に基づいて判断し、注文食品を特定する。注文食品の名称が不明なとき、視覚センサ311により取得された食品の形状データと色データとに合致する食品データを食品データベース436から検索し、これにより注文食品を特定することもできる。 When the
データ出力部443は、食品データベース447を参照し、注文受付部442により特定された注文食品の形状データと色データと味データとを抽出して出力する。 The
ロボット制御部444は、信号入力部441が読み込んだユーザ機器10のセンサ11からの信号(脳活動信号)に基づいて、ロボット30のアクチュエータ32に対する動作信号を、無線ユニット43を介してロボット30に送信する。ロボット30のコントローラ36は、この動作信号に応じてアクチュエータ32に制御信号を出力する。これにより、ユーザの意図に従いロボット30を動作させることができる。ロボット制御部444は、ユーザ機器10のマイク13からの信号に基づく音声を、ロボット30のスピーカ33から出力させることもできる。 Based on the signal (brain activity signal) from the
プリンタ制御部445は、データ出力部443から出力された食品データのうち、注文食品の形状データと味データとを、無線ユニット43を介して3Dプリンタ20に送信する。3Dプリンタ20のコントローラ26(信号出力部262)は、送信された形状データと味データとに基づいて食材貯蔵部22、風味貯蔵部23、掻き混ぜ部24およびノズル25の各動作部に制御信号を出力する。これにより、注文食品と形状および味が一致する造形食品が製造される。 The
ユーザ機器制御部446は、信号入力部441が読み込んだロボット30のセンサ311〜315からの信号(五感信号)に基づいて、ユーザ機器10に対する動作信号を、無線ユニット43を介してユーザ機器10に送信する。例えば視覚センサ311により検出された画像信号を送信する。ユーザ機器10のコントローラ16は、この画像信号に応じてディスプレイ12に制御信号を出力し、ディスプレイ12に視覚センサ311から得られた三次元画像を表示させる。ユーザ機器制御部446は、聴覚センサ312からの信号に基づく音声を、ユーザ機器10のスピーカ14から出力させることもできる。 The user
ユーザ機器制御部446は、ロボット30の視覚センサ311により取得された画像とユーザ機器10のカメラ18により取得された画像のうち、いずれをディスプレイ12に表示するかを決定する。この決定に応じてディスプレイ12の表示が切り替えられる。例えばユーザからの指令によりロボット30を動作させているときは、ユーザ機器制御部446は、視覚センサ311からの信号をユーザ機器10に送信し、ディスプレイ12に視覚センサ311からの信号に基づく画像を表示させる。一方、食品の注文後に3Dプリンタ20で造形食品の製造が完了すると、ユーザ機器制御部446は、カメラ18からの信号に基づく画像を表示させるようにユーザ機器10に画像切替信号を送信する。なお、ユーザ機器10の入力装置15の操作により、表示画像を切り替えることもできる。 The user
ユーザ機器制御部446は、画像切替信号の送信時に、データ出力部443から出力された注文食品の色データを併せてユーザ機器10に送信する。ユーザ機器10のコントローラ16は、この色データに基づいて造形食品の表示画像の色を制御する。すなわち、コントローラ16は、カメラ18により撮影された造形食品の画像をディスプレイ12に表示させるとき、造形食品が注文食品と同一の色で表示されるように画像の表示色を制御する。 When transmitting the image switching signal, the user
図6は、予め記憶部44Bに記憶されたプログラムに従い管理サーバ40の演算部44Aで実行される処理、特にユーザ機器10のディスプレイ12に対する表示制御に係る処理の一例を示すフローチャートである。このフローチャートに示す処理は、例えばユーザ機器10からロボットの動作開始指令が入力されると開始され、所定周期で繰り返される。 FIG. 6 is a flowchart showing an example of a process executed by the
まず、ステップS1で、ユーザからの指令によりロボット30が食品を注文したか否か、すなわち注文受付部442で食品の注文が受け付けられたか否かを判定する。ステップS1で否定されるとステップS2に進み、信号入力部441が読み込んだ、ロボット30の視覚センサ311により取得された画像信号を、無線ユニット43を介してユーザ機器10に送信する。これによりユーザ機器10のディスプレイ12に、ロボット30を介して取得された画像(動画)が表示される。 First, in step S1, it is determined whether or not the
一方、ステップS1で肯定されるとステップS3に進み、注文受付部442が注文食品の名称を特定する。次いで、ステップS4で、データ出力部443が食品データベース447を参照し、ステップS3で特定された注文食品の食品データ、すなわち形状データと色データと味データとを出力する。次いで、ステップS5で、プリンタ制御部445が、無線ユニット43を介して3Dプリンタ20に注文食品の食品データ(形状データと味データ)を送信する。 On the other hand, if affirmed in step S1, the process proceeds to step S3, and the
次いで、ステップS6で、3Dプリンタ20から動作完了信号が送信されたか否かにより、造形食品の製造が完了したか否かを判定する。ステップS6で肯定されるとステップS7に進み、否定されるとステップS2に進む。ステップS7では、ユーザ機器制御部446が、カメラ18により取得された画像をディスプレイ12に表示させるように無線ユニット43を介してユーザ機器10に信号(例えば画像切替信号)を送信する。これによりディスプレイ12の画像表示が切り替えられ、ディスプレイ12にはカメラ18により撮影された現実空間の画像(造形食品の画像)が表示される。 Next, in step S6, it is determined whether or not the production of the shaped food is completed based on whether or not the operation completion signal is transmitted from the
さらに、ステップS7では、ユーザ機器制御部446が、ステップS4でデータ出力部443から出力された注文食品の色データをユーザ機器10に送信する。ユーザ機器10のコントローラ16は、この色データに基づいて、造形食品の表示色を制御する。これによりユーザは、造形食品を注文食品と同一の色と認識する。このため、注文食品と同一の食品を簡易に再現してユーザに提供することができる。造形食品の形状と味とは、注文食品の形状と味とに対応(例えば一致)しており、しかもディスプレイ12に表示される造形食品の見た目が注文食品と同一であるため、ユーザはまるで注文食品を味わったかのような気分となる。 Further, in step S7, the user
本実施形態に係る食品提供システム100の動作をより具体的に説明する。図7に示すように、B地点でロボット30が注文食品5(ケーキ)を注文すると、その注文食品5の形状データと味データとが3Dプリンタ20に送信される(ステップS5)。これら形状データと味データとに基づき3Dプリンタ20が動作し、A地点で注文食品5と同一形状および同一味の造形食品6(ケーキ)が製造される。なお、注文食品5は複数の色と模様とで表面が形成されているのに対し、造形食品6の表面は例えば単色で形成され、模様もない。 The operation of the
造形食品6の製造が完了すると、ディスプレイ12の画像表示が切り替えられる(ステップS7)。このとき、ユーザ機器10には注文食品5の色データが送信され、造形食品6は、注文食品5と同一の色および模様でディスプレイ12に表示される。これによりユーザ1は、実際には色が異なる造形食品6でありながら、注文食品5と同一であると認識し、造形食品6を食べることで注文食品5を食べたような感覚が得られる。 When the production of the shaped
本実施形態によれば以下のような作用効果を奏することができる。
(1)本実施形態に係る食品提供システム100は、食品(注文食品)の形状データと色データと味データとを出力するデータ出力部443と、データ出力部443から出力された形状データと味データとに基づいて食材を積層して注文食品に対応する形状と味とを有する造形食品を製造する3Dプリンタ20と、ユーザに装着されるとともに、現実空間に合致した三次元画像を表示するディスプレイ12を有するユーザ機器10と、3Dプリンタ20により製造された造形食品の三次元画像が注文食品と同一色で表示されるようにデータ出力部443から出力された色データに基づいてディスプレイ12を制御するユーザ機器制御部446およびコントローラ16とを備える(図1,2,5)。According to this embodiment, the following effects can be obtained.
(1) The
これにより注文食品の形状と味とを3Dプリンタ20で容易に再現することができる。注文食品の色については再現させずに、ディスプレイ12を介して注文食品に一致した色で造形食品を擬似的に表示させる。このため、造形食品の色を気にせずに、例えば食材貯蔵部22から供給された食材の色のままで造形食品を製造することができ、造形食品の製造コストを低減することができる。すなわち、安価な構成で、3Dプリンタ20を用いてユーザに満足感の高い造形食品を提供することができる。 As a result, the shape and taste of the custom-made food can be easily reproduced by the
(2)食品提供システム100は、無線通信を介したユーザからの指令に応じて動作し、視覚センサ311を有する移動可能なロボット30をさらに備える(図1)。ユーザ機器制御部446とコントローラ16とは、さらに視覚センサ311により撮影された三次元画像が、現実空間に合致した三次元画像に代えて表示されるようにディスプレイ12を制御する(ステップS2)。これにより遠隔地のロボット30を介してユーザが各種の情報を得ることができる。例えばディスプレイ12に表示される食品の外見から、ユーザがどの食品を注文するかを判断することができる。(2) The
(3)食品提供システム100は、複数の食品の形状データと色データと味データとを含む食品データが記憶された食品データベース447をさらに備える(図5)。データ出力部443は、ロボット30を介して食品が注文されると、この食品に対応した形状データと色データと味データとを食品データベース447から抽出して出力する(ステップS4)。これにより、ロボット30を介して注文された食品を再現した造形食品をユーザに提供することができる。したがって、ユーザは家族と一緒に食事している気分を味わうことができ、高い満足感が得られる。(3) The
(4)データ出力部443は、視覚センサ311により撮影された食品の形状データと色データとを出力するとともに、この食品に対応する味データを食品データベース447から抽出して出力することもできる。これにより、例えば注文したい食品の名称がわからないときであっても、視覚センサ311により撮影された食品の形状データと色データから、食品データ(味データ)を抽出することができ、3Dプリンタ20を用いて所望の食品を容易に製造することができる。(4) The
(5)本発明の実施形態に係る食品提供方法は、注文食品の形状データと色データと味データとを出力し(ステップS4)、このうち出力された形状データと味データとに基づいて食材を積層して注文食品に対応する形状と味とを有する造形食品を製造し(ステップS5)、ユーザに装着されたユーザ機器10のディスプレイ12に、製造された造形食品の現実空間における三次元画像が注文食品と同一色で表示されるように、出力された色データに基づいてディスプレイ12を制御することを含む(ステップS7)。これにより、食品の製造コストを抑えて注文食品と同様の食品をユーザに対し提供することができる。(5) The food providing method according to the embodiment of the present invention outputs shape data, color data, and taste data of custom-made food (step S4), and the foodstuff is based on the output shape data and taste data. To produce a shaped food having a shape and taste corresponding to the custom-made food (step S5), a three-dimensional image of the manufactured shaped food in the real space is displayed on the
なお、上記実施形態では、食品提供システム100をロボットシステムに適用したが、本発明の食品提供システムは、ロボットシステム以外にも同様に適用することができる。すなわち、ロボット30を介さずに注文を受け付けた食品の形状データと色データと味データとを、データ出力部443が出力するようにしてもよい。上記実施形態では、3Dプリンタ20を用いて造形食品を製造したが、データ出力部から出力された形状データと味データとに基づいて食材を積層して食品に対応する形状と味とを有する造形食品を製造するのであれば、三次元造形装置の構成は上述したものに限らない。 In the above embodiment, the
上記実施形態では、ヘッドマウントディスプレイをディスプレイ12として用いたが、現実空間に合致した三次元画像を表示する表示部の構成はこれに限らない。ユーザに装着されるユーザ機器の構成も上述したものに限らない。上記実施形態では、ユーザ機器制御部446からの指令によりユーザ機器10のディスプレイ12の表示を切り替えるとともに、ユーザ機器制御部446からの指令によって送信された色データに基づいて、ユーザ機器10のコントローラ16が造形食品の表示画像の色を制御するようにしたが、造形食品の三次元画像が注文食品と同一色で表示されるようにデータ出力部から出力された色データに基づいて表示部が制御されるのであれば、表示制御部の構成は上述したものに限らない。 In the above embodiment, the head-mounted display is used as the
上記実施形態では、二足歩行可能な人型ロボット30を用いたが、無線通信を介したユーザからの指令に応じて動作し、視覚センサ311などの撮影部を有するのであれば、ロボットの構成は上述したものに限らない。上記実施形態では、複数の食品の形状データと色データと味データとを含む食品データを、管理サーバ40の食品データベース447に記憶するようにしたが、記憶部の構成はこれに限らない。 In the above embodiment, the
上記実施形態では、管理サーバ40とユーザ機器10、3Dプリンタ20およびロボット30との間で信号を送受信するようにした。すなわち、ユーザ機器10、3Dプリンタ20およびロボット30が、管理サーバ40を介して互いに通信するようにしたが、これらが管理サーバ40を介さずに直接通信するようにしてもよい。この場合、管理サーバ40の機能を、ユーザ機器10、3Dプリンタ20およびロボット30のコントローラ16,26,36等が有するようにすればよい。 In the above embodiment, signals are transmitted and received between the
上記実施形態では、ロボット30を店舗3でレンタルするようにしたが、例えばユーザが自宅に所有するロボットを用いても、本発明は、同様に構成することができる。ロボット30を家族とともに行動させるのではなく、単独で行動させてもよい。管理サーバ40と店舗3の端末とを通信可能に構成し、ロボット30のレンタル予約の申し込み、レンタル料金の支払い等を、管理サーバ40を介して行うようにしてもよい。 In the above embodiment, the
以上の説明はあくまで一例であり、本発明の特徴を損なわない限り、上述した実施形態および変形例により本発明が限定されるものではない。上記実施形態と変形例の1つまたは複数を任意に組み合わせることも可能であり、変形例同士を組み合わせることも可能である。 The above description is merely an example, and the present invention is not limited to the above-described embodiments and modifications as long as the features of the present invention are not impaired. It is also possible to arbitrarily combine one or a plurality of the above-described embodiments and the modified examples, and it is also possible to combine the modified examples.
10 ユーザ機器、12 ディスプレイ、16 コントローラ、20 3Dプリンタ、30 ロボット、100 食品提供システム、311 視覚センサ、443 データ出力部、446 ユーザ機器制御部、447 食品データベース10 user equipment, 12 displays, 16 controllers, 20 3D printers, 30 robots, 100 food delivery systems, 311 visual sensors, 443 data output units, 446 user equipment control units, 447 food databases
Claims (6)
前記データ出力部から出力された形状データと味データとに基づいて食材を積層して前記食品に対応する形状と味とを有する造形食品を製造する三次元造形装置と、
ユーザに装着されるとともに、現実空間に合致した三次元画像を表示する表示部を有するユーザ機器と、
前記三次元造形装置により製造された造形食品の三次元画像が前記食品と同一色で表示されるように前記データ出力部から出力された色データに基づいて前記表示部を制御する表示制御部と、を備えることを特徴とする食品提供システム。A data output unit that outputs food shape data, color data, and taste data,
A three-dimensional modeling apparatus that manufactures a shaped food having a shape and taste corresponding to the food by laminating foodstuffs based on the shape data and taste data output from the data output unit.
A user device that is attached to the user and has a display unit that displays a three-dimensional image that matches the real space.
A display control unit that controls the display unit based on the color data output from the data output unit so that the three-dimensional image of the shaped food produced by the three-dimensional modeling apparatus is displayed in the same color as the food product. A food delivery system characterized by being equipped with.
無線通信を介したユーザからの指令に応じて動作し、撮影部を有する移動可能なロボットをさらに備え、
前記表示制御部は、さらに前記撮影部により撮影された三次元画像が前記現実空間に合致した三次元画像に代えて表示されるように前記表示部を制御することを特徴とする食品提供システム。In the food provision system according to claim 1,
It is equipped with a mobile robot that operates in response to commands from the user via wireless communication and has a shooting unit.
The display control unit further controls the display unit so that the three-dimensional image captured by the photographing unit is displayed in place of the three-dimensional image matching the real space.
複数の食品の形状データと色データと味データとを含む食品データが記憶された記憶部をさらに備え、
前記データ出力部は、前記ロボットを介して食品が注文されると、この食品に対応した形状データと色データと味データとを前記記憶部から抽出して出力することを特徴とする食品提供システム。In the food provision system according to claim 2.
Further provided with a storage unit for storing food data including shape data, color data, and taste data of a plurality of foods.
The food providing system is characterized in that when a food is ordered via the robot, the data output unit extracts shape data, color data, and taste data corresponding to the food from the storage unit and outputs the data. ..
複数の食品の形状データと色データと味データとを含む食品データが記憶された記憶部をさらに備え、
前記データ出力部は、前記撮影部により撮影された食品の形状データと色データとを出力するとともに、この食品に対応する味データを前記記憶部から抽出して出力することを特徴とする食品提供システム。In the food provision system according to claim 2.
Further provided with a storage unit for storing food data including shape data, color data, and taste data of a plurality of foods.
The data output unit outputs the shape data and the color data of the food photographed by the photographing unit, and extracts and outputs the taste data corresponding to the food from the storage unit. system.
出力された形状データと味データとに基づいて食材を積層して前記食品に対応する形状と味とを有する造形食品を製造し、
ユーザに装着されたユーザ機器の表示部に、製造された造形食品の現実空間に合致した三次元画像が前記食品と同一色で表示されるように、出力された色データに基づいて前記表示部を制御することを含むことを特徴とする食品提供方法。Outputs food shape data, color data, and taste data,
Based on the output shape data and taste data, ingredients are laminated to produce a shaped food having a shape and taste corresponding to the food.
The display unit is based on the output color data so that a three-dimensional image matching the real space of the manufactured shaped food is displayed in the same color as the food on the display unit of the user device attached to the user. A method of providing a food product, which comprises controlling the food.
前記信号入力部を介して受信したデータに基づき食品の形状データと色データと味データとを特定し出力するデータ出力部と、
前記データ出力部から出力された形状データと味データとを外部の三次元造形装置に出力するプリンタ制御部と、
前記三次元造形装置により製造される造形食品の三次元画像が前記食品と同一色で表示されるように前記データ出力部から出力された色データを外部のユーザ機器に出力するユーザ機器制御部と、を備えることを特徴とする食品提供システム用管理装置。A signal input unit that receives data transmitted from user equipment and robots,
A data output unit that identifies and outputs food shape data, color data, and taste data based on data received via the signal input unit.
A printer control unit that outputs the shape data and taste data output from the data output unit to an external three-dimensional modeling device, and
A user device control unit that outputs color data output from the data output unit to an external user device so that a three-dimensional image of the shaped food produced by the three-dimensional modeling device is displayed in the same color as the food. A management device for a food delivery system, which comprises.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017189797 | 2017-09-29 | ||
JP2017189797 | 2017-09-29 | ||
PCT/JP2018/034162 WO2019065304A1 (en) | 2017-09-29 | 2018-09-14 | Food provision system, food provision method, and device for managing food provision system |
Publications (1)
Publication Number | Publication Date |
---|---|
JPWO2019065304A1 true JPWO2019065304A1 (en) | 2020-12-03 |
Family
ID=65902430
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019544586A Pending JPWO2019065304A1 (en) | 2017-09-29 | 2018-09-14 | Food delivery system, food delivery method and management device for food delivery system |
Country Status (2)
Country | Link |
---|---|
JP (1) | JPWO2019065304A1 (en) |
WO (1) | WO2019065304A1 (en) |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7222000B2 (en) * | 2005-01-18 | 2007-05-22 | Intouch Technologies, Inc. | Mobile videoconferencing platform with automatic shut-off features |
ATE546077T1 (en) * | 2007-01-19 | 2012-03-15 | Nestec Sa | AUTONOMOUS FOOD AND BEVERAGE DISPENSING MACHINE |
JP6098326B2 (en) * | 2013-04-18 | 2017-03-22 | ソニー株式会社 | Information processing apparatus and storage medium |
JP2016131507A (en) * | 2015-01-16 | 2016-07-25 | 株式会社リコー | Method for producing three-dimensional molded food product, and three-dimensional molded food product |
JP6712453B2 (en) * | 2015-10-16 | 2020-06-24 | 富士フイルム株式会社 | Augmented reality providing system and method, information processing device, and program |
-
2018
- 2018-09-14 WO PCT/JP2018/034162 patent/WO2019065304A1/en active Application Filing
- 2018-09-14 JP JP2019544586A patent/JPWO2019065304A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
WO2019065304A1 (en) | 2019-04-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6155448B2 (en) | Wireless wrist computing and controlling device and method for 3D imaging, mapping, networking and interfacing | |
JP6598500B2 (en) | Viewport based augmented reality haptic effect system, method and non-transitory computer readable medium | |
US9387397B2 (en) | Peripheral apparatus and method of construction | |
EP2905972A2 (en) | System and method for producing a personalized earphone | |
CN105955456A (en) | Virtual reality and augmented reality fusion method, device and intelligent wearable equipment | |
US20200077148A1 (en) | Video distribution system, video distribution method, and storage medium storing video distribution program | |
US20150081076A1 (en) | Customization of manufactured articles responsive to remote capture of three dimensional data | |
JP7239916B2 (en) | Remote control system, information processing method, and program | |
WO2003063086A1 (en) | Image processing system, image processing apparatus, and display apparatus | |
JP7160669B2 (en) | Program, Information Processing Apparatus, and Method | |
JP7416903B2 (en) | Video distribution system, video distribution method, and video distribution program | |
WO2016209299A1 (en) | Virtual fantasy system & method of use | |
JP2007130691A (en) | Communication robot | |
JPWO2019065304A1 (en) | Food delivery system, food delivery method and management device for food delivery system | |
JP6470387B1 (en) | Method executed by computer to provide information via head-mounted device, program causing computer to execute the method, and information processing apparatus | |
WO2021145452A1 (en) | Information processing device and information processing terminal | |
JP2004042151A (en) | Communication robot | |
JP7023971B2 (en) | Service provision system, service provision method, and management device for service provision system | |
JP2008080431A (en) | Robot system | |
JP6892928B2 (en) | Information provision system, information provision method and management device for information provision system | |
US11135725B2 (en) | Robot control system, robot control method and user apparatus for robot control system | |
JP2019106192A (en) | Method executed by computer to provide information via head mount device, program causing the computer to execute the method, and information processing device | |
JP2021093105A (en) | Healthcare system and processor | |
WO2022044843A1 (en) | Information processing device, information processing method, and program | |
JP6937803B2 (en) | Distribution A video distribution system, video distribution method, and video distribution program that delivers live video including animation of character objects generated based on the movement of the user. |