JP7485916B2 - 食堂決済システム、および、食堂決済装置 - Google Patents
食堂決済システム、および、食堂決済装置 Download PDFInfo
- Publication number
- JP7485916B2 JP7485916B2 JP2020067741A JP2020067741A JP7485916B2 JP 7485916 B2 JP7485916 B2 JP 7485916B2 JP 2020067741 A JP2020067741 A JP 2020067741A JP 2020067741 A JP2020067741 A JP 2020067741A JP 7485916 B2 JP7485916 B2 JP 7485916B2
- Authority
- JP
- Japan
- Prior art keywords
- area
- face
- tray
- unit
- tableware
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000001815 facial effect Effects 0.000 claims description 47
- 235000013305 food Nutrition 0.000 claims description 14
- 239000000284 extract Substances 0.000 claims description 10
- 210000004247 hand Anatomy 0.000 claims description 10
- 210000000707 wrist Anatomy 0.000 claims description 5
- 210000000245 forearm Anatomy 0.000 description 13
- 238000000034 method Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 5
- 210000003813 thumb Anatomy 0.000 description 5
- 235000021186 dishes Nutrition 0.000 description 3
- 210000000887 face Anatomy 0.000 description 2
- 210000003811 finger Anatomy 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 238000003703 image analysis method Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 235000013361 beverage Nutrition 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 235000012054 meals Nutrition 0.000 description 1
- 235000012046 side dish Nutrition 0.000 description 1
Images
Landscapes
- Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)
Description
個人が食器別に価格が定まる飲食物を選ぶ方式の食堂に用いられる食堂決済システム(100、200)であって、
食器と食器を載せたトレーを持つ個人を撮影した画像(I)を取得するためのカメラ(91)と、
食器の種類と価格を関連付けて記憶する食器価格記憶部(21)と、
画像からトレー領域(T)を特定するトレー領域特定部(10)と、
特定されたトレー領域内にある食器の特徴を抽出して食器の種類を特定し、トレー領域内にある食器の種類と、食器価格記憶部に記憶されている記憶内容に基づいて、支払う価格を特定する食器価格特定部(20)と、
顔の特徴と個人を関連付けて記憶する顔個人記憶部(41)と、
画像から顔の領域である顔領域(F)を特定する顔領域特定部(30)と、
特定された顔領域の顔の特徴を抽出し、抽出した顔の特徴と顔個人記憶部に記憶されている記憶内容とに基づいて、支払いをする個人を特定する顔個人特定部(40)と、
トレー領域と顔領域を関連付けることで、顔個人特定部が特定した個人を支払いをする利用者とし、食器価格特定部が特定した価格を、利用者が支払う価格とする関連付け部(60)と、を備える。
画像と手形状記憶部に記憶されている記憶内容と基づいて、トレー領域の境界線上に位置する手を特定し、かつ、特定した手の手方向を特定する手方向特定部(50)と、を備え、
関連付け部は、手方向特定部が特定した両方の手の位置を通り、かつ、手方向の反対方向に延びる2本の線に挟まれた範囲にある顔領域であって、最もトレー領域に近い顔領域をトレー領域と関連付ける。
関連付け部は、顔領域特定部が特定した顔領域と同じ個人の腕領域を特定し、かつ、特定した腕領域を挟んで顔領域の反対側に位置するトレー領域を顔領域と関連付ける、食堂決済システム。
関連付け部は、顔方向を中心とした180度範囲よりも狭い所定の角度範囲に位置する腕領域を、顔領域と同じ個人の腕領域とする、こともできる。
関連付け部は、トレー領域が、顔方向特定部が特定した顔方向を基準とする所定の角度範囲から外れていないことを、トレー領域を顔領域と関連付ける条件の1つとする、こともできる。
食器の種類と価格を関連付けて記憶する食器価格記憶部(21)と、
食器と食器を載せたトレーを持つ個人を撮影した画像(I)からトレー領域(T)を特定するトレー領域特定部(10)と、
特定されたトレー領域内にある食器の特徴を抽出して食器の種類を特定し、トレー領域内にある食器の種類と、食器価格記憶部に記憶されている記憶内容に基づいて、支払う価格を特定する食器価格特定部(20)と、
顔の特徴と個人を関連付けて記憶する顔個人記憶部(41)と、
画像から顔の領域である顔領域(F)を特定する顔領域特定部(30)と、
特定された顔領域の顔の特徴を抽出し、抽出した顔の特徴と顔個人記憶部に記憶されている記憶内容とに基づいて、支払いをする個人を特定する顔個人特定部(40)と、
トレー領域と顔領域を関連付けることで、顔領域の画像から顔個人特定部が特定した個人を支払いをする利用者とし、食器価格特定部が特定した価格を、利用者が支払う価格とする関連付け部(60)と、を備える。
この食堂決済システム100では、カメラ91が撮影した画像Iから、トレー領域特定部10がトレー領域Tを特定し(S11)、また、顔領域特定部30が、画像Iから顔領域Fを特定する(S15)。そして、トレー領域Tにある食器の種類を特定し(S12)、さらに、食器の種類から支払う価格を特定する(S13、S14)。また、顔領域Fから顔の特徴を抽出し(S18)、さらに、顔の特徴から支払いをする個人Pを特定する(S19、S20)。そして特定した個人Pを利用者とし、特定した価格を、その利用者が支払う価格とする(S21)。よって、利用者と利用者が支払う価格とを関連付けることができる。
次に、第2実施形態を説明する。この第2実施形態以下の説明において、それまでに使用した符号と同一番号の符号を有する要素は、特に言及する場合を除き、それ以前の実施形態における同一符号の要素と同一である。また、構成の一部のみを説明している場合、構成の他の部分については先に説明した実施形態を適用できる。
顔方向特定部70が顔方向Dfを特定し(S34)、関連付け部60は顔方向Dfの所定の角度範囲に位置する前腕Aを、顔領域Fと同じ個人Pの前腕Aとして特定する(S36)。この構成により、利用者の顔領域Fのすぐ後に別の利用者の前腕Aが写っていた場合も、正しく、顔領域Fと前腕Aを関連付けられる。
第1実施形態及び第2実施形態においては、顔領域Fとトレー領域Tの距離を利用して関連付けているが、利用者の身体の輪郭をたどることによって顔領域Fとトレー領域Tは、関連づけてもよい。例えば、ある利用者の顔領域Fを特定した場合に、その頭部、頭部とつながる首、首とつながる肩、肩とつながる腕、腕とつながるトレーといった、輪郭から関連付けすべきトレー領域Tを特定することができる。トレー領域Tから輪郭をたどって特定する場合も同様である。
第1実施形態では、S16、S17、S22、S23により、トレー領域Tと関連付ける顔領域Fを特定していた。しかし、単に、トレー領域特定部10が特定したトレー領域Tの上方に位置する顔領域Fを、トレー領域Tと関連付ける顔領域Fとして特定してもよい。トレー領域Tの上方に位置する顔領域Fが複数ある場合、トレー領域Tに最も近い顔領域Fを、トレー領域Tと関連付ければよい。
第2実施形態において、前腕Aを特定しなくても、顔方向Dfを特定し(S34)、その顔方向Dfを基準とする所定の角度範囲内にあることを、顔領域Fに関連づけるトレー領域Tとする条件の1つとしてもよい。換言すれば、トレー領域Tが、顔方向Dfを基準とする所定の角度範囲から外れていないことを、トレー領域Tを顔領域Fと関連付ける条件の1つとしてもよい。この条件を満たす顔領域Fが複数ある場合には、さらに、距離が最も近いという条件により、顔領域Fに関連付けるトレー領域Tを特定する。角度範囲は、例として180度である。
第2実施形態では、顔方向Dfを特定しなくても、顔領域Fに最も近い腕を特定し、腕を挟んで顔領域Fの反対側にあるトレー領域Tを、顔領域Fと関連付けすべきトレー領域Tとして特定してもよい。なお、第2実施形態では、腕特定部80は、前腕Aを特定していた。しかし、腕特定部80は、前腕Aと上腕とを特定してもよい。
Claims (8)
- 個人が食器別に価格が定まる飲食物を選ぶ方式の食堂に用いられる食堂決済システム(100、200)であって、
前記食器と前記食器を載せたトレーを持つ個人を撮影した画像(I)を取得するためのカメラ(91)と、
前記食器の種類と価格を関連付けて記憶する食器価格記憶部(21)と、
前記画像からトレー領域(T)を特定するトレー領域特定部(10)と、
特定された前記トレー領域内にある前記食器の特徴を抽出して前記食器の種類を特定し、前記トレー領域内にある前記食器の種類と、前記食器価格記憶部に記憶されている記憶内容に基づいて、支払う価格を特定する食器価格特定部(20)と、
顔の特徴と個人を関連付けて記憶する顔個人記憶部(41)と、
前記画像から顔の領域である顔領域(F)を特定する顔領域特定部(30)と、
特定された前記顔領域の顔の特徴を抽出し、抽出した顔の特徴と前記顔個人記憶部に記憶されている記憶内容とに基づいて、支払いをする個人を特定する顔個人特定部(40)と、
前記トレー領域と前記顔領域を関連付けることで、前記顔個人特定部が特定した個人を支払いをする利用者とし、前記食器価格特定部が特定した価格を、前記利用者が支払う価格とする関連付け部(60)と、を備える食堂決済システム。 - 請求項1に記載の食堂決済システムであって、
前記関連付け部は、前記画像において、前記トレー領域特定部が特定した前記トレー領域よりも上方に位置する顔領域を前記トレー領域と関連付ける、食堂決済システム。 - 請求項2に記載の食堂決済システムであって、
前記関連付け部は、前記画像において、前記トレー領域特定部が特定した前記トレー領域よりも上方に位置し、かつ、前記トレー領域の長手方向の中央を通り、前記トレー領域を左右に分ける仮想線(VL)と交差する前記顔領域のうちで最も前記トレー領域に近い前記顔領域を、前記トレー領域と関連付ける、食堂決済システム。 - 請求項1に記載の食堂決済システムであって、
前記トレーの両端を両手で保持したときの1つ以上の手(H)の形状パターンと、その形状パターンにおいて手が手首から指先に向かう方向である手方向(Dh)とを記憶する手形状記憶部(51)と、
前記画像と前記手形状記憶部に記憶されている記憶内容と基づいて、前記トレー領域の境界線上に位置する手を特定し、かつ、特定した手の前記手方向を特定する手方向特定部(50)と、を備え、
前記関連付け部は、前記手方向特定部が特定した両方の手の位置を通り、かつ、前記手方向の反対方向に延びる2本の線に挟まれた範囲にある前記顔領域であって、最も前記トレー領域に近い前記顔領域を前記トレー領域と関連付ける、食堂決済システム。 - 請求項1に記載の食堂決済システムであって、
前記画像から、腕が写っている領域である腕領域を特定する腕特定部(80)を備え、
前記関連付け部は、前記顔領域特定部が特定した前記顔領域と同じ個人の腕領域を特定し、かつ、特定した前記腕領域を挟んで前記顔領域の反対側に位置する前記トレー領域を前記顔領域と関連付ける、食堂決済システム。 - 請求項5に記載の食堂決済システムであって、
前記顔領域特定部が特定した前記顔領域にある顔が向いている方向である顔方向(Df)を特定する顔方向特定部(70)を備え、
前記関連付け部は、前記顔方向を中心とした180度範囲よりも狭い所定の角度範囲に位置する腕領域を、前記顔領域と同じ個人の腕領域とする、食堂決済システム。 - 請求項1に記載の食堂決済システムであって、
前記顔領域特定部が特定した前記顔領域にある顔が向いている方向である顔方向(Df)を特定する顔方向特定部(70)を備え、
前記関連付け部は、前記トレー領域が、前記顔方向特定部が特定した前記顔方向を基準とする所定の角度範囲から外れていないことを、前記トレー領域を前記顔領域と関連付ける条件の1つとする、食堂決済システム。 - 個人が食器別に価格が定まる飲食物を選ぶ方式の食堂に用いられる食堂決済システムの食堂決済装置(92)であって、
前記食器の種類と価格を関連付けて記憶する食器価格記憶部(21)と、
前記食器と前記食器を載せたトレーを持つ個人を撮影した画像(I)からトレー領域(T)を特定するトレー領域特定部(10)と、
特定された前記トレー領域内にある食器の特徴を抽出して前記食器の種類を特定し、前記トレー領域内にある前記食器の種類と、前記食器価格記憶部に記憶されている記憶内容に基づいて、支払う価格を特定する食器価格特定部(20)と、
顔の特徴と個人を関連付けて記憶する顔個人記憶部(41)と、
前記画像から顔の領域である顔領域(F)を特定する顔領域特定部(30)と、
特定された前記顔領域の顔の特徴を抽出し、抽出した顔の特徴と前記顔個人記憶部に記憶されている記憶内容とに基づいて、支払いをする個人を特定する顔個人特定部(40)と、
前記トレー領域と前記顔領域を関連付けることで、前記顔領域の画像から前記顔個人特定部が特定した個人を支払いをする利用者とし、前記食器価格特定部が特定した価格を、前記利用者が支払う価格とする関連付け部(60)と、を備える食堂決済装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020067741A JP7485916B2 (ja) | 2020-04-03 | 2020-04-03 | 食堂決済システム、および、食堂決済装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020067741A JP7485916B2 (ja) | 2020-04-03 | 2020-04-03 | 食堂決済システム、および、食堂決済装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021163416A JP2021163416A (ja) | 2021-10-11 |
JP7485916B2 true JP7485916B2 (ja) | 2024-05-17 |
Family
ID=78005126
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020067741A Active JP7485916B2 (ja) | 2020-04-03 | 2020-04-03 | 食堂決済システム、および、食堂決済装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7485916B2 (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016038663A (ja) | 2014-08-06 | 2016-03-22 | Necプラットフォームズ株式会社 | 会計装置、会計システム、会計方法及び会計プログラム |
JP2017010550A (ja) | 2015-06-25 | 2017-01-12 | 東芝テック株式会社 | 決済装置および決済処理プログラム |
WO2018116537A1 (ja) | 2016-12-22 | 2018-06-28 | 日本電気株式会社 | 情報処理システム、顧客特定装置、情報処理方法及びプログラム |
CN207965958U (zh) | 2017-12-21 | 2018-10-12 | 陕西伟景机器人科技有限公司 | 基于图像识别的餐厅自动结账装置 |
JP2018180717A (ja) | 2017-04-06 | 2018-11-15 | 京セラドキュメントソリューションズ株式会社 | 商品精算システムおよび商品精算方法 |
-
2020
- 2020-04-03 JP JP2020067741A patent/JP7485916B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016038663A (ja) | 2014-08-06 | 2016-03-22 | Necプラットフォームズ株式会社 | 会計装置、会計システム、会計方法及び会計プログラム |
JP2017010550A (ja) | 2015-06-25 | 2017-01-12 | 東芝テック株式会社 | 決済装置および決済処理プログラム |
WO2018116537A1 (ja) | 2016-12-22 | 2018-06-28 | 日本電気株式会社 | 情報処理システム、顧客特定装置、情報処理方法及びプログラム |
JP2018180717A (ja) | 2017-04-06 | 2018-11-15 | 京セラドキュメントソリューションズ株式会社 | 商品精算システムおよび商品精算方法 |
CN207965958U (zh) | 2017-12-21 | 2018-10-12 | 陕西伟景机器人科技有限公司 | 基于图像识别的餐厅自动结账装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2021163416A (ja) | 2021-10-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
AU2013212273B2 (en) | Automated pharmaceutical pill identification | |
CN105741451B (zh) | 信息处理系统及信息处理方法 | |
US6711465B2 (en) | Vending machine having a biometric verification system for authorizing the sales of regulated products | |
CN108846621A (zh) | 一种基于策略模块的库存管理系统 | |
US5878155A (en) | Method for verifying human identity during electronic sale transactions | |
KR101744123B1 (ko) | 의약품 식별 장치 및 그 방법 | |
US20030149661A1 (en) | Method and apparatus for authenticating financial transactions | |
JP7225434B2 (ja) | 情報処理システム | |
JP6889023B2 (ja) | 受付システム | |
CN107403528A (zh) | 商品销售数据处理装置及系统、以及控制方法 | |
JP2013206232A (ja) | 自動販売機システム | |
US20170344973A1 (en) | Sales data processing apparatus and method for easily finding customer | |
CN109190706A (zh) | 无人售货方法、装置及系统 | |
JP7485916B2 (ja) | 食堂決済システム、および、食堂決済装置 | |
CN109978552A (zh) | 一种基于身份证信息的支付处理方法、装置及设备 | |
CN108389053B (zh) | 支付方法、装置、电子设备及可读存储介质 | |
US20220277311A1 (en) | A transaction processing system and a transaction method based on facial recognition | |
US20080041935A1 (en) | System And Method For Payment Of Goods Or Services | |
JP2022009877A (ja) | 管理装置及びプログラム | |
CN105913263A (zh) | 一种基于图像检测的面部支付平台的使用方法 | |
JP2022066042A (ja) | 注文システム及び決済システム | |
WO1995013591A1 (en) | Fingerprint analyzing and encoding system | |
JP4762572B2 (ja) | 生体認証装置の委任者情報登録方法、生体認証装置の認証方法及び生体認証装置 | |
JP3608067B2 (ja) | 自動取引システム | |
JP3234040B2 (ja) | 衣服適合性判断システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230327 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20240222 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240402 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240415 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7485916 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |