JP3215597U - Display system with multimedia identification function with image identification function - Google Patents

Display system with multimedia identification function with image identification function Download PDF

Info

Publication number
JP3215597U
JP3215597U JP2018000190U JP2018000190U JP3215597U JP 3215597 U JP3215597 U JP 3215597U JP 2018000190 U JP2018000190 U JP 2018000190U JP 2018000190 U JP2018000190 U JP 2018000190U JP 3215597 U JP3215597 U JP 3215597U
Authority
JP
Japan
Prior art keywords
function
product
shopping
display system
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2018000190U
Other languages
Japanese (ja)
Inventor
聰源 蔡
聰源 蔡
Original Assignee
蔡聰源
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 蔡聰源 filed Critical 蔡聰源
Application granted granted Critical
Publication of JP3215597U publication Critical patent/JP3215597U/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

【課題】ユーザーが実店舗でお薦め商品広告を見て、表示画面上にて提供される商品バーコードをスキャンしてインターネット上で注文し、その場で購入手続きを行える、画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステムを提供する。【解決手段】商品を置くのに用いられるディスプレイラック12を含み、各ディスプレイラックは、ユーザーの顔画像を取り込む画像取込装置14と、画像取込装置に電気的接続され、顔画像を受信するとともに顔認識を行い、設定条件に基づき複数の商品広告の中から顔画像に適合するものを検索するコントローラー16と、コントローラーに電気的接続され、顔画像に適合した商品広告及び対応する商品バーコードを表示し、ユーザーがモバイルデバイスを用いて商品バーコードをスキャンすることにより購入または予約購入を行えるようにする表示画面18とを含む。【選択図】図1[PROBLEMS] To provide an image identification function that allows a user to view a recommended product advertisement in an actual store, scan a product barcode provided on a display screen, place an order on the Internet, and perform a purchase procedure on the spot. A display system combining multimedia shopping functions is provided. A display rack is used for placing merchandise, and each display rack is electrically connected to an image capturing device for capturing a user's face image, and receives the face image. A controller 16 that performs face recognition and searches a plurality of product advertisements that match the face image based on setting conditions, and a product advertisement that is electrically connected to the controller and conforms to the face image, and a corresponding product barcode And a display screen 18 that allows the user to make purchases or reserved purchases by scanning a product barcode using a mobile device. [Selection] Figure 1

Description

本考案は、ディスプレイラックに関し、特に、画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステムに関する。   The present invention relates to a display rack, and more particularly to a display system having an image identification function and a multimedia shopping function.

消費習慣の変化に伴い、例えば家の中でのインターネットショッピングや、実店舗に行って買い物する際のモバイルデバイスの決済ソフトによる支払いのような、電子ショッピングの利用がますます習慣化している。   With changes in consumption habits, the use of electronic shopping, such as Internet shopping at home, and payment with payment software for mobile devices when shopping at a physical store, is becoming more and more customary.

実店舗の利点は実際の商品を直接見られることにあるが、同じタイプの商品が多数ある場合は、どれがより良いかわからず、店員にアドバイスをもらったり携帯電話を使ってインターネットで調べたりする必要があり、時間を浪費してしまう。また実店舗においては、レジが混んでいる場合に待ち時間が長くなるという問題もあるので、実店舗で手にした商品をその場でモバイルデバイスにより直接精算ができれば、消費者が精算に要する時間を大幅に節約でき、店舗の人件費負担も軽減できる。   The advantage of a real store is that you can see the actual product directly, but if there are many products of the same type, you can't know which one is better, get advice from the store clerk or look up on the Internet using a mobile phone Need to be done and waste time. In addition, there is a problem that the waiting time becomes longer when the cash register is crowded at the actual store. Therefore, if the product obtained at the actual store can be directly settled on the spot with a mobile device, the time required for the consumer to settle Can be saved significantly, and the labor cost of the store can be reduced.

したがって、上述の問題を効果的に解決すべく、本考案の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステムを提案する。具体的な構造及びその実施形態については以下に詳述する。   Accordingly, in order to effectively solve the above-described problem, a display system is proposed that combines the multimedia shopping function with the image identification function of the present invention. A specific structure and an embodiment thereof will be described in detail below.

本考案の主な目的は、画像認識及び広告プッシュ機能を備える表示モジュールをディスプレイラック上に設置することで、ユーザーの顔の特徴を認識した後にお薦め商品広告を表示し、ユーザーの購買意欲を高められる、画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステムを提供することにある。   The main purpose of the present invention is to install a display module with image recognition and advertisement push functions on the display rack, to display recommended product advertisements after recognizing the features of the user's face, and to increase the user's willingness to purchase Another object of the present invention is to provide a display system that has an image identification function and is combined with a multimedia shopping function.

本考案のもう1つの目的は、ディスプレイラック上に表示された商品広告及び商品バーコードとモバイルデバイス中のショッピングアプリケーションをリンクさせ、モバイルデバイスを用いて商品バーコードをスキャンすることで、店舗にてモバイルデバイスによる購入又は予約購入が行える、画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステムを提供することにある。   Another object of the present invention is to link the product advertisement and product barcode displayed on the display rack with the shopping application in the mobile device, and scan the product barcode using the mobile device. It is an object of the present invention to provide a display system that has an image identification function and can be combined with a multimedia shopping function and can be purchased by a mobile device or reserved.

上述の目的を達成するため、本考案が提供する画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステムは、商品を置くのに用いられる少なくとも1つのディスプレイラックを含み、各前記ディスプレイラックはそれぞれ画像取込装置、コントローラー及び表示画面を含む。前記画像取込装置は、ユーザーの顔画像を取り込むのに用いられる。前記コントローラーは、前記画像取込装置に電気的接続され、前記顔画像を受信するとともに顔認識を行い、少なくとも1つの設定条件に基づき複数の商品広告の中から前記顔画像に適合するものを少なくとも1つ検索する。前記表示画面は、前記コントローラーに電気的接続され、前記顔画像に適合した前記商品広告及び対応する商品バーコードを表示し、前記ユーザーがモバイルデバイスを用いて前記商品バーコードをスキャンすることにより購入または予約購入を行えるようにする。   In order to achieve the above object, a display system provided with an image identification function and combined with a multimedia shopping function provided by the present invention includes at least one display rack used for placing goods, and each display rack includes Each includes an image capture device, controller and display screen. The image capturing device is used to capture a user's face image. The controller is electrically connected to the image capturing device, receives the face image and performs face recognition, and at least one that matches the face image from a plurality of product advertisements based on at least one setting condition Search for one. The display screen is electrically connected to the controller and displays the product advertisement and the corresponding product barcode that match the face image, and the user purchases the product barcode by scanning using a mobile device. Or make a reservation purchase.

前記コントローラーは前記表示画面の後方ケース内に設けられる。   The controller is provided in a rear case of the display screen.

前記少なくとも1つの設定条件には性別及び年齢層が含まれる。   The at least one setting condition includes a sex and an age group.

前記表示画面上には、前記商品広告の音声を再生して販売促進および音声ショッピングガイドを行うスピーカーが設けられる。   On the display screen, a speaker is provided that reproduces the voice of the product advertisement to provide sales promotion and voice shopping guide.

本考案は、前記ディスプレイラック上に設けられて少なくとも1つの後端サーバーに信号的接続されるレジスターホストをさらに含み、前記ユーザーが前記モバイルデバイスを携帯していない場合、前記ユーザーは前記レジスターホストを操作して購入または予約購入を行う。   The present invention further includes a register host provided on the display rack and signally connected to at least one rear-end server, and when the user does not carry the mobile device, the user uses the register host. Operate to make a purchase or reservation purchase.

さらに、前記レジスターホストは前記ディスプレイラックの中間台上に設けられる。前記レジスターホストはタッチパネル式ホスト又は一般的なコンピューターホストである。   Further, the register host is provided on an intermediate stage of the display rack. The register host is a touch panel type host or a general computer host.

前記レジスターホストは、前記商品のパッケージの二次元バーコードをスキャンして前記レジスターホストに入力するスキャナーを含む。前記レジスターホスト上には、精算金額を表示する表示装置が設置される。   The register host includes a scanner that scans and inputs a two-dimensional barcode of the product package to the register host. A display device for displaying the settlement amount is installed on the register host.

本考案において、前記モバイルデバイスにはショッピングアプリケーションがインストールされ、当該ショッピングアプリケーションのバーコードスキャン機能を用いて前記商品の前記商品バーコードをスキャンするとともに、前記商品を前記ショッピングアプリケーションのショッピングカートに入れる。   In the present invention, a shopping application is installed on the mobile device, and the product barcode of the product is scanned using the barcode scanning function of the shopping application, and the product is placed in a shopping cart of the shopping application.

続いて、前記ユーザーは前記モバイルデバイスの前記ショッピングアプリケーションにおいて支払い方法を選択し、前記支払い方法にはクレジットカード払い、銀行振り込み、宅配受け取り時の代金引換、店頭受け取り時の代金引換等が含まれる。   Subsequently, the user selects a payment method in the shopping application of the mobile device, and the payment method includes credit card payment, bank transfer, cash on delivery at home delivery, cash on delivery at store reception, and the like.

さらに、前記ユーザーは前記モバイルデバイスの前記ショッピングアプリケーションにおいて商品受け取り方法を選択し、前記商品受け取り方法には宅配、郵送、店頭受け取り等が含まれる。   Further, the user selects a product receiving method in the shopping application of the mobile device, and the product receiving method includes home delivery, mailing, store reception, and the like.

本考案の実施例において、前記商品バーコードはQRコード(登録商標)である。   In an embodiment of the present invention, the product barcode is a QR code (registered trademark).

本考案の実施例において、前記コントローラーは、インターネットを通じて少なくとも1つの後端サーバーと信号的接続され、前記ユーザーの前記顔画像から認識された特徴、適合した前記少なくとも1つの商品広告及び前記ユーザーの購入記録を前記少なくとも1つの後端サーバーに伝送し、統計及びビッグデータ分析を行う。   In an embodiment of the present invention, the controller is connected in signal with at least one back-end server through the Internet, and the features recognized from the face image of the user, the adapted at least one product advertisement and the purchase of the user. Records are transmitted to the at least one trailing server for statistical and big data analysis.

前記表示画面は一般的なディスプレイ又はタッチパネルスクリーンである。前記表示画面がタッチパネルスクリーンである場合、前記表示画面上には前記ユーザーがタップできるように複数の機能ボタンが表示される。   The display screen is a general display or a touch panel screen. When the display screen is a touch panel screen, a plurality of function buttons are displayed on the display screen so that the user can tap.

前記画像取込装置はカメラ、ビデオカメラ又はウェブカメラ(Webcam)である。   The image capturing device is a camera, a video camera, or a web cam.

本考案が提供する画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステムは、画像取込、画像認識及び広告プッシュ機能を組み合わせた表示モジュールがディスプレイラック上に設置され、ユーザーの顔の特徴を認識した後、ユーザーの条件に適合するお薦め商品広告を表示し、ユーザーの購買意欲を高められる。また、ディスプレイラック上に表示された商品広告及び商品バーコードとモバイルデバイス中のショッピングアプリケーションをリンクさせ、モバイルデバイスを用いて商品バーコードをスキャンすることで、店舗のその場でモバイルデバイスによる購入又は予約購入を行うことができ、店員のいるレジで精算する必要がない。   The display system provided with the image identification function provided by the present invention and combined with the multimedia shopping function has a display module that combines image capture, image recognition and advertisement push functions installed on the display rack, and features of the user's face After recognizing, the recommended product advertisement that matches the user's condition is displayed, and the user's willingness to purchase can be enhanced. In addition, by linking the product advertisement and product barcode displayed on the display rack with the shopping application in the mobile device and scanning the product barcode using the mobile device, purchase or mobile device on the spot of the store Pre-orders can be made and there is no need to pay at the cash register where the store clerk is.

本考案の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステムの実施例の斜視図である。1 is a perspective view of an embodiment of a display system having an image identification function and a multimedia shopping function according to the present invention. 本考案の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステムの実施例のブロック図である。1 is a block diagram of an embodiment of a display system having an image identification function and a multimedia shopping function according to the present invention. 本考案の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステムの実施例の応用フローチャートである。3 is an application flowchart of an embodiment of a display system having an image identification function and a multimedia shopping function according to the present invention. 本考案の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステムの他の実施例の斜視図である。FIG. 6 is a perspective view of another embodiment of a display system having an image identification function and a multimedia shopping function according to the present invention. 本考案の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステムの他の実施例のブロック図である。FIG. 10 is a block diagram of another embodiment of a display system having an image identification function and a multimedia shopping function according to the present invention. 本考案の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステムの他の実施例の応用フローチャートである。6 is an application flowchart of another embodiment of a display system having an image identification function and a multimedia shopping function according to the present invention.

本考案は画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステムを提供する。図1は本考案の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム10の実施例の斜視図であり、図2は同実施例のブロック図であるので、同時に参照されたい。本考案の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム10は商品を置くのに用いられるディスプレイラック12を含み、ディスプレイラック12上には画像取込装置14、コントローラー16及び表示画面18を含む。画像取込装置14は、カメラ、ビデオカメラ又はウェブカメラ(Webcam)であり、ユーザーの顔画像を取り込むのに用いられる。コントローラー16は、計算機能を備えたコンピューターであり、画像取込装置14と電気的接続され、画像取込装置14が取り込んだ顔画像を受信するとともに顔認識を行う。また、コントローラー16には複数の商品広告が保存され、性別、年齢層等のような設定条件が少なくとも1つ予め設けられ、異なる性別、年齢層は少なくとも1つの適合する商品広告に呼応し、コントローラー16は設定条件に基づきこれらの商品広告の中からユーザーの顔画像に適合する商品広告を少なくとも1つ検索する。表示画面18は、コントローラー16に電気的接続され、顔画像に適合した商品広告を表示すると同時に、上記商品広告に対応する商品バーコードも表示する。本考案の一実施例において、商品バーコードはQRコードであり、ユーザーはモバイルデバイス(図示せず)を用いて商品バーコードをスキャンすることにより購入または予約購入を行う。   The present invention provides a display system having an image identification function and a multimedia shopping function. FIG. 1 is a perspective view of an embodiment of a display system 10 having an image identification function and a multimedia shopping function according to the present invention, and FIG. 2 is a block diagram of the embodiment. A display system 10 having an image identification function and a multimedia shopping function according to the present invention includes a display rack 12 that is used to place products. On the display rack 12, an image capturing device 14, a controller 16, and a display screen are provided. 18 is included. The image capturing device 14 is a camera, a video camera, or a web camera (Webcam), and is used to capture a user's face image. The controller 16 is a computer having a calculation function, and is electrically connected to the image capturing device 14 to receive a face image captured by the image capturing device 14 and perform face recognition. In addition, a plurality of product advertisements are stored in the controller 16, and at least one setting condition such as gender and age group is provided in advance, and different genders and age groups respond to at least one suitable product advertisement, and the controller 16 searches for at least one product advertisement that matches the user's face image from these product advertisements based on the set condition. The display screen 18 is electrically connected to the controller 16 and displays a product advertisement suitable for the face image, and also displays a product barcode corresponding to the product advertisement. In one embodiment of the present invention, the product barcode is a QR code, and the user makes a purchase or reservation purchase by scanning the product barcode using a mobile device (not shown).

本考案において、コントローラー16は、表示画面18の後方ケース内に設けられるが、表示画面18の外に独立してディスプレイラック12中に隠されていてもよい。   In the present invention, the controller 16 is provided in the rear case of the display screen 18, but may be hidden in the display rack 12 independently outside the display screen 18.

表示画面18上には、商品広告の音声を再生して販売促進および音声ショッピングガイドを行うスピーカー19が設けられる。表示画面18は、一般的なディスプレイ又はタッチパネルスクリーンであり、図1の実施例では直立で設置されている。表示画面18がタッチパネルスクリーンである場合、表示画面18上にはユーザーがタップできるように、例えば「人気商品」、「学生向け」、「最新商品予約」等の項目の機能ボタンが複数表示され、その中の1つの機能ボタンが選択されると、表示画面18上に関連商品及びその商品バーコードがさらに表示され、ユーザーがスキャンして選択購入できるようになる。   On the display screen 18, a speaker 19 is provided that reproduces the sound of a product advertisement and performs sales promotion and a voice shopping guide. The display screen 18 is a general display or a touch panel screen, and is installed upright in the embodiment of FIG. When the display screen 18 is a touch panel screen, a plurality of function buttons for items such as “popular products”, “for students”, “latest product reservation”, etc. are displayed on the display screen 18 so that the user can tap them. When one of the function buttons is selected, the related products and their product barcodes are further displayed on the display screen 18 so that the user can scan and select them.

ユーザーは、モバイルデバイスにショッピングアプリケーションをインストールし、このショッピングアプリケーションのバーコードスキャン機能を用いて商品バーコードをスキャンし、商品をショッピングアプリケーションのショッピングカートに入れることが可能である。最後の精算時に、ユーザーはモバイルデバイスのショッピングアプリケーションにおいて支払い方法及び商品受け取り方法を選択する。支払い方法にはクレジットカード払い、銀行振り込み、宅配受け取り時の代金引換、店頭受け取り時の代金引換等が含まれ、商品受け取り方法には宅配、郵送、店頭受け取り等が含まれる。   A user can install a shopping application on the mobile device, scan a product barcode using the barcode scanning function of the shopping application, and place the product in a shopping cart of the shopping application. At the last checkout, the user selects a payment method and a merchandise receipt method in the mobile device shopping application. Payment methods include credit card payment, bank transfer, cash on delivery at home delivery, cash on delivery at store front, etc., and product receipt methods include home delivery, mail, store front receipt and the like.

図3は本考案の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステムの実施例の応用フローチャートである。ステップS10では、表示画面前を通りかかった、又はそこで立ち止まったユーザーの顔画像を画像取込装置がスキャンし、ステップS12では、コントローラーが上記顔画像を受信するとともに顔認識を行い、例えば顔画像の特徴点を探し出し、その人が男性か女性か、どの年齢層に属するかを判断する。続いてステップS14では、コントローラーが少なくとも1つの設定条件に基づき複数の商品広告の中から顔画像と適合する商品広告を検索し、ステップS16では、表示画面により顔画像に適合した上記商品広告及び対応する商品バーコードを表示する。最後にステップS18で述べるように、ユーザーはモバイルデバイスを用いて商品バーコードをスキャンした後、モバイルデバイス上で購入または予約購入を行うことができる。   FIG. 3 is an application flowchart of an embodiment of a display system having an image identification function and a multimedia shopping function according to the present invention. In step S10, the image capturing device scans the face image of the user who has passed or stopped in front of the display screen. In step S12, the controller receives the face image and performs face recognition. Find the feature points and determine whether the person is male or female and to which age group. Subsequently, in step S14, the controller searches for a product advertisement that matches the face image from a plurality of product advertisements based on at least one setting condition. In step S16, the product advertisement that matches the face image on the display screen and the corresponding response. Display the product barcode to be used. Finally, as described in step S18, the user can make a purchase or reservation purchase on the mobile device after scanning the product barcode using the mobile device.

例を挙げると、23歳の女性ユーザーがディスプレイラック前に立ち止まると、画像取込装置は彼女の顔画像を取り込んだ後、顔認識により、その人が女性であり、20〜30歳の年齢層に属すると判断し、保存されている商品広告の中から「女性」、「20〜30歳の年齢層」に適合する商品を選び出し、商品広告を表示してユーザーに見せる。ユーザーは上記商品を気に入ったら、モバイルデバイスにインストールされたショッピングアプリケーションを開き、上記商品バーコードをスキャンして上記商品をショッピングカートに入れる。ユーザーは表示画面を操作することもでき、例えば、「人気商品」の機能項目をタッチして選択し、又は検索機能を利用して商品を検索し、リストアップされた各商品には同様にスキャン可能な商品バーコードが付いている。ユーザーは選択を完了した後、ショッピングアプリケーションにおいて精算作業を行い、支払い方法及び商品受け取り方法を選択し、商品在庫があるか予約購入するかにかかわらず、ショッピングアプリケーションにおいて購入手続きを完了できる。   For example, when a 23-year-old female user stops in front of the display rack, the image capture device captures her face image, and then, by facial recognition, the person is a woman, and the age group of 20-30 years old From among the stored product advertisements, products that match “female” and “age group of 20 to 30 years old” are selected, and the product advertisement is displayed to the user. If the user likes the product, he opens a shopping application installed on the mobile device, scans the product barcode and places the product in the shopping cart. The user can also operate the display screen, for example, touch and select the function item “Popular Products”, or search for products using the search function, and scan each listed product in the same way With possible merchandise barcodes. After completing the selection, the user performs a checkout operation in the shopping application, selects a payment method and a product receiving method, and can complete the purchase procedure in the shopping application regardless of whether the product is in stock or pre-ordered.

本考案は、複数のディスプレイラックを含んでもよい。本考案の他の実施例の斜視図である図4と同実施例のブロック図である図5を同時に参照されたい。各ディスプレイラック12上にはそれぞれ、画像取込装置14、コントローラー16及び表示画面18を含み、さらに中間台22を設け、中間台22上にはレジスターホスト24を設け、レジスターホスト24は少なくとも1つの後端サーバー20に信号的接続される。   The present invention may include a plurality of display racks. Please refer to FIG. 4 which is a perspective view of another embodiment of the present invention and FIG. 5 which is a block diagram of the embodiment. Each display rack 12 includes an image capturing device 14, a controller 16, and a display screen 18. Further, an intermediate stand 22 is provided. A register host 24 is provided on the intermediate stand 22, and the register host 24 includes at least one register host 24. A signal connection is made to the rear-end server 20.

本考案は、ユーザーが上述した図3のフローチャートに沿ってモバイルデバイスによるショッピングを行うことができるだけでなく、ユーザーは、モバイルデバイスを携帯していない場合、レジスターホスト24を操作して購入又は予約購入を行うこともできる。レジスターホスト24は、タッチパネル式ホスト又は一般的なコンピューターホストであり、レジスターホスト24には、商品パッケージの二次元バーコードをスキャンしてレジスターホスト24に入力するのに用いられるスキャナー(図中未表示)が含まれる。レジスターホスト24上にはさらに、精算金額を表示するのに用いられる表示装置26が設置される。   The present invention not only enables the user to perform shopping with the mobile device according to the flowchart of FIG. 3 described above, but also the user operates the register host 24 to purchase or make a reservation purchase when the mobile device is not carried. Can also be done. The register host 24 is a touch panel type host or a general computer host. The register host 24 scans a two-dimensional barcode of a product package and inputs it to the register host 24 (not shown in the figure). ) Is included. On the register host 24, a display device 26 used for displaying the settlement amount is further installed.

図6は本考案の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステムの実施例の応用フローチャートである。同図と図3のステップS10からステップS16はいずれも同じである。ステップS10では、表示画面前を通りかかった、又はそこで立ち止まったユーザーの顔画像を画像取込装置がスキャンし、ステップS12では、コントローラーが上記顔画像を受信するとともに顔認識を行い、例えば顔画像の特徴点を探し出し、その人が男性か女性か、どの年齢層に属するかを判断する。続いてステップS14では、コントローラーが少なくとも1つの設定条件に基づき複数の商品広告の中から顔画像と適合する商品広告を検索し、ステップS16では、表示画面により顔画像に適合した上記商品広告及び対応する商品バーコードを表示する。   FIG. 6 is an application flowchart of an embodiment of a display system having an image identification function and a multimedia shopping function according to the present invention. The steps S10 to S16 in FIG. 3 and FIG. 3 are the same. In step S10, the image capturing device scans the face image of the user who has passed or stopped in front of the display screen. In step S12, the controller receives the face image and performs face recognition. Find the feature points and determine whether the person is male or female and to which age group. Subsequently, in step S14, the controller searches for a product advertisement that matches the face image from a plurality of product advertisements based on at least one setting condition. In step S16, the product advertisement that matches the face image on the display screen and the corresponding response. Display the product barcode to be used.

この時点で、ユーザーがモバイルデバイスを携帯していな場合、またはモバイルデバイスにショッピングアプリケーションがインストールされていない場合は、図3とは異なるステップに進む。ステップS20で述べるように、ユーザーは商品を中間台22に持っていき、直接レジスターホスト24を操作して購入又は予約購入を行うことができる。ユーザーがスキャナーを用いて商品パッケージ上の二次元バーコードをスキャンすると、商品情報がレジスターホスト24に入力され、表示装置26上に商品金額が表示される。ユーザーが購入したい商品を全てスキャンした後、精算を選択すると、商品金額を合計した精算金額が表示装置26上に表示され、ユーザーはそれを確認した後、同様にレジスターホスト24上で支払い方法及び商品受け取り方法を選択し、商品在庫があるか予約購入するかにかかわらず、レジスターホスト24上で購入又は予約購入を行うことができる。   At this point, if the user does not carry the mobile device or if the shopping application is not installed on the mobile device, the process proceeds to a step different from FIG. As described in step S20, the user can bring the product to the intermediate table 22 and directly operate the register host 24 to make a purchase or reservation purchase. When the user scans the two-dimensional barcode on the product package using the scanner, the product information is input to the register host 24 and the product price is displayed on the display device 26. When the user scans all the products he / she wishes to purchase and selects settlement, the settlement amount summed up of the commodity amounts is displayed on the display device 26, and after confirming it, the user confirms the payment method and A product receiving method is selected, and purchase or reservation purchase can be performed on the register host 24 regardless of whether the product is in stock or reserved.

本考案の実施例では、コントローラーは、インターネットを通じて後端サーバーと信号的接続され、ユーザーの顔画像から認識された特徴、適合した商品広告及びユーザーの購入記録等の情報を後端サーバーに伝送し、統計及びビッグデータ分析を行う。   In the embodiment of the present invention, the controller is signal-connected to the rear end server through the Internet, and transmits information such as features recognized from the user's face image, suitable product advertisements, and user purchase records to the rear end server. Perform statistical and big data analysis.

上述の記載は本考案の好ましい実施例の説明に過ぎず、本考案の実施範囲を限定するものではない。したがって、本考案の実用新案登録請求の範囲に記載された特徴及び精神に基づく均等な変更や潤色は全て、本考案の実用新案登録請求の範囲内に含まれる。   The above description is only a description of a preferred embodiment of the present invention, and does not limit the scope of the present invention. Therefore, all the equivalent changes and color variations based on the features and spirit described in the claims for utility model registration of the present invention are included in the claims for utility model registration of the present invention.

10 画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム
12 ディスプレイラック
14 画像取込装置
16 コントローラー
18 表示画面
19 スピーカー
20 後端サーバー
22 中間台
24 レジスターホスト
26 表示装置
10 Display System 12 with Image Identification Function and Combined with Multimedia Shopping Function 12 Display Rack 14 Image Capture Device
16 controller
18 Display screen 19 Speaker 20 Rear end server 22 Intermediate stand 24 Register host 26 Display device

Claims (17)

商品を置くのに用いられる少なくとも1つのディスプレイラックを含み、
前記ディスプレイラックはそれぞれ、
ユーザーの顔画像を取り込む画像取込装置と、
前記画像取込装置に電気的接続され、前記顔画像を受信するとともに顔認識を行い、少なくとも1つの設定条件に基づき複数の商品広告の中から前記顔画像に適合するものを少なくとも1つ検索する、コントローラーと、
前記コントローラーに電気的接続され、前記ユーザーの前記顔画像に適合した前記少なくとも1つの商品広告及び対応する商品バーコードを表示し、前記ユーザーがモバイルデバイスを用いて前記商品バーコードをスキャンすることにより購入または予約購入を行えるようにする、表示画面と、
を含む、画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム。
Including at least one display rack used to place goods;
Each of the display racks is
An image capture device that captures a user's face image;
It is electrically connected to the image capturing device, receives the face image and recognizes the face, and searches for at least one matching a face image from a plurality of product advertisements based on at least one setting condition. , The controller,
Displaying the at least one product advertisement and a corresponding product barcode that are electrically connected to the controller and adapted to the face image of the user, and wherein the user scans the product barcode using a mobile device; A display screen that allows you to make purchases or pre-orders,
A display system that combines the multimedia shopping function with an image identification function.
前記コントローラーは前記表示画面の後方ケース内に設けられる、請求項1に記載の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム。   The display system according to claim 1, wherein the controller is provided in a rear case of the display screen and has an image identification function and a multimedia shopping function. 前記少なくとも1つの設定条件には性別及び年齢層が含まれる、請求項1に記載の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム。   The display system according to claim 1, wherein the at least one setting condition includes a gender and an age group, and the image shopping function is combined with a multimedia shopping function. 前記表示画面上には、前記商品広告の音声を再生して販売促進および音声ショッピングガイドを行うスピーカーが設けられる、請求項1に記載の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム。   The display system having an image identification function and a multimedia shopping function according to claim 1, wherein a speaker is provided on the display screen for reproducing the voice of the product advertisement to perform sales promotion and voice shopping guide. . 前記ディスプレイラック上に設けられ、少なくとも1つの後端サーバーに信号的接続されるレジスターホストをさらに含み、前記ユーザーが前記モバイルデバイスを携帯していない場合、前記ユーザーは前記レジスターホストを操作して購入または予約購入を行う、請求項1に記載の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム。   And further comprising a register host provided on the display rack and signally connected to at least one rear server, wherein the user operates the register host to purchase when the user does not carry the mobile device. Alternatively, a display system that combines the multimedia shopping function with the image identification function according to claim 1 for making a reservation purchase. 前記レジスターホストは前記ディスプレイラックの中間台上に設けられる、請求項5に記載の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム。   6. The display system according to claim 5, wherein the register host is provided on an intermediate platform of the display rack and has an image identification function and a multimedia shopping function. 前記レジスターホストは、前記商品のパッケージの二次元バーコードをスキャンして前記レジスターホストに入力するスキャナーを含む、請求項5に記載の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム。   The display system according to claim 5, wherein the register host includes a scanner that scans a two-dimensional bar code of the package of the product and inputs the barcode to the register host. 前記レジスターホスト上には、精算金額を表示する表示装置が設置される、請求項5に記載の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム。   6. The display system according to claim 5, wherein a display device for displaying a settlement amount is installed on the register host, the image shopping function being provided and a multimedia shopping function being combined. 前記レジスターホストはタッチパネル式ホスト又は一般的なコンピューターホストである、請求項5に記載の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム。   The display system according to claim 5, wherein the register host is a touch panel type host or a general computer host, and has an image identification function and a multimedia shopping function. 前記モバイルデバイスにはショッピングアプリケーションがインストールされ、当該ショッピングアプリケーションのバーコードスキャン機能を用いて前記商品の前記商品バーコードをスキャンするとともに、前記商品を前記ショッピングアプリケーションのショッピングカートに入れる、請求項1に記載の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム。   The shopping application is installed on the mobile device, and the product barcode of the product is scanned using the barcode scanning function of the shopping application, and the product is placed in a shopping cart of the shopping application. A display system that combines the multimedia shopping function with the described image identification function. 前記ユーザーは前記モバイルデバイスの前記ショッピングアプリケーションにおいて支払い方法を選択し、前記支払い方法にはクレジットカード払い、銀行振り込み、宅配受け取り時の代金引換、店頭受け取り時の代金引換等が含まれる、請求項10に記載の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム。   The user selects a payment method in the shopping application of the mobile device, and the payment method includes credit card payment, bank transfer, cash on delivery at home delivery, cash on delivery at store reception, etc. A display system that combines the multimedia shopping function with the image identification function described in 1. 前記ユーザーは前記モバイルデバイスの前記ショッピングアプリケーションにおいて商品受け取り方法を選択し、前記商品受け取り方法には宅配、郵送、店頭受け取り等が含まれる、請求項10に記載の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム。   The multimedia shopping with image identification function according to claim 10, wherein the user selects a product receiving method in the shopping application of the mobile device, and the product receiving method includes home delivery, mail, store reception, etc. A display system that combines functions. 前記商品バーコードはQRコード(登録商標)である、請求項1に記載の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム。   The display system according to claim 1, wherein the product bar code is a QR code (registered trademark) and has an image identification function and a multimedia shopping function. 前記コントローラーは、インターネットを通じて少なくとも1つの後端サーバーと信号的接続され、前記ユーザーの前記顔画像から認識された特徴、適合した前記少なくとも1つの商品広告及び前記ユーザーの購入記録を前記少なくとも1つの後端サーバーに伝送し、ビッグデータ分析を行う、請求項1に記載の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム。   The controller is connected in signal with at least one back-end server through the Internet, and the features recognized from the face image of the user, the adapted at least one product advertisement and the purchase record of the user are stored in the at least one back. 2. A display system having an image identification function according to claim 1 and combined with a multimedia shopping function, which is transmitted to an end server and performs big data analysis. 前記表示画面は一般的なディスプレイ又はタッチパネルスクリーンである、請求項1に記載の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム。   The display system according to claim 1, wherein the display screen is a general display or a touch panel screen, and the image shopping function is combined with a multimedia shopping function. 前記表示画面がタッチパネルスクリーンである場合、前記表示画面上には前記ユーザーがタップできるように複数の機能ボタンが表示される、請求項15に記載の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム。   16. When the display screen is a touch panel screen, a plurality of function buttons are displayed on the display screen so that the user can tap them. Display system. 前記画像取込装置はカメラ、ビデオカメラ又はウェブカメラ(Webcam)である、請求項1に記載の画像識別機能を備えてマルチメディアショッピング機能を組み合わせたディスプレイシステム。   The display system according to claim 1, wherein the image capturing device is a camera, a video camera, or a webcam (Webcam) and has an image identification function and a multimedia shopping function.
JP2018000190U 2017-12-15 2018-01-19 Display system with multimedia identification function with image identification function Expired - Fee Related JP3215597U (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
TW106218614U TWM560634U (en) 2017-12-15 2017-12-15 Display system with image recognition and combined with multimedia-based shopping
TW106218614 2017-12-15

Publications (1)

Publication Number Publication Date
JP3215597U true JP3215597U (en) 2018-03-29

Family

ID=61756475

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018000190U Expired - Fee Related JP3215597U (en) 2017-12-15 2018-01-19 Display system with multimedia identification function with image identification function

Country Status (2)

Country Link
JP (1) JP3215597U (en)
TW (1) TWM560634U (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108711072A (en) * 2018-05-10 2018-10-26 西安万像电子科技有限公司 Data processing method and data processing system
CN109509061A (en) * 2018-10-31 2019-03-22 广州慧睿思通信息科技有限公司 Purchase method, device, system and storage medium based on artificial intelligence
CN110674389A (en) * 2018-07-03 2020-01-10 中光电智能云服股份有限公司 Commodity recommending and displaying system and method thereof
CN111340523A (en) * 2020-01-17 2020-06-26 北京鸿途信达科技股份有限公司 Advertisement putting method and device and computer storage medium
KR102322310B1 (en) * 2020-12-04 2021-11-08 이경세 Advertisement Apparatus based on Visitor at Store and Method thereof

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI730387B (en) 2019-08-28 2021-06-11 財團法人工業技術研究院 Integrated system of physical consumption environment and network consumption environment and control method thereof
TWI735135B (en) * 2020-01-10 2021-08-01 佳世達科技股份有限公司 Electronic shelf system

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108711072A (en) * 2018-05-10 2018-10-26 西安万像电子科技有限公司 Data processing method and data processing system
CN110674389A (en) * 2018-07-03 2020-01-10 中光电智能云服股份有限公司 Commodity recommending and displaying system and method thereof
CN109509061A (en) * 2018-10-31 2019-03-22 广州慧睿思通信息科技有限公司 Purchase method, device, system and storage medium based on artificial intelligence
CN111340523A (en) * 2020-01-17 2020-06-26 北京鸿途信达科技股份有限公司 Advertisement putting method and device and computer storage medium
KR102322310B1 (en) * 2020-12-04 2021-11-08 이경세 Advertisement Apparatus based on Visitor at Store and Method thereof

Also Published As

Publication number Publication date
TWM560634U (en) 2018-05-21

Similar Documents

Publication Publication Date Title
JP3215597U (en) Display system with multimedia identification function with image identification function
RU2727084C1 (en) Device and method for determining order information
CN208188867U (en) One kind is for nobody self-service product identification system
US9361501B2 (en) Headheld scanner and POS display with mobile phone
CN106971336A (en) The method and device of online shopping
US20130117153A1 (en) Fully interactive, wireless, retail video display tag, integrated with content distribution, data management, feedback data collection, inventory and product price search capabilities
US10758066B2 (en) Methods and a system for self-checkout processing
WO2012075589A1 (en) Method and system for virtual shopping
WO2020119566A1 (en) Store system and data processing method
CN207993079U (en) Have image recognition function and combines the display systems of multimedia shopping
CN107784541A (en) The method and device of data object information is provided
TWM570489U (en) Smart store shopping system
CN112036865A (en) Service providing method, device and equipment
TW202221607A (en) Media commodity Push Notification and order placement system to display media message and provide product ordering by user and consumers browsing the source end
US20150310692A1 (en) Retail automation platform
JP2019160048A (en) Information processing device, information processing method, and program
US20240070657A1 (en) Reward calculation system, reward calculation method, and information storage medium
US20220270061A1 (en) System and method for indicating payment method availability on a smart shopping bin
US20230196448A1 (en) Display system, server device, and display device
JP7435658B2 (en) Information processing equipment, information processing system, sales promotion method and program
CN113516469B (en) Unmanned supermarket vending system and vending method based on deep learning and eye tracking
TWI618011B (en) Processing method and system of marketing in financial institutions
JP2024001579A (en) Program of portable terminal in commodity purchase system, store server and commodity purchase method
CN114037441A (en) Self-service scale
JP2022179042A (en) Information processing device and program

Legal Events

Date Code Title Description
R150 Certificate of patent or registration of utility model

Ref document number: 3215597

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees