JP2023104899A - 視線認識ベースのカスタムコンテンツを提供する装置及び方法 - Google Patents
視線認識ベースのカスタムコンテンツを提供する装置及び方法 Download PDFInfo
- Publication number
- JP2023104899A JP2023104899A JP2023002697A JP2023002697A JP2023104899A JP 2023104899 A JP2023104899 A JP 2023104899A JP 2023002697 A JP2023002697 A JP 2023002697A JP 2023002697 A JP2023002697 A JP 2023002697A JP 2023104899 A JP2023104899 A JP 2023104899A
- Authority
- JP
- Japan
- Prior art keywords
- user
- line
- information
- sight
- face
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 55
- 238000013135 deep learning Methods 0.000 claims description 25
- 230000001815 facial effect Effects 0.000 claims description 24
- 238000013528 artificial neural network Methods 0.000 claims description 16
- 238000004891 communication Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 10
- 230000000694 effects Effects 0.000 description 9
- 230000008859 change Effects 0.000 description 8
- 238000013527 convolutional neural network Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 238000013136 deep learning model Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000004904 shortening Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000002459 sustained effect Effects 0.000 description 1
- 230000008685 targeting Effects 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/0464—Convolutional networks [CNN, ConvNet]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0269—Targeted advertisements based on user profile or attribute
- G06Q30/0271—Personalized advertisement
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
- G06Q30/0623—Item investigation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
- G06Q30/0641—Shopping interfaces
- G06Q30/0643—Graphical representation of items or shoppers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Strategic Management (AREA)
- Evolutionary Computation (AREA)
- Multimedia (AREA)
- Development Economics (AREA)
- Economics (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Software Systems (AREA)
- Computing Systems (AREA)
- Artificial Intelligence (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Tourism & Hospitality (AREA)
- Biomedical Technology (AREA)
- Medical Informatics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Databases & Information Systems (AREA)
- Biophysics (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Molecular Biology (AREA)
- Mathematical Physics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Entrepreneurship & Innovation (AREA)
- Game Theory and Decision Science (AREA)
- Human Resources & Organizations (AREA)
- Primary Health Care (AREA)
- Ophthalmology & Optometry (AREA)
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
Abstract
Description
Claims (20)
- コンテンツ提供装置の少なくとも1つのプロセッサによって実行される視線認識ベースのカスタマイズされたコンテンツを提供する方法において、
イメージセンサに基づいてユーザの顔認識映像を取得するステップと、
前記取得された顔認識映像に基づいて前記イメージセンサを制御して前記ユーザの顔の正面画像を取得するステップと、
前記取得された顔の正面画像に基づいて、前記ユーザの視線方向及び視線固定時間情報を含む視線情報を生成するステップと、
前記生成された視線情報に対応するディスプレイ領域を関心領域として決定するステップと、
前記決定された関心領域にマッチングするアイテムを検出するステップと、
前記検出されたアイテムの商品情報コンテンツを提供するステップを含む、
視線認識ベースのカスタマイズされたコンテンツを提供する方法。 - 前記取得された顔認識映像に基づいて前記イメージセンサを制御して前記ユーザの顔の正面画像を取得するステップは、
前記顔認識映像を予め学習されたディープラーニングニューラルネットワークの入力データとして提供するステップと、前記ディープラーニングニューラルネットワークの出力データで前記ユーザの顔ポーズ情報を取得するステップと、前記取得された顔ポーズ情報に基づく前記イメージセンサを制御するステップを含む、
請求項1に記載の視線認識ベースのカスタマイズされたコンテンツを提供する方法。 - 前記生成された視線情報に対応するディスプレイ領域を関心領域として決定するステップは、
前記ユーザの視線固定時間情報が予め設定された時間以上を満たす場合、前記ユーザの視線方向に対応するディスプレイ領域を前記関心領域として決定するステップを含む、
請求項1に記載の視線認識ベースのカスタマイズされたコンテンツを提供する方法。 - 前記決定された関心領域にマッチングするアイテムを検出するステップは、
前記ディスプレイ領域に基づいて出力されるアイテムページを選択するユーザ入力を取得するステップと、
前記選択されたアイテムページ内の前記関心領域にマッチングするアイテムを検出するステップを含む、
請求項1に記載の視線認識ベースのカスタマイズされたコンテンツを提供する方法。 - 前記視線情報に対応するディスプレイ領域を関心領域として決定するステップは、
前記視線情報が変更されると、前記変更された視線情報に対応するディスプレイ領域に前記関心領域をアップデートするステップを含む、
請求項1に記載の視線認識ベースのカスタマイズされたコンテンツを提供する方法。 - 前記決定された関心領域にマッチングするアイテムを検出するステップは、
前記関心領域にマッチングするディスプレイ領域内の少なくとも1つの画素を検出するステップと、
前記検出された少なくとも1つの画素に対して予め格納されたアイテムを検出するステップを含む、
請求項1に記載の視線認識ベースのカスタマイズされたコンテンツを提供する方法。 - 前記ディスプレイ領域内の少なくとも1つの画素を選択するユーザ入力を取得するステップと、前記選択された少なくとも1つの画素について予め格納されたアイテムを検出するステップと、前記検出されたアイテムの商品情報コンテンツを出力するステップをさらに含む、
請求項1に記載の視線認識ベースのカスタマイズされたコンテンツを提供する方法。 - 前記取得された顔の正面画像に基づいて前記ユーザの視線方向及び視線固定時間情報を含む視線情報を生成するステップは、
前記取得された顔認識映像において、第1ユーザの顔領域と第2ユーザの顔領域を検出するステップと、
前記検出された複数のユーザ顔領域を含むように前記イメージセンサを含むカメラアングルを制御するステップを含む、
請求項1に記載の視線認識ベースのカスタマイズされたコンテンツを提供する方法。 - 前記取得された顔の正面画像に基づいて前記ユーザの視線方向及び視線固定時間情報を含む視線情報を生成するステップは、
前記第1ユーザの顔領域に基づいて前記第1ユーザの第1視線情報を生成するステップと、前記第2ユーザの顔領域に基づいて前記第2ユーザの第2視線情報を生成するステップを含む、
請求項8に記載の視線認識ベースのカスタマイズされたコンテンツを提供する方法。 - 前記生成された視線情報に対応するディスプレイ領域を関心領域として決定するステップは、
前記生成した第1視線情報に対応する第1画素面積を決定するステップと、前記生成した第2視線情報に対応する第2画素面積を決定するステップを含む、
請求項9に記載の視線認識ベースのカスタマイズされたコンテンツを提供する方法。 - 前記決定された関心領域にマッチングするアイテムを検出するステップは、
前記決定された第1画素面積にマッチングされた第1アイテムを検出するステップと、前記決定された第2画素面積にマッチングされた第2アイテムを検出するステップとを含む、
請求項10に記載の視線認識ベースのカスタマイズされたコンテンツを提供する方法。 - 前記検出されたアイテムの商品情報コンテンツを提供するステップは、
前記ディスプレイ領域を前記第1ユーザに対応する第1出力画面と、前記第2ユーザに対応する第2出力画面に分割するステップと、前記第1出力画面には、前記検出された第1アイテムに対応する第1コンテンツを出力し、前記第2出力画面には、前記第2アイテムに対応する第2コンテンツを出力するステップを含む、
請求項11に記載の視線認識ベースのカスタマイズされたコンテンツを提供する方法。 - 前記ディスプレイ領域を前記第1ユーザに対応する第1出力画面と第2ユーザに対応する第2出力画面に分割するステップは、
前記ディスプレイ領域に基づいて前記第1ユーザの第1位置と、前記第2ユーザの第2位置を決定するステップと、前記決定された第1位置に対応する第1ディスプレイ領域を前記第1出力画面として決定するステップと、前記決定された第2位置に対応する第2ディスプレイ領域を前記第2出力画面として決定するステップを含む、
請求項12に記載の視線認識ベースのカスタマイズされたコンテンツを提供する方法。 - ユーザの顔認識映像を取得する少なくとも1つのイメージセンサと、
前記取得された顔認識映像に基づいた商品情報コンテンツを出力する少なくとも1つのディスプレイと、
少なくとも1つのプロセッサとを含み、
前記プロセッサは、
前記顔認識映像に基づいて前記イメージセンサを制御して前記ユーザの顔の正面画像を取得し、前記取得された顔の正面画像に基づいて前記ユーザの視線方向及び視線固定時間情報を含む視線情報を生成し、前記生成された視線情報に対応するディスプレイ領域を関心領域として決定し、前記決定された関心領域にマッチングするアイテムを検出し、前記検出されたアイテムの商品情報コンテンツを提供するように制御する、視線認識ベースのカスタマイズされたコンテンツを提供する装置。 - 前記ディスプレイは、
少なくとも1つ以上の前記アイテムの代表画像を出力するアイテムディスプレイと、前記商品情報コンテンツを出力するコンテンツディスプレイを含む、請求項14に記載の視線認識ベースのカスタマイズされたコンテンツを提供する装置。 - 前記プロセッサは、
前記顔認識映像に基づくディープラーニングに基づいて前記ユーザの顔ポーズ情報を取得し、
前記取得された顔ポーズ情報に基づいて前記イメージセンサを制御して前記ユーザの顔の正面画像を取得する、
請求項14に記載の視線認識ベースのカスタマイズされたコンテンツを提供する装置。 - 前記プロセッサは、
前記顔認識映像を予め学習されたディープラーニングニューラルネットワークの入力データとして入力し、
前記ディープラーニングニューラルネットワークの出力データで前記ユーザの顔ポーズ情報を取得し、
前記取得された顔ポーズ情報に基づいてイメージセンサを制御する、
請求項14に記載の視線認識ベースのカスタマイズされたコンテンツを提供する装置。 - 前記プロセッサは、
前記視線情報が変更されると、前記変更された視線情報に対応するディスプレイ領域に前記関心領域をアップデートするように前記ディスプレイを制御する、
請求項14に記載の視線認識ベースのカスタマイズされたコンテンツを提供する装置。 - 前記プロセッサは、
前記関心領域にマッチングするディスプレイ領域内の少なくとも1つの画素を検出し、前記検出された少なくとも1つの画素に対して格納されたアイテムを検出するように制御する、
請求項14に記載の視線認識ベースのカスタマイズされたコンテンツを提供する装置。 - 前記プロセッサは、
前記ディスプレイ領域内の少なくとも1つの画素を選択するユーザ入力を取得し、前記選択された少なくとも1つの画素に対して予め格納されたアイテムを検出し、前記検出されたアイテムの商品情報コンテンツを出力するように制御する、
請求項14に記載の視線認識ベースのカスタマイズされたコンテンツを提供する装置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2022-0006674 | 2022-01-17 | ||
KR1020220006674A KR102665453B1 (ko) | 2022-01-17 | 2022-01-17 | 시선인식 기반 맞춤형 콘텐츠를 제공하는 장치 및 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023104899A true JP2023104899A (ja) | 2023-07-28 |
JP7478339B2 JP7478339B2 (ja) | 2024-05-07 |
Family
ID=87379138
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023002697A Active JP7478339B2 (ja) | 2022-01-17 | 2023-01-11 | 視線認識ベースのカスタムコンテンツを提供する装置及び方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US12019798B2 (ja) |
JP (1) | JP7478339B2 (ja) |
KR (1) | KR102665453B1 (ja) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001243466A (ja) * | 2000-03-02 | 2001-09-07 | Honda Motor Co Ltd | 顔認識装置およびその方法 |
JP2013069106A (ja) * | 2011-09-22 | 2013-04-18 | Yappa Corp | 電子コンテンツ提供システム、電子コンテンツ提供サーバ、電子コンテンツ閲覧端末装置、及びプログラム |
JP2014067401A (ja) * | 2012-09-24 | 2014-04-17 | Nhn Business Platform Corp | ユーザの視線に基づいて広告を提供する方法およびシステム |
JP2019039988A (ja) * | 2017-08-23 | 2019-03-14 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置および画像表示方法 |
JP2020201868A (ja) * | 2019-06-13 | 2020-12-17 | コニカミノルタ株式会社 | 表示装置、表示制御方法および表示制御プログラム |
JP2021145198A (ja) * | 2020-03-10 | 2021-09-24 | 佐々木 雄司 | アイコンタクトによる機器操作システム |
Family Cites Families (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20020079236A (ko) | 2001-04-13 | 2002-10-19 | 이용선 | 광고기능을 구비하는 자판기 및 그에따른 시스템 |
KR101978299B1 (ko) * | 2012-10-24 | 2019-05-14 | 에스케이플래닛 주식회사 | 콘텐츠 서비스 시스템에서의 콘텐츠 서비스를 위한 장치 |
KR102213865B1 (ko) * | 2014-03-18 | 2021-02-08 | 에스케이플래닛 주식회사 | 주시 영역 기반 객체 식별 장치 및 방법, 컴퓨터 프로그램이 기록된 기록매체 |
EP3120221A1 (en) * | 2014-03-17 | 2017-01-25 | ITU Business Development A/S | Computer-implemented gaze interaction method and apparatus |
US10802582B1 (en) * | 2014-04-22 | 2020-10-13 | sigmund lindsay clements | Eye tracker in an augmented reality glasses for eye gaze to input displayed input icons |
KR101647969B1 (ko) * | 2014-09-12 | 2016-08-12 | 재단법인대구디지털산업진흥원 | 사용자 시선을 검출하기 위한 사용자 시선 검출 장치 및 그 방법과, 그 방법을 실행하기 위한 컴퓨터 프로그램 |
US9928410B2 (en) * | 2014-11-24 | 2018-03-27 | Samsung Electronics Co., Ltd. | Method and apparatus for recognizing object, and method and apparatus for training recognizer |
JP6447108B2 (ja) * | 2014-12-24 | 2019-01-09 | 富士通株式会社 | 利用可能性算出装置、利用可能性算出方法及び利用可能性算出プログラム |
US10732721B1 (en) * | 2015-02-28 | 2020-08-04 | sigmund lindsay clements | Mixed reality glasses used to operate a device touch freely |
JP6562077B2 (ja) * | 2015-08-20 | 2019-08-21 | 日本電気株式会社 | 展示装置、表示制御装置および展示システム |
US9990044B2 (en) * | 2015-10-30 | 2018-06-05 | Intel Corporation | Gaze tracking system |
US10339758B2 (en) * | 2015-12-11 | 2019-07-02 | Igt Canada Solutions Ulc | Enhanced electronic gaming machine with gaze-based dynamic messaging |
KR101772181B1 (ko) * | 2016-01-14 | 2017-08-28 | 최선영 | 사용자의 시선 분석을 이용한 웹 디스플레이 상에서의 다중 창 멀티태스킹 시청 행위 분석 시스템 및 방법 |
CA3015615A1 (en) * | 2016-02-26 | 2017-08-31 | The Coca-Cola Company | Touchless control graphical user interface |
JP2018055248A (ja) * | 2016-09-27 | 2018-04-05 | ソニー株式会社 | 情報収集システム、電子棚札、電子pop、文字情報表示装置 |
US20200183496A1 (en) * | 2017-08-01 | 2020-06-11 | Sony Corporation | Information processing apparatus and information processing method |
KR102564855B1 (ko) * | 2018-01-08 | 2023-08-08 | 삼성전자주식회사 | 표정 변화에 강인한 객체 및 표정 인식 장치 및 방법, 객체 및 표정 트레이닝 장치 및 방법 |
KR102565977B1 (ko) * | 2018-02-08 | 2023-08-11 | 삼성전자주식회사 | 시선에 기반한 관심 영역 검출 방법 및 이를 위한 전자 장치 |
TWI669703B (zh) * | 2018-08-28 | 2019-08-21 | 財團法人工業技術研究院 | 適於多人觀看的資訊顯示方法及資訊顯示裝置 |
KR102233481B1 (ko) * | 2018-10-18 | 2021-03-29 | 주식회사 토비스 | 화면 제어 방법 및 표시 장치 |
US11393213B2 (en) * | 2018-12-05 | 2022-07-19 | AiFi Inc. | Tracking persons in an automated-checkout store |
US20200250736A1 (en) * | 2019-02-05 | 2020-08-06 | Adroit Worldwide Media, Inc. | Systems, method and apparatus for frictionless shopping |
KR102249666B1 (ko) * | 2019-06-13 | 2021-05-10 | 주식회사 비주얼캠프 | 시선 추적 기술을 이용한 쇼핑몰 서비스 시스템 및 이를 수행하기 위한 컴퓨팅 장치 |
KR102352794B1 (ko) * | 2019-06-24 | 2022-01-17 | 건국대학교 글로컬산학협력단 | 개인 맞춤형 조절이 가능한 키오스크 및 그 제어 시스템 |
KR102299103B1 (ko) | 2019-10-23 | 2021-09-07 | 주식회사 비주얼캠프 | 시선 분석 장치 및 이를 이용한 시선 분석 시스템 및 방법 |
KR102198360B1 (ko) * | 2019-10-24 | 2021-01-04 | 광운대학교 산학협력단 | 얼굴 영상 기반의 시선 추적 시스템 및 방법 |
US11625973B2 (en) * | 2020-04-22 | 2023-04-11 | Igt | Multi-user gaze detection at electronic gaming devices |
KR102305880B1 (ko) * | 2020-06-26 | 2021-09-28 | 이종우 | 사용자의 시선 추적 방법 및 사용자의 시선 추적 방법을 실행시키는 프로그램이 기록된 기록 매체 |
US20220237660A1 (en) * | 2021-01-27 | 2022-07-28 | Baüne Ecosystem Inc. | Systems and methods for targeted advertising using a customer mobile computer device or a kiosk |
-
2022
- 2022-01-17 KR KR1020220006674A patent/KR102665453B1/ko active IP Right Grant
-
2023
- 2023-01-11 JP JP2023002697A patent/JP7478339B2/ja active Active
- 2023-01-14 US US18/097,201 patent/US12019798B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001243466A (ja) * | 2000-03-02 | 2001-09-07 | Honda Motor Co Ltd | 顔認識装置およびその方法 |
JP2013069106A (ja) * | 2011-09-22 | 2013-04-18 | Yappa Corp | 電子コンテンツ提供システム、電子コンテンツ提供サーバ、電子コンテンツ閲覧端末装置、及びプログラム |
JP2014067401A (ja) * | 2012-09-24 | 2014-04-17 | Nhn Business Platform Corp | ユーザの視線に基づいて広告を提供する方法およびシステム |
JP2019039988A (ja) * | 2017-08-23 | 2019-03-14 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置および画像表示方法 |
US20200201048A1 (en) * | 2017-08-23 | 2020-06-25 | Sony Interactive Entertainment Inc. | Information processing apparatus and image display method |
JP2020201868A (ja) * | 2019-06-13 | 2020-12-17 | コニカミノルタ株式会社 | 表示装置、表示制御方法および表示制御プログラム |
JP2021145198A (ja) * | 2020-03-10 | 2021-09-24 | 佐々木 雄司 | アイコンタクトによる機器操作システム |
Also Published As
Publication number | Publication date |
---|---|
US12019798B2 (en) | 2024-06-25 |
US20230244309A1 (en) | 2023-08-03 |
JP7478339B2 (ja) | 2024-05-07 |
KR20230111005A (ko) | 2023-07-25 |
KR102665453B1 (ko) | 2024-05-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11650626B2 (en) | Systems and methods for extending a keyboard to a surrounding surface using a wearable extended reality appliance | |
US10515393B2 (en) | Image data detection for micro-expression analysis and targeted data services | |
CN103760968B (zh) | 数字标牌显示内容选择方法和装置 | |
US9262780B2 (en) | Method and apparatus for enabling real-time product and vendor identification | |
KR101894021B1 (ko) | Vr 공간에서 컨텐트를 제공하는 방법, 디바이스 및 기록매체 | |
US10665022B2 (en) | Augmented reality display system for overlaying apparel and fitness information | |
US20100060713A1 (en) | System and Method for Enhancing Noverbal Aspects of Communication | |
US20140195328A1 (en) | Adaptive embedded advertisement via contextual analysis and perceptual computing | |
US20080004951A1 (en) | Web-based targeted advertising in a brick-and-mortar retail establishment using online customer information | |
US9087056B2 (en) | System and method for providing augmented content | |
KR20110076458A (ko) | 디스플레이 장치 및 그 제어방법 | |
US9013591B2 (en) | Method and system of determing user engagement and sentiment with learned models and user-facing camera images | |
US20220179609A1 (en) | Interaction method, apparatus and device and storage medium | |
WO2022170221A1 (en) | Extended reality for productivity | |
CN108958577B (zh) | 基于可穿戴设备的窗口操作方法、装置、穿戴设备及介质 | |
US20240232949A1 (en) | Method and system for gesture-based cross channel commerce and marketing | |
US11625754B2 (en) | Method for providing text-reading based reward-type advertisement service and user terminal for executing same | |
Bulling et al. | Pervasive eye-tracking for real-world consumer behavior analysis | |
CN110832525A (zh) | 在对象上的增强现实广告 | |
JP7478339B2 (ja) | 視線認識ベースのカスタムコンテンツを提供する装置及び方法 | |
Xia et al. | Gaze estimation using neural network and logistic regression | |
US11250242B2 (en) | Eye tracking method and user terminal performing same | |
Asghari et al. | Can eye tracking with pervasive webcams replace dedicated eye trackers? an experimental comparison of eye-tracking performance | |
JP2023519608A (ja) | ユーザデバイスからデータを収集するシステム及び方法 | |
CN118350883A (zh) | 信息处理方法及可穿戴设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230111 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231121 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231128 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240222 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240305 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20240327 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240402 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7478339 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |