JP6623171B2 - ディスプレイに統合されるユーザ分類、セキュリティおよび指紋システム - Google Patents

ディスプレイに統合されるユーザ分類、セキュリティおよび指紋システム Download PDF

Info

Publication number
JP6623171B2
JP6623171B2 JP2016562920A JP2016562920A JP6623171B2 JP 6623171 B2 JP6623171 B2 JP 6623171B2 JP 2016562920 A JP2016562920 A JP 2016562920A JP 2016562920 A JP2016562920 A JP 2016562920A JP 6623171 B2 JP6623171 B2 JP 6623171B2
Authority
JP
Japan
Prior art keywords
light
display
user
processor
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016562920A
Other languages
English (en)
Other versions
JP2017516208A5 (ja
JP2017516208A (ja
Inventor
ジョン・マイケル・ウィルワス
サフィ・カーン
エフゲニー・ペトロヴィチ・グーセフ
ラッセル・ウェイン・グルールケ
イン・ジョウ
フランク・フレデリク・ヴェッケル
Original Assignee
クアルコム，インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by クアルコム，インコーポレイテッド filed Critical クアルコム，インコーポレイテッド
Publication of JP2017516208A publication Critical patent/JP2017516208A/ja
Publication of JP2017516208A5 publication Critical patent/JP2017516208A5/ja
Application granted granted Critical
Publication of JP6623171B2 publication Critical patent/JP6623171B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/142—Image acquisition using hand-held instruments; Constructional details of the instruments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/13—Sensors therefor
    • G06V40/1324—Sensors therefor by using geometrical optics, e.g. using prisms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/1365—Matching; Classification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/143—Sensing or illuminating at different wavelengths

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Input (AREA)
  • User Interface Of Digital Computer (AREA)
  • Devices For Indicating Variable Information By Combining Individual Elements (AREA)
  • Facsimiles In General (AREA)

Description

関連出願の相互参照
本開示は、2014年4月28日に出願された“DISPLAY-INTEGRATED USER-CLASSIFICATION, SECURITY AND FINGERPRINT SYSTEM”と題する米国仮特許出願第61/985,305号(代理人整理番号第QUALP249PUS/144437P1)および2014年9月29日に出願された“DISPLAY-INTEGRATED USER-CLASSIFICATION, SECURITY AND FINGERPRINT SYSTEM”と題する米国特許出願第14/499,860号(代理人整理番号第QUALP249US/144437)の優先権を主張する。これらの先願の開示は、本開示の一部と見なされ、参照により本開示に組み込まれる。
本開示は、電子デバイスのユーザの生体認証のための技法に関し、より具体的には、指紋読取装置と統合されるユーザ入力/出力インターフェースを提供する電子ディスプレイに関する。
指紋読取装置は、パスワードに基づくセキュリティに代わるか、またはパスワードに基づくセキュリティを改善するセキュリティバイオメトリクス指標として、モバイルフォン、タブレットおよびノートブックのようなコンシューマデバイスにおいて一般的になりつつある。通常、モバイルデバイスのディスプレイ画面に近接するが、それとは別に専用の指紋読取装置が配置される。ディスプレイ画面は、ユーザの認証が必要とされるときに、指紋読取装置にタッチするようにユーザに指示するメッセージを表示することができる。
特許出願第13/480,377号 特許出願第61/947,971号
本開示のシステム、方法、およびデバイスはそれぞれ、いくつかの革新的な態様を有し、それらの態様はいずれも、本明細書に開示された所望の属性を単独で担うものではない。
本開示において説明される主題の1つの革新的な態様は表示エリアと、表示エリア内の指紋読取エリアとを含む前面を備えるディスプレイカバーガラスを有する電子ディスプレイを含む装置において実施することができる。また、電子ディスプレイは、受光された散乱光を検出するように構成される少なくとも1つの光検知素子を含み、受光された散乱光は、光と、指紋読取エリア内で前面と少なくとも部分的に光学的に接触している物体との相互作用から生じる。光検知素子は、プロセッサに指紋画像データを出力するように構成される。
いくつかの実施態様によれば、本装置は電子ディスプレイを含み、電子ディスプレイは、表示エリアと、表示エリア内の指紋読取エリアとを含む前面を備えるディスプレイカバーガラスと、受光された散乱光を検出することであって、受光された散乱光は、光と、指紋読取エリア内で前面と少なくとも部分的に光学的に接触している物体との相互作用から生じる、検出することと、プロセッサに指紋画像データを出力することとを行うように構成される少なくとも1つの光検知素子とを有する。
いくつかの例では、指紋読取エリアは、表示エリアと実質的に同じ広がりを有することができる。
いくつかの例では、光検知素子は、ディスプレイカバーガラスの前面を含む平面内に、またはその平面の後方に配置することができる。
いくつかの例では、光検知素子は、表示エリアの外側に存在するか、表示エリアの周辺部に近接して存在するか、またはその両方とすることができる。
いくつかの例では、光検知素子はカメラを含むことができる。カメラは光軸を有するレンズを含むことができ、カメラは、光軸が前面に対して概ね平行になるようにして配置される。いくつかの例では、カメラは、ビデオグラフィックスアレイマイクロカメラを含むことができる。
いくつかの例では、電子ディスプレイは、前面に近接し、その後方に配置され、受光された散乱IR光を光検知素子に向かって変向するように構成される第1の平面導光路を含むことができる。光検知素子は、第1の平面導光路と光学的に結合することができる。いくつかの例では、ディスプレイカバーガラスは、第1の平面導光路を含むことができる。いくつかの例では、散乱光のうちの少なくとも一部は、光検知素子によって検出される前に、平面導光路内で2回以上の内部反射を受ける場合がある。
いくつかの例では、プロセッサは、指紋画像データに基づいて、ユーザが認定ユーザであるか否かを判断するように構成することができる。
いくつかの例では、プロセッサは、指紋画像データに基づいて、ユーザの生体認証を行うように構成することができる。プロセッサは、ユーザが電子ディスプレイ画面とやりとりしている間に、生体認証をリアルタイムに行うように構成することができる。いくつかの例では、生体認証は、ユーザの身元を判断すること、ユーザが認定ユーザであることを認証すること、または別の方法で指紋を分類することのうちの1つまたは複数を含むことができる。いくつかの例では、電子ディスプレイは、遠隔ロック可能デバイスと通信可能に結合することができ、プロセッサは、遠隔ロック可能デバイスに、生体認証後にロックさせるか、またはロック解除させることができる。電子ディスプレイは、有線またはワイヤレス通信リンクによって、遠隔ロック可能デバイスと通信可能に結合することができる。いくつかの例では、電子ディスプレイは、ウェアラブルデバイスとして構成することができる。いくつかの例では、プロセッサは、生体認証に基づいて、電子ディスプレイに、ユーザに合わせたコンテンツを提示させるように構成することができる。プロセッサは、何人かの個々のユーザごとに特有のアプリケーションプロファイルのうちの1つまたは複数に応答して、かつそのような個々のユーザの使用履歴および選好に応答して、ユーザに合わせたコンテンツを表示するように構成することができる。いくつかの例では、プロセッサは、連続的な生体認証、および/またはディスプレイ画面と同時にやりとりとしている複数のユーザの生体認証のうちの1つまたは複数を実行するように構成することができる。
いくつかの例では、電子ディスプレイは、電子ディスプレイと通信可能に結合される装置または電子デバイスのユーザに入力/出力インターフェースを提供することができる。
いくつかの例では、電子ディスプレイは、平面導光路の中に、または平面導光路を通して光を誘導する少なくとも1つの光源を含むことができる。少なくとも1つの光源は、液晶またはフィールドシーケンシャルカラーディスプレイのバックライト、反射型ディスプレイのフロントライト、放射型ディスプレイ、カバーガラスのアートワークエリアを通って真下に放射される赤外光のうちの1つまたは複数を含むことができる。いくつかの例では、少なくとも1つの光源は、表示エリアの外側に、または表示エリアの周辺部に近接して配置することができる。
いくつかの例では、電子ディスプレイは、第1の平面導光路の後方に配置され、光源から受光された光を前面に対して直交する実質的な成分を有する方向に変向するように構成される第2の平面導光路を含むことができる。
いくつかの例では、光検知素子は、ユーザ付属物の表面によって放射される赤外光を検出するように構成することができる。プロセッサは、放射された赤外光の測定値に基づいて、ユーザ付属物の生存性(liveness)判断を行うように構成することができる。
いくつかの実施態様によれば、本装置は電子ディスプレイを含み、電子ディスプレイは、表示エリアと、表示エリア内の光学撮像エリアとを含む前面を備えるディスプレイカバーガラスと、受光された散乱光を検出することであって、受光された散乱光は、光と、光学撮像エリア内で前面と光学的に接触している物体との相互作用から生じる、検出することと、プロセッサに画像データを出力することとを行うように構成される少なくとも1つの光検知素子とを有する。
いくつかの例では、光学撮像エリアは、表示エリアと実質的に同じ広がりを有することができる。
いくつかの例では、物体は、ユーザの指または他の付属物とすることができ、光学撮像エリアは、指紋読取装置として構成される。
いくつかの例では、物体は、ユーザの指もしくは他の付属物であるか、または撮像されるべき物体である。撮像されるべき物体は、バーコード識別子または暗号透かしのうちの1つまたは複数を含むドキュメントまたは表示画像とすることができる。
いくつかの例では、光検知素子はカメラとすることができ、カメラは光軸を有するレンズを含み、カメラは、光軸が前面に対して概ね平行になるようにして配置することができる。
いくつかの例では、プロセッサは、画像データに基づいて、ユーザの認証を行うように構成することができる。電子ディスプレイは、遠隔ロック可能デバイスと通信可能に結合することができ、プロセッサは、遠隔ロック可能デバイスに、ユーザの認証後にロックさせるか、またはロック解除させることができる。いくつかの例では、プロセッサは、認証に基づいて、ユーザに合わせたコンテンツを表示するように構成することができる。
いくつかの実施態様によれば、本装置は電子ディスプレイを含み、電子ディスプレイは、表示エリアと、表示エリア内の指紋読取エリアとを含む前面を備えるディスプレイカバーガラスと、受光された散乱光を検出することであって、受光された散乱光は、光と、指紋読取エリア内で前面と少なくとも部分的に光学的に接触している物体との相互作用から生じる、検出することと、プロセッサに指紋画像データを出力することとを行うための手段とを有する。
いくつかの実施態様によれば、本方法は、光検知素子を用いて、受光された散乱光を検出することであって、受光された散乱光は、光と、電子ディスプレイのディスプレイカバーガラスの前面の指紋読取エリアと少なくとも部分的に光学的に接触している物体との相互作用から生じ、前面は表示エリアを有し、指紋読取エリアは表示エリア内にある、検出することと、光検知素子からプロセッサに指紋画像データを出力することとを含む。
いくつかの例では、本方法は、プロセッサを用いて、指紋画像データに基づいて、ユーザが認定ユーザであるか否かを判断することを含むことができる。
いくつかの例では、本方法は、プロセッサを用いて、指紋画像データに基づいて、ユーザの生体認証を行うことを含むことができる。
本明細書において説明される主題の1つまたは複数の実施態様の詳細が、添付の図面および以下の説明に記載される。他の特徴、態様および利点は、説明、図面および特許請求の範囲から明らかになるであろう。以下の図の相対寸法は、縮尺通りには描かれていない場合があることに留意されたい。種々の図面における同様の参照番号および名称は、同様の要素を示す。
一実施態様による、電子ディスプレイの簡略化されたブロック図である。 一実施態様による、電子ディスプレイの断面立面図である。 本明細書で開示されている技法を用いて取得されたカメラ画像の一例を示す図である。 本明細書で開示されている技法を用いて取得された別のカメラ画像の一例を示す図である。 万華鏡効果の一例を示す図である。 別の実施態様による、電子ディスプレイの断面立面図である。 電子ディスプレイが遠隔ロック可能デバイスと通信可能に結合される構成の簡略化されたブロック図である。 いくつかの実施態様による、指紋画像データを取得するためのプロセスフロー図である。
以下の説明は、本開示の革新的な態様を説明する目的のための特定の実施態様に向けられている。しかしながら、本明細書における教示は、数多くの異なる方法において適用できることは当業者には容易に認識されよう。説明される実施態様は、動いている(たとえば、映像)か静止している(たとえば、静止画像)かにかかわらず、また文字であるか、絵であるか、写真であるかにかかわらず、画像を表示するように構成することができる任意のデバイスまたはシステムにおいて実施することができる。より詳細には、説明される実施態様は、限定はしないが、モバイル電話、マルチメディアインターネットによって使用できる携帯電話、モバイルテレビ受像機、ワイヤレスデバイス、スマートフォン、Bluetooth(登録商標)デバイス、携帯情報端末(PDA)、ワイヤレス電子メール受信機、ハンドヘルドコンピュータまたはポータブルコンピュータ、ネットブック、ノートブック、スマートブック、タブレット、プリンタ、複写機、スキャナ、ファクシミリデバイス、GPS受信機/ナビゲータ、カメラ、MP3プレーヤ、カムコーダ、ゲームコンソール、腕時計、時計、計算機、テレビモニタ、フラットパネルディスプレイ、電子読取りデバイス(電子書籍端末など)、コンピュータモニタ、自動車用ディスプレイ(走行距離計ディスプレイおよび速度計ディスプレイなどを含む)、コックピット制御機器および/またはディスプレイ、カメラ視野ディスプレイ(車両における後方視野カメラの表示など)、電子写真、街頭ビジョンまたは電子看板、映写機、建築構造、電子レンジ、冷蔵庫、ステレオシステム、カセットレコーダまたはカセットプレーヤ、DVDプレーヤ、CDプレーヤ、VCR、ラジオ、ポータブルメモリチップ、洗濯機、乾燥機、洗濯/乾燥機、駐車メータ、パッケージング(電気機械システム(EMS)、マイクロエレクトロメカニカルシステム(MEMS)、および非MEMSアプリケーションにおけるものなど)、美的構造(たとえば、宝石上への画像の表示)、ならびに種々のEMSデバイスなどの種々の電子デバイスに含まれる場合があるか、またはそれらの電子デバイスに関連付けられる場合があると考えられる。本明細書の教示は、限定はしないが、電子スイッチングデバイス、無線周波数フィルタ、センサ、加速度計、ジャイロスコープ、動作検知デバイス、磁気計、家庭用電子機器用の慣性構成要素、家庭用電化製品の部品、バラクタ、液晶デバイス、電気泳動デバイス、駆動方式、製造プロセス、および電子試験機器などの、ディスプレイを備えない適用例において使用することもできる。したがって、それらの教示には、単に図に示されている実施態様に限定されることを意図するものではなく、代わりに、当業者には容易に明らかになるように、広範囲にわたる適用性を有している。
本明細書において以下に説明されるのは、ディスプレイ画面エリアの外部にある専用の指紋読取装置を必ずしも用いることなく、ディスプレイ画面エリア内で指紋、または撮像されるべき他の物体を撮像するための新たな技法である。また、本技法は、ユーザがディスプレイ画面とやりとりしている間にユーザのリアルタイム生体識別を可能にする。いくつかの実施態様では、ディスプレイ画面は、コンピュータ、自動車、ドア、家庭電化製品、医療デバイスまたは他のデバイスのような遠隔ロック可能デバイスと通信可能に結合される、たとえば、スマートウォッチのようなウェアラブルデバイスの一部として構成される。そのような実施態様では、ユーザの指紋は、ウェアラブルデバイスのディスプレイ画面によって撮像し、マイクロプロセッサによって処理することができ、マイクロプロセッサは、ユーザの身元の認証後に遠隔ロック可能デバイスにロックさせるか、またはロック解除させるなどのコマンドを、遠隔デバイスに送信することができる。
本開示において説明される主題の特定の実施態様は、以下の潜在的な利点のうちの1つまたは複数を実現するために実施することができる。従来技術に比べて、本明細書で開示されている技法は、電子ディスプレイの周辺部の外側に指紋読取装置を設けるのではなく、電子ディスプレイの周辺部内に指紋読取機能を組み込む、よりコンパクトな電子デバイスを可能にする。さらに、電子ディスプレイがタッチスクリーンユーザインターフェースを提供する場合、本明細書で開示されている技法は、1人または複数のユーザがディスプレイとやりとりしている間に、1人または複数のユーザの身元の自動的かつ連続的な検証を可能にする。
本開示において説明される主題の1つの革新的な態様は、ディスプレイカバーガラスの平面内に、またはその平面の後方にそれぞれ取り付けられる、たとえば、画像センサアレイカメラのような1つまたは複数の光検知素子を含む電子ディスプレイにおいて実施することができる。カメラは、ビデオグラフィックスアレイマイクロカメラとすることができ、そこから人の指紋の画像を取得することができる画像データを出力することができる。いくつかの実施態様では、ディスプレイ画面は、コンピュータ、自動車、家庭電化製品、医療デバイスまたは他のデバイスのような遠隔ロック可能デバイスと通信可能に結合される、たとえば、スマートウォッチのようなウェアラブルデバイスの一部として構成される。そのような実施態様では、ユーザの指紋は、ウェアラブルデバイスのディスプレイ画面によって撮像し、マイクロプロセッサによって処理することができ、マイクロプロセッサは、ユーザの身元の認証後に遠隔ロック可能デバイスにロックさせるか、またはロック解除させるなどのコマンドを、遠隔デバイスに送信することができる。
いくつかの実施態様によれば、装置または電子デバイスが、装置のユーザに入力/出力(I/O)インターフェースを提供するために、電子ディスプレイと協働することができる。電子ディスプレイは、表示エリアを含む前面を有する。装置は電子ディスプレイを含む場合があるか、または電子ディスプレイに電気的に、もしくはワイヤレスで結合される場合がある。装置は、プロセッサと、平面導光路と、光源と、1つまたは複数のカメラとを含むことができる。平面導光路は、前面に隣接して、前面の後方に配置することができる。いくつかの実施態様では、平面導光路は、平面導光路がモバイルデバイス、コンピュータモニタ、テレビなどのディスプレイ層とユーザとの間に配置されるように、ディスプレイ層に近接して、かつ平行に配置されるカバーガラスまたはレンズを含むことができる。本明細書および特許請求の範囲において用いられるときに、「平面導光路」という用語のさらに深い理解は、本発明の譲受人に譲渡され、その開示が、すべての目的のために、参照することによってその全体が本出願に組み込まれる特許出願第13/480,377号“FULL RANGE GESTURE SYSTEM”」および特許出願第61/947,971号“LARGE AREA INTERACTIVE DISPLAY SCREEN”を参照することによって得ることができる。
1つまたは複数のカメラは、表示エリアの周辺部に近接して配置することができる。ユーザの指または撮像されるべき別の物体のような物体が、電子ディスプレイの前面と接触するとき、物体から散乱した光が、平面導光路内で内部全反射(TIR)を受ける場合がある。TIRを受けた光のうちの少なくとも一部が、1つまたは複数のカメラに達する場合がある。カメラは、そのようなTIRを受けた光を検出し、プロセッサにTIRを受けた被検出光に対応する画像データを出力することができる。プロセッサは、画像データから、ユーザの指紋を認識することができる。
図1は、一実施態様による、電子ディスプレイの簡略化されたブロック図を示す。電子ディスプレイ100は、前面167(図2)を有し、表示エリア101を含むディスプレイカバーガラス165(図2)を含む。また、前面は光学撮像エリア102を含む。光学撮像エリア102は、「指紋読取エリア」と呼ばれる場合もある。図1に示されるように、光学撮像エリア102は、表示エリア101内の個別領域とすることができる。いくつかの実施態様では、光学撮像エリア102は、表示エリア101と実質的に同じ広がりを有することができる。電子ディスプレイ100は、光を検出するように構成される少なくとも1つの光検知素子133を含む。本明細書において後にさらに詳細に説明されるように、感光素子133は、物体が光学撮像エリア102内の前面167と少なくとも部分的に光学的に接触しているときに、光と物体との相互作用の結果として生じる散乱光を受光することができる。
感光素子133は、プロセッサ1004に、物体画像データを出力することができる。いくつかの実施態様では、たとえば、感光素子133は、プロセッサ1004に指紋画像データを出力することができる。プロセッサ1004は、感光素子133、および電子ディスプレイ100の他の要素と通信可能に結合される場合がある。いくつかの実施態様では、プロセッサ1004は、電子ディスプレイ100の一体部品とすることができる。他の実施態様では、図1において示唆されるように、プロセッサ1004は電子ディスプレイ100とは別に構成することができる。いくつかの実施態様では、プロセッサは、たとえば、遠隔サーバ内に、遠隔して位置することができる。
いくつかの実施態様では、プロセッサ1004は、ユーザの身元を特定するように構成することができる。たとえば、プロセッサ1004は、感光素子133から受信された指紋画像データと、既知のユーザおよび/または認定ユーザの指紋画像データとを比較するように構成することができる。結果として、プロセッサ1004は、感光素子133から受信された指紋画像データに基づいて、ユーザが認定ユーザであるか否かに関する判断を行うように構成することができる。いくつかの実施態様では、プロセッサ1004は、指紋画像データに基づいて、ユーザの生体認証を行うように構成することができる。たとえば、指紋画像データは、ユーザが指または他の付属物によって光学撮像エリア102に関与するときに取得することができ、ユーザの身元を認証するために、既知の指紋画像のデータベースと比較することができる。いくつかの実施態様では、プロセッサは、ユーザが電子ディスプレイ画面とやりとりしている間に、ユーザが認定ユーザであるか否かを判断するか、またはリアルタイムに生体認証を行うように構成することができる。結果として、電子金融取引、オンラインゲーム、医療記録要求など適用例の場合に、より安全性の高いユーザインターフェースを取得することができる。
いくつかの実施態様では、プロセッサ1004は、生体認証に基づいて、電子ディスプレイに、ユーザに合わせたコンテンツを提示させるように構成することができる。たとえば、生体認証を行ったときに、プロセッサ1004は、電子ディスプレイにユーザの秘密情報を提示させるように、もしくは電子ディスプレイがユーザの秘密情報を提示できるように、または電子ディスプレイに既知のユーザ選好に基づいてコンテンツを提示させるように、もしくは電子ディスプレイが既知のユーザ選好に基づいてコンテンツを提示できるように構成することができる。
図2は、一実施態様による、電子ディスプレイ100の断面立面図を示す。電子ディスプレイ100は、第1の平面導光路165(本明細書において、「カバーレンズ」または「カバーガラス」と呼ばれる場合がある)を含むことができる。第1の平面導光路165は、電子ディスプレイ100の前面167に隣接し、その後方に配置することができる。いくつかの実施態様では、第2の平面導光路135(本明細書において、「バックライト」と呼ばれる場合もある)を、第1の平面導光路165の後方に配置することができる。第1の平面導光路165と第2の平面導光路135との間にディスプレイ層145を配置することができる。
例示される実施形態では、電子ディスプレイ100は、光源131と、光検知素子133(たとえば、本明細書において「カメラ」と呼ばれる場合もある)とを含む。光源131は、たとえば、発光ダイオード(LED)とすることができる。いくつかの実施態様では、光源131は、第2の平面導光路135の周囲にわたって配置される複数のLEDを含むことができる。光源131は、赤外線、赤色、青色、緑色、もしくは別の色、または色の組合せ、または白色光を出力することができる。例示される実施態様では、光源131は、第2の平面導光路135のエッジに近接して配置される。しかしながら、他の実施態様では、光源131は、液晶もしくはフィールドシーケンシャルカラーディスプレイのバックライト、反射ディスプレイ(たとえば、干渉変調器(IMOD)ディスプレイ)のフロントライト、放射ディスプレイ(たとえば、有機発光ダイオードディスプレイ)からの光、または可視光を通さないカバーガラスのアートワークエリアを通り抜けて下方に放射される赤外光を含むことができる。
カメラ133は、いくつかの実施態様では、ビデオグラフィックスアレイ(VGA)マイクロカメラである。カメラ133は、白黒カメラとすることができ、光フィルタを含むことができる。カメラ133は、約500μm径のレンズを含むことができ、4mm径未満のセンサパッケージ内に収容される場合がある。結果として、カメラ133は、電子ディスプレイ100のスタック高に目に見えて加わることなく、第1の平面導光路165と同一平面構成内に位置することができる。
いくつかの実施態様では、第1の平面導光路165および第2の平面導光路135の一方または両方が、光転向構成(図示せず)を含むことができる。たとえば、第2の平面導光路135は、光源131から受光される光を、前面167に対して直交する実質的な成分を有する方向に反射する、微細構造または格子の1つまたは複数を有する光転向構成を含むことができる。たとえば、回折によって光を転向させるホログラフィックフィルムおよび表面レリーフ格子、または散乱によって光を転向させる表面粗さを含む、他の光転向デバイスも本開示において考えられる。
ここで図2の詳細Aを参照すると、光142が、第1の平面導光路165を通り抜け、物体150と相互作用することができる。物体150は、第1の平面導光路165の上面167と少なくとも部分的に光学的に接触している。物体150は、ユーザの指もしくは他の付属物とすることができるか、または可視光もしくはIR光カメラによって検出可能なバーコード識別子もしくは暗号透かしを含むドキュメントもしくは電子的に表示される画像のような、撮像されるべき別の物体とすることができる。光142と物体150との相互作用から散乱光146が生じる。散乱光146のうちの一部は、光線追跡146(0)によって示されるように、第1の平面導光路165によって内部反射されることなく、カメラ133に進み、カメラ133によって検出することができる。散乱光146のうちの少なくとも一部が、TIRを受ける場合がある。たとえば、光線追跡146(1)によって示されるように、散乱光146のうちの一部が、カメラ133によって検出される前に、一度だけ内部反射を受ける場合がある。散乱光のうちの一部は、カメラ133によって検出される前に、2回、3回または4回以上の内部反射を受ける場合があることは理解されよう。カメラ133は、検出された光の画像データをプロセッサ1004(図1)に出力することができる。図2の詳細Aをさらに参照すると、カメラ133は、光軸134を有するレンズ132を含むことができることに留意されたい。いくつかの実施態様では、カメラ133は、光軸134が前面167と概ね平行であるように配置することができる。
物体150が、ユーザの指または親指のような人の指である場合、検出された光の画像データは指紋を含むことができる。より詳細には、いくつかの実施態様では、光源131からの光が、前面167と光学的に接触している指の表面と相互作用することが考えられる。指の皮膚隆線(skin ridge)が前面167と接触するとき、皮膚隆線が光を第1の平面導光路165の中に散乱させる。散乱光146(i)は、カメラ133に導光され、次いで、検出される。指の皮膚隆線間のくぼみは第1の平面導光路165と光学的に接触していないので、そのようなくぼみによって散乱する少なくとも大部分の光はTIRを受けず、結果としてカメラ133に達しない。結果として、これらの隆線は、カメラ画像内の明るいエリアに対応し、くぼみは暗いエリアに対応することができる。
図3は、本明細書で開示されている技法を用いて取得されたカメラ画像の一例を示す。図3では、より詳細には、カメラ133によって取得されるような、シミュレートされた指紋の画像が示される。したがって、プロセッサ1004は、カメラ133から、ユーザの指紋の画像、ならびにユーザがタッチした位置を受信することができる。プロセッサによって実行されるコンピュータアルゴリズムは、ユーザの身元を特定するか、ユーザが認定ユーザであることを認証するか、または別の方法で指紋を分類するように指紋画像を解釈することができる。
いくつかの実施態様では、ユーザは、電子ディスプレイ100のタッチスクリーンインターフェースを通して、ソフトウェアおよびコンピュータアプリケーションとやりとりする。結果として、ユーザは、定期的にディスプレイにタッチしている場合がある。本明細書において開示される指紋検出技法は、ユーザがタッチすることによって電子ディスプレイ100とやりとりしている期間中に、絶えず、または間隔を置いて実行することができる。結果として生成されるユーザ身元情報は、種々のやり方で使用される場合がある。たとえば、何人かの個々のユーザのそれぞれに関連付けられる特有のアプリケーションプロファイルに応答して、および/またはそのような個々のユーザの使用履歴および選好に応答して、たとえば、ユーザに合わせたコンテンツを提示できることが考えられる。いくつかの実施態様では、プロセッサは、電子ディスプレイにユーザの秘密情報を提示させるように、もしくは電子ディスプレイがユーザの秘密情報を提示できるように、または電子ディスプレイに既知のユーザ選好に基づいて、もしくは最近のユーザ活動に基づいてコンテンツを提示させるように、もしくは電子ディスプレイが既知のユーザ選好に基づいて、もしくは最近のユーザ活動に基づいてコンテンツを提示できるように構成することができる。さらに、連続したセキュリティ認証が提供される場合があり、および/または電子ディスプレイ100と同時にやりとりしている複数のユーザが追跡される場合がある。
先に示されたように、電子ディスプレイ100の表示エリア101は、光学撮像エリア(指紋読取エリア)102を含むことができる。いくつかの実施態様では、指紋読取エリア102は、表示エリアと実質的に同じ広がりを有することができる。いくつかの実施態様では、指紋読取エリア102は、指紋検出に応答することが意図される表示エリアの特定の部分のみを含むことができ、その特定の部分のサイズは表示エリアより小さい。たとえば、指紋検出がそのエリアにおいて行われることをユーザに知らせるために、アプリケーションによって表示エリア101内に提示される、電子ディスプレイ100上の仮想ボタンが存在する場合がある。その代わりに、またはそれに加えて、画面のエッジまたは隅付近に、タッチされるときに認証を実行する特定のエリアが存在する場合がある(たとえば、ユーザによってタッチされるときに、電子ディスプレイ100上に提示されるグラフィカルユーザインターフェースの「開始」ボタンまたはメニューボタンが、ユーザの身元のチェックを開始することができる)。
図2の詳細Aを再び参照すると、2つの光線追跡146(0)および146(1)が示されるが、物体150の画像の複数の個別の反射がカメラ133によって検出される場合があることは理解されよう。これらの複数の個別の反射の生成は、本明細書において万華鏡効果と呼ばれる場合がある。図4は、本明細書で開示されている技法を用いて取得された別のカメラ画像の一例を示す。より詳細には、図4は、カメラ133の視野の中央に1本の指でタッチした場合のカメラ133からの一例の画像を示す。図示される例では、タッチの直接の画像は位置401にある。位置401の上方および下方にある画像データは、物体150とカメラ133との間で1回または複数回の内部反射を受けた光線から生じる。
図5は、万華鏡効果の一例を示す。より詳細には、図5は、カメラ133によって記録された複数の画像がそれぞれ、それぞれの仮想物体位置に関連付けることができる異なる角度において物体150から散乱する光にいかに対応するかを示す。たとえば、画像i150は、物体150の直接画像に対応する。画像iv1は、1回の内部反射を受けた光線からの結果として生じ、仮想物体位置v1に対応する。画像iv2は、2回の内部反射を受けた光線からの結果として生じ、仮想物体位置v2に対応する。いくつかの実施態様では、コンピュータアルゴリズムは、異なる指紋を認識または分類するためのさらなる次元の情報(従来の指紋読取装置では入手できない)を取得するために指隆線散乱の角度情報を使用することができる。たとえば、さらなる情報を用いて、指隆線の3Dプロファイルの近似を再構成することができる。
いくつかの実施態様では、カメラ133は、赤外スペクトルと可視スペクトルの両方において画像を撮影することができ、および/または時系列において複数の画像を取り込むことができる。スペクトル情報および/または時間情報を用いて、生きている人間の実際の指であるか否かを判断することになる、物体の「生存性」試験を実行することができる。たとえば、パルスオキシメトリ、心拍数、皮膚色、グルコース組成などを特定するアルゴリズムを、空間的および/または時間的情報および信号強度に適用することができる。
いくつかの実施態様では、カメラ133は、熱赤外線波長に対する感度が高い1つまたは複数のピクセルを有することができる。その代わりに、またはそれに加えて、電子ディスプレイ100の周辺部に1つまたは複数の熱赤外線センサを配置することができる。そのような実施態様では、照明から反射されるのではなく、熱赤外線において皮膚によって放射される光を、生存性試験のために使用することができる。
いくつかの実施態様では、指紋認識または分類を改善するために、カメラ画像にフィルタリングおよびコントラスト向上/画像鮮明化アルゴリズムを適用することができる。その代わりに、またはそれに加えて、複数の反射のそれぞれの重なり合う部分を分離するために、指紋パターンに逆畳み込みアルゴリズムを適用することができる。
いくつかの実施態様では、解像度を改善するために、および指紋認識または分類を改善するために、空間、時間および/または位相情報とともに、超解像アルゴリズムを使用することができる。
いくつかの実施態様では、指紋コントラストまたは光学的結合を高めるために、導光路の上面に薄膜または表面処理を施すことができる。その代わりに、またはそれに加えて、システムの感度を改善するために、照明光の強度に変調を加えることができる。
いくつかの実施態様では、照明光のために、レーザによって生成されるようなコヒーレント光を使用することができる。結果として生成されるスペックルパターンを用いて、たとえば、システムの感度を改善することができる。
いくつかの実施態様では、照明光のために偏光を使用することができる。カメラセンサは、画像コントラストおよび感度を高め、偏光に対して感度が高い生物学的マーカ(たとえば、グルコース濃度)を精査する偏光フィルタを含むことができる。
カメラは、(皮膚内の生物学的マーカに対応する波長を精査することによって)生存性試験のために「ハイパースペクトル」フィルタアレイ(赤色、緑色および青色の従来の3色より多くの色または異なる色を有するフィルタ)を含むことができる。
図6は、別の実施態様による、電子ディスプレイの断面立面図を示す。例示される実施態様では、電子ディスプレイ600が、第1の平面導光路165の平面下に位置するカメラ133を含む。たとえば、第1の平面導光路165のエッジに近接してプリズムまたは他の光転向構成(図示せず)を配置することができる。プリズムまたは他の光転向構成は、散乱IR光146をカメラ133に向かって変向することができる。
いくつかの実施態様では、ウェアラブルデバイスが、指紋を認識するとロック解除することができ、および/または遠隔デバイス(たとえば、コンピュータ、車両、ドア、家庭電化製品、医療デバイスまたは他のデバイス)をロック解除するように構成することができる。本明細書において使用されるとき、「ウェアラブルデバイス」という用語の意味は、ユーザによって着用される場合があるデバイス(たとえば、アームバンド、リストバンド、胸郭バンドなどによる)、ユーザの皮膚に取り付けられる場合があるデバイス(たとえば、接着材料による)、およびユーザの人体に少なくとも一時的に埋め込まれる場合があるデバイスを包含する。図7は、電子ディスプレイが遠隔ロック可能デバイスと通信可能に結合される構成の簡略化されたブロック図である。電子ディスプレイは、例示される実施態様において、たとえば、腕時計と同様のサイズおよびフォームファクタを有するウェアラブルデバイス700として構成される。電子ディスプレイ700は、表示エリア701と、表示エリア内に配置される、指紋読取エリア702とを含む。ウェアラブルデバイスは、有線またはワイヤレス通信リンクによって、遠隔ロック可能デバイスと通信可能に結合することができる。ワイヤレス通信リンクは、たとえば、Bluetooh(登録商標)またはIEEE802.11標準規格に準拠することができる。
図1および図2との関連で先に説明された実施形態と同様に、電子ディスプレイ700は、受光された散乱光を検出する少なくとも1つの光検知素子(図示せず)を含むことができ、受光された散乱光は、光と、指紋読取エリア702と光学的に接触して位置するユーザの指との相互作用から生じる。光検知素子は、プロセッサ(図示せず)に指紋画像データを出力することができる。プロセッサは、ウェアラブルデバイス700と通信可能に結合することができ、ウェアラブルデバイス700に組み込まれるにしても、組み込まれないにしても、指紋画像データに基づいてユーザの生体認証を行うように構成することができる。プロセッサは、遠隔ロック可能デバイスに、生体認証後にロックさせるか、またはロック解除させることができる。
図8は、いくつかの実施態様による、指紋画像データを取得するためのプロセスフロー図である。電子ディスプレイは、プロセス800を実行するように構成することができる。いくつかの実施態様では、光検知素子133および指紋読取エリア102を含む電子ディスプレイ100を、プロセッサ1004と協働してプロセス800を実行するように構成することができる。プロセス800は、ブロック801において、光検知素子を用いて、受光された散乱光を検出することにより開始することができる。受光された散乱光は、光とユーザの指との相互作用から生じる場合があり、指は電子ディスプレイの指紋読取エリアと少なくとも部分的に光学的に接触している。
ブロック803において、光検知素子は、プロセッサに指紋画像データを出力することができる。オプションで、プロセッサは、ブロック805において、ユーザが電子ディスプレイの認定ユーザであるか否かを判断することができる。たとえば、プロセッサは、光検知素子から受信された指紋画像データと、既知のユーザおよび/または認定ユーザの指紋画像データとの間の比較を行うことができる。オプションで、プロセッサは、ブロック807において、指紋画像データに基づいて、ユーザの生体認証を行うこともできる。たとえば、光検知素子によって出力される指紋画像データは、ユーザの身元を認証するために、既知の指紋画像のデータベースと比較することができる。
このように、電子デバイスのユーザの生体認証を提供するための改善された技法が開示されてきた。本開示において説明された実施態様に対する種々の変更形態が、当業者には容易に明らかになる場合があり、本明細書において規定された一般原理は、本開示の趣旨または範囲から逸脱することなく、他の実施態様に適用することができる。したがって、特許請求の範囲は、本明細書において示されている実施態様に限定されることを意図するものではなく、本開示、本明細書において開示される原理および新規の特徴と一致する最も広い範囲を与えられるべきである。
本明細書で使用されるとき、項目のリストのうちの「少なくとも1つ」を指す語句は、単一の部材を含む、それらの項目の任意の組合せを指す。一例として、「a、b、またはcのうちの少なくとも1つ」は、a、b、c、a-b、a-c、b-c、およびa-b-cを包含することを意図している。
本明細書において開示される実施態様に関連して説明された種々の例示的なロジック、論理ブロック、モジュール、回路およびアルゴリズムプロセスは、電子ハードウェア、コンピュータソフトウェアまたは両方の組合せとして実施することができる。ハードウェアおよびソフトウェアの互換性が、概して機能の観点から説明されており、上記の種々の例示的な構成要素、ブロック、モジュール、回路およびプロセスにおいて例示されてきた。そのような機能がハードウェアにおいて実施されるか、ソフトウェアにおいて実施されるかは、システム全体に課される特定の適用例および設計制約によって決まる。
本明細書において開示された態様に関連して説明された種々の例示的なロジック、論理ブロック、モジュール、および回路を実施するために使用されるハードウェアおよびデータ処理装置は、汎用のシングルチップもしくはマルチチッププロセッサ、デジタルシグナルプロセッサ(DSP)、特定用途向け集積回路(ASIC)、フィールドプログラマブルゲートアレイ(FPGA)もしくは他のプログラマブル論理デバイス、ディスクリートゲートもしくはトランジスタロジック、ディスクリートハードウェア構成要素、または、本明細書において説明された機能を実行するように設計されたそれらの任意の組合せを用いて実施または実行することができる。汎用プロセッサはマイクロプロセッサとすることができるか、または任意の従来のプロセッサ、コントローラ、マイクロコントローラもしくはステートマシンとすることができる。また、プロセッサは、コンピューティングデバイスの組合せ、たとえば、DSPおよびマイクロプロセッサの組合せ、複数のマイクロプロセッサ、DSPコアと一体化した1つもしくは複数のマイクロプロセッサ、または任意の他のそのような構成として実施することもできる。いくつかの実施態様では、特定のプロセスおよび方法は、所与の機能に特有の回路構成で実行することができる。
1つまたは複数の態様では、説明された機能は、本明細書において開示された構造およびそれらの構造的均等物を含む、ハードウェア、デジタル電子回路構成、コンピュータソフトウェア、ファームウェア、またはそれらの任意の組合せにおいて実施することができる。また、本明細書において説明される主題の実施態様は、1つまたは複数のコンピュータプログラムとして、すなわち、データ処理装置によって実行するか、またはデータ処理装置の動作を制御するための、コンピュータ記憶媒体上に符号化されたコンピュータプログラム命令の1つまたは複数のモジュールとして、実施することができる。
それらの機能は、ソフトウェアにおいて実施される場合、1つまたは複数の命令またはコードとして、非一時的媒体などのコンピュータ可読媒体上に記憶することができるか、コンピュータ可読媒体を介して送信することができる。本明細書において開示された方法またはアルゴリズムのプロセスは、コンピュータ可読媒体上に存在する場合があるプロセッサ実行可能ソフトウェアモジュールにおいて実施することができる。コンピュータ可読媒体は、ある場所から別の場所にコンピュータプログラムを転送できるようにする任意の媒体を含む、コンピュータ記憶媒体と通信媒体の両方を含む。記憶媒体は、コンピュータによってアクセスされる場合がある任意の入手可能な媒体とすることができる。限定ではなく例として、非一時的媒体は、RAM、ROM、EEPROM、CD-ROMもしくは他の光ディスク記憶装置、磁気ディスク記憶装置もしくは他の磁気記憶デバイス、または、命令もしくはデータ構造の形式で所望のプログラムコードを記憶するために使用される場合があり、コンピュータによってアクセスされる場合がある任意の他の媒体を含むことができる。また、任意の接続もコンピュータ可読媒体と適切に呼ぶことができる。本明細書において使用されるときに、ディスク(disk)およびディスク(disc)は、コンパクトディスク(CD)(disc)、レーザディスク(disc)、光ディスク(disc)、デジタル多用途ディスク(DVD)(disc)、フロッピーディスク(disk)、およびブルーレイディスク(disc)を含み、ディスク(disk)は、通常、データを磁気的に再生し、ディスク(disc)は、データをレーザで光学的に再生する。上記の組合せも、コンピュータ可読媒体の範囲内に含まれるべきである。さらに、方法またはアルゴリズムの動作は、コードおよび命令のうちの1つもしくは任意の組合せまたはセットとして、コンピュータプログラム製品に組み込まれる場合がある機械可読媒体およびコンピュータ可読媒体上に存在することができる。
さらに、図を説明しやすくするために、「上側の」、「下側の」という用語が用いられることがあるが、それらの用語は、適切に向けられたページ上の図の向きに対応する相対的位置を示しており、実施されたときのデバイスの適切な向きを反映しない場合があることは、当業者は容易に理解されよう。
本明細書において別々の実施態様の文脈で説明されるいくつかの特徴は、単一の実施態様において組み合わせて実施することもできる。逆に、単一の実施態様の文脈で説明される種々の特徴も、複数の実施態様において、別々に実施することができるか、または任意の適切な部分的組合せにおいて実施することができる。さらに、特徴は、特定の組合せにおいて役割を果たすものとしてこれまで説明され、さらには最初にそのようなものとして特許請求される場合があるが、特許請求される組合せからの1つまたは複数の特徴は、場合によっては組合せから削除することができ、また、特許請求される組合せは、部分的組合せまたは部分的組合せの変形形態を対象とする場合もある。
同様に、動作は、特定の順序において図面に示されているが、これは、そのような動作が図示された特定の順序において、または順次に実行されることを必要とするか、または、所望の結果を達成するためにすべての示された動作が実行されることを必要とするものと理解されるべきではない。さらに、図面は、1つまたは複数の例のプロセスをフロー図の形で概略的に示す場合がある。しかしながら、概略的に示されている例のプロセスには、図に示されていない他の動作を組み込むことができる。たとえば、例示される任意の動作の前に、後に、動作と同時に、またはこれらの動作間に、1つまたは複数の追加動作を実行することができる。特定の状況では、マルチタスク処理および並列処理が有利な場合がある。さらに、上記の実施態様における種々のシステム構成要素の分割は、すべての実施態様においてそのように分割する必要があるものと理解すべきではなく、説明されるプログラムコンポーネントおよびシステムは、一般に、単一のソフトウェア製品内に共に統合することができるか、または複数のソフトウェア製品の中にパッケージすることができることを理解されたい。さらに、他の実施態様も以下の特許請求の範囲内にある。場合によっては、特許請求の範囲において列挙される動作は、異なる順序において実行することができ、それでも望ましい結果を達成することができる。
100 電子ディスプレイ
101 表示エリア
102 光学撮像エリア、指紋読取エリア
131 光源
132 レンズ
133 光検知素子、感光素子、カメラ
134 光軸
135 第2の平面導光路
142 光
145 ディスプレイ層
146 散乱光
146(i) 散乱光
146(0) 光線追跡
146(1) 光線追跡
150 物体
165 ディスプレイカバーガラス、第1の平面導光路
167 前面、上面
401 位置
600 電子ディスプレイ
700 ウェアラブルデバイス
701 表示エリア
702 指紋読取エリア
800 プロセス
1004 プロセッサ
iv1 画像
iv2 画像
v1 仮想物体位置
v2 仮想物体位置

Claims (45)

  1. 表示エリアと、前記表示エリア内の指紋読取エリアとを含む前面を備えるディスプレイカバーガラスを有する電子ディスプレイと、
    第1の平面導光路と、
    少なくとも1つの光検知素子であって、
    受光された散乱光を検出することであって、
    前記受光された散乱光は、光と、前記指紋読取エリア内で前記前面と少なくとも部分的に光学的に接触している物体との相互作用から生じる、検出することと、
    前記光検知素子の視野内で、前記物体の複数の画像を記録することであって、
    前記複数の画像のそれぞれは、前記物体からそれぞれの角度で散乱されるとともに、前記光検知素子によって検出される前に、前記第1の平面導光路内で、それぞれの回数の内部反射を受ける光に対応する、記録することと、
    プロセッサに、前記複数の画像の画像データを出力することと
    を行うように構成される少なくとも1つの光検知素子と
    を備え、
    前記それぞれの角度および前記それぞれの回数の内部反射は、前記複数の画像のそれぞれで異なり、
    前記プロセッサは、前記画像データから、前記電子ディスプレイのユーザの指紋を認識するように構成される、装置。
  2. 前記指紋読取エリアは、前記表示エリアと同じ広がりを有する、請求項1に記載の装置。
  3. 前記光検知素子は、前記ディスプレイカバーガラスの前記前面を含む平面内に、または前記平面の後方に配置される、請求項1に記載の装置。
  4. 前記光検知素子は、前記表示エリアの外側に存在するか、前記表示エリアの周辺部に近接して存在するか、またはその両方である、請求項1に記載の装置。
  5. 前記光検知素子はカメラを含む、請求項1に記載の装置。
  6. 前記カメラは光軸を有するレンズを含み、前記カメラは、前記光軸が前記前面に対して平行になるようにして配置される、請求項5に記載の装置。
  7. 前記カメラはビデオグラフィックスアレイマイクロカメラを含む、請求項5に記載の装置。
  8. 前記第1の平面導光路は、前記前面に近接し、かつその後方に配置されるとともに、前記受光された散乱光を前記光検知素子に向かって変向するように構成される、請求項1に記載の装置。
  9. 前記光検知素子は前記第1の平面導光路に光学的に結合される、請求項8に記載の装置。
  10. 前記ディスプレイカバーガラスは、前記第1の平面導光路を含む、請求項8に記載の装置。
  11. 前記散乱光のうちの少なくとも一部は、前記光検知素子によって検出される前に、前記第1の平面導光路内で2回以上の内部反射を受ける、請求項8に記載の装置。
  12. 前記プロセッサは、前記画像データに基づいて、ユーザが認定ユーザであるか否かを判断するように構成される、請求項1に記載の装置。
  13. 前記プロセッサは、前記画像データに基づいて、ユーザの生体認証を行うように構成される、請求項1に記載の装置。
  14. 前記プロセッサは、前記ユーザが前記電子ディスプレイの画面とやりとりしている間に、前記生体認証をリアルタイムに行うように構成される、請求項13に記載の装置。
  15. 前記生体認証は、ユーザの身元を判断すること、前記ユーザが認定ユーザであることを認証すること、または別の方法で前記指紋を分類することのうちの1つまたは複数を含む、請求項13に記載の装置。
  16. 前記電子ディスプレイは、遠隔ロック可能デバイスと通信可能に結合され、前記プロセッサは、前記遠隔ロック可能デバイスに、前記生体認証後にロックさせるかまたはロック解除させることができる、請求項13に記載の装置。
  17. 前記電子ディスプレイは、有線またはワイヤレス通信リンクによって、前記遠隔ロック可能デバイスと通信可能に結合される、請求項16に記載の装置。
  18. 前記電子ディスプレイはウェアラブルデバイスとして構成される、請求項16に記載の装置。
  19. 前記プロセッサは、前記電子ディスプレイに、生体認証に基づいてユーザに合わせたコンテンツを提示させるように構成される、請求項13に記載の装置。
  20. 前記プロセッサは、何人かの個々のユーザごとに特有のアプリケーションプロファイルのうちの1つまたは複数に応答して、かつそのような個々のユーザの使用履歴および選好に応答して、前記ユーザに合わせたコンテンツを表示するように構成される、請求項19に記載の装置。
  21. 前記プロセッサは、連続的な生体認証、およびディスプレイ画面と同時にやりとりとしている複数のユーザの生体認証のうちの1つまたは複数を実行するように構成される、請求項13に記載の装置。
  22. 前記電子ディスプレイは、前記電子ディスプレイと通信可能に結合される装置または電子デバイスのユーザに入力/出力インターフェースを提供する、請求項1に記載の装置。
  23. 前記電子ディスプレイは、前記第1の平面導光路の中に、または前記第1の平面導光路を通して光を誘導する少なくとも1つの光源を含む、請求項1に記載の装置。
  24. 前記少なくとも1つの光源は、液晶またはフィールドシーケンシャルカラーディスプレイのバックライト、反射型ディスプレイのフロントライト、放射型ディスプレイ、前記ディスプレイカバーガラスのアートワークエリアを通って真下に放射される赤外光のうちの1つまたは複数を含む、請求項23に記載の装置。
  25. 前記少なくとも1つの光源は、前記表示エリアの外側に、または前記表示エリアの周辺部に近接して配置される、請求項23に記載の装置。
  26. 前記電子ディスプレイは、前記第1の平面導光路の後方に配置され、かつ光源から受光された光を前記前面に対して直交する成分を有する方向に変向するように構成される第2の平面導光路を含む、請求項1に記載の装置。
  27. 前記光検知素子は、ユーザ付属物の表面によって放射される赤外光を検出するように構成される、請求項1に記載の装置。
  28. 前記プロセッサは、前記放射された赤外光の測定値に基づいて、ユーザ付属物の生存性判断を行うように構成される、請求項27に記載の装置。
  29. 表示エリアと、前記表示エリア内の光学撮像エリアとを含む前面を備えるディスプレイカバーガラスを有する電子ディスプレイと、
    第1の平面導光路と、
    少なくとも1つの光検知素子であって、
    受光された散乱光を検出することであって、
    前記受光された散乱光は、光と、前記光学撮像エリア内で前記前面と光学的に接触している物体との相互作用から生じる、検出することと、
    前記光検知素子の視野内で、前記物体の複数の画像を記録することであって、
    前記複数の画像のそれぞれは、前記物体からそれぞれの角度で散乱されるとともに、前記光検知素子によって検出される前に、前記第1の平面導光路内で、それぞれの回数の内部反射を受ける光に対応する、記録することと、
    プロセッサに、前記複数の画像の画像データを出力することと
    を行うように構成される少なくとも1つの光検知素子と
    を備え、
    前記それぞれの角度および前記それぞれの回数の内部反射は、前記複数の画像のそれぞれで異なり、
    前記プロセッサは、前記画像データから、前記物体の特性を認識するように構成される、装置。
  30. 前記光学撮像エリアは、前記表示エリアと同じ広がりを有する、請求項29に記載の装置。
  31. 前記物体は、ユーザの指または他の付属物であり、前記光学撮像エリアは、指紋読取装置として構成される、請求項29に記載の装置。
  32. 前記物体は、ユーザの指もしくは他の付属物か、または撮像されるべき物体である、請求項29に記載の装置。
  33. 前記撮像されるべき物体は、バーコード識別子または暗号透かしのうちの1つまたは複数を含むドキュメントまたは表示画像である、請求項32に記載の装置。
  34. 前記光検知素子はカメラであり、前記カメラは光軸を有するレンズを含み、
    前記カメラは、前記光軸が前記前面に対して平行になるようにして配置される、請求項29に記載の装置。
  35. 前記プロセッサは、前記画像データに基づいて、ユーザの認証を行うように構成される、請求項29に記載の装置。
  36. 前記電子ディスプレイは、遠隔ロック可能デバイスと通信可能に結合され、前記プロセッサは、前記遠隔ロック可能デバイスに、前記ユーザの前記認証後にロックさせるか、またはロック解除させることができる、請求項35に記載の装置。
  37. 前記プロセッサは、前記認証に基づいて、ユーザに合わせたコンテンツを表示するように構成される、請求項35に記載の装置。
  38. 表示エリアと、前記表示エリア内の指紋読取エリアとを含む前面を備えるディスプレイカバーガラスを有する電子ディスプレイと、
    第1の平面導光路と、
    受光された散乱光を検出するための手段であって、前記受光された散乱光は、光と、前記前面の前記指紋読取エリアと少なくとも部分的に光学的に接触している物体との相互作用から生じる、手段と
    を備え、
    受光された散乱光を検出するための前記手段は、
    光検知素子の視野内で、前記物体の複数の画像を記録することであって、
    前記複数の画像のそれぞれは、前記物体からそれぞれの角度で散乱されるとともに、前記光検知素子によって検出される前に、前記第1の平面導光路内で、それぞれの回数の内部反射を受ける光に対応する、記録することと、
    プロセッサに、前記複数の画像の画像データを出力することと
    を行うように構成され、
    前記それぞれの角度および前記それぞれの回数の内部反射は、前記複数の画像のそれぞれで異なり、
    前記プロセッサは、前記画像データから、前記電子ディスプレイのユーザの指紋を認識するように構成される、装置。
  39. 前記指紋読取エリアは、前記表示エリアと同じ広がりを有する、請求項38に記載の装置。
  40. 前記プロセッサは、前記画像データに基づいて、ユーザが認定ユーザであるか否かを判断するように構成される、請求項38に記載の装置。
  41. 前記プロセッサは、前記画像データに基づいて、ユーザの生体認証を行うように構成される、請求項38に記載の装置。
  42. 光検知素子を用いて、受光された散乱光を検出するステップであって、前記受光された散乱光は、光と、電子ディスプレイのディスプレイカバーガラスの前面の指紋読取エリアと少なくとも部分的に光学的に接触している物体との相互作用から生じ、前記前面は表示エリアを有し、前記指紋読取エリアは前記表示エリア内にある、ステップと、
    前記光検知素子からプロセッサに指紋画像データを出力するステップと
    を含み、
    前記光検知素子は、
    前記光検知素子の視野内で、前記物体の複数の画像を記録することであって、
    前記複数の画像のそれぞれは、前記物体からそれぞれの角度で散乱されるとともに、前記光検知素子によって検出される前に、第1の平面導光路内で、それぞれの回数の内部反射を受ける光に対応する、記録することと、
    プロセッサに、前記複数の画像の画像データを出力することと
    を行うように構成され、
    前記それぞれの角度および前記それぞれの回数の内部反射は、前記複数の画像のそれぞれで異なり、
    前記プロセッサは、前記画像データから、前記電子ディスプレイのユーザの指紋を認識するように構成される、方法。
  43. 前記指紋読取エリアは、前記表示エリアと同じ広がりを有する、請求項42に記載の方法。
  44. プロセッサを用いて、前記指紋画像データに基づいて、ユーザが認定ユーザであるか否かを判断するステップをさらに含む、請求項42に記載の方法。
  45. プロセッサを用いて、前記指紋画像データに基づいて、ユーザの生体認証を行うステップをさらに含む、請求項42に記載の方法。
JP2016562920A 2014-04-28 2015-03-26 ディスプレイに統合されるユーザ分類、セキュリティおよび指紋システム Active JP6623171B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201461985305P 2014-04-28 2014-04-28
US61/985,305 2014-04-28
US14/499,860 US10116868B2 (en) 2014-04-28 2014-09-29 Display-integrated user-classification, security and fingerprint system
US14/499,860 2014-09-29
PCT/US2015/022775 WO2015167711A1 (en) 2014-04-28 2015-03-26 Display-integrated user-classification, security and fingerprint system

Publications (3)

Publication Number Publication Date
JP2017516208A JP2017516208A (ja) 2017-06-15
JP2017516208A5 JP2017516208A5 (ja) 2019-10-10
JP6623171B2 true JP6623171B2 (ja) 2019-12-18

Family

ID=54335059

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016562920A Active JP6623171B2 (ja) 2014-04-28 2015-03-26 ディスプレイに統合されるユーザ分類、セキュリティおよび指紋システム

Country Status (10)

Country Link
US (1) US10116868B2 (ja)
EP (1) EP3138037B1 (ja)
JP (1) JP6623171B2 (ja)
KR (1) KR102357092B1 (ja)
CN (1) CN106233295B (ja)
BR (1) BR112016024966B1 (ja)
ES (1) ES2776396T3 (ja)
HU (1) HUE048956T2 (ja)
TW (1) TWI666566B (ja)
WO (1) WO2015167711A1 (ja)

Families Citing this family (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10116868B2 (en) 2014-04-28 2018-10-30 Qualcomm Incorporated Display-integrated user-classification, security and fingerprint system
US9582117B2 (en) 2014-04-28 2017-02-28 Qualcomm Incorporated Pressure, rotation and stylus functionality for interactive display screens
KR102299365B1 (ko) * 2014-11-03 2021-09-07 삼성전자주식회사 스페클을 이용한 인증 장치, 이를 포함하는 인증 시스템 및 스페클을 이용한 인증 방법
US9953148B2 (en) * 2014-12-23 2018-04-24 Ebay Inc. System and method for unlocking devices associated with a carrying bag
JP2017097295A (ja) * 2015-11-27 2017-06-01 株式会社東芝 表示装置
CN106875842B (zh) * 2015-12-11 2020-02-07 印象认知（北京）科技有限公司 具有指纹采集功能的显示屏
US9916433B2 (en) * 2016-02-10 2018-03-13 ContinUse Biometrics Ltd. Condition authentication based upon temporal-spatial analysis of vibrational responsivity
US10164975B1 (en) * 2016-03-30 2018-12-25 Snap Inc. Authentication via camera
US11416041B2 (en) * 2016-05-23 2022-08-16 Microsoft Technology Licensing, Llc. Device having display integrated infrared and visible light source
JP6787566B2 (ja) * 2016-07-13 2020-11-18 富士通コネクテッドテクノロジーズ株式会社 生体認証装置及び生体認証装置を備える電子機器
US10729542B2 (en) 2016-10-26 2020-08-04 Medtronic Vascular, Inc. Stented prosthetic heart valve having a paravalvular sealing wrap
KR20180046788A (ko) 2016-10-28 2018-05-09 삼성전자주식회사 지문 센서에 입력되는 노이즈를 감소시키는 장치
KR102663715B1 (ko) 2016-11-15 2024-05-16 삼성디스플레이 주식회사 표시 장치 및 이의 제조 방법
KR102645631B1 (ko) 2016-11-22 2024-03-08 삼성디스플레이 주식회사 벤디드 표시 장치
KR20180057835A (ko) 2016-11-23 2018-05-31 삼성전자주식회사 지문 인식 센서가 실장된 웨어러블 타입 전자 장치
KR102136553B1 (ko) * 2016-11-30 2020-07-22 주식회사 엘지화학 디지털 디바이스의 제어 방법
KR20180085607A (ko) * 2017-01-19 2018-07-27 삼성전자주식회사 지문 인식 장치 및 방법
CN108780496A (zh) * 2017-02-13 2018-11-09 深圳市汇顶科技股份有限公司 传感装置以及终端设备
US20180239885A1 (en) * 2017-02-21 2018-08-23 Qualcomm Incorporated User equipment with smart biometric unlock
US10615239B2 (en) * 2017-03-07 2020-04-07 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Integration of display screen and optical fingerprint sensor
KR102322683B1 (ko) * 2017-03-20 2021-11-08 삼성전자 주식회사 생체 정보의 위조를 식별하기 위한 전자 장치 및 방법
KR102319372B1 (ko) 2017-04-11 2021-11-01 삼성전자주식회사 생체 센서를 포함하는 전자 장치
KR101910518B1 (ko) 2017-04-11 2018-10-22 삼성전자주식회사 생체 센서 및 생체 센서를 포함하는 장치
KR102403009B1 (ko) * 2017-04-28 2022-05-30 엘지디스플레이 주식회사 홀로그래픽 광학 소자를 이용한 지문 센서 일체형 표시장치
TWI633528B (zh) * 2017-06-19 2018-08-21 宏碁股份有限公司 顯示器校正系統與顯示器校正方法
JP7054324B2 (ja) * 2017-06-30 2022-04-13 京セラ株式会社 液晶表示装置
KR102346031B1 (ko) 2017-07-25 2022-01-03 삼성디스플레이 주식회사 표시 장치 및 이의 구동 방법
JP7241063B2 (ja) * 2017-08-22 2023-03-16 ルミレッズ ホールディング ベーフェー 生体認証のためのレーザスペックル分析
KR102410175B1 (ko) 2017-08-22 2022-06-17 삼성전자주식회사 생체 정보에 대응하는 광원을 이용하여 생체 정보를 획득하기 위한 방법 및 그 전자 장치
US10936170B2 (en) 2017-09-14 2021-03-02 Samsung Electronics Co., Ltd. Method for enabling interaction using fingerprint on display and electronic device thereof
KR102534186B1 (ko) 2017-11-10 2023-05-19 삼성전자주식회사 지문 센서를 포함하는 전자 장치
WO2019112282A1 (ko) * 2017-12-04 2019-06-13 주식회사 비욘드아이즈 지문인식 기능을 구비한 디스플레이
KR102398578B1 (ko) 2017-12-04 2022-05-16 아크소프트 코포레이션 리미티드 지문인식 기능을 구비한 디스플레이
CN108287634B (zh) * 2018-01-29 2020-11-03 上海天马微电子有限公司 触控显示面板、显示装置和触控显示面板的驱动方法
US20190244002A1 (en) * 2018-02-06 2019-08-08 Wuhan China Star Optoelectronics Semiconductor Display Technology Co., Ltd. Display device
CN109313703B (zh) 2018-08-15 2022-02-08 深圳市汇顶科技股份有限公司 屏下光学指纹识别系统、背光模组、显示屏幕及电子设备
EP3644222A4 (en) 2018-08-24 2020-08-26 Shenzhen Goodix Technology Co., Ltd. BACKLIGHT MODULE, METHOD AND DEVICE FOR FINGERPRINT RECOGNITION UNDER A SCREEN AND ELECTRONIC DEVICE
WO2020077505A1 (zh) * 2018-10-15 2020-04-23 深圳市汇顶科技股份有限公司 屏下指纹识别装置和电子设备
DE102019206363B3 (de) * 2019-05-03 2020-07-09 Audi Ag Kraftfahrzeug mit einer Vorrichtung zum farbabhängigen Detektieren von Bildinhalten sowie Rechenvorrichtung
DE102019206361A1 (de) * 2019-05-03 2020-11-05 Audi Ag Spektrometrievorrichtung zur nichtinvasiven Messung von zumindest einem medizinischen Kennwert an einem biologischen Gewebe
US11233799B1 (en) 2019-09-30 2022-01-25 Snap Inc. Scan to login
TWI773991B (zh) 2020-05-19 2022-08-11 財團法人工業技術研究院 指紋辨識方法及電子互動裝置
US11163970B1 (en) 2020-06-16 2021-11-02 Google Llc Optical fingerprint system with varying integration times across pixels
CN114495181A (zh) * 2020-11-12 2022-05-13 华为技术有限公司 一种电子设备
US11967172B2 (en) * 2020-11-20 2024-04-23 Image Match Design Inc. Biometric sensor device with in-glass fingerprint sensor
KR20220128730A (ko) * 2021-03-15 2022-09-22 삼성전자주식회사 사용자 인증을 위한 방법, 장치 및 저장 매체
US11275467B1 (en) * 2021-04-12 2022-03-15 Qualcomm Incorporated Integrating optical fingerprinting into a front-facing smartphone camera
US20220358304A1 (en) * 2021-05-05 2022-11-10 Qualcomm Incorporated All-screen optical fingerprinting

Family Cites Families (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5619586A (en) * 1990-12-20 1997-04-08 Thorn Emi Plc Method and apparatus for producing a directly viewable image of a fingerprint
DE69407628T2 (de) 1993-02-01 1998-08-27 Matsushita Electric Ind Co Ltd Wellenleiter-Bildübertragungsvorrichtung und Vorrichtung zur Identifikation von Fingerabdrücken
GB9516441D0 (en) 1995-08-10 1995-10-11 Philips Electronics Uk Ltd Light pen input systems
DE19535803A1 (de) 1995-09-26 1997-03-27 Computer Ges Konstanz Abtastvorrichtung zur optischen Abtastung von Objekten mit Oberflächenstruktur
JP3559754B2 (ja) 2000-07-25 2004-09-02 Ｎｅｃエレクトロニクス株式会社 指紋認証装置
US6956608B1 (en) 2000-08-11 2005-10-18 Identix Incorporated Fingerprint imaging device including an optical plate having microreflectors
US20020131624A1 (en) 2000-08-11 2002-09-19 Yury Shapiro Fingerprint imaging device with fake finger detection
US20030028872A1 (en) 2001-08-03 2003-02-06 Rajko Milovanovic System and method for real-time non-participatory user recognition and content provisioning
JP4186440B2 (ja) 2001-08-07 2008-11-26 オムロン株式会社 車両搭載機器の制御システム、携帯電話機、及び車両搭載機器の制御方法
JP2005520239A (ja) 2002-03-13 2005-07-07 オー−プン・アンパルトセルスカブ タッチパッド、タッチパッドを用いるスタイラス、及びタッチパッドを操作する方法
JP4229632B2 (ja) * 2002-04-26 2009-02-25 日本信号株式会社 指紋読取装置
US7313255B2 (en) 2003-05-19 2007-12-25 Avago Technologies Ecbu Ip Pte Ltd System and method for optically detecting a click event
US7214953B2 (en) * 2003-09-05 2007-05-08 Authentec, Inc. Multi-biometric finger sensor including optical dispersion sensing pixels and associated methods
KR100575144B1 (ko) 2004-03-10 2006-04-28 씨큐트로닉스 (주) 모바일기기용 광학 지문입력 장치
EP1728219A1 (de) 2004-03-19 2006-12-06 Roger Marcel Humbel Alles-schlüssel bzw. einstell software liste in handy (pass-partout) für funk-fahrrad-schlüsser, autos, häuser, rfid-tags mit zulassungs- und zahlungsverkehrs-funktion all in one remote key
US20060001654A1 (en) 2004-06-30 2006-01-05 National Semiconductor Corporation Apparatus and method for performing data entry with light based touch screen displays
GB2417858B (en) 2004-08-16 2009-03-04 Anwar Sharif Bajwa Access control device and arrangement using mobile phones or handheld wireless communicators for automatic wireless access with secure codes and biometrics da
EP3432181B1 (en) 2004-11-12 2019-10-02 Koninklijke Philips N.V. Distinctive user identification and authentication for multiple user access to display devices
TW200725431A (en) * 2005-12-23 2007-07-01 Hon Hai Prec Ind Co Ltd Input apparatus with a fingerprint identifying function and fingerprint identifying method thereof
US8077929B2 (en) 2006-02-22 2011-12-13 Wasatch Photonics, Inc. Ambient light rejection filter
JP4599320B2 (ja) 2006-03-13 2010-12-15 富士通株式会社 指紋認証装置、生体指判定装置および生体指判定方法
US7969426B2 (en) 2006-10-31 2011-06-28 Hewlett-Packard Development Company, L.P. Light sensitive display interface for computing devices
EP2131322A4 (en) 2007-04-04 2011-08-03 Sony Corp DEVICE FOR BIOMETRIC AUTHENTICATION
EP1988489B1 (en) 2007-05-04 2021-02-17 STMicroelectronics (Research & Development) Limited Biometric sensor apparatus and method
CN101932956B (zh) * 2007-07-03 2013-11-13 奥多麦卡有限公司 由不同材料构成的透镜单元和相机模块及其制造方法
JP4823985B2 (ja) 2007-08-07 2011-11-24 株式会社日立製作所 生体認証装置及び情報端末
US8120762B2 (en) 2007-11-30 2012-02-21 Nokia Corporation Light guide and optical sensing module input device and method for making same
JP5025551B2 (ja) * 2008-04-15 2012-09-12 キヤノン株式会社 タッチパネル
WO2010024008A1 (ja) 2008-08-29 2010-03-04 シャープ株式会社 座標センサ、電子機器、表示装置、受光ユニット
US8605960B2 (en) 2009-03-02 2013-12-10 Avago Technologies General Ip (Singapore) Pte. Ltd. Fingerprint sensing device
US8819172B2 (en) * 2010-11-04 2014-08-26 Digimarc Corporation Smartphone-based methods and systems
US9336428B2 (en) 2009-10-30 2016-05-10 Synaptics Incorporated Integrated fingerprint sensor and display
US8436833B2 (en) 2009-11-25 2013-05-07 Corning Incorporated Methods and apparatus for sensing touch events on a display
US9262011B2 (en) 2011-03-30 2016-02-16 Smart Technologies Ulc Interactive input system and method
US10725564B2 (en) 2011-10-28 2020-07-28 Wacom Co., Ltd. Differential sensing in an active stylus
US9367173B2 (en) 2012-01-17 2016-06-14 Apple Inc. Finger sensor having pixel sensing circuitry for coupling electrodes and pixel sensing traces and related methods
JP2013175142A (ja) 2012-01-27 2013-09-05 Sharp Corp 座標入力装置、及び座標入力システム
US20130265137A1 (en) 2012-04-02 2013-10-10 Validity Sensors, Inc. Integratable fingerprint sensor packagings
US9880653B2 (en) 2012-04-30 2018-01-30 Corning Incorporated Pressure-sensing touch system utilizing total-internal reflection
US9726803B2 (en) 2012-05-24 2017-08-08 Qualcomm Incorporated Full range gesture system
US9557846B2 (en) 2012-10-04 2017-01-31 Corning Incorporated Pressure-sensing touch system utilizing optical and capacitive systems
US9285923B2 (en) 2012-12-19 2016-03-15 Sharp Laboratories Of America, Inc. Touch sensitive display system
AU2014232432A1 (en) 2013-03-15 2015-09-24 Tactual Labs Co. Fast multi-touch noise reduction
US9582117B2 (en) 2014-04-28 2017-02-28 Qualcomm Incorporated Pressure, rotation and stylus functionality for interactive display screens
US10116868B2 (en) 2014-04-28 2018-10-30 Qualcomm Incorporated Display-integrated user-classification, security and fingerprint system

Also Published As

Publication number Publication date
CN106233295B (zh) 2020-02-28
TWI666566B (zh) 2019-07-21
EP3138037B1 (en) 2020-01-08
KR20160147943A (ko) 2016-12-23
TW201606554A (zh) 2016-02-16
EP3138037A1 (en) 2017-03-08
ES2776396T3 (es) 2020-07-30
JP2017516208A (ja) 2017-06-15
WO2015167711A1 (en) 2015-11-05
US20150310251A1 (en) 2015-10-29
CN106233295A (zh) 2016-12-14
BR112016024966A2 (pt) 2017-08-15
HUE048956T2 (hu) 2020-08-28
KR102357092B1 (ko) 2022-01-27
BR112016024966B1 (pt) 2022-10-04
US10116868B2 (en) 2018-10-30

Similar Documents

Publication Publication Date Title
JP6623171B2 (ja) ディスプレイに統合されるユーザ分類、セキュリティおよび指紋システム
CN108291838B (zh) 用于显示底板上的集成的光学传感器
US9582117B2 (en) Pressure, rotation and stylus functionality for interactive display screens
US10115000B2 (en) Method and system for optical imaging using patterned illumination
JP6444431B2 (ja) 対象物の動き検出および特徴化のための撮像装置
US11074467B2 (en) Anti-spoofing of transparent fake object overlays with optical sensing modules
US11010588B2 (en) Large-sensing-area under-display optical sensor
CN106030481B (zh) 大面积交互式显示屏
JP2017516208A5 (ja)
US11093595B2 (en) Anti-spoofing of two-dimensional fake objects with bright-dark reversal imaging in optical sensing modules
US20200409191A1 (en) Enhancement film for under-screen optical fingerprint sensor
US20200410207A1 (en) Asymmetric brightness enhancement films for liquid crystal display assemblies
US10901262B2 (en) Brightness enhancement and diffuser films for liquid crystal display assemblies
US11275467B1 (en) Integrating optical fingerprinting into a front-facing smartphone camera
WO2021012701A1 (en) Brightness enhancement and diffuser films for liquid crystal display assemblies
WO2023244266A1 (en) Using multi-perspective image sensors for topographical feature authentication

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161031

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180309

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180309

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190423

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190603

A524 Written submission of copy of amendment under article 19 pct

Free format text: JAPANESE INTERMEDIATE CODE: A524

Effective date: 20190902

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191028

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191125

R150 Certificate of patent or registration of utility model

Ref document number: 6623171

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250