JPWO2019159500A1 - 情報処理装置、情報処理方法、プログラム及びウェアラブル機器 - Google Patents

情報処理装置、情報処理方法、プログラム及びウェアラブル機器 Download PDF

Info

Publication number
JPWO2019159500A1
JPWO2019159500A1 JP2020500289A JP2020500289A JPWO2019159500A1 JP WO2019159500 A1 JPWO2019159500 A1 JP WO2019159500A1 JP 2020500289 A JP2020500289 A JP 2020500289A JP 2020500289 A JP2020500289 A JP 2020500289A JP WO2019159500 A1 JPWO2019159500 A1 JP WO2019159500A1
Authority
JP
Japan
Prior art keywords
display
unit
authentication
information processing
operating body
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2020500289A
Other languages
English (en)
Inventor
啓宏 王
啓宏 王
倉田 雅友
雅友 倉田
茂井 博之
博之 茂井
荘太 松澤
荘太 松澤
直子 小林
直子 小林
佐藤 真
真 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of JPWO2019159500A1 publication Critical patent/JPWO2019159500A1/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/08Network architectures or network communication protocols for network security for authentication of entities
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/60Static or dynamic means for assisting the user to position a body part for biometric acquisition
    • G06V40/67Static or dynamic means for assisting the user to position a body part for biometric acquisition by interactive indications to the user
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/0245Detecting, measuring or recording pulse rate or heart rate by using sensing means generating electric signals, i.e. ECG signals
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/117Identification of persons
    • A61B5/1171Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • A61B5/1172Identification of persons based on the shapes or appearances of their bodies or parts thereof using fingerprinting
    • GPHYSICS
    • G04HOROLOGY
    • G04GELECTRONIC TIME-PIECES
    • G04G21/00Input or output devices integrated in time-pieces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/32Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
    • H04L9/3226Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials using a predetermined code, e.g. password, passphrase or PIN
    • H04L9/3231Biological data, e.g. fingerprint, voice or retina
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/66Substation equipment, e.g. for use by subscribers with means for preventing unauthorised or fraudulent calling
    • H04M1/667Preventing unauthorised calls from a telephone set
    • H04M1/67Preventing unauthorised calls from a telephone set by electronic means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/06Authentication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/1365Matching; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/14Vascular patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/70Multimodal biometrics, e.g. combining information from different biometric modalities

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Molecular Biology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Software Systems (AREA)
  • Cardiology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • Multimedia (AREA)
  • Physiology (AREA)
  • Computing Systems (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)
  • Image Input (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

表示部に接触する操作体を認識するセンサ部と、操作体の操作を誘導する誘導表示を表示部に表示する制御部とを有する情報処理装置である。図5

Description

本開示は、情報処理装置、情報処理方法、プログラム及びウェアラブル機器に関する。
従来から機器(デバイス)の使用者を認証する技術が提案されている。例えば、下記の特許文献1には、リストバンド型の認証デバイスが記載されている。
特開2002−312324号公報
このような分野では、効果的な認証を行うための表示がなされることが望まれている。
本開示は、効果的な認証を行うための表示がなされる情報処理装置、情報処理方法、プログラム及びウェアラブル機器を提供することを目的の一つとする。
本開示は、例えば、
表示部に接触する操作体を認識するセンサ部と、
操作体の操作を誘導する誘導表示を表示部に表示する制御部とを有する
情報処理装置である。
本開示は、例えば、
センサ部が、表示部に接触する操作体を認識し、
制御部が、操作体の操作を誘導する誘導表示を表示部に表示する
情報処理方法である。
本開示は、例えば、
センサ部が、表示部に接触する操作体を認識し、
制御部が、操作体の操作を誘導する誘導表示を表示部に表示する
情報処理方法をコンピュータに実行させるプログラムである。
本開示は、例えば、
表示部と、
表示部に接触する操作体を認識するセンサ部と、
操作体の操作を誘導する誘導表示を表示部に表示する制御部とを有する
ウェアラブル機器である。
本開示の少なくとも一つの実施形態によれば、効果的な認証を行うための表示を行うことができる。ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれの効果であっても良い。また、例示された効果により本開示の内容が限定して解釈されるものではない。
図1は、一般的なスマートフォンの外観例を示す図である。 図2は、実施形態に係るリストバンド型電子機器の外観例を示す図である。 図3は、実施形態に係るリストバンド型電子機器の内部構造例を示す図である。 図4は、実施形態に係るリストバンド型電子機器の回路構成例を示す図である。 図5Aはワンタッチ認証の際に表示される表示の例を示す図であり、図5Bはスライド認証の際に表示される表示の例を示す図であり、図5Cは複数スライド認証の際に表示される表示の例を示す図である。 図6は、第1の実施形態にかかる認証処理の流れを示すフローチャートである。 図7は、第2の実施形態にかかる認証処理の流れを示すフローチャートである。 図8は、第3の実施形態にかかる誘導表示の例を説明するための図である。 図9は、第4の実施形態にかかる誘導表示の例を説明するための図である。 図10は、第5の実施形態にかかる誘導表示を表示する処理の流れを示すフローチャートである。 図11A及び図11Bは、第5の実施形態にかかる誘導表示の例を説明するための図である。 図12A〜図12Eは、第6の実施形態にかかる誘導表示の例を説明するための図である。 図13A及び図13Bは、第6の実施形態にかかる誘導表示を表示する際に行われる処理を説明するための図である。 図14は、変形例を説明するための図である。 図15は、変形例を説明するための図である。
以下、本開示の実施形態等について図面を参照しながら説明する。なお、説明は以下の順序で行う。
<一般的な技術について>
<1.第1の実施形態>
<2.第2の実施形態>
<3.第3の実施形態>
<4.第4の実施形態>
<5.第5の実施形態>
<6.第6の実施形態>
<7.変形例>
以下に説明する実施形態等は本開示の好適な具体例であり、本開示の内容がこれらの実施形態等に限定されるものではない。
<一般的な技術について>
始めに、本開示の理解を容易とするために、図1を参照して一般的な技術について説明する。図1は、モバイル機器の一例であるスマートフォン(スマートフォン1)の外観を示している。スマートフォン1は、例えば、筐体2と、ディスプレイ3と、指紋センサ部4とを有している。筐体2の一主面にディスプレイ3が設けられており、筐体2におけるディスプレイ3の下部に指紋センサ部4が設けられている。
かかる構成の場合には、ディスプレイ3とは別の領域に指紋センサ部4が設けられているので、装置全体をコンパクトに設計することができない。また、スマートフォン1に適用される指紋センサ部4は静電容量型で指紋の凹凸による静電容量の変化を検出する原理の場合が多い。このような指紋センサ部4は、環境の湿度に影響されやすく、特に濡れた指を検出しづらいという問題がある。
また、図1に示した一般的な指紋認証システムは、例えばディスプレイ3に指紋認証を促す表示がなされる場合に、当該表示の位置と指紋センサ部4の位置とが離れているために、指紋認証を行う際に指と視線とをディスプレイ3外に移動させる必要があり、直感的なUI(User Interface)を提供できないという問題がある。かかる問題を踏まえつつ、本開示の実施形態について詳細に説明する。
<1.第1の実施形態>
[リストバンド型電子機器について]
(リストバンド型電子機器の外観例)
次に、第1の実施形態について説明する。第1の実施形態は、本開示を情報処理装置の一例、より具体的にはウェアラブル機器の一例であるリストバンド型電子機器に適用した例である。図2は、第1の実施形態にかかるリストバンド型電子機器(リストバンド型電子機器10)の外観例を示している。
図2に示すように、リストバンド型電子機器10は、例えば、時計のように用いられる。より詳細には、リストバンド型電子機器10は、ユーザの手首5に巻き付けられるバンド部11と、本体部12とを有している。本体部12は、ディスプレイ13を有している。
(リストバンド型電子機器の内部の構造例)
図3は、リストバンド型電子機器10の本体部12の内部の構造例を説明するための部分断面図である。リストバンド型電子機器10の本体部12は、例えば、上述したディスプレイ13と、導光板14と、発光部15と、接触検出部の一例であるタッチセンサ部16と、センサ部の一例である撮像素子17と、レンズ部18とを有している。
概略的には、図3に示すように、操作体の一例である指先Fによる接触操作がディスプレイ13に対してなされ、接触の有無がタッチセンサ部16により検出される。リストバンド型電子機器10の本体部12は、操作側から見て、導光板14、ディスプレイ13、レンズ部18及び撮像素子17が順次、積層された構造を有している。なお、ディスプレイ13に対する接触は、ディスプレイ13に対する直接的な接触だけでなく、他の部材(例えば、導光板14)を介した間接的な接触を含んでいても良い。また、ディスプレイ13に対する接触には、例えば指先Fがディスプレイ13に触れることだけでなく、指先Fがディスプレイ13に近接することを含んでいても良い。
以下、各構成について説明する。ディスプレイ13は、液晶LCD(Liquid Crystal Display)、OLED(Organic Light Emitting Diode)等から構成されている。導光板14は、例えば、発光部15からの光を指先Fが接触される位置である領域ARに導光する光透過性部材である。導光板14は、透明のものに限らず、撮像素子17による指先Fの指紋の撮影が可能な程度、光を透過するものであれば良い。
発光部15は、LED(Light Emitting Diode)等から構成されており、導光板14の周囲の少なくとも一部に設けられている。なお、領域ARは、撮像素子17に対応する位置、具体的には、少なくとも撮像素子17による撮影の範囲に対応する位置を含む領域である。発光部15は、例えば、指紋を撮影する際に点灯することで、撮影に必要とされる光を提供する。
タッチセンサ部16は、ディスプレイ13に対する指先Fの接触を検出するセンサである。タッチセンサ部16としては、例えば、静電容量方式のタッチセンサが適用される。抵抗膜方式等、他の方式のタッチセンサが適用されても良い。なお、図3では、領域ARの下部付近の位置にタッチセンサ部16が局所的に設けられているが、ディスプレイ13の下側の略全面にわたってタッチセンサ部16が設けられていても良い。
撮像素子17は、CCD(Charge Coupled Device)、CMOS(Complementary Metal Oxide Semiconductor)等により構成されている。撮像素子17は、レンズ部18を介して入射する被写体光を光電変換して電荷量に変換し、指先Fの指紋の画像を生成する。撮像素子17を介して得られる画像信号に対して後段における種々の処理が行われる。レンズ部18は、撮像素子17の画素毎に設けられるレンズ(マイクロレンズ)により構成されるものである。
(リストバンド型電子機器の回路構成例)
図4は、リストバンド型電子機器10の回路構成例等を示すブロック図である。リストバンド型電子機器10は、上述したディスプレイ13、タッチセンサ部16及び撮像素子17等の他に、例えば、制御部21、無線通信部22、無線通信部22に接続されるアンテナ23、NFC(Near Field Communication)通信部24、NFC通信部24に接続されるアンテナ25、GPS(Global Positioning System)部26、位置センサ部26に接続されるアンテナ27、メモリ部28、バイブレータ29、モーションセンサ30、音声処理部31、マイクロホン32及びスピーカ33を有している。
制御部21は、例えばCPU(Central Processing Unit)から構成されており、リストバンド型電子機器10の各部を制御する。具体例としては、制御部21はディスプレイ13に表示される情報を制御して、後述する誘導表示をディスプレイ13に表示させる制御を行う。また、制御部21は、撮像素子17により撮影される指先Fの指紋画像に種々の画像処理を施すと共に、生体情報の一つである指紋の画像(指紋画像)に基づく指紋認証を行う。
無線通信部22は、例えばBluetooth(登録商標)の規格に基づいて他の端末と近距離無線通信を行う。無線通信部22は、例えばBluetooth(登録商標)の規格に対応して、変調/復調処理やエラー訂正処理等を行う。
NFC通信部24は、NFCの規格に基づいて、近接したリーダー/ライタと無線通信を行う。なお、図示は省略しているが、リストバンド型電子機器10の各部に対しては、リチウムイオン二次電池等のバッテリから電力が供給される。当該バッテリが、NFCの規格に基づいてワイヤレス充電されるようにしても良い。
位置センサ部26は、例えば、GNSS(Global Navigation Satellite System)と称されるシステムを利用して、現在位置の測位を行う測位部である。これらの無線通信部22、NFC通信部24、位置センサ部26で得られたデータは、制御部21に供給される。そして、制御部21は、供給されたデータに基づく制御を実行する。
メモリ部28は、制御部21が実行するプログラムが格納されるROM(Read Only Memory)や制御部21がプログラムを実行する際のワークメモリとして使用されるRAM(Random Access Memory)やデータ記憶用の不揮発性メモリ等を総称したものである。なお、メモリ部28には、指紋認証用のユーザの指紋情報が記憶される。この指紋情報は、例えば、リストバンド型電子機器10を初めて使用する際に初期登録される。
バイブレータ29は、例えば、リストバンド型電子機器10の本体部12を振動させる部材である。バイブレータ29による本体部12の振動で、電話の着信や電子メールの受信等が通知される。
モーションセンサ30は、リストバンド型電子機器10を装着したユーザの動きを検出する。モーションセンサ30としては、加速度センサ、ジャイロセンサ、電子コンパス、気圧センサなどが使用される。なお、リストバンド型電子機器10は、モーションセンサ30以外のセンサを内蔵しても良い。例えば、リストバンド型電子機器10を装着したユーザの血圧、脈拍、汗腺(汗腺の位置でも良いし、汗腺からの発汗の程度でも良い)、体温等の指紋以外の生体情報を検出するバイオセンサが内蔵されていても良い。また、リストバンド型電子機器10をユーザが装着したか否かを検出するための圧力センサ等がバンド部11や本体部12の裏側(手首に向く側)に設けられていても良い。
音声処理部31には、マイクロホン32とスピーカ33とが接続され、音声処理部31が、無線通信部22での無線通信で接続された相手と通話の処理を行う。また、音声処理部31は、音声入力操作のための処理を行うこともできる。
ディスプレイ13、タッチセンサ部16等については既に説明してあるので、重複した説明を省略する。
[指紋認証を行う際の表示例]
次に、指紋認証を行う際の表示例について説明する。これらの表示例をディスプレイ13に表示させる制御は、例えば制御部21によって行われる。
図5Aは、指紋認証を行う際に表示される表示の第1の例を示す。図5Aに示すように、例えば、指紋を模した表示AAがディスプレイ13に表示される。かかる表示により、表示AAが表示される位置が指先Fを接触させる位置であることを示すことができると共にユーザに対して指紋認証を促すことができる。表示AAが表示される位置の少なくとも一部における下方に撮像素子17が位置している。なお、図5では、理解を容易とするために撮像素子17の位置を図示している。
ユーザは、指先Fを表示AAに対応する位置に接触させる。タッチセンサ部16により指先Fの接触が検知されると、制御部21は、指紋の撮影を行う制御を実行する。かかる制御に応じて、指先Fの情報である指紋画像が撮像素子17を介して得られる。制御部21は、得られた指紋画像に適宜な画像処理を施した後に、指紋画像とメモリ部28に記憶されているユーザの指紋画像とのマッチング処理を行い、認証を行う。例えば、指紋画像同士の特徴点の一致度を比較することにより認証を行う。勿論、認証方法は他の公知の方法を適用することができる。また、何れかの生体情報若しくはその組み合わせに基づく認証が行われても良い。なお、図5Aに例示する表示は、一度の接触で認証を行う例であり、誘導表示を伴う表示ではない。
かかる構成により、指紋認証を行う箇所とディスプレイを一体化することができるので、リストバンド型電子機器10の小型化を実現することができる。また、指紋認証を行う表示を、指紋認証を行うためのデバイス(本実施形態では撮像素子17)の上方に表示させることにより、ユーザがどこに指先Fを置けば良いのかを認識し易くなり、直感的なUIを実現することができる。また、指先Fの湿度に関係なく認証を行うことができ、認証の精度を確保することができる。
図5Bは、指紋認証を行う際に表示される表示の第2の例を示す。第2の例は、指先Fが接触される位置と共に、指先Fの操作を誘導する誘導表示の例である。本実施形態における誘導表示は、指先Fの移動方向を示す表示である。
例えば、図5Bに示すように、指紋を模した表示BBと共に、誘導表示の一例として、下側を向く3個の矢印の表示CCが表示される。かかる表示により、ユーザ対して指先Fを下側に移動させることを促すことができる。
指先Fを下側に移動させる操作に応じて、指紋の撮影が行われる。これにより、指紋の特徴点をより多く取得することが可能となる。撮影により得られた指紋画像の特徴点をメモリ部28に記憶される指紋画像の特徴点と比較することにより、より精度の高い指紋認証を行うことができる。
図5Cは、指紋認証を行う際に表示される表示の第3の例を示す。図5Cの左側に示す表示は、図5Bで示した表示と同様の表示である。図5Cの中央に示す表示は、指紋を模した表示BBと共に、誘導表示の一例として、右側を向く3個の矢印の表示DDを含む。図5Cの右側に示す表示は、指紋を模した表示BBと共に、誘導表示の一例として、左側を向く3個の矢印の表示EEを含む。
図5Cに示した3個の表示が例えば、連続的に表示される。例えば、図5Cの左側の表示に基づいて、指先Fがスライドされると共に指紋の撮影が行われる。そして指先Fがディスプレイ13から離間されたことがタッチセンサ部16により検出されると、制御部21は、図5C中央に示した表示をディスプレイ13に表示する。当該表示に応じて、指先Fが右側に向けてスライドされると共に指紋の撮影が行われる。そして指先Fがディスプレイ13から離間されたことがタッチセンサ部16により検出されると、制御部21は、図5C右側に示した表示をディスプレイ13に表示する。当該表示に応じて、指先Fが左側に向けてスライドされると共に指紋の撮影が行われる。
かかる処理により、例えば図5Bに示した表示に基づいて得られる指紋の特徴点より、指紋の特徴点をより多く取得することが可能となる。撮影により得られた指紋画像の特徴点をメモリ部28に記憶される指紋画像の特徴点と比較することにより、より精度の高い指紋認証を行うことができる。
なお、以下の説明において、図5Aに示すように指先Fをディスプレイ13に一度接触させる操作に応じて行われる認証をワンタッチ認証と適宜、称する。また、図5Bに示すように指先Fをディスプレイ13に一度接触させた後、一度スライドさせる操作に応じて行われる認証をスライド認証と適宜、称する。また、図5Cに示すように指先Fをディスプレイ13上で複数回スライドさせる操作に応じて行われる認証を複数スライド認証と適宜、称する。
「第1の実施形態における認証処理」
(認証処理の流れ)
次に、第1の実施形態における認証処理について、図6に示すフローチャートを参照して説明する。第1の実施形態における認証処理は、リストバンド型電子機器10を手首5に装着して使用する際に行われる認証処理である。なお、以下に説明する認証処理が、リストバンド型電子機器10を装着した後、所定時間経過した後等に行われても良い。
本認証処理により認証が成功する以前は、リストバンド型電子機器10はロック状態である。ロック状態とは、リストバンド型電子機器10の機能の全ての利用が禁止される状態でも良いし、認証を必要としない機能(例えば、時刻の表示)のみの利用が許可される状態でも良い。認証が成功した場合にはロック状態が解除され、リストバンド型電子機器10の機能の全ての利用が許可される。以下、具体的な処理の流れについて説明する。なお、以下の処理は特に断らない限り、制御部21の制御に応じて行われる。
ステップST101では、ワンタッチ認証が行われる。即ち、ディスプレイ13に指紋を模した形状が表示され、当該表示にユーザが指先Fを接触させることにより、指紋認証が行われる。そして、処理がステップST102に進む。
ステップST102では、認証が成功したか否かが判断される。例えば、制御部21は、撮影された指紋画像とメモリ部28に記憶されている指紋画像とを対比して、特徴点が閾値以上一致した場合には認証が成功したと判断し、そうでない場合は認証が失敗したと判断する。制御部21により認証が成功したと判断された場合には、処理がステップST110に進む。
ステップST110では、認証が成功したことから、制御部21は、リストバンド型電子機器10のロック状態を解除する。以降、リストバンド型電子機器10の全ての機能の利用が可能となる。
ステップST102の判断処理において、制御部21により認証が失敗したと判断された場合には、処理がステップST103に進む。ステップST103では、認証の失敗回数が閾値(例えば、3回)以上であるか否かが判断される。認証の失敗回数が3回未満であれば処理がステップST101に戻り、再度、ワンタッチ認証が行われる。認証の失敗回数が3回以上であれば、処理がステップST104に進む。
ステップST104では、スライド認証が行われる。即ち、ディスプレイ13に誘導表示を含む指紋を模した形状が表示され、当該表示にユーザが指先Fを接触させると共に、指先Fを一度スライドさせることにより、指紋認証が行われる。ここでは、ワンタッチ認証に複数回失敗したことから、被認証者をより精度よく認証するためにスライド認証を行うようにしている。そして、処理がステップST105に進む。
ステップST105では、認証が成功したか否かが判断される。例えば、制御部21は、撮影された指紋画像とメモリ部28に記憶されている指紋画像とを対比して、特徴点が閾値以上一致した場合には認証が成功したと判断し、そうでない場合は認証が失敗したと判断する。制御部21により認証が成功したと判断された場合には、処理がステップST110に進む。
ステップST110では、認証が成功したことから、制御部21は、リストバンド型電子機器10のロック状態を解除する。以降、リストバンド型電子機器10の全ての機能の利用が可能となる。
ステップST105の判断処理において、制御部21により認証が失敗したと判断された場合には、処理がステップST106に進む。ステップST106では、認証の失敗回数が閾値(例えば、3回)以上であるか否かが判断される。認証の失敗回数が3回未満であれば処理がステップST104に戻り、再度、スライド認証が行われる。認証の失敗回数が3回以上であれば、処理がステップST107に進む。
ステップST107では、複数スライド認証が行われる。即ち、ディスプレイ13に誘導表示を含む指紋を模した形状が表示され、当該表示にユーザが指先Fを接触させると共に、指先Fを複数回スライドさせることにより、指紋認証が行われる。ここでは、スライド認証に複数回失敗したことから、被認証者をより精度よく認証するために複数スライド認証を行うようにしている。そして、処理がステップST108に進む。
ステップST108では、認証が成功したか否かが判断される。例えば、制御部21は、撮影された指紋画像とメモリ部28に記憶されている指紋画像とを対比して、特徴点が閾値以上一致した場合には認証が成功したと判断し、そうでない場合は認証が失敗したと判断する。制御部21により認証が成功したと判断された場合には、処理がステップST110に進む。
ステップST110では、認証が成功したことから、制御部21は、リストバンド型電子機器10のロック状態を解除する。以降、リストバンド型電子機器10の全ての機能の利用が可能となる。
ステップST108の判断処理において、制御部21により認証が失敗したと判断された場合には、処理がステップST109に進む。ステップST109では、ワンタッチ認証、スライド認証、複数スライド認証の全てにおける認証が失敗したことから、被認証者がリストバンド型電子機器10の真正なユーザではないと判断される。従って、制御部21は、リストバンド型電子機器10のロック状態を継続する。
(認証処理の変形例)
上述した認証処理では、認証の成否に応じてワンタッチ認証、スライド認証及び複数スライド認証の全てを行うようにしたが、これに限定されるものではない。例えば、認証処理が、始めにワンタッチ認証を行わずにスライド認証に基づく認証を行い、スライド認証に基づく認証が複数回失敗した場合に複数スライド認証を行う処理であっても良い。
<2.第2の実施形態>
次に、第2の実施形態について説明する。第2の実施形態は、概略的には、セキュリティレベルに応じて異なる誘導表示を表示する例である。なお、第1の実施形態で説明した事項(例えば、リストバンド型電子機器10の外観、構成等)は、特に断らない限り第2の実施形態にも適用することができる。なお、第2の実施形態にかかるリストバンド型電子機器10は、リストバンド型電子機器10をリーダに近づけることで決済が可能となる決済機能を有している。
「第2の実施形態における認証処理」
第2の実施形態における認証処理について、図7に示すフローチャートを参照して説明する。第2の実施形態における認証処理は、概略的には、図7に示す処理におけるステップST201〜ステップST204までの処理がリストバンド型電子機器10の装着時に行われる認証処理であり、ステップST205〜ステップST209までの処理が、決済機能を実行するアプリケーション(アプリとも略称される)の要求に応じて行われる認証処理である。なお、以下の説明では、リストバンド型電子機器10の装着時に行われる認証処理とアプリケーションの要求に応じて行われる認証処理とが連続的に行われるように説明しているが、必ずしも2つの認証処理が連続的に行われる必要は無い。
ステップST201では、リストバンド型電子機器10の装着状態が検出される。例えば、リストバンド型電子機器10のバンド部11に設けられた圧力センサによる検出結果に基づいてリストバンド型電子機器10の装着状態が検出される。そして、リストバンド型電子機器10が装着されている場合には、処理がステップST202に進む。
ステップST202では、リストバンド型電子機器10の装着時に行われる認証である装着認証が済んでいるか否かが判断される。例えば、制御部21は、メモリ部28に記憶されている、装着認証が済んだか否かを示すフラグを参照して、装着認証が済んでいるか否かを判断する。装着認証が済んでいない場合には、処理がステップST203に進む。
ステップST203では、例えば、ワンタッチ認証に基づく認証により装着認証が行われる。そして、処理がステップST204に進む。
ステップST204では、装着認証が成功したか否かが判断される。装着認証が失敗した場合には、処理がステップST201に戻り、装着状態に応じた装着認証が行われる。装着認証が成功した場合には、制御部21は、例えば装着認証が済んでいることを示すようにフラグを更新する。そして、処理がステップST205に進む。
ステップST205では、ユーザがリストバンド型電子機器10を使用して所謂電子マネーによる決済を行う。ステップST205では、かかる決済を行うために、決済を行うアプリケーションから指紋認証及びその結果の要求がリストバンド型電子機器10に対して行われる。そして、処理がステップST206に進む。
ステップST206では、制御部21がセキュリティレベルを判断する。本実施形態では、制御部21は、決済の額に応じてセキュリティレベルを判断する。例えば、決済の額が少額(例えば、1万円以下)の場合には、要求されるセキュリティレベルが「低」であると判断する。また、決済の額が所定額(例えば、1万円〜10万円以下)の場合には、要求されるセキュリティレベルが「中」であると判断する。また、決済の額が高額(例えば、10万円より大きい額)の場合には、要求されるセキュリティレベルが「高」であると判断する。
セキュリティレベルが「低」である場合には、処理がステップST207に進む。ステップST207では、セキュリティレベルが「低」であることから、制御部21は、装着認証のみが済んでいれば良く再度の認証が不要と判断する。ここでは、既にステップST202で装着認証が済んでいることから、制御部201は、装着認証が済んでおり再度の認証が不要である旨をアプリケーションに返される。なお、図示は省略しているが、この後、リストバンド型電子機器10を使用した決済が可能となる。
ステップST206における判断処理の結果が、セキュリティレベルが「中」である場合には、処理がステップST208に進む。ステップST208では、セキュリティレベルが「中」であることから、より精度の高い認証を行うことができるスライド認証が行われる。即ち、例えば図5Bに示した誘導表示を含む表示がなされ、スライド認証が行われる。スライド認証の結果がアプリケーションに返される。スライド認証の結果が「成功」である場合には、ディスプレイ13に表示されている機能の処理が行われる。例えば、スライド認証の結果が「成功」である場合には、アプリケーションによる決済が行われる。また、スライド認証の結果が「失敗」である場合にはアプリケーションによる決済が不許可となる。
ステップST206における判断処理の結果が、セキュリティレベルが「高」である場合には、処理がステップST209に進む。ステップST209では、セキュリティレベルが「高」であることから、より精度の高い認証を行うことができる複数スライド認証が行われる。即ち、例えば図5Cに示した誘導表示を含む表示がなされ、複数スライド認証が行われる。複数スライド認証の結果がアプリケーションに返される。複数スライド認証の結果が「成功」である場合にはアプリケーションによる決済が行われ、複数スライド認証の結果が「失敗」である場合にはアプリケーションによる決済が不許可となる。
かかる処理を行うことで、装着認証が済んでいれば低額(例えば、100円程度のお茶)のものを購入することが許可され、低額のものを購入する度に認証を行う必要が無くなる。従って、一定程度のセキュリティとユーザの利便性とを両立させることができる。また、比較的高額のものを購入する際には、精度の高い認証が行われるので、なりすまし等による決済を防止することができる。
「第2の実施形態の変形例」
セキュリティレベルが「中」の場合に複数スライド認証が行われても良い。そしてセキュリティレベルが「高」の場合には、ワンタッチ認証及び複数スライド認証が行われるようにしても良い。セキュリティレベルに応じてどのような誘導表示を表示し、どのようにして認証を行うかは、適宜、変更することができる。
上述した説明では、対面決済を想定して設定されるセキュリティレベルについて説明したが、これに限定されるものではない。例えば、下記の表1に示すように、対面決済だけでなく、非対面決済における額や、インターネットバンキングにおける機能に応じて、セキュリティレベルを設定し、当該セキュリティレベルに応じた誘導表示を表示させることも可能である。
Figure 2019159500
また、セキュリティレベルは、決済だけでなく、入室管理やデータへのアクセス権限等に対応して設定されるものであっても良い。
<3.第3の実施形態>
次に、第3の実施形態について説明する。第3の実施形態は、ディスプレイ13に表示されている所定の表示を指先Fの移動方向に沿って消去させることにより指先Fの操作を誘導する例である。なお、上述した実施形態で説明した事項は、特に断らない限り本実施形態に適用することができる。
例えば、図8Aに示すように、ディスプレイ13に所定の表示の一例として「¥19,800」の文字(数字を含む)が表示されている。例えば「¥」の文字の下側に撮像素子17が位置している。
ユーザは、始めに「¥」の箇所に指先Fを接触させた後、文字列に沿って指先Fをスライドさせる。この指先Fの操作はスワイプと称される。図8B及び図8Cに示すように、指先Fをスライドさせる操作に応じて、文字が消えていく。指先Fをスライドさせる際に、指先Fが撮像素子17上を通過するので、指先Fの指紋画像を取得することが可能となる。当該取得した指紋画像に基づいてスライド認証が行われ、指紋認証が成立した場合には、図8Dに示すように、例えば「Thank you!」との表示がなされると共に、決済が行われる。なお、指紋認証が失敗した場合には「¥19,800」との文字が再度表示されても良い。
かかる処理により、ユーザは、決済の額を確認し、あたかも能動的にサインをしたようにして決済の額を承認した操作を行うことが可能となる。
なお、撮像素子17は、指先Fをスライドさせる経路上の少なくとも一部の下部に位置していれば良い。また、より指先Fの移動方向をユーザによりわかり易くするために「¥19,800」の文字を表示する際に、文字列を左から右側に向かって順次、消去しつつ、全ての文字が消去した後に「¥19,800」の文字を再度表示しても良い。また、この表示の態様を繰り返しても良い。さらに、例えば指先Fが「¥」の箇所を接触したことがタッチセンサ部16により検出された場合に、隣接する文字(本例では「1」)の表示濃度を薄くしても良い。あたかも文字がフェードアウトするような誘導表示により、ユーザに対して指先Fを移動する方向を知覚させることができる。即ち、表示の消去には表示を消すだけでなく、表示の濃度を変更することを含んでいても良い。
<4.第4の実施形態>
次に、第4の実施形態について説明する。なお、上述した実施形態で説明した事項は、特に断らない限り本実施形態に適用することができる。
図9Aに示すように、ディスプレイ13には矩形状の枠部40が表示されている。枠部40の下部に撮像素子17が位置している。図9A及び図9Bにおける矩形の枠内に表示されたA、B・・との文字は、アプリケーションに対応するアイコンを示している。ユーザの指先Fをスライドさせる操作に応じて、所定のアイコンが枠部40内に表示される。例えば、図9Bでは、枠部40内にアプリケーションBに対応するアイコンが表示されている。
ユーザは、枠部40内に指先Fを接触させることで、指紋認証を行う。認証が成立した場合には、アプリケーションBにログインすることが可能となる。かかる処理によりアプリケーションBの選択とログインとを同時に行うことが可能となる。なお、枠部40内に例えば上方向又は下方向を向く矢印等による誘導表示を表示させ、当該表示に応じてユーザに対してスライド認証や複数スライド認証を行うことを促すことができる。
<5.第5の実施形態>
次に、第5の実施形態について説明する。なお、上述した実施形態で説明した事項は、特に断らない限り本実施形態に適用することができる。第5の実施形態は、概略的には、姿勢検出部の一例であるモーションセンサ30の検出結果に応じて、異なる誘導表示を表示させる例である。
図10は、第5の実施形態における処理の流れを示すフローチャートである。ステップST501では、所定のアプリケーションから指紋認証が要求される。そして、処理がステップST502に進む。
ステップST502では、制御部21は、モーションセンサ30から供給されるセンサ情報に基づいて、リストバンド型電子機器10の姿勢を検出する。そして、処理がステップST503に進む。
ステップST503では、制御部21が、リストバンド型電子機器10の姿勢から、リストバンド型電子機器10を装着している手を下ろしているか否かを判断する。制御部21が、リストバンド型電子機器10を装着している手を下ろしていると判断した場合には、処理がステップST504に進む。ステップST504では、制御部21は、指縦置き認証のGUI(Graphical User Interface)をディスプレイ13に表示する制御を行う。そして、処理がステップST506に進む。
ステップST503の判断処理において、制御部21が、リストバンド型電子機器10を装着している手を下ろしていないと判断した場合には、処理がステップST505に進む。ステップST505では、制御部21は、指横置き認証のGUIをディスプレイ13に表示する制御を行う。そして、処理がステップST506に進む。
ステップST506では、上述したGUIを使用した指紋認証が行われる。そして、指紋認証が終了したか否かが判断される。指紋認証が終了した場合には、認証結果に応じた処理が行われた後、処理が終了する。指紋認証が終了していない場合は、処理がステップST503に戻り、ステップST503以降の処理が繰り返される。
なお、上述した処理において、指紋認証が行われる場合は、アプリケーションからの要求に限定されるものではなく、他の場合(例えば、リストバンド型電子機器10の装着時から所定時間経過後の再度の認証)であっても良い。
図11Aは指縦置き認証のGUIの一例を示し、図11Bは指横置き認証のGUIの一例を示す。
図11Aに示す指縦置き認証のGUIの場合は、例えば、ユーザの手首5の延在方向に対して略直交する方向に指紋を模した形状が表示されると共に、当該方向に指先Fのスライドを誘導するための誘導表示(図示の例では3個の矢印)が表示される。
図11Bに示す指横置き認証のGUIの場合は、例えば、ユーザの手首5の延在方向に沿う方向に指紋を模した形状が表示されると共に、当該方向に指先Fのスライドを誘導するための誘導表示(図示の例では3個の矢印)が表示される。
以上、説明したように、モーションセンサ30の検出結果に応じて、異なる誘導表示を表示することも可能である。かかる処理を行うことにより、例えば、ユーザが鞄をもって腕を下ろしている状態等であっても操作性の良い誘導表示を表示することが可能となる。
<6.第6の実施形態>
次に、第6の実施形態について説明する。なお、上述した実施形態で説明した事項は、特に断らない限り本実施形態に適用することができる。第6の実施形態は、概略的には、ディスプレイ13に表示される表示の位置を変化させることにより、誘導表示を行う例である。
例えば、図12Aに示すように、ディスプレイ13には、複数の矩形状のドットから成り水平方向に延在するライン状の表示60が表示されている。また、撮像素子17による撮影範囲が点線の矩形で示されている。撮影範囲は、表示60を構成する複数のドットのうちの少なくとも一部のドットが表示される位置と重なっている。
図12Bに示すように、ユーザは、撮像素子17の撮影範囲に対応する箇所に指先Fを接触させる。このとき、ユーザに対して指先Fを接触させる箇所をわかり易くするために、撮像素子17による撮影範囲と重なる位置にあるドットを着色して表示したり、点滅させるようにしても良い。
ディスプレイ13に対する指先Fの接触がタッチセンサ部16により検出されると、制御部21は、ライン状の表示60の表示を変化させる制御を行う。具体的には、制御部21は、表示60を構成するドットの表示位置を変化させることにより、図12C及び図12Dに示すように、表示60が全体として下側に移動するように表示内容を制御する。かかる表示処理を行うことにより、ユーザに対して指先Fを下側にスライドさせることを促すことができる。ユーザが指先Fを下側にスライドさせることにより、スライド認証を行うことができる。勿論、表示60が全体として、上方向や左右方向に移動するように制御部21が表示内容を制御しても良い。
タッチセンサ部16による指先Fの所定以上のスライドが検出されると、例えば、図12Eに示すように、表示60を消す制御が行われる。これにより、ユーザは、指紋認証のための操作が終了したものと理解して、指先Fをディスプレイ13から離すことができる。
以上説明したように、ディスプレイ13に表示される表示の位置を変化させることにより、誘導表示を行うことも可能である。
ところで、図13Aに示すように、指紋撮影時に撮像素子17による撮影範囲にドットの表示がなされていると、指紋検出の精度に影響が出る虞がある。例えば、ディスプレイ13がOLEDで構成されOLEDの発光によりドットが表示されている場合に、指紋撮影時にOLEDの光が混入すると指紋検出の精度に影響が出る虞がある。そこで、ユーザがディスプレイ13に指先Fを接触させるまでは全てのドットを表示させておく。そして、ディスプレイ13に指先Fが接触されたことがタッチセンサ部16により検出されたら、図13Bに示すように、撮影範囲内に位置するドットを消去するようにしても良い。
また、撮影範囲内に位置するドットを消去するのではなく、撮像素子17に入射する光の入射方向にBPF(Band Pass Filter)等のフィルタを挿入する。そして、フィルタを通過しない波長の光を使ってドットを表示することで、ドットの表示による指紋認証の精度の低下を防止するようにしても良い。
<7.変形例>
以上、本開示の複数の実施形態について具体的に説明したが、本開示の内容は上述した実施形態に限定されるものではなく、本開示の技術的思想に基づく各種の変形が可能である。以下、変形例について説明する。
上述したリストバンド型電子機器10における内部構造は、適宜、変更することができる。例えば、図14に示すように、導光板14及び発光部15が無い構造でも良い。この場合は、ディスプレイ13としてはOLED等の自発光のディスプレイが適用される。ディスプレイ13からの光を指先Fが接触される箇所に照射することで撮影のための光が提供されるようにしても良い。これにより導光板14が不要となり、装置の薄型化を実現することができる。また、タッチセンサ部16は、ディスプレイ13の実施形態における他方の主面側(例えば、上面側)に設けられていても良い。
リストバンド型電子機器10の形状等も適宜、変更することができる。例えば、図15に示すような、バンド部11及び本体部12が一体的に形成された機器であっても良い。また、ウェアラブル機器は、リストバンド型電子機器に限定されることはなく、スマートフォン、携帯型のオーディオプレーヤでも良い。また、本開示は、パーソナルコンピュータ、ロボット機器等の電子機器に対しても適用することができる。また、本開示は、車載機器を使用される際に行われる認証や、銀行のATM(Automatic Teller Machine)で行われる認証に対しても適用することができる。
上述したリストバンド型電子機器10が、指紋認証を用いた相手方へのメッセージ通知機能を有していても良い。例えば、ディスプレイ13に複数のメッセージが表示される。当該複数のメッセージの中のうちの所定のメッセージをユーザがスライドすると実施形態で説明した認証が行われ、認証が成立すると、無線通信部22を介して相手方にメッセージが通知される。メッセージとしては、例えば、「今から帰ります」等の家族に向けたメッセージを例示することができる。上司、友人等へのメッセージであっても良く、メッセージの内容は適宜、設定することができる。
上述したメッセージを送るための指の認証において、認証された指の種別(親指、人差し指・・小指)に応じて、メッセージの送り先が特定されるようにしても良い。例えば、親指には父親、人差し指には母親、小指には妹のように、ユーザは、指の種別と送り先との対応付けを設定する。そして、ユーザは、「今から帰ります」というメッセージを母親に送りたい場合には、人差し指を当該メッセージでスライドさせる。認証が成立した場合は、母親に「今から帰ります」とのメッセージが通知される。このような場合にも、誘導表示を行うことができる。例えば、ディスプレイに複数のメッセージを表示しても良いし、ある時刻(例えば、夕方)になったら帰宅する旨のメッセージが自動で表示されるようにしても良い。ディスプレイ左側に複数の送り先を表示し、所定の送り先を指で触れた際に認証が行われるようにしても良い。そして、認証が成立した場合に、ディスプレイ右側に複数のメッセージを誘導表示として表示し、送り先を指定するためにディスプレイに接触させた指を、所望するメッセージにそのままスライドさせるように誘導しても良い。
上述した実施形態では、操作体の一例として人の指先を挙げたが、これに限定されるものではない。例えば、操作体は、ペン状の機器であっても良い。そして、ペン先に形成された特定の形状を認識することにより、認証が行われるようにしても良い。
上述した実施形態では、誘導する操作体(指先F)の操作として、指先Fの移動方向を例にして説明したが、これに限定されるものではない。例えば、指先Fの接触回数や指の種類(親指、人差し指等)であっても良いし、これらを組み合わせたものでも良い。そして、接触回数や指の種類を示す誘導表示が表示されるようにしても良い。例えば、セキュリティレベルの要求が高くなるにつれ、指先Fの接触回数を増やすように誘導して、指先Fの複数回の接触による複数回の認証が行われるようにしても良い。
上述した実施形態において、音声等による操作体の誘導が行われるようにしても良い。但し、指先Fを接触する際はユーザの視点は接触箇所に注目していることから、ユーザが同じ知覚(視覚)で操作体の誘導を認識できる構成が好ましい。
撮像素子17を複数箇所設け、ディスプレイ13上で指紋認証を行うことが可能な位置が複数設けられていても良い。
本開示は、装置、方法、プログラム、システム等により実現することもできる。例えば、上述した実施形態で説明した機能を行うプログラムをダウンロード可能とし、実施形態で説明した機能を有しない装置が当該プログラムをダウンロードしてインストールすることにより、当該装置において実施形態で説明した制御を行うことが可能となる。本開示は、このようなプログラムを配布するサーバにより実現することも可能である。また、各実施形態、変形例で説明した事項は、適宜組み合わせることが可能である。
本開示は、以下の構成も採ることができる。
(1)
表示部に接触する操作体を認識するセンサ部と、
前記操作体の操作を誘導する誘導表示を前記表示部に表示する制御部とを有する
情報処理装置。
(2)
前記制御部は、前記センサ部により得られる前記操作体の生体情報に基づいて認証を行う
(1)に記載の情報処理装置。
(3)
前記生体情報は、少なくとも、指紋、汗腺、脈拍、血圧、体温による認証、若しくはその組み合わせである
(2)に記載の情報処理装置。
(4)
前記制御部は、前記生体情報に基づく認証に基づいて、前記表示部に表示されている機能の処理を行う
(2)に記載の情報処理装置。
(5)
前記誘導表示は、前記操作体の移動方向、前記操作体の接触回数及び前記操作体の種類の少なくとも一つを示す表示である
(1)〜(4)までの何れかに記載の情報処理装置。
(6)
前記制御部は、セキュリティレベルに応じて異なる誘導表示を前記表示部に表示する
(1)〜(5)までの何れかに記載の情報処理装置。
(7)
前記制御部は、前記表示部に表示されている所定の表示を前記操作体の移動方向に沿って消去することにより前記操作体の操作を誘導する
(1)〜(5)までの何れかに記載の情報処理装置。
(8)
前記制御部は、前記表示部における前記センサ部に対応する位置に前記誘導表示を表示する
(1)〜(5)までの何れかに記載の情報処理装置。
(9)
姿勢検出部を有し、
前記制御部は、前記姿勢検出部による検出結果に応じて異なる誘導表示を表示する
(1)〜(5)までの何れかに記載の情報処理装置。
(10)
前記制御部は、前記表示部に表示される表示の位置を変化させることにより、前記誘導表示を行う
(1)〜(5)までの何れかに記載の情報処理装置。
(11)
前記制御部は、前記誘導表示を伴わず、且つ、前記操作体の接触位置を示す表示を前記表示部に表示する
(1)〜(10)までの何れかに記載の情報処理装置。
(12)
前記表示部と、前記センサ部と、前記表示部への前記操作体の接触を検出する接触検出部とが積層された構造を有する
(1)〜(11)までの何れかに記載の情報処理装置。
(13)
発光部と、
前記表示部における前記操作体が接触される位置に前記発光部からの光を導光する導光部とを有する
(12)に記載の情報処理装置。
(14)
前記表示部は自発光のディスプレイであり、前記表示部からの光が、前記操作体が接触される位置に照射される構成を有する
(12)に記載の情報処理装置。
(15)
前記制御部は、前記接触検出部により前記操作体の接触が検出された場合に、前記センサ部に対応する位置に表示されている表示を消去する
(14)に記載の情報処理装置。
(16)
前記操作体が指先であり、且つ、前記センサ部が撮像素子である
(1)〜(15)までに何れかに記載の情報処理装置。
(17)
センサ部が、表示部に接触する操作体を認識し、
制御部が、前記操作体の操作を誘導する誘導表示を前記表示部に表示する
情報処理方法。
(18)
センサ部が、表示部に接触する操作体を認識し、
制御部が、前記操作体の操作を誘導する誘導表示を前記表示部に表示する
情報処理方法をコンピュータに実行させるプログラム。
(19)
表示部と、
前記表示部に接触する操作体を認識するセンサ部と、
前記操作体の操作を誘導する誘導表示を前記表示部に表示する制御部とを有する
ウェアラブル機器。
10・・・リストバンド型電子機器、13・・・ディスプレイ、14・・・導光板、15・・・発光部、16・・・タッチセンサ部、17・・・撮像素子、21・・・制御部、30・・・モーションセンサ

Claims (19)

  1. 表示部に接触する操作体を認識するセンサ部と、
    前記操作体の操作を誘導する誘導表示を前記表示部に表示する制御部とを有する
    情報処理装置。
  2. 前記制御部は、前記センサ部により得られる前記操作体の生体情報に基づいて認証を行う
    請求項1に記載の情報処理装置。
  3. 前記生体情報は、少なくとも、指紋、汗腺、脈拍、血圧、体温による認証、若しくはその組み合わせである
    請求項2に記載の情報処理装置。
  4. 前記制御部は、前記生体情報に基づく認証に基づいて、前記表示部に表示されている機能の処理を行う
    請求項2に記載の情報処理装置。
  5. 前記誘導表示は、前記操作体の移動方向、前記操作体の接触回数及び前記操作体の種類の少なくとも一つを示す表示である
    請求項1に記載の情報処理装置。
  6. 前記制御部は、セキュリティレベルに応じて異なる誘導表示を前記表示部に表示する
    請求項1に記載の情報処理装置。
  7. 前記制御部は、前記表示部に表示されている所定の表示を前記操作体の移動方向に沿って消去することにより前記操作体の操作を誘導する
    請求項1に記載の情報処理装置。
  8. 前記制御部は、前記表示部における前記センサ部に対応する位置に前記誘導表示を表示する
    請求項1に記載の情報処理装置。
  9. 姿勢検出部を有し、
    前記制御部は、前記姿勢検出部による検出結果に応じて異なる誘導表示を表示する
    請求項1に記載の情報処理装置。
  10. 前記制御部は、前記表示部に表示される表示の位置を変化させることにより、前記誘導表示を行う
    請求項1に記載の情報処理装置。
  11. 前記制御部は、前記誘導表示を伴わず、且つ、前記操作体の接触位置を示す表示を前記表示部に表示する
    請求項1に記載の情報処理装置。
  12. 前記表示部と、前記センサ部と、前記表示部への前記操作体の接触を検出する接触検出部とが積層された構造を有する
    請求項1に記載の情報処理装置。
  13. 発光部と、
    前記表示部における前記操作体が接触される位置に前記発光部からの光を導光する導光部とを有する
    請求項12に記載の情報処理装置。
  14. 前記表示部は自発光のディスプレイであり、前記表示部からの光が、前記操作体が接触される位置に照射される構成を有する
    請求項12に記載の情報処理装置。
  15. 前記制御部は、前記接触検出部により前記操作体の接触が検出された場合に、前記センサ部に対応する位置に表示されている表示を消去する
    請求項14に記載の情報処理装置。
  16. 前記操作体が指先であり、且つ、前記センサ部が撮像素子である
    請求項1に記載の情報処理装置。
  17. センサ部が、表示部に接触する操作体を認識し、
    制御部が、前記操作体の操作を誘導する誘導表示を前記表示部に表示する
    情報処理方法。
  18. センサ部が、表示部に接触する操作体を認識し、
    制御部が、前記操作体の操作を誘導する誘導表示を前記表示部に表示する
    情報処理方法をコンピュータに実行させるプログラム。
  19. 表示部と、
    前記表示部に接触する操作体を認識するセンサ部と、
    前記操作体の操作を誘導する誘導表示を前記表示部に表示する制御部とを有する
    ウェアラブル機器。
JP2020500289A 2018-02-15 2018-12-04 情報処理装置、情報処理方法、プログラム及びウェアラブル機器 Pending JPWO2019159500A1 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018024619 2018-02-15
JP2018024619 2018-02-15
PCT/JP2018/044586 WO2019159500A1 (ja) 2018-02-15 2018-12-04 情報処理装置、情報処理方法、プログラム及びウェアラブル機器

Publications (1)

Publication Number Publication Date
JPWO2019159500A1 true JPWO2019159500A1 (ja) 2021-03-18

Family

ID=67619240

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020500289A Pending JPWO2019159500A1 (ja) 2018-02-15 2018-12-04 情報処理装置、情報処理方法、プログラム及びウェアラブル機器

Country Status (5)

Country Link
US (1) US11393257B2 (ja)
EP (1) EP3754477A4 (ja)
JP (1) JPWO2019159500A1 (ja)
CN (1) CN111886570A (ja)
WO (1) WO2019159500A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USD962989S1 (en) * 2019-10-15 2022-09-06 Beijing Xiaomi Mobile Software Co., Ltd. Mobile phone with graphical user interface
WO2021260483A1 (ja) * 2020-06-26 2021-12-30 株式会社半導体エネルギー研究所 電子機器、及び電子機器の認証方法
US20230079679A1 (en) 2021-09-14 2023-03-16 Apple Inc. Watch band with fit detection
KR102622725B1 (ko) * 2021-10-07 2024-01-08 삼성전자주식회사 생체정보 추정 장치 및 방법

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003091509A (ja) * 2001-09-17 2003-03-28 Nec Corp 携帯通信機器の個人認証方法およびそれを記述したプログラム
JP2008217187A (ja) * 2007-03-01 2008-09-18 Matsushita Electric Ind Co Ltd 商品購入システム
JP2010130251A (ja) * 2008-11-26 2010-06-10 Kyocera Corp 携帯電子機器
JP2012070356A (ja) * 2010-09-21 2012-04-05 Sony Ericsson Mobilecommunications Japan Inc センサ付き表示装置および電子機器
US20170024597A1 (en) * 2015-02-05 2017-01-26 Samsung Electronics Co., Ltd. Electronic device with touch sensor and driving method therefor
US20170220838A1 (en) * 2015-06-18 2017-08-03 Shenzhen Huiding Technology Co., Ltd. Under-screen optical sensor module for on-screen fingerprint sensing
JP2017182504A (ja) * 2016-03-30 2017-10-05 富士通株式会社 情報処理装置および検出支援プログラム
US20170364763A1 (en) * 2016-06-15 2017-12-21 Samsung Electronics Co., Ltd. Electronic device supporting fingerprint verification function and method for operating the same

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002312324A (ja) 2001-04-13 2002-10-25 Sony Corp リストバンド型認証デバイス、認証システム、情報出力デバイス
EP2787462B1 (en) 2013-04-05 2019-02-13 BlackBerry Limited Authentication using fingerprint sensor in gesture path
JP2015018413A (ja) 2013-07-11 2015-01-29 セイコーエプソン株式会社 携帯端末、画像表示方法、及びプログラム
US9412002B2 (en) * 2013-12-26 2016-08-09 Intel Corporation Wearable electronic device having a fingerprint identification display
JP6657593B2 (ja) 2015-05-08 2020-03-04 富士通株式会社 生体撮影装置、生体撮影方法及び生体撮影プログラム
US10318958B2 (en) * 2015-07-28 2019-06-11 Jong Ho Kim Smart watch and operating method using the same

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003091509A (ja) * 2001-09-17 2003-03-28 Nec Corp 携帯通信機器の個人認証方法およびそれを記述したプログラム
JP2008217187A (ja) * 2007-03-01 2008-09-18 Matsushita Electric Ind Co Ltd 商品購入システム
JP2010130251A (ja) * 2008-11-26 2010-06-10 Kyocera Corp 携帯電子機器
JP2012070356A (ja) * 2010-09-21 2012-04-05 Sony Ericsson Mobilecommunications Japan Inc センサ付き表示装置および電子機器
US20170024597A1 (en) * 2015-02-05 2017-01-26 Samsung Electronics Co., Ltd. Electronic device with touch sensor and driving method therefor
US20170220838A1 (en) * 2015-06-18 2017-08-03 Shenzhen Huiding Technology Co., Ltd. Under-screen optical sensor module for on-screen fingerprint sensing
JP2017182504A (ja) * 2016-03-30 2017-10-05 富士通株式会社 情報処理装置および検出支援プログラム
US20170364763A1 (en) * 2016-06-15 2017-12-21 Samsung Electronics Co., Ltd. Electronic device supporting fingerprint verification function and method for operating the same

Also Published As

Publication number Publication date
EP3754477A4 (en) 2021-03-31
US20200401828A1 (en) 2020-12-24
US11393257B2 (en) 2022-07-19
CN111886570A (zh) 2020-11-03
EP3754477A1 (en) 2020-12-23
WO2019159500A1 (ja) 2019-08-22

Similar Documents

Publication Publication Date Title
ES2946003T3 (es) Método y dispositivo electrónico de procesamiento de notificaciones
US10708396B2 (en) Mobile terminal having card unit and method for controlling same
KR101679271B1 (ko) 이동단말기 및 그 제어방법
US20190392422A1 (en) Mobile terminal and control method therefor
US20160260086A1 (en) Mobile terminal and method for controlling the same
WO2019159500A1 (ja) 情報処理装置、情報処理方法、プログラム及びウェアラブル機器
CN106055944B (zh) 移动终端及其控制方法
ES2945065T3 (es) Método para abrir rápidamente una aplicación o función de la aplicación y terminal
EP3096275B1 (en) Mobile terminal and method for controlling the same
US10510063B2 (en) Mobile terminal and method for controlling the same
US10713640B2 (en) Mobile terminal and control method therefor
KR20160136013A (ko) 이동 단말기 및 그 제어 방법
CN109547495B (zh) 敏感操作处理方法、装置、服务器、终端及存储介质
US9165176B2 (en) Method, apparatus, and computer-readable recording medium for recognizing fingerprint
CN110809775A (zh) 一种基于人脸识别的支付方法、装置及终端
CN110288332A (zh) 银行卡绑定的系统、方法、装置、设备及存储介质
US10474892B2 (en) Mobile terminal and control method therefor
KR20150046852A (ko) 전자 장치 및 전자 장치의 암호를 이용한 인증 방법
US20180253717A1 (en) Terminal apparatus and control method for terminal apparatus
US20170090603A1 (en) Mobile terminal and method for controlling the same
CN110581831B (zh) 通信方法、信息获取方法、电子设备及存储介质
CN111523878A (zh) 业务处理方法、装置、系统及存储介质
KR20150042086A (ko) 모바일 단말기용 지문인식 해킹방지 장치 및 지문 해킹방지용 표면부재와 그 지문해킹 방지방법
US20170330167A1 (en) Mobile terminal and control method thereof
KR20160070080A (ko) 이동 데이터 단말기용 인증 시스템

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211018

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220705

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220823

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20221227