CN113994335A - 个人信息显示装置及其处理方法 - Google Patents

个人信息显示装置及其处理方法 Download PDF

Info

Publication number
CN113994335A
CN113994335A CN201980096914.3A CN201980096914A CN113994335A CN 113994335 A CN113994335 A CN 113994335A CN 201980096914 A CN201980096914 A CN 201980096914A CN 113994335 A CN113994335 A CN 113994335A
Authority
CN
China
Prior art keywords
information
user
password
personal information
iris
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201980096914.3A
Other languages
English (en)
Inventor
秋山仁
小野裕明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Maxell Ltd
Original Assignee
Maxell Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Maxell Ltd filed Critical Maxell Ltd
Publication of CN113994335A publication Critical patent/CN113994335A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/34User authentication involving the use of external additional devices, e.g. dongles or smart cards
    • G06F21/35User authentication involving the use of external additional devices, e.g. dongles or smart cards communicating wirelessly
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/70Protecting specific internal or peripheral components, in which the protection of a component leads to protection of the entire computer
    • G06F21/82Protecting input, output or interconnection devices
    • G06F21/84Protecting input, output or interconnection devices output devices, e.g. displays or monitors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/94Hardware or software architectures specially adapted for image or video understanding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/19Sensors therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/197Matching; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G06F21/6245Protecting personal data, e.g. for financial or medical purposes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038Indexing scheme relating to G06F3/038
    • G06F2203/0381Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Collating Specific Patterns (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明提供一种个人信息显示装置及其处理方法,预先识别卡信息和/或服务信息并在经过个人认证的基础上显示与该信息关联的密码和/或ID,由此使用户能够立即认识到各种卡和/或服务等所需的密码。为达到该目的,在本发明的包括眼镜形状的显示部的个人信息显示装置的处理方法中,拍摄佩戴着个人信息显示装置的个人的虹膜,从拍摄到的虹膜取得虹膜信息,拍摄各种卡和/或各种服务的信息,从拍摄到的各种卡和/或各种服务的信息取得各种卡和/或各种服务的识别信息,基于虹膜信息登记个人信息,并登记与各种卡和/或各种服务的识别信息关联的ID和/或密码。

Description

个人信息显示装置及其处理方法
技术领域
本发明涉及个人信息显示装置及其处理方法,用于辅助输入涉及诸多方面的个人用ID和/或密码,或者在更改密码时辅助密码的记忆。
背景技术
近年来,随着计算机(PC)/智能手机等个人设备终端和各种服务、卡等变得普及,在使用这些终端、服务和卡时,要求输入个人认证所需的用户登录ID和/或密码的情况越来越多。但是,虽然随着终端和服务的增多导致输入密码的机会也增加,但出于防盗方面的理由,存在(1)很多服务禁止使用简单密码、(2)不推荐重复使用相同密码、(3)有时会被定期地要求更改密码等情况,由于这些原因,还是会频繁出现忘记密码的状况。对此,为了防止遗忘可以考虑例如将密码记录在记事本上,但在安全性方面并不理想。为此,例如还存在一种通过使用密码管理软件显示各种各样的密码的服务,不过,需要费事地每次输入主密码来选择要使用的服务,很麻烦。此外,在主密码泄漏的情况下所有密码都会被获知。并且,在登记新密码和被定期地要求更改密码时,需要一一重新记录。
作为本技术领域的现有技术,存在专利文献1。专利文献1公开了一种结构,包括:可携带的存储介质,其存储有作为用户个人固有的生物信息的生物特征信息和该用户所持有的个人信息;信息显示单元,其能够将存储在存储介质中的个人信息的内容仅显示在用户本人的视野内;和检测单元,其检测用户的生物特征信息,其中,读取存储在存储介质中的生物特征信息和由检测单元检测到的生物特征信息,对照两者进行用户认证,仅在用户认证成功时允许信息显示单元显示个人信息。
现有技术文献
专利文献
专利文献1:日本特开2007-6393号公报
发明内容
发明要解决的技术问题
在专利文献1中,设想使用头戴式显示器(下称HMD)基于个人生物信息进行认证来显示个人信息。但是,要显示的个人信息例如是密码等,而对于各种卡和/或服务等来说,很多情况下个人信息是不同的,专利文献1没有考虑要显示的个人信息与各种卡和/或服务等之间的对应(关联)。
本发明鉴于上述问题而作出,为了使用户能够立即认识到上述各种卡和/或服务等所需的密码,提供一种个人信息显示装置及其处理方法,其中预先识别卡信息和/或服务信息,在经过个人认证的基础上能够简单地显示与该信息关联的密码和/或ID。
解决问题的技术手段
为解决上述问题,本发明之一例如下。提供一种包括眼镜形状的显示部的个人信息显示装置的处理方法,其中,拍摄佩戴着个人信息显示装置的个人的虹膜,从拍摄到的虹膜取得虹膜信息,拍摄各种卡和/或各种服务的信息,从拍摄到的各种卡和/或各种服务的信息取得各种卡和/或各种服务的识别信息,基于虹膜信息登记个人信息,并登记与各种卡和/或各种服务的识别信息关联的ID和/或密码。
发明效果
采用本发明,能够提供一种可实现更好的易用性的个人信息显示装置及其处理方法。
附图说明
图1是实施例的个人信息显示装置的系统结构图。
图2是实施例的个人信息显示装置的结构框图。
图3是实施例的个人信息显示装置的软件结构图。
图4A是表示使用实施例的个人信息显示装置在用卡时的用户的操作状态的图。
图4B是实施例中用户实际手持卡时看到的景象。
图4C是在实施例的个人信息显示装置的显示部上,显示了登记时由摄像机拍摄到的卡的影像和密码的示意图。
图4D是在实施例的个人信息显示装置的显示部上,显示了登记时文字识别出的卡信息和密码的示意图。
图4E是在实施例的个人信息显示装置的显示部上,在用卡时显示已登记的密码的示意图。
图5A是表示使用实施例的个人信息显示装置在使用PC时的用户的操作状态的图。
图5B是实施例的用户使用PC时看到的景象。
图5C是在实施例的个人信息显示装置的显示部上,显示了登记时文字识别出的服务名称、ID和密码的示意图。
图6A是在实施例的个人信息显示装置的显示部上,显示了使用服务时文字识别出的服务名称、ID和密码的示意图。
图6B是图6A中的显示部的放大图。
图6C是在实施例的个人信息显示装置的显示部上,将已登记的ID和密码叠加显示在透过玻璃看到的PC上的ID输入栏和密码输入栏处的示意图。
图7A是实施例中使用PC时对各种服务信息进行确认的情况下的个人信息显示装置的显示部的显示例。
图7B是实施例中使用PC时对各种服务信息进行确认的情况下,通过注视点来选择“好”的情况下的显示例。
图8是实施例中登记时的处理流程。
图9是实施例中使用时的处理流程。
具体实施方式
下面使用附图说明本发明的实施例。
实施例
图1是本实施例的个人信息显示装置的系统结构图。在图1中,1是个人信息显示装置,采用通常被称作HMD的形状。图1表示的是,用户A佩戴个人信息显示装置1,例如一边看着PC32的屏幕一边输入ID和/或密码的状态。个人信息显示装置1设有显示部5和前方拍摄用摄像机C2,还在显示部附近搭载有未图示的虹膜认证用小型摄像机C1。还搭载有用于确认个人信息显示装置1是否被佩戴的佩戴传感器9。并且,还搭载有用于确定个人信息显示装置1的佩戴场所的包括GSP等的位置传感器(图2的6)。另外,设置有采集声音的麦克风7和耳机8,其中,麦克风7被用作用户A向个人信息显示装置1传递信息的手段,而耳机8被用作个人信息显示装置1向用户A通过声音传递信息的手段。
当用户A例如为了在PC32上利用各种服务而被要求输入ID等信息(下称ID)和密码信息(下称密码)时,前方拍摄用摄像机C2取得用户A的声音或者PC32的屏幕形状,通过识别技术确定各种服务,判断是否需要输入与之关联的ID和/或密码,使个人信息显示装置1的显示部5显示恰当的ID和/或密码,用户A进行该ID和/或密码的输入。
在用户A的个人认证时,利用同样搭载于个人信息显示装置1的拍摄用户A的虹膜的小型摄像机C1进行拍摄,通过进行虹膜认证来判断用户A是否为本人。此外,该小型摄像机C1还能够跟踪用户A的注视点,确定用户A正在观看的对象物。关于这一点,具有后述的从前方拍摄用摄像机C2的拍摄范围确定注视点位置,并确定对象物的功能。通过该注视点跟踪结果和基于其实现的注视点显示,如后所述,还能够用于向用户A发出提问,由用户判断个人信息显示装置1是否正确显示了关联的各种数据。
图2是本实施例的个人信息显示装置1的结构框图。在图2中,对与图1相同的功能标注相同的附图标记。图2中,个人信息显示装置1搭载有用于拍摄虹膜和跟踪用户A的注视点的由超小型镜头和CCD或者CMOS传感器等构成的小型摄像机C1。另外,透镜3和半反射镜4是用于供小型摄像机C1拍摄用户眼睛的虹膜和供用户观看显示部5上显示的影像的光学系统。
此外,具有摄像部2,其包括前方拍摄用摄像机C2、拍摄处理部21和存储器24,其中,前方拍摄用摄像机C2由常规镜头和摄像传感器等构成,拍摄处理部21由图像处理部等构成,用于进行识别用户A的虹膜和检测用户A的注视点的虹膜/注视点检测与识别功能22,以及识别图形、符号或文字等作为识别信息输出的图像识别功能23等,存储器24临时保存所拍摄的图像和影像,并且还用作进行上述各处理的工作区。
此处,摄像部2内具备进行各种图像改善和各种识别功能的虹膜/注视点检测与识别功能22、图像识别功能23和存储器24,但也能够通过后述控制器10内的软件处理进行同样的识别功能,在这种情况下上述功能不需要位于摄像部2内。但是,由于控制器10内并行进行着各种各样的处理,因此考虑到处理的高速化,这里记载了将上述各种图像改善与各种识别功能置于摄像部2内的情况。后述主要描述通过控制器10内的软件处理进行该各种图像改善和各种识别处理的情况,但不限于此,当然也可以将一部分功能在摄像部2内进行,仅向控制器10发送其结果。
从控制器10向用于显示密码等信息等的由LCD等构成的显示部5传输信息。进一步,具有用于与因特网通信的通信部14,其用于与位置传感器6组合来确认个人信息显示装置1是否被非法使用,或者用于进行个人信息显示装置1的内部软件更新等。此外,具有对所有各部分进行控制并发出指示的控制器10、ROM(Read Only Memory,只读存储器)11、RAM(Random Access Memory,随机访问存储器)12、保存影像和图像数据的外部存储器13、系统总线15。佩戴传感器9的用途是,在用户A佩戴个人信息显示装置1的同时启动系统等,因此作为其一例,可采用仅进行接触探测的开关,或者探测人体温度的温度传感器等。进一步,包括对这些装置供电的小型的电池16。
另外,也可以基于麦克风7采集到的声音,通过用于确定用户A的声纹认证进行用户A的认证。这种情况下的处理利用控制器10内的软件进行。
图3是本实施例的个人信息显示装置1的软件结构图,对与图2相同的功能标注相同的附图标记。
控制器10是按照规定的程序控制整个个人信息显示装置1的微处理器单元。系统总线15是用于在控制器10与个人信息显示装置1内的各部分之间收发数据的数据通信路径。
ROM11是储存有操作系统等基本动作程序及其他应用程序的存储器,例如使用EEPROM(Electrically Erasable Programmable ROM,电可擦可编程只读存储器)和闪存ROM等可擦写的ROM,通过更新ROM11中储存的程序,能够进行基本动作程序及其他应用程序的版本升级和功能扩展。
RAM12是基本动作程序及其他应用程序执行时的工作区。具体而言,例如,储存在ROM11中的基本动作程序11a被载入到RAM12中,进而由控制器10执行所述载入的基本动作程序,由此构成基本动作执行部12a。下文中,为了便于说明,将由控制器10使储存在ROM11中的基本动作程序11a载入到RAM12中加以执行而进行各部分的控制的处理,描述为由基本动作执行部12a进行各部分的控制。另外,其他应用程序也采用同样的描述。
拍摄影像处理执行部12b对拍摄处理部21指示其拍摄、停止拍摄或发出图像改善等处理指示。
拍摄对象物识别执行部12c是具有这样一种功能的程序,其识别图1中前方拍摄用摄像机C2拍摄到的、用户A要进行ID输入和密码输入的对象物,确定保存在外部存储器13中的用户A应该会进行输入的各种卡和/或服务。输入画面识别执行部12d的功能是识别用户A输入的ID和/或密码,并将它们作为数字信息加密保存在外部存储器13中。此时,以与拍摄对象物识别执行部12c识别出的各种卡和/或服务相关联的状态保存在外部存储器13中。虹膜认证执行部12e是基于小型摄像机C1拍摄到的佩戴个人信息显示装置1的人物的虹膜,来判断是否为已登记的人物的程序。13f的注视点跟踪执行部与是上述前方拍摄用摄像机C2连动,判断用户A正在观看什么并确定其对象物的程序,通过与拍摄对象物识别执行部12c连动,能够更正确地提取信息。信息显示执行部12g是确定上述关联的密码,并使其显示在显示部5上的程序。语音识别执行部12h是经由耳机8通过声音向用户A发出提问时,或者识别从麦克风7语音输入的用户A的谈话的内容的程序。
控制器10内置有进行整个个人信息显示装置1的控制的算法。
将存储在外部存储器13中的拍摄影像程序13b、拍摄对象物识别程序13c、输入画面识别程序13d、虹膜认证程序13e、注视点跟踪程序13f、信息显示程序13g、语音识别程序13h载入到RAM12中,由控制器10加以执行来构成拍摄影像处理执行部12b、拍摄对象物识别执行部12c、输入画面识别执行部12d、虹膜认证执行部12e、注视点跟踪执行部12f、信息显示执行部12g、语音识别执行部12h,如图3所示,本实施例的个人信息显示装置1的动作主要由它们控制。另外,12b至12h的执行部也可以由通过硬件实现其一部分或全部动作的各硬件模块进行。此时,例如12b至12f的执行部可以由位于摄像部2的拍摄处理部21内的虹膜/注视点检测与识别功能22、图像识别功能23进行其一部分处理。
此外,ROM11和RAM12可以与控制器10构成为一体。此外,ROM11也可以不是图2所示那样的独立结构,而是使用外部存储器13内的一部分存储区域。此外,RAM12包括在各种应用程序执行时根据需要临时保持数据的临时存储区域。
外部存储器13临时存储由拍摄处理部21拍摄的图像和影像。此外,包括各种信息/数据记录区域13a用于储存便携式信息终端1的各动作设定值及便携式信息终端1的位置信息和各种信息,以及记录便携式信息终端1拍摄的图像和影像信息等的一部分或全部数据,还包括拍摄影像程序13b、拍摄对象物识别程序13c、虹膜认证程序13e、注视点跟踪程序13f、信息显示程序13g、语音识别程序13h以及其他程序。特别是,本实施例中重要的存储各种卡的信息和服务信息的输入画面信息131、与作为输入画面信息的各种卡和/或服务信息相关联的密码信息132、作为用户A的个人信息的虹膜信息133也是由各种信息/数据记录区域13a记录的,为了使这些信息基本上只要没有解密密钥就不能解密,将它们加密保存。这些程序也可以保存在ROM11及具有非易失性的内部存储器中。
此外,也可以用外部存储器13的一部分区域替代ROM11的全部或部分功能。此外,外部存储器13需要在即使个人信息显示装置1没有供电的状态下也能够保持所存储的信息。因此,例如使用闪存ROM或SSD(Solid State Drive:固态硬盘)等设备。
接着,说明利用本实施例的个人信息显示装置1具体使用各种卡时的动作。
首先,作为第一阶段,使用个人信息显示装置1的用户进行用户登记。此时,个人信息显示装置1如图1所示那样为HMD形状,因此用户A例如像佩戴眼镜那样架在耳朵上佩戴。关于个人信息显示装置1的电源通/断(ON/OFF),可以设置由用户手动执行的物理开关,不过为了更简便,也可以使用佩戴传感器9代替。该情况下,因为是HMD,所以在佩戴时耳朵会接触到的部分设置佩戴传感器9,在耳朵接触到佩戴传感器9的部分的时刻接通电源,在不接触耳朵的时刻断开电源。或者,也可以按上述方式接通电源,而断开电源则是探测到耳朵不再接触后,经过一定时间自动断开电源。作为佩戴传感器9既可以是上述那样单纯地进行接触探测的接触传感器,也可以是探测体温的温度传感器。或者,为了确保正确佩戴,也可以采用物理的开关类型,使得在未稳固佩戴的情况下开关不能接通。另外,在HMD不采用架在耳朵上佩戴的方法的情况下,可以在与头部接触的部分设置佩戴传感器9。
接着,进行用户A的个人信息登记处理。此时需要利用小型摄像机C1进行虹膜的拍摄和登记,不过此时为了判断是否正确地佩戴,可以判断是否处于能够由小型摄像机C1拍摄虹膜的状态,如果是不能拍摄的状态则由显示部例如显示“请正确佩戴”等警报。或者,因为该状态下可能用户A连显示部的内容都不能阅读,所以在这种情况下鸣响警报。这对上述防止个人信息显示装置1被非法使用也是有效的。
当确认已正确佩戴时,开始虹膜登记。使用小型摄像机C1拍摄用户A的虹膜,将虹膜信息133加密记录至外部存储器13。此时,也可以在登记虹膜的同时,登记个人的姓名和年龄、电话号码等信息。其登记方法例如是使用图2的麦克风7进行语音输入。此时,例如从图2的耳机8对用户A进行“请说出你的名字”等提问,以对此进行回答的形式执行语音输入。或者,提问也可以由显示部5显示。关于语音输入的内容,先在显示部上显示通过语音识别技术识别出的名字,由用户A判断是否正确并同时进行个人信息输入。或者,因为还存在语音输入困难的情况、不想进行语音输入的情况,所以也可以利用通信部14使用键盘或智能手机的输入功能进行输入并同时记录用户A的个人信息。或者,也可以使用上述注视点跟踪功能和显示功能,在显示部5上显示用户A的注视点,在显示上进行用于判断是否正确的显示,例如显示“正确?”“错误?”,用户通过将注视点移动对应位置来做出判断,不过这一点后述。个人信息例如不限于名字和年龄、电话号码等信息,也可以登记住址或能够确定本人的驾照号码、护照号码、个人号码等。当然上述信息也被加密后记录于外部存储器13。此外,因为由用户A输入上述信息很麻烦,所以也可以利用个人信息显示装置1的前方拍摄用摄像机C2拍摄驾照、护照、写有住址的文件,使用图像识别技术进行判断,将信息记录至外部存储器13中。
接着,登记作为对象的银行卡、信用卡等的卡信息。此时,如图4A所示那样,用户A自身使卡移动到前方拍摄用摄像机C2能够拍摄的状态,如箭头所示那样移动至能够利用前方拍摄用摄像机C2识别整个卡的位置,进行拍摄。此时,图4B是在用户A实际手持卡时看到的景象。也可以在显示部5上显示前方拍摄用摄像机C2的拍摄画面,由用户A自身进行确认来调整至大致的位置和距离。使用图像识别功能23识别所拍摄的画面上的各种信息,例如卡的种类及卡号、卡的有效期限等信息,信息在加密后记录至外部存储器13中。对于信用卡来说,使用时有时还需要用到记在卡背面的所谓安全码等3位或者4位数字,因此可以还登记该信息。
另外,上面表示了仅登记数字和文字等的情况,不过并不限定于此,也可以拍摄信用卡本身作为图像登记。如后所述,这对用户A判断是否是已登记的卡来说是有用的。即,记录在外部存储器中的信息可以是所拍摄的画面上的图像数据,也可以是根据所拍摄的图像识别出的卡种类或卡号、卡的有效期限等文本数据。然后,在识别、记录成功的时刻,使显示部5向用户A显示已完成了识别和记录。此时,虽然是向用户A显示完成了记录,但是既可以仅显示“已完成”,也可以在显示部5上显示所记录的画面上的图像数据,还可以仅显示作为卡信息所需的例如卡种类、卡号、卡的有效期限等文本数据。或者,也可以通过声音,从耳机8用声音告知“已完成”。或者,也可以用声音告知作为卡信息有效的文本数据。为了使用户A确认是否正确识别,在显示部5显示识别出的卡信息。或者,也可以经由耳机8,用声音向用户A告知、确认。此时,如果正确,既可以用语音输入“正确”,也可以用键盘输入“正确”的判断,还可以使用注视点跟踪功能和显示功能进行判断。
接着,进行各种卡的密码的登记。因为密码的登记需要用户A直接输入,所以例如通过语音进行输入,并将与上述同样的语音识别的结果显示在显示部5上,在用户确认后与各种卡关联地加密,之后记录至外部存储器13。或者,将密码记在纸上,利用前方拍摄用摄像机C2对其进行拍摄,由图像识别功能23进行确认。当然,识别结果要传达至用户A由其判断是否正确。或者,在用户使用该信用卡时,利用前方拍摄用摄像机C2拍摄用户A在例如密码输入装置上输入的顺序、符号和数字,进行图像识别并存储该输入的数字和符号。此时,为了判断所输入的数字和符号是否正确,可以经由耳机8向用户A确认。或者,也可以在显示部5上显示输入的数字和符号。用户A确认其是否正确,例如如果正确则向麦克风7输入“正确”等语音。
在上述的加密中,也可以自动生成与虹膜信息相关联的加密密钥进行加密。为了提高安全性,对加密信息解密的密钥可以按每种卡使用不同的密钥。或者,在用户A要求密码时虽然进行虹膜认证,但是此时可以自动地重新生成关联的加密密钥,以新的密钥进行加密。
图4C是在个人信息显示装置1的显示部5(该例为右眼)上显示了前方拍摄用摄像机C2拍摄到的卡的影像310和用户输入的密码300的示意图。
图4D是在个人信息显示装置1的显示部5上显示了文字识别出的卡信息311和用户A输入的密码300的示意图。即,图4C中显示了卡的影像310,但也可以如图4D所示那样,显示文字识别出的卡信息311。
接着,表示用户A使用各种卡时输入密码的方法。此时,同样地,用户A将个人信息显示装置1如图1所示那样以佩戴HMD的方式架在耳朵上佩戴。佩戴的确认与上述用户登记时相同,因此省略说明。
当确认已正确佩戴时,开始虹膜认证。虹膜认证使用小型摄像机C1拍摄用户A的虹膜,与预先登记的用户A的虹膜信息对照。在判断为相同的情况下使显示部5显示已登记的个人的名字,或者也可以经由耳机8通过声音告知。此时,出于双重的防非法使用之目的,也可以要求用户说出预先登记的关键词进行确认。在拍摄虹膜时存在用户A看向各种地方导致虹膜拍摄不顺利的可能。因此,为了使虹膜拍摄能够正确地进行,可以在显示部5的适当的位置显示箭头或标记等,并在显示部上显示“请看这个箭头”之类的显示或者从耳机8通过声音发出指示,使得用户A看向该箭头或标记。
接着,确认用户A想要使用的银行卡或信用卡等的卡信息。此时,如图4A所示那样,用户A自身使卡31移动至前方拍摄用摄像机C2能够拍摄的状态,利用前方拍摄用摄像机C2进行拍摄。此时,用户A自身将卡31调整到前方拍摄用摄像机C2能够识别的大致位置和距离处。在识别成功的情况下可以使显示部5显示成功的消息。也可以在显示部5上显示拍摄画面,使得用户A自身能够进行确认。因此,也可以使用其判断的结果,例如在显示部5上向用户A显示“请再移近一点”或者“请再移远一点”之类。或者,也可以使用耳机8通过声音传达指示,使用户将卡31移动至能够作为图像识别出卡31的信息的位置再进行拍摄。所拍摄的画面上的各种信息例如信用卡的种类或卡号、卡的有效期限等信息,是使用图像识别功能23识别的。
接着,显示与识别出的卡信息对应的密码。即,从预先登记的信息中调出与识别出的卡信息一致的卡信息的密码,将该密码显示在显示部5上。图4E是在用卡时在个人信息显示装置1的显示部5上显示已登记的密码300的示意图。如图4E所示,利用前方拍摄用摄像机C2拍摄用户A的信用卡,进行图像匹配,从预先登记的卡信息之中,将识别为相同的卡的图像信息显示在显示部5上。
另外,可以在每次显示密码时,由用户A确认要使用的卡与识别出的卡是否一致。该情况下,可以在个人信息显示装置1的显示部5上显示卡的影像,与实际拿在手中的卡对比,确认是否一致。作为确认方法可以通过声音从耳机8传达。此外,在用户感到确认动作很麻烦的情况下也可以省略该动作。在一致的情况下,使用麦克风7例如输入“确认”或“一致”之类,传达给个人信息显示装置1。个人信息显示装置1将来自麦克风的语音输入到控制器10,利用语音识别执行部12g进行语音识别,判断是否一致。或者,也可以基于用户A的手指等做出的手势,例如,在前方拍摄用摄像机C2能够拍摄的位置,用手指打手势显示“确认”,通过图像识别来识别为一致。在确认了一致的情况下,如图4E所示在显示部5上显示与卡关联的卡的密码。
通过进行这样的动作,即使用户A忘记了密码也能够顺利地输入密码。另外,上述说明中使密码显示于显示部5,不过并不限定于此,例如也可以通过声音从耳机8告知密码。
这样,在本实施例中,在确定了各种卡的时刻通过显示部5显示各种卡的密码。由此,用户能够按照其显示进行密码输入。因此,能够进行安全性高的个人信息显示,能够提供用户友好的个人信息显示装置。
接着,对用户A例如在计算机上使用各种应用程序、使用网络等情况下的动作进行说明。
首先,登记各种应用程序的使用、网络的使用等各种服务信息。此时,用户A如图5A所示那样,以前方拍摄用摄像机C2能够拍摄到PC32的状态进行操作。图5B是操作状态下用户实际看到的景象。
前方拍摄用摄像机C2拍摄的图像经过分析、识别后,在显示部5上显示计算机的各种信息。所拍摄的画面上的计算机的各种信息例如图5B所示,包括各种服务的种类、提醒用户输入必要的ID和密码的画面等。这些信息使用图像识别功能23识别,将各信息登记至外部存储器13。此时,所登记的各种信息被加密登记。上述信息既可以作为数字和字符等信息登记,也可以拍摄计算机画面本身,将其登记为图像。如后所述,这对判断是否是已登记的计算机画面是有效的。
接着登记各种服务所需的密码和ID号等信息,用户通过声音经由麦克风7将这些信息输入控制器10,由语音识别执行部12h进行数字数据化,将它们以与上述的各种服务的信息关联的状态加密记录至外部存储器。或者,在用户使用该服务信息时,利用前方拍摄用摄像机C2拍摄用户A例如通过键盘输入的符号、数字及其输入的顺序,进行图像识别来存储该输入的数字和符号。此时,为了判断输入的数字和符号是否正确,可以经由耳机8向用户A确认。或者,也可以在显示部5上显示输入的数字和符号。用户A确认其是否正确,例如,如果正确则对麦克风7输入“正确”等语音。此外,在登录画面,有的情况下无论是在登记时还是使用时,密码均在计算机画面上被屏蔽为例如●●●●等而不显示字符或数字。特别是在使用时,有的情况下即使输入密码也只显示●●●●等,不知道输入是否正确。因此,在登记密码时,使用显示部5显示所输入的密码。其方法是,例如在用户A进行键盘输入时,使用前方拍摄用摄像机C2识别用户A输入的字符和数字的顺序,使显示部5按该顺序显示。
图5C是在登记时将文字识别出的服务名称511和用户输入的ID和密码500显示在个人信息显示装置1的显示部5上的示意图。
接着说明利用各种服务时的密码和ID号的输入方法。
图6A是在利用各种服务时,在个人信息显示装置1的显示部5上显示了文字识别出的服务名称511和已登记的ID和密码500的示意图。此外,图6B是图6A中的显示部5的放大图,虚线所示的PC32表示了透过玻璃直接看到的状态。
在用户A于PC32上利用服务的情况下,使该PC32的屏幕(画面)处于前方拍摄用摄像机C2能够拍摄的状态,与图5A一样,前方拍摄用摄像机C2拍摄用户A正在观看的PC32的屏幕,进行图像匹配,从预先登记的服务信息之中将识别为相同的服务的服务名称511显示在显示部5上。
用户A对比显示部5上显示的服务名称511与实际看到的计算机屏幕,如果一致则使用麦克风7输入例如“正确”或“一致”之类,传达至个人信息显示装置1。个人信息显示装置1将来自麦克风的语音输入到控制器10,由语音识别执行部12g进行语音识别,在确认用户A判断为正确的基础上,如图6B所示,将与服务信息关联的服务的ID和/或密码500及根据需要使用的其他信息显示在显示部5上。用户A确认该ID和/或密码500,从计算机的键盘进行ID和/或密码的输入。此时,与图5B一样,在用户A输入的信息像密码那样不予显示而是成为●●●●等的情况下,为了使用户A自身能够确认所输入的信息,可以在ID和密码500的下部显示所输入的信息。
在上述说明中,将ID和密码显示在显示部5上,不过并不限定于此,例如也可以利用声音从耳机8告知。
或者,也可以将ID或密码显示在输入位置或者输入位置附近,向用户A指示应该在何处输入什么信息,以使得输入位置不会出错。例如,可以如图6C所示那样,将已登记的ID501叠加地显示在透过玻璃直接看到的PC32上的ID输入栏处,此外,将已登记的密码502叠加地显示在透过玻璃直接看到的PC32上的密码输入栏处。
此外,在登录画面发生了设计变更等导致个人信息显示装置1中登记的画面信息和新的设计画面不能匹配的情况下,当然个人信息显示装置1会显示无法匹配,不过在这种情况下,也可以由用户明示地输入/指定服务。此外,还可以运用AI功能,使得只要是同样的公司名称、服务名称,即使设计发生若干变更也能够应对。
在上述说明中,针对各种卡和例如使用计算机接受的各种服务记载了个人信息显示装置1的使用方法,不过还存在例如在进入家和公司等特定场所时,为了确保安全而要求输入ID和/或密码才能开关门的情况。在这种情况下,当然也可以使用前方拍摄用摄像机C2拍摄、识别该要求输入ID和/或密码的状况,并从外部存储器13将对应的ID和/或密码显示于显示部5,但也可以通过位置传感器6预先将需要使用的场所登记为位置信息,由此能够显示与该登记位置信息关联的ID和/或密码。
此外,在上述的实施例中,在从个人信息显示装置1一方请求用户A进行判断时,用户A通过声音或键盘输入来传达判断结果,不过并不限定于此,也可以使用注视点跟踪功能和显示功能进行判断。使用图7A、7B说明其一个例子。
图7A与图5A一样,是用户A例如使用计算机确认各种应用程序的使用、网络的使用等各种服务信息的情况下的个人信息显示装置1的显示部5的显示例。在前方拍摄用摄像机C2完成对焦时,个人信息显示装置1从登记在外部存储器13中的信息之中调出与其拍摄画面一致的内容,由用户A确认。此时,如图7A所示那样,在显示部5上显示用户A的注视点700与确认用窗口710。确认用窗口710是一个例如显示了“正确?”、“错误?”,来指示用户将注视点移动至该“正确?”、“错误?”的显示位置的显示栏,其用于判断已登记的各种服务的信息与用户A正在观看的画面是否相同。如图7B所示,用户A在例如判断为“正确”的情况下将注视点移动至“正确?”的显示位置,并且例如在个人信息显示装置1判断为“正确”之前使注视点不动。个人信息显示装置1例如在注视点位置持续一段时间未动的情况下,视作选择了“正确”,如图5C那样显示与之关联的ID和/或密码信息。由此,用户A即使不利用声音和键盘等外部输入也能够进行确认并同时输入恰当的ID和/或密码。当然,也可以使用上述那样的手势等进行确认。
接着,使用处理流程图说明登记或者显示密码等个人信息的具体动作。
图8是个人信息显示装置1内的登记时的处理流程图。在图8中,首先,作为前提,用户A接通个人信息显示装置1的电源(未图示)。此时,个人信息显示装置1的电源既可以是用户A物理地利用开关等接通的,也可以在佩戴个人信息显示装置1时自动地接通开关。在供电的同时对各功能供电,同时加载各种程序。然后,在步骤S100,确认用户A是否已将个人信息显示装置1佩戴在正确的位置。接着拍摄用户A的虹膜(S101)。然后,进行用户A的个人信息登记(S102)。个人信息和虹膜信息被关联并加密后登记至外部存储器13。个人信息的登记既可以通过麦克风7和耳机8的语音输入进行,也可以显示在显示部5上,经由通信部14例如利用键盘进行输入。
然后,为了登记要登记ID和/或密码的各种卡和/或服务的信息,首先,显示各种卡和/或服务名称(S103)。关于各种卡和/或服务的信息,例如,如果是银行卡则使用银行名称和银行号、支店名和支店号、账户的种类和账号等。如果是信用卡则使用信用卡公司名称、信用卡号、有效期限、安全码等信息。各种服务则使用其服务名称和已登记的个人号码等。
然后,在步骤S104,用户确认所显示的服务名称来确认是否是要登记的服务。如果是“错误”则返回S103,如果是“正确”,则登记各种卡和/或服务的信息,在步骤S105,为了登记使用该卡及服务所需的ID和/或密码,将它们输入。然后,在步骤S106确认输入内容,如果是“错误”则返回S105,如果是“正确”则登记ID和/或密码。在登记上述各种卡和/或服务信息以及登记与之关联的密码及ID号时,将它们分别加密后保存在外部存储器13中。然后,在步骤S107中,在还有其他要登记的卡和/或服务的情况下返回S103,继续进行同样的登记操作。在没有的情况下进行结束处理S108来结束处理流程。在结束处理中,除了结束各种程序和功能的处理以外,例如还可以基于图像识别中的新的学习来登记设定值等。在上述S107中,在判断用户A要做的事情的情况下,为了进行判断而通过显示部5和耳机8使用例如“还有其他要登记的吗?”等显示和声音来直接询问用户A。用户A对于该询问经由麦克风7和通信部14通过声音和键盘输入进行回应。
图9是要利用个人信息显示装置1内的各种卡和/或服务的情况下的处理流程图。在图9中,与图8的登记时的处理流程一样,作为前提,将个人信息显示装置1的电源接通来加载各种程序。然后,确认用户A是否已将个人信息显示装置1佩戴在正确的位置(S200)。接着拍摄虹膜,与已加密登记在外部存储器13中的用户A的已登记虹膜进行认证(S201)。在步骤S202确认为是本人的情况下前进至各种卡和/或服务的识别(S203),在不能确认是本人的情况下结束流程。
在S203的各种卡和/或服务的识别中,用户A例如在各种卡的情况下,由其自身使卡移动至前方拍摄用摄像机C2能够读取卡的内容的位置,使用识别技术读取卡信息。然后,在步骤S204,判断识别出的信息是否已登记。在未登记的情况下转移至步骤S210,由用户判断是否进行新的登记。在指示进行新的登记的情况下进行登记处理(S211)并结束流程。在不进行新的登记的情况下返回S203的等待识别状态。
在步骤S204,在识别出的信息已登记的情况下转移至步骤S205,显示服务名称。然后,在步骤S206,判断是否被设定为要对服务实施确认。该设定是用户预先进行的。在没有被设定为要对服务实施确认的情况下,在步骤S208显示ID/密码,在S209判断所显示的ID/密码是否正确,在不正确的情况下前进至是否进行新的登记的判断步骤S210,在正确的情况下返回S203的等待识别状态。
在步骤S206,在被设定为要对服务实施确认的情况下,在S207确认服务的名称。在S207,为了向用户A确认,通过显示部5、耳机8以画面显示、声音的方式进行通知。用户A经由麦克风7、通信部14通过声音和键盘输入对是否正确进行回应。经S207的确认后,显示与上述各种卡和/或服务关联的密码(S208)。此时,密码既可以显示在显示部5上,也可以经由耳机8通过声音告知。另外,处理流程中虽未记载,此时用户A输入密码的方法是,面对PC使用键盘输入、或利用银行或便利店的ATM等进行输入、或在店铺内利用信用卡支付终端输入。关于输入是否正确的判断,由个人信息输入装置1的前方拍摄用摄像机C2拍摄,并使用图像识别技术判断是否正确,在错误的情况下经由耳机用蜂鸣声发出通知。或者也可以通过显示部5进行显示。由此,能够用正确的密码结束目标动作。另外,关于目标动作是否已经结束的判断,可以由前方拍摄用摄像机C2拍摄,并使用图像识别技术进行判断,还可以经由显示部5、耳机8对用户A询问是否已经结束来进行判断。
此外,以上在图8的处理流程中为了便于说明,仅记载了基本的处理流程,不过并不限定于此。在实际的处理流程中,例如也可以在S100的佩戴的确认或者S101的虹膜拍摄中,在佩戴和虹膜拍摄不顺利的情况下,按预先设定的重试次数重复进行用户A的佩戴和虹膜拍摄时的检查,或者在即使如此用户A还是未正确佩戴以及虹膜拍摄无法成功的情况下,使显示部5显示该消息,使用户A自身正确地进行佩戴,或者例如在虹膜拍摄中显示“请看箭头的部分”等以使用户A看向显示部5的特定位置,使得能够正确地进行虹膜拍摄。同样地,在S103的各种卡和/或服务名称的登记和S105的ID/密码的输入中,也可以在不顺利的情况下分别决定或者设定重试次数,进行正确的登记。该情况下,也可以与上述一样,使用显示部5显示不能顺利地登记,提醒用户A再次登记。同样,在图9的处理流程的情况下也可以进行适当的重试,以能够正确地使用。
另外,上述的个人信息显示装置1如果是HMD的形状,则其显示的内容谁也看不到,安全性较高。此外,还可以使用能够确认是否处于佩戴状态的机构,由此,能够以佩戴状态为条件来显示密码,而只要确认到佩戴被解除就取消密码显示。此外,在上述说明中,虹膜的登记仅在最开始时进行,不过并不限定于此,也可以定期地进行虹膜登记。此外,虹膜认证也可以不仅进行一次,例如在用户想要知道各种卡的密码的情况下,可以每次都进行虹膜认证。此外,在用户A的操作经过了一段时间的情况下,可以再次进行虹膜认证才显示密码。
此外,上述说明中的个人认证使用了虹膜,但例如也可以使用麦克风进行声纹认证。此外,虹膜和各种卡和/或各种服务的信息、与之关联的密码和ID信息也可以定期地自动使用新的密钥进行加密,并保存至外部存储器。
此外,在上述的各种卡信息和各种服务信息中登记ID和/或密码时,用户A可以预先通过键盘输入、或使用个人信息显示装置1的前方拍摄用摄像机C2进行卡识别,来将卡的ID输入到密码管理软件,并通过声音或键盘输入来识别密码。
当然,当这样的装置大量出现在市面上之后,人们能够认识到装置中记录有个人信息,因此可以设想,有可能出现盗取该装置来提取外部存储器的信息的情况。因此,各种的密码具有仅能够在成功进行虹膜认证时解锁的机制,所记录的数据以加密的状态记录。也可以是,在虹膜信息正确的情况下颁发对应的密钥,并在每次认证时颁发新的密钥进行加密记录。由此,加密信息始终是不同的密钥,因此例如即使信息被盗取,与各个服务和卡对应的被加密的密码也始终是不同的密钥,因此安全性更高。
或者加入一种机制,使得用户能够在确认被盗时清空其中的信息。这能够通过图2的通信单元进行。可以预先利用个人信息显示装置1的登记号和密码,通过移动电话来简单地进行清空。
或者,还能够利用基于GPS的位置传感器6,使用GPS功能确认被盗取的装置位于何处再将其清空。通过使用上述功能,还能够知道装置是在何时、何处使用的。此外,还能够确认装置的佩戴、电源输入或者基于前方拍摄用摄像机C2的动作而使用的各种卡和各种服务的内容。
在将来的服务中,还可以考虑将其借给用户,按使用次数收取服务费用的方法。
如以上所述,在本实施例中,在个人信息显示装置中搭载有前方拍摄用摄像机和用于拍摄用户的虹膜和跟踪注视点的小型摄像机,利用前方拍摄用摄像机拍摄用户持有的现金卡和信用卡,通过图像识别技术确定对象卡的种类和号码。或者,利用前方拍摄用摄像机拍摄PC/平板电脑/智能手机等的密码输入画面,之后通过拍摄图像的图像识别技术确定要输入ID和/或密码的服务。确定之后,利用HMD内的控制器、存储器,将与卡信息和各种服务关联地登记的登录ID和/或密码通过HMD的显示部显示在用户的视野内。通过基于虹膜等生物信息进行个人认证,其他人即使佩戴该装置也不会显示密码,安全性得到确保。而且,由于只要进入密码输入画面就能在视野内显示登录ID和/或密码,用户不会弄错密码,且安全性也得到充分保障。
此外,在登记新密码和定期更改密码时,同样利用前方拍摄用摄像机的文字识别技术等识别这是要登记新密码或者定期更改密码,并识别用户在密码输入区域输入的字符,自动在HMD内登记新密码/更改密码。或者,通过声音、手势和菜单对HMD发出命令,以指示这是要登记新密码或者定期更改密码。或者也可以利用注视点跟踪,由用户通过注视点来选择显示在HMD的显示部上的指示。在不使用命令的情况下,也可以从HMD向用户确认是否是登记/更改。
此外,在用户按照个人信息显示装置的显示部上的显示而输入密码时,在不显示所输入的字符的服务中,在HMD的显示部上显示识别为用户所输入的全部输入字符。由此,能够确认输入内容,防止在需要双重输入的服务中发生输入错误。
此外,为了判断用户正在观看什么,利用小型摄像机进行注视点检测,根据其与前方拍摄用摄像机拍摄到的图像之间的位置关系确定用户A正在观看的卡等对象物,并通过图像分析确定卡的种类、ID号。例如,如果是银行的现金卡则识别银行名称、账号等信息,如果是信用卡则识别信用卡公司名称、信用卡号、有效期限、个人姓名等信息,并将与该信息关联的密码显示于HMD内的显示部。此时,当然为了确认佩戴HMD的是用户A需要进行虹膜认证,并在确认是用户A之后显示密码。
上面对本发明的实施例进行了说明,但本发明并不限定于上述的实施例,而包括各种各样的变形例。例如,上述的实施例为了将本发明说明得容易明白而进行了详细的说明,但是并不一定限定于包括所说明的所有结构。此外,能够将一个实施例的结构的一部分替换到另一个实施例的结构,还能够在一个实施例的结构中加入另一个实施例的结构。并且,能够对各实施例的结构的一部分进行其它结构的追加、删除、替换。另外,上述的各结构、功能、处理部等例如也可以通过利用集成电路等进行设计来使用硬件实现它们的一部分或全部。
附图标记说明
A:用户,1:个人信息显示装置,2:摄像部,5:显示部,6:位置传感器,7:麦克风,8:耳机,9:佩戴传感器,10:控制器,11:ROM,12:RAM,13:外部存储器,14:通信部,21:拍摄处理部,22:虹膜/注视点检测与识别功能,23:图像识别功能,24:存储器,31:卡,32:PC,C1:小型摄像机,C2:前方拍摄用摄像机

Claims (14)

1.一种包括眼镜形状的显示部的个人信息显示装置,其特征在于:
包括:拍摄个人的虹膜的第一摄像机、拍摄外部信息的第二摄像机、对从所述第一摄像机和第二摄像机得到的拍摄图像进行处理的拍摄处理部、信息输入部和控制器,
利用所述第一摄像机拍摄佩戴着所述个人信息显示装置的个人的虹膜,
利用所述第二摄像机拍摄各种卡和各种服务的信息,
所述拍摄处理部从所述拍摄到的虹膜取得虹膜信息,并从所述拍摄到的各种卡和各种服务的信息取得各种卡和/或各种服务的识别信息,
所述控制器基于所述虹膜信息登记个人信息,并利用所述信息输入部输入并登记与所述各种卡和/或各种服务的识别信息关联的ID和/或密码。
2.如权利要求1所述的个人信息显示装置,其特征在于:
所述控制器对所述虹膜信息与预先登记的虹膜进行对照,仅在对照结果是判断为正确的情况下,在所述显示部上显示预先登记的所述各种卡和/或各种服务的识别信息与所述第二摄像机拍摄到的各种卡和/或各种服务的信息一致的、各种卡和/或各种服务的相关联的ID和/或密码。
3.如权利要求1所述的个人信息显示装置,其特征在于:
所述第二摄像机拍摄个人正在输入ID和/或密码进行登记的画面,
所述拍摄处理部从拍摄到的画面识别正在输入的字符和/或数字,
所述控制器登记所述ID和/或密码。
4.如权利要求1所述的个人信息显示装置,其特征在于:
所述控制器,在利用所述信息输入部输入并登记与所述各种卡和/或各种服务的识别信息关联的ID和/或密码时,将所述各种卡和/或各种服务的识别信息显示在所述显示部上,让用户判断该显示在显示部上的信息是否正确,在正确的情况下,利用所述信息输入部输入并登记所述ID和/或密码。
5.如权利要求4所述的个人信息显示装置,其特征在于:
所述控制器根据用户的语音判断显示在所述显示部上的信息是否正确。
6.如权利要求4所述的个人信息显示装置,其特征在于:
所述控制器根据用户的手势判断显示在所述显示部上的信息是否正确。
7.如权利要求4所述的个人信息显示装置,其特征在于:
所述第一摄像机具有跟踪用户的注视点的功能,
所述控制器在所述显示部上显示所述注视点,根据用户的注视点的运动判断显示在所述显示部上的信息是否正确。
8.一种包括眼镜形状的显示部的个人信息显示装置的处理方法,其特征在于:
拍摄佩戴着所述个人信息显示装置的个人的虹膜,从该拍摄到的虹膜取得虹膜信息,
拍摄各种卡和/或各种服务的信息,从该拍摄到的各种卡和/或各种服务的信息取得各种卡和/或各种服务的识别信息,
基于所述虹膜信息登记个人信息,并登记与所述各种卡和/或各种服务的识别信息关联的ID和/或密码。
9.如权利要求8所述的个人信息显示装置的处理方法,其特征在于:
对所述虹膜信息与预先登记的虹膜进行对照,仅在对照结果是判断为正确的情况下,显示预先登记的所述各种卡和/或各种服务的识别信息与所述拍摄到的各种卡和/或各种服务的信息一致的、各种卡和/或各种服务的相关联的ID和/或密码。
10.如权利要求8所述的个人信息显示装置的处理方法,其特征在于:
拍摄个人正在输入所述ID和/或密码进行登记的画面,
从所述拍摄到的画面识别正在输入的字符和/或数字,
登记所述ID和/或密码。
11.如权利要求8所述的个人信息显示装置的处理方法,其特征在于:
在登记与所述各种卡和/或各种服务的识别信息关联的ID和/或密码时,显示所述各种卡和/或各种服务的识别信息,让用户判断该显示的信息是否正确,在正确的情况下,输入并登记所述ID和/或密码。
12.如权利要求11所述的个人信息显示装置的处理方法,其特征在于:
根据用户的语音判断所述显示的信息是否正确。
13.如权利要求11所述的个人信息显示装置的处理方法,其特征在于:
根据用户的手势判断所述显示的信息是否正确。
14.如权利要求11所述的个人信息显示装置的处理方法,其特征在于:
包括具有跟踪用户的注视点的功能的摄像机,
显示所述注视点,根据用户的注视点的运动判断所述显示的信息是否正确。
CN201980096914.3A 2019-05-29 2019-05-29 个人信息显示装置及其处理方法 Pending CN113994335A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2019/021418 WO2020240747A1 (ja) 2019-05-29 2019-05-29 個人情報表示装置及びその処理方法

Publications (1)

Publication Number Publication Date
CN113994335A true CN113994335A (zh) 2022-01-28

Family

ID=73553121

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980096914.3A Pending CN113994335A (zh) 2019-05-29 2019-05-29 个人信息显示装置及其处理方法

Country Status (4)

Country Link
US (1) US20220222971A1 (zh)
JP (2) JP7279159B2 (zh)
CN (1) CN113994335A (zh)
WO (1) WO2020240747A1 (zh)

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007006393A (ja) * 2005-06-27 2007-01-11 Institute Of Physical & Chemical Research 情報提示システム
US8645709B2 (en) * 2006-11-14 2014-02-04 Cfph, Llc Biometric access data encryption
US9411944B2 (en) * 2006-11-15 2016-08-09 Cfph, Llc Biometric access sensitivity
US20120194551A1 (en) * 2010-02-28 2012-08-02 Osterhout Group, Inc. Ar glasses with user-action based command and control of external devices
US10180572B2 (en) * 2010-02-28 2019-01-15 Microsoft Technology Licensing, Llc AR glasses with event and user action control of external applications
US9128281B2 (en) * 2010-09-14 2015-09-08 Microsoft Technology Licensing, Llc Eyepiece with uniformly illuminated reflective display
US20120194418A1 (en) * 2010-02-28 2012-08-02 Osterhout Group, Inc. Ar glasses with user action control and event input based control of eyepiece application
US20130278631A1 (en) * 2010-02-28 2013-10-24 Osterhout Group, Inc. 3d positioning of augmented reality information
US8988350B2 (en) * 2011-08-20 2015-03-24 Buckyball Mobile, Inc Method and system of user authentication with bioresponse data
KR101160681B1 (ko) * 2011-10-19 2012-06-28 배경덕 이동 통신 단말기의 활성화 시에 특정 동작이 수행되도록 하기 위한 방법, 이동 통신 단말기 및 컴퓨터 판독 가능 기록 매체
EP2624180A1 (en) * 2012-02-06 2013-08-07 Xabier Uribe-Etxebarria Jimenez System of integrating remote third party services
KR101991133B1 (ko) * 2012-11-20 2019-06-19 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 헤드 마운트 디스플레이 및 그 제어 방법
US9130929B2 (en) * 2013-03-15 2015-09-08 Aol Inc. Systems and methods for using imaging to authenticate online users
US9979547B2 (en) * 2013-05-08 2018-05-22 Google Llc Password management
JP6231398B2 (ja) * 2014-02-14 2017-11-15 株式会社Nttドコモ 近距離通信デバイス、機能制御方法及び機能制御システム
CN104065817A (zh) * 2014-06-16 2014-09-24 惠州Tcl移动通信有限公司 一种基于虹膜识别的移动终端身份认证处理方法及系统
US9791936B1 (en) * 2016-05-03 2017-10-17 Aram Kavach Audio and motion-based control of a personalized smart appliance, media, and methods of use
JP2017228118A (ja) * 2016-06-23 2017-12-28 富士通株式会社 情報処理装置、情報処理システム、情報処理プログラムおよび情報処理方法
KR20180013151A (ko) * 2016-07-28 2018-02-07 엘지전자 주식회사 이동 단말기
CN110692062B (zh) * 2017-03-24 2023-12-08 奇跃公司 虹膜代码的累积和置信分配
EP4137918A1 (en) * 2017-06-06 2023-02-22 Maxell, Ltd. Mixed reality display system and mixed reality display terminal
US10345902B1 (en) * 2018-04-24 2019-07-09 Dell Products, Lp Method and apparatus for maintaining a secure head-mounted display session

Also Published As

Publication number Publication date
JP2023104944A (ja) 2023-07-28
JP7279159B2 (ja) 2023-05-22
WO2020240747A1 (ja) 2020-12-03
JPWO2020240747A1 (zh) 2020-12-03
US20220222971A1 (en) 2022-07-14

Similar Documents

Publication Publication Date Title
CN101960493B (zh) 用于移动装置的生物统计智能卡
KR100952540B1 (ko) 통신 장치, 통신 시스템
KR100961286B1 (ko) 휴대 정보 단말 장치
EP1860613B1 (en) Portable terminal and image information matching method for portable terminal
US7653378B2 (en) Authentication system for mobile terminal having electronic money function
EP4333554A2 (en) Authentication method
EP2397972A1 (en) Smart card with microphone
CN104376248B (zh) 一种在密码输入界面进行用户验证的方法及装置
JP6840568B2 (ja) 認証システムおよび認証方法
CN104778416A (zh) 一种信息隐藏方法及终端
JP2008276345A (ja) 電子機器及び認証方法及びプログラム
JP2006227766A (ja) 複数の生体認証デバイス受付を可能とする取引システム、携帯端末、取引端末
KR100725771B1 (ko) 휴대용 단말기용 얼굴 인식 및 인증 장치 및 방법
EP1835433A1 (en) Authentification device, authentification method, authentification program and computer readable recording medium
JP2005063342A (ja) カード使用者確認システム、カード使用者確認方法及びそのプログラム
CN113994335A (zh) 个人信息显示装置及其处理方法
JP2001067322A (ja) 個人認証システム
KR20150041896A (ko) 컴퓨터 비전 기술, 음성인식과 gps 정보 융합을 이용한 스마트 휴대 기기의 안전 결제 방법 및 그 장치
JP4811873B2 (ja) 認証装置
JP2002366938A (ja) 指紋認証システム
KR20190000266A (ko) 단말 장치 및 이의 원격 제어 방법
CN117853103A (zh) 基于智能手环的支付系统激活方法
JP2024053174A (ja) 決済端末及び決済システム
JP2024053175A (ja) 決済システム
KR20210056622A (ko) 개인 정보 보호 및 보안 강화를 위한 장치, 방법, 컴퓨터 판독 가능한 기록 매체 및 컴퓨터 프로그램

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination