CN109804422B - 眼球运动测量装置和眼球运动分析系统 - Google Patents

眼球运动测量装置和眼球运动分析系统 Download PDF

Info

Publication number
CN109804422B
CN109804422B CN201780063136.9A CN201780063136A CN109804422B CN 109804422 B CN109804422 B CN 109804422B CN 201780063136 A CN201780063136 A CN 201780063136A CN 109804422 B CN109804422 B CN 109804422B
Authority
CN
China
Prior art keywords
eyeball
eye movement
unit
light
illumination
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780063136.9A
Other languages
English (en)
Other versions
CN109804422A (zh
Inventor
铃木荣二
平田豊
中村祥悟
上田慎一
山本雅也
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NAC IMAGE TECH Inc.
School Corporation Chubu University
Tokai Optical Co Ltd
Original Assignee
Nac Image Tech Inc
School Corp Chubu University
Tokai Optical Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nac Image Tech Inc, School Corp Chubu University, Tokai Optical Co Ltd filed Critical Nac Image Tech Inc
Publication of CN109804422A publication Critical patent/CN109804422A/zh
Application granted granted Critical
Publication of CN109804422B publication Critical patent/CN109804422B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/7405—Details of notification to user or communication with user or patient ; user input means using sound
    • A61B5/741—Details of notification to user or communication with user or patient ; user input means using sound using synthesised speech
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/163—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state by tracking eye movement, gaze, or pupil change
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/113—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/7455—Details of notification to user or communication with user or patient ; user input means characterised by tactile indication, e.g. vibration or electrical stimulation
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W50/16—Tactile feedback to the driver, e.g. vibration or force feedback to the driver on the steering wheel or the accelerator pedal
    • G—PHYSICS
    • G02—OPTICS
    • G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C11/00—Non-optical adjuncts; Attachment thereof
    • G—PHYSICS
    • G02—OPTICS
    • G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C11/00—Non-optical adjuncts; Attachment thereof
    • G02C11/04—Illuminating means
    • G—PHYSICS
    • G02—OPTICS
    • G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C11/00—Non-optical adjuncts; Attachment thereof
    • G02C11/10—Electronic devices other than hearing aids
    • G—PHYSICS
    • G02—OPTICS
    • G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C7/00—Optical parts
    • G—PHYSICS
    • G02—OPTICS
    • G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C7/00—Optical parts
    • G02C7/10—Filters, e.g. for facilitating adaptation of the eyes to the dark; Sunglasses
    • G—PHYSICS
    • G02—OPTICS
    • G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C7/00—Optical parts
    • G02C7/14—Mirrors; Prisms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G08B21/06—Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18—Status alarms
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B7/00—Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00
    • G08B7/06—Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00 using electric transmission, e.g. involving audible and visible signalling through the use of sound and light sources
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143—Alarm means
    • G—PHYSICS
    • G02—OPTICS
    • G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C9/00—Attaching auxiliary optical parts
    • G02C9/04—Attaching auxiliary optical parts by fitting over or clamping on

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Surgery (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Molecular Biology (AREA)
  • Medical Informatics (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Ophthalmology & Optometry (AREA)
  • Pathology (AREA)
  • Psychiatry (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychology (AREA)
  • Social Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Child & Adolescent Psychology (AREA)
  • Educational Technology (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Otolaryngology (AREA)
  • Business, Economics & Management (AREA)
  • Acoustics & Sound (AREA)
  • Emergency Management (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)

Abstract

提供一种眼球运动测量装置和眼球运动分析系统，所述眼球运动测量装置为驾驶员等能够容易地佩戴和卸下的紧凑的结构，并且能够减少环境光的作用，以稳定的条件测量眼球运动，所述眼球运动分析系统用于基于由眼球运动测量装置获取到的眼球运动来进行驾驶员等的意识状态的分析等各种分析。眼球运动分析系统(S)具备眼球摄影装置(1)、眼球运动检测单元(2)以及人状态探测单元(3)。眼球摄影装置(1)具备：外罩眼镜(10)；眼球照明单元(11)，其以不可见光对眼球进行照明；眼球像摄像单元(12)，其对被眼球照明单元(11)照明的眼球的眼球像进行摄像；反射单元(13)，其用于将不可见光导向眼球，并且反射眼球像；以及配置单元，其相对于眼镜(G)将眼球照明单元(11)、眼球像摄像单元(12)、反射单元(13))配置在规定位置。

Description

眼球运动测量装置和眼球运动分析系统
技术领域
本发明涉及一种由车辆的驾驶员等佩戴的用于测量驾驶员等的眼球运动的眼球运动测量装置、以及用于基于由眼球运动测量装置获取到的眼球运动来进行驾驶员等的意识状态的分析等各种分析的眼球运动分析系统。
背景技术
为了减少由于车辆的驾驶员等的人为错误引起的事故等，需要开发一种监视驾驶员等的状态的技术。已知的是驾驶员等的眼球运动反映清醒度、恍惚度等驾驶员等的意识状态，尝试测量眼球运动来探测驾驶员等的状态。作为用于测量这样的眼球运动的装置，提出一种向对象者的包括眼球的脸照射探测光来对眼睛进行摄像的装置(例如专利文献1)。
现有技术文献
专利文献
专利文献1：日本特开2016-51317号公报
发明内容
发明要解决的问题
以往，提出的摄像装置在预先以与眼球正对的方式配置于车辆等状态下被使用。因此，具有如下的风险：由于驾驶员等活动头部，使得摄像装置与眼球之间的位置关系发生变化，从而发生眼球离开摄像装置的视场等情况，无法进行稳定的摄像。另外，具有环境光入射到摄像装置使得无法获取清晰的图像的风险。
在利用了半透半反镜的护目镜类型(Goggle type)的摄像装置中，能够将摄像装置与眼球之间的位置关系维持为规定的关系，但是结构复杂且体型大，并且与上述的摄像装置同样地具有环境光进入摄像装置使得无法获取清晰的图像的风险。
因此，在本发明中，目的在于提供一种眼球运动测量装置和眼球运动分析系统，所述眼球运动测量装置为驾驶员等能够容易地佩戴和卸下的紧凑的结构，并且能够减少环境光的作用来高精度地测量眼球运动，所述眼球运动分析系统用于基于由眼球运动测量装置获取到的眼球运动来进行驾驶员等的意识状态的分析等各种分析。
用于解决问题的方案
在发明1所记载的发明中，使用如下的技术手段：一种眼球运动测量装置，检测眼球的状态和运动，所述眼球运动测量装置具备：眼球摄影装置，其对眼球进行摄影；以及眼球运动检测单元，其基于由所述眼球摄影装置摄影得到的眼球像来检测眼球运动，其中，所述眼球摄影装置具备：眼球照明单元，其利用照明光对驾驶员等的眼球进行照明；眼球像摄像单元，其对被所述眼球照明单元照明的眼球的眼球像进行摄像；以及配置单元，其在驾驶员等佩戴所述眼球摄影装置时，将所述眼球照明单元配置在能够向眼球照射照明光的位置，将所述眼球像摄像单元配置在能够对眼球像进行摄像的位置。
根据发明1所记载的发明，眼球摄影装置能够利用眼球照明单元以照明光对眼球进行照明，能够利用眼球像摄像单元来对被眼球照明单元照明的眼球的眼球像进行摄像。而且，能够利用眼球运动检测单元基于由眼球摄影装置摄影得到的眼球像来检测眼球运动。另外，能够利用配置单元容易地将眼球照明单元和眼球像摄像单元配置在规定的位置。
由此，能够设为如下的眼球运动测量装置：为驾驶员等能够容易地佩戴和卸下的紧凑的结构，并且能够减少环境光的作用，以稳定的条件测量眼球运动。在此，“驾驶员等”表示车辆的驾驶员、装置的操作人员等。
在发明2所记载的发明中，使用如下的技术手段：在发明1所记载的眼球运动测量装置中，是一种测量佩戴眼镜的驾驶员等的眼球的状态和运动的眼球运动测量装置，所述配置单元相对于所佩戴的眼镜配置所述眼球照明单元和所述眼球像摄像单元。
根据发明2所记载的发明，能够在驾驶员等依然佩戴平常使用的眼镜的情况下测量眼球运动。
在发明3所记载的发明中，使用如下的技术手段：在发明1或发明2所记载的眼球运动测量装置中，具备反射单元，所述反射单元用于使可见光透过，反射从所述眼球照明单元照射的照明光而将该照明光导向眼球，并且反射所述眼球像摄像单元所摄像的眼球像，所述配置单元相对于所述反射单元，将所述眼球照明单元配置在能够向眼球照射照明光的位置，将所述眼球像摄像单元配置在能够对由所述反射单元反射的眼球像进行摄像的位置，所述眼球像摄像单元经由所述反射单元从眼球的后方或侧方对被所述眼球照明单元照明的眼球的眼球像进行摄像。
根据发明3所记载的发明，能够利用反射单元反射从眼球照明单元照射的不可见光而将该不可见光导向眼球，并且反射眼球像，利用眼球像摄像单元从眼球的后方或侧方对被眼球照明单元照明的眼球的眼球像进行摄像。由此，能够使眼球摄影装置为更紧凑的结构。另外，能够设为如下的眼球运动测量装置：能够进一步减少环境光的影响，高精度地测量眼球运动。
在此，“眼球的后方或侧方”表示以从驾驶员等的脸露出的眼球面为基准的位置关系。
在发明4所记载的发明中，使用如下的技术手段：在发明1至发明3中的任一项所记载的眼球运动测量装置中，外罩眼镜(日语：オーバーグラス)构成所述配置单元。
在发明5所记载的发明中，使用如下的技术手段：在发明1至发明3中的任一项所记载的发明的眼球运动测量装置中，夹片眼镜(日语：クリップオングラス)构成所述配置单元。
如发明4、5所记载的发明那样，能够适宜地使用外罩眼镜、夹片眼镜来构成配置单元。
在发明6所记载的发明中，使用如下的技术手段：在发明1至发明5中的任一项所记载的眼球运动测量装置中，所述眼球照明单元发出的照明光是作为不可见光的近红外光。
如发明6所记载的发明那样，能够采用在夜间也能够进行摄像的作为不可见光的近红外光来作为照明光。
在发明7所记载的发明中，采用如下的技术手段：在发明1至发明4中的任一项所记载的眼球运动测量装置中，所述眼球照明单元发出的照明光是作为不可见光的紫外光。
普通眼镜的镜片对紫外线的透过率低，不易受到环境光的影响，因此如发明7所记载的发明那样，能够采用作为不可见光的紫外光来作为照明光。
在发明8所记载的发明中，使用如下的技术手段：在发明6所记载的眼球运动测量装置中，所述反射单元为选择性地反射近红外光的反射膜。
反射单元如发明8所记载的发明那样能够设为选择性地反射近红外光的反射膜。
在发明9所记载的发明中，使用如下的技术手段：在发明8所记载的眼球运动测量装置中，眼镜、外罩眼镜以及夹片眼镜中的任一个眼镜的镜片由吸收近红外线的材料构成。
根据发明9所记载的发明，镜片吸收近红外线，因此能够减少环境光中包括的近红外光的影响，高精度地对眼球进行摄像。
在发明10所记载的发明中，使用如下的技术手段：在发明1至发明9中的任一项所记载的眼球运动测量装置中，由所述眼球照明单元照射照明光的照射方向与所述眼球像摄像单元的视场方向为大致相同的方向。
根据发明10所记载的发明，能够向眼球像摄像单元的视场方向照射足够照度的不可见光，因此照明光向眼球的照射效率增高，能够获取清晰的图像。
在发明11所记载的发明中，使用如下的技术手段：在发明1至发明10中的任一项所记载的眼球运动测量装置中，所述摄像单元具备滤光器，该滤光器使所述眼球照明单元发出的不可见光透过，并且吸收或反射可见光区域的环境光中的至少一部分。
根据发明11所记载的发明，能够使用于摄像的不可见光透过并且减少入射到摄像单元的可见光区域的环境光，因此能够减少环境光的影响，高精度地对眼球进行摄像。
在发明12所记载的发明中，使用如下的技术手段：眼球运动分析系统具备：根据发明1至发明11中的任一项所记载的眼球运动测量装置；以及人状态探测单元，其基于由所述眼球运动检测单元检测出的眼球运动来探测驾驶员等的意识状态等状态。
根据发明12所记载的发明，眼球运动分析系统具备眼球运动测量装置和人状态探测单元，因此能够利用人状态探测单元基于由眼球运动检测单元检测出的眼球运动来探测驾驶员等的意识状态等状态。
在发明13所记载的发明中，使用如下的技术手段：在发明12所记载的眼球运动分析系统中，所述眼球运动分析系统被车辆的驾驶员所使用，所述分析单元探测驾驶员的清醒度、恍惚状态等意识状态。
如发明13所记载的发明那样，根据眼球运动分析系统，能够分析在车辆的驾驶中成为导致人为错误的原因的驾驶员的清醒度、恍惚状态等意识状态。
在发明14所记载的发明中，使用如下的技术手段：在发明13所记载的眼球运动分析系统中，具备警告单元，在所述分析单元判断为驾驶员的意识状态为规定状态时，该警告单元通过声音、振动等向驾驶员发出警告。
根据发明14所记载的发明，在判断为驾驶员的意识状态为车辆的驾驶中的危险的意识状态等规定状态时，警告单元能够发出警告来提醒注意。
附图说明
图1是示意性地表示第一实施方式的眼球摄影装置和眼球运动分析系统的结构的说明图。
图2是示意性地表示眼球照明单元、眼球像摄像单元和反射单元相对于驾驶员等的眼球的配置的说明图。
图3是示意性地表示第二实施方式的眼球摄影装置和眼球运动分析系统的结构的说明图。
具体实施方式
(第一实施方式)
参照附图来说明本发明的眼球运动分析系统S。如图1所示，眼球运动分析系统S具备：眼球摄影装置1，其对车辆的驾驶员、装置的操作人员等(以下称作驾驶员等)的眼球进行摄影；眼球运动检测单元2，其基于由眼球摄影装置1摄影得到的眼球像来检测眼球运动；以及人状态探测单元3，其基于由眼球运动检测单元2检测出的眼球运动来探测驾驶员等的意识状态等状态。另外，具备警告单元4，所述警告单元4基于由人状态探测单元3检测出的驾驶员等的状态来发出警告。在此，眼球摄影装置1和眼球运动检测单元2构成眼球运动测量装置。
第一实施方式的眼球摄影装置1具备：外罩眼镜10，其以覆盖驾驶员等佩戴的眼镜G的方式被佩戴；眼球照明单元11，其以不可见光对眼球进行照明；眼球像摄像单元12，其对被眼球照明单元11照明的眼球的眼球像进行摄像；反射单元13，其用于反射从眼球照明单元11照射的不可见光而将该不可见光导向眼球，并且反射眼球像摄像单元12所摄像的眼球像；以及配置单元，其相对于眼镜G将眼球照明单元11、眼球像摄像单元12、反射单元13配置在规定位置。
在此，配置单元相对于反射单元13，将眼球照明单元11配置在能够通过不可见光对眼球进行照射的位置，将眼球像摄像单元12配置在能够对由反射单元13反射的眼球像进行摄像的位置。
在本实施方式中，采用近红外光LED 11a来作为眼球照明单元11，该近红外光LED11a发出作为不可见光的近红外光来作为照明光。近红外光在夜间也能够进行摄像，能够适合使用。另外，驾驶员等感觉不到眼球被不可见光照明，因此不会妨碍视觉、集中力等，因此能够适合使用。近红外光LED11a通过固定构件14在不遮挡驾驶员等的视场的位置处，以能够朝向设置于外罩眼镜10的镜片部10a的反射单元13照射近红外光的朝向安装于外罩眼镜10的镜腿10b。在此，固定构件14具备调整近红外光LED 11a和近红外光照相机12a的朝向的调整机构。
在本实施方式中，采用近红外光照相机12a作为眼球像摄像单元12。近红外光照相机12a与近红外光LED 11a一同通过固定构件14安装于外罩眼镜10的镜腿10b。在此，由近红外光LED 11a产生的近红外光的照射方向与近红外光照相机12a的视场方向为大致相同的方向。根据这样的配置，能够向眼球像摄像单元12的视场方向照射足够照度的不可见光，因此不可见光向眼球的照射效率增高，能够获取清晰的图像。
近红外光照相机12a具备人状态检测所需的摄像周期和精度。例如，构成为能够以使帧频为200帧/秒并且使分辨率为0.05°的方式进行摄像的照相机。
在本实施方式中，反射单元13设为使可见光透过并且选择性地使近红外光的反射率高的反射膜13a，所述反射单元13形成于外罩眼镜10的镜片部10a的靠眼球侧的一面。
作为反射膜13a，能够采用反射近红外光的公知的镀膜、例如日本特开2015-148643号公报中公开的镀膜等。
在图2中示出近红外光LED 11a、近红外光照相机12a及反射膜13a相对于驾驶员等的右眼R的配置。图2示意性地示出从驾驶员等的头上观察眼球摄影装置1时的配置。此外，为了简单，省略眼镜G的图示。
近红外光LED 11a配置在能够将近红外光如路径A那样经由反射膜13a照射到右眼R的眼球、至少虹彩和瞳孔的位置。
照射至右眼R的近红外光如路径B那样经由反射膜13a入射到近红外光照相机12a，被拍摄为眼球像。
在本实施方式中，具备配置近红外光LED 11a和近红外光照相机12a的固定构件14、安装固定构件14的镜腿10b以及配置反射膜13a的镜片10a的外罩眼镜10相当于配置单元。
外罩眼镜10与眼镜G的位置关系固定，因此在本实施方式中，具备配置近红外光LED11a和近红外光照相机12a的固定构件14、安装固定构件14的镜腿10b以及配置反射膜13a的镜片10a的外罩眼镜10相当于配置单元。
像这样，根据第一实施方式的眼球摄影装置1，近红外光LED 11a、近红外光照相机12a及反射膜13a配置于外罩眼镜10，因此即使驾驶员等的头部活动，近红外光LED 11a、近红外光照相机12a及反射膜13a也追随该动作，与眼球之间的位置关系不会发生变化。另外，不会遮挡驾驶员等的视场。
另外，由于以作为不可见光的近红外光对眼球进行照明，因此驾驶员等不会意识到眼球的摄像而注视前方，从而能够进行车辆的驾驶、装置的操作等。
外罩眼镜10能够采用镜片10a由吸收、阻断来自外界的近红外光的镜片、例如导入有铜离子的镜片构成的结构。据此，能够抑制环境光中包括的近红外光从外罩眼镜10的前方透过镜片10a入射到近红外光照相机12a，因此能够减少环境光在眼球的摄像中的影响，高精度地对眼球进行摄像。另外，由于能够减少环境光的影响，因此也能够降低向眼球照射的近红外光的照射强度。
眼球运动检测单元2和人状态探测单元3由计算机、智能电话等移动终端等具备运算处理功能的装置构成。眼球运动检测单元2和人状态探测单元3根据该单元中记录的程序，基于由眼球摄影装置1摄影得到的眼球像来检测眼球运动，并且基于由眼球运动检测单元2检测出的眼球运动来探测驾驶员等的意识状态等状态。
眼球运动检测单元2和人状态探测单元3能够构成为同一运算处理用计算机。另外，在将本系统例如搭载于汽车等车辆的情况下，也能够将发动机控制单元(ECU)共享为运算处理用计算机。
眼球运动检测单元2向眼球照明单元11和眼球像摄像单元12供给电力，进行眼球照明单元11和眼球像摄像单元12各自的控制。而且，以规定的间隔从眼球像摄像单元12获取眼球像，将该数据发送给人状态探测单元3。在本实施方式中，眼球运动检测单元2具备通信单元，利用无线通信从眼球运动检测单元2向人状态探测单元3发送数据。
在眼球运动检测单元2中，关于利用近红外光LED 11a进行的近红外光的照射，可以始终点亮近红外光LED 11a，也可以用与近红外光照相机12a的摄像周期同步的方式控制照射定时。
眼球的运动、瞳孔径的变化等眼球的状态与驾驶员等的意识状态具有密切的关系。人状态探测单元3基于由眼球运动检测单元2检测出的眼球运动来探测驾驶员等的意识状态等状态。针对眼球的摄像数据进行图像处理等处理来提取各种参数，能够基于该参数的值、变化来探测驾驶员等的清醒度、恍惚状态等意识状态。
人状态探测单元3构成为能够与各种分析所需的传感器类、例如陀螺仪连接。能够获取来自这些传感器类的输出信号并且用于分析。
作为驾驶员等的意识状态的探测，例如能够通过检测两眼的会聚角、发散来检测驾驶员等的恍惚状态。
另外，准备用于检测在车辆的驾驶员的头部产生的线性加速度和旋转角速度的、例如检测线性加速度的三轴加速度传感器和检测旋转角速度的陀螺仪作为附加装置，检测前庭眼动反射(VOR：Vestibulo-ocular reflex)，能够基于该前庭眼动反射来判定睡意的征兆等驾驶员的清醒度。在此，只通过一个眼球运动就能够计算出用于该分析的参数，因此准备单眼的近红外光LED11a、近红外光照相机12a和反射膜13a即可。
另外，准备能够检测驾驶员等的视线方向的、例如视线照相机作为附加装置，能够将视线行动的数据与瞳孔径的变化率相组合来检测驾驶员等的意识状态。
警告单元4基于由人状态探测单元3探测出的驾驶员等的状态来发出警告。例如具有如下结构：在人状态探测单元3中判断为驾驶员等产生了睡意时发出警告声、警告消息。在此，警告的发出方式能够采用与ECU连接来在车辆的显示器进行警告显示、使空调、车内照明发生变化、系紧安全带等各种方式。
(变更例)
不使用眼镜G的驾驶员等也能够单独地使用外罩眼镜10。
近红外光照相机12a也能够构成为具备滤光器，该滤光器吸收或反射可见光区域的环境光中的至少一部分，选择性地使近红外光LED 11a发出的近红外线透过。例如，能够采用添加有可见光吸收色素、近红外线透过色素的树脂板、由电介质多层膜构成的可见光反射涂层等。
据此，能够选择性地使用于眼球的摄像的近红外光入射到近红外光照相机12a，因此能够不易受到环境光的影响，高精度地对眼球进行摄像。
可以在眼镜G的镜片上粘贴选择性地反射近红外光的贴膜来代替反射膜13a，由此能够得到同样的结构。除了贴膜以外，还能够喷包括用于反射近红外光的成分的液体来对镜片Ga进行涂覆。
也能够使用紫外光来作为不可见光。此时，使用紫外光LED作为眼球照明单元11，使用紫外线照相机作为眼球像摄像单元12，使用紫外光反射膜作为反射单元13。一般来说，外罩眼镜10的镜片10a、眼镜G的镜片对紫外光的透过率低，因此能够减少环境光在眼球的摄像中的影响，因此是适合的。
作为眼球照明单元11的照明光，也能够使用可见光区域的照明光，而不使用不可见光。此时，为了减少环境光的影响，优选反射单元13构成为选择性地反射照明光的波长区域。
(第二实施方式)
图3示出第二实施方式的眼球摄影装置5。眼球摄影装置5使用夹片眼镜(Clip-onglass)50来代替外罩眼镜10，夹片眼镜50通过夹具50b将镜片50a装配于眼镜G的镜片Ga的前方。
眼球照明单元11和眼球像摄像单元12的结构与第一实施方式的眼球摄影装置1相同。眼球照明单元11和眼球像摄像单元12利用固定构件14安装于眼镜G的镜腿Gb。
在此，固定构件14构成为具有调整机构，该调整机构由夹具等公知的固定单元可拆卸安装地形成于眼镜G的镜腿Gb，并且调整近红外光照相机12a的朝向。
在本实施方式中，反射单元13以反射膜13a的形式形成于夹片眼镜50的镜片50a。在此，反射膜13a可以形成于镜片50a的眼球侧和与眼球相反一侧中的任一侧的面。
与外罩眼镜10的镜片10a同样地，夹片眼镜50的镜片50a能够采用由吸收、阻断来自外界的近红外光的镜片、例如导入有铜离子的镜片构成的结构。
此外，在本实施方式中，优选眼镜G的镜片Ga不提供吸收或反射近红外光的功能，以使眼球摄像用的近红外光透过。
(变更例)
通过在眼镜G的镜片Ga上粘贴选择性地反射近红外光的贴膜来代替形成于夹片眼镜50的镜片50a的反射膜13a，由此不将夹片眼镜50装配于眼镜G，就得到同样的结构。据此，驾驶员等能够依然使用平时戴惯的眼镜G。除了贴膜以外，也能够喷包含用于反射近红外光的成分的液体来对镜片Ga进行涂覆。另外，眼镜G的镜片Ga能够与外罩眼镜10的镜片10a同样地采用由吸收、阻断来自外界的近红外光的镜片、例如导入有铜离子的镜片构成的结构。
与第一实施方式同样地，也能够使用紫外光作为不可见光。另外，也能够使用可见光区域的照明光来作为眼球照明单元11的照明光，而不使用不可见光。
(其它实施方式)
也能够采用如下结构：利用配置单元将眼球像摄像单元12配置在眼球的前方或侧方，不经由反射单元13而直接对眼球进行摄像。此时，无需在眼球摄影装置1设置反射单元13。
眼球运动分析系统S也能够作为医疗用的诊断装置而用于诊断被断定眼球运动具有特征性动作的帕金森病、自闭症、精神分裂症等。另外，也能够用作运动视觉评价、训练用装置。
(实施方式的效果)
根据本发明的眼球运动测量装置，眼球摄影装置1能够利用眼球照明单元11以不可见光对眼球进行照明，利用反射单元13反射从眼球照明单元照射的不可见光而将该不可见光导向眼球，并且反射眼球像，通过眼球像摄像单元12从眼球的后方或侧方对被眼球照明单元11照明的眼球的眼球像进行摄像。然后，能够由眼球运动检测单元2基于由眼球摄影装置摄影得到的眼球像来检测眼球运动。另外，能够通过配置单元容易地将眼球照明单元11、眼球像摄像单元12和反射单元13配置在规定的位置。
由此，能够设为如下的眼球运动测量装置：为驾驶员等能够容易佩戴和卸下的紧凑的结构，并且能够减少环境光的作用来高精度地测量眼球运动。另外，驾驶员等能够依然佩戴平时使用的眼镜来测量眼球运动。
另外，根据眼球运动分析系统S，能够由人状态探测单元3基于由眼球运动检测单元2检测出的眼球运动来探测驾驶员等的意识状态等状态。另外，能够分析车辆驾驶中作为导致人为错误的原因的驾驶员的清醒度、恍惚状态等意识状态。在判断为驾驶员的意识状态为车辆驾驶中的危险的意识状态等规定状态时，由警告单元4发出警告来提醒注意。
附图标记说明
1：眼球摄影装置；2：眼球运动检测单元；3：人状态探测单元；4：警告单元；5：眼球摄影装置；10：外罩眼镜；10a：镜片部；10b：镜腿；11：眼球照明单元；11a：近红外光LED；12：眼球像摄像单元；12a：近红外光照相机；13：反射单元；13a：反射膜；14：固定构件；50：夹片眼镜；50a：镜片；50b：夹具；G：眼镜；Ga：镜片；Gb：镜腿；S：眼球运动分析系统。

Claims (12)

1.一种眼球运动测量装置，检测眼球的状态和运动，所述眼球运动测量装置具备：眼球摄影装置，其对眼球进行摄影；以及眼球运动检测单元，其基于由所述眼球摄影装置摄影得到的眼球像来检测眼球运动，所述眼球运动测量装置的特征在于，
所述眼球摄影装置具备：
眼球照明单元，其利用作为不可见光的照明光对驾驶员的眼球进行照明；
眼球像摄像单元，其对被所述眼球照明单元照明的眼球的眼球像进行摄像；以及
配置单元，其在驾驶员佩戴配置了所述眼球摄影装置的眼镜时，相对于所佩戴的眼镜，将所述眼球照明单元配置在能够向眼球照射作为不可见光的照明光的位置，并将所述眼球像摄像单元配置在能够对眼球像进行摄像的位置，
其中，所述眼球像摄像单元具备滤光器，该滤光器吸收或反射环境光中的至少一部分，使所述眼球照明单元发出的作为不可见光的照明光选择性地透过，所述环境光为相对于所佩戴的眼镜透过了位于眼球的正面的透镜的可见光。
2.根据权利要求1所述的眼球运动测量装置，其特征在于，
还具备反射单元，所述反射单元用于使可见光透过，反射从所述眼球照明单元照射的作为不可见光的照明光而将该照明光导向眼球，并且反射所述眼球像摄像单元所摄像的眼球像，
所述配置单元相对于所述反射单元，将所述眼球照明单元配置在能够向眼球照射照明光的位置，将所述眼球像摄像单元配置在能够对由所述反射单元反射的眼球像进行摄像的位置，
所述眼球像摄像单元经由所述反射单元从眼球的后方或侧方对被所述眼球照明单元照明的眼球的眼球像进行摄像。
3.根据权利要求1或2所述的眼球运动测量装置，其特征在于，
外罩眼镜构成所述配置单元。
4.根据权利要求1或2所述的眼球运动测量装置，其特征在于，
夹片眼镜构成所述配置单元。
5.根据权利要求1或2所述的眼球运动测量装置，其特征在于，
所述眼球照明单元发出的照明光是作为不可见光的近红外光。
6.根据权利要求1或2所述的眼球运动测量装置，其特征在于，
所述眼球照明单元发出的照明光是作为不可见光的紫外光。
7.根据权利要求2所述的眼球运动测量装置，其特征在于，
所述反射单元为选择性地反射近红外光的反射膜。
8.根据权利要求7所述的眼球运动测量装置，其特征在于，
眼镜、外罩眼镜以及夹片眼镜中的任一个眼镜的镜片由吸收近红外线的材料构成。
9.根据权利要求1或2所述的眼球运动测量装置，其特征在于，
由所述眼球照明单元照射作为不可见光的照明光的照射方向与所述眼球像摄像单元的视场方向为大致相同的方向。
10.一种眼球运动分析系统，具备：
根据权利要求1至9中的任一项所述的眼球运动测量装置；以及
人状态探测单元，其基于由所述眼球运动检测单元检测出的眼球运动来探测驾驶员的意识状态。
11.根据权利要求10所述的眼球运动分析系统，其特征在于，
所述眼球运动分析系统被车辆的驾驶员所使用，
所述人状态探测单元探测驾驶员的清醒度或恍惚状态。
12.根据权利要求11所述的眼球运动分析系统，其特征在于，
还具备警告单元，在所述人状态探测单元判断为驾驶员的意识状态为规定状态时，该警告单元通过声音或振动向驾驶员发出警告。
CN201780063136.9A 2016-10-11 2017-10-10 眼球运动测量装置和眼球运动分析系统 Active CN109804422B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016-200411 2016-10-11
JP2016200411 2016-10-11
PCT/JP2017/036672 WO2018070379A1 (ja) 2016-10-11 2017-10-10 眼球運動測定装置及び眼球運動解析システム

Publications (2)

Publication Number Publication Date
CN109804422A CN109804422A (zh) 2019-05-24
CN109804422B true CN109804422B (zh) 2021-11-02

Family

ID=61906354

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780063136.9A Active CN109804422B (zh) 2016-10-11 2017-10-10 眼球运动测量装置和眼球运动分析系统

Country Status (5)

Country Link
US (1) US10874357B2 (zh)
JP (1) JP7018634B2 (zh)
CN (1) CN109804422B (zh)
DE (1) DE112017005146B4 (zh)
WO (1) WO2018070379A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3627194A1 (en) * 2018-09-20 2020-03-25 Essilor International An optical device with reduced reflection in deep red, near infrared and visible ranges
US10633007B1 (en) * 2019-01-31 2020-04-28 StradVision, Inc. Autonomous driving assistance glasses that assist in autonomous driving by recognizing humans' status and driving environment through image analysis based on deep neural network
DE102019210862A1 (de) * 2019-07-23 2021-01-28 Robert Bosch Gmbh Beleuchtungseinheit für eine Beobachtungsvorrichtung
WO2022011344A1 (en) * 2020-07-10 2022-01-13 Arizona Board Of Regents On Behalf Of Arizona State University System including a device for personalized hand gesture monitoring

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7553021B2 (en) * 2003-02-13 2009-06-30 Fergason Patent Properties, Llc Optical system for monitoring eye movement
CN101873823A (zh) * 2007-11-29 2010-10-27 浜松光子学株式会社 眼球运动测量装置
CN102670163A (zh) * 2004-04-01 2012-09-19 威廉·C·托奇 控制计算装置的系统及方法
CN105433900A (zh) * 2014-09-23 2016-03-30 Gn尔听美公司 用于测量眼球运动的可头戴设备
CN105929963A (zh) * 2016-05-11 2016-09-07 北京蚁视科技有限公司 一种用于追踪眼球位置的方法及检测装置
JP6111492B2 (ja) * 2012-10-16 2017-04-12 国立大学法人 東京大学 瞳孔径測定支援装置及び瞳孔径測定支援システム
CN107515466A (zh) * 2017-08-14 2017-12-26 华为技术有限公司 一种眼球追踪系统和眼球追踪方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3588216A (en) * 1966-09-02 1971-06-28 Polaroid Corp Plastic optical elements
GB1540992A (en) * 1975-04-22 1979-02-21 Smiths Industries Ltd Display or other systems and equipment for use in such systems
WO2011144932A1 (en) * 2010-05-20 2011-11-24 Bae Systems Plc Eye monitor for monitoring the size of a pupil
US9658453B1 (en) * 2013-04-29 2017-05-23 Google Inc. Head-mounted display including diffractive combiner to integrate a display and a sensor
JP6451057B2 (ja) 2014-02-04 2019-01-16 東海光学株式会社 可視域反射防止近赤外域透過抑制光学製品並びに眼鏡レンズ及び眼鏡
JP2016051317A (ja) 2014-08-29 2016-04-11 アルプス電気株式会社 視線検出装置
US9568603B2 (en) * 2014-11-14 2017-02-14 Microsoft Technology Licensing, Llc Eyewear-mountable eye tracking device
US9854968B2 (en) * 2016-05-20 2018-01-02 International Business Machines Corporation Behind-eye monitoring using natural reflection of lenses

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7553021B2 (en) * 2003-02-13 2009-06-30 Fergason Patent Properties, Llc Optical system for monitoring eye movement
CN102670163A (zh) * 2004-04-01 2012-09-19 威廉·C·托奇 控制计算装置的系统及方法
CN101873823A (zh) * 2007-11-29 2010-10-27 浜松光子学株式会社 眼球运动测量装置
JP6111492B2 (ja) * 2012-10-16 2017-04-12 国立大学法人 東京大学 瞳孔径測定支援装置及び瞳孔径測定支援システム
CN105433900A (zh) * 2014-09-23 2016-03-30 Gn尔听美公司 用于测量眼球运动的可头戴设备
CN105929963A (zh) * 2016-05-11 2016-09-07 北京蚁视科技有限公司 一种用于追踪眼球位置的方法及检测装置
CN107515466A (zh) * 2017-08-14 2017-12-26 华为技术有限公司 一种眼球追踪系统和眼球追踪方法

Also Published As

Publication number Publication date
JPWO2018070379A1 (ja) 2019-09-26
CN109804422A (zh) 2019-05-24
JP7018634B2 (ja) 2022-02-14
DE112017005146T5 (de) 2019-07-25
US20190231279A1 (en) 2019-08-01
WO2018070379A1 (ja) 2018-04-19
US10874357B2 (en) 2020-12-29
DE112017005146B4 (de) 2023-06-15

Similar Documents

Publication Publication Date Title
US10874357B2 (en) Eye movement measuring device and eye movement analysis system
US10395510B2 (en) Reminding method and reminding device
US9033502B2 (en) Optical measuring device and method for capturing at least one parameter of at least one eye wherein an illumination characteristic is adjustable
EP2499962B1 (en) Optical measuring device and method for capturing at least one parameter of at least one eye wherein an illumination characteristic is adjustable
US8014571B2 (en) Multimodal ocular biometric system
FI125445B (fi) Katseenohjausjärjestely
KR101619651B1 (ko) 운전자 감시장치 및 그의 조명제어방법
RU2006138622A (ru) Биосенсоры, коммуникаторы и контроллеры для мониторинга движения глаз и способы их применения
JPH0782539B2 (ja) 瞳孔画像撮影装置
JP2016510517A (ja) ウエアラブル視線計測デバイス及び使用方法
US20180336720A1 (en) Systems and Methods For Generating and Using Three-Dimensional Images
JP2018156172A (ja) 車両の表示システム及び車両の表示システムの制御方法
CN109964230B (zh) 用于眼睛度量采集的方法和设备
JP2006248365A (ja) 移動体の後方監視ミラー、運転者撮影装置、運転者監視装置および安全運転支援装置
CN113316805A (zh) 使用红外线和可见光监视人的方法和系统
JP2003230539A (ja) 視線検出装置
JP2009240551A (ja) 視線検出装置
US20180120933A1 (en) Image-based system, having interchangeable vision elements, to observe and document eye responses
US9089286B2 (en) Optical system for following ocular movements and associated support device
WO2018170538A1 (en) System and method of capturing true gaze position data
CN213046831U (zh) 眼球运动测试装置
CN114929501A (zh) 车辆用显示装置
CN219183716U (zh) 虹膜吸毒检测设备
JP5144412B2 (ja) 車両用物体判定装置
WO2020141231A1 (en) Connected device with eye tracking capabilities

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20210918

Address after: Aichi

Applicant after: Tokai Optical Co.,Ltd.

Applicant after: School Corporation Chubu University

Applicant after: NAC IMAGE TECH Inc.

Address before: Aichi

Applicant before: Tokai Optical Co.,Ltd.

Applicant before: School Corporation Chubu University

Applicant before: NAC IMAGE TECH Inc.

Applicant before: Kabushiki Kaisha TOKAI RIKA DENKI SEISAKUSHO

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant