CN104780834B - 生物体信息计测装置及使用该装置的输入装置 - Google Patents

生物体信息计测装置及使用该装置的输入装置 Download PDF

Info

Publication number
CN104780834B
CN104780834B CN201380058939.7A CN201380058939A CN104780834B CN 104780834 B CN104780834 B CN 104780834B CN 201380058939 A CN201380058939 A CN 201380058939A CN 104780834 B CN104780834 B CN 104780834B
Authority
CN
China
Prior art keywords
mentioned
pupil
biometric information
information measuring
measuring device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201380058939.7A
Other languages
English (en)
Other versions
CN104780834A (zh
Inventor
山下龙麿
镰田智也
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alps Alpine Co Ltd
Original Assignee
Alps Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alps Electric Co Ltd filed Critical Alps Electric Co Ltd
Publication of CN104780834A publication Critical patent/CN104780834A/zh
Application granted granted Critical
Publication of CN104780834B publication Critical patent/CN104780834B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024—Detecting, measuring or recording pulse rate or heart rate
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/0008—Apparatus for testing the eyes; Instruments for examining the eyes provided with illuminating means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/113—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/14—Arrangements specially adapted for eye photography
    • A61B3/145—Arrangements specially adapted for eye photography by video means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0071—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by measuring fluorescence emission
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0075—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024—Detecting, measuring or recording pulse rate or heart rate
    • A61B5/0255—Recording instruments specially adapted therefor
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
    • A61B5/1079—Measuring physical dimensions, e.g. size of the entire body or parts thereof using optical or photographic means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/117—Identification of persons
    • A61B5/1171—Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • A61B5/1176—Recognition of faces
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/163—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state by tracking eye movement, gaze, or pupil change
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7203—Signal processing specially adapted for physiological signals or for diagnostic purposes for noise prevention, reduction or removal
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271—Specific aspects of physiological measurement analysis
    • A61B5/7275—Determining trends in physiological measurement data; Predicting development of a medical condition based on physiological measurements, e.g. determining a risk factor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2503/00—Evaluating a particular growth phase or type of persons or animals
    • A61B2503/20—Workers
    • A61B2503/22—Motor vehicles operators, e.g. drivers, pilots, captains
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02—Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0233—Special features of optical sensors or probes classified in A61B5/00
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2576/00—Medical imaging apparatus involving image processing or analysis
    • A61B2576/02—Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6893—Cars

Abstract

生物体信息计测装置(10)的特征在于具有：能够检测对象者的瞳孔的近红外线摄像机(2a、2b)、能够从由近红外线摄像机(2a、2b)得到的图像数据检测瞳孔区域的检测部(11)、取得瞳孔区域的周围的至少一部分皮肤区域的亮度的亮度取得部(12)、及根据亮度来计测对象者的生物体信息的生物体计测部(13)。

Description

生物体信息计测装置及使用该装置的输入装置
技术领域
本发明涉及能够计测生物体信息的生物体信息计测装置。
背景技术
下述专利文献1中，公开了有关于能够对眉间、额头等的特定区域的平均亮度进行检测，并能够基于平均亮度获得被验者的脉搏等生物体信息的生物体活动计测装置的发明。
在先技术文献
专利文献
专利文献1：日本特开2011－130996号公报
发明内容
发明要解决的课题
在专利文献1记载的发明中，为了确定眉间，取得脸部图像上整体的二维坐标或者三维坐标，并用坐标上的三个特征点来确定眉间。
然而，在专利文献1的方法中，根据脸部图像整体，进行眉间计算，因此认为对控制部的负担变得非常大。另外，根据三个特征点检测眉间，但认为根据对象者不同也有特征点不易表现的人，在这种情况下，眉间检测变得困难，进而导致生物体信息的计测误差、计测错误。
因此，本发明解决上述以往的课题，尤其是提供以与以往相比能够高精度且稳定地计测生物体信息的生物体信息计测装置及使用该装置的输入装置为目的。
用于解决课题的手段
本发明的输入装置，其特征在于，具有：摄像部，能够检测对象者的瞳孔；检测部，能够根据由上述摄像部获得的图像数据来检测瞳孔区域；亮度取得部，取得上述瞳孔区域的周围的至少一部分皮肤区域的亮度；以及生物体计测部，根据上述皮肤区域的亮度，计测上述对象者的生物体信息。
在本发明中，以瞳孔区域为基准来确定供亮度检测的皮肤区域，因此能够稳定地得到皮肤区域，伴随于此，能够高精度并且稳定地得到皮肤区域的亮度。因此，也能够高精度并且稳定地得到基于皮肤区域的亮度而得到的生物体信息。瞳孔与对象者的脸部的其他的部位不同、一定能够精确地检测，所以在反而不能检测瞳孔的情况下，能够断定对象者扭向一边或正在打瞌睡。因此还能够在不能检测瞳孔的情况下发出警告等来纠正对象者的姿势。
另外，通过本发明，如专利文献1所记载那样从脸部图像整体构筑三维数据等不是必要的。因此与以往相比能够减轻对装置的控制负担(计算负担)，能够顺畅地一直进行到生物体信息的计测。
在本发明中，优选的是，上述摄像部构成为，具有摄像元件、及能够朝向上述对象者照射光的发光元件。由此能够恰当地检测对象者的瞳孔。
另外，在本发明中，优选的是，上述摄像元件设置有多个。由此，能够基于三角法，求出上述摄像部与对象者的距离。
另外，在本发明中，优选的是，上述发光元件具有：第1发光元件，照射具有第1波长的红外线；及第2发光元件，照射具有比上述第1波长长的第2波长的红外线，在照射了具有上述第1波长的红外线的条件下拍摄明瞳孔图像，照射具有上述第2波长的红外线、或者不照射上述红外线而拍摄暗瞳孔图像，在上述检测部中，通过上述明瞳孔图像与上述暗瞳孔图像的差分图像来检测上述瞳孔区域。通过上述，能够简单并且稳定地检测瞳孔区域。另外例如也能够将暗瞳孔图像作为用于确定皮肤区域的图像来使用。另外通过使用了红外线，即使在夜间也能够进行生物体信息检测。
另外，在本发明中，优选的是，在上述检测部中，能够检测角膜反射像。在照射了光的状态下得到的脸部图像中也照出了角膜反射像，所以能够恰当并且简单地得到角膜反射像。并且，能够使用角膜反射像来检测对象者的视线等。
另外，优选的是，在上述亮度取得部中，取得用多个上述摄像元件或者不同的波长拍摄到的上述皮肤区域的亮度的平均值，并输入到上述生物体计测部。通过这样取得皮肤区域的亮度的平均值并供生物体信息的计测，能够高精度地执行生物体信息的计测。
另外，优选的是，在上述检测部中，执行瞳孔追踪。通过进行瞳孔追踪，能够高精度地进行对象者的视线等的测定。
另外，在上述检测部中，能够检测上述对象者的视线。
另外，在上述检测部中，能够检测上述对象者的脸部的朝向。
另外，优选的是，在上述亮度取得部中，取得位于上述瞳孔区域的下侧的上述皮肤区域的亮度。位于瞳孔区域的下侧的皮肤区域与瞳孔区域的上侧不同，不易发生由眨眼引起的皮肤区域的变化，能够稳定地取得亮度。
另外，在本发明中，优选的是，在取得了上述对象者的双眼的上述瞳孔区域时，上述亮度取得部取得上述皮肤区域的亮度。在仅得到单眼的瞳孔区域的情况下，能够判断为对象者未朝向前方(摄像部侧)，在这种情况下，能够唤起正在往别处看的注意等。在得到了双眼的瞳孔区域的情况下，是对象者朝向前方的状态，在该情况下，取得皮肤区域的亮度并计测生物体信息，从而能够纠正对象者的姿势，并且能够稳定地进行生物体信息的计测。
另外，在本发明中，形成为上述生物体信息计测装置配置在车辆内的结构。通过这样将生物体信息计测装置配置在车辆内，例如能够在驾驶中得到驾驶者的生物体信息，并能够基于该生物体信息进行驾驶支援等。
另外，本发明的输入装置，其特征在于，具有上述记载的生物体信息计测装置、及输入操作部，基于来自上述生物体信息计测装置的信息，执行规定的输入操作或者规定的信息发送。
在本发明中，优选的是，上述输入操作是预测上述对象者的行动而执行的。
另外，优选的是，上述输入操作供驾驶支援。
在本发明中，基于来自生物体信息计测装置的信息(生物体信息、瞳孔信息、视线信息等)，预测对象者的行动，基于该预测，能够发挥规定的输入操作。由此，即使手等的操作体未直接接触操作部，也能够迅速地执行输入操作。例如，若本发明的生物体信息计测装置是配置在车辆内的结构，则能够根据瞳孔的大小来判断周围的明亮度，能够加快自动照明(auto light)的响应。另外，能够判断是否正在打瞌睡，在判断为正在打瞌睡的情况下，能够用声音督促注意等，能够提高安全性。
发明的效果
通过本发明，以瞳孔区域为基准来确定供亮度检测的皮肤区域，因此能够稳定地得到皮肤区域，能够高精度并且稳定地得到皮肤区域的亮度。因此，也能够高精度并且稳定地得到基于皮肤区域的亮度而得到的生物体信息。瞳孔与对象者的脸部的其他的部位不同，一定能够精确地检测，所以在反而不能检测瞳孔的情况下，能够断定对象者扭向一边或正在打瞌睡。因此还能够在不能检测瞳孔的情况下发出警告等来纠正对象者的姿势。
另外，通过本发明，如专利文献1所记载那样的根据脸部图像整体构筑三维数据等不是必要的。因此与以往相比能够减轻对装置的控制负担(计算负担)，能够顺畅地一直进行到生物体信息的计测。
附图说明
图1是表示正在通过近红外线摄像机(摄像部)对驾驶者(对象者)进行拍摄的状态的示意图。
图2(a)是本实施方式的近红外线摄像机(摄像部)的主视图，图2(b)是表示近红外线摄像机的内部构造的侧视图。
图3(a)是明瞳孔图像，图3(b)是暗瞳孔图像，图3(c)是表示明瞳孔图像与暗瞳孔图像的差分图像的示意图。
图4(a)是将瞳孔区域的周围区域确定为用于测定亮度的皮肤区域的示意图，图4(b)是仅将图4(a)所示的皮肤区域中的位于瞳孔区域的下侧的区域确定为用于测定亮度的皮肤区域的示意图。
图5是本实施方式的生物体信息计测装置及使用该生物体信息计测装置的输入装置的框图。
图6(a)是从明瞳孔图像及暗瞳孔图像的取得一直到使规定的输入操作启动为止的流程图，图6(b)是从瞳孔追踪一直到视线矢量的计算为止的流程图，图6(c)是从鼻孔检测一直到脸朝向检测为止的流程图。
图7是表示瞳孔图像、角膜反射像及视线运算的关系的关系图。
图8是表示角膜反射像的示意图。
图9的(a)～(d－3)是用于说明视线运算的算法的说明图，图9(e)是表示瞳孔中心与角膜反射之间的距离r同摄像机瞳孔矢量与视线矢量之间的角度θ的关系的曲线。
图10是用于说明用于测定脸的朝向的方法的示意图。
图11是表示2台近红外线摄像机与视点的关系的示意图。
图12是使用了另一实施方式(第2发明)的生物体信息计测装置的输入装置的流程图。
图13是将角膜反射像的周围区域确定为用于测定亮度的皮肤区域的示意图。
具体实施方式
图1是表示正在通过近红外线摄像机(摄像部)对驾驶者(对象者)进行拍摄的状态的示意图。在本实施方式中，如图1所示，使用近红外线摄像机2，对坐在车辆的驾驶席的驾驶者1进行拍摄，并使用该图像数据检测驾驶者1的瞳孔。
近红外线摄像机2配置在驾驶席正面，例如配置于仪表板。或者，也可以设置在转向装置支承部3的部分。
如图2(a)所示，近红外线摄像机2a、2b设置有2台。如图2(a)、(b)所示，近红外线摄像机2a、2b分别构成为，具有透镜4、多个第1发光元件5、多个第2发光元件6、位于透镜4的后方的摄像元件(传感器基板)7、以及支承透镜4、各发光元件5、6及摄像元件7的机壳8。
这里，第1发光元件5是870nmLED，第2发光元件6是940nmLED。另外，关于波长，是一个例子，也可以是这以外的波长。
各发光元件5、6设置于基板9，在基板9上，配置有发光元件5、6的LED基板与摄像元件7平行地配置。另外，使2台近红外线摄像机2a、2b同步而使用。
如图5的框图所示，本实施方式的生物体信息计测装置10构成为，具有近红外线摄像机2a、2b、检测部11、亮度取得部12、生物体计测部13及监视器14。另外将检测部11、亮度取得部12、生物体计测部13合在一起构成控制部15。
如图5所示，检测部11中设置有瞳孔检测部16、皮肤区域检测部17及视线检测部23。
在瞳孔检测部16中，制作明瞳孔图像与暗瞳孔图像的差分图像。关于明瞳孔图像及暗瞳孔图像，在下面进行说明。
图3(a)是驾驶者(对象者)1的明瞳孔图像18，图3(b)是驾驶者(对象者)1的暗瞳孔图像19。
首先在通过第1发光元件5将波长870nm的近红外线照射到驾驶者1的脸部的状态下，通过摄像元件7对脸部图像进行拍摄。在这样拍摄到的脸部图像中，得到如图3(a)所示那样与其他的部位相比瞳孔20被拍摄得尤其明亮的明瞳孔图像18。另一方面，在通过第2发光元件6将波长940nm的近红外线照射到驾驶者1的脸部的状态下，通过摄像元件7对脸部图像进行拍摄。在这样拍摄到的脸部图像中，得到如图3(b)所示那样与图3(a)的明瞳孔图像18相比瞳孔20被拍摄得暗的暗瞳孔图像19。关于发光元件的波长，被设为得到明瞳孔及暗瞳孔的波长。
明瞳孔图像18的拍摄与暗瞳孔图像19的拍摄分时进行。另外，在本实施方式中，近红外线摄像机2a、2b有2台，所以通过近红外线摄像机2a及近红外线摄像机2b分别取得明瞳孔图像18及暗瞳孔图像19。
在图5所示的瞳孔检测部16中，制作明瞳孔图像18与暗瞳孔图像19的差分图像。差分图像21示于图3(c)中。差分图像21例如能够通过从明瞳孔图像18的各像素的亮度值减去暗瞳孔图像19的各像素的亮度值而得到。
如图3(c)所示，在差分图像21中驾驶者(对象者)1的瞳孔20被残留为比周围明亮的图像。将图3(c)所示的明亮的部分确定为瞳孔区域22。这里，能够如图3(c)所示那样取得两个瞳孔区域22。关于上述指出的明瞳孔图像及暗瞳孔图像，使用与日本特开2008－125619号公报类似的方法进行了说明。通过上述的方法得到瞳孔区域的结果是，假定在仅可得到一个瞳孔区域22的情况下，是仅能够取得单眼的瞳孔区域的状态，能够判断为驾驶者1未朝向前方(摄像部侧)，在这种情况下，能够唤起正在往别处看的注意等。在能够取得双眼的瞳孔区域22后，能够进行控制，以进行生物体信息的计测。
上述，将得到差分图像21所使用的暗瞳孔图像19设为照射波长940nm的近红外线而拍摄到的脸部图像，但例如也能够将不照射红外线等的光而拍摄到的脸部图像设为暗瞳孔图像19。
接着，在皮肤区域检测部17中，基于瞳孔区域22，取得用于供生物体信息的测定的皮肤区域。
图4(a)是将例如暗瞳孔图像19所示的眼睛的附近放大后的示意图。通过图3(c)来确定瞳孔区域22，所以在该瞳孔区域22的周围确定用于取得亮度的皮肤区域24。皮肤区域24确定在从瞳孔区域22向外侧离开规定距离后的位置。
另外，也可以从瞳孔区域22确定瞳(黑眼珠部分)的区域25，并从瞳的区域25确定用于取得亮度的皮肤区域24。
如果能够确定瞳孔区域22，则能够根据瞳孔区域22的周围的图像的亮度等来推测眼睛的区域，因此，能够将对从瞳孔区域22离开的皮肤区域24进行检测时检测部11的负担抑制得较小。
另外，在检测部11中，适当执行二值化处理、标记处理、窗处理等。
在图5所示的亮度取得部12中，取得皮肤区域24的亮度。此时，例如，连续地取得从近红外线摄像机2a与近红外线摄像机2b各自拍摄到的图像、或者从不同的波长拍摄到的图像得到的亮度的平均值。另外，此时，也可以不取得皮肤区域24的全部像素的亮度。在这样从皮肤区域24的一部分取得亮度的情况下，优选的是，如图4(b)所示，取得位于与瞳孔区域22相比更下侧的皮肤区域26的亮度。瞳孔区域22的上侧是眼睑侧，由于眨眼不易得到稳定的亮度，因此通过取得位于瞳孔区域22的下侧的泪囊侧的皮肤区域26的亮度，能够稳定地取得亮度。
在图5所示的生物体计测部13中，根据从亮度取得部12得到的皮肤区域的亮度，计测驾驶者(对象者)1的生物体信息。该生物体信息的计测，准备一定时间中的皮肤区域的亮度变化值。接着，去除由身体的运动等引起的低频杂音，通过独立成分分析法取出独立信号。有如下方法：计算该独立信号的功率谱，取得具有心搏、呼吸数附近的频率峰值的信号，从而将其作为输出信号的方法。然而，这里，关于生物体信息及其计测方法，并不特别限定。
如图5所示，输入装置30构成为，具有生物体信息计测装置10及输入操作部31。这里，输入操作部31也可以兼作监视器14。因此，作为生物体信息计测装置10的结构要素，即使没有监视器14也是可以的。
从生物体计测部13对输入操作部31发送生物体信息。或者，发送来自图5所示的检测部11的信息(瞳孔信息、视线信息等)。在输入操作部31中，基于从生物体信息计测装置10发送的这些信息，执行规定的输入操作、规定的信息发送。关于进行怎样的输入操作、信息发送，在后面叙述。
在输入操作部31中，能够预测驾驶者(对象者)1的行动并执行输入操作。例如着眼于驾驶者1的视线，基于视线的方向进行行动预测，并执行基于该行动预测的输入操作。
本实施方式的图5所示的输入装置30搭载于车辆内，基于来自图5所示的生物体信息计测装置10的信息输入操作供驾驶支援是优选的。例如如根据驾驶者1的瞳孔的大小进行判断并加快自动照明的响应那样。
在本实施方式中，为了确定皮肤区域24、26，以瞳孔区域22为基准，因此能够稳定地得到皮肤区域24、26，能够高精度并且稳定地得到皮肤区域24、26的亮度。因此，也能够高精度并且稳定地得到基于亮度得到的生物体信息。瞳孔与对象者的脸部的其他的部位不同，一定能够精确地检测，所以在反而不能检测瞳孔的情况下，能够断定对象者扭向一边或正在打瞌睡。因此在不能检测到瞳孔的情况下，也能够对对象者督促注意，以让对象者睁开眼睛朝向前方(近红外线摄像机2侧)。
另外，通过本实施方式，如专利文献1所记载那样的根据脸部图像整体构筑三维数据等不是必要的。因此与以往相比能够减轻对装置的控制负担(计算负担)，能够顺畅地一直进行到生物体信息的计测。
接着，使用图6所示的流程图，说明从图像的取得一直到输入操作的启动为止的步骤。
在图6(a)的步骤ST1，取得明瞳孔图像18及暗瞳孔图像19(参照图3(a)、(b))。还如图7所示，能够通过在用第1发光元件5照射了波长870nm的近红外线的条件下进行拍摄，来得到明瞳孔图像18。另外能够通过在用第2发光元件6照射波长940nm的近红外线的条件下进行拍摄，来得到暗瞳孔图像19。另外，暗瞳孔图像19也可以是不从发光元件照射光而拍摄到的图像。
接着，在图6(a)的步骤ST2中，通过图3(a)的明瞳孔图像18与图3(b)的暗瞳孔图像19的差分图像21，确定瞳孔区域22。
接着，如图6(a)所示，在步骤ST3，取得角膜反射像。如图7所示，能够通过例如在照射了波长940nm的近红外线的条件下拍摄到的暗瞳孔图像19取得角膜反射像。
图8中示出了角膜反射像35。图8是将暗瞳孔图像的瞳孔部分放大表示的图。可知，如暗瞳孔图像所示那样，照出比照得暗的瞳孔36明亮的角膜反射像35。角膜反射像35是由驾驶者1的角膜反射的光源的反射像。
接着，在图6(a)所示的步骤ST4进行视线运算。视线运算能够如图7所示那样使用瞳孔区域和角膜反射像来进行。关于视线运算的算法，使用图9来说明。这里，图9所示的视线运算的算法使用与WO2012－20760号类似的方法进行说明。
如图9(a)所示，设在驾驶者(对象者)1的前方有观察对象平面40。该观察对象平面40是例如显示器。设该观察对象平面40是与XY平面平行的面。符号P是驾驶者(对象者)1的瞳孔中心，PT是视线矢量。Q是注视点。
近红外线摄像机2被设置为平行于与X′Y′平面平行的面即虚拟视点平面41平行。即虚拟视点平面41的正交方向是摄像机的光轴方向。T是虚拟视点平面41上的注视点。PT′是摄像机瞳孔矢量。
如图9(a)所示，视线矢量PT与摄像机瞳孔矢量PT′之间的角度是θ。另外，从摄像机中心到虚拟视点平面41上的注视点T的方向与X′轴之间的角度是φ。
图9(b)是瞳孔周边图像的示意图。G是角膜反射像。将角膜反射像G与瞳孔中心P直线状地连接的线与X轴之间的角度是φ′。
图9(c－1)～(c－3)所示的E是示意地表示驾驶者(对象者)1的眼球的图。图9(c－1)～(c－3)中眼球的朝向不同。在图9(c－1)中，视线矢量PT与摄像机瞳孔矢量PT′的方向一致。即图9(a)所示的θ为零。此时在图9(d－1)的图像中，瞳孔中心P与角膜反射像G一致。即，瞳孔中心P与角膜反射像G的间隔|r0|＝0。
接着，在图9(c－2)中，视线矢量PT与摄像机瞳孔矢量PT′不一致，在视线矢量PT与摄像机瞳孔矢量PT′之间产生角度θ。此时在图9(d－2)的图像中，在瞳孔中心P与角膜反射像G之间，产生间隔|r1|。
另外，在图9(c－3)中，视线矢量PT与摄像机瞳孔矢量PT′之间的角度θ变得比图9(c－2)大。此时在图9(d－3)的图像中，在瞳孔中心P与角膜反射像G之间，产生间隔|r2|，该间隔|r2|变得比图9(d－2)所示的间隔|r1|大。
这里，图9(a)、(c)所示的(θ，φ)与图9(b)、(d)所示的(|r|，φ′)的关系一对一地对应。
即视线越离开摄像机光轴(θ变得越大)，则瞳孔中心P与角膜反射像G之间的间隔(距离)|r|变得越大。因此，θ与|r|之间有图9(e)所示的关系。基于该关系能够推定视线。
具体地说，在图6(b)(图6(a)的步骤ST4的具体的步骤)所示的步骤ST10，进行角膜反射像的偏移量的计算。角膜反射像的偏移量被作为图9(d－1)～(d－3)所示的瞳孔中心P与角膜反射像G之间的间隔(距离)|r|而示出。
另外，也执行高分辨率化的瞳孔追踪来决定瞳孔中心P(步骤ST11)。
另外，在图6(b)的步骤ST12，将瞳孔中心P、角膜反射像G变换到XY坐标系。接着，在图6(b)所示的步骤ST13，计算瞳孔中心P－角膜反射像G的矢量，如图9(a)、(b)的关系图所示，基于三角法，计算虚拟视点平面41上的注视点T(步骤ST14)。然后，在步骤ST15，计算视线矢量PT。
另外，在图6(a)的步骤ST4，也能够推定脸朝向。图10是从斜前方观看驾驶者(对象者)1的脸的立体图。从通过图6(a)的步骤ST1、ST2检测到的瞳孔45的位置推定鼻孔的存在范围，从该存在范围(区域)检测左右的鼻孔47、48(图6(c)的步骤ST20)。此时，也可以仅检测单方的鼻孔。另外，如果用前图像(前帧)检测鼻孔，则对于其下一个图像，也从前图像的鼻孔位置进行推定并追踪鼻孔位置。另外，在用前图像未检测到鼻孔时，从图像整体执行鼻孔的探索。
还有，是鼻孔47、48的检测，但能够从瞳孔45的位置大致确定鼻孔的存在范围，通过该范围内的亮度测定能够确定鼻孔。另外通过对图像进行2值化处理，容易检测鼻孔。
接着，通过立体计算来算出连接鼻孔47、48的中点43与中点瞳孔45的三维坐标(图6(c)所示的步骤ST21)。
并且，如图10所示，求出将左右两侧的瞳孔45、45与中点43连接的三角形的法线44，将该法线44推定为脸的朝向(图6(c)的步骤ST22)。
接着，在图6(a)的步骤ST5中，确定瞳孔区域22周边的皮肤区域24(参照图4)。如图4(b)所示，皮肤区域26也可以是瞳孔区域22的周围的一部分，在此情况下，优选的是，选择瞳孔区域22的下侧的位置的皮肤区域26。然后，在图6(a)的步骤ST6，取得皮肤区域24、26的亮度。优选的是，亮度是平均值。亮度的平均值能够通过用多个摄像元件拍摄到的皮肤区域的亮度的平均或者以不同的波长拍摄到的皮肤区域的亮度的平均来求出。然后，在步骤ST7，基于皮肤区域的亮度，计测生物体信息。通过本实施方式，能够得到心搏、呼吸数、脉搏等的生物体信息。
然后，在图6(a)所示的步骤ST8，生物体信息被发送给监视器14，在监视器14进行显示。监视器14例如设置在图2(a)所示的近红外线摄像机2a、2b的中间部。或者，监视器14也可以是构成输入装置30的操作面板等。作为操作面板，配置在中心控制台的车载导航装置的触摸面板等符合。
另外，如图6(a)的步骤ST9所示，生物体信息被发送给构成输入装置30的输入操作部31。另外，在步骤ST1取得的脸部图像(明瞳孔图像、暗瞳孔图像)、在步骤ST2取得的瞳孔区域、在步骤ST3取得的角膜反射像及在步骤ST4取得的视线方向及图6(c)中的脸朝向等的信息被发送给输入操作部31。发送给输入操作部31的信息可以是一个也可以是多个。
在输入操作部31中，基于来自生物体信息计测装置10的信息，执行规定的输入操作或者规定的信息发送。以下，表示具体例。
首先，能够基于在图6(a)的步骤ST4得到的视线方向，进行输入辅助(驾驶支援)。例如，作为基于视线检测的输入，设为按压转向装置开关期间，能够用视线设定音量等。另外，作为基于视线的选择，设为能够用视线选择控制设备等。另外，作为方向指示器辅助，例如，观看后视镜的话打开方向指示灯，而且将左后方画面映现在监视器上。另外，如果不看后视镜打开方向指示灯，则发出警告音。另外在监视器进行了警告显示后，驾驶者1观看了该警告显示的话，执行警戒解除。另外观看周围的频度变少的话，能够发出“请注意周围”、“请休息”等的警告、或采取使座席振动等的处置。
另外，作为基于瞳孔检测的输入，根据瞳孔尺寸来判断周围的明亮度，并加快自动照明的响应。另外，通过瞳孔尺寸来控制反射镜角度。另外，通过瞳孔尺寸来调整挡风玻璃的透射率。
另外，不能确认瞳孔的情况下可能正在打瞌睡，所以在仪表等显示了警告后，能够通过此后的瞳孔检测来确认是否观看了该显示。
另外，也能够从瞳孔的位置检测口唇，并通过口唇的运动提高声音输入精度。
另外，在仅能够确认单眼的瞳孔的情况等，检测到往别处看、往旁边看的话，为了提高安全性，发出警告音或执行视线导航。
另外，除此以外，能够基于视线方向，调整仪表等的显示高度或自动进行座席高度、方向盘高度的调整等。另外，也能够通过左右瞳孔间的距离、与鼻孔的距离、鼻孔的形状等来执行个人认证。
在本实施方式中，近红外线摄像机2a、2b设置有2台。在本实施方式中，也可以将近红外线摄像机设为1台，但通过设置多台(最低2台)近红外线摄像机2a、2b，能够用三角法求出与驾驶者(对象者)1的距离。如图11所示，基于通过近红外线摄像机2a照出对象物R的图像50的观看方法与基于通过近红外线摄像机2b照出对象物R的图像51的观看方法不同。根据该观看方法的偏差，用三角法能够确定对象物R的位置。因此，在本实施方式中也能够根据通过近红外线摄像机2a、2b拍摄到的图像并使用三角法来求出与驾驶者(对象者)1的距离。
另外，在图6(a)的实施方式中，步骤ST3、4、8、9不是必须的是选择性的步骤。
在上述的实施方式(第1实施方式)中，通过图6(a)的步骤ST2确定瞳孔区域，并基于该瞳孔区域确定用于测定亮度的皮肤区域。
与此相对，在图12所示的第2实施方式中，在步骤ST30取得角膜反射像35，在步骤ST31，基于角膜反射像35确定皮肤区域24。角膜反射像35如图7所示，能够通过例如暗瞳孔图像19来得到。
在该第2实施方式中，不同于第1实施方式，不将瞳孔区域22的取得作为必须的，但代之以将角膜反射像35的取得作为必须的。并且，如图13所示，在角膜反射像35的周围确定皮肤区域24。皮肤区域24设定在从角膜反射像35离开了规定距离的位置。从角膜反射像35通过图像的亮度等能够确定对象者的眼睛的区域，在所确定的眼睛的周围能够设定皮肤区域24。
图12所示的步骤ST32相当于图6(a)的步骤ST6，图12的步骤ST33相当于图6(a)的步骤ST7，图12的步骤ST34相当于图6(a)的步骤ST8，图12的步骤ST35相当于图6(a)的步骤ST9。
另外，在图12所示的第2实施方式中，也如图6(a)的步骤ST1、ST2所示，能够通过明瞳孔图像18与暗瞳孔图像19的差分图像来确定瞳孔区域22。在这种情况下，如图7所示，能够进行视线运算等。
本实施方式的生物体信息计测装置10及使用了该生物体信息计测装置10的输入装置30并不限定于车辆用，但通过作为车辆用来使用，能够在驾驶中得到驾驶者的生物体信息，并能够基于该生物体信息进行驾驶支援等。
行动预测例如能够追踪瞳孔并基于该追踪结果进行判断。
另外，基于从生物体信息计测装置10得到的信息(瞳孔信息、视线信息、生物体信息等)，能够进行例如是否正在打瞌睡的判断，在此情况下，能够提前用声音等唤起注意，另外也能够预测驾驶者(对象者)的行动，并执行规定的输入操作。
在上述的实施方式中，将驾驶者设为检测生物体信息的对象者，但并不限于驾驶者，也可以将副驾驶座的乘客等设为对象者。
符号说明
G、35 角膜反射像
P 瞳孔中心
PT 视线矢量
1 驾驶者
2、2a、2b 近红外线摄像机
5 第1发光元件
6 第2发光元件
7 摄像元件
10 生物体信息计测装置
11 检测部
12 亮度取得部
13 生物体计测部
14 监视器
16 瞳孔检测部
17 皮肤区域检测部
18 明瞳孔图像
19 暗瞳孔图像
20、45 瞳孔
21 差分图像
22 瞳孔区域
24、26 皮肤区域
30 输入装置
31 输入操作部
47、48 鼻孔

Claims (16)

1.一种生物体信息计测装置，具有：
摄像部，能够检测对象者的瞳孔；以及
检测部，能够根据由上述摄像部获得的图像数据来检测瞳孔区域，
上述生物体信息计测装置的特征在于，具有：
亮度取得部，取得上述瞳孔区域的周围的至少一部分皮肤区域的亮度；以及
生物体计测部，根据上述皮肤区域的亮度，计测上述对象者的生物体信息。
2.如权利要求1记载的生物体信息计测装置，
上述摄像部构成为，具有摄像元件、及能够朝向上述对象者照射光的发光元件。
3.如权利要求2记载的生物体信息计测装置，
上述摄像元件设置有多个。
4.如权利要求2所述的生物体信息计测装置，
上述发光元件具有：第1发光元件，照射具有第1波长的红外线；及第2发光元件，照射具有比上述第1波长长的第2波长的红外线，
在照射了具有上述第1波长的红外线的条件下拍摄明瞳孔图像，照射具有上述第2波长的红外线、或者从上述第1发光元件和上述第2发光元件不照射光而拍摄暗瞳孔图像，
在上述检测部中，通过上述明瞳孔图像与上述暗瞳孔图像的差分图像来检测上述瞳孔区域。
5.如权利要求2所述的生物体信息计测装置，
在上述检测部中，能够检测角膜反射像。
6.如权利要求2所述的生物体信息计测装置，
在上述亮度取得部中，取得用多个上述摄像元件或者不同的波长拍摄到的上述皮肤区域的亮度的平均值，并输入到上述生物体计测部。
7.如权利要求1所述的生物体信息计测装置，
在上述检测部中，执行瞳孔追踪。
8.如权利要求1所述的生物体信息计测装置，
在上述检测部中，检测上述对象者的视线。
9.如权利要求1所述的生物体信息计测装置，
在上述检测部中，检测上述对象者的脸的朝向。
10.如权利要求1所述的生物体信息计测装置，
在上述亮度取得部中，取得位于上述瞳孔区域的下侧的上述皮肤区域的亮度。
11.如权利要求1所述的生物体信息计测装置，
在取得了上述对象者的双眼的上述瞳孔区域时，上述亮度取得部取得上述皮肤区域的亮度。
12.如权利要求1所述的生物体信息计测装置，
上述生物体信息计测装置配置在车辆内。
13.如权利要求1所述的生物体信息计测装置，
上述生物体计测部通过独立成分分析法从一定时间中的上述皮肤区域的亮度变化值取出独立信号，计算上述独立信号的功率谱，取得具有心搏或呼吸数附近的频率峰值的信号，从而计测生物体信息。
14.一种输入装置，其特征在于，
具有输入操作部及权利要求1所述的生物体信息计测装置，
基于来自上述生物体信息计测装置的信息，执行规定的输入操作或者规定的信息发送。
15.如权利要求14所述的输入装置，
上述输入操作是预测上述对象者的行动而执行的。
16.如权利要求14所述的输入装置，
上述输入操作供驾驶支援。
CN201380058939.7A 2012-11-12 2013-11-08 生物体信息计测装置及使用该装置的输入装置 Expired - Fee Related CN104780834B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012-247983 2012-11-12
JP2012247983 2012-11-12
PCT/JP2013/080265 WO2014073645A1 (ja) 2012-11-12 2013-11-08 生体情報計測装置及びそれを用いた入力装置

Publications (2)

Publication Number Publication Date
CN104780834A CN104780834A (zh) 2015-07-15
CN104780834B true CN104780834B (zh) 2016-12-28

Family

ID=50684738

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380058939.7A Expired - Fee Related CN104780834B (zh) 2012-11-12 2013-11-08 生物体信息计测装置及使用该装置的输入装置

Country Status (5)

Country Link
US (1) US20150238087A1 (zh)
EP (1) EP2918225A4 (zh)
JP (1) JP5923180B2 (zh)
CN (1) CN104780834B (zh)
WO (1) WO2014073645A1 (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104780834B (zh) * 2012-11-12 2016-12-28 阿尔卑斯电气株式会社 生物体信息计测装置及使用该装置的输入装置
DE112014000934T5 (de) * 2013-02-21 2016-01-07 Iee International Electronics & Engineering S.A. Bildgebungsgestütztes Insassenüberwachungssystem mit breit gefächerter Funktionsunterstützung
US10417782B2 (en) 2014-08-22 2019-09-17 National University Corporation Shizuoka University Corneal reflection position estimation system, corneal reflection position estimation method, corneal reflection position estimation program, pupil detection system, pupil detection method, pupil detection program, gaze detection system, gaze detection method, gaze detection program, face orientation detection system, face orientation detection method, and face orientation detection program
JP6468755B2 (ja) * 2014-08-22 2019-02-13 国立大学法人静岡大学 特徴点検出システム、特徴点検出方法、および特徴点検出プログラム
KR101610525B1 (ko) * 2014-10-20 2016-04-07 현대자동차주식회사 조도를 고려한 동공 검출 장치 및 그 방법
US10212355B2 (en) * 2015-03-13 2019-02-19 Thales Defense & Security, Inc. Dual-mode illuminator for imaging under different lighting conditions
CN104873184B (zh) * 2015-05-08 2017-09-29 上海与德通讯技术有限公司 一种测量心率的方法及系统
DE102015110456B4 (de) * 2015-06-29 2017-02-09 Hochschule Für Technik Und Wirtschaft Des Saarlandes Purkinjemeter und Verfahren zur automatischen Auswertung
JP6614547B2 (ja) * 2015-08-17 2019-12-04 パナソニックＩｐマネジメント株式会社 視聴状態検出装置、視聴状態検出システムおよび視聴状態検出方法
JP6526527B2 (ja) * 2015-09-09 2019-06-05 株式会社東芝 識別装置及び認証システム
US10733426B2 (en) * 2015-10-15 2020-08-04 Daikin Industries, Ltd. Driver state determination device and driver state determination method
JP6971686B2 (ja) * 2017-08-02 2021-11-24 株式会社Ｊｖｃケンウッド 視線検出装置及び視線検出方法
US10956737B1 (en) * 2017-10-24 2021-03-23 Wells Fargo Bank, N.A. System and apparatus for improved eye tracking using a mobile device
CN112449580A (zh) * 2018-07-23 2021-03-05 新唐科技日本株式会社 活体状态检测装置以及活体状态检测方法
CN109213324A (zh) * 2018-09-06 2019-01-15 京东方科技集团股份有限公司 显示参数调节方法及装置、显示装置
EP3666169A1 (en) * 2018-12-11 2020-06-17 Aptiv Technologies Limited Driver monitoring system
CN113557519A (zh) * 2019-03-14 2021-10-26 日本电气株式会社 信息处理设备、信息处理系统、信息处理方法以及记录介质
WO2020213022A1 (ja) * 2019-04-15 2020-10-22 三菱電機株式会社 視線監視装置および視線監視方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09262213A (ja) * 1996-03-28 1997-10-07 Toyota Central Res & Dev Lab Inc 生体情報検出装置
US6116736A (en) * 1999-04-23 2000-09-12 Neuroptics, Inc. Pupilometer with pupil irregularity detection capability
US20070066916A1 (en) * 2005-09-16 2007-03-22 Imotions Emotion Technology Aps System and method for determining human emotion by analyzing eye properties
JP5228305B2 (ja) * 2006-09-08 2013-07-03 ソニー株式会社 表示装置、表示方法
JP2008125619A (ja) * 2006-11-17 2008-06-05 National Univ Corp Shizuoka Univ 瞳孔検出装置及び瞳孔検出方法
JP5067024B2 (ja) * 2007-06-06 2012-11-07 ソニー株式会社 生体情報取得装置および生体情報取得方法
JP2009201653A (ja) * 2008-02-27 2009-09-10 Nippon Telegr & Teleph Corp <Ntt> 知的活動評価システム、並びにその学習方法及びラベル付与方法
JP5332406B2 (ja) * 2008-08-28 2013-11-06 富士通株式会社 脈拍計測装置、脈拍計測方法および脈拍計測プログラム
DE102009041187A1 (de) * 2009-08-13 2011-02-17 Volkswagen Ag Verfahren und Vorrichtung zur Adaption von Parametern eines Fahrerassistenzsystems
JP5195741B2 (ja) 2009-12-25 2013-05-15 株式会社デンソー 生体活動計測装置
WO2012020760A1 (ja) 2010-08-09 2012-02-16 国立大学法人静岡大学 注視点検出方法及び注視点検出装置
CN104780834B (zh) * 2012-11-12 2016-12-28 阿尔卑斯电气株式会社 生物体信息计测装置及使用该装置的输入装置

Also Published As

Publication number Publication date
CN104780834A (zh) 2015-07-15
EP2918225A4 (en) 2016-04-20
US20150238087A1 (en) 2015-08-27
WO2014073645A1 (ja) 2014-05-15
JPWO2014073645A1 (ja) 2016-09-08
EP2918225A1 (en) 2015-09-16
JP5923180B2 (ja) 2016-05-24

Similar Documents

Publication Publication Date Title
CN104780834B (zh) 生物体信息计测装置及使用该装置的输入装置
US8371693B2 (en) Autism diagnosis support apparatus
US11786117B2 (en) Mobile device application for ocular misalignment measurement
US9439592B2 (en) Eye tracking headset and system for neuropsychological testing including the detection of brain damage
JP6212115B2 (ja) 人物の他覚的眼屈折及び少なくとも１つの幾何学的形態パラメータを測定する装置及び方法
JP6617662B2 (ja) 視線検出装置、視線検出方法、及びコンピュータプログラム
CN107960989B (zh) 脉搏波计测装置以及脉搏波计测方法
CN105193402A (zh) 用于求取车辆的驾驶员的心率的方法
CN111295129A (zh) 视敏度检查
CN104146684A (zh) 一种眼罩式眩晕检测仪
WO2002003853A1 (fr) Dispositif de mesure de la pupille
JP6245093B2 (ja) 診断支援装置および診断支援方法
WO2019176492A1 (ja) 算出システム、情報処理装置、運転支援システム、指標算出方法、コンピュータプログラム、及び記憶媒体
CN111134693B (zh) 基于虚拟现实技术的自闭症儿童辅助检测方法、系统及终端
CN110881981A (zh) 一种基于虚拟现实技术的阿尔兹海默症辅助检测系统
JP6019684B2 (ja) 診断支援装置および診断支援方法
KR102263830B1 (ko) 자동 초점 기능을 이용한 안저 영상 촬영 장치
JP2015123262A (ja) 角膜表面反射画像を利用した視線計測方法及びその装置
JP7057483B2 (ja) 評価装置、評価方法、及び評価プログラム
JP2020024750A (ja) 視線検出装置、視線検出方法、及びコンピュータプログラム
JP6776970B2 (ja) 視線検出装置、視線検出方法及び視線検出プログラム
KR102471955B1 (ko) 휴대용 신경질환 진단장치 및 그 진단방법
CN113729609B (zh) 同视机
US11653831B2 (en) Visual performance examination device, visual performance examination method, and computer program
WO2020141231A1 (en) Connected device with eye tracking capabilities

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: Tokyo, Japan, Japan

Patentee after: Alpine Alpine Company

Address before: Tokyo, Japan, Japan

Patentee before: Alps Electric Co., Ltd.

CP01 Change in the name or title of a patent holder
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20161228

Termination date: 20201108

CF01 Termination of patent right due to non-payment of annual fee