JP6612339B2 - 携帯端末用ストレス評価プログラム及び該プログラムを備えた携帯端末 - Google Patents

携帯端末用ストレス評価プログラム及び該プログラムを備えた携帯端末 Download PDF

Info

Publication number
JP6612339B2
JP6612339B2 JP2017520169A JP2017520169A JP6612339B2 JP 6612339 B2 JP6612339 B2 JP 6612339B2 JP 2017520169 A JP2017520169 A JP 2017520169A JP 2017520169 A JP2017520169 A JP 2017520169A JP 6612339 B2 JP6612339 B2 JP 6612339B2
Authority
JP
Japan
Prior art keywords
pupil
unit
change
terminal device
stress
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017520169A
Other languages
English (en)
Other versions
JPWO2016189711A1 (ja
Inventor
糧三 齋藤
Original Assignee
糧三 齋藤
高橋 広嗣
香山 哲
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 糧三 齋藤, 高橋 広嗣, 香山 哲 filed Critical 糧三 齋藤
Publication of JPWO2016189711A1 publication Critical patent/JPWO2016189711A1/ja
Application granted granted Critical
Publication of JP6612339B2 publication Critical patent/JP6612339B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/163—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state by tracking eye movement, gaze, or pupil change
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/445—Program loading or initiating
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G06T7/0014—Biomedical image inspection using an image reference approach
    • G06T7/0016—Biomedical image inspection using an image reference approach involving temporal comparison
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/11—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring interpupillary distance or diameter of pupils
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00—Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/12—Classification; Matching
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10141—Special mode during image acquisition
    • G06T2207/10152—Varying illumination
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30041—Eye; Retina; Ophthalmic
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Pathology (AREA)
  • Hospice & Palliative Care (AREA)
  • Developmental Disabilities (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Educational Technology (AREA)
  • Molecular Biology (AREA)
  • Psychiatry (AREA)
  • Psychology (AREA)
  • Social Psychology (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Business, Economics & Management (AREA)
  • Quality & Reliability (AREA)
  • Multimedia (AREA)
  • General Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Ophthalmology & Optometry (AREA)
  • Eye Examination Apparatus (AREA)
  • Data Mining & Analysis (AREA)
  • Telephone Function (AREA)

Description

本発明は、携帯端末を用いてストレスを評価するためのプログラムに関するものである。
ストレスは、様々な病気の原因となるものである。しかし、一般的には、ストレスは、視覚的に認識できるものではなく、装置等を用いて測定することは容易ではない。
そこで、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定するための技術が望まれている。
その技術としては、例えば、特許文献１のような技術が存在する。
特開２００５−１４３６８４
この特許文献は、ストレスやリラックスの程度が、瞳孔対光反応の度合いとの関係において相関関係を有するという点を生かして、眼球に対して光を当てた際の瞳孔反応を撮影及び解析することで、ストレスの程度を測定するという発想である。この発想により、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定するという目的は一応達成させる。
しかし、特許文献においては、目の部分を覆って顔に装着される立体マスクを装着しての撮影が前提となっている。そのため、専用の立体マスクを必要とする点において、利用者が気軽に使えるものではなかった。
現代社会においては、スマートフォンなどの携帯端末装置の普及率は高いので、携帯端末装置を用いて客観的なストレス測定を実施できれば、利用者が、気軽に使えるものとなる。このような携帯端末装置において、例えばスマートフォンなどによる撮影の場合には、瞳孔を認識するための工夫が存在せず、瞳孔の大きさの変化を把握できないという点が課題となる。
そこで、本発明は、携帯端末装置において、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定するための技術を提供することを課題とするものである。
本発明は、前記課題を解決するため、携帯端末の動画撮影機能をＯＮにする動画ＯＮステップと、携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮステップと、撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識ステップと、瞳孔を認識するまでライトの照度を低くし、瞳孔の認識が完了したときに、認識するまでよりもライトの照度を高く変化させる照度変化ステップと、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する瞳孔変化演算ステップと、を携帯端末装置に読取実行可能に記録したプログラムを開発した。
また、本発明は、さらに前記の特徴に加えて、ライトＯＮステップにてＯＮにされたライトの照度を時間経過とともに変化させる照度変化ステップをさらに有するプログラムを開発した。
また、本発明は、さらに前記の特徴に加えて、体組成計から受信した体組成データを取得する体組成データ取得ステップをさらに有するプログラムを開発した。
また、本発明は、さらに前記の特徴に加えて、瞳孔変化演算ステップにて演算されて得られた瞳孔変化に基づいてストレス度合いを評価してストレス評価結果を得るストレス評価ステップを有するプログラムを開発した。
また、本発明は、さらに前記の特徴に加えて、瞳孔変化演算ステップにて演算されて得られた瞳孔変化を所定のアドレスに対して送信する瞳孔変化送信ステップをさらに有するプログラムを開発した。そして、そのプログラムを実行した結果として送信された瞳孔変化を受信する瞳孔変化受信ステップと、受信した瞳孔変化を蓄積する瞳孔変化蓄積ステップと、蓄積された瞳孔変化を統計処理する瞳孔変化統計処理ステップと、を計算機に読取実行可能に記載したプログラムを開発した。
また、本発明は、さらに前記の特徴に加えて、ストレス評価ステップにて得られたストレス評価結果を所定のアドレスに対して送信するストレス評価結果送信ステップをさらに有するプログラムを開発した。また、前記瞳孔変化送信ステップを有するプログラムを実行した結果として送信された瞳孔変化を受信する瞳孔変化受信ステップと、受信した瞳孔変化を蓄積する瞳孔変化蓄積ステップと、ストレス評価結果送信ステップを有するプログラムを実行した結果として送信されたストレス評価結果を受信するストレス評価結果受信ステップと、受信したストレス評価結果を蓄積するストレス評価結果蓄積ステップと、蓄積されたストレス評価結果及び瞳孔変化を統計処理するストレス統計処理ステップと、を計算機に読取実行可能に記載したプログラムを開発した。
また、本発明は、さらに前記の特徴に加えて、携帯端末の動画撮影機能をＯＮにする動画ＯＮステップに代えて、携帯端末の連続静止画撮影機能をＯＮにする連続ＯＮステップとしたプログラムを開発した。
また、本発明は、携帯端末の動画撮影機能をＯＮにする動画ＯＮステップと、携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮステップと、撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識ステップと、動画ＯＮステップにて撮影された動画を保持する動画保持ステップと、保持された動画を所定のアドレスに送信する動画送信ステップと、を携帯端末装置に読取実行可能に記録したプログラムを開発した。そして、その特徴に加えて、携帯端末の動画撮影機能をＯＮにする動画ＯＮステップに代えて、携帯端末の連続静止画撮影機能をＯＮにする連続ＯＮステップとし、動画ＯＮステップにて撮影された動画を保持する動画保持ステップに代えて、携帯端末にて撮影された連続静止画を保持する連続静止画保持ステップとし、保持された動画を所定のアドレスに送信する動画送信ステップに代えて、連続静止画保持ステップにて保持されている連続静止画を送信する連続静止画送信ステップを、携帯端末装置に読取実行可能に記録したプログラムを開発した。
また、本発明は、携帯端末から人を含む動物の目を含む動画を受信する動画受信ステップと、受信した動画の中から人を含む動物の目の瞳孔を認識する瞳孔認識ステップと、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する瞳孔変化演算ステップとを計算機に読取実行可能に記録したプログラムを開発した。そして、携帯端末から人を含む動物の目を含む連続静止画を受信する連続静止画受信ステップと、受信した連続静止画の中から人を含む動物の目の瞳孔を認識する瞳孔認識ステップと、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する瞳孔変化演算ステップとを計算機に読取実行可能に記録したプログラムを開発した。
また、本発明は、以上のプログラムが読取実行可能に記録された携帯端末装置あるいは統計処理装置を開発した。
以上の発明により、携帯端末装置において、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定するための技術を提供することができる。
実施例１の携帯端末装置の機能ブロックの一例を示す図 実施例１の携帯端末装置のハードウェア構成の一例を示す図 実施例１の処理の流れの一例を示すフローチャート 実施例２の携帯端末装置の機能ブロックの一例を示す図 実施例２の携帯端末装置のハードウェア構成の一例を示す図 実施例２の処理の流れの一例を示すフローチャート 実施例３の携帯端末装置の機能ブロックの一例を示す図 実施例３の携帯端末装置のハードウェア構成の一例を示す図 実施例３の処理の流れの一例を示すフローチャート 実施例４の携帯端末装置の機能ブロックの一例を示す図 実施例４の携帯端末装置のハードウェア構成の一例を示す図 実施例４の処理の流れの一例を示すフローチャート 実施例５の携帯端末装置の機能ブロックの一例を示す図 実施例５の携帯端末装置のハードウェア構成の一例を示す図 実施例５の処理の流れの一例を示すフローチャート 実施例６の携帯端末装置の機能ブロックの一例を示す図 実施例６の携帯端末装置のハードウェア構成の一例を示す図 実施例６の処理の流れの一例を示すフローチャート 実施例７の携帯端末装置の機能ブロックの一例を示す図 実施例７の携帯端末装置のハードウェア構成の一例を示す図 実施例７の処理の流れの一例を示すフローチャート 実施例８の携帯端末装置の機能ブロックの一例を示す図 実施例８の携帯端末装置のハードウェア構成の一例を示す図 実施例８の処理の流れの一例を示すフローチャート 実施例９の携帯端末装置の機能ブロックの一例を示す図 実施例９の携帯端末装置のハードウェア構成の一例を示す図 実施例９の処理の流れの一例を示すフローチャート 実施例１０の携帯端末装置の機能ブロックの一例を示す図 実施例１０の携帯端末装置のハードウェア構成の一例を示す図 実施例１０の処理の流れの一例を示すフローチャート 携帯端末装置の一例を示す図１ 携帯端末装置の一例を示す図２ 携帯端末装置の一例を示す図３ 本発明を実施した場合の携帯端末装置の画面の一例を示す図 統計処理の内容を示す図１ 統計処理の内容を示す図２ 統計処理の内容を示す図３ 瞳孔認識の内容を説明するための図 瞳孔変化演算の内容を説明するための図 実施例１の処理の流れをタイムチャートにした場合の一例を示す図 縮瞳速度を横軸にとりストレス度合いを縦軸にとった場合の図 縮瞳速度を横軸にとりストレス度合いを縦軸にとった場合の特定の作業中の時間毎のストレス変化を示す図 実施例２の処理の流れをタイムチャートにした場合の一例を示す図 瞳孔演算の態様を説明するための図 人の目の部分を輪郭線のみで示した図 画面の一部を照度の強い白色光映像とする場合の携帯端末装置の図 縦軸をストレス評価値として横軸を瞳孔変化速度としたグラフ 縦軸をストレス評価値として横軸を体組成量としたグラフ ストレス評価の方法を示した図 瞳孔部分に微動が生じたとしてもトレースして識別を継続するための仕組みを説明するための図 演算終了後のリプレイ画像を示す図 画面中に瞳孔収縮に関するデータを表示した一例を示す図 ライトＯＦＦステップを有する場合の処理の流れを示す図 認識時の瞳孔の大きさに戻ったときに処理を終了するという構成を可能とするためのタイムチャートを示す図 実施例１１の携帯端末装置の機能ブロックの一例を示す図 実施例１１の携帯端末装置のハードウェア構成の一例を示す図 実施例１１の処理の流れの一例を示すフローチャート 実施例１２の携帯端末装置の機能ブロックの一例を示す図 実施例１２の携帯端末装置のハードウェア構成の一例を示す図 実施例１２の処理の流れの一例を示すフローチャート
以下、本発明の実施形態について、図を用いて説明する。以下の説明は、実施例１は請求項１、１３及び２５に、実施例２は請求項２及び１４に、実施例３は請求項３及び１５に、実施例４は請求項４及び１６に、実施例５は請求項５及び１７に、実施例６は請求項８及び１８に、実施例７は請求項６及び１９に、実施例８は請求項７及び２０に、実施例８は請求項９及び２１に、実施例９は請求項１０及び２２に、実施例１１は請求項１１及び２３に、実施例１２は請求項１２及び２４に、それぞれ対応する。なお、本発明の内容は、以下の実施例にのみ限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得る。
＜概要＞
本実施例の発明は、光を当てた際の瞳孔の変化を動画撮影して、撮影画像の瞳孔変化を時間単位で演算するための機能を携帯端末装置に読取実行可能に記録したプログラムである。また、そのプログラムが読取実行可能に記録された携帯端末装置である。これらは、携帯端末に限らず、デスクトップパソコンなどの端末によっても実現され得るが、以下では、一例として携帯端末を用いた場合について説明する。
以下、本実施例の携帯端末装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
＜機能的構成＞
図１は、本実施例の携帯端末装置の機能ブロックの一例である。この図にあるように、本実施例の携帯端末装置（０１０１）は、カメラ部（０１０２）と動画ＯＮ部（０１０３）とライト部（０１０４）とライトＯＮ部（０１０５）と瞳孔認識部（０１０６）と瞳孔変化演算部（０１０７）とを有する。
なお、以下に記載する本携帯端末装置を構成する機能ブロックは、ハードウェア、ソフトウェア、又はハードウェア及びソフトウェアの両方として実現され得る。具体的には、コンピュータを利用するものであれば、ＣＰＵや主メモリ、バス、あるいは二次記憶装置（ハードディスクや不揮発性メモリ、ＣＤ−ＲＯＭやＤＶＤ−ＲＯＭなどの記憶メディアとそれらメディアの読取ドライブなど）、印刷機器や表示装置、その他の外部周辺装置などのハードウェア構成部やその外部周辺機器用のＩ／Ｏポート、それらハードウェアを制御するためのドライバプログラムやその他アプリケーションプログラム、情報入力に利用されるユーザーインターフェースなどが挙げられる。
また、これらハードウェアやソフトウェアは、主メモリ上に展開したプログラムをＣＰＵで演算処理したり、メモリやハードディスク上に保持されているデータや、インターフェースを介して入力されたデータなどを加工、蓄積、出力処理したり、あるいは各ハードウェア構成部の制御を行ったりするために利用される。また、この発明は装置として実現できるのみでなく、方法としても実現可能である。また、このような発明の一部をソフトウェアとして構成することができる。さらに、そのようなソフトウェアをコンピュータに実行させるために用いるソフトウェア製品、及び同製品を記録媒体に固定した記録媒体も、当然にこの発明の技術的な範囲に含まれる（本明細書の全体を通じて同様である）。
≪カメラ部、ライト部の働き≫
「カメラ部」は、動画又は／及び静止画の撮影のための機能を有する。また、「ライト部」は、携帯端末の撮影側面に備えられているライトの機能を有する。「カメラ部」及び「ライト」部は、表面と裏面に存在する場合があるが、いずれであっても本発明の目的は達成し得る。
図３１から図３３は、携帯端末装置のうちいわゆるスマートフォンの概略図である。（ａ）が表面、（ｂ）が裏面であり、実際には図示しないマイクが存在する。
図３１の携帯端末装置（４６０１）の表面には、操作ボタン（４６０２）と受話部（４６０３）の他に、カメラ（４６０４）及びライト（４６０５）並びに画面（４６０６）が存在するが裏面にはカメラもライトも存在しない。
図３２の携帯端末装置（４７０１）の表面には、操作ボタン（４７０２）と受話部（４７０３）と画面（４７０６）が存在するもののカメラもライトも存在しないが、裏面にはカメラ（４７０４）及びライト（４７０５）が存在する。
図３３の携帯端末装置（４８０１）の表面には、操作ボタン（４８０２）と受話部（４８０３）の他に、カメラ（４８０４）及びライト（４８０５）並びに画面（４８０６）が存在し、裏面にもカメラ（４８０４）もライト（４８０５）が存在する。
例えば、図３１又は図３３のような携帯端末を用いた場合、ユーザは、画面を見ながら動画撮影をすることができる。そのため、携帯端末は、図３１のように、画面のある表側にカメラとライトが存在しているものを使用することが望ましい。
これに対して、図３２のような携帯端末を用いた場合、ライトを瞳孔に当てるためには、ユーザの側には画面の裏側がくることになる。そうすると、ユーザは、自分の目や瞳孔が、画面のいずれの部分に存在するかを把握することができずに、操作の容易性に問題を抱えることとなる。そのため、例えば、瞳孔が画面の中央付近にない場合には「右」「左」などと指示音声で知らせる、他方、瞳孔が画面の中心付近にきた場合には「ピー」という音でユーザに知らせる等の瞳孔位置把握手段を備えていても良い。瞳孔位置把握手段は、音以外でも、例えば、ライトの照度変化によってユーザに瞳孔が画面の中心付近にきていることを知らせることでも良い。
瞳孔の大きさは、赤外線を用いることで容易に認識することができる。そのため、カメラは、赤外線カメラ機能が付いていることが望ましい。
また、ユーザ側に画面が向いている場合において、画面の面にカメラのみが存在する携帯端末装置の場合、画面の一部を照度の強い白色光映像とすることにより、ライトに代えることもできる。照度の強い白色光映像については、画面の上半分であっても良いし、下半分であっても良いし、さらに上と下の４分の１ずつであっても良い。また、撮影画像が表示される部分と照度の強い白色光映像の部分の比率は、１：１に限られず、瞳孔対光反応を測定することができるのに十分な割合であれば良い。
図４６は、画面の一部を照度の強い白色光映像とする場合の携帯端末装置の図である。携帯端末装置（６１０１）は、カメラ（６１０２）があるもののライトがないので、画面（６１０３）の下半分が照度の強い白色光映像（６１０４）となっている。これにより、ライトに代替することができる。
≪動画ＯＮ部、ライトＯＮ部の働き≫
「動画ＯＮ部」は、携帯端末の動画撮影機能をＯＮにする働きをする。また、「ライトＯＮ部」は、携帯端末の撮影側面に備えられているライトを含むライト部をＯＮにする働きをする。本発明の最も基本的な構成として、光を当てた際の瞳孔を動画撮影する必要がある。ユーザは、動画ＯＮ部の働きによって、瞳孔部分を動画撮影することができるようになる。また、ユーザは、ライトＯＮ部の働きによって、瞳孔に対して光を当てることができる。
この動画ＯＮ部における「撮影」とは、同時に録画する場合を含むが、録画を必須としない。例えば、動画ＯＮ部においては動画を撮影するだけで、その撮影中の動画を後述する「瞳孔認識部」及び「瞳孔変化演算部」にてリアルタイムで演算するという態様も本実施例に含まれるものである。
また、撮影されている動画には、ライトを当てている最中の動画のみではなく、ライトを当てる前、及びライトを当てた後の動画も含まれていることが望ましい。このようにライトで照射している前後の動画も含むことにより、瞳孔対光反応を精度よく測定することができる。
ここにおける撮影中の動画には、瞳孔が含まれていることが前提になるが、瞳孔のみではなく、瞳孔以外の瞳孔周辺の身体の部分も含まれていることが望ましい。人間の眼球には、その者の健康状態が様々な形で現れる。例えば、アレルギー性結膜炎や感染性結膜炎やぶどう膜炎あるいはドライアイなどにおいては、目の充血を引き起こすがある。そのため、結膜に生じた例えば目の充血の事実によって、上記の症状を知ることができるという作用がある。
次に、「携帯端末」は、例えば、スマートフォンや携帯電話、ノートパソコン、タブレットＰＣ、時計型コンピュータ、ウェアラブルコンピュータ、デジタルカメラ、ＰＤＡ、ＰｏｃｋｅｔＰＣ、Ｐａｌｍ、ライトとカメラが付いている専用端末などを広く含むものである。通常であれば、カメラ機能及びライト機能付の機器を前提とするが、本発明では、販売されている単位としてはカメラ機能やライト機能を有しない機器であっても、外付けでカメラを搭載した場合や外付けでライトを搭載した場合には、当該機器と外付けカメラないし外付けライトを一体として「携帯端末」と捉えるものとする。
ライトＯＮ部によって照射するライトの強度は、瞳孔が対光反応を起こすに足りる強度であれば良い。それに加えて、眼底検査が瞳孔に光を当てて行うものであることに鑑み、例えば眼底検査を行うに適した光の強度とすることも考えられる。そうすることによって、ストレス強度の測定と同時に眼底検査をも行うことができる。
さらに、携帯端末装置は、動画撮影機能とライトのＯＮ・ＯＦＦを制御するための制御部を備えていても良い。この制御部によって、ユーザがスウィッチをＯＮにするだけで、自動的に適切なタイミングで動画撮影機能とライトのＯＮ・ＯＦＦの制御が行われる。
また、その制御部においては、予め設定してある所定の時間になると自動的に動画撮影機能とライトをＯＮにするようにしても良い。そうすることによって、特定の時間の瞳孔対光反応を計測することができるし、例えば、作業中に自動的に測定することも可能となる。
これらにより、光を当てた際の瞳孔を動画撮影することができる。
≪瞳孔認識部≫
「瞳孔認識部」は、撮影中の像の中から人を含む動物の目の瞳孔を認識する働きをする。本発明の課題のポイントは、例えばスマートフォンなどの携帯端末装置による撮影の場合、瞳孔の大きさの変化を把握することができないという点にある。具体的には、携帯端末の動画撮影機能において、例えば顔認識機能については浸透しているものの、眼球のうち瞳孔の部分を認識するための機能は一般的ではない。本発明の課題を解決するためには、瞳孔の大きさを動画情報をもとに演算する必要があるところ、瞳孔の大きさを認識できなければ、そのような演算も不可能である。瞳孔認識部は、瞳孔の大きさを認識することを可能にするものであり、本発明の課題を解決する上で重要な機能である。
瞳孔を認識するための機能としては、瞳孔を撮影した上、瞳孔の動画又は静止画情報をもとに瞳孔の色彩又は明度を登録しておき、登録されている色彩又は明度と同じ色彩又は明度をもつ部分を特定することによって、瞳孔を認識することが考えられる。
また、携帯端末装置は、瞳孔の色彩又は明度を登録していなくとも自動的に瞳孔部分を認識するための手段を備えていても良い。具体的に図３８を用いて説明すると、まず眼球の濃色部分（Ａ）薄色部分（Ｂ）白色部分（Ｃ）及び肌部分（Ｄ）を色彩又は明度によって認識する色彩明度認識手段を有し、次に眼球の薄色部分（Ｂ）と白色部分（Ｃ）の境界Ｅを発見する虹彩認識手段、最後に眼球の濃色部分（Ａ）と薄色部分（Ｂ）の境界である境界Ｆを発見する瞳孔発見手段を有するという方法であっても良い。
そして、瞳孔部分に微動が生じたとしても、トレースして識別を継続することが望ましい。また、瞳孔部分の微動を防止するため、例えば、図５０のように、携帯端末装置（６８０１）を横向きにして、かつ、カメラ（６８０２）やライト（６８０３）に近い場所の画面（６８０４）上に動画などの画像（６８０５）を表示させることによって、１点を見させることで瞳孔部分を固定するという工夫が考えられる。この場合、画面（６８０４）に白色光を表示させれば、ライトの光に代えることができる。動画などの画像を表示させる場所は、カメラ（６８０２）の中心線上に動画の中心線がくるように位置付けることが望ましい。また、画像中に注目しておくべき注目点（６８０６）を明示しても良い。
瞳孔部分については、その円周が一層濃い色となっている場合もある。そのような場合、その一層濃い色となっている部分の内側を境界Ｆとしても良いし、外側を境界Ｆとしても良いし、中間点を境界Ｆとしても良い。もっとも、情報の精度を上げるため、計測毎に異なるのは望ましくなく、統一した設定であることが望ましい。
この点につき、図４５を用いて説明する。図４５は、人の目の部分を輪郭線のみで示した図である。人の目（６００１）には、虹彩境界部分（６００２）と瞳孔境界部分（６００３）が存在し、瞳孔の内側に点線で示した箇所まで一層濃い色となっている部分（６００４）が存在する場合がある。そのような場合、一層濃い色となっている部分（６００４）を境界Ｆとしても良いし、瞳孔境界部分（６００３）を境界Ｆとしても良いし、中間点を境界Ｆとしても良い。
図３４は、瞳孔を認識した場合の画面を示す図である。携帯端末装置（４９０１）を用いて左図のように瞳孔を含んだ目の部分を撮影して、瞳孔部分の認識に成功した場合、右図のように、瞳孔を認識済みであることを示すように瞳孔部分（４９０２）を浮き上がらせる構成としても良い。これにより、瞳孔認識に成功したことをユーザに伝えることができる。その他にも、瞳孔認識に成功したことを伝える手段としては、例えば「ピー」という通知音や照度の変化などを通して伝えるという方法であっても良いし、それらに限らない。
自動で瞳孔を認識するため、カメラは、焦点を自動で合わせるためのオートフォーカス機能が付いていることが望ましい。また、ユーザが操作する上で手ぶれが生ずる可能性があるので、手ぶれ防止機能を有することが望ましい。これにより、正確な瞳孔認識をすることができる。
また、動画撮影中は、基本的に瞬きをしないことから、ユーザは、目が乾くなどの症状に襲われる。そこで、ユーザとしては、経過秒数又は残り秒数などを把握できれば便利である。そこで、動画撮影中においても、撮影の残り時間を音などで知らせる工夫があることが望ましい。
また、瞬きをした場合には演算の精度が下がってしまうものの、瞬きをしたことをユーザが気付かない場合がある。そのため、瞬きを認識した場合には、動画撮影をやり直すため、通知音ないしライトのＯＮ・ＯＦＦや色や照度などで知らせる機能を備えていても良い。また、瞬きを認識した場合には、動画撮影を最初からやり直すのではなく、撮影時間（計測時間）を延長するための延長機能を有していても良い。
≪瞳孔変化演算部≫
「瞳孔変化演算部」は、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する働きをする。前述のとおり、ストレスやリラックスの程度は、瞳孔対光反応の度合いとの関係において相関関係を有する。したがって、瞳孔変化演算部は、瞳孔対光反応を演算するものである。そして、その瞳孔対光反応とは、具体的には、瞳孔に光を当てたことによる瞳孔の大きさの時間変化である。
演算の対象となる瞳孔のデータは、瞳孔の直径である場合や瞳孔の面積である場合などが考えられる。例えば、瞳孔の直径であれば、まつ毛などで瞳孔の全体像が遮られていたり、瞼が完全に開いていないなどのときであっても、より正確に測定することが可能であるという点では望ましい。他方、瞳孔の面積であれば、上記のような事情がなければ瞳孔の大きさを精度よく捉えることができるという点で望ましい。
また、演算内容については、直径値や面積値に加えて、瞳孔が最小になるまでに要した時間、縮瞳率や縮瞳速度及び縮瞳加速度などを求めることが考えられる。ユーザは、この演算によって求められた値などによって、自己の瞳孔対光反応の情報を得ることができる。そうすれば、それとストレスやリラックスの度合いとの相関関係を踏まえた分析をユーザが行うことによって、ユーザは、自己のストレスやリラックスの度合いを客観的に知ることができる。
また、さらに演算の内容として、縮瞳した瞳孔が正常（元の状態）になるまでに要した時間、散瞳率や散瞳速度及び散瞳加速度など求めることが考えられる。そのためには、さらに携帯端末の撮影側面に備えられているライトをＯＦＦにする「ライトＯＦＦ部」を有していても良い。これによれば、さらに正確なストレス度合いを知ることができる。
瞳孔演算の具体的内容については、撮影部分との距離が一定ではないことを考えると、動画中の瞳孔部分の大きさを漫然と測定しても正確な瞳孔変化を測定することができない。正確な測定を実現するためには、撮影部分との距離や角度などによる影響が小さい構成があることが望ましい。具体的には、たとえば図３９を用いて説明すると、虹彩部分（５４０１）の直径αと瞳孔部分（５４０２）の直径βとを除算により比較することで値を求めれば、撮影部分との距離や角度などによって左右されない。例えば、図３９の例でいえば、演算結果は、「α／β」又は「β／α」である。そのため、虹彩部分の直径αと瞳孔部分の直径βとを比較する構成であることが望ましい。
このような比較を実現するためには、前記図３８において説明した虹彩発見手段と瞳孔発見手段を踏まえた上で、虹彩部分及び瞳孔部分の直径を動画上で測定する直径測定手段、及び測定した直径について除算を実施する除算手段を有することで実現可能である。
≪その他≫
その他にも、ユーザを特定するための識別情報として、氏名、年齢及び生年月日、食事傾向などの登録情報を受け付ける登録情報受付部を有していても良い。そして、この登録情報と関連付けて、ユーザの虹彩情報を受け付けると良い。それにより、携帯端末装置のカメラにより虹彩認識をすることにより、ユーザＩＤなどによらずに、確実なユーザ管理を行うことができる。
また、携帯端末装置に外付けのファンを付けることにより、ファンを起動させて同時に眼圧検査をすることもできる。眼圧検査においては、瞬きをすると眼圧が高く測定されてしまう傾向があるため、前記の瞬きした場合の通知機能が眼底検査に役立つものである。眼底検査により、緑内障、網膜剥離、脈絡剥離、虹彩毛様体炎などの病気が判明する。
また、瞳孔変化の情報の価値を高めるためにも、氏名、性別、生年月日、出身地、計測時刻、計測場所（例えば、住居、大学、職場、居酒屋、電車内、公園など）、食前・食後の別、食後の場合には食品成分、職業、計測日の仕事の有無及び強度、及び体組成データや治療履歴などの付加情報を合わせて保持することが望ましい。特に、生年月日については、ストレス評価をするにあたってノイズとなり得るバイオリズムについて、それを加味したストレス評価を実現するために必要なものである。また、携帯端末装置にＧＰＳが搭載されている場合には、そのＧＰＳ機能を用いて、測定場所の経度・緯度を認識し、その情報から高度を割り出す機能を備えていても良い。ストレスは、酸素の濃度でも影響を受け得ることから、付加情報としての意味をもつ。
さらに、瞳孔変化を一覧で出力する瞳孔変化一覧出力部を有していることが望ましい。一覧表示の方法としては、グラフや表やカレンダーなどが考えられる。
図３５は、瞳孔変化一覧出力部において処理される統計情報の内容を示す図である。ユーザＡについて、日付ごとに瞳孔変化が一覧で示されている。これに加えて、例えば、日付欄の部分に測定条件などの情報が記されていても良い。例えば、測定した場所の明るさ、測定時刻、食前・食後の別、前日の睡眠時間、計測日の仕事の有無及び強度などの情報と一緒に示されていれば、ユーザは、自己のストレスの原因を知ることができ、ストレスを減らすための生活を考えることに役立つ。
また、瞳孔の境界が分かりにくい場合には、図３６のように、瞳孔認識部で認識した瞳孔部分を目立たせる工夫をしても良い。図３６では、瞳孔の輪郭が明確になる工夫がされている。
加えて、携帯端末装置は、演算終了後、撮影した動画をリプレイするためのリプレイ部を備えていることが望ましい。このリプレイにおいては、瞳孔認識部における瞳孔認識が正確か否かを確認できるよう、瞳孔と認識した部分について白抜きなどするか、又は、図５１にあるように径として測定に用いた部分を明示する構成にすることが望ましい。
さらには、撮影直後に瞳孔変化を確認できるように、画面中に瞳孔収縮に関するデータを表示しても良い。図５２は、画面中に瞳孔収縮に関するデータを表示した一例である。ライトが明るくなったタイミング、ライトの照度、瞳孔の変化の推移などが一覧になっており、ユーザが一目して演算結果がわかるようになっている。
≪まとめ≫
以上のような機能を有することによって、携帯端末装置において、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定するための技術を提供することができる。
＜ハードウェア的構成＞
図２は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置における構成の一例を示す図である。この図を利用して本装置での各処理におけるそれぞれのハードウェア構成部の働きについて説明する。
この図にあるように、本実施例の携帯端末装置は、各種演算処理を行う「ＣＰＵ（中央演算装置）」（０２０１）と、「主メモリ」（０２０２）と、を備えている。また、「ＨＤＤ」（０２０３）や、外部機器（０２０６）の「Ｉ／Ｆ（インターフェイス）」（０２０７）と情報の送受信を行うための「ネットワークＩ／Ｆ（ネットワークインターフェイス）」（０２０４）や、カメラやライトやディスプレイなどとの間で情報の送受信を行うための「Ｉ／Ｏ（インプット・アウトプット）」（０２０８）も備えている。そして、それらが「システムバス」（０２０５）などのデータ通信経路によって相互に接続され、情報の送受信や処理を行う。ここにおける「外部機器」とは、通常は、管理者端末又は統計処理装置などを指すが、例えばユーザ端末や医療機関の端末を含むものである。
また、「主メモリ」は、各種処理を行うプログラムを「ＣＰＵ」に実行させるために読み出すと同時にそのプログラムの作業領域でもあるワーク領域を提供する。また、この「主メモリ」や「ＨＤＤ」、図示しない「フラッシュメモリ」にはそれぞれ複数のアドレスが割り当てられており、「ＣＰＵ」で実行されるプログラムは、そのアドレスを特定しアクセスすることで相互にデータのやりとりを行い、処理を行うことが可能になっている。本実施例において格納されているプログラムは、携帯端末の動画撮影機能をＯＮにする動画ＯＮプログラムと、携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮプログラムと、撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識プログラムと、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する瞳孔変化演算プログラムなどである。
携帯端末装置の動画ＯＮプログラムによって取得されたユーザの瞳孔画像は、「主メモリ」及び「ＨＤＤ」のアドレスに格納する。そして、携帯端末装置の「ＣＰＵ」において、「主メモリ」に格納されている動画情報を用いて、論理演算処理によって認識した瞳孔の時間変化を演算するという具合である。なお、撮影した動画を録画する場合には、このように動画情報を「ＨＤＤ」に格納するが、他方、撮影した録画をリアルタイムで瞳孔を認識・演算する場合には動画情報を「ＨＤＤ」に格納しないこととなる。
＜処理の流れ＞
図３は、本実施例の携帯端末装置における処理の流れの一例を示すフローチャートである。以下に示すステップは、媒体に記録された計算機（携帯端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
この図の（ａ）にあるように、まず、携帯端末の動画撮影機能をＯＮにする（Ｓ０３０１）。次に、携帯端末の撮影側面に備えられているライトをＯＮにする（Ｓ０３０２）。そして、撮影中の像の中から人を含む動物の目の瞳孔を認識する（Ｓ０３０３）。最後に、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する（Ｓ０３０４）。
図の（ｂ）にあるように、携帯端末の動画撮影機能をＯＮにする動画ＯＮステップ（Ｓ０３０１）と携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮステップ（Ｓ０３０２）は、順番が逆であっても良い。つまり、まず携帯端末の撮影側面に備えられているライトをＯＮにする。次に、携帯端末の動画撮影機能をＯＮにする。そして、撮影中の像の中から人を含む動物の目の瞳孔を認識する。最後に、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算するという処理の流れでも良い。
また、図（ｃ）にあるように、携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮステップ（Ｓ０３０２）と撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識ステップ（Ｓ０３０３）は、順番が逆であっても良い。つまり、まず携帯端末の動画撮影機能をＯＮにする。次に、撮影中の像の中から人を含む動物の目の瞳孔を認識する。そして、携帯端末の撮影側面に備えられているライトをＯＮにする。最後に、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算するという処理の流れでも良い。
なお、以上のような処理の流れの順番については、本実施例以外の実施例についても同様である。
また、さらに縮瞳した瞳孔が正常（元の状態）になるまでに要した時間、散瞳率や散瞳速度及び散瞳加速度など求めるため、携帯端末の撮影側面に備えられているライトをＯＦＦにする「ライトＯＦＦステップ」を有していても良い。これによれば、さらに正確なストレス度合いを知ることができる。
図５３は、ライトＯＦＦステップを有する場合の処理の流れを示す図である。まず、動画ＯＮステップ（Ｓ７１０１）、ライトＯＮステップ（Ｓ７１０２）が存在する。次に、瞳孔認識ステップ（Ｓ７１０３）として認識がスタートし、瞳孔認識に成功したか否かを確認し（Ｓ７１０４）、瞳孔認識に成功するまで認識ステップが繰り返される。この瞳孔認識は、全体の処理が終了するまで継続する。次に、瞳孔変化演算ステップ（Ｓ７１０５）が存在する。この瞳孔変化演算は、全体の処理が終了するまで継続する。次に、ライトＯＦＦステップの内容として、ライトをＯＦＦにするかの確認があり（Ｓ７１０６）、ＹＥＳであればライトをＯＦＦにし（Ｓ７１０８）、ＮＯであればＹＥＳになるまで処理を継続する。ここでのライトをＯＦＦにするかの確認は、予め定められた時間の経過時、あるいは縮動停止時又は一定以下の速度となった時にライトをＯＦＦにするということが考えられる。縮瞳速度などの生体反応に個人差があることを考えると、ライトをＯＦＦにするタイミングは、一律ではなく、縮動停止時又は一定以下の速度となった時とすることが望ましい。最後に、全体の処理が終了か否かの確認があり、ＮＯであれば処理を継続し、ＹＥＳであれば全体の処理を終える。全体の処理が終了か否かの確認は、予め定められた時間の経過時、散動停止時又は一定以下の速度となった時、あるいは認識時の瞳孔の大きさに戻った時にＹＥＳにするということが考えられる。
図４０は、以上のステップをタイムチャートにした場合の一例を示す図である。ユーザがスウィッチ（ＳＷ）をＯＮにすることにより、動画撮影及び瞳孔認識が開始する。その上で、認識が完了して瞳孔認識機能がＯＮ（ｈｉｇｈ）になると同時に又は若干遅れて、瞳孔演算が開始する。その後、予め定められた時間の経過時、あるいは縮動停止時又は一定以下の速度（図面のαで示されている範囲）となった時にライトがＯＦＦになる。そして、更に予め定められた時間の経過時、あるいは散動停止時又は一定以下の速度（図面のβで示されている範囲）となった時、あるいは認識時の瞳孔の大きさに戻った時に全体の処理が終了する。
図４０を用いて縮瞳の推移を検討すれば、ライトがＯＮになっている間に縮瞳し、ＯＦＦになってから散瞳を始め、一定程度散瞳したところで散瞳が止まるということが分かる。
このタイムチャートにおいて、例えば、動画撮影について、瞳孔演算において重要な部分である虹彩部分及び瞳孔部分だけを自動追尾する段階（Ｈｉｇｈ）があってもいい。これにより、瞳孔演算を精度よく実施することができる。
図４４は、瞳孔演算の態様を説明するための図である。モデルデータとして、Ａ及びＢのデータがあったとして、Ａの線のライトを当てた際の縮瞳速度（ａ１）、最も縮瞳した時の縮瞳率（ｈａ）、ライトを切った後の散瞳速度（ａ２）、ライトをＯＦＦにしてから散瞳が止まるまでの時間（ｔａ）などを測定することになる。Ｂの線についても、同じく、ライトを当てた際の縮瞳速度（ｂ１）、最も縮瞳した時の縮瞳率（ｈｂ）、ライトを切った後の散瞳速度（ｂ２）、ライトをＯＦＦにしてから散瞳が止まるまでの時間（ｔｂ）などを測定することになる。このように、ライトをＯＮにしてから縮瞳が始まり、ライトをＯＦＦにしてから散瞳が始まる。そして、この２つのモデルデータについて、縮瞳及び散瞳のいずれも速度が速い方がストレスが弱いという前提で分析をすれば、モデルデータＡよりもモデルデータＢの方がストレスが弱いということが分かる。
以上のステップにより、携帯端末装置を用いて、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定することができる。
＜概要＞
本実施例は、より望ましい実施形態として、実施例１の構成に加えて、ライトの照度を時間経過とともに変化させる機能を有する携帯端末装置を提供する。
以下、本実施例における装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
＜機能的構成＞
図４は、本実施例の携帯端末装置の機能ブロックの一例を示す図である。この図にあるように、本実施例の携帯端末装置（０４０１）は、カメラ部（０４０２）、動画ＯＮ部（０４０３）とライト部（０４０４）とライトＯＮ部（０４０５）と瞳孔認識部（０４０６）と瞳孔変化演算部（０４０７）と照度変化部（０４０８）とを有する。本実施例の特徴は、照度変化部の内容にある。そのため、照度変化部の機能的構成を中心に説明する。なお、その他の機能については、既述の説明と同様であるので、説明を省略する。
「照度変化部」（０４０６）は、ライトＯＮ部にてＯＮにされたライトの照度を時間経過とともに変化させる働きをする。例えば、瞳孔を認識するためには瞳孔に光を当てる必要があるものの、他方で、光の照度が強すぎると瞳孔対光反応を起こしてしまう。そうすると、瞳孔認識部で瞳孔を認識する前に変化が開始してしまい、演算の精度が損なわれる。そこで、照度変化部の働きによって、例えば、瞳孔認識までは弱い照度の光を当てて、それにより瞳孔を認識した時点から、瞳孔対光反応を起こす程度の照度の光を当てることとで、精度の高い演算結果を得ることができる。
さらに、瞳孔変化は、暗室で行うことが望ましいところ、照度変化部の働きによって、最小限の光を利用した操作が可能となり、携帯端末を用いての暗室での利用が可能になる。
＜ハードウェア的構成＞
図５は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置における構成の一例を示す図である。携帯端末装置は、「ＣＰＵ（中央演算装置）」（０５０１）、「主メモリ」（０５０２）、「ＨＤＤ」（０５０３）、「ネットワークＩ／Ｆ」（０５０４）、「Ｉ／Ｏ」（０５０８）、「システムバス」（０５０５）を有しており、外部機器（０５０６）は、「Ｉ／Ｆ」（０５０７）を有している。
これらの図を利用して、本装置での各処理におけるそれぞれのハードウェア構成部のうち本実施例の特徴的な部分について説明し、その他の部分については既述の実施例の説明と同様である。
本実施例における携帯端末装置においては、「主メモリ」に格納されているプログラムの内容として、照度変化プログラムが追加されている。
そのため、「ＣＰＵ」での働きにおいて、ライトＯＮプログラムを用いてＯＮにされたライトの照度は、時間経過とともに変化することになる。
＜処理の流れ＞
図６は、本実施例の携帯端末装置における処理の流れの一例を示すフローチャートである。以下に示すステップは、媒体に記録された計算機（携帯端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
まず、動画ＯＮステップ（Ｓ０６０１）、ライトｌｏｗ ＯＮステップ（Ｓ０６０２）が存在する。次に、瞳孔認識ステップ（Ｓ０６０３）として認識がスタートし、瞳孔認識に成功したか否かを確認し（Ｓ０６０４）、瞳孔認識に成功するまで認識ステップが繰り返される。この瞳孔認識は、全体の処理が終了するまで継続する。
次に、瞳孔変化演算ステップ（Ｓ０６０５）が存在する。この瞳孔変化演算は、全体の処理が終了するまで継続する。次に、照度変化ステップの内容として、ライトを「ｈｉｇｈ」にするか「ｌｏｗ」にするかの確認があり（Ｓ０６０６）、「ｈｉｇｈ」であればライトをｈｉｇｈにする処理（Ｓ０６０７）をし、「ｌｏｗ」であればライトをｌｏｗにする処理（Ｓ０６０８）をする。ここでのライトを「ｈｉｇｈ」にするか「ｌｏｗ」にするかの確認は、例えば、１回目はライトをｈｉｇｈにし、その後、予め定められた時間の経過時、あるいは縮動停止時又は一定以下の速度となった時にライトをｌｏｗにするということが考えられる。縮瞳速度などの生体反応に個人差があることを考えると、ライトをｌｏｗにするタイミングは、一律ではなく、縮動停止時又は一定以下の速度となった時とすることが望ましい。
最後に、全体の処理が終了か否かの確認があり、全体の処理が終了でなければ、ライトを「ｈｉｇｈ」にするか「ｌｏｗ」にするかの確認（Ｓ０６０６）に戻り、全体が終了であれば、全体の処理を終える。全体の処理が終了か否かの確認は、予め定められた時間の経過時、散動停止時又は一定以下の速度となった時、あるいは認識時の瞳孔の大きさに戻った時にＹＥＳにするということが考えられる。
本実施例における処理においては、照度変化ステップを有している。「照度変化ステップ」とは、ライトＯＮ部にてＯＮにされたライトの照度を時間経過とともに変化させる段階である。
図４３は、以上のステップをタイムチャートにした場合の一例を示す図である。ユーザがスウィッチ（ＳＷ）をＯＮにすることにより、動画撮影、ライト及び瞳孔認識が開始する。その上で、認識が完了して瞳孔認識状態がＨｉｇｈになると同時に又は若干遅れて、瞳孔演算が開始し、ライトの照度が上がる。その後、予め定められた時間の経過時、あるいは縮動停止時又は一定以下の速度（図面のαで示されている範囲）となった時にライトがｌｏｗになる。そして、更に予め定められた時間の経過時、あるいは散動停止時又は一定以下の速度（図面のβで示されている範囲）となった時に全体の処理が終了する。
次に、図５４は、認識時の瞳孔の大きさに戻ったときに処理を終了するという構成を可能とするためのタイムチャートを示す図である。ユーザがスウィッチ（ＳＷ）をＯＮにすることにより、動画撮影、ライト及び瞳孔認識が開始する。その上で、認識が完了して瞳孔認識状態がＨｉｇｈになると同時に又は若干遅れて、瞳孔演算が開始し、元の状態の瞳孔の演算をした後、ライトの照度が上がる。その後、予め定められた時間の経過時、あるいは縮動停止時又は一定以下の速度（図面のαで示されている範囲）となった時にライトがｌｏｗになる。そして、更に予め定められた時間の経過時、あるいは散動停止時又は一定以下の速度（図面のβで示されている範囲）となった時、あるいは認識時の瞳孔の大きさに戻った時に全体の処理が終了する。このように、ライトの照度がｈｉｇｈになる前に演算を実施することにより、元の状態の瞳孔を演算して、その演算結果との一致をもって、全体の処理を終了するという構成をとることができる。
図４３を用いて縮瞳の推移を検討すれば、ライトがｌｏｗでＯＮになっている間に縮瞳が緩やかに始まり、ライトがｈｉｇｈになると縮動速度が加速し、ライトが再びｌｏｗになると散瞳が始まり、一定程度散瞳したところで散瞳が止まるということが分かる。
機能的構成でも述べたように、このような処理の流れにより、精度の高い演算結果を得ることができ、かつ、携帯端末を用いての暗室での利用が可能になる。
＜概要＞
本実施例は、より望ましい実施形態として、実施例１から２のいずれか一の構成に加えて、ストレスの度合いを評価する機能を有する携帯端末装置を提供する。
以下、本実施例における装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
＜機能的構成＞
図７は、本実施例の携帯端末装置の機能ブロックの一例を示す図である。この図にあるように、本実施例の携帯端末装置（１００１）は、カメラ部（１００２）と動画ＯＮ部（１００３）とライト部（１００４）とライトＯＮ部（１００５）と瞳孔認識部（１００６）と瞳孔変化演算部（１００７）とストレス評価部（１００８）とを有する。本実施例の特徴は、ストレス評価部の内容にある。そのため、ストレス評価部の機能的構成を中心に説明する。なお、その他の機能については、既述の説明と同様であるので、説明を省略する。
「ストレス評価部」は、瞳孔変化演算部にて演算されて得られた瞳孔変化に基づいてストレス度合いを評価してストレス評価結果を得る働きをする。例えば、瞳孔変化演算部にて演算されて得られた直径値、面積値、瞳孔が最小になるまでに要した時間、縮瞳率、縮瞳速度、縮瞳加速度などのデータをもとに、ストレス度合いを算出する。
ストレス度合いは、％などでの数値であっても良いし、大・中・小などの段階方式でも良い。また、前日比や最大値・最小値との比較値などもしても良い。さらに、睡眠時間や仕事の強度との相関が見て取れる場合には、その相関をもとに、ストレスの原因を導き出しても良い。
図４９は、ストレス評価の方法を示した図である。２０００人の統計データが図面のような曲線になる場合、縮瞳後散瞳までの時間について、中央値ｔからの距離を測定することにより、ストレス評価を示すという方法が考えられる。例えば、図４９では、「＋１σ」よりも中央側については「正常」、「＋１σ」のうち中央値ｔよりも反対側のゾーンの場合には「弱いストレスあり」、「＋２σ」のうち中央値ｔよりの場合には「中度のストレスあり」、「＋２σ」のうち中央値ｔよりも反対側のゾーンの場合には「強いストレスあり」などと判断することが考えられる。さらには「＋２σ」よりも中央値ｔと離れた「ｏｖｅｒ」部分の場合には、「とても強いストレスあり」と判断することが考えられる。
さらに、ストレスの度合いが一定程度を超えた場合には、アラーム音などで知らせる等の機能を備えていても良い。また、親子間や仕事の使用者・労働者間での情報共有を図り、例えば子どもや従業員がストレスを一定程度抱えている場合には、その旨の通知が親や使用者（会社など）に届くというシステムがあれば望ましい。
さらに、ストレス評価結果を一覧で出力するストレス評価一覧出力部が存在することが望ましい。一覧表示の方法としては、グラフや表やカレンダーなどが考えられる。
図３７は、ストレス評価結果出力部において出力される統計情報の内容を示す図である。日付ごとのストレス評価結果がカレンダー方式で一覧になって示されている。これにより、ユーザのストレス度合いを一覧することができ、曜日毎のストレス度合いの特徴等を知ることができる。これに加えて、例えば、日付欄の部分に瞳孔変化情報や測定条件などの情報が記されていても良い。例えば、測定した場所の明るさ、測定時刻、食前・食後の別、前日の睡眠時間、計測日の仕事の有無及び強度などの情報と一緒に示されていれば、ユーザは、自己のストレスの原因を知ることができ、ストレスを減らすための生活を考えることに役立つ。
この機能により、ユーザは、ストレス度合いを数値やマークなどによって一目で分かるようになる。また、原因を導くことができれば、それを普段の生活などに生かすことができる。加えて、アラーム機能を備えたり、他者への通知機能を備えていることにより、ストレスが原因の１つとなるような交通事故などを未然に防ぐことに繋がる。
さらに、実施例３に追加した構成であれば、取得した体組成データとストレス評価結果とを一覧で出力する一覧出力部が存在することが望ましい。このように一覧で表示することにより、体組成データの中で、ストレスに影響を与えている要素が何かを瞳孔変化である場合よりも一見して知ることができる。
＜ハードウェア的構成＞
図８は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置における構成の一例を示す図である。携帯端末装置は、「ＣＰＵ（中央演算装置）」（１１０１）、「主メモリ」（１１０２）、「ＨＤＤ」（１１０３）、「ネットワークＩ／Ｆ」（１１０４）、「Ｉ／Ｏ」（１１０８）、「システムバス」（１１０５）を有しており、外部機器（１１０６）は、「Ｉ／Ｆ」（１１０７）を有している。
これらの図を利用して、本装置での各処理におけるそれぞれのハードウェア構成部のうち本実施例の特徴的な部分について説明し、その他の部分については既述の実施例の説明と同様である。
本実施例における携帯端末装置においては、「主メモリ」に格納されているプログラムの内容として、ストレス評価プログラムが追加されている。
そのため、「ＣＰＵ」での働きにおいて、瞳孔変化演算プログラムによって得られた瞳孔変化に基づいて、ストレス度合いを評価することになる。
＜処理の流れ＞
図９は、本実施例の携帯端末装置における処理の流れの一例を示すフローチャートである。以下に示すステップは、媒体に記録された計算機（携帯端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
動画ＯＮステップ（Ｓ１２０１）、ライトＯＮステップ（Ｓ１２０２）、瞳孔認識ステップ（Ｓ１２０３）、瞳孔変化演算ステップ（Ｓ１２０４）、ストレス評価ステップ（Ｓ１２０５）を有している。これらの図を利用して、本装置での各処理の流れのうち本実施例の特徴的な部分について説明し、その他の部分については、既述の実施例の説明と同様である。
本実施例における処理においては、ストレス評価ステップを有している。「ストレス評価ステップ」とは、瞳孔変化演算ステップにて演算されて得られた瞳孔変化に基づいてストレス度合いを評価してストレス評価結果を得る段階である。
機能的構成でも述べたように、ストレス度合いは、％などでの数値であっても良いし、大・中・小などの段階方式でも良い。また、前日比や最大値・最小値との比較値などもしても良い。さらに、睡眠時間や仕事の強度との相関が見て取れる場合には、その相関をもとに、ストレスの原因を導き出しても良い。
さらに、ストレスの度合いが一定程度を超えた場合には、アラーム音などで知らせる等のアラームステップを備えていても良い。また、親子間や仕事の使用者・労働者間での情報共有を図り、例えば子どもや従業員がストレスを一定程度抱えている場合には、その旨のアラームが親や使用者（会社など）に届くというシステムがあれば更に望ましい。
さらに、ストレス評価結果を一覧で出力するストレス評価一覧出力ステップが存在することが望ましい。一覧表示の方法としては、グラフや表やカレンダーなどが考えられる。
このような処理の流れにより、ユーザは、ストレス度合いを数値やマークなどによって一目で分かるようになる。また、原因を導くことができれば、それを普段の生活などに生かすことができる。加えて、アラーム機能を備えたり、他者への通知機能を備えていることにより、ストレスが原因の１つとなるような交通事故などを未然に防ぐことに繋がる。
さらに、実施例３に追加した構成であれば、取得した体組成データとストレス評価結果とを一覧で出力する一覧出力ステップが存在することが望ましい。このように一覧で表示することにより、体組成データの中で、ストレスに影響を与えている要素が何かを瞳孔変化である場合よりも一見して知ることができる。
＜概要＞
本実施例は、より望ましい実施形態として、実施例１から３のいずれか一の構成に加えて、瞳孔変化を所定のアドレスに対して送信する機能を有する携帯端末装置を提供する。
以下、本実施例における装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
＜機能的構成＞
図１０は、本実施例の携帯端末装置の機能ブロックの一例を示す図である。この図にあるように、本実施例の携帯端末装置（１３０１）は、カメラ部（１３０２）と動画ＯＮ部（１３０３）とライト部（１３０４）とライトＯＮ部（１３０５）と瞳孔認識部（１３０６）と瞳孔変化演算部（１３０７）と瞳孔変化送信部（１３０８）とを有する。本実施例の特徴は、瞳孔変化送信部の内容にある。そのため、瞳孔変化送信部の機能的構成を中心に説明する。なお、その他の機能については、既述の説明と同様であるので、説明を省略する。
「瞳孔変化送信部」は、瞳孔変化演算部にて演算されて得られた瞳孔変化を所定のアドレスに対して送信する働きをする。例えば、外部機器の一例である統計処理のための統計処理装置の格納領域であるＨＤＤや主メモリに対して瞳孔変化情報を送信する。
また、これらに加えて、外部機器においてストレス評価がなされた場合には、その外部機器からストレス評価結果が送信されてくるという構成にしておくことが望ましい。そうすると、携帯端末装置においては、ストレス評価結果受信部を備えていることが望ましい。
また、外部機器においてストレス評価値と関連付けて対策紹介情報を保持しておき、ストレス評価値が高い場合には、例えばストレス原因となっている要素を解消するような提案や病院・店舗の紹介などの紹介情報を共に受信しても良い。
＜ハードウェア的構成＞
図１１は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置における構成の一例を示す図である。携帯端末装置は、「ＣＰＵ（中央演算装置）」（１４０１）、「主メモリ」（１４０２）、「ＨＤＤ」（１４０３）、「ネットワークＩ／Ｆ」（１４０４）、「Ｉ／Ｏ」（１４０８）、「システムバス」（１４０５）を有しており、外部機器（１４０６）は、「Ｉ／Ｆ」（１４０７）を有している。
これらの図を利用して、本装置での各処理におけるそれぞれのハードウェア構成部のうち本実施例の特徴的な部分について説明し、その他の部分については既述の実施例の説明と同様である。
本実施例における携帯端末装置においては、「主メモリ」に格納されているプログラムの内容として、瞳孔変化送信プログラムが追加されている。
そのため、「ＣＰＵ」での働きにおいて、瞳孔変化演算プログラムによって得られた瞳孔変化情報について、例えば携帯端末装置の「ＨＤＤ」や「主メモリ」に格納したり、あるいは外部機器又は図示しない統計処理装置の主メモリまたはＨＤＤに送信することになる。
＜処理の流れ＞
図１２は、本実施例の携帯端末装置における処理の流れの一例を示すフローチャートである。以下に示すステップは、媒体に記録された計算機（携帯端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
動画ＯＮステップ（Ｓ１５０１）、ライトＯＮステップ（Ｓ１５０２）、瞳孔認識ステップ（Ｓ１５０３）、瞳孔変化演算ステップ（Ｓ１５０４）、瞳孔変化送信ステップ（Ｓ１５０５）を有している。これらの図を利用して、本装置での各処理の流れのうち本実施例の特徴的な部分について説明し、その他の部分については、既述の実施例の説明と同様である。
本実施例における処理においては、瞳孔変化送信ステップを有している。「瞳孔変化送信ステップ」とは、瞳孔変化演算ステップにて演算されて得られた瞳孔変化を所定のアドレスに対して送信する段階である。機能的構成でも述べたように、送信先は、当該携帯端末装置であっても良いし、統計処理装置であっても良い。
以上により、瞳孔変化情報を蓄積するために必要な携帯端末装置の記憶領域を節約することができる。また、統計処理を携帯端末以外で実施することにより、携帯端末装置の負荷を軽減することができる。
＜概要＞
本実施例は、より望ましい実施形態として、実施例３又は３に追加された実施例４の構成に加えて、ストレス評価結果を所定のアドレスに対して送信する機能を有する携帯端末装置を提供する。
以下、本実施例における装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
＜機能的構成＞
図１３は、本実施例の携帯端末装置の機能ブロックの一例を示す図である。この図にあるように、本実施例の携帯端末装置（１９０１）は、カメラ部（１９０２）と動画ＯＮ部（１９０３）とライト部（１９０４）とライトＯＮ部（１９０５）と瞳孔認識部（１９０６）と瞳孔変化演算部（１９０７）とストレス評価部（１９０８）とストレス評価結果送信部（１９０９）を有する。本実施例の特徴は、ストレス評価結果送信部の内容にある。そのため、ストレス評価結果送信部の機能的構成を中心に説明する。なお、その他の機能については、既述の説明と同様であるので、説明を省略する。
「ストレス評価結果送信部」は、ストレス評価部にて得られたストレス評価結果を所定のアドレスに対して送信する働きをする。例えば、携帯端末装置のＨＤＤや主メモリの所定のアドレスに対してストレス評価を送信する。あるいは、統計処理のための統計処理装置の格納領域であるＨＤＤや主メモリに対してストレス評価情報を送信する。それにより、ストレス評価情報の蓄積が可能となる。
＜ハードウェア的構成＞
図１４は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置における構成の一例を示す図である。携帯端末装置は、「ＣＰＵ（中央演算装置）」（２００１）、「主メモリ」（２００２）、「ＨＤＤ」（２００３）、「ネットワークＩ／Ｆ」（２００４）、「Ｉ／Ｏ」（２００８）、「システムバス」（２００５）を有しており、外部機器（２００６）は、「Ｉ／Ｆ」（２００７）を有している。
これらの図を利用して、本装置での各処理におけるそれぞれのハードウェア構成部のうち本実施例の特徴的な部分について説明し、その他の部分については既述の実施例の説明と同様である。
本実施例における携帯端末装置においては、「主メモリ」に格納されているプログラムの内容として、ストレス評価結果送信プログラムが追加されている。
そのため、「ＣＰＵ」での働きにおいて、ストレス評価プログラムにより生成されたストレス評価情報について、例えば外部機器又は図示しない統計処理装置の主メモリまたはＨＤＤに送信することになる。
＜処理の流れ＞
図１５は、本実施例の携帯端末装置における処理の流れの一例を示すフローチャートである。以下に示すステップは、媒体に記録された計算機（携帯端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
動画ＯＮステップ（Ｓ２１０１）、ライトＯＮステップ（Ｓ２１０２）、瞳孔認識ステップ（Ｓ２１０３）、瞳孔変化演算ステップ（Ｓ２１０４）、ストレス評価ステップ（Ｓ２１０５）、ストレス評価結果送信ステップ（Ｓ２１０６）を有している。これらの図を利用して、本装置での各処理の流れのうち本実施例の特徴的な部分について説明し、その他の部分については、既述の実施例の説明と同様である。
本実施例における処理においては、ストレス評価結果送信ステップを有している。「ストレス評価結果送信ステップ」とは、ストレス評価ステップにて得られたストレス評価結果を所定のアドレスに対して送信する段階である。送信先としては、例えば、統計処理のために設けられた統計処理装置であっても良い。
以上により、ストレス評価結果を蓄積するために必要な携帯端末装置の記憶領域を節約することができる。また、統計処理を携帯端末以外で実施することにより、携帯端末装置の負荷を軽減することができる。
＜概要＞
本実施例の発明は、光を当てた際の瞳孔の変化を連続静止画撮影して、撮影画像の瞳孔変化を時間単位で演算するための機能を携帯端末装置に読取実行可能に記録したプログラムである。また、そのプログラムが読取実行可能に記録された携帯端末装置である。なお、本実施例の構成に実施例２から５のいずれか一の構成を追加したものも、本発明に含まれる。
通常、動画よりも静止画の方が解像度が高い。そのため、動画に代えて連続静止画とすることにより、解像度が上がり、瞳孔の境界部分の認識が正確になる。
以下、本実施例の携帯端末装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
＜機能的構成＞
図１６は、本実施例の携帯端末装置の機能ブロックの一例である。この図にあるように、本実施例の携帯端末装置（２５０１）は、カメラ部（２５０２）と連続ＯＮ部（２５０３）とライト部（２５０４）とライトＯＮ部（２５０５）と瞳孔認識部（２５０６）と瞳孔変化演算部（２５０７）とを有する。本実施例の特徴的な機能は、連続ＯＮ部にある。そのため、本実施例では、連続ＯＮ部の機能を中心に説明する。
「連続ＯＮ部」は、携帯端末の連続静止画撮影機能をＯＮにする働きをする。この場合でも、瞳孔対光反応を調べるためには連続静止画を撮影していない時にもライトを瞳孔に充てておくことが必要なので、「ライトＯＮ部」は、前述の実施例と同じように、「ライト部」を継続的にＯＮにするものである。
この連続ＯＮ部における「撮影」とは、同時に撮影した静止画を保存する場合を含むが、保存を必須としない。例えば、連続ＯＮ部においては連続静止画を撮影するだけで、その撮影中の連続静止画を後述する「瞳孔認識部」及び「瞳孔変化演算部」にてリアルタイムで演算するという態様も本実施例に含まれるものである。
ここにおける撮影中の連続静止画には、瞳孔が含まれていることが前提になるが、瞳孔のみではなく、瞳孔以外の瞳孔周辺の身体の部分も含まれていることが望ましい。人間の眼球には、その者の健康状態が様々な形で現れる。例えば、アレルギー性結膜炎や感染性結膜炎やぶどう膜炎あるいはドライアイなどにおいては、目の充血を引き起こすがある。そのため、結膜に生じた例えば目の充血の事実によって、上記の症状を知ることができるという作用がある。
この連続静止画の撮影間隔については、短い間隔である方が望ましい。短ければ、動画に近い情報を得ることができ、正確な瞳孔が最小になるまでに要した時間、縮瞳率や縮瞳速度及び縮瞳加速度を求めることができるからである。短い間隔とは、例えば、２秒間に１枚、更には１秒間に１枚の静止画を撮影するなどである。
さらに、この撮影間隔については、瞳孔変化演算部での演算に影響するので、瞳孔変化情報と関連付けた情報として存在することが望ましい。例えば、１秒間に１枚の静止画を撮影するのであれば、静止画により、１秒間ごとの瞳孔変化が明らかになっていることになる。
＜ハードウェア的構成＞
図１７は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置における構成の一例を示す図である。この図を利用して本装置での各処理におけるそれぞれのハードウェア構成部の働きについて説明する。
この図にあるように、本実施例の携帯端末装置は、各種演算処理を行う「ＣＰＵ」（２６０１）と、「主メモリ」（２６０２）と、を備えている。また、「ＨＤＤ」（２６０３）や、外部機器（２６０６）の「Ｉ／Ｆ」（２６０７）と情報の送受信を行うための「ネットワークＩ／Ｆ」（２６０４）や、カメラやライトやディスプレイなどとの間で情報の送受信を行うための「Ｉ／Ｏ」（２６０８）も備えている。そして、それらが「システムバス」（２６０５）などのデータ通信経路によって相互に接続され、情報の送受信や処理を行う。
本実施例において格納されているプログラムは、携帯端末の動画撮影機能をＯＮにする連続ＯＮプログラムと、携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮプログラムと、撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識プログラムと、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する瞳孔変化演算プログラムなどである。本実施例における特徴的なプログラムは、連続ＯＮプログラムである。その他のプログラムについては、既述の説明と同様である。
携帯端末装置の連続ＯＮプログラムによって取得されたユーザの瞳孔画像は、「主メモリ」及び「ＨＤＤ」のアドレスに格納する。そして、携帯端末装置の「ＣＰＵ」において、「主メモリ」に格納されている連続静止画情報を用いて、論理演算処理によって認識した瞳孔の時間変化を演算するという具合である。なお、撮影した連続静止画を保存する場合には、このように連続静止画情報を「ＨＤＤ」に格納するが、他方、撮影した連続静止画をリアルタイムで瞳孔を認識・演算する場合には連続静止画情報を「ＨＤＤ」に格納しないこととなる。
＜処理の流れ＞
図１８は、本実施例の携帯端末装置における処理の流れの一例を示すフローチャートである。なお、以下に示すステップは、媒体に記録された計算機（携帯端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
この図にあるように、まず、携帯端末の連続静止画撮影機能をＯＮにする（Ｓ２７０１）。次に、携帯端末の撮影側面に備えられているライトをＯＮにする（Ｓ２７０２）。そして、撮影中の像の中から人を含む動物の目の瞳孔を認識する（Ｓ２７０３）。最後に、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する（Ｓ２７０４）。
ここにおける携帯端末の連続静止画撮影機能をＯＮにする連続ＯＮステップ（Ｓ２７０１）と携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮステップ（Ｓ２７０２）は、順番が逆であっても良い。つまり、まず携帯端末の撮影側面に備えられているライトをＯＮにする。次に、携帯端末の連続静止画撮影機能をＯＮにする。そして、撮影中の像の中から人を含む動物の目の瞳孔を認識する。最後に、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算するという処理の流れでも良い。
以上のステップにより、携帯端末装置を用いて、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定することができる。
＜概要＞
本実施例は、より望ましい実施形態として、実施例４又は瞳孔変化送信部を有する実施例６の構成を備えた携帯端末装置と繋がれている統計処理装置を提供する。統計処理装置の構成の概要としては、携帯端末装置から瞳孔変化情報を受信して、瞳孔変化情報を蓄積して、統計処理を行うというものである。
このような統計処理をすることにより、例えば、ユーザからすれば、適切な診断を得られる点、及び適切な将来予測を立てられるという点にメリットがある。また、提供者からすれば、膨大なユーザ情報を獲得して診断の精度を上げる、有料の情報提供サービスをする、サプリメント・薬や癒し音楽などの商品又は役務の提供及び開発に生かす、医学的研究に生かすというメリットがある。このことは、本実施例に限らず、他の実施例における統計処理についても妥当する。
以下、本実施例における装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
＜機能的構成＞
図１９は、本実施例の携帯端末装置及び統計処理装置の機能ブロックの一例を示す図である。この図にあるように、本実施例の携帯端末装置（２８０１）は、カメラ部（２８０１）と動画ＯＮ部（２８０３）とライト部（２８０４）とライトＯＮ部（２８０５）と瞳孔認識部（２８０６）と瞳孔変化演算部（２８０７）と瞳孔変化送信部（２８０８）とを有する。そして、本実施例における統計処理装置（２８０９）は、瞳孔変化受信部（２８１０）、瞳孔変化蓄積部（２８１１）、瞳孔変化統計処理部（２８１２）とを有する。そして、瞳孔変化統計処理部は、ユーザ（２８１３）や管理者（２８１４）や医療機関などの第三者（２８１５）と繋がっている。このユーザ（２８１３）は、瞳孔変化送信部から瞳孔変化を統計処理装置に送信した当該携帯端末装置を含むものである。本実施例の特徴は、統計処理装置の各部の内容にある。そのため、統計処理装置の各部の機能的構成を中心に説明する。なお、その他の機能については、既述の説明と同様であるので、説明を省略する。
「瞳孔変化受信部」は、携帯端末装置から送信された瞳孔変化を受信する働きをする。そのため、例えば、直径値や面積値に加えて、瞳孔が最小になるまでに要した時間、縮瞳率や縮瞳速度及び縮瞳加速度などの情報を統計処理装置が受信することとなる。また、これに合わせて、氏名、性別、生年月日、出身地、計測時刻、計測場所（例えば、住居、大学、職場、居酒屋、電車内、公園など）、食前・食後の別、食後の場合には食品成分、職業、計測日の仕事の有無及び強度、及び体温・心拍・血圧・皮膚電気抵抗・体動・呼吸とその変動などの生体データ、並びに体組成データや治療履歴などの付加情報についても受信することが望ましい。そして、この付加情報については、後の統計処理に用いやすいように、瞳孔変化情報と関連付けて保持することが望ましい。
「瞳孔変化蓄積部」は、受信した瞳孔変化を蓄積する働きをする。蓄積の態様については、まずは、ユーザごとに蓄積する態様が考えられる。そうすれば、ユーザのストレス状態の変化を、蓄積された瞳孔変化情報の比較という形で把握することができる。また、次に、ユーザでは分けることなく、日にちごとに分けるという方法がある。この方法によれば、例えば天候がストレスに与える影響などを分析するための蓄積が可能となる。
「瞳孔変化統計処理部」は、蓄積された瞳孔変化を統計処理する働きをする。統計処理としては、前記のように、ユーザごとに統計処理する方法、日付ごとに統計処理する方法、付加情報ごとに統計処理する方法等が考えられる。
前記のように、統計処理をすることのメリットとしては、ユーザからすれば、適切な診断を得られる点、及び適切な将来予測を立てられるという点にあり、また、提供者からすれば、膨大なユーザ情報を獲得して診断の精度を上げる、有料の情報提供サービスをする、サプリメント・薬や癒し音楽などの商品又は役務の提供及び開発に生かす、医学的研究に生かすという点にある。そこで、統計処理装置は、統計処理した結果をユーザ等に開示するための機能を備えていても良い。開示するための機能としては、例えば、統計処理装置において、ユーザ等の端末に対して統計情報を送信するための統計情報送信部を有し、かつ、ユーザ等の端末において、統計処理装置から送信された統計情報を受信するための統計情報受信部を備えている構成が考えられる。その上で、ユーザ等の端末において、統計情報を出力するための統計情報出力部を有していれば、例えば、ユーザは、携帯端末装置のディスプレイ等を通して統計情報を認識することができる。
例えば、ユーザから自覚しているストレス度合いを入力してもらい、そのストレス度合いと瞳孔変化によって導かれるストレス度合いを比較するという方法が考えられる。図４１は、縮瞳速度を横軸にとり、ストレス度合いを縦軸にとった場合の図である。統計値としてのデータが曲線（５６０１）のようになったとき、ユーザの自覚症状としてのストレス度合いがＹ１の部分（５６０２）であったとしても、縮瞳速度からすればストレス度合いがＹ２の部分（５６０３）である場合には、統計処理及び実際の縮瞳速度に基づいて、Ｙ２の部分に相当するストレス度合いであると診断し、その旨を出力することができるという具合である。このようにすることで、ユーザは、適切な診断を得ることができる。
次に、図４２は、縮瞳速度を横軸にとり、ストレス度合いを縦軸にとった場合の特定の作業中の時間毎のストレス変化を示す図である。統計処理の結果導き出された曲線（５７０１）は、例えば、Ｚ０の部分から１時間後にはＺ１の部分に、その１時間後にはＺ２の部分に、という具合に時間毎のストレス変化を表している。この図において、例えば、当該特定の作業の現時点でのストレス状態がＺ２の部分であるとすれば、その３時間後に対応する部分はＺ５の部分であり、ストレス強度としてはＹ３の部分（５７０２）であることが予測できる。このように、時間毎のストレス変化を統計処理することによって、適切な将来予測をすることができる。
これらの統計処理は、前記のように付加情報についても同時に受信していれば、時間毎の変化に限らず、天候、食事、仕事環境、趣味等ごとに統計処理をすることができる。そうすれば、これらを総合的に組み合わせることによって、精度の高いストレス診断をすることができるし、ストレス原因を特定するための情報を得ることもできる。また、そのストレス原因は、個人ごとのストレス原因であっても良いし、全ユーザに共通する事項の場合には一般に妥当するストレス原因であると考えることもできる。このように一般的に妥当するストレス原因の場合には、その事実を物語る情報の価値は社会的に高くなるので、有料での情報提供をすることにも繋がる。さらに、ストレス原因の特定に加えて、ストレスを軽くする要素を発見できれば、その要素を提示したり、ストレス原因を解消するような解決案を提示したりする機能を備えていても良い。これらの統計処理の意義や使い道については、本実施例に限らず、本発明における統計処理の全般に妥当するものである。
＜ハードウェア的構成＞
図２０は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置及び統計処理装置における構成の一例を示す図である。携帯端末装置は、「ＣＰＵ（中央演算装置）」（２９０１）、「主メモリ」（２９０２）、「ＨＤＤ」（２９０３）、「ネットワークＩ／Ｆ」（２９０４）、「Ｉ／Ｏ」（２９１２）、「システムバス」（２９０５）を有しており、統計処理装置（２９０６）は、「Ｉ／Ｆ」（２９０７）、「ディスプレイ」（２９０８）、「主メモリ」（２９０９）、「ＣＰＵ」（２９１０）、「フレームメモリ」（２９１１）を有している。
これらの図を利用して、本装置での各処理におけるそれぞれのハードウェア構成部のうち本実施例の特徴的な部分について説明し、その他の部分については既述の実施例の説明と同様である。
本実施例における特徴は、統計処理装置にある。携帯端末装置においては、携帯端末装置の「主メモリ」に格納されている動画情報と瞳孔変化情報が「瞳孔変化送信プログラム」によって「ネットワークＩ／Ｆ」を通じて統計処理装置に送信され、統計処理装置においては、それらの情報が「瞳孔変化受信プログラム」によって「Ｉ／Ｆ」を通じて受信され、それが統計処理装置上の「主メモリ」ないし図示しない「ＨＤＤ」に格納され、「瞳孔変化蓄積プログラム」によって瞳孔変化情報が「主メモリ」ないし図示しない「ＨＤＤ」に蓄積される。その蓄積された瞳孔変化情報が、統計処理装置の「ＣＰＵ」の働きによって、「瞳孔変化統計処理プログラム」を用いて統計処理を行う、という具合である。
さらに、機能的構成で述べたように、統計処理装置の「主メモリ」には、統計処理結果を携帯端末に送信するための統計情報送信プログラムを格納していても良いし、携帯端末装置の「主メモリ」には、送信された統計処理結果を統計処理装置から受信するための統計情報受信プログラム、及びその統計情報を出力するための統計情報出力プログラムを格納していても良い。
＜処理の流れ＞
図２１は、本実施例の携帯端末装置及び統計処理装置における処理の流れの一例を示すフローチャートである。以下に示すステップは、媒体に記録された計算機（携帯端末及び統計処理端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
携帯端末装置は、動画ＯＮステップ（Ｓ３００１）、ライトＯＮステップ（Ｓ３００２）、瞳孔認識ステップ（Ｓ３００３）、瞳孔変化演算ステップ（Ｓ３００４）、瞳孔変化送信ステップ（Ｓ３００５）を有している。そして、統計処理装置は、瞳孔変化受信ステップ（Ｓ３００６）、瞳孔変化蓄積ステップ（Ｓ３００７）、瞳孔変化統計処理ステップ（Ｓ３００８）を有している。これらの図を利用して、本装置での各処理の流れのうち本実施例の特徴的な部分について説明し、その他の部分については、既述の実施例の説明と同様である。
本実施例における処理においては、統計処理装置内での処理ステップが加わる。統計処理装置における「瞳孔変化受信ステップ」とは、携帯端末装置における瞳孔変化送信ステップを実行した結果として送信された瞳孔変化を受信する段階である。また、統計処理装置における「瞳孔変化蓄積ステップ」とは、受信した瞳孔変化を蓄積する段階である。そして、統計処理装置における「瞳孔変化統計処理ステップ」とは、蓄積された瞳孔変化を統計処理する段階である。
機能的構成でも述べたように、統計処理の態様としてはユーザごとに限定されない。また、例えば、測定した場所の明るさ、測定時刻、食前・食後の別、前日の睡眠時間、計測日の仕事の有無及び強度などの情報と関連付けることにより、ユーザに開示される際には、ユーザのストレス原因の分析などに資する。
ユーザに統計情報を開示するための工夫として、さらに、統計処理装置において、携帯端末に対して統計情報を送信するための統計情報送信ステップを有し、かつ、携帯端末装置において、統計処理装置から送信された統計情報を受信するための統計情報受信ステップと、受信した統計情報を出力するための統計情報出力ステップとを有する処理の流れとすることも考えられる。
このような処理の流れにより、瞳孔対光反応の統計処理を行うことができ、もって、ユーザが自己のストレス原因の特徴等を知るための情報を生成することができる。
＜概要＞
本実施例は、より望ましい実施形態として、実施例４に実施例５の構成が追加された携帯端末装置と繋がれている統計処理装置を提供する。統計処理装置の構成の概要としては、携帯端末装置からストレス評価結果と瞳孔変化を受信して、それらを蓄積して、統計処理を行うというものである。
以下、本実施例における装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
＜機能的構成＞
図２２は、本実施例の携帯端末装置及び統計処理装置の機能ブロックの一例を示す図である。この図にあるように、本実施例の携帯端末装置（３４０１）は、カメラ部（３４０２）と動画ＯＮ部（３４０３）とライト部（３４０４）とライトＯＮ部（３４０５）と瞳孔認識部（３４０６）と瞳孔変化演算部（３４０７）とストレス評価部（３４０８）と、ストレス評価結果送信部（３４０９）と瞳孔変化送信部（３４１４）を有する。そして、本実施例における統計処理装置（３４１０）は、ストレス評価結果受信部（３４１１）、ストレス評価結果蓄積部（３４１２）、ストレス評価統計処理部（３４１３）と瞳孔変化受信部（３４１５）と瞳孔変化蓄積部（３４１６）を有する。そして、ストレス評価統計処理部は、ユーザ（３４１７）や管理者（３４１８）や医療機関などの第三者（３４１９）と繋がっている。本実施例の特徴は、統計処理装置の各部の内容にある。そのため、統計処理装置の各部の機能的構成を中心に説明する。なお、その他の機能については、既述の説明と同様であるので、説明を省略する。
「ストレス評価結果受信部」は、携帯端末装置から送信されたストレス評価結果を受信する働きをする。そのため、例えば、ストレスの度合いを％などでの数値、大・中・小などの段階、前日比や最大値・最小値との比較値などで示したストレス評価を統計処理装置が受信することとなる。
「ストレス評価結果蓄積部」は、受信したストレス評価結果を蓄積する働きをする。蓄積の態様については、ユーザごとに蓄積する態様が考えられる。そうすれば、ユーザのストレス評価結果の変化を、蓄積されたストレス評価結果の変化という形で把握することができる。また、次に、ユーザでは分けることなく、日にちごとに分けるという方法がある。この方法によれば、例えば天候がストレス評価結果に与える影響などを分析するための蓄積が可能となる。
「ストレス評価統計処理部」は、蓄積されたストレス評価結果及び瞳孔変化を統計処理する働きをする。統計処理としては、前記のように、ユーザごとに統計処理する方法、日付ごとに統計処理する方法等が考えられる。
さらに、前記の実施例でも述べたように、統計処理装置は、統計処理した結果をユーザ等に開示するための機能を備えていても良い。開示するための機能としては、例えば、統計処理装置において、ユーザ等の端末に対して統計情報を送信するための統計情報送信部を有し、かつ、ユーザ等の端末において、統計処理装置から送信された統計情報を受信するための統計情報受信部を備えている構成が考えられる。
図４７は、ユーザ側での出力の態様を示す図である。縦軸をストレス評価値として、横軸を瞳孔変化速度としたグラフである。瞳孔変化速度が高ければ高いほどストレス評価値が小さくなるということが分かる。
さらに、図４８は、ユーザ側での出力の態様を示す図である。縦軸をストレス評価値として、横軸を体組成量としたグラフである。体脂肪率、体重、ＢＭＩ、脈拍については、体組成量が高ければ高いほどストレス評価値が高くなるということが分かる。他方、基礎代謝については、体組成量が高ければ高いほどストレス評価値が低くなるということが分かる。このような統計情報が得られれば、ユーザ等は、ストレスの原因を客観的に分析することができるようになる。しかも、瞳孔変化との比較より、ストレス評価値の方がストレスとの相関が明確なので、一見して分かり易い。
以上により、統計処理装置においてすべきストレス評価の処理を欠くユーザの携帯端末装置で行ってから受信することができ、サーバでの負担を軽減するという効果がある。
＜ハードウェア的構成＞
図２３は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置及び統計処理装置における構成の一例を示す図である。携帯端末装置は、「ＣＰＵ（中央演算装置）」（３５０１）、「主メモリ」（３５０２）、「ＨＤＤ」（３５０３）、「ネットワークＩ／Ｆ」（３５０４）、「Ｉ／Ｏ」（３５１２）、「システムバス」（３５０５）を有しており、統計処理装置（３５０６）は、「Ｉ／Ｆ」（３５０７）、「ディスプレイ」（３５０８）、「主メモリ」（３５０９）、「ＣＰＵ」（３５１０）、「フレームメモリ」（３５１１）を有している。
これらの図を利用して、本装置での各処理におけるそれぞれのハードウェア構成部のうち本実施例の特徴的な部分について説明し、その他の部分については既述の実施例の説明と同様である。
本実施例における特徴は、統計処理装置にある。携帯端末装置においては、携帯端末装置の「主メモリ」に格納されているストレス評価情報が「ストレス評価結果送信プログラム」によって「ネットワークＩ／Ｆ」を通じて統計処理装置に送信され、統計処理装置においては、それらの情報が「ストレス評価結果受信プログラム」によって「Ｉ／Ｆ」を通じて受信され、それが統計処理装置上の「主メモリ」ないし図示しない「ＨＤＤ」に格納され、「ストレス評価結果蓄積プログラム」によってストレス評価情報が「主メモリ」ないし図示しない「ＨＤＤ」に蓄積される。その蓄積されたストレス評価情報が、統計処理装置の「ＣＰＵ」の働きによって、「ストレス評価統計処理プログラム」を用いて統計処理を行う、という具合である。
さらに、統計処理装置の「主メモリ」には、統計処理結果を携帯端末に送信するための統計情報送信プログラムを格納していても良いし、携帯端末装置の「主メモリ」には、送信された統計処理結果を統計処理装置から受信するための統計情報受信プログラム、及びその統計情報を出力するための統計情報出力プログラムを格納していても良い。
＜処理の流れ＞
図２４は、本実施例の携帯端末装置及び統計処理装置における処理の流れの一例を示すフローチャートである。以下に示すステップは、媒体に記録された計算機（携帯端末、統計処理端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
携帯端末装置は、動画ＯＮステップ（Ｓ３６０１）、ライトＯＮステップ（Ｓ３６０２）、瞳孔認識ステップ（Ｓ３６０３）、瞳孔変化演算ステップ（Ｓ３６０３）、ストレス評価ステップ（Ｓ３６０４）、ストレス評価結果送信ステップ（Ｓ３６０５）、瞳孔変化送信ステップ（Ｓ３６０６）を有している。そして、統計処理装置は、瞳孔変化受信ステップ（Ｓ３６０７）、瞳孔変化蓄積ステップ（Ｓ３６０８）、ストレス評価結果受信ステップ（Ｓ３６０９）、ストレス評価結果蓄積ステップ（Ｓ３６１０）、ストレス評価統計処理ステップ（Ｓ３６１１）を有している。これらの図を利用して、本装置での各処理の流れのうち本実施例の特徴的な部分について説明し、その他の部分については、既述の実施例の説明と同様である。
本実施例における処理においては、統計処理装置内での処理ステップが加わる。統計処理装置における「ストレス評価結果受信ステップ」とは、携帯端末装置におけるストレス評価結果送信ステップを実行した結果として送信されたストレス評価結果を受信する段階である。このストレス評価結果は、瞳孔変化と関連付けて送られることになる。それにより、統計処理装置内でストレス評価をする負担を軽減することができる。また、統計処理装置におけるストレス評価結果蓄積ステップ」とは、受信したストレス評価結果を蓄積する段階である。そして、統計処理装置における「ストレス評価統計処理ステップ」とは、蓄積されたストレス評価結果を統計処理する段階である。
「ストレス評価結果受信ステップ」は、携帯端末装置でのストレス評価結果送信ステップの後であれば、統計処理装置内での先後関係を問わない。例えば、瞳孔変化受信ステップよりも先であっても良い。次に、「ストレス評価結果蓄積部」は、統計処理装置内での体組成データ受信ステップの後であれば、他の処理との先後関係を問わない。同様に、「瞳孔変化受信ステップ」と「瞳孔変化蓄積ステップ」についても、ストレス評価結果受信ステップ及びストレス評価結果蓄積ステップとの先後関係を問わない。もっとも、「ストレス評価統計処理ステップ」は、蓄積した瞳孔変化とストレス評価結果を用いたものになるので、ストレス評価結果蓄積ステップと瞳孔変化蓄積ステップのいずれもが終了した後になされる。
統計処理の態様としてはユーザごとに限定されない。また、例えば、測定した場所の明るさ、測定時刻、食前・食後の別、前日の睡眠時間、計測日の仕事の有無及び強度などの情報と関連付けることにより、ユーザに開示される際には、ユーザの体組成データの分析などに資する。
ユーザに統計情報を開示するための工夫として、さらに、統計処理装置において、携帯端末に対して統計情報を送信するための統計情報送信ステップを有し、かつ、携帯端末装置において、統計処理装置から送信された統計情報を受信するための統計情報受信ステップと、受信した統計情報を出力するための統計情報出力ステップとを有する処理の流れとすることも考えられる。
＜概要＞
本実施例の発明は、光を当てた際の瞳孔の変化を動画撮影して、瞳孔変化を時間単位で演算するための動画情報を保持し、外部機器に送信するための機能を携帯端末装置に読取実行可能に記録したプログラムである。また、そのプログラムが読取実行可能に記録された携帯端末装置である。
以下、本実施例の携帯端末装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
＜機能的構成＞
図２５は、本実施例の携帯端末装置の機能ブロックの一例である。この図にあるように、本実施例の携帯端末装置（４００１）は、カメラ部（４００２）と動画ＯＮ部（４００３）とライト部（４００４）とライトＯＮ部（４００５）と瞳孔認識部（４００６）と動画保持部（４００７）と動画送信部（４００８）とを有する。本実施例の特徴は、動画保持部及び動画送信部の内容にある。そのため、以下では、動画保持部及び動画送信部の内容を中心に説明する。
既述の実施例は、いずれも、携帯端末装置において瞳孔変化の演算を実施するという内容である。これは、携帯端末装置において演算を完了することができる点で優れているものであるが、本発明の課題を達成するためには、必ずしも、瞳孔変化の演算については、携帯端末装置内で完了している必要はない。そのため、本実施例における携帯端末装置は、外部機器において瞳孔変化の演算が行われることを前提として、携帯端末装置においては瞳孔認識部において瞳孔が認識された動画を保持し、外部機器に送信するという機能を備えることで、本発明の課題を達成しようとするものである。すなわち、外部機器は、実施例１における瞳孔変化演算部に相当する機能を有することが前提となり、さらには実施例３におけるストレス評価部に相当する機能を有していれば望ましい。
「動画保持部」とは、動画ＯＮ部にて撮影された動画を保持する働きをする。この保持される動画は、瞳孔部分が非瞳孔部分と区別されている状態であっても良い。
「動画送信部」とは、保持された動画を所定のアドレスに送信する働きをする。これにより、外部機器に対して、ユーザの瞳孔を撮影した動画情報を送信することができる。
これらにより、携帯端末装置内で瞳孔変化演算をすることなく、ストレスとの相関関係のある他覚症状によって、外部機器においてストレスの状態を測定することができる。そして、この動画情報は、外部機器のフレームメモリに蓄積され、所定のフレーム毎に外部機器のディスプレイなどで出力されることになる。また、ストレス評価された情報などは、他の実施例と同様に、携帯端末装置を含むユーザ端末などに一覧表示されることが望ましい。
以上により、携帯端末装置での処理を軽減し、携帯端末装置の負荷を軽減することができる。
＜ハードウェア的構成＞
図２６は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置における構成の一例を示す図である。この図を利用して本装置での各処理におけるそれぞれのハードウェア構成部の働きについて説明する。
この図にあるように、本実施例の携帯端末装置は、各種演算処理を行う「ＣＰＵ」（４１０１）と、「主メモリ」（４１０２）と、を備えている。また、「ＨＤＤ」（４１０３）や、外部機器（４１０６）の「Ｉ／Ｆ」（４１０７）と情報の送受信を行うための「ネットワークＩ／Ｆ」（４１０４）や、カメラやライトやディスプレイなどとの間で情報の送受信を行うための「Ｉ／Ｏ」（４１０８）も備えている。そして、それらが「システムバス」（４１０５）などのデータ通信経路によって相互に接続され、情報の送受信や処理を行う。外部機器は、「フレームメモリ」（４１０９）と「ディスプレイ」（４１１０）と「ＣＰＵ」（４１１１）を備えている。
また、本実施例において「主メモリ」に格納されているプログラムは、携帯端末の動画撮影機能をＯＮにする動画ＯＮプログラムと、携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮプログラムと、撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識プログラムと、保持された動画を所定のアドレスに送信する動画送信プログラムなどである。
携帯端末装置の動画ＯＮプログラムによって取得されたユーザの瞳孔画像は、「主メモリ」及び「ＨＤＤ」のアドレスに格納する。そして、携帯端末装置の「ＣＰＵ」において、「主メモリ」に格納されている動画情報を、「ネットワークＩ／Ｆ」を通じて外部機器の「Ｉ／Ｆ」に向けて送信する、という具合である。
＜処理の流れ＞
図２７は、本実施例の携帯端末装置における処理の流れの一例を示すフローチャートである。なお、以下に示すステップは、媒体に記録された計算機（携帯端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
この図にあるように、まず、携帯端末の動画撮影機能をＯＮにする（Ｓ４２０１）。次に、携帯端末の撮影側面に備えられているライトをＯＮにする（Ｓ４２０２）。次に、撮影中の像の中から人を含む動物の目の瞳孔を認識する（Ｓ４２０３）。そして、動画ＯＮステップにて撮影された動画を保持する。最後に、保持された動画を所定のアドレスに送信する（Ｓ４２０４）。
ここにおける携帯端末の動画撮影機能をＯＮにする動画ＯＮステップ（Ｓ４２０１）と携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮステップ（Ｓ４２０２）は、順番が逆であっても良い。つまり、まず携帯端末の撮影側面に備えられているライトをＯＮにする。次に、携帯端末の動画撮影機能をＯＮにする。次に、撮影中の像の中から人を含む動物の目の瞳孔を認識する。そして、動画ＯＮステップにて撮影された動画を保持する。最後に、保持された動画を所定のアドレスに送信するという処理の流れでも良い。
以上のステップにより、携帯端末装置内で瞳孔変化演算をすることなく、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定することができる。
＜概要＞
本実施例の発明は、光を当てた際の瞳孔の変化を連続静止画撮影して、瞳孔変化を時間単位で演算するための連続静止画情報を保持し、外部機器に送信するための機能を携帯端末装置に読取実行可能に記録したプログラムである。また、そのプログラムが読取実行可能に記録された携帯端末装置である。
以下、本実施例の携帯端末装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
＜機能的構成＞
図２８は、本実施例の携帯端末装置の機能ブロックの一例である。この図にあるように、本実施例の携帯端末装置（４３０１）は、カメラ部（４３０２）と連続ＯＮ部（４３０３）とライト部（４３０４）とライトＯＮ部（４３０５）と瞳孔認識部（４３０６）と連続静止画保持部（４３０７）と連続静止画送信部（４３０８）とを有する。本実施例の特徴は、連続静止画保持部及び連続静止画送信部の内容にある。そのため、以下では、動画保持部及び動画送信部の内容を中心に説明する。
本実施例は、実施例９と同じく、外部機器において瞳孔変化の演算が行われることを前提として、携帯端末装置においては瞳孔認識部において瞳孔が認識された連続静止画を保持し、外部機器に送信するという機能を備えることで、本発明の課題を達成しようとするものである。実施例９と異なる点は、撮影する画像が連続静止画であるため、保持して送信する画像が連続静止画である点である。連続静止画を撮影する点については、既述の実施例で説明済みであるので、以下では、連続静止画保持部と連続静止画送信部について説明する。
「連続静止画保持部」とは、携帯端末にて撮影された連続静止画を保持する働きをする。この保持される動画は、瞳孔部分が非瞳孔部分と区別されている状態であっても良い。
「連続静止画送信部」とは、保持された連続静止画を所定のアドレスに送信する働きをする。これにより、外部機器に対して、ユーザの瞳孔を撮影した連続静止画情報を送信することができる。
これらにより、携帯端末装置内で瞳孔変化演算をすることなく、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定することができる。
＜ハードウェア的構成＞
図２９は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置における構成の一例を示す図である。この図を利用して本装置での各処理におけるそれぞれのハードウェア構成部の働きについて説明する。
この図にあるように、本実施例の携帯端末装置は、各種演算処理を行う「ＣＰＵ」（４４０１）と、「主メモリ」（４４０２）と、を備えている。また、「ＨＤＤ」（４４０３）や、外部機器（４４０６）の「Ｉ／Ｆ」（４４０７）と情報の送受信を行うための「ネットワークＩ／Ｆ」（４４０４）や、カメラやライトやディスプレイなどとの間で情報の送受信を行うための「Ｉ／Ｏ」（４４０８）も備えている。そして、それらが「システムバス」（４４０５）などのデータ通信経路によって相互に接続され、情報の送受信や処理を行う。
また、「主メモリ」は、各種処理を行うプログラムを「ＣＰＵ」に実行させるために読み出すと同時にそのプログラムの作業領域でもあるワーク領域を提供する。また、この「主メモリ」や「ＨＤＤ」、図示しない「フラッシュメモリ」にはそれぞれ複数のアドレスが割り当てられており、「ＣＰＵ」で実行されるプログラムは、そのアドレスを特定しアクセスすることで相互にデータのやりとりを行い、処理を行うことが可能になっている。本実施例において格納されているプログラムは、携帯端末の連続静止画撮影機能をＯＮにする連続ＯＮプログラムと、携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮプログラムと、撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識プログラムと、保持された連続静止画を所定のアドレスに送信する連続静止画送信プログラムなどである。
携帯端末装置の連続ＯＮプログラムによって取得されたユーザの瞳孔画像は、「主メモリ」及び「ＨＤＤ」のアドレスに格納する。そして、携帯端末装置の「ＣＰＵ」において、「主メモリ」に格納されている連続静止画情報を、「ネットワークＩ／Ｆ」を通じて外部機器の「Ｉ／Ｆ」に向けて送信する、という具合である。
＜処理の流れ＞
図３０は、本実施例の携帯端末装置における処理の流れの一例を示すフローチャートである。なお、以下に示すステップは、媒体に記録された計算機（携帯端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
この図にあるように、まず、携帯端末の連続静止画撮影機能をＯＮにする（Ｓ４５０１）。次に、携帯端末の撮影側面に備えられているライトをＯＮにする（Ｓ４５０２）。次に、撮影中の像の中から人を含む動物の目の瞳孔を認識する（Ｓ４５０３）。そして、連続ＯＮステップにて撮影された連続静止画を保持する。最後に、保持された連続静止画を所定のアドレスに送信する（Ｓ４５０４）。
ここにおける携帯端末の連続静止画撮影機能をＯＮにする連続ＯＮステップ（Ｓ４５０１）と携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮステップ（Ｓ４５０２）は、順番が逆であっても良い。つまり、まず携帯端末の撮影側面に備えられているライトをＯＮにする。次に、携帯端末の連続静止画撮影機能をＯＮにする。次に、撮影中の像の中から人を含む動物の目の瞳孔を認識する。そして、連続ＯＮステップにて撮影された連続静止画を保持する。最後に、保持された連続静止画を所定のアドレスに送信するという処理の流れでも良い。
以上のステップにより、携帯端末装置内で瞳孔変化演算をすることなく、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定することができる。
＜概要＞
本実施例は、携帯端末装置から受信した動画をもとに瞳孔対光反応を演算するための機能を有する演算装置を提供する。
以下、本実施例における装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
＜機能的構成＞
図５５は、本実施例の演算装置の機能ブロックの一例を示す図である。この図にあるように、本実施例の演算装置（７３０１）は、動画受信部（７３０２）、瞳孔認識部（７３０３）と瞳孔変化演算部（７３０４）を有する。また、本実施例において、携帯端末は、通常、実施例１におけるカメラ部とライト部と動画ＯＮ部とライトＯＮ部を有している。その場合の携帯端末のカメラ部とライト部と動画ＯＮ部とライトＯＮ部の特徴は、実施例１と同様である。また、さらに携帯端末は、通常、動画を本実施例における演算装置に送信するための動画送信部を有している。
「動画受信部」は、携帯端末（７３０５）から人を含む動物の目を含む動画を受信する働きをする。これにより、ユーザから、人を含む動物の目を含む動画を受信することができる。
さらに、瞳孔認識部は、受信した動画の中から人を含む動物の目の瞳孔を認識する機能を有する。また、瞳孔変化演算部は、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する機能を有する。
瞳孔認識部と瞳孔変化演算部の機能の詳細は、実施例１における携帯端末装置の瞳孔認識部及び瞳孔変化演算部の詳細と同様である。
さらに、演算装置は、受信した動画について瞳孔を認識することができなかった場合にユーザに対して通知を発信する通知発信部を有していても良い。そうすれば、ユーザが、通知を受信することで再度動画を撮影して送信することができるので、演算装置の側で瞳孔変化の演算ができないという事態を改善することができる。このような効果をより一層高めるためにも、通知には、認識できなかった理由を付記する理由付記手段を備えていても良い。
さらに、ユーザに対して演算結果である瞳孔変化情報を送信すれば、ユーザは、自己のストレス状態を知ることができる。また、ユーザ以外の第三者に提供すれば、第三者がストレスを客観的に把握することができるので、例えば医療機関であれば診察の際の有意義な情報になるし、ユーザの勤務先であればストレスによる病気や事故を防ぐことにも繋がる。このように、瞳孔変化情報について、例えば、管理者（７３０６）、ユーザ（７３０７）、第三者（７３０８）に対して送信するための機能を備えていることが望ましい。そのため、演算装置は、所定のアドレスに対して瞳孔変化を送信する瞳孔変化送信部を有していても良い。
これにより、携帯端末装置に必要な機能としては、カメラ部とライト部と動画ＯＮ部とライトＯＮ部と動画送信部があれば良いことになるから、スマートフォンなどの携帯端末で特別な機能を有しなくとも演算を実施することができる。そのため、ユーザは、必ずしも専用端末や専用アプリを用意する必要がないので、本発明を気軽に利用できることになる。
＜ハードウェア的構成＞
図５６は、上記機能的な各構成要件をハードウェアとして実現した際の演算装置における構成の一例を示す図である。演算装置は、「ＣＰＵ」（７４０１）、「主メモリ」（７４０２）、「ＨＤＤ」（７４０３）、「ネットワークＩ／Ｆ」（７４０４）、「Ｉ／Ｏ」（７４０８）、「システムバス」（７４０５）を有しており、携帯端末装置（７４０６）と「ネットワークＩ／Ｆ」を通じて繋がっている。
これらの図を利用して、本装置での各処理におけるそれぞれのハードウェア構成部について説明する。
本実施例における演算装置においては、「主メモリ」に格納されているプログラムの内容は、動画受信プログラム、瞳孔認識プログラム、瞳孔変化演算プログラムである。
「ＣＰＵ」での働きにおいて、動画受信プログラムを実行して、携帯端末装置から送信されてくる人を含む動物の目を含む動画を、「ネットワークＩ／Ｆ」を通じて受信し、その受信した動画は、「ＨＤＤ」及び「主メモリ」に格納される。その上で、瞳孔認識プログラムを実行して、受信した動画の中から人を含む動物の目の瞳孔を認識し、瞳孔変化演算プログラムを実行して、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算するという具合である。演算結果は、瞳孔変化情報として、「ＨＤＤ」及び「主メモリ」に格納される。
＜処理の流れ＞
図５７は、本実施例の演算装置における処理の流れの一例を示すフローチャートである。なお、以下に示すステップは、媒体に記録された計算機（携帯端末、演算端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
この図にあるように、まず、携帯端末から人を含む動物の目を含む動画を受信する（Ｓ７５０１）。次に、受信した動画の中から人を含む動物の目の瞳孔を認識する（Ｓ７５０２）。次に、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する（Ｓ７５０３）。
瞳孔認識ステップ（Ｓ７５０２）と瞳孔変化演算ステップ（Ｓ７５０３）の機能の詳細は、実施例１における携帯端末装置の瞳孔認識ステップ及び瞳孔変化演算ステップの詳細と同様である。
さらに、演算装置は、受信した動画について瞳孔を認識することができなかった場合にユーザに対して通知を発信する通知発信ステップを有していても良い。また、通知には、認識できなかった理由を付記する理由付記サブステップを備えていても良い。
また、所定のアドレスに対して瞳孔変化を送信する瞳孔変化送信ステップを有していても良い。
これにより、スマートフォンなどの携帯端末で特別な機能を有しなくとも演算を実施することができる。そのため、ユーザは、必ずしも専用端末や専用アプリを用意する必要がないので、本発明を気軽に利用できることになる。
＜概要＞
本実施例は、携帯端末装置から受信した連続静止画をもとに瞳孔対光反応を演算するための機能を有する演算装置を提供する。
以下、本実施例における装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
＜機能的構成＞
図５８は、本実施例の演算装置の機能ブロックの一例を示す図である。この図にあるように、本実施例の演算装置（７６０１）は、連続静止画受信部（７６０２）、瞳孔認識部（７６０３）と瞳孔変化演算部（７６０４）を有する。また、本実施例において、携帯端末は、通常、実施例６におけるカメラ部とライト部と連続ＯＮ部とライトＯＮ部を有している。その場合の携帯端末のカメラ部とライト部と連続ＯＮ部とライトＯＮ部の特徴は、実施例６と同様である。また、さらに携帯端末は、通常、連続静止画を本実施例における演算装置に送信するための連続静止画送信部を有している。
「連続静止画受信部」は、携帯端末（７６０５）から人を含む動物の目を含む連続静止画を受信する働きをする。これにより、ユーザから、人を含む動物の目を含む連続静止画を受信することができる。
さらに、瞳孔認識部は、受信した連続静止画の中から人を含む動物の目の瞳孔を認識する機能を有する。また、瞳孔変化演算部は、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する機能を有する。瞳孔認識部と瞳孔変化演算部の機能の詳細は、実施例１における携帯端末装置の瞳孔認識部及び瞳孔変化演算部の詳細と同様である。
さらに、実施例１１と同様に、演算装置は、受信した連続静止画について瞳孔を認識することができなかった場合にユーザに対して通知を発信する通知発信部を有していても良い。また、通知には、認識できなかった理由を付記する理由付記手段を備えていても良い。
さらに、瞳孔変化情報について、例えば、管理者（７６０６）、ユーザ（７６０７）、第三者（７６０８）に対して送信するための機能を備えていることが望ましい。そのため、演算装置は、所定のアドレスに対して瞳孔変化を送信する瞳孔変化送信部を有していても良い。
これにより、携帯端末装置に必要な機能としては、カメラ部とライト部と連続ＯＮ部とライトＯＮ部と連続静止画送信部があれば良いことになるから、スマートフォンなどの携帯端末で特別な機能を有しなくとも演算を実施することができる。そのため、ユーザは、必ずしも専用端末や専用アプリを用意する必要がないので、本発明を気軽に利用できることになる。
＜ハードウェア的構成＞
図５９は、上記機能的な各構成要件をハードウェアとして実現した際の演算装置における構成の一例を示す図である。演算装置は、「ＣＰＵ」（７７０１）、「主メモリ」（７７０２）、「ＨＤＤ」（７７０３）、「ネットワークＩ／Ｆ」（７７０４）、「Ｉ／Ｏ」（７７０８）、「システムバス」（７７０５）を有しており、携帯端末装置（７７０６）と「ネットワークＩ／Ｆ」を通じて繋がっている。
これらの図を利用して、本装置での各処理におけるそれぞれのハードウェア構成部について説明する。
本実施例における演算装置においては、「主メモリ」に格納されているプログラムの内容は、連続静止画受信プログラム、瞳孔認識プログラム、瞳孔変化演算プログラムである。
「ＣＰＵ」での働きにおいて、連続静止画受信プログラムを実行して、携帯端末装置から送信されてくる人を含む動物の目を含む連続静止画を、「ネットワークＩ／Ｆ」を通じて受信し、その受信した連続静止画は、「ＨＤＤ」及び「主メモリ」に格納される。その上で、瞳孔認識プログラムを実行して、受信した連続静止画の中から人を含む動物の目の瞳孔を認識し、瞳孔変化演算プログラムを実行して、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算するという具合である。演算結果は、瞳孔変化情報として、「ＨＤＤ」及び「主メモリ」に格納される。
＜処理の流れ＞
図６０は、本実施例の演算装置における処理の流れの一例を示すフローチャートである。なお、以下に示すステップは、媒体に記録された計算機（携帯端末、演算端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
この図にあるように、まず、携帯端末から人を含む動物の目を含む連続静止画を受信する（Ｓ７８０１）。次に、受信した連続静止画の中から人を含む動物の目の瞳孔を認識する（Ｓ７８０２）。次に、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する（Ｓ７８０３）。
瞳孔認識ステップ（Ｓ７８０２）と瞳孔変化演算ステップ（Ｓ７８０３）の機能の詳細は、実施例１における携帯端末装置の瞳孔認識ステップ及び瞳孔変化演算ステップの詳細と同様である。
さらに、演算装置は、受信した連続静止画について瞳孔を認識することができなかった場合にユーザに対して通知を発信する通知発信ステップを有していても良い。また、通知には、認識できなかった理由を付記する理由付記サブステップを備えていても良い。
また、所定のアドレスに対して瞳孔変化を送信する瞳孔変化送信ステップを有していても良い。
これにより、スマートフォンなどの携帯端末で特別な機能を有しなくとも演算を実施することができる。そのため、ユーザは、必ずしも専用端末や専用アプリを用意する必要がないので、本発明を気軽に利用できることになる。
４６０１、４７０１、４８０１、４９０１：携帯端末装置
４６０２、４７０２、４８０２：操作ボタン
４６０３、４７０３、４８０３：受話部
４６０４、４７０４、４８０４：カメラ
４６０５、４７０５、４８０５：ライト
４６０６、４７０６、４８０６：画面
４９０２：瞳孔部分

Claims (15)

  1. 携帯端末の動画撮影機能をONにする動画ONステップと、
    携帯端末の撮影側面に備えられているライトをONにするライトONステップと、
    撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識ステップと、
    瞳孔を認識するまでライトの照度を低くし、瞳孔の認識が完了したときに、認識するまでよりもライトの照度を高く変化させる照度変化ステップと、
    認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する瞳孔変化演算ステップと、
    を携帯端末装置に読取実行可能に記録したプログラム。
  2. さらに、
    瞳孔変化演算ステップにて演算されて得られた瞳孔変化に基づいてストレス度合いを評価してストレス評価結果を得るストレス評価ステップを有する請求項１に記載のプログラム。
  3. 瞳孔変化演算ステップにて演算されて得られた瞳孔変化を所定のアドレスに対して送信する瞳孔変化送信ステップをさらに有する請求項１又は２に記載のプログラム。
  4. ストレス評価ステップにて得られたストレス評価結果を所定のアドレスに対して送信するストレス評価結果送信ステップをさらに有する請求項２又は請求項２に従属する請求項３に記載のプログラム。
  5. 請求項３に記載のプログラムを実行した結果として送信された瞳孔変化を受信する瞳孔変化受信ステップと、
    受信した瞳孔変化を蓄積する瞳孔変化蓄積ステップと、
    蓄積された瞳孔変化を統計処理する瞳孔変化統計処理ステップと、
    を計算機に読取実行可能に記載したプログラム。
  6. さらに請求項３に従属する請求項４に記載のプログラムを実行した結果として送信されたストレス評価結果を受信するストレス評価結果受信ステップと、
    受信したストレス評価結果を蓄積するストレス評価結果蓄積ステップと、
    さらに請求項３に従属する請求項４に記載のプログラムを実行した結果として送信された瞳孔変化を受信する瞳孔変化受信ステップと、
    受信した瞳孔変化を蓄積する瞳孔変化蓄積ステップと、
    蓄積されたストレス評価結果及び瞳孔変化を統計処理するストレス統計処理ステップと、
    を計算機に読取実行可能に記載したプログラム。
  7. 携帯端末の動画撮影機能をONにする動画ONステップに代えて、
    携帯端末の連続静止画撮影機能をONにする連続ONステップとした請求項１から６のいずれか一に記載のプログラム。
  8. 動画又は／及び静止画の撮影のためのカメラ部と、
    携帯端末の撮影側面に備えられているライトを含むライト部と、
    携帯端末の動画撮影機能をONにする動画ON部と、
    前記ライトをONにするライトON部と、
    撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識部と、
    瞳孔を認識するまでライトの照度を低くし、瞳孔の認識が完了したときに、認識するまでよりもライトの照度を高く変化させる照度変化部と、
    認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する瞳孔変化演算部と、
    を有する携帯端末装置。
  9. さらに、
    瞳孔変化演算部にて演算されて得られた瞳孔変化に基づいてストレス度合いを評価してストレス評価結果を得るストレス評価部を有する請求項８に記載の携帯端末装置。
  10. 瞳孔変化演算部にて演算されて得られた瞳孔変化を所定のアドレスに対して送信する瞳孔変化送信部をさらに有する請求項８又は９に記載の携帯端末装置。
  11. ストレス評価部にて得られたストレス評価結果を所定のアドレスに対して送信するストレス評価結果送信部をさらに有する請求項９又は９に従属する請求項１０に記載の携帯端末装置。
  12. 携帯端末の動画撮影機能をONにする動画ON部に代えて、
    携帯端末の連続静止画撮影機能をONにする連続ON部を有する請求項８から請求項１１のいずれか一に記載の携帯端末装置。
  13. 請求項１０又は請求項１０の請求項８従属部分である「動画ON部」を「解体端末の連続静止画撮影機能をONにする連続ON部」に代替した請求項１２に記載の携帯端末装置と，
    前記携帯端末装置を実行した結果として送信された瞳孔変化を受信する瞳孔変化受信部と、
    受信した瞳孔変化を蓄積する瞳孔変化蓄積部と、
    蓄積された瞳孔変化を統計処理する瞳孔変化統計処理部と、
    を有する統計処理装置
    とからなるストレス評価システム。
  14. 請求項１０に従属する請求項１１に記載の携帯端末装置と，
    前記携帯端末装置を実行した結果として送信されたストレス評価結果を受信するストレス評価結果受信部と、
    受信したストレス評価結果を蓄積するストレス評価結果蓄積部と、
    さらに請求項１０に従属する請求項１１に記載の携帯端末装置を実行した結果として送信された瞳孔変化を受信する瞳孔変化受信部と、
    受信した瞳孔変化を蓄積する瞳孔変化蓄積部と、
    蓄積されたストレス評価結果及び瞳孔変化を統計処理するストレス統計処理部と、
    を有する統計処理装置
    とからなるストレス評価システム。
  15. 携帯端末に代えて端末とした請求項１から７のいずれか一に記載のプログラム。
JP2017520169A 2015-05-27 2015-05-27 携帯端末用ストレス評価プログラム及び該プログラムを備えた携帯端末 Active JP6612339B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2015/065307 WO2016189711A1 (ja) 2015-05-27 2015-05-27 携帯端末用ストレス評価プログラム及び該プログラムを備えた携帯端末

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2019197708A Division JP6811971B2 (ja) 2019-10-30 2019-10-30 携帯端末用ストレス評価プログラム及び該プログラムを備えた携帯端末

Publications (2)

Publication Number Publication Date
JPWO2016189711A1 JPWO2016189711A1 (ja) 2018-04-26
JP6612339B2 true JP6612339B2 (ja) 2019-11-27

Family

ID=57393882

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017520169A Active JP6612339B2 (ja) 2015-05-27 2015-05-27 携帯端末用ストレス評価プログラム及び該プログラムを備えた携帯端末

Country Status (4)

Country Link
US (1) US10741286B2 (ja)
JP (1) JP6612339B2 (ja)
CN (1) CN108024768B (ja)
WO (1) WO2016189711A1 (ja)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11403881B2 (en) * 2017-06-19 2022-08-02 Paypal, Inc. Content modification based on eye characteristics
EP3430973A1 (en) * 2017-07-19 2019-01-23 Sony Corporation Mobile system and method
US20190191995A1 (en) * 2017-07-28 2019-06-27 Pupilscan Corporation Systems and Methods for Capturing and Analyzing Pupil Images to Determine Toxicology and Neurophysiology
JP7096020B2 (ja) * 2018-03-16 2022-07-05 株式会社トプコン 携帯端末及び携帯端末の制御方法
GB2576139A (en) * 2018-07-20 2020-02-12 Ophthalmic Surgical Services Ltd Ocular assessment
CN112584739B (zh) * 2018-08-20 2024-04-05 富士胶片株式会社 医疗图像处理系统
JP2020049154A (ja) * 2018-09-28 2020-04-02 スカラ株式会社 眼球撮像装置
US11354805B2 (en) * 2019-07-30 2022-06-07 Apple Inc. Utilization of luminance changes to determine user characteristics
US20220344054A1 (en) * 2019-09-27 2022-10-27 Semiconductor Energy Laboratory Co., Ltd. Statistical model creation method, state estimation method, and state estimation system
CN113572993B (zh) * 2020-04-27 2022-10-11 华为技术有限公司 一种视频处理方法及移动终端
CN114120435A (zh) * 2020-08-25 2022-03-01 深圳爱酷智能科技有限公司 吸毒人员检测方法、装置、计算机可读存储介质及设备
WO2022123746A1 (ja) * 2020-12-10 2022-06-16 日本電信電話株式会社 情報処理方法、情報処理装置、及びプログラム
US12099654B1 (en) 2021-06-21 2024-09-24 Apple Inc. Adaptation of electronic content
JP2023045097A (ja) * 2021-09-21 2023-04-03 株式会社東芝 分析システム、分析方法、プログラム、及び記憶媒体
WO2024171738A1 (ja) * 2023-02-17 2024-08-22 株式会社Mecara 神経状態評価システム、神経状態評価方法、および神経状態評価プログラム

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0119859D0 (en) * 2001-08-15 2001-10-10 Qinetiq Ltd Eye tracking system
US6896655B2 (en) * 2002-08-05 2005-05-24 Eastman Kodak Company System and method for conditioning the psychological state of a subject using an adaptive autostereoscopic display
US20040176991A1 (en) * 2003-03-05 2004-09-09 Mckennan Carol System, method and apparatus using biometrics to communicate dissatisfaction via stress level
JP4179968B2 (ja) * 2003-11-13 2008-11-12 花王株式会社 リラックス感評価用瞳孔対光反応計測具
JP4247100B2 (ja) 2003-12-03 2009-04-02 三菱重工業株式会社 排気ガス再循環装置付き内燃機関
CN100427033C (zh) * 2006-12-19 2008-10-22 潘晓刚 心理状态参数测试系统
JP5006070B2 (ja) 2007-02-28 2012-08-22 森永製菓株式会社 ストレス強度演算方法、及びストレス強度演算装置
JP2009142469A (ja) * 2007-12-14 2009-07-02 Panasonic Electric Works Co Ltd ストレス判定システム
JP5438591B2 (ja) * 2010-05-17 2014-03-12 日本電信電話株式会社 感情強度測定装置、感情強度測定方法、及びプログラム
JP5431276B2 (ja) * 2010-09-14 2014-03-05 Ｋｄｄｉ株式会社 携帯通信端末装置、ストレス状態演算方法、ストレス状態演算プログラム
US8911087B2 (en) * 2011-05-20 2014-12-16 Eyefluence, Inc. Systems and methods for measuring reactions of head, eyes, eyelids and pupils
CN102727223B (zh) * 2012-06-18 2015-04-29 天津大学 基于多生理参数pca融合的脑力负荷测量方法
US9596508B2 (en) * 2013-03-15 2017-03-14 Sony Corporation Device for acquisition of viewer interest when viewing content
WO2014184868A1 (ja) * 2013-05-14 2014-11-20 株式会社 東芝 電子機器および生体信号測定方法
US9360672B2 (en) * 2013-07-11 2016-06-07 Seiko Epson Corporation Head mounted display device and control method for head mounted display device
US20150025917A1 (en) * 2013-07-15 2015-01-22 Advanced Insurance Products & Services, Inc. System and method for determining an underwriting risk, risk score, or price of insurance using cognitive information
US9237847B2 (en) * 2014-02-11 2016-01-19 Welch Allyn, Inc. Ophthalmoscope device
US20150297140A1 (en) * 2014-04-21 2015-10-22 Microsoft Corporation User stress detection and mitigation

Also Published As

Publication number Publication date
CN108024768B (zh) 2021-02-05
CN108024768A (zh) 2018-05-11
JPWO2016189711A1 (ja) 2018-04-26
US10741286B2 (en) 2020-08-11
US20180255167A1 (en) 2018-09-06
WO2016189711A1 (ja) 2016-12-01

Similar Documents

Publication Publication Date Title
JP6612339B2 (ja) 携帯端末用ストレス評価プログラム及び該プログラムを備えた携帯端末
US10901509B2 (en) Wearable computing apparatus and method
US9723992B2 (en) Mental state analysis using blink rate
US9521335B2 (en) Detecting febrile seizure with a thermal video camera
US10614564B2 (en) Method to determine impaired ability to operate a motor vehicle
TWI620547B (zh) Information processing device, information processing method and information processing system
US20170258319A1 (en) System and method for assessing eyesight acuity and hearing ability
DE102016118782A1 (de) System zur Erfassung von thermischen Messwerten und zur Atmungsüberwachung
US20150215412A1 (en) Social network service queuing using salience
KR20190141684A (ko) 사용자의 건강 상태를 평가하기 위한 시스템(system for assessing a health condition of a user)
US10070787B2 (en) System and method for detection and monitoring of a physical condition of a user
JP2007068620A (ja) 心理状態計測装置
Lai et al. Measuring saccade latency using smartphone cameras
CN113096808B (zh) 事件提示方法、装置、计算机设备及存储介质
JP2020120908A (ja) 精神状態推定システム、精神状態推定方法、及び、プログラム
JP6811971B2 (ja) 携帯端末用ストレス評価プログラム及び該プログラムを備えた携帯端末
JP6952293B2 (ja) 携帯端末用ストレス評価プログラム及び該プログラムを備えた携帯端末
US20220409120A1 (en) Information Processing Method, Computer Program, Information Processing Device, and Information Processing System
WO2023091926A1 (en) Systems and methods for screening subjects for neuropathology associated with a condition utilizing a mobile device
CN103186701A (zh) 一种饮食习惯分析方法、系统和设备
US11589833B2 (en) Imaging system and control method for imaging system
JP7161812B1 (ja) 意識状態解析装置及びプログラム、並びに観察システム
US20240277281A1 (en) User assistance system, wearable terminal, and user assistance method
WO2022256877A1 (en) Prediction of human subject state via hybrid approach including ai classification and blepharometric analysis, including driver monitoring systems
CN114219772A (zh) 预测健康参数的方法、装置、终端设备、存储介质

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20171117

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180920

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181119

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190507

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190626

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191002

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191030

R150 Certificate of patent or registration of utility model

Ref document number: 6612339

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250