KR20040068130A - 심신 진단 시스템 - Google Patents
심신 진단 시스템 Download PDFInfo
- Publication number
- KR20040068130A KR20040068130A KR10-2004-7006586A KR20047006586A KR20040068130A KR 20040068130 A KR20040068130 A KR 20040068130A KR 20047006586 A KR20047006586 A KR 20047006586A KR 20040068130 A KR20040068130 A KR 20040068130A
- Authority
- KR
- South Korea
- Prior art keywords
- voice signal
- examinee
- voice
- person
- mental
- Prior art date
Links
- 238000003745 diagnosis Methods 0.000 title claims abstract description 70
- 238000011156 evaluation Methods 0.000 claims abstract description 60
- 230000003340 mental effect Effects 0.000 claims abstract description 58
- 238000012545 processing Methods 0.000 claims abstract description 56
- 230000006996 mental state Effects 0.000 claims abstract description 19
- 238000011158 quantitative evaluation Methods 0.000 claims abstract description 15
- 238000000034 method Methods 0.000 claims description 25
- 230000006870 function Effects 0.000 claims description 21
- 238000004364 calculation method Methods 0.000 claims description 14
- 230000000694 effects Effects 0.000 claims description 10
- 230000000007 visual effect Effects 0.000 claims description 10
- 230000000739 chaotic effect Effects 0.000 claims description 7
- 238000005291 chaos (dynamical) Methods 0.000 claims description 5
- 238000007781 pre-processing Methods 0.000 claims description 2
- 230000015541 sensory perception of touch Effects 0.000 claims description 2
- 230000003321 amplification Effects 0.000 claims 1
- 238000003199 nucleic acid amplification method Methods 0.000 claims 1
- 230000005236 sound signal Effects 0.000 description 18
- 230000008569 process Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 12
- 238000005259 measurement Methods 0.000 description 7
- 230000004044 response Effects 0.000 description 7
- 238000006243 chemical reaction Methods 0.000 description 6
- 238000005070 sampling Methods 0.000 description 6
- 230000008859 change Effects 0.000 description 5
- 230000035790 physiological processes and functions Effects 0.000 description 5
- 206010041349 Somnolence Diseases 0.000 description 4
- 210000000988 bone and bone Anatomy 0.000 description 4
- 238000011548 physical evaluation Methods 0.000 description 4
- 230000001413 cellular effect Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 238000007619 statistical method Methods 0.000 description 3
- 230000035882 stress Effects 0.000 description 3
- CURLTUGMZLYLDI-UHFFFAOYSA-N Carbon dioxide Chemical compound O=C=O CURLTUGMZLYLDI-UHFFFAOYSA-N 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000035807 sensation Effects 0.000 description 2
- 208000020925 Bipolar disease Diseases 0.000 description 1
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 206010027951 Mood swings Diseases 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000036772 blood pressure Effects 0.000 description 1
- 229910002092 carbon dioxide Inorganic materials 0.000 description 1
- 239000001569 carbon dioxide Substances 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 230000009429 distress Effects 0.000 description 1
- 230000005281 excited state Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000035900 sweating Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/48—Other medical applications
- A61B5/4803—Speech analysis specially adapted for diagnostic purposes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L17/00—Speaker identification or verification techniques
- G10L17/26—Recognition of special voice characteristics, e.g. for use in lie detectors; Recognition of animal voices
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
- Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10S706/00—Data processing: artificial intelligence
- Y10S706/902—Application using ai with detail of the ai system
- Y10S706/924—Medical
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Public Health (AREA)
- Medical Informatics (AREA)
- Biomedical Technology (AREA)
- Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Biophysics (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Primary Health Care (AREA)
- Epidemiology (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Psychiatry (AREA)
- Human Computer Interaction (AREA)
- Hospice & Palliative Care (AREA)
- Educational Technology (AREA)
- Psychology (AREA)
- Social Psychology (AREA)
- Developmental Disabilities (AREA)
- Child & Adolescent Psychology (AREA)
- Multimedia (AREA)
- Acoustics & Sound (AREA)
- Computer Networks & Wireless Communication (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Medical Treatment And Welfare Office Work (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
진단을 받는 사람에 대하여 이루어진 문진 등에 대한 발화에 의한 회답에 기초하여, 진단을 받는 사람의 심신 상태의 평가를 자동적 또한 객관적으로 행하는 심신 진단 시스템을 제공하는 것을 목적으로 한다. 문진 등에 대하여 회답된 음성에 의해 심신 상태를 진단하는 심신 진단 시스템으로서, 지수 데이터베이스와, 음성을 음성 신호로서 취득하는 음성 처리부와, 음성 신호를 디지털 음성 신호로 변환하는 아날로그/디지털 변환부와, 카오스 이론을 이용하여 휴먼 스트레인지 어트랙터를 산출하고, 지수 데이터베이스에 저장하는 데이터 처리부와, 산출된 휴먼 스트레인지 어트랙터를 이용하여 정량적 평가를 행하는 어트랙터 평가부와, 평가 결과를 표시하는 표시부를 포함하는 심신 진단 시스템이다.
Description
종래에 진단을 받는 사람(이하, 피검진자)의 심신 상태의 평가를 행하는 경우에는, 피검진자의 혈압, 맥박, 발한, 동공 등의 반응, 숨을 내 쉬는 중의 탄산 가스 농도 등의 생리적 상태를 측정하여, 그 측정 결과를 참고로 하여 피검진자의 진단을 행하는 사람(이하, 진단자)이 적당한 문진 등을 피검진자에 대하여 행하고, 진단자의 경험, 지식 등에 의해 진단자가 이들을 해석함으로써, 피검진자의 심신 상태 등의 평가를 행하고 있다.
상기한 바와 같이 피검진자의 심신 상태 등을 평가하는 경우에는, 피검진자의 생리적 상태를 측정할 필요가 있지만, 이 생리적 상태의 측정 시에, 측정에 필요한 센서류를 피검진자의 신체에 접촉 혹은 장착시키는 것이 필요하며, 이들 측정이 간편하지 않을 뿐만 아니라, 이들 측정을 실시함에 따른 스트레스를 피검진자에게 주게 되어, 그 측정 결과 자체의 신뢰성을 저하시키는 것으로 되어 있다.
이 신뢰성의 저하를 방지하기 위해서, 음성에 의해 피검진자의 피로나 졸음을 진단하는 장치가 일본 특허 3151489호 공보에 개시되어 있다. 이 특허 발명에 있어서는, 취득한 음성의 경시적인 측정에 의해서, 피검진자의 생리적 상태(예를 들면 피로도, 졸음 등)의 변화를 파악한다.
즉, 상기한 특허 발명에서는, 피로도, 졸음을 검지하는 장치에서 음성을 취득하여, 음성으로부터 리아프노프 지수값(Lyapunov Exponent Value)을 산출하고, 이것을 피검진자의 과거의 피로 상태, 졸음을 느낀 상태 등의 리아프노프 지수값과 비교함으로써, 피검진자의 생리적 상태를 취득하고 있다.
그러나, 심신 상태에 대한 객관적 평가를 산출하는 경우에는, 진단자의 문진 등에 대한 피검진자의 응답(즉, 문진 등에 대한 피검진자가 내는 음성)이 중요한 요인의 하나가 되지만, 상기한 특허 발명에서는 그것을 행하는 것은 불가능하다. 또한, 피검진자에 대하여 이루어지는 문진 등은, 피검진자에 따른 적절한 것이어야만 하지만, 이 특허 발명에 있어서는 그것을 행하는 것은 불가능하다. 즉, 만일 이 특허 발명을 이용하여 본 발명과 마찬가지의 것을 행하는 경우에는, 진단자가 충분한 경험을 갖고 있으며, 그 경험에 기초한 적절한 질문을 스스로 사고하여, 행할 필요성이 있다.
또한, 종래와 같이 단순히 문진 등을 진단자와 피검진자가 단순히 마주보고행하는 것이 아니라, 피검진자에게 마치 어떠한 상황 하에 놓여져 있는 것처럼 착각을 일으키게 함으로써, 진단자가 희망하는 상황 하(예를 들면, 피검진자의 편안한 상황, 긴장한 상황, 스트레스 하에 있는 상황 등)에 피검진자를 의도적으로 놓고서 피검진자의 반응(문진 등에 대한 피검진자가 내는 음성)을 관찰함으로써, 보다 정확한 피검진자의 심신 상태의 평가를 행하는 것이 가능해지지만, 이것을 행하는 것도 불가능하다. 즉, 피검진자의 상황을 진단자는 컨트롤할 수 없다.
〈발명의 개시〉
본 발명자는 상기 문제점을 감안하여, 문진 등에 대한 피검진자의 발화에 의한 심신 상태를, 진단자의 주관을 배제하고 객관적으로 판단하는 것을 가능하게 하는 심신 진단 시스템을 발명하였다. 또한, 문진 등은 사전에 저장되어 있는 피검진자의 정보에 기초하여 적절한 것을 제공함으로써, 종래와 같이 경험이 풍부한 진단자가 아니어도 가능하게 된다.
본 발명에서 또한, 단순히 진단자의 문진 등에 대한 피검진자의 발화 음성을 취득할 뿐만 아니라, 피검진자를 진단자가 희망하는 상황 하에 놓는 (즉, 피검진자에 대하여 가상 현실감을 제공하여, 피검진자의 상황을 의도적으로 변화시키는) 것을 가능하게 함으로써, 단순히 발화 음성에 기초하여 평가를 행하는 것보다도, 보다 정확한 피검진자의 심신 상태의 평가를 행하는 것이 가능해진다.
청구의 범위 1의 발명은, 문진 등에 대한 심신의 진단을 받는 사람이 내는 음성에 의해 심신 상태를 진단하는 심신 진단 시스템으로서, 평가 결과와 상기 진단을 받는 사람을 식별하는 정보를 대응시켜 저장하고 있는 지수 데이터베이스와, 상기 문진 등에 대한 상기 진단을 받는 사람이 내는 음성을 음성 신호로서 취득하는 음성 처리부와, 상기 음성 신호를 디지털화함으로써 디지털 음성 신호로 변환하는 아날로그/디지털 변환부와, 카오스 이론을 이용하여 상기 디지털 음성 신호로부터 휴먼 스트레인지 어트랙터(Human Strange Attracter)를 산출하고, 상기 산출된 휴먼 스트레인지 어트랙터를 상기 지수 데이터베이스에 저장하는 데이터 처리부와, 상기 산출된 휴먼 스트레인지 어트랙터와 상기 지수 데이터베이스에 저장되어 있는 상기 진단을 받는 사람 또는 다른 진단을 받는 사람의 과거의 휴먼 스트레인지 어트랙터에 기초하여 정량적 평가를 행하는 어트랙터 평가부와, 상기 평가 결과를 표시하는 표시부를 포함하는 심신 진단 시스템이다.
진단자(진단을 행하는 사람)로부터 이루어진 문진 등에 대한 피검진자(피검진자(심신의 진단을 받는 사람)는, 의식하고 진단을 받는 사람 외에, 의식하지 않고 진단을 받는 사람(예를 들면 그 사람이 내는 음성이 별실에서 관찰되고 진단되는 등을 포함함)의 발하는 음성을 취득하고, 이것을 카오스 이론적으로 해석함으로써, 진단을 객관적으로 행하는 것을 가능하게 한다. 또한 음성으로부터의 진단이 되므로, 피검진자에 대하여 센서류를 장착하지 않아도 되므로, 불필요한 스트레스를 주지 않아, 신뢰성의 향상으로 이어진다.
이 때에는, 피검진자가 내는 음성 신호를 사전에 정해진 수순으로 전자적으로 처리를 행함으로써, 진단의 근거가 되는 휴먼 스트레인지 어트랙터를 산출하고, 그 산출 결과를 이용하여 정량적인 평가를 행한다. 따라서, 이 과정에서 진단자의 주관이 개입될 여지는 없으며, 종래와 같은 진단자의 경험, 감각 등의 주관에 의지한 판단을 배제하여, 객관적인 평가 결과를 얻는 것이 가능해진다. 또한, 휴먼 스트레인지 어트랙터란, 위상 공간 맵핑 정보나 리아프노프 지수 등의 지수를 나타낸다.
여기서 문진 등은, 의학적 질문에 한정하지 않고, 의학적 이외의 질문, 인터뷰 등을 포함하는 것이며, 또한 진단자가 직접 피검진자에 대하여 행하는 경우 외에, 본 발명에 따른 심신 진단 시스템에 의해 시각, 청각, 촉각 등을 통하여 피검진자에 대하여 진단자가 질문을 하는 경우와 마찬가지의 감각, 해석을 제공하도록 한 경우(예를 들면, 진단자가 피검진자에 대하여 행하는 질문과 관련성을 갖는, 질문 내용을 이미지화할 수 있는 문장, 화상, 영상 등의 표시, 인간의 발화 음성, 주위 잡음, 효과음 등을 이용하여 가상 현실감을 제공하는 경우)를 포함한다.
본 발명에서 심신 상태는, 그 사람의 타고난 기질, 잠재적인 특성, 경험 등에 의해 획득된 성격 등, 또한 그때마다의 흥분 상태, 혹은 조울증 등의 진단을 포함하는 쉽게 흥분되는 등의 심신 상태, 자신을 잃어버리거나 잃어버릴 듯한 상태, 거짓말을 하거나 하고자 하는 듯한 마음의 동요 등, 보다 단순하게는 피로 상태나 "무엇인가에 마음을 빼앗기고 있어 딴 생각을 하고 있는 듯한" 상태 등을 나타낸다.
청구의 범위 2의 발명은, 상기 심신 진단 시스템은, 상기 진단을 받는 사람의 정보를 저장하고 있는 피검진자 데이터베이스와, 상기 피검진자 데이터 베이스에 저장되어 있는 상기 진단을 받는 사람의 정보에 기초하여, 진단을 행하는 사람에 대하여 적어도 하나 이상의 문진 등을 제공하는 문진 등 제공부를 포함하는 심신 진단 시스템이다.
본 발명은, 진단자가 피검진자의 진단을 행하는 경우에, 문진 등을 피검진자의 정보에 기초하여 제공함으로써, 종래와 같이 진단자의 경험이 불필요해져서, 경험이 풍부하지 않은 사람(혹은 자동적으로)이더라도 심신의 진단을 용이하게 행하는 것이 가능해진다.
청구의 범위 3의 발명은, 상기 심신 진단 시스템은, 상기 진단을 받는 사람에 대하여 시각적 의사 체험의 효과를 제공하는 시각적 의사 체험 표시부 및/또는 청각적 의사 체험의 효과를 제공하는 청각적 의사 체험 확성부 및/또는 촉각적 의사 체험의 효과를 제공하는 촉각적 의사 체험 조작부를 포함하는 심신 진단 시스템이다.
피검진자는, 진단을 받는 것을 이해한 시점부터 어떠한 미묘한 변화가 생긴다. 따라서, 이 변화가 평가 결과에 대하여 어떠한 영향을 미치는 경우도 있지만, 종래에는 이들을 배제하는 것이 곤란하였다. 본 발명에서는, 피검진자의 시각, 청각, 촉각에 대하여 직접적으로 작용하는 의사 체험의 효과를 제공함으로써, 편안한 상황 혹은 진단 목적에 적합한 최적의 상황(진단자가 희망하는 상황)에 피검진자를 놓는 것이 가능해져서, 보다 정확하게 평가를 행하는 것이 가능해진다.
청구의 범위 4의 발명은, 상기 음성 처리부는, 상기 아날로그/디지털 변환부에서 디지털 음성 신호로 변환하기 전에, 상기 음성 신호의 전처리를 행하는 전치 증폭기 및 오디오 필터를 포함하는 심신 진단 시스템이다.
본 발명은, 피검진자가 마이크로폰을 이용한 경우에, 그 음성 신호를 샘플링 처리함으로써, 보다 정확한 음성 신호를 추출하는 것이 가능해져서, 평가의 정확성의 향상으로 이어진다. 마이크로폰이란, 음성을 취득하는 공지의 장치이어도 되며, 골전도 마이크로폰 등도 포함한다.
청구의 범위 5의 발명은, 문진 등에 대한 심신의 진단을 받는 사람이 내는 음성에 의해 심신 상태를 진단하는 심신 진단 시스템으로서, 평가 결과와 상기 진단을 받는 사람을 식별하는 정보를 대응시켜 저장하고 있는 지수 데이터베이스와, 기록 매체에 기록된, 상기 문진 등에 대한 상기 진단을 받는 사람의 음성을 음성 신호로서 취득하는 음성 처리부와, 상기 기록 매체에 기록된 음성을 음성 신호로서 취득 또는 상기 음성 처리부에서 취득한 음성 신호를 디지털화함으로써 디지털 음성 신호로 변환하는 아날로그/디지털 변환부와, 상기 기록 매체에 기록된 디지털 음성 신호 또는 상기 아날로그/디지털 변환부로부터 수신한 디지털 음성 신호를, 카오스 이론을 이용하여 휴먼 스트레인지 어트랙터를 산출하고, 상기 산출된 휴먼 스트레인지 어트랙터를 상기 지수 데이터베이스에 저장하는 데이터 처리부와, 상기 산출된 휴먼 스트레인지 어트랙터와 상기 지수 데이터베이스에 저장되어 있는 상기 진단을 받는 사람 또는 다른 진단을 받는 사람의 과거의 휴먼 스트레인지 어트랙터에 기초하여 정량적 평가를 행하는 어트랙터 평가부와, 상기 평가 결과를 표시하는 표시부를 포함하는 심신 진단 시스템이다.
진단자로부터 이루어진 문진 등에 대한 회답이 기록 매체에 기록되고, 이 기록 매체에 기록된 음성에 기초하여, 음성 신호를 사전에 정해진 수순으로 전자적으로 처리를 행함으로써, 진단의 근거가 되는 휴먼 스트레인지 어트랙터를 산출하고, 그 산출 결과를 이용하여 정량적인 평가를 행한다. 따라서, 이 과정에서 진단자의 주관이 개입될 여지는 없으며, 종래와 같은 진단자의 경험, 감각 등의 주관에 의지한 판단을 배제하여, 객관적인 평가 결과를 얻는 것이 가능해진다.
또한, 마이크로폰 등으로부터 음성의 입력을 받는 것이 아니라, 종전에 테이프 레코더, IC 메모리 등의 기록 매체에 기록된 음성을 이용함으로써, 피검진자의 평가를 가능하게 한다. 이것에 의해서, 사후적인 피검진자의 평가를 행하는 것이 가능해지고, 예를 들면 피검진자와 진단자와의 스케줄이 일치하지 않은 경우 등에, 진단자 이외의 사람이 사전에 행한 문진 등에 대한 피검진자의 회답을 기록 매체에 기록하고, 후에 진단자가 이 기록된 음성에 기초하여 판단을 행하는 것도 가능해진다.
청구의 범위 6의 발명은, 문진 등에 대한 심신의 진단을 받는 사람이 내는 음성에 의해 심신 상태를 진단하는 심신 진단 시스템으로서, 평가 결과와 상기 진단을 받는 사람을 식별하는 정보를 대응시켜 저장하고 있는 지수 데이터베이스와, 상기 문진 등에 대한 상기 진단을 받는 사람이 내는 음성을 네트워크를 통하여 음성 신호로서 취득하는 음성 처리부와, 상기 음성 신호를 디지털화함으로써 디지털 음성 신호로 변환하는 아날로그/디지털 변환부와, 카오스 이론을 이용하여 상기 디지털 음성 신호로부터 휴먼 스트레인지 어트랙터를 산출하고, 상기 산출된 휴먼 스트레인지 어트랙터를 상기 지수 데이터베이스에 저장하는 데이터 처리부와, 상기 산출된 휴먼 스트레인지 어트랙터와 상기 지수 데이터베이스에 저장되어 있는 상기 진단을 받는 사람 또는 다른 진단을 받는 사람의 과거의 휴먼 스트레인지 어트랙터에 기초하여 정량적 평가를 행하는 어트랙터 평가부와, 상기 평가 결과를 표시하는 표시부를 포함하며, 상기 음성 신호가 아날로그 음성 신호인 경우에는, 상기 음성처리부 또는 상기 아날로그/디지털 변환부에서 수신하고, 상기 음성 신호가 디지털 음성 신호인 경우에는, 상기 데이터 처리부에서 수신하는 심신 진단 시스템이다.
본 발명에 의해서, 심신 진단 시스템은 원격지 등에 살고 있는 피검진자와 전화기, 컴퓨터 등을 이용하여 네트워크를 통하여 음성의 송수신을 행하는 것이 가능해진다. 이것에 의해, 피검진자는 일부러 심신 진단 시스템이 설치되어 있는 장소까지 가지 않더라도, 심신 진단 시스템을 이용하는 것이 가능해진다.
또한, 네트워크로서 전화 회선 등을 이용한 경우에는 아날로그 신호이기 때문에, 그것을 디지털화함으로써 이후의 처리를 디지털적으로 처리하는 것이 가능해지고, 또한 네트워크로서 인터넷 등을 이용한 경우에는 디지털 신호이기 때문에, 그 신호로부터 직접 휴먼 스트레인지 어트랙터를 산출함으로써, 불필요한 프로세스를 생략하여, 처리의 고속화를 도모하는 것이 가능해진다.
청구의 범위 7의 발명은, 문진 등에 대한 심신의 진단을 받는 사람이 내는 음성에 의해 심신 상태를 진단하는 심신 진단 시스템으로서, 평가 결과와 상기 진단을 받는 사람을 식별하는 정보를 대응시켜 저장하고 있는 지수 데이터베이스와, 상기 진단을 받는 사람이 갖는 피검진자 단말기에 대하여, 상기 진단을 받는 사람이 내는 음성을 음성 신호로서 취득하는 음성 처리부와, 상기 음성 신호를 디지털화함으로써 디지털 음성 신호로 변환하는 아날로그/디지털 변환부와, 상기 문진 등을 상기 진단을 받는 사람에 대하여 제공하는 문진부와, 카오스 이론을 이용하여 상기 디지털 음성 신호로부터 휴먼 스트레인지 어트랙터를 산출하고, 상기 산출 결과와 상기 심신 진단 시스템에 송신하는 데이터 처리부와, 상기 문진 등과 어트랙터 평가부에서의 평가를 수신하여 표시하는 표시부를 송신하는 처리 기능 배신부와, 상기 피검진자 단말기에서 산출된 휴먼 스트레인지 어트랙터를 상기 지수 데이터베이스에 저장하고, 상기 산출된 휴먼 스트레인지 어트랙터와 상기 지수 데이터베이스에 저장되어 있는 상기 진단을 받는 사람 또는 다른 진단을 받는 사람의 과거의 휴먼 스트레인지 어트랙터에 기초하여 정량적 평가를 행하는 어트랙터 평가부와, 상기 피검진자 단말기에 대하여 상기 문진 등 제공부에서의 상기 문진 등을 송신하고, 상기 피검진자 단말기로부터 상기 산출 결과를 수신하며, 상기 어트랙터 평가부에서 이루어진 평가 결과를 상기 피검진자 단말기에 송신하는 데이터 수신 및 배신부를 포함하는 심신 진단 시스템이다.
본 발명에 의해서, 최근 보급되고 있는 인터넷 등의 사용 시에 브라우저 등을 이용함으로써, 처리 기능을 분산시키는 것이 가능해진다. 즉, 음성의 처리로부터 휴먼 스트레인지 어트랙터의 산출까지를 피검진자 단말기에서 행하게 하고, 그 결과만을 심신 진단 시스템에서 수신하여, 평가를 행함으로써 부하의 분산을 도모하는 것이 가능해져서, 처리의 고속화도 도모할 수 있다.
또한, 피검진자의 진단을 행하는 경우에, 문진 등을 시스템으로부터 제공함으로써, 진단자의 주관을 배제하면서 피검진자에 대하여 최적의 문진을 행하는 것이 가능해진다. 또한, 피검진자에 관한 정보에 기초하여 자동적으로 문진 등을 행하고, 그 평가를 심신 진단 시스템의 과거의 통계에 기초하여 행함으로써, 진단자 자체가 반드시 필요하지는 않게 되어, 피검진자 한사람이 그 결과를 취득하여, 열람하는 것도 가능해진다.
청구의 범위 8의 발명은, 상기 심신 진단 시스템은, 상기 진단을 받는 사람의 정보를 저장하고 있는 피검진자 데이터베이스와, 상기 피검진자 데이터 베이스에 저장되어 있는 상기 진단을 받는 사람의 정보에 기초하여, 진단을 행하는 사람에 대하여 적어도 하나 이상의 문진 등을 제공하는 문진 등 제공부를 포함하는 심신 진단 시스템이다.
본 발명에 의해서, 문진 등을 피검진자의 정보에 기초하여 제공함으로써, 종래와 같이 진단자의 경험이 불필요해져서, 경험이 풍부하지 않은 사람(혹은 자동적으로)이더라도 심신의 진단을 용이하게 행하는 것이 가능해진다.
이상과 같이 청구의 범위 1 내지 청구의 범위 8의 발명에서, 원칙적으로 피검진자와 접촉하지 않고 진단자가 진단을 가능하게 됨으로써, 피검진자에게 진단하는 것 자체의 스트레스를 주지 않고, 보다 신뢰성이 높으며 또한 간편하게 행하는 심신 진단 시스템이 가능해진다.
특히, 일반적인 마이크로폰에 의해 취득되는 피검진자의 음성으로부터 진단을 자동적으로 행하는 것을 가능하게 하고, 심신 진단 시스템 자체의 조작에 대한 고도의 숙달, 정신 상태의 분석 등의 경험을 요하지 않고, 시스템의 사용자가 누구이더라도 적정하며 또한 용이하게 피검진자의 심신 상태를 평가하는 것이 가능해진다. 그것에 의하여, 피검진자 자신이 전문가인 진단자를 통하지 않고도 평가를 행하는 것도 가능해진다.
또한, 음성으로부터의 진단을 가능하게 함으로써, 전화기나 인터넷 등의 네트워크를 통하여 전달되는 음성이나, 테이프 레코더 등에 의해 녹음된 음성으로부터의 진단도 가능하게 하여, 보다 광범위한 사용 형태에 대응하는 것이 가능해진다.
본 발명은, 인간의 심신(心身)을 자동적 또한 객관적으로 진단하는 심신 진단 시스템에 관한 것으로, 더욱 상세하게는, 진단을 받는 사람에 대하여 이루어진 문진(問診) 등에 대한 발화(發話)에 의한 회답에 기초하여, 진단을 받는 사람의 심신 상태의 평가를 자동적 또한 객관적으로 행하는 심신 진단 시스템에 관한 것이다.
도 1은 본 발명의 시스템 구성의 일례를 도시한 시스템 구성도.
도 2는 본 발명의 계산 처리부의 시스템 구성의 일례를 도시한 시스템 구성도.
도 3은 마이크로폰 등을 이용한 음성 입력의 시스템 구성의 일례를 도시한 시스템 구성도.
도 4는 기록 매체를 이용한 음성 입력의 시스템 구성의 일례를 도시한 시스템 구성도.
도 5는 네트워크를 통한 음성 입력의 시스템 구성의 일례를 도시한 시스템 구성도.
도 6은 가상 현실감을 피검진자에 제공하여 음성 입력을 행하는 시스템 구성의 일례를 도시한 시스템 구성도.
도 7은 기능을 분산시켰을 때의 시스템 구성의 일례를 도시한 시스템 구성도.
〈발명을 실시하기 위한 최량의 형태〉
본 발명의 실시 형태의 일례를 도면을 참조하여 상세히 설명한다. 도 1은 본 발명의 시스템 구성의 일례를 도시한 시스템 구성도이다. 심신 진단 시스템(1)은 계산 처리부(2), 문진 등 제공부(3), 지수 데이터베이스(4), 피검진자 데이터베이스(5)를 갖고 있으며, 네트워크(7)를 통하여 또는 직접, 피검진자가 음성을 입력하는 피검진자 단말기(6)와의 사이에서 데이터(음성 신호, 평가 데이터 등)의 송수신이 가능하다.
네트워크(7)는 전화 회선망, 인터넷 등의 오픈 네트워크, LAN 등의 클로즈드 네트워크 중 어느 것이어도 되며, 유선 및 무선 어느 것도 상관없다.
피검진자 단말기(6)는 피검진자가 음성을 입력하기 위한 단말기로서, 마이크로폰, 전화기, 휴대 전화기, 간이형 휴대 전화기, PDA, 퍼스널 컴퓨터 등을 나타낸다.
계산 처리부(2)는 입력된 음성에 기초하여 카오스 이론적 해석을 행하여 휴먼 스트레인지 어트랙터(위상 공간 맵핑 정보나 리아프노프 지수 등의 지수. 이하 동일함)를 산출하는 수단이다. 계산 처리부(2)는 음성 처리부(8), 아날로그/디지털 변환부(9), 데이터 처리부(10), 어트랙터 평가부(11), 표시부(12)를 갖는다. 도 2는 계산 처리부(2)의 시스템 구성의 일례인 시스템 구성도를 나타낸다. 또한, 데이터 처리부(10), 어트랙터 평가부(11)는 하드웨어에 의한 처리뿐만 아니라, 소프트웨어에 의한 처리가 이루어져도 물론 가능하다.
음성 처리부(8)는 피검진자 단말기(6), 자기 테이프 레코더, 자기 디스크 등의 음성 재생 출력 가능한 하드웨어 등으로부터 입력된 음성 신호에 대하여 적정한 샘플링 주기의 조정, 신호 진폭 레벨 등의 조정을 행하는 수단이다.
아날로그/디지털 변환부(9)는 음성 처리부(8)에서 샘플링된 아날로그의 음성 신호를 디지털 음성 신호로 변환하는 수단이다.
데이터 처리부(10)는 디지털 음성 신호의 시계열 데이터를 공지의 카오스 이론적 방법에 기초하여 해석함으로써, 휴먼 스트레인지 어트랙터를 산출하는 수단이다.
어트랙터 평가부(11)는 데이터 처리부(10)에서 산출한 휴먼 스트레인지 어트랙터와 지수 데이터베이스(4)(후술함)에 저장되어 있는 피검진자 또는 다른 피검진자의 과거의 휴먼 스트레인지 어트랙터를 이용하여, 그 변화 검출이나 통계적 분석 등의 공지의 정량적 평가를 행하는 수단이다.
표시부(12)는 어트랙터 평가부(11)에서의 평가의 결과를 수치, 그래프 등을 이용하여 표시하고, 진단자(경우에 따라서는 피검진자)에 대하여 열람시키는 수단이다.
문진 등 제공부(3)는, 피검진자 데이터베이스(5)에 저장되어 있는 피검진자에 관한 정보에 기초하여 진단자가 피검진자에 대하여 행하는 문진 등의 선택을 행하는 수단이다. 이 경우, 진단자가 문진 등의 일람 리스트로부터 스스로 선택하여도 되며, 피검진자에 관한 정보에 기초하여 최적의 것을 자동적으로 선택하여도 된다.
지수 데이터베이스(4)는 계산 처리부(2)에서 산출한 휴먼 스트레인지 어트랙터를 피검진자를 식별하는 정보(이하, 피검진자 식별 정보라 함)와 대응시켜 저장하고 있는 데이터베이스이다.
피검진자 데이터베이스(5)는 피검진자의 정보, 예를 들면 생활 환경, 고민, 현재 상황, 취미, 기호 등을 저장하고 있는 데이터베이스이다.
다음에 본 발명의 프로세스의 흐름의 일례를 상세히 설명한다. 먼저, 피검진자 단말기(6)는 마이크로폰, 골전도 마이크로폰 등으로서, 그것이 심신 진단 시스템(1)과 직접 접속하고 있으며, 피검진자가 진단자로부터의 문진 등에 대한 회답에 의한 발화 음성에 의해서 입력하는 경우의 프로세스의 흐름의 일례를 나타낸다. 이 경우의 심신 진단 시스템(1)의 시스템 구성의 개념도를 도 3에 도시한다.
진단자는 문진 등 제공부(3)를 통하여 피검진자 데이터베이스(5)에 저장되어 있는 피검진자의 정보를 열람하여, 문진 등 제공부(3)로부터 문진 등의 선택을 행하고(또는, 문진 등 제공부(3)가 피검진자 데이터베이스(5)에 저장되어 있는 피검진자에 관한 정보에 기초하여 자동적으로 선택하고), 피검진자에 대하여 문진 등을 행한다. 또한, 피검진자 스스로가 발화를 한 경우에는 이 프로세스는 반드시 필요하지는 않다.
진단자로부터의 문진 등에 대한 발화에 의한 회답에 의해서, 그 음성이 피검진자 단말기(6)의 마이크로폰, 골전도 마이크로폰 등을 통하여 입력되어 음성 신호가 된다. 입력된 음성 신호는 피검진자 단말기(6)로부터 전치 증폭기(13)를 통하여 오디오 필터(14)에 입력되고, 적절한 샘플링 주기의 조정, 신호 진폭 레벨의 조정을 자동적으로 행하여, 아날로그/디지털 변환부(9)에 입력된다.
아날로그/디지털 변환부(9)는, 음성 처리부(8)에서 샘플링된 음성 신호를 디지털 음성 신호로 변환하고, 데이터 처리부(10)에 입력한다. 디지털 음성 신호를 받은 데이터 처리부(10)는, 디지털 음성 신호의 시계열 데이터를 공지의 카오스 이론적 방법을 이용함으로써 해석하고, 휴먼 스트레인지 어트랙터를 산출한다. 또한데이터 처리부(10)는 산출된 휴먼 스트레인지 어트랙터를 피검진자 식별 정보와 함께 지수 데이터베이스(4)에 저장한다.
데이터 처리부(10)에서 휴먼 스트레인지 어트랙터를 산출 후, 어트랙터 평가부(11)는 지수 데이터베이스(4)에 저장되어 있는 피검진자 및/또는 다른 피검진자의 과거의 휴먼 스트레인지 어트랙터를 추출하고, 그것과 산출된 휴먼 스트레인지 어트랙터를 이용하여 그 변화 검출이나 통계적 분석 등의 정량적 평가를 행하여, 그 결과를 표시부(12)에 수치, 그래프 등을 이용하여 진단자(경우에 따라서는 피검진자)에게 표시한다. 진단자(경우에 따라서는 피검진자)는 이것을 열람하고, 피검진자의 객관적인 심신 상태의 평가를 파악하는 것이 가능해진다.
다음에, 진단자가 행한 문진 등에 대하여 피검진자의 음성에 의한 회답이, 자기 테이프, 자기 디스크, IC 메모리 등의 기록 매체(15)에 기록되고, 기록 매체(15)로부터 음성 처리부(8)에 음성 신호가 입력되는 경우의 프로세스의 흐름의 일례를 설명한다. 이 경우의 심신 진단 시스템(1)의 시스템 구성의 개념도를 도 4에 도시한다.
기록 매체(15)의 기록 방법에는 아날로그 신호로서 음성 신호를 입력하고 있는 경우와, 디지털 신호로서 음성 신호를 입력하고 있는 경우가 있다. 음성 신호가 아날로그 신호인 경우(예를 들면 테이프 레코더에 음성을 녹음한 경우)에는, 음성 신호를 음성 처리부(8) 또는 아날로그/디지털 변환부(9)에 입력하고, 아날로그 신호를 디지털 음성 신호로 변환한다.
한편, 기록 매체(15)에서 음성 신호가 디지털 음성 신호인 경우(예를 들면IC 메모리에 음성을 녹음한 경우), 또는 아날로그/디지털 변환부(9)에서 아날로그 신호를 디지털 음성 신호로 변환 후, 데이터 처리부(10)에 디지털 음성 신호를 입력한다. 이후의 프로세스는 상기 실시예와 동일한 처리를 행하여, 피검진자의 객관적인 심신 상태의 평가를 파악하는 것이 가능해진다.
다음에 심신 진단 시스템(1)이 피검진자 단말기(6)와 네트워크(7)를 통하여 음성 신호의 송수신을 행하고, 피검진자의 객관적인 심신 상태의 평가를 행하는 경우를 설명한다. 이 경우의 심신 진단 시스템(1)의 시스템 구성의 개념도를 도 5에 도시한다.
피검진자 단말기(6)가 전화기 등의 아날로그 신호를 음성 신호로서 심신 진단 시스템(1)에 송신하는 경우에는, 피검진자가 전화기 등을 통하여 발화함으로써, 피검진자 단말기(6)로부터 음성 처리부(8)에 아날로그 신호인 음성 신호가 송신된다. 음성 처리부(8)는 아날로그 신호를 수신하고, 아날로그 신호가 전치 증폭기(13)로부터 오디오 필터(14)에 입력되며, 적절한 샘플링 주기의 조정, 신호 진폭 레벨의 조정을 자동적으로 행하여, 아날로그/디지털 변환부(9)에 입력된다.
아날로그/디지털 변환부(9)는, 음성 처리부(8)에서 샘플링된 음성 신호를 디지털 음성 신호로 변환하고, 데이터 처리부(10)에 입력한다.
한편, 인터넷 등에 의해 송신되는 컴퓨터간 인터페이스에 의한 디지털 음성 신호인 경우에는, 디지털 음성 신호가 직접 피검진자 단말기(6)로부터 데이터 처리부(10)에 입력된다. 이후의 처리는 상기 실시예와 동일한 처리를 행하여, 피검진자의 객관적인 심신 상태의 평가를 파악하는 것이 가능해진다.
본 실시 형태는, 제1 실시예의 시스템 구성에, 피검진자에 대하여 보다 현실에 가까운 진단 환경을 제공하는 기능을 부가한 경우로서, 시각적 의사 체험 표시부(16)와 청각적 의사 체험 확성부(17), 촉각적 의사 체험 조작부(18)가 접속되어 있으며, 피검진자에 대하여 편안함, 혹은 진단 목적에 따른 최적의 가상 현실감을 제공하는 심신 진단 시스템(1)인 경우를 설명한다. 이 경우의 심신 진단 시스템(1)의 시스템 구성의 일례를 도 6에 도시한다. 여기서 시각적 의사 체험 표시부(16)는 입체 화상 등의 표시를 행하는 표시 장치(19)에 입체 화상 등을 표시시키는 기능을 나타내고, 청각적 의사 체험 확성부(17)는 삼차원 공간 음성을 출력할 수 있는 스피커(20)에 삼차원 공간 음성을 출력시키는 기능을 나타내며, 촉각적 의사 체험 조작부(18)는 피검진자에 대하여 감촉, 무게 등의 감각을 제공하는 데이터글로브(21)를 컨트롤하여 피검진자에 대하여 촉각을 제공하는 기능을 나타낸다.
진단자는 문진 등 제공부(3)를 통하여 피검진자 데이터베이스(5) 내의 피검진자의 정보를 추출하고, 피검진자가 편안함, 가상 현실감을 얻을 수 있도록 한 시각적, 청각적, 촉각적 효과를, 시각적 의사 체험 표시부(16)와 청각적 의사 체험 확성부(17)와 촉각적 의사 체험 조작부(18)를 통하여 표시 장치(19), 스피커(20), 데이터글로브(21)로부터 제공한다. 예를 들면 피검진자가 하이킹을 선호하는 사람이면, 시각적 의사 체험 표시부(16)가 표시 장치(19)를 통하여 시각적 효과로서 피검진자에게 숲속의 입체 영상을 보여주고, 청각적 의사 체험 확성부(17)가 스피커(20)를 통하여 청각적 효과로서 새의 지저귐, 초목이 바람에 너울거리는 소리의 삼차원 공간 음성 등을 들려주며, 촉각적 의사 체험 조작부(18)가 데이터글로브(21)를 통하여 피검진자에게 수목의 감촉을 제공함으로써, 피검진자가 숲속에 있는 듯한 감각을 부여하여, 가상 현실감을 피검진자에게 제공한다.
이러한 피검진자의 환경 하에서, 진단자는 피검진자에 대하여 문진 등 제공부(3)를 통하여 피검진자 데이터베이스(5)에 저장되어 있는 피검진자의 정보를 열람하고, 문진 등 제공부(3)로부터 문진 등의 선택을 행하여(혹은 문진 등 제공부(3)가 피검진자 데이터베이스(5)에 저장되어 있는 피검진자에 관한 정보에 기초하여 자동적으로 문진 등을 선택하여), 피검진자에 대하여 문진 등을 행한다.
이것에 의해서, 피검진자의 상황에 따라 순차적으로 그 환경을 컨트롤하고, 다양한 환경 하에 피검진자를 놓는 것이 가능해져서, 피검진자의 보다 정확한 반응을 파악하는 것을 가능해진다.
피검진자는 진단자로부터의 문진 등에 대하여 발화에 의해서, 그 음성이 음성 처리부(8)의 마이크로폰, 골전도 마이크로폰 등을 통하여 음성 신호가 된다. 이후의 프로세스의 흐름은 제1 실시예와 마찬가지이므로 생략한다. 이것에 의해서 진단 목적에 따른 환경 하에서의 피검진자의 객관적인 심신 상태의 평가를 파악하는 것이 가능해진다.
다음에, 심신 진단 시스템(1)을 1대의 단말기 상에서 행하는 것이 아니라, 그 기능을 분산시킨 경우의 프로세스의 흐름의 일례를 설명한다. 이 경우의 심신 진단 시스템(1)의 시스템 구성의 일례를 도 7에 도시한다. 이 경우에는, 피검진자 단말기(6)는 브라우저 등을 구비하고 있는 컴퓨터, 휴대 전화, 간이형 휴대 전화, PDA 등이 바람직하다.
심신 진단 시스템(1)은 처리 기능 배신부(22), 어트랙터 평가부(11), 데이터 수신 및 배신부(23), 문진 등 제공부(3), 지수 데이터베이스(4), 피검진자 데이터베이스(5)를 갖고, 네트워크(7)를 통하여 피검진자 단말기(6)와 데이터의 송수신이 가능하다. 피검진자 단말기(6)는, 브라우저 상에서 애플릿 등의 어플리케이션 소프트웨어가 동작 가능하며, 마이크로폰 등이 구비되어 있는 것은 물론이다. 본 실시 형태에서는 애플릿을 이용하여 각 기능을 소프트웨어적으로 처리하는 경우를 설명하지만, 그 이외의 방법에 의해서도 물론 가능하다.
처리 기능 배신부(22)는 아날로그 신호를 샘플링 처리하기 위한 음성 처리부(8), 아날로그 신호를 디지털 음성 신호로 변환하는 아날로그/디지털 변환부(9), 휴먼 스트레인지 어트랙터의 산출을 행하여, 산출 결과를 심신 진단 시스템(1)의 어트랙터 평가부(11)에 송신하는 데이터 처리부(10), 피검진자에 대한 문진 등을 데이터 수신 및 배신부(23)로부터 네트워크(7)를 통하여 수신하고 그것을 표시부(12)를 통하여 피검진자에 제공하는 문진부(24), 문진 등과 평가 결과를 심신 진단 시스템(1)으로부터 수신하여 수치, 그래프 등을 이용하여 표시하는 표시부(12)의 처리 기능을 애플릿으로서 심신 진단 시스템(1)으로부터 피검진자 단말기(6)에 대하여 네트워크(7)를 통하여 송신하는 수단이다.
어트랙터 평가부(11)는 피검진자 단말기(6)로부터 데이터 수신 및 배신부 (23)(후술함)를 통하여 수신한 휴먼 스트레인지 어트랙터를 지수 데이터베이스(4)에 저장하고, 상기 수신된 휴먼 스트레인지 어트랙터와, 피검진자 또는 다른 피검진자의 과거의 휴먼 스트레인지 어트랙터에 기초하여 정량적 평가를 행하고, 이 평가 결과를 데이터 수신 및 배신부(23)를 통하여 배신시키는 수단이다.
데이터 수신 및 배신부(23)는, 피검진자 단말기(6)로부터 휴먼 스트레인지 어트랙터를 수신하고 그것을 어트랙터 평가부(11)에 입력하는 수단이다. 또한, 어트랙터 평가부(11)에서 이루어진 평가 결과를 네트워크(7)를 통하여 피검진자 단말기(6)에 평가 결과를 배신하는 수단이다. 또한, 문진 등 제공부(3)가 피검진자에 대하여 제공하는 문진 등을 송신하는 수단이기도 하다.
문진 등 제공부(3)는, 피검진자에 관한 정보를 피검진자 데이터베이스(5)로부터 추출하고, 해당하는 피검진자에 대한 적어도 하나 이상의 문진 등을 데이터 수신 및 배신부(23)를 통하여 송신하는 수단이다.
문진부(24)는 네트워크(7)를 통하여 데이터 수신 및 배신부(23)로부터 송신된 문진 등을 표시부(12)를 통하여 표시시키고, 피검진자에 대하여 문진 등을 행하는 수단이다. 피검진자는 이 문진 등에 기초하여 발화에 의한 회답을 행한다.
다음에 프로세스의 흐름의 일례를 설명한다. 자신의 심신 상태의 평가를 행하는 것을 희망하는 피검진자는, 피검진자 단말기(6)의 브라우저 등으로부터 네트워크(7)를 통하여 심신 진단 시스템(1)에 액세스하고, 심신 진단 시스템(1)의 처리 기능 배신부(22)로부터 애플릿을 수신한다.
심신 진단 시스템(1)의 문진 등 제공부(3)는, 피검진자 데이터베이스(5)에 저장되어 있는 피검진자에 관한 정보에 기초하여 적어도 하나 이상의 문진 등을 작성하고, 데이터 수신 및 배신부(23)를 통하여 피검진자 단말기(6)에 송신한다.
문진 등을 피검진자 단말기(6)의 문진부(6)에서 수신하면, 문진부(6)는 표시부(12)를 통하여 문진 등을 표시하고, 피검진자에 대하여 문진 등을 행한다. 이 문진 등이 이루어진 피검진자는 발화에 의한 음성의 입력을 행한다.
음성의 입력을 마이크로폰 등을 통하여 수신한 음성 처리부(8)는, 그 음성 신호에 대하여 적정한 샘플링 주기의 조정, 신호 진폭 레벨 등의 조정을 행하고, 아날로그/디지털 변환부(9)에 입력한다.
아날로그/디지털 변환부(9)는 음성 처리부(8)에서 샘플링된 음성 신호를 디지털 음성 신호로 변환하고, 데이터 처리부(10)에 입력한다. 디지털 음성 신호를 받은 데이터 처리부(10)는 디지털 음성 신호의 시계열 데이터를 카오스 이론적 방법을 이용함으로써 해석하고, 휴먼 스트레인지 어트랙터를 산출한다.
데이터 처리부(10)는 산출된 휴먼 스트레인지 어트랙터를 네트워크(7)를 통하여 심신 진단 시스템(1)에 송신한다. 심신 진단 시스템(1)의 데이터 수신 및 배신부(23)에서 휴먼 스트레인지 어트랙터를 수신하면, 그것을 어트랙터 평가부(11)에 입력한다.
어트랙터 평가부(11)는, 휴먼 스트레인지 어트랙터를 지수 데이터 베이스(4)에 저장하고, 또한 수신된 휴먼 스트레인지 어트랙터와, 피검진자 또는 다른 피검진자의 과거의 휴먼 스트레인지 어트랙터를 비교하여, 그 변화 검출이나 통계적 분석 등의 정량적 평가를 행하고, 그 평가 결과를 데이터 수신 및 배신부(23)를 통하여 피검진자 단말기(6)에 배신한다.
피검진자 단말기(6)의 표시부(12)에서 평가 결과를 수신하면, 표시부(12)가 브라우저 등을 통하여 그 평가 결과를 수치, 그래프 등을 이용하여 피검진자에 대하여 표시한다. 피검진자는 이것에 의해서, 스스로 자신의 객관적인 심신 상태의 평가를 파악하는 것이 가능해진다.
본 발명에서의 각 수단, 데이터베이스는, 그 기능이 논리적으로 구별되어 있을 뿐으로, 물리적 혹은 사실상은 동일한 영역을 이루고 있어도 된다.
또한, 본 발명을 실시하는 데 있어서 본 실시 형태의 기능을 실현하는 소프트웨어의 프로그램을 기록한 기억 매체를 시스템에 공급하고, 그 시스템의 컴퓨터가 기억 매체에 저장된 프로그램을 판독하여 실행함으로써 실현되는 것은 물론이다.
이 경우, 기억 매체로부터 판독된 프로그램 자체가 상기한 실시 형태의 기능을 실현하게 되어, 그 프로그램을 기억한 기억 매체는 물론 본 발명을 구성하게 된다.
프로그램을 공급하기 위한 기억 매체로서는, 예를 들면 플로피 디스크, 하드디스크, 광 디스크, 광 자기 디스크, 자기 테이프, 불휘발성의 메모리 카드 등을 사용할 수 있다.
또한, 컴퓨터가 판독한 프로그램을 실행함으로써, 상술한 실시 형태의 기능이 실현될 뿐만이 아니라, 그 프로그램의 지시에 기초하여, 컴퓨터 상에서 가동되고 있는 오퍼레이팅 시스템 등의 실제의 처리의 일부 또는 전부를 행하고, 그 처리에 의해서 상기한 실시 형태의 기능이 실현되는 경우도 포함되는 것은 물론이다.
또한, 기억 매체로부터 판독된 프로그램이, 컴퓨터에 삽입된 기능 확장 보드나 컴퓨터에 접속된 기능 확장 유닛에 구비되는 불휘발성 혹은 휘발성의 기억 수단에 기입된 후, 그 프로그램의 지시에 기초하여, 기능 확장 보드 혹은 기능 확장 유닛에 구비되는 연산 처리 장치 등이 실제의 처리의 일부 혹은 전부를 행하여, 그 처리에 의해 상기한 실시 형태의 기능이 실현되는 경우도 포함되는 것은 물론이다.
본 발명에 의해서, 문진 등에 대한 피검진자의 발화에 의한 심신 상태를, 진단자의 주관을 배제하여 객관적으로 판단하는 것을 가능하게 하는 것이 가능해진다. 또한, 문진 등은 사전에 저장되어 있는 피검진자의 정보에 기초하여 적절한 것을 제공함으로써, 종래와 같이 경험이 풍부한 진단자가 아니어도 가능하게 된다.
본 발명에서 또한, 단순히 진단자의 문진 등에 대한 피검진자의 발화 음성을 취득할 뿐만 아니라, 피검진자를 진단자가 희망하는 상황 하에 놓는 (즉, 피검진자에 대하여 가상 현실감을 제공하여, 피검진자의 상황을 의도적으로 변화시키는) 것을 가능하게 함으로써, 단순히 발화 음성에 기초하여 평가를 행하는 것보다도, 보다 정확한 피검진자의 심신 상태의 평가를 행하는 것이 가능해진다.
또한, 네트워크를 통하여 이들 기능을 분산적으로 배치시킴으로써, 원격지에 있는 피검진자이더라도 진단자를 필요로 하지 않고, 심신 상태의 객관적인 평가를 취득하는 것이 가능해진다.
Claims (8)
- 문진(問診) 등에 대한 심신의 진단을 받는 사람이 내는 음성에 의해 심신 상태를 진단하는 심신 진단 시스템으로서,평가 결과와 상기 진단을 받는 사람을 식별하는 정보를 대응시켜 저장하고 있는 지수 데이터베이스와,상기 문진 등에 대한 상기 진단을 받는 사람이 내는 음성을 음성 신호로서 취득하는 음성 처리부와,상기 음성 신호를 디지털화함으로써 디지털 음성 신호로 변환하는 아날로그/디지털 변환부와,카오스 이론을 이용하여 상기 디지털 음성 신호로부터 휴먼 스트레인지 어트랙터(Human Strange Attracter)를 산출하고, 상기 산출된 휴먼 스트레인지 어트랙터를 상기 지수 데이터베이스에 저장하는 데이터 처리부와,상기 산출된 휴먼 스트레인지 어트랙터와 상기 지수 데이터베이스에 저장되어 있는 상기 진단을 받는 사람 또는 다른 진단을 받는 사람의 과거의 휴먼 스트레인지 어트랙터에 기초하여 정량적 평가를 행하는 어트랙터 평가부와,상기 평가 결과를 표시하는 표시부를 포함하는 것을 특징으로 하는 심신 진단 시스템.
- 제1항에 있어서,상기 심신 진단 시스템은,상기 진단을 받는 사람의 정보를 저장하고 있는 피검진자 데이터베이스와,상기 피검진자 데이터베이스에 저장되어 있는 상기 진단을 받는 사람의 정보에 기초하여, 진단을 행하는 사람에 대하여 적어도 하나 이상의 문진 등을 제공하는 문진 등 제공부를 포함하는 것을 특징으로 하는 심신 진단 시스템.
- 제1항 또는 제2항에 있어서,상기 심신 진단 시스템은,상기 진단을 받는 사람에 대하여 시각적 의사 체험의 효과를 제공하는 시각적 의사 체험 표시부 및/또는 청각적 의사 체험의 효과를 제공하는 청각적 의사 체험 확성부 및/또는 촉각적 의사 체험의 효과를 제공하는 촉각적 의사 체험 조작부를 포함하는 것을 특징으로 하는 심신 진단 시스템.
- 제1항에 있어서,상기 음성 처리부는,상기 아날로그/디지털 변환부에서 디지털 음성 신호로 변환하기 전에, 상기 음성 신호의 전처리를 행하는 전치 증폭기 및 오디오 필터를 포함하는 것을 특징으로 하는 심신 진단 시스템.
- 문진 등에 대한 심신의 진단을 받는 사람이 내는 음성에 의해 심신 상태를진단하는 심신 진단 시스템으로서,평가 결과와 상기 진단을 받는 사람을 식별하는 정보를 대응시켜 저장하고 있는 지수 데이터베이스와,기록 매체에 기록된, 상기 문진 등에 대한 상기 진단을 받는 사람의 음성을 음성 신호로서 취득하는 음성 처리부와,상기 기록 매체에 기록된 음성을 음성 신호로서 취득 또는 상기 음성 처리부에서 취득한 음성 신호를 디지털화함으로써 디지털 음성 신호로 변환하는 아날로그/디지털 변환부와,상기 기록 매체에 기록된 디지털 음성 신호 또는 상기 아날로그/디지털 변환부로부터 수신한 디지털 음성 신호를, 카오스 이론을 이용하여 휴먼 스트레인지 어트랙터를 산출하고, 상기 산출된 휴먼 스트레인지 어트랙터를 상기 지수 데이터베이스에 저장하는 데이터 처리부와,상기 산출된 휴먼 스트레인지 어트랙터와 상기 지수 데이터베이스에 저장되어 있는 상기 진단을 받는 사람 또는 다른 진단을 받는 사람의 과거의 휴먼 스트레인지 어트랙터에 기초하여 정량적 평가를 행하는 어트랙터 평가부와,상기 평가 결과를 표시하는 표시부를 포함하는 것을 특징으로 하는 심신 진단 시스템.
- 문진 등에 대한 심신의 진단을 받는 사람이 내는 음성에 의해 심신 상태를 진단하는 심신 진단 시스템으로서,평가 결과와 상기 진단을 받는 사람을 식별하는 정보를 대응시켜 저장하고 있는 지수 데이터베이스와,상기 문진 등에 대한 상기 진단을 받는 사람이 내는 음성을 네트워크를 통하여 음성 신호로서 취득하는 음성 처리부와,상기 음성 신호를 디지털화함으로써 디지털 음성 신호로 변환하는 아날로그/디지털 변환부와,카오스 이론을 이용하여 상기 디지털 음성 신호로부터 휴먼 스트레인지 어트랙터를 산출하고, 상기 산출된 휴먼 스트레인지 어트랙터를 상기 지수 데이터베이스에 저장하는 데이터 처리부와,상기 산출된 휴먼 스트레인지 어트랙터와 상기 지수 데이터베이스에 저장되어 있는 상기 진단을 받는 사람 또는 다른 진단을 받는 사람의 과거의 휴먼 스트레인지 어트랙터에 기초하여 정량적 평가를 행하는 어트랙터 평가부와,상기 평가 결과를 표시하는 표시부를 포함하며,음성 신호가 아날로그 음성 신호인 경우에는, 상기 음성 처리부 또는 상기 아날로그/디지털 변환부에서 수신하고, 상기 음성 신호가 디지털 음성 신호인 경우에는, 상기 데이터 처리부에서 수신하는 것을 특징으로 하는 심신 진단 시스템.
- 문진 등에 대한 심신의 진단을 받는 사람이 내는 음성에 의해 심신 상태를 진단하는 심신 진단 시스템으로서,평가 결과와 상기 진단을 받는 사람을 식별하는 정보를 대응시켜 저장하고 있는 지수 데이터베이스와,상기 진단을 받는 사람이 갖는 피검진자 단말기에 대하여, 상기 진단을 받는 사람이 내는 음성을 음성 신호로서 취득하는 음성 처리부와, 상기 음성 신호를 디지털화함으로써 디지털 음성 신호로 변환하는 아날로그/디지털 변환부와, 상기 문진 등을 상기 진단을 받는 사람에 대하여 제공하는 문진부와, 카오스 이론을 이용하여 상기 디지털 음성 신호로부터 휴먼 스트레인지 어트랙터를 산출하고, 상기 산출 결과와 상기 심신 진단 시스템에 송신하는 데이터 처리부와, 상기 문진 등과 어트랙터 평가부에서의 평가를 수신하여 표시하는 표시부를 송신하는 처리 기능 배신부와,상기 피검진자 단말기에서 산출한 휴먼 스트레인지 어트랙터를 상기 지수 데이터베이스에 저장하고, 상기 산출된 휴먼 스트레인지 어트랙터와 상기 지수 데이터베이스에 저장되어 있는 상기 진단을 받는 사람 또는 다른 진단을 받는 사람의 과거의 휴먼 스트레인지 어트랙터에 기초하여 정량적 평가를 행하는 어트랙터 평가부와,상기 피검진자 단말기에 대하여 상기 문진 등을 송신하고, 상기 피검진자 단말기로부터 상기 산출 결과를 수신하여, 상기 어트랙터 평가부에서 이루어진 평가 결과를 상기 피검진자 단말기에 송신하는 데이터 수신 및 배신부를 포함하는 것을 특징으로 하는 심신 진단 시스템.
- 제5항 내지 제7항 중 어느 한 항에 있어서,상기 심신 진단 시스템은,상기 진단을 받는 사람의 정보를 저장하고 있는 피검진자 데이터베이스와,상기 피검진자 데이터베이스에 저장되어 있는 상기 진단을 받는 사람의 정보에 기초하여, 진단을 행하는 사람에 대하여 적어도 하나 이상의 문진 등을 제공하는 문진 등 제공부를 포함하는 것을 특징으로 하는 심신 진단 시스템.
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/JP2002/011738 WO2004043259A1 (ja) | 2002-11-11 | 2002-11-11 | 心身診断システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20040068130A true KR20040068130A (ko) | 2004-07-30 |
| KR100596099B1 KR100596099B1 (ko) | 2006-07-06 |
Family
ID=32310247
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020047006586A KR100596099B1 (ko) | 2002-11-11 | 2002-11-11 | 심신 진단 시스템 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US7363226B2 (ko) |
| EP (2) | EP1561422A4 (ko) |
| KR (1) | KR100596099B1 (ko) |
| IL (2) | IL161562A0 (ko) |
| WO (1) | WO2004043259A1 (ko) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20200114596A (ko) * | 2019-03-29 | 2020-10-07 | 연세대학교 산학협력단 | 휴대용 단말을 이용한 사용자 음성 피로도 원격 관리 장치 |
Families Citing this family (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP1607043B1 (en) * | 2003-02-24 | 2012-09-26 | Michiko Takaoka | Psychosomatic state determination system |
| CN1867291A (zh) * | 2003-11-20 | 2006-11-22 | 松下电器产业株式会社 | 健康数据采集系统 |
| WO2005104950A1 (ja) * | 2004-04-28 | 2005-11-10 | Electronic Navigation Research Institute, An Independent Administrative Institution | 大脳評価装置 |
| US8442835B2 (en) | 2010-06-17 | 2013-05-14 | At&T Intellectual Property I, L.P. | Methods, systems, and products for measuring health |
| US8666768B2 (en) | 2010-07-27 | 2014-03-04 | At&T Intellectual Property I, L. P. | Methods, systems, and products for measuring health |
| CN108135485B (zh) | 2015-10-08 | 2021-08-17 | 科蒂奥医疗公司 | 通过语音分析评估肺部病症 |
| US10847177B2 (en) | 2018-10-11 | 2020-11-24 | Cordio Medical Ltd. | Estimating lung volume by speech analysis |
| US11011188B2 (en) | 2019-03-12 | 2021-05-18 | Cordio Medical Ltd. | Diagnostic techniques based on speech-sample alignment |
| US11024327B2 (en) | 2019-03-12 | 2021-06-01 | Cordio Medical Ltd. | Diagnostic techniques based on speech models |
| US11484211B2 (en) | 2020-03-03 | 2022-11-01 | Cordio Medical Ltd. | Diagnosis of medical conditions using voice recordings and auscultation |
| CN111681779A (zh) * | 2020-04-22 | 2020-09-18 | 北京捷通华声科技股份有限公司 | 一种医疗诊断系统 |
| US11417342B2 (en) | 2020-06-29 | 2022-08-16 | Cordio Medical Ltd. | Synthesizing patient-specific speech models |
| CN112190263B (zh) * | 2020-10-09 | 2023-03-24 | 安徽美心信息科技有限公司 | 一种用于心理测量的分析系统及其分析方法 |
Family Cites Families (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| FR2651015B1 (fr) | 1989-08-17 | 1991-11-15 | Nergeco Sa | Porte de manutention a rideau relevable avec applicateur contre les battements |
| JPH069546B2 (ja) | 1990-11-30 | 1994-02-09 | 株式会社コンピュータコンビニエンス | 体表面から採取した脈波及び／又は心拍を用いる診断装置 |
| JP2816799B2 (ja) * | 1993-08-10 | 1998-10-27 | 株式会社日立製作所 | センシング装置と環境制御機器及び環境制御方法 |
| US5935060A (en) * | 1996-07-12 | 1999-08-10 | First Opinion Corporation | Computerized medical diagnostic and treatment advice system including list based processing |
| JP3151489B2 (ja) * | 1998-10-05 | 2001-04-03 | 運輸省船舶技術研究所長 | 音声による疲労・居眠り検知装置及び記録媒体 |
| US6275806B1 (en) * | 1999-08-31 | 2001-08-14 | Andersen Consulting, Llp | System method and article of manufacture for detecting emotion in voice signals by utilizing statistics for voice signal parameters |
| JP2002306492A (ja) * | 2001-04-16 | 2002-10-22 | Electronic Navigation Research Institute | カオス論的ヒューマンファクタ評価装置 |
| US7124075B2 (en) * | 2001-10-26 | 2006-10-17 | Dmitry Edward Terez | Methods and apparatus for pitch determination |
| JP2003144438A (ja) * | 2001-11-13 | 2003-05-20 | Electronic Navigation Research Institute | カオス論的脳機能診断装置 |
| JP2003280684A (ja) * | 2002-03-25 | 2003-10-02 | Electronic Navigation Research Institute | カオス論的診断感度増感装置 |
| EP1607043B1 (en) * | 2003-02-24 | 2012-09-26 | Michiko Takaoka | Psychosomatic state determination system |
| EP1953650A1 (en) * | 2003-02-24 | 2008-08-06 | Electronic Navigation Research Institute, an Independent Administrative Institution | A chaos theoretical exponent value calculation system |
-
2002
- 2002-11-11 EP EP02808120A patent/EP1561422A4/en not_active Ceased
- 2002-11-11 WO PCT/JP2002/011738 patent/WO2004043259A1/ja active Application Filing
- 2002-11-11 EP EP10165213A patent/EP2236084A1/en not_active Withdrawn
- 2002-11-11 IL IL16156202A patent/IL161562A0/xx unknown
- 2002-11-11 US US10/493,749 patent/US7363226B2/en not_active Expired - Fee Related
- 2002-11-11 KR KR1020047006586A patent/KR100596099B1/ko not_active IP Right Cessation
-
2004
- 2004-04-22 IL IL161562A patent/IL161562A/en not_active IP Right Cessation
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20200114596A (ko) * | 2019-03-29 | 2020-10-07 | 연세대학교 산학협력단 | 휴대용 단말을 이용한 사용자 음성 피로도 원격 관리 장치 |
Also Published As
| Publication number | Publication date |
|---|---|
| US20050102145A1 (en) | 2005-05-12 |
| WO2004043259A1 (ja) | 2004-05-27 |
| EP2236084A1 (en) | 2010-10-06 |
| IL161562A0 (en) | 2004-09-27 |
| US7363226B2 (en) | 2008-04-22 |
| IL161562A (en) | 2010-11-30 |
| KR100596099B1 (ko) | 2006-07-06 |
| EP1561422A1 (en) | 2005-08-10 |
| EP1561422A4 (en) | 2009-01-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20080045805A1 (en) | Method and System of Indicating a Condition of an Individual | |
| KR100596099B1 (ko) | 심신 진단 시스템 | |
| JP5714411B2 (ja) | 行動分析方法および行動分析装置 | |
| US20170007126A1 (en) | System for conducting a remote physical examination | |
| KR20180099403A (ko) | 온라인 심리상담 시스템 및 이를 이용한 온라인 심리상담 방법 | |
| KR101772279B1 (ko) | 사용자의 생체 데이터를 이용한 심리검사의 왜곡도 보정방법 | |
| AU2017263802B8 (en) | A user interface for navigating through physiological data | |
| CN108597621B (zh) | 基于中医理论的健康状态监控装置、系统及方法 | |
| US11417045B2 (en) | Dialog-based testing using avatar virtual assistant | |
| Rennoll et al. | Electronic stethoscope filtering mimics the perceived sound characteristics of acoustic stethoscope | |
| JP3764663B2 (ja) | 心身診断システム | |
| EP1229822A2 (en) | Parameter sensing and evaluation system | |
| CN115862868A (zh) | 心理测评系统、平台、电子设备及存储介质 | |
| KR20090027027A (ko) | 인지적 자극 하에서 측정된 생체신호를 이용한 정신적질환분석방법 | |
| KR20190061826A (ko) | 외상 후 스트레스 장애 및 공황장애 치료를 위한 복합 생체 정보 검출 시스템 및 방법 | |
| JP2011087784A (ja) | 生体行動反応解析システム | |
| TWI626037B (zh) | Virtual reality system for psychological clinical application | |
| JP7503677B1 (ja) | 生体行動反応解析システム | |
| RU2678300C1 (ru) | Многофункциональное аппаратно-программное устройство автоматизированной оценки психоэмоционального состояния человека | |
| WO2023229016A1 (ja) | 医療連携システム、医療連携方法、及びプログラム | |
| RU2506048C1 (ru) | Способ определения ложности передаваемой информации по динамике параметров невербального поведения человека | |
| US20240071241A1 (en) | Test familiar determination device, test familiar determination method and storage medium | |
| WO2022259464A1 (ja) | 情報処理装置、制御方法及び記憶媒体 | |
| CN115206470A (zh) | 一种个体紧张评估方法 | |
| Jones | Examination of Electrophysiological Responses of Healthy Young Adults to Stuttered Speech |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20130625 Year of fee payment: 8 |
|
| FPAY | Annual fee payment |
Payment date: 20140613 Year of fee payment: 9 |
|
| FPAY | Annual fee payment |
Payment date: 20150617 Year of fee payment: 10 |
|
| FPAY | Annual fee payment |
Payment date: 20160617 Year of fee payment: 11 |
|
| FPAY | Annual fee payment |
Payment date: 20170620 Year of fee payment: 12 |
|
| LAPS | Lapse due to unpaid annual fee |