KR20120066275A - 거짓말 판독 방법 및 그를 적용한 거짓말 판독 서버 및 단말 장치 - Google Patents

거짓말 판독 방법 및 그를 적용한 거짓말 판독 서버 및 단말 장치 Download PDF

Info

Publication number
KR20120066275A
KR20120066275A KR1020100127527A KR20100127527A KR20120066275A KR 20120066275 A KR20120066275 A KR 20120066275A KR 1020100127527 A KR1020100127527 A KR 1020100127527A KR 20100127527 A KR20100127527 A KR 20100127527A KR 20120066275 A KR20120066275 A KR 20120066275A
Authority
KR
South Korea
Prior art keywords
lie
information
emotion information
voice
reading
Prior art date
Application number
KR1020100127527A
Other languages
English (en)
Other versions
KR101209831B1 (ko
Inventor
최현규
조용준
Original Assignee
유비벨록스(주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 유비벨록스(주) filed Critical 유비벨록스(주)
Priority to KR1020100127527A priority Critical patent/KR101209831B1/ko
Publication of KR20120066275A publication Critical patent/KR20120066275A/ko
Application granted granted Critical
Publication of KR101209831B1 publication Critical patent/KR101209831B1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/164—Lie detection
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification
    • G10L17/26—Recognition of special voice characteristics, e.g. for use in lie detectors; Recognition of animal voices

Abstract

사람의 인체에 내포된 감성 또는 음성을 정량화하여 거짓말을 판독하기 위한 방법 및 그를 적용한 거짓말 판독 서버, 단말 장치이 개시된다. 본 발명에 따르면, (a) 상대방의 음성 신호, 및 상기 음성 신호와 관련하여 임의의 감성 센서에 의해 측정된 제1 감성 정보를 수집하는 단계, (b) 상기 음성 신호를 증폭하여 상기 음성 신호의 성분 중 규칙 변화가 심한 특정 구간에 대해 분석에 의해 제2 감성 정보 -상기 제2 감성 정보는 진폭 크기, 길이, 각도, 최대값, 진동 크기 및 진동 반복 횟수를 포함 함- 를 추출하는 단계, (c) 제1 기준 감성 정보와 상기 제1 감성 정보를 비교 후, 기준치 이상 여부를 판단하여 제1 거짓말 상태를 결정하는 단계, (d) 제2 기준 감성 정보와 상기 제2 감성 정보를 비교 후, 기준치 이상 여부를 판단하여 제2 거짓말 상태를 결정하는 단계, 및 (e) 상기 음성 신호 중 상기 제1 거짓말 상태 및 제2 거짓말 상태 중 적어도 하나 이상의 상태를 담고 있는 구간의 거짓말 음성을 추출하는 단계를 포함하는 거짓말 판독 방법이 제공된다.
이에 본 발명은 음성의 특정 구간에 있는 이상 음성을 추출하여 사용자 편의적으로 재생시킬 수 있다.

Description

거짓말 판독 방법 및 그를 적용한 거짓말 판독 서버 및 단말 장치{LIE DETECTING METHOD AND LIE DETECTING SERVER THEREBY AND TERMINAL DEVICE HAVING THE SAME}
본 발명은 거짓말 판독 방법 및 그를 적용한 거짓말 판독 서버, 단말 장치에 관한 것으로서, 더욱 상세하게는, 사람의 인체에 내포된 감성 또는 음성을 정량화하여 거짓말을 판독하기 위한 방법 및 그를 적용한 거짓말 판독 서버 및 단말 장치에 관한 것이다.
최근에는 사람이 갖고 있는 감정을 기계적인 장치로 인식하고자 사람-기계 인터페이스 기술이 개발되고 있다. 이러한 사람-기계 인터페이스 기술은 사람의 신체 또는 음성에 내포되어 있는 감정 요소를 정량화하여 생활에 활용하고자 하는 목적을 갖는다.
그러나, 사람의 신체 또는 음성에 내포된 감정을 정량화하여 기계적인 장치로 구현하기란 여간 쉬운것이 아니다. 즉, 사람의 감정은 미묘하고, 변화가 심하기 때문에 정확한 측정값으로 도출하기가 쉽지 않기 때문이다.
이와 같은 이유에도 불구하고, 사람의 감정을 인식하여 활용된 경우가 종종있다. 그 예로는 거짓말 탐지기를 들 수 있다. 거짓말 탐지기는 폴리그래프의 일종으로서, 사람의 흥분, 긴장 또는 갈등의 상태를 미리 정의해 놓은 기준에 의하여 감지하는 시스템을 지칭한다.
그러나, 종래의 거짓말 탐지기는 사람의 음성을 분석하여 오프 라인의 단일 시스템과 같은 형태로 하여 범죄 수사에 이용할 뿐, 사람의 인체에 내포된 감성을 이용하지는 못하였다. 아울러, 종래의 거짓말 탐지기는 범죄 수사와 같이 심리 분석에 이용될 뿐, 사용자의 편의적인 일상 생활에 유용하게 적용될 수 없는 문제점이 있었다.
본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 통화중인 상대방의 음성과 그 음성을 발산하는 감성 상태를 정량화하여 정보를 추출하고, 그의 조합 관계에 의해서 거짓말을 탐지하며, 탐지된 거짓말 상태에 대응하여 통화 내용 중 해당하는 음성을 신속하게 추출할 수 있는 거짓말 판독 방법 및 그를 적용한 거짓말 판독 서버 및 단말 장치를 제공하는데, 그 목적이 있다.
상기한 바와 같은 본 발명의 목적을 달성하고, 후술하는 본 발명의 특징적인 기능을 수행하기 위한, 본 발명의 특징은 다음과 같다.
본 발명의 일 실시예에 따르면, (a) 상대방의 음성 신호, 및 상기 음성 신호와 관련하여 임의의 감성 센서에 의해 측정된 제1 감성 정보를 제공받는 단계; (b) 상기 음성 신호를 증폭하여 상기 음성 신호의 성분 중 규칙 변화가 심한 특정 구간에 대해 분석에 의해 제2 감성 정보 -상기 제2 감성 정보는 진폭 크기, 길이, 각도, 최대값 및 진동 크기 및 진동 반복 횟수를 포함하여 분석한 것임- 를 추출하는 단계; (c) 제1 기준 감성 정보와 상기 제1 감성 정보를 비교 후, 기준치 이상 여부를 판단하여 제1 거짓말 상태를 결정하는 단계; (d) 제2 기준 감성 정보와 상기 제2 감성 정보를 비교 후, 기준치 이상 여부를 판단하여 제2 거짓말 상태를 결정하는 단계; 및 (e) 상기 음성 신호 중 상기 제1 거짓말 상태 및 제2 거짓말 상태 중 적어도 하나 이상의 상태를 담고 있는 구간의 거짓말 음성을 추출하는 단계를 포함하는 거짓말 판독 방법이 제공된다.
본 실시예에서, 상기 제1 감성 정보는, 사람의 인체 내에서 발생되는 맥파, 혈압, 호흡, 피부 전도도, 근세포 수축의 전위차, 체압, 뇌신경 세포의 생체 자기, 뇌파, 피부 전기 저항 및 온도 정보 중 적어도 하나 이상을 포함할 수 있다.
또한, 상기 제1 기준 감성 정보는, 임의의 샘플 감성 센서를 이용하여 사람의 인체 내에서 발생되는 생체 신호를 측정, 분석하여 얻어진 기준 감성 데이터일 수 있으며, 제2 기준 감성 정보는, 다수의 샘플 음성 신호의 음소적 요소와 음율적 요소를 파악하여 얻어진 기준 감성 데이터일 수 있다.
또한, 본 발명의 다른 일 실시예에 따르면, 상술한 거짓말 판독 방법을 적용하여 거짓말 판독 서비스를 단말 장치로 제공하는 거짓말 판독 서버가 구현되며, 상기 거짓말 판독 서버는, 유,무선 통신를 관리하는 유,무선 통신 시스템과 연동되어 운영될 수 있다.
또한, 본 발명의 또 다른 일 실시예에 따르면, 상술한 거짓말 판독 방법을 적용하여 추출된 거짓말 음성을 재생하는 단말 장치가 구현된다.
여기서, 상기 단말 장치는, 이동 단말기 및 고정 단말기 중 어느 하나일 수 있으며, 이동 단말일 경우에는 LTE 단말기, W-CDMA 단말기, HSDPA 단말기, Wibro 단말기, PDA 단말기 및 CDMA 단말기 군 중 선택된 어느 하나일 수 있다.
또한, 상기 이동 단말기는, 상기 제1 거짓말 상태 및 제2 거짓말 상태와, 상기 제1 거짓말 상태와 제2 거짓말 상태를 비교하여 가공한 후, 그래픽 사용자 인터페이스의 형태로 제공할 수 있다.
본 발명에 의하면, 사람의 인체 또는 음성에 내포된 감성을 정량화하는 거짓말 상태를 추출하고, 상기 거짓말 상태에 대응한 상기 음성의 특정 구간에 있는 음성을 추출하여 사용자 편의적으로 재생시킬 수 있어,상대방의 감성을 이해하며, 자신를 제어하여 원활한 커뮤니케이션과 원만한 대인 관계를 유지하는 효과를 달성하게 된다.
또한, 본 발명에 따르면, 상술한 거짓말 상태에 대응한 음성의 특정 구간에 있는 음성을 추출하여 사용자 편의적으로 재생하고, 그래픽 사용자 인터페이스 형태로 제공함으로써, 추후에 상대방의 감성을 확인 가능한 효과가 실현된다.
도 1은 본 발명의 제1 실시예에 따른 거짓말 판독 방법을 예시적으로 나타낸 도면이다.
도 2는 본 발명에 제1 실시예에 따른 감성 센서를 예시적으로 나타낸 도면이다.
도 3 및 도 4는 본 발명의 제1 실시예에 따른 제2 감성 정보를 설명하기 위한 음성 파형을 예시적으로 나타낸 도면이다.
도 5는 본 발명의 제2 실시예에 따른 거짓말 판독 시스템을 예시적으로 나타낸 도면이다.
도 6은 본 발명의 제2 실시예에 따른 거짓말 판독 서버(100)를 보다 구체적으로 나타낸 구성도이다.
도 7은 본 발명의 제3 실시예에 따른 다른 형태의 거짓말 판독 시스템을 예시적으로 나타낸 도면이다.
도 8은 본 발명의 제3 실시예에 따른 수신측 단말 장치(200)를 예시적으로 나타낸 구성도이다.
이하, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 바람직한 실시예들에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.
제1 실시예
도 1은 본 발명의 제1 실시예에 따른 거짓말 판독 방법을 예시적으로 나타낸 도면이다. 도 1을 설명하면서 도 2 내지 도 4를 참조 설명한다.
도 1에 도시된 바와 같이, 본 발명의 제1 실시예에 따른 거짓말 판독 방법(S100)은 음성 신호 및 제1 감성 정보 수신 단계(S10), 제2 감성 정보 추출 단계(S20), 제1 거짓말 상태 결정 단계(S30), 제2 거짓말 상태 결정 단계(S40) 및 거짓말 음성 추출 단계(S40)를 포함하여 이루어진다.
먼저, 본 발명의 S10 단계에서는 상대방의 음성에 내포된 감성을 파악하기 위하여 음성 신호를 수신하며, 통화중인 사람의 인체에 내포된 감성을 더불어 파악하기 위하여 사람의 인체에 내포된 감성을 측정한 임의의 감성 센서로부터 제1 감성 정보를 수신하는 역할을 한다. 여기서, 상기 음성 신호와 제1 감성 정보를 수신하는 측은 감성 판독 서버 또는 단말 장치일 수 있으며, 이에 대해서는 추후에 보다 상세히 설명하기로 한다.
아울러, 상기 제1 감성 정보는 임의의 감성 센서로부터 사람의 인체 내에서 발생되는 맥파, 혈압, 호흡, 피부 전도도, 근세포 수축의 전위차, 체압, 뇌신경 세포의 생체 자기, 뇌파, 피부 전기 저항 및 온도 정보 중 적어도 하나 이상을 측정한 결과 정보이다. 상기 감성 센서에 대해서는 도 2를 참조하여 설명한다.
도 2는 본 발명에 제1 실시예에 따른 감성 센서를 예시적으로 나타낸 도면으로서, 도 2의 감성 센서(30)는 송신측 단말 장치(10)에 장착되어 상대방의 인체(20)에 내포된 생체 신호를 측정하게 된다. 본 발명에 적용될 감성 센서(30)는 PGG 센서, ECG 센서, PTT 센서, TDP 센서, MEG 센서 및 EEG 센서, GSR 센서, 온도 센서, 가속도 센서 및 음성 센서 중 적어도 하나 이상을 포함한다.
상기 PGG 센서는 사람의 인체 피부로 광원을 투과시켜 피부를 투과하는 빛의 강도를 통해 혈관의 이완 및 수축 정도를 측정하게 된다. ECG 센서는 사람 인체 내의 심장벽을 형성하는 근세포의 수축에 의해 발생하는 전위차를 측정하며, RSP 센서는 사람 인체의 흉부에 접촉하여 호흡의 정도를 측정한다.
상기 PTT 센서는 생체 신호시의 지연 시간을 측정하고, TDP 센서는 적응적 생리신호 분석 방법으로 시간 관점에서 생리 신호의 파형을 측정하며, FSR 센서는 센서 표면에 힘을 증가 시켜 사람 인체에 접촉하게 되면 저항의 발생에 의해 체압을 측정하게 된다. MEG 센서는 사람 머리에 접근하여 뇌신경 세포의 미세한 생체 자기를 초전도 코일을 이용해 측정하는 센서이고, EEG 센서는 MEG 센서와 마찬가지로 뇌파를 측정하는 센서이다.
GSR 센서는 피부의 전기저항을 측정하고, 온도 센서는 사람 체온의 변화를 감지하는 센서이며, 가속도 센서는 사람의 이동하는 물체의 가속도 및 충격의 세기를 측정하는 센서이며, 음성 센서는 음성을 감지하여 화자인식, 음성의 특성을 추출등을 하는 센서이다.
이와 같이 다양한 형태의 감성 센서(30)가 본 발명의 목적을 저해하지 않는 범위내에서 적용될 수 있으나, 이에 한정되지 않고 다양한 센서를 더 적용할 수 있음을 밝혀둔다.
이때, 각 감성 센서(30)로부터 측정된 정보를 통칭하여 '제1 감성 정보'라 명명하였다. 상기 감성 센서(30)는 해당하는 사람 인체의 부위에 해당하는 부위 또는 근접하는 형태로 측정 가능하다.
다음의 S20 단계에서는 S10 단계에서 수신한 음성 신호를 증폭하여 음성 신호의 성분 중 규칙 변화가 심한 특정 구간에 대해 분석하여 제2 감성 정보를 추출하는 기능을 수행한다. 상기 제2 감성 정보에 대해 도 3을 참조하여 설명한다.
도 3 및 도 4는 본 발명의 제1 실시예에 따른 제2 감성 정보를 설명하기 위한 음성 파형을 예시적으로 나타낸 도면으로서, 도 4는 도 3의 (c)를 보다 구체적으로 나타낸 파형이다.
도시된 바와 같이, 도 3의 (a)는 정상적인 음성 통화에서 발생되는 음성 신호를 증폭한 파형이고, (b)는 약간의 감성(스트레스)이 들어간 상태의 음성 신호를 증폭한 파형이며, 도 3의 (c) 및 도 4는 감성(스트레스)이 증가된 상태의 음성 신호를 증폭한 파형이다.
이에 따라, 본 발명의 제2 감성 정보는 도 3의 (c) 및 도 4의 음성 파형과 같은 형태에서 추출되는 정보이다. 즉, 도 4에서와 같이 본 발명의 제2 감성 정보(40)는 음성 신호의 규칙 변화가 심한 특정 구간에서 분석한 결과로서, 음성 파형의 특정 구간에 있는 음성 파형에서 음성의 진폭 크기(42), 길이(44), 각도(46) 및 최대 값(48) 및 진동 크기(49)을 파악할 수 있게 된다. 또한, 제2 감성 정보(40)는 도 3의 (c) 및 도 4의 음성 파형이 반복될 경우 진동 반복 횟수도 마찬가지로 파악할 수 있게 된다.
여기서, 음성 신호의 특정 구간이라 함은 통상적인 형태에서 벗어나 변화가 심한 구간을 의미한다. 이러한 특정 구간은 감성(감정)이 포함된 상태임이 충분히 감지될 수 있다.
다시 도 1로 돌아와, 다음의 S30 단계에서는 제1 기준 감성 정보와 S10 단계에서 추출된 제1 감성 정보를 비교한 후, 기준치 이상 여부를 판단하여 제1 거짓말 상태를 결정하는 역할을 수행하게 된다. 상기 제1 기준 감성 정보라 함은 임의의 샘플 감성 센서를 이용하여 사람의 인체 내에서 발생되는 생체 신호를 측정, 분석하여 얻어진 기준 감성 데이터를 지칭한다. 물론, 기준 감성 데이터에는 사람의 인체 내에서 발생되는 맥파, 혈압, 호흡, 피부 전도도, 근세포 수축의 전위차, 체압, 뇌신경 세포의 생체 자기, 뇌파, 피부 전기 저항 및 온도와 관련하여 축적된 정보들이다.
이렇게 축적된 기준 감성 데이터와 제1 감성 정보 간의 비교를 통해서 기준치 이상 여부를 충분히 파악할 수 있게 됨으로써, 특정 구간에 대해서 거짓말 상태를 결정할 수 있게 되는 것이다.
다음으로, 본 발명의 S40 단계에서는 제2 기준 감성 정보와 S20 단계에서 추출한 제2 감성 정보를 비교한 후, 기준치 이상 여부를 판단하여 제2 거짓말 상태를 결정하는 역할을 수행하게 된다. 상기 제2 기준 감성 정보라 함은 다수의 샘플 음성 신호의 음소적 요소와 음율적 요소를 파악하여 얻어진 기준 감성 데이터를 지칭한다.
이때, 음소적 요소라 함은 상대방이 말한 음성 신호에서 측정 가능한 피치, 에너지 및, 발음 속도 등의 파라미터 정보를 의미하며, 운율적 요소라 함은 상대방이 말한 음성 신호의 구간 피치, 에너지의 평균, 표준 편차 및 최대 값 등의 파라미터 정보를 의미한다.
이에 따라, 축적된 기준 감성 데이터는 음소적 요소의 파라미터로부터 피치 횟수와 크기, 에너지의 크기 및 발음 속도의 크기와 운율적 요소의 파라미터로부터 구간 피치의 횟수와 크기, 에너지의 평균 값, 표준 편차 값 및 최대 값 등을 분석한 결과일 것이다. 물론, 기준 감성 데이터는 음성 파형의 진폭 크기, 길이, 각도 및 최대 값, 진동 크기 및 진동 반복 횟수와 관련하여 축적된 결과이다.
이렇게 축적된 기준 감성 데이터와 제2 감성 정보 간의 비교를 통해서 기준치 이상 여부를 충분히 파악할 수 있게 됨으로써, 특정 구간에 대해서 거짓말 상태를 결정할 수 있게 되는 것이다.
마지막으로, 본 발명의 S50 단계에서는 S30 단계와 S40 단계에서 결정된 제1 거짓말 상태 및 제2 거짓말 상태를 가지고, 음성 신호 중 제1 거짓말 상태 및 제2 거짓말 상태 중 적어도 하나 이상의 상태를 담고 있는 구간의 거짓말 음성을 추출하는 역할을 수행하게 된다.
즉, 음성 신호 중 제1 거짓말 상태를 담고 있는 구간의 거짓말 음성을 추출하거나, 제2 거짓말 상태를 담고 있는 구간의 거짓말 음성을 추출할 수도 있다. 그러나, 바람직하게는 제1 거짓말 상태와 제2 거짓말 상태가 일치하는 음성 신호의 특정 구간에 대해서 특정 구간의 거짓말 음성을 추출하게 된다. 이런 경우, 개별적인 거짓말 상태를 담고 있는 구간의 거짓말 음성을 추출하는 것보다 더 정확히 높은 것은 당연한 결과일 것이다.
제2 실시예
도 5는 본 발명의 제2 실시예에 따른 거짓말 판독 시스템을 예시적으로 나타낸 도면이다.
도 5를 참조하면, 본 발명의 거짓말 판독 시스템은 송신측 단말 장치(10), 거짓말 판독 서버(100) 및 수신측 단말 장치(50)를 포함한다. 본 발명의 제2 실시예에 따른 송신측 단말 장치(10)는 앞서 도 1 내지 도 4에서 설명된 거짓말 판독 방법과 관련하고 있는 감성 센서(30)를 구비하고 있는 단말이다. 이러한 단말 장치(10)는 통신망을 경유하여 거짓말 판독 서버(100)에 연결된다.
본 발명의 제2 실시예에 따른 거짓말 판독 서버(100)는 도 1 내지 도 4에 설명된 거짓말 판독 방법을 실질적으로 적용하고 있는 서버로서, 송,수신측 단말 장치(10, 50)의 사이에 형성되어 유,무선 통신 서비스를 제공하는 측에 형성된 서버이다. 이러한 거짓말 판독 서버(100)는 거짓말 판독 방법을 적용함으로써 거짓말 판독 서비스를 통신망을 경유하여 수신측 단말 장치(50)로 제공하게 된다. 이를 위하여 유,무선 통신을 관리하는 유,무선 통신 시스템(미도시)과 연동된다.
예를 들어, 무선 통신 시스템일 경우에는 기지국, 제어국 및 교환국 등이 거짓말 판독 서버(100)와 연동될 수 있으며, 유선 통신 시스템일 경우에는 교환국에 설치된 전자 교환기 등과 거짓말 판독 서버(100)와 연동될 수 있다. 이러한 유,무선 통신 시스템은 송신측 단말 장치(10)에서 음성 신호 및 음성 신호와 관련하여 임의의 감성 센서에 의해 측정된 제1 감성 정보를 부가적인 서비스로 제공받아 거짓말 판독 서버(100)로 제공하게 된다.
본 발명의 수신측 단말 장치(50)는 거짓말 판독 서버(100)로부터 통신망을 경유하여 거짓말 판독 서비스를 제공받는 사용자측의 단말이다. 송신측 단말 장치(10)와 거짓말 판독 서버(100) 사이 및 거짓말 판독 서버(100)와 수신측 단말 장치(50)의 사이에 형성된 통신망은 인터넷망, 인트라넷망, 이동통신망 등 다양한 유무선 통신 기술을 이용하여 인터넷 프로토콜로 데이터를 송수신할 수 있는 망을 말한다.
거짓말 판독 서버
도 6은 본 발명의 제2 실시예에 따른 거짓말 판독 서버(100)를 보다 구체적으로 나타낸 구성도이다.
도 6을 참조하면, 본 발명의 제2 실시예에 따른 거짓말 판독 서버(100)는 도 1 내지 도 4에 설명된 거짓말 판독 방법을 실질적으로 적용한다. 즉, 본 발명의 거짓말 판독 서버(100)는 수신 모듈(110), 감성 정보 추출 모듈(120), 제1 거짓말 결정 모듈(130), 제2 거짓말 결정 모듈(140), 음성 추출 모듈(150), 송신 모듈(160), 제어모듈(170), 제1 DB(180) 및 제2 DB(190)를 포함하여 구성된다.
본 발명의 수신 모듈(110)은 상대방의 음성 신호, 및 상기 음성 신호와 관련하여 임의의 감성 센서(30)에 의해 측정된 제1 감성 정보를 수집하는 기능을 수행하고, 감성 정보 추출 모듈(120)은 음성 신호를 증폭하여 음성 신호의 성분 중 규칙 변화가 심한 특정 구간에 대해 분석에 의해 진폭 크기, 길이, 각도, 최대값, 진동 크기 및 진동 반복 횟수를 포함하는 제2 감성 정보를 추출하는 기능을 하며, 제1 거짓말 결정 모듈(130)은 제1 기준 감성 정보와 상기 제1 감성 정보를 비교 후, 기준치 이상 여부를 판단하여 제1 거짓말 상태를 결정하는 기능을 수행한다.
본 발명의 제2 거짓말 결정 모듈(140)은 제2 기준 감성 정보와 상기 제2 감성 정보를 비교 후, 기준치 이상 여부를 판단하여 제2 거짓말 상태를 결정하는 기능을 수행하고, 음성 추출 모듈(150)은 상기 음성 신호 중 상기 제1 거짓말 상태 및 제2 거짓말 상태 중 적어도 하나 이상의 상태를 담고 있는 구간의 거짓말 음성을 추출하는 기능을 수행하며, 송신 모듈(160)은 상기 추출된 거짓말 음성을 수신측 단말 장치(50)로 제공하는 기능을 수행한다. 이상의 각 정보는 도 1 내지 도 4에서 상세히 설명하였다.
또한, 본 발명의 제어모듈(170)은 수신 모듈(110), 감성 정보 추출 모듈(120), 제1 거짓말 결정 모듈(130), 제2 거짓말 결정 모듈(140), 음성 추출 모듈(150), 송신 모듈(160), 제1 DB(180) 및 제2 DB(190) 간의 데이터 흐름을 제어하며, 제1 DB(180)는 기설정되는 제1 기준 감성 정보, 제2 기준 감성 정보 및 송신측 단말 장치로부터 송신된 음성 신호 및 제1 감성 정보(생체 신호)를 저장하며, 제2 DB(190)는 각 모듈에서 처리된 데이터를 저장하는 역할을 한다.
이러한 제1 및 제2 데이터베이스(180, 190)는 데이터베이스 관리 프로그램(DBMS)을 이용하여 컴퓨터 시스템의 저장공간(하드디스크 또는 메모리)에 구현되는 데이터 구조로서, 데이터의 검색(추출), 삭제, 편집, 추가 등을 자유롭게 행할 수 있는 데이터 저장 형태를 가지며, 오라클(Oracle), 인포믹스(Infomix), 사이베이스(Sybase), DB2와 같은 관계형 데이타베이스 관리 시스템(RDBMS)이나, 겜스톤(Gemston), 오리온(Orion), O2 등과 같은 객체 지향 데이타베이스 관리 시스템(OODBMS) 및 엑셀론(Excelon), 타미노(Tamino), 세카이주(Sekaiju) 등의 XML 전용 데이터베이스(XML Native Database)를 이용하여 본 실시예의 목적에 맞게 구현할 수 있으며, 자신의 기능을 달성하기 위하여 적당한 필드(Field) 또는 엘리먼트들을 가질 수 있다.
제3 실시예
도 7은 본 발명의 제3 실시예에 따른 다른 형태의 거짓말 판독 시스템을 예시적으로 나타낸 도면이다.
도 7를 참조하면, 본 발명의 거짓말 판독 시스템은 송신측 단말 장치(10), 유,무선 통신 시스템(300) 및 수신측 단말 장치(200)를 포함한다. 본 발명의 제3 실시예에 따른 송신측 단말 장치(10)는 앞서 도 1 내지 도 4에서 설명된 거짓말 판독 방법과 관련하고 있는 감성 센서(30)를 구비하고 음성 신호와 제1 감성 정보를 발생시키는 있는 단말이다. 이러한 단말 장치(10)는 통신망을 경유하여 유,무선 통신을 관리하는 유,무선 통신 시스템(300)에 연결된다.
본 발명의 유,무선 통신 시스템(300)은 송신측의 단말 장치(10)에서 보내온 음성 신호 및 제1 감성 정보(생체 신호)를 수신측 단말 장치(200)로 보내는 중계역할을 하는 통신 시스템이다. 이러한 예는 도 5에서 충분히 논의되었다.
본 발명의 수신측 단말 장치(200)는 유,무선 통신 시스템(300)에서 보내온 음성 신호 및 제1 감성 정보(생체 신호)를 통신망을 경유하여 제공받아 거짓말 판독 서비스를 제공하는 단말로서, 도 1 내지 도 4에 설명된 거짓말 판독 방법을 실질적으로 적용하고 있는 단말이다. 이러한 수신측 단말 장치(200)에 대해서는 도 8에서 상세히 설명한다.
한편, 송신측 단말 장치(10)와 유,무선 통신 시스템(300)의 사이 및 유,무선 통신 시스템(300)과 수신측 단말 장치(200)의 사이에 형성된 통신망은 인터넷망, 인트라넷망, 이동통신망 등 다양한 유무선 통신 기술을 이용하여 인터넷 프로토콜로 데이터를 송수신할 수 있는 망을 말한다.
수신측 단말 장치
도 8은 본 발명의 제3 실시예에 따른 수신측 단말 장치(200)를 예시적으로 나타낸 구성도이다.
도 8을 참조하면, 본 발명의 제3 실시예에 따른 수신측 단말 장치(200)는 도 1 내지 도 4에 설명된 거짓말 판독 방법을 실질적으로 적용한다. 즉, 본 발명의 수신측 단말 장치(200)는 정보 수신부(210), 감성 정보 추출부(220), 제1 거짓말 결정부(230), 제2 거짓말 결정부(240), 음성 추출부(250), 정보 제공부(260), 제어부(270) 및 정보 저장부(280)를 포함하여 구성된다.
본 발명의 정보 수신부(210)는 상대방의 음성 신호, 및 상기 음성 신호와 관련하여 임의의 감성 센서(30)에 의해 측정된 제1 감성 정보를 수집하는 기능을 수행하고, 감성 정보 추출부(220)는 음성 신호를 증폭하여 음성 신호의 성분 중 규칙 변화가 심한 특정 구간에 대해 분석에 의해 진폭 크기, 길이, 각도, 최대값, 진동 크기 및 진동 반복 횟수를 포함하는 제2 감성 정보를 추출하는 기능을 하며, 제1 거짓말 결정부(230)는 제1 기준 감성 정보와 상기 제1 감성 정보를 비교 후, 기준치 이상 여부를 판단하여 제1 거짓말 상태를 결정하는 기능을 수행한다.
본 발명의 제2 거짓말 결정부(240)는 제2 기준 감성 정보와 상기 제2 감성 정보를 비교 후, 기준치 이상 여부를 판단하여 제2 거짓말 상태를 결정하는 기능을 수행하고, 음성 추출부(250)는 상기 음성 신호 중 상기 제1 거짓말 상태 및 제2 거짓말 상태 중 적어도 하나 이상의 상태를 담고 있는 구간의 거짓말 음성을 추출하는 기능을 수행하며, 정보 제공부(260)는 상기 추출된 거짓말 음성을 자체 내장된 스피커를 통하여 외부로 보내는 기능을 한다.
또한, 본 발명의 제어부(270)는 정보 수신부(210), 감성 정보 추출부(220), 제1 거짓말 결정부(230), 제2 거짓말 결정부(240), 음성 추출부(250), 정보 제공부(260) 및 정보 저장부(280) 간의 데이터 흐름을 제어하며, 정보 저장부(280)는 각 모듈에서 수신한 정보, 기설정된 제1 기준 감성 정보와 제2 기준 감성 정보 및 각 모듈에서 처리된 정보를 저장하는 기능을 한다. 이러한 정보 저장부(280)는 비활성 메모리인 것이 바람직하다.
이와 같이, 각 실시예에 따른 거짓말 판독 서버(100) 또는 수신측 단말 장치(200)에서 거짓말 판독 서비스를 수행함으로써, 해당하는 사용자는 상대방의 음성과 감성에 대해 거짓말인지의 여부를 네트워크 환경에서 손쉽게 알 수 있어, 상대방을 이해하는데 많은 도움이 될 것이다.
이상에서와 같이, 첨부된 도면을 참조하여 본 발명의 실시예를 설명하였으나, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고 다른 구체적인 형태로 실시할 수 있다는 것을 이해할 수 있을 것이다. 따라서 이상에서 기술한 실시예는 모든 면에서 예시적인 것이며 한정적이 아닌 것이다.
10 : 송신측 단말 장치 20 : 사람
30 : 감성 센서 40 : 제2 감성 정보
50 : 수신측 단말 장치 100 : 거짓말 판독 서버
110 : 수신 모듈 120 : 감성 정보 추출 모듈
130 : 제1 거짓말 결정 모듈 140 : 제2 거짓말 결정 모듈
150 : 음성 추출 모듈 160 : 송신 모듈
170 : 제어모듈 180 : 제1 DB
190 : 제2 DB 200 : 수신측 단말 장치
210 : 정보 수신부 220 : 감성 정보 추출부
230 : 제1 거짓말 결정부 240 : 제2 거짓말 결정부
250 : 음성 추출부 260 : 정보 제공부
270 : 제어부 280 : 정보 저장부
300 : 유,무선 통신 시스템

Claims (10)

  1. (a) 상대방의 음성 신호, 및 상기 음성 신호와 관련하여 임의의 감성 센서에 의해 측정된 제1 감성 정보를 수집하는 단계;
    (b) 상기 음성 신호를 증폭하여 상기 음성 신호의 성분 중 규칙 변화가 심한 특정 구간에 대해 분석에 의해 제2 감성 정보 -상기 제2 감성 정보는 진폭 크기, 길이, 각도, 최대값, 진동 크기 및 진동 반복 횟수를 포함 함- 를 추출하는 단계;
    (c) 제1 기준 감성 정보와 상기 제1 감성 정보를 비교 후, 기준치 이상 여부를 판단하여 제1 거짓말 상태를 결정하는 단계;
    (d) 제2 기준 감성 정보와 상기 제2 감성 정보를 비교 후, 기준치 이상 여부를 판단하여 제2 거짓말 상태를 결정하는 단계; 및
    (e) 상기 음성 신호 중 상기 제1 거짓말 상태 및 제2 거짓말 상태 중 적어도 하나 이상의 상태를 담고 있는 구간의 거짓말 음성을 추출하는 단계
    를 포함하는 것을 특징으로 하는 거짓말 판독 방법.
  2. 제 1항에 있어서,
    상기 제1 감성 정보는,
    사람의 인체 내에서 발생되는 맥파, 혈압, 호흡, 피부 전도도, 근세포 수축의 전위차, 체압, 뇌신경 세포의 생체 자기, 뇌파, 피부 전기 저항 및 온도 정보 중 적어도 하나 이상인 것을 특징으로 하는 상기 거짓말 판독 방법.
  3. 제 1항에 있어서,
    상기 제1 기준 감성 정보는,
    임의의 샘플 감성 센서를 이용하여 사람의 인체 내에서 발생되는 생체 신호를 측정, 분석하여 얻어진 기준 감성 데이터인 것을 특징으로 하는 상기 거짓말 판독 방법.
  4. 제 1항에 있어서,
    상기 제2 기준 감성 정보는,
    다수의 샘플 음성 신호의 음소적 요소와 음율적 요소를 파악하여 얻어진 기준 감성 데이터인 것을 특징으로 하는 상기 거짓말 판독 방법.
  5. 청구항 1항 내지 청구항 4항 중 어느 한 항에 따른 거짓말 판독 방법을 적용하여 거짓말 판독 서비스를 통신망을 경유하여 단말 장치로 제공하는 것인 거짓말 판독 서버.
  6. 제 5항에 있어서,
    상기 거짓말 판독 서버는,
    유,무선 통신를 관리하는 유,무선 통신 시스템과 연동되는 것을 특징으로 하는 상기 거짓말 판독 서버.
  7. 청구항 1항 내지 청구항 4항 중 어느 한 항에 따른 거짓말 판독 방법을 적용하여 추출된 거짓말 음성을 재생하는 단말 장치.
  8. 제 7항에 있어서,
    상기 단말 장치는, 이동 단말기 및 고정 단말기 중 어느 하나인 것을 특징으로 하는 상기 단말 장치.
  9. 제 8항에 있어서,
    상기 이동 단말기는,
    LTE 단말기, W-CDMA 단말기, HSDPA 단말기, Wibro 단말기, PDA 단말기 및 CDMA 단말기 군 중 선택된 어느 하나인 것을 특징으로 하는 상기 단말 장치.
  10. 제 9항에 있어서,
    상기 이동 단말기는,
    상기 제1 거짓말 상태 및 제2 거짓말 상태와, 상기 제1 거짓말 상태와 제2 거짓말 상태를 비교하여 가공 후, 그래픽 사용자 인터페이스의 형태로 제공하는 것을 특징으로 하는 상기 단말 장치.
KR1020100127527A 2010-12-14 2010-12-14 거짓말 판독 방법 및 그를 적용한 거짓말 판독 서버 및 단말 장치 KR101209831B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100127527A KR101209831B1 (ko) 2010-12-14 2010-12-14 거짓말 판독 방법 및 그를 적용한 거짓말 판독 서버 및 단말 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100127527A KR101209831B1 (ko) 2010-12-14 2010-12-14 거짓말 판독 방법 및 그를 적용한 거짓말 판독 서버 및 단말 장치

Publications (2)

Publication Number Publication Date
KR20120066275A true KR20120066275A (ko) 2012-06-22
KR101209831B1 KR101209831B1 (ko) 2012-12-07

Family

ID=46685686

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100127527A KR101209831B1 (ko) 2010-12-14 2010-12-14 거짓말 판독 방법 및 그를 적용한 거짓말 판독 서버 및 단말 장치

Country Status (1)

Country Link
KR (1) KR101209831B1 (ko)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104000606A (zh) * 2014-05-14 2014-08-27 李起武 一种玩具测谎仪
CN104000605A (zh) * 2014-05-14 2014-08-27 李起武 一种玩具测谎仪
CN104000607A (zh) * 2014-05-14 2014-08-27 李起武 一种玩具测谎仪
WO2020075882A1 (ko) * 2018-10-10 2020-04-16 에스투원 주식회사 과학 수사 장치
KR20210013793A (ko) * 2019-07-29 2021-02-08 한양대학교 산학협력단 생체 정보를 이용하는 거짓말 탐지 방법
KR20210085750A (ko) * 2019-12-31 2021-07-08 연세대학교 원주산학협력단 딥러닝 기반의 심리생리검사 시스템 및 방법

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104000606A (zh) * 2014-05-14 2014-08-27 李起武 一种玩具测谎仪
CN104000605A (zh) * 2014-05-14 2014-08-27 李起武 一种玩具测谎仪
CN104000607A (zh) * 2014-05-14 2014-08-27 李起武 一种玩具测谎仪
WO2020075882A1 (ko) * 2018-10-10 2020-04-16 에스투원 주식회사 과학 수사 장치
KR20210013793A (ko) * 2019-07-29 2021-02-08 한양대학교 산학협력단 생체 정보를 이용하는 거짓말 탐지 방법
KR20210085750A (ko) * 2019-12-31 2021-07-08 연세대학교 원주산학협력단 딥러닝 기반의 심리생리검사 시스템 및 방법

Also Published As

Publication number Publication date
KR101209831B1 (ko) 2012-12-07

Similar Documents

Publication Publication Date Title
KR101209831B1 (ko) 거짓말 판독 방법 및 그를 적용한 거짓말 판독 서버 및 단말 장치
CN203153725U (zh) 个人监控设备、ecg设备和智能电话保护盒
US6024700A (en) System and method for detecting a thought and generating a control instruction in response thereto
TWI403304B (zh) 隨身語能偵知方法及其裝置
ElSaadany et al. A wireless early prediction system of cardiac arrest through IoT
Fan et al. HeadFi: bringing intelligence to all headphones
Abbasi‐Kesbi et al. Cardiorespiratory system monitoring using a developed acoustic sensor
WO2006018833A2 (en) A wearable device, system and method for measuring a pulse while a user is in motion
Sulaiman et al. EEG-based stress features using spectral centroids technique and k-nearest neighbor classifier
Feng et al. Tiles audio recorder: an unobtrusive wearable solution to track audio activity
JPWO2007046504A1 (ja) 聴診心音信号の処理方法及び聴診装置
CN105982642A (zh) 一种基于体震信号的睡眠检测方法及检测系统
KR20140060737A (ko) 생체 신호 전송기, 생체 신호 수신기, 및 생체 신호 송수신 방법
CN112486316B (zh) 一种脑电与手指压力联合反馈的持续注意调控系统
EP3906852A1 (en) Method and system for biometric recognition, in particular of users of sanitation facilities
CN109394203A (zh) 精神障碍康复期情绪监测与干预方法
EP3906844A1 (en) Method and system for biomedical assessment in sanitation facilities
KR102383512B1 (ko) 혈당측정장치 및 이를 이용하는 혈당측정시스템
KR101875472B1 (ko) 지화 인식 시스템 및 방법
US10856781B2 (en) Method and a device for monitoring a human brain's sub-cognitive activity using Oto-acoustic Emissions
CN113764099A (zh) 基于人工智能的心理状态分析方法、装置、设备及介质
CN114652280A (zh) 睡眠质量监测系统及方法
KR101233628B1 (ko) 목소리 변환 방법 및 그를 적용한 단말 장치
Chen et al. Application of ECG Authentication in IoT-Based Systems
Kaczmarek et al. Sensors integration in the smart home environment-a proposal to solve the problem with user identification

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee