TWI722160B - 意思創發裝置、意思創發方法及意思創發程式 - Google Patents

意思創發裝置、意思創發方法及意思創發程式 Download PDF

Info

Publication number
TWI722160B
TWI722160B TW106110565A TW106110565A TWI722160B TW I722160 B TWI722160 B TW I722160B TW 106110565 A TW106110565 A TW 106110565A TW 106110565 A TW106110565 A TW 106110565A TW I722160 B TWI722160 B TW I722160B
Authority
TW
Taiwan
Prior art keywords
state
aforementioned
substance
emotion
elements
Prior art date
Application number
TW106110565A
Other languages
English (en)
Other versions
TW201810254A (zh
Inventor
光吉俊二
Original Assignee
光吉俊二
日商日本數理研究所股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 光吉俊二, 日商日本數理研究所股份有限公司 filed Critical 光吉俊二
Publication of TW201810254A publication Critical patent/TW201810254A/zh
Application granted granted Critical
Publication of TWI722160B publication Critical patent/TWI722160B/zh

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165Evaluating the state of mind, e.g. depression, anxiety
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/63Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for estimating an emotional state
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/0024Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system for multiple sensor units attached to the patient, e.g. using a body or personal area network
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/01Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/0205Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/021Measuring pressure in heart or blood vessels
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/0245Detecting, measuring or recording pulse rate or heart rate by using sensing means generating electric signals, i.e. ECG signals
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/05Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/053Measuring electrical impedance or conductance of a portion of the body
    • A61B5/0531Measuring skin impedance
    • A61B5/0533Measuring galvanic skin response
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/05Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/055Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves  involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/145Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1468Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using chemical or electrochemical methods, e.g. by polarographic means
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/163Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state by tracking eye movement, gaze, or pupil change
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/369Electroencephalography [EEG]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7264Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B7/00Instruments for auscultation
    • A61B7/003Detecting lung or respiration noise
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/011Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/004Artificial life, i.e. computing arrangements simulating life
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/66Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for extracting parameters related to health condition

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Molecular Biology (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Theoretical Computer Science (AREA)
  • Hospice & Palliative Care (AREA)
  • Child & Adolescent Psychology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Veterinary Medicine (AREA)
  • Surgery (AREA)
  • Public Health (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Psychology (AREA)
  • Social Psychology (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Artificial Intelligence (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一種意思創發裝置,具備:取得至少包含檢出對象的對象者所發話的聲音資訊的資料之取得部、利用取得的資料來檢出對象者的情感之檢出部、因應檢出的對象者的情感來決定對於取得的資料的權重係數之決定部、利用資料與係數來算出作用於人類的情動及器官的活動的能量之演算部、將包含因應演算部所算出的能量的輸入而狀態變化的物質,作為人類的情動及各器官中的恆常性而表示物質的狀態變化的信號輸出之複數元件、因應包含於從各個複數元件所輸出的信號的物質狀態的變化來決定情感及意思之創發部、在複數元件之中,至少1個元件中的物質狀態的變化量在預定量以下時、或至少1個元件中的物質的狀態為預定狀態時,使複數元件中的物質的狀態相移轉之控制部。

Description

意思創發裝置、意思創發方法及意思創發程式
本發明係有關於意思創發裝置、意思創發方法及意思創發程式。
利用從前的范紐曼型計算機及人工智慧、神經網路、深度學習等技術,試著再現在人類的腦判斷過程所引起的雙環及三環等這些反應的試驗正在進行中。
另一方面,也提案有不利用像范紐曼型計算機等這種利用龐大數量的開關的計算方法(也就是說,二進位法),來推定人類的情動及生理等狀態的技術。例如,在專利文獻1中,利用表示被驗者生理狀態的資訊、及表示被驗者的情動或腦等器官的活動的資訊,求出被驗者的恆常性偏移量,再從求出的偏移量算出作用於被驗者的情動及器官等的活動的能量。接著,在專利文獻1中,提案有:利用算出的能量,藉由使得表示被驗者的情動及器官等的各個活動的複數齒輪在假想空間中旋轉,從各齒輪的旋轉狀態來推定被驗者的病態的技術。
[先前技術文獻] [專利文獻]
[專利文獻1]特開2015-128579號公報
但是,利用從前的范紐曼型計算機等的方法,只能夠以二進位法的計算手段中的機率與微分來對應,會無限地重複計算。因此,利用范紐曼型計算機等的方法,如人類腦的判斷過程一樣,不使重複執行的計算(雙環等反應)發散,將計算量維持在記憶體等的記憶容量的範圍內是困難的。也就是說,利用范紐曼型計算機等的方法,將人類腦的判斷過程中的雙環等反應再現,且決定將意思及判斷等決定的時點(使雙環等反應(重複執行的計算)收束的時機)是困難的。此外,利用范紐曼型計算機等的方法,決定因應自己的心情、或因應狀況及場面等的多樣意思及判斷等是困難的。該等問題是習知的人工智慧的框架問題(Frame problem)。
在一個側面中,本發明揭示的意思創發裝置、意思創發方法及意思創發程式係以能創發多樣的意思作為目的。
在一個觀點的意思創發裝置,具備:取得至少包含檢出對象的對象者所發話的聲音資訊的資料之取得 部、利用取得的資料來檢出對象者的情感之檢出部、因應檢出的對象者的情感來決定對於取得的資料的權重係數之決定部、利用資料與係數來算出作用於人類的情動及器官的活動的能量之演算部、將包含因應演算部所算出的能量的輸入而狀態變化的物質,作為人類的情動及各器官中的恆常性而表示物質的狀態變化的信號輸出之複數元件、因應包含於從各個複數元件所輸出的信號的物質狀態的變化來決定情感及意思之創發部、在複數元件之中,至少1個元件中的物質狀態的變化量在預定量以下時、或至少1個元件中的物質的狀態為預定狀態時,使複數元件中的物質的狀態相移轉之控制部。
在另一個觀點的意思創發方法,具備:取得至少包含檢出對象的對象者所發話的聲音資訊的資料、利用取得的資料來檢出對象者的情感、因應檢出的情感來決定對於取得的資料的權重係數、利用資料與係數來算出作用於人類的情動及器官的活動的能量、將對於包含因應輸入而狀態變化的物質的複數元件算出的能量輸入,使作為人類的情動及各器官的恆常性而表示物質的狀態變化的信號輸出至各個複數元件、因應包含於從各個複數元件所輸出的信號的物質狀態的變化來決定情感及意思、在複數元件之中,至少1個元件中的物質狀態的變化量在預定量以下時、或至少1個元件中的物質的狀態為預定狀態時,使複數元件中的物質的狀態相移轉。
在另一個觀點的意思創發程式,係使電腦執 行:取得至少包含檢出對象的對象者所發話的聲音資訊的資料、利用取得的資料來檢出對象者的情感、因應檢出的情感來決定對於取得的資料的權重係數、利用資料與係數來算出作用於人類的情動及器官的活動的能量、將對於包含因應輸入而狀態變化的物質的複數元件算出的能量輸入,使作為人類的情動及各器官的恆常性而表示物質的狀態變化的信號輸出至各個複數元件、因應包含於從各個複數元件所輸出的信號的物質狀態的變化來決定情感及意思、在複數元件之中,至少1個元件中的物質狀態的變化量在預定量以下時、或至少1個元件中的物質的狀態為預定狀態時,使複數元件中的物質的狀態相移轉的處理。
本發明揭示的意思創發裝置、意思創發方法及意思創發程式能創發多樣的意思。
1:量測裝置
2:輸出裝置
10:取得部
20:檢出部
30:決定部
40:演算部
50:元件部
51(1)-51(N):元件
52:供應部
60:創發部
70:控制部
80:記憶部
100:意思創發裝置
200、K1-K10:循環系統
ET:創發表
[圖1]表示意思創發裝置的一實施形態的圖。
[圖2]將人類的恆常性的連鎖的一例模式地表示的圖。
[圖3]表示圖1所示的元件部的一例的圖。
[圖4]表示圖1所示的創發表的一例的圖。
[圖5]表示圖1所示的意思創發裝置中的意思創發處理的一例的圖。
以下,利用圖式說明實施形態。
圖1表示意思創發裝置的一實施形態。
圖1所示的意思創發裝置100為具有CPU(中央處理器(Central Processing Unit))等演算處理裝置、硬碟裝置等記憶部80的電腦裝置等。意思創發裝置100通過包含於意思創發裝置100的輸入輸出介面等,以有線或無線連接至量測裝置1及輸出裝置2。
量測裝置1例如至少包含麥克風,將檢出對象的對象者PA所發話的聲音信號作為聲音資訊來量測。量測裝置1將包含量測到的對象者PA的聲音資訊的資料輸出至意思創發裝置100。此外,量測裝置1例如包含:心跳計、心電計、血壓計、體溫計、皮膚電阻計、或攝影機、MRI(核磁共振成像(Magnetic Resonance Imaging))裝置等複數機器,也量測對象者PA的血壓及體溫等生理資訊。量測裝置1將量測到的包含對象者PA的生理資訊與聲音資訊的資料輸出至意思創發裝置100。此外,量測裝置1也可以具有加速度感測器或電子陀螺儀等。
此外,量測裝置1所量測的對象者PA的生理資訊中,例如包含:心跳(脈搏)數、心跳變動、血壓、體溫、發汗量(皮膚電阻、皮膚電位)、眼球的運動、瞳孔徑、眨眼數。此外,量測到的生理資訊例如包含:吐息、賀爾蒙、生體分子等體內分泌物、腦波、fMRI(功能性核磁共振成像(functional MRI))資訊等。
例如,心跳(脈搏)數係利用包含於量測裝置1中的心跳計等來量測,因興奮或緊張而使體內的腎上腺素分泌量增加而具有心臟的跳動增加的性質。
心跳變動例如係藉由利用包含於量測裝置1中的心電計對於被量測的對象者PA的心電波形,執行FFT(快速傅立葉轉換(Fast Fourier Transform))等的光譜解析來取得。接著,藉由比較心跳變動的低頻成份LF(例如0.04到0.14赫茲)與高頻成份HF(例如0.14到0.5赫茲)的量,可取得對象者PA的興奮及緊張的等級。此外,心跳變動的低頻成份LF具有隨著主交感神經的活動增加,高頻成份HF具有隨著副交感神經的活動增加的性質。
血壓例如利用包含於量測裝置1中的血壓計等來量測,具有隨著興奮或緊張而使對象者PA的血管收縮,血流電阻增加而增加的性質。
體溫例如利用包含於量測裝置1中的體溫計等來量測,具有因興奮或緊張而使產生心跳增加、血糖值上升、肌肉的緊張等,在體內生成熱而上升的性質。
發汗量(皮膚電阻、皮膚電位)例如利用包含於量測裝置1中的皮膚電阻計等來量測,具有因興奮或緊張而促進發汗,使得皮膚電阻下降的性質。
眼球的運動、瞳孔徑及眨眼的次數例如利用量測裝置1的眼電位計或攝影機等來量測。因此,具有因興奮或緊張而眼球的運動變激烈,瞳孔徑因興奮或緊張而瞳孔擴大,眨眼數因興奮或緊張而增加的性質。
吐息例如利用包含於量測裝置1中的呼吸計(呼吸流量計)、肺活量計、或麥克風等從呼吸量或呼吸音來量測次數、速度、排氣量等,具有因興奮或緊張而使產生次數、速度、排氣量上升的性質。
賀爾蒙或生體分子等體內分泌物例如利用包含於量測裝置1中的分析裝置,藉由將從對象者PA採取到的唾液、血液、淋巴液、汗、消化液、或尿液等作化學分析來量測。此外,體內分泌物也可以藉由量測裝置1從對象者PA中的末梢血管、消化系統、肌肉電位、皮膚溫度、血流量、或免疫系統等來量測。接著,體內分泌物具有因興奮或緊張,而體內的賀爾蒙或生體分子的分泌量或質發生變化的性質。
腦波例如利用包含於量測裝置1中的光學式、磁式、或電位式等腦活動計來量測,具有因興奮或緊張而使波形變化的性質。
fMRI(功能性核磁共振成像)資訊例如藉由包含於量測裝置1中的MRI(核磁共振成像)裝置來量測,fMRI(功能性核磁共振成像)資訊包含腦內的各活動部位的血流量及氧化血紅素的分佈。fMRI(功能性核磁共振成像)資訊具有因興奮或緊張而使腦內的活動部位發生變化的性質。例如,與情動有關的興奮及緊張會在邊緣系統(扁桃腺)、視丘下部、小腦、腦幹、或海馬等成為血流量的變化而出現。這種血流量的變化使氧化血紅素的腦內分佈變化。
輸出裝置2例如包含:有機EL(有機電致發光(Organic Electro-Luminescence))及液晶等顯示器、或揚聲器等。輸出裝置2接收意思創發裝置100所創發的表示情感及意思的資料,將接收到的資料顯示於顯示器,或將接收到的資料從揚聲器以聲音輸出。
此外,輸出裝置2也可以設於意思創發裝置100的內部。此外,輸出裝置2可以是連接網路的其他機器人或其他人工智慧(也就是其他的意思創發裝置100)等。此外,輸出裝置2也可以是智慧手機等的攜帶通信終端、或汽車等。
圖1所示的意思創發裝置100具有:取得部10、檢出部20、決定部30、演算部40、元件部50、創發部60、控制部70、及記憶部80。檢出部20、決定部30、演算部40、創發部60、及控制部70的機能可以藉由意思創發裝置100的演算處理裝置所執行的意思創發程式來實現,以硬體來實現也可以。
取得部10為輸入輸出介面等,取得包含來自量測裝置1的對象者PA的聲音資訊及生理資訊的資料。取得部10輸出所取得資料至檢出部20。
此外,取得部10在從量測裝置1取得至少包含對象者PA的聲音資訊的資料的同時,例如,透過包含於意思創發裝置100的鍵盤等輸入裝置,來取得對象者PA所輸入的指示命令等文字資訊也可以。此外,取得部10也可以包含網路介面,將對象者PA表現出有興趣的資 訊等,通過網路與對象者PA的聲音資訊的資料同取得也可以。
檢出部20在量測裝置1取得的對象者PA的資料中利用聲音資訊,檢出對象者PA的情感。例如,檢出部20利用特開2009-294647號公報所揭示的技術所生成的記憶於記憶部80的情感表、及利用對象者PA的聲音資訊,檢出“怒”、“悲傷”、“平常”、“喜”等情感。檢出部20將對象者PA的情感檢出結果輸出至決定部30。此外,檢出部20將對象者PA的情感檢出結果與取得的資料一同記憶至記憶部80。
此外,意思創發裝置100例如為了生成情感表,分別對複數的人,將在日常會話或電視劇等中以發話單位抽出的聲音以隨機的順序聽取,從各發話單位的聲音接收的說話方的情感判定各自的情感。接著,意思創發裝置100在判定結果中抽出情感共通的發話單位的聲音,算出各發話單位之中的聲音波形強度、基本頻率、頻率分佈、或抑揚等參數值。
意思創發裝置100利用從聲音辨識的這種從聲音來取得語言資訊的手段,來算出從相當於情感及心理屬性的語彙及構文的資訊等而來的相當於情感及心理屬性的資訊。意思創發裝置100係分析:將各聲音被判定為各個情感狀態的原因,於各聲音中的各個複數參數係分佈於那個值的範圍而示出時間變化,是在那一種參數的組合的情況。意思創發裝置100係根據分析的結果,將各情感條 件、各參數值及組合圖案一覽表示,作為情感表生成並記憶於記憶部80。
此外,檢出部20從對象者PA的聲音資訊檢出對象者PA所發話的發話內容也可以。也就是說,對象者PA說出「今天的天氣好好喔」時,檢出部20以「今/天/的/天/氣/好/好/喔」的方式將各個音節的區段抽出。再來,檢出部20從對象者PA的聲音資訊將各個單語的區段抽出。例如,當輸入「今天的天氣好好喔」的聲音資訊時,檢出部20以「今天/的/天氣/好好/喔」的方式將各個單語的區段抽出。
接著,檢出部20係基於抽出的對象者PA的聲音中表示音節及單語的區段的資訊,執行包含於對象者PA的聲音裡的每個單語的辨識及構文解析。也就是說,檢出部20從對象者PA的聲音中,辨識表示「何人(Who)」、「何事(What)」、「何時(When)」、「何地(Where)」、「何解(Why)」、「如何(how)」的5W1H的資訊,將對象者PA的聲音內容作為自然語言掌握。此外,檢出部20係基於掌握到的聲音內容,從對象者PA的聲音來檢出對象者PA所處在的狀況及立場。接著,檢出部20將檢出的對象者PA的發話內容及狀況等與對象者PA的情感一同記憶至記憶部80。
決定部30例如決定對檢出部20檢出的因應對象者PA的情感而從聲音資訊求出的強度及基本頻率等參數、及生理資訊裡所包含的血壓及體溫等參數的權重係 數。
此外,檢出部20檢出的對象者PA的情感並非能分類至任1種情感的單純者,是以複數情感混合而檢出。此外,對象者PA的情感也會因對象者PA所處在的狀況及立場而有所變化。因此,決定部30考慮檢出部20檢出的對象者PA的發話內容及狀況等,因應對象者PA的情感決定對於對象者PA的聲音資訊及生理資訊的權重係數較佳。
例如,檢出的對象者PA的情感的時間變化與預先定的特定時間變化,也就是表示“印象強”狀態的時間變化一致時,決定部30將對於對象者PA的聲音資訊及生理資訊的權重係數決定為大的值。此外,檢出的情感變化大時、或重複頻繁地檢出同樣的發話內容時、或容易留下印象的發話內容等時,決定部30將對於對象者PA的聲音資訊及生理資訊的權重係數決定為大的值,而作為“印象強”狀態。此時,檢出的對象者PA的情感及發話內容等,作為人類的記憶中過去的強烈記憶,即便時間經過也保持於記憶部80較佳。
另一方面,檢出的對象者PA的情感的時間變化與預先定的特定時間變化,也就是表示“印象強”狀態的時間變化不一致時,即表示“印象弱”狀態的時間變化時,決定部30將對於對象者PA的聲音資訊及生理資訊的權重係數決定為小的值。此外,檢出的情感變化小時、或僅檢出1次或數次的發話內容等時,決定部30將對於對象 者PA的聲音資訊及生理資訊的權重係數決定為小的值,而作為“印象弱”狀態。此時,檢出的對象者PA的情感及發話內容,作為人類的記憶中過去的曖昧的記憶,隨著時間經過從記憶部80消除。藉此,能抑制記憶部80所記憶的資料量。
此外,決定部30利用:後述的元件部50所輸出的信號及創發部60所決定的意思創發裝置100的情感的任一者、及檢出的對象者PA的情感,來決定對於對象者PA的聲音資訊及生理資訊的權重係數也可以。藉此,使意思創發裝置100的性格及個性與來自對象者PA等外部的影響一同基於意思創發裝置100內部的影響作變化。
演算部40利用從量測裝置1取得的資料、決定部30決定的係數,來算出作用於人類的情動及器官的活動的能量。以圖2及圖3說明有關演算部40的動作。
元件部50具有:因應演算部40所算出的能量輸入而使物質的狀態變化的變態(Metamorphose)元件及自旋電子學(Spintronics)元件等的複數元件。元件部50將表示各複數元件中的物質的狀態變化的信號,作為人類的情動及各器官中的恆常性,輸出至創發部60及控制部70。以圖2及圖3說明有關元件部50的動作。
創發部60例如利用記憶於記憶部80的創發表ET,因應從元件部50的各元件輸出的信號所含有的物質狀態(恆常性)的變化,來決定情感及意思。以圖4說明 有關創發部60的動作及創發表ET。
控制部70監視包含於元件部50的複數元件的動作,複數元件之中至少1個元件中的物質狀態變化量在預定量以下時,使複數元件中的物質狀態相移轉。以圖3說明有關控制部70的動作。
記憶部80為硬碟裝置或記憶體等,記憶意思創發程式與創發表ET等資料。此外,記憶部80係記憶:包含取得部10取得的對象者PA的聲音資訊及生理資訊的資料、及檢出部20檢出的對象者PA的情感及發話內容等。此外,記憶部80雖配置於意思創發裝置100的內部,但也可以配置於意思創發裝置100的外部。此時,記憶部80通過網路等與意思創發裝置100連接較佳。
此外,意思創發程式例如可記錄於CD(光碟(Compact Disc))或DVD(數位多功能影音光碟(Digital Versatile Disc))等可移動式光碟並發佈。又,意思創發裝置100也可以將意思創發程式通過包含於意思創發裝置100的網路介面從網路下載,儲存於記憶部80。
圖2為將人類的恆常性的連鎖的一例模式地表示的圖。在圖2中,例如,將人類的生體全體的恆常性的均衡以圓形的圖形旋轉來表示,作為循環系統200。循環系統200例如更具有形成人類的物質或器官等的複數循環系統K(K1-K10)。在圖2中,以比互相連鎖並保持恆常性的均衡的循環系統200還小的圓形的旋轉來表示循環系統K1-K10。例如,循環系統K1通過聲帶,基於人類所發 話的聲音來表示人類情動的恆常性。循環系統K2例如表示基於心跳數及心跳變動等的人類的心臟的恆常性。循環系統K3例如表示胃、小腸、大腸等的人類的消化系統的恆常性。循環系統K4例如表示保護人類免於生病等的免疫系統的恆常性。循環系統K5例如表示調節包含於人類生體的器官的運作的進行資訊傳達的賀爾蒙的恆常性。
又,循環系統K6例如表示人類的遺傳子所生成的複數種類的蛋白質等的生體分子的恆常性。循環系統K7例如表示人類的遺傳子的恆常性。循環系統K8例如表示形成人類的細胞的活動的恆常性。循環系統K9例如與情動有密切關係的腦之中,包含扁桃腺等的人類大腦邊緣系統的活動的恆常性。循環系統K10例如以突觸來中介資訊傳達的神經傳達物質的恆常性。
接著,圖1所示的意思創發裝置100為了作為人工智慧動作,利用元件部50來求出意思創發裝置100的循環系統200的恆常性。
此外,循環系統200雖具有10個循環系統K1-K10,但包含這10個以外的複數循環系統也可以。此外,各循環系統K可以更具有複數循環系統。例如,聲帶的循環系統K1可以具有表示人類的怒、平常、悲傷、喜等的情動的複數循環系統。此外,心臟的循環系統K2例如可以具有表示人類的心跳數及心跳變動等複數循環系統。
此外,循環系統200雖表示人類的生體全體 的恆常性,但可以表示人類的腦等1個部位的恆常性,也可以表示公司或國家等人類社會的恆常性。例如,當循環系統200表示人類腦的恆常性時,各循環系統K表示各個腦神經細胞的恆常性。例如,當循環系統200表示人類社會的恆常性時,各循環系統K表示各個人類的恆常性。
此外,人類的恆常性的連鎖,雖以圖2所示的循環系統200那樣來表示,但不限於此,以其他的形態來表示也可以。
圖3表示圖1所示的元件部50的一例。元件部50具有N個元件51(51(1)-51(N))及供應部52。
元件51例如是因應從外部輸入的電壓及溫度等具有將固體與液體之間變化(相移轉)的金屬氧化物及高分子的水凝膠等的物質的變態元件等。變態元件等的元件51將表示物質的狀態變化的信號輸出至創發部60及控制部70。此外,因為元件51其物質的狀態在固體與液體之間連續地變化,能夠因應物質的狀態變化而輸出連續變化的值的信號。接著,因為各循環系統K中的恆常性也連續地變化,表示各元件51所輸出信號的物質的狀態變化的值,能作為各循環系統K中的恆常性使用。因此,意思創發裝置100藉由使用N個元件51,來再現人類腦的判斷過程中的雙環等的反應。
在這裡,圖1示的意思創發裝置100,將各元件51作為圖2所示的各循環系統K(例如,N=10),將表示各元件51所輸出的物質的狀態變化的信號作為各循環 系統K中的恆常性使用。此外,因為各循環系統K會互相影響,各元件51係將表示物質的狀態變化的信號以互相可發送接收的方式連接。
供應部52例如是電源、光源、熱源、或噴霧器等。例如,當供應部52為電源時,將因應藉由演算部40算出能量的電壓或電流等供應至N個元件51。例如,當供應部52為光源時,將因應藉由演算部40算出能量的強度或頻率的電磁波照射至N個元件51。例如,當供應部52為熱源時,將因應藉由演算部40算出能量的熱能供應至N個元件51;當供應部52為噴霧器,將因應藉由演算部40算出能量的濃度及溫度的溶劑噴霧。
演算部40例如利用:從取得部10取得的資料、決定部30決定的係數、式(1),來算出意思創發裝置100作為人工智慧動作時的作為情動及器官的活動的能量TE。
Figure 106110565-A0305-02-0018-1
此外,ai分別表示檢出部20所求出的聲音資訊中的強度及基本頻率等的參數值、及量測裝置1所量測的包含於生理資訊中的血壓等的參數值。wi表示對各參數值ai的權重係數。M表示參數的數。
此外,演算部40雖利用式(1)來算出能量 TE,但利用函數F(ai,wi)算出能量TE也可以。函數F(ai,wi)較佳為因應欲附加於意思創發裝置100的性格及個性來作適宜決定。
此外,演算部40所算出的能量TE可以成為負值。此時,例如,供應部52可以對元件51施加負電壓,也可以將元件51冷卻。
此外,元件51雖通過供應部52以供應能量TE使物質的狀態變化,但隨著時間的經過,也有物質的狀態收束至預定狀態的情形。此時,元件51中的物質狀態的變化量減少(也就是說,循環系統K中的恆常性降低)。
為了回避此現象,控制部70係基於從各元件51輸出的信號,來監視各元件51中的物質狀態變化(恆常性)。接著,控制部70在N個元件51中至少1個元件51的物質狀態的變化量在預定的時間以上成為預定量以下時,判定為恆常性降低。控制部70使物質的狀態(例如,固體的部分為向液體,液體的部分為向固體相移轉)的指示輸出至全部的元件51。藉此,意思創發裝置100能回避恆常性的降低。
此外,控制部70對N個元件51指示相移轉的動作,例如,在人類的情況、歸結工作或議論等(重複人類的腦的判斷過程中的雙環等反應而執行)的情況,相當於取得休息或散步等的心情轉換。接著,藉由心情轉換,人類使腦中的雙環等反應收束,會有新視點的想法或 想到點子的情形發生。在這裡,控制部70藉由對N個元件51指示相移轉,將表示與相移轉前相異的物質狀態變化的信號輸出至各元件51。接著,創發部60基於包含於各元件51的信號中與相移轉前相異的物質的狀態變化,決定與相移轉前相異的情感及意思。也就是說,意思創發裝置100將控制部70的相移轉指示作為將意思創發裝置100中的雙環等反應收束的時點,決定與相移轉前相異的新情感及意思。藉此,意思創發裝置100能夠決定因應自己的心情或狀況及場面等的多樣的意思及判斷等。
此外,預定量及預定的時間,較佳為因應欲附加於意思創發裝置100的性格及個性作適宜設定。此外,預定量及預定的時間也可以根據每個元件51設定不同的值。
此外,控制部70輸出相移轉指示時的物質狀態的變化量成為預定量以下的元件51的數,較佳為因應欲附加於意思創發裝置100的性格及個性作適宜設定。例如,元件51的數越少,意思創發裝置100對於從對象者PA輸入的資料能夠在短時間內反應。另一方面,隨著元件51的數越多,意思創發裝置100對於從對象者PA輸入的資料的反應雖變慢,但對於對象者PA能夠表示適切的反應。
此外,控制部70在N個元件51之中至少1個元件51中的物質的狀態在預定狀態時,對全部元件51輸出相移轉的指示也可以。此外,預定的狀態,較佳為因 應欲附加於意思創發裝置100的性格及個性作適宜設定。此外,預定的狀態也可以根據每個元件51作不同的設定。
圖4表示圖1所示的創發表ET的一例。創發表ET具有:情感及意思、與元件51(1)-51(N)的儲存區域。
在情感及意思的儲存區域儲存有:“怒,忍耐”、“怒,回嘴”、“平常,對話”、及“平常、同意”等的情感及意思的組合。
在各元件51(1)-51(N)儲存區域儲存有:將在情感及意思的儲存區域儲存的情感及意思為了讓創發部60作決定的各元件51所輸出的信號所表示的物質狀態變化(恆常性)的組合。此外,儲存“-”的儲存區域係表示不包含於創發部60作決定的情感及意思的條件。
儲存於各元件51的儲存區域的物質狀態的變化,例如,藉由執行專利文獻1所揭示的模擬等,基於模擬的結果在預定的時間內預先設定元件51的物質所示的狀態變化。此外,儲存於各元件51的儲存區域中的物質狀態的變化,較佳為因應欲附加於意思創發裝置100的性格及個性作適宜設定。
此外,儲存於元件51(1)-51(N)儲存區域的物質狀態的變化,也可以因應決定部30所決定的權重係數、或創發部60所決定的情感及意思等作變更。此外,儲存於元件51(1)-51(N)儲存區域的物質狀態的變化的順 序,也可以因應決定部30所決定的權重係數、或創發部60所決定的情感及意思等作變更。藉此,能夠使意思創發裝置100的性格及個性與來自對象者PA等外部的影響一同基於意思創發裝置100內部的變化而作變化。
創發部60基於記憶於記憶部80的創發表ET、從N個元件51的各個輸出的信號中所含有的物質狀態的變化,來決定情感及意思。接著,創發部60將決定的情感及意思的結果輸出至輸出裝置2。例如,因應檢出部20所檢出的對象者PA的發話內容、決定的情感及意思,將意思創發裝置100發話的聲音資料及文字資料儲存的發話表被記憶於記憶部80時,創發部60從發話表抽出:決定成被檢出的對象者PA的發話內容的情感及意思所對應的聲音資料等。意思創發裝置100將抽出的聲音資料藉由包含於輸出裝置2中的揚聲器輸出。藉此,意思創發裝置100能與對象者PA之間作對話。
此外,意思創發裝置100基於創發部60所決定的情感及意思的結果,將因對象者PA的發話所接到的情感及意思、及對於對象者PA的印象輸出至輸出裝置2。接著,意思創發裝置100也可以向輸出裝置2輸出對於對象者PA的溝通助言等,以使對象者PA能夠進行了解現場狀況的溝通。藉此能提升對象者PA的溝通能力。
此外,當對象者PA患上精神疾病患者等時,意思創發裝置100係因應創發部60所決定的情感及意思的結果,而向輸出裝置2輸出對於對象者PA的對於精神 疾病患者等的助言等。藉此,意思創發裝置100能達到改善對象者PA的病狀。
圖5表示圖1所示的意思創發裝置100中的意思創發處理的一例的圖。圖5所示的處理可以藉由意思創發裝置100的演算處理裝置執行記憶於記憶部80的意思創發程式來實現。也就是說,圖5所示的處理,表示意思創發程式及意思創發方法的一實施形態。此外,圖5所示的處理可以藉由搭載於意思創發裝置100的硬體來實現。此時,圖1所示的檢出部20、決定部30、演算部40、創發部60、及控制部70係藉由配置於意思創發裝置100內的電路來實現。
在步驟S100中,取得部10取得包含來自量測裝置1量測的對象者PA的聲音資訊及生理資訊的資料。取得部10輸出所取得資料至檢出部20。
接著,在步驟S110中,檢出部20在步驟S100所取得的資料之中,利用對象者PA的聲音資訊,檢出對象者PA的“怒”及“平常”等情感。檢出部20將對象者PA的情感檢出結果輸出至決定部30。
接著,在步驟S120中,決定部30因應在步驟S120檢出的對象者PA的情感,決定對於對象者PA的聲音資訊及生理資訊的權重係數。
接著,在步驟S130中,演算部40利用步驟S100取得的資料、步驟S120決定的係數、式(1),來算出作用於人類的情動及器官的活動的能量TE。
接著,在步驟S140中,元件部50將在步驟S130算出的能量TE通過供應部52供應至N個元件51。各個元件51因應供應的能量TE使物質的狀態作變化,作為各循環系統K中的恆常性,分別輸出表示物質的狀態變化的信號至創發部60及控制部70。
接著,在步驟S150中,控制部70接收在步驟S140從各元件51輸出的信號,來監視各元件51中的物質狀態的變化(恆常性)。控制部70判定在N個元件51中至少1個元件51中的物質狀態的變化量是否在預定量以下。當元件51的物質狀態的變化量橫跨預定的時間以上而在預定量以下時,意思創發裝置100的處理移至步驟S160。另一方面,當元件51的物質狀態的變化量橫跨預定的時間而不在預定量以下時,意思創發裝置100的處理移至步驟S170。
在步驟S160中,控制部70使物質的狀態相移轉的指示對全部的元件51輸出。接著,意思創發裝置100的處理移至步驟S170。
在步驟S170中,創發部60基於記憶於記憶部80的創發表ET、從N個元件51的各個輸出的信號中所含有的物質狀態的變化,來決定情感及意思。或者,創發部60在步驟S160相移轉以後,基於從各元件51輸出的信號中所含有的物質狀態的變化、創發表ET,來決定情感及意思。創發部60將決定的情感及意思的結果輸出至輸出裝置2。例如,因應檢出部20所檢出的對象者PA 的發話內容、決定的情感及意思,將意思創發裝置100發話的聲音資料及文字資料儲存的發話表被記憶於記憶部80時,創發部60從發話表抽出:決定成被檢出的對象者PA的發話內容的情感及意思所對應的聲音資料等。意思創發裝置100將抽出的聲音資料藉由包含於輸出裝置2中的揚聲器輸出,與對象者PA對話。
此外,意思創發裝置100基於創發部60所決定的情感及意思的結果,將因對象者PA的發話所接到的情感及意思、及對於對象者PA的印象輸出至輸出裝置2也可以。接著,意思創發裝置100藉由向輸出裝置2輸出對於對象者PA的溝通助言等,使得對象者PA能夠進行了解現場狀況的溝通,而提升對象者PA的構通能力。
此外,當對象者PA患上精神疾病患者等時,意思創發裝置100係因應創發部60所決定的情感及意思的結果,而向輸出裝置2輸出對於對象者PA的對於精神疾病患者等的助言等,而改善對象者PA的病狀。
接著,意思創發裝置100結束意思創發處理。意思創發裝置100每當從量測裝置1接收對象者PA的資料,會重複執行步驟S100到步驟S170的處理。
此外,在圖5所示的處理中,可以將步驟S100到步驟S140的處理、步驟S150到步驟S170的處理並列執行。
以上,從圖1到圖5所示的實施形態中,決定部30係因應檢出部20從對象者PA的聲音資訊檢出的 對象者PA的情感,決定對於包含於取得部10所取得的資料的聲音資訊及生理資訊的權重係數。接著,元件部50利用決定部30所決定的權重係數將演算部40算出的能量TE通過供應部52輸入至N個元件51。各元件51將包含物質的狀態變化的信號,作為人類的情動及各器官中的恆常性,輸出至創發部60及控制部70。創發部60因應從各元件51輸出的信號所表示的物質狀態的變化,決定情感及意思,控制部70在N個元件51之中,至少1個元件51中物質狀態的變化量在預定量以下時,對N個元件51輸出相移轉的指示,使物質的狀態相移轉。
也就是說,意思創發裝置100將控制部70的相移轉指示作為將意思創發裝置100中的雙環等反應收束的時點,決定與相移轉前相異的新情感及意思。藉此,意思創發裝置100能夠決定因應自己的心情或狀況及場面等的多樣的意思及判斷等。
此外,對象者PA取代人類,是其他的意思創發裝置100也可以。此時,意思創發裝置100從其他意思創發裝置100取得的資料,可以僅為其他意思創發裝置100所輸出的聲音資訊,將其他意思創發裝置100的各元件51所輸出的信號作為生理資訊使用也可以。藉此,意思創發裝置100能夠模擬人類中的構通的發展。
此外,圖1所示的意思創發裝置100,可以適用於精神分析、行動預測、行動分析等的心理輔導、精神醫療、一般醫療中的會診及處方。此外、意思創發裝置 100可以應用於機器人、人工智慧及汽車、或呼叫中心、娛樂、網際網路、智慧手機及平板型終端等攜帶終端裝置應用程式及服務、檢索系統。此外,意思創發裝置100也可以應用於診斷裝置、自動問診裝置、災害分診等。此外、意思創發裝置100也可以應用於金融投信管理系統及行動預測、企業、學校、行政機關、警察及軍事、資訊收集活動等的資訊分析、與虛偽發現有關的心理分析、組織團體管理。此外,意思創發裝置100也可以適用於組織的構成員、研究者及從業員、管理者等的心的健康及管理行動預測的系統、住所及辦公室、控制飛機及太空船的環境的系統、或為了得知家人及友人的心的狀態及行動預測的手段。此外,意思創發裝置100也可以適用於音樂及電影配送、一般資訊檢索、資訊分析管理及資訊處理、或顧客感性嗜好市場分析等及將該等藉由網路或單機管理的系統等。
藉由以上的詳細說明,實施形態的特徵點及優點應能明確。這是用以在申請專利範圍以不脫離其精神及權利範圍的範圍下,及於前述的實施形態的特徵點及優點。此外,若是該技術領域中的通常知識者,應可經由改良或變更來容易想到。因此,並沒有意圖要將具有發明性的實施形態的範圍限於前述範圍中,也可包含實施形態所揭示的範圍中所包含的適當的改良物及均等物。
1‧‧‧量測裝置
2‧‧‧輸出裝置
10‧‧‧取得部
20‧‧‧檢出部
30‧‧‧決定部
40‧‧‧演算部
50‧‧‧元件部
60‧‧‧創發部
70‧‧‧控制部
80‧‧‧記憶部
100‧‧‧意思創發裝置
ET‧‧‧創發表
PA‧‧‧對象者

Claims (5)

  1. 一種意思創發裝置,具備:取得至少包含檢出對象的對象者所發話的聲音資訊的資料之取得部;利用取得的前述資料來檢出前述對象者的情感之檢出部;因應檢出的前述對象者的情感來決定對於取得的前述資料的權重係數之決定部;利用前述資料與前述係數來算出作用於人類的情動及器官的活動的能量之演算部;將包含因應前述演算部所算出的前述能量的輸入而狀態變化的物質,作為人類的情動及各器官中的恆常性而表示前述物質的狀態變化的信號輸出之複數元件;因應包含於從各個前述複數元件所輸出的前述信號的前述物質狀態的變化來決定情感及意思之創發部;在前述複數元件之中,至少1個元件中的前述物質狀態的變化量在預定量以下時、或至少1個元件中的前述物質的狀態為預定狀態時,使前述複數元件中的前述物質的狀態相移轉之控制部。
  2. 如請求項1所記載之意思創發裝置,其中,前述複數元件以能發送接收前述信號的方式互相連接。
  3. 如請求項1或2所記載之意思創發裝置,其中,前述決定部係因應檢出的前述情感、及前述創發部所決定的情感,來決定對前述資料的權重係數。
  4. 一種意思創發方法,其係:取得至少包含檢出對象的對象者所發話的聲音資訊的資料;利用取得的前述資料來檢出前述對象者的情感;因應檢出的前述情感來決定對於取得的前述資料的權重係數;利用前述資料與前述係數來算出作用於人類的情動及器官的活動的能量;將對於包含因應輸入而狀態變化的物質的複數元件算出的前述能量輸入,使作為人類的情動及各器官的恆常性而表示前述物質的狀態變化的信號輸出至各個前述複數元件;因應包含於從各個前述複數元件所輸出的前述信號的前述物質狀態的變化來決定情感及意思;在前述複數元件之中,至少1個元件中的前述物質狀態的變化量在預定量以下時、或至少1個元件中的前述物質的狀態為預定狀態時,使前述複數元件中的前述物質的狀態相移轉。
  5. 一種使電腦執行處理的意思創發程式,其係:取得至少包含檢出對象的對象者所發話的聲音資訊的資料; 利用取得的前述資料來檢出前述對象者的情感;因應檢出的前述情感來決定對於取得的前述資料的權重係數;利用前述資料與前述係數來算出作用於人類的情動及器官的活動的能量;將對於包含因應輸入而狀態變化的物質的複數元件算出的前述能量輸入,使作為人類的情動及各器官的恆常性而表示前述物質的狀態變化的信號輸出至各個前述複數元件;因應包含於從各個前述複數元件所輸出的前述信號的前述物質狀態的變化來決定情感及意思;在前述複數元件之中,至少1個元件中的前述物質狀態的變化量在預定量以下時、或至少1個元件中的前述物質的狀態為預定狀態時,使前述複數元件中的前述物質的狀態相移轉。
TW106110565A 2016-03-30 2017-03-29 意思創發裝置、意思創發方法及意思創發程式 TWI722160B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2016-068827 2016-03-30
JP2016068827 2016-03-30
JP2017054238A JP6851871B2 (ja) 2016-03-30 2017-03-21 意思創発装置、意思創発方法および意思創発プログラム
JP2017-054238 2017-03-21

Publications (2)

Publication Number Publication Date
TW201810254A TW201810254A (zh) 2018-03-16
TWI722160B true TWI722160B (zh) 2021-03-21

Family

ID=60045101

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106110565A TWI722160B (zh) 2016-03-30 2017-03-29 意思創發裝置、意思創發方法及意思創發程式

Country Status (8)

Country Link
US (1) US10325616B2 (zh)
EP (1) EP3438886A4 (zh)
JP (1) JP6851871B2 (zh)
KR (1) KR102437264B1 (zh)
CN (1) CN108885711B (zh)
CA (1) CA3017450C (zh)
RU (1) RU2741934C2 (zh)
TW (1) TWI722160B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6851871B2 (ja) * 2016-03-30 2021-03-31 光吉 俊二 意思創発装置、意思創発方法および意思創発プログラム
JP6273314B2 (ja) * 2016-05-13 2018-01-31 Cocoro Sb株式会社 記憶制御システム、システム及びプログラム
JP7151181B2 (ja) * 2018-05-31 2022-10-12 トヨタ自動車株式会社 音声対話システム、その処理方法及びプログラム
WO2021161492A1 (ja) * 2020-02-14 2021-08-19 株式会社ロボマインド 汎用人工知能システムおよび汎用人工知能プログラム
US11622194B2 (en) * 2020-12-29 2023-04-04 Nuvoton Technology Corporation Deep learning speaker compensation

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5367454A (en) * 1992-06-26 1994-11-22 Fuji Xerox Co., Ltd. Interactive man-machine interface for simulating human emotions
US20120083700A1 (en) * 2010-10-01 2012-04-05 Ivan Osorio Detecting, quantifying, and/or classifying seizures using multimodal data
TW201423730A (zh) * 2012-12-14 2014-06-16 Hon Hai Prec Ind Co Ltd 音頻資訊檢測系統及方法
TW201431592A (zh) * 2013-02-07 2014-08-16 Univ Southern Taiwan Sci & Tec 聲控為主及腦波為輔的電玩遊戲角色操控系統與方法
JP2015128579A (ja) * 2013-12-05 2015-07-16 Pst株式会社 推定装置、プログラム、推定装置の作動方法および推定システム
JP2016012341A (ja) * 2014-06-05 2016-01-21 ソフトバンク株式会社 行動制御システム、システム及びプログラム
TW201606760A (zh) * 2014-07-21 2016-02-16 微軟技術授權有限責任公司 從音頻訊號的即時情緒辨識
CN105380655A (zh) * 2015-10-23 2016-03-09 广东小天才科技有限公司 一种移动终端的情绪预警方法、装置及移动终端
CN105426723A (zh) * 2015-11-20 2016-03-23 北京得意音通技术有限责任公司 基于声纹识别、人脸识别以及同步活体检测的身份认证方法及系统

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI221574B (en) * 2000-09-13 2004-10-01 Agi Inc Sentiment sensing method, perception generation method and device thereof and software
KR20050016700A (ko) * 2002-07-03 2005-02-21 에너지 컨버젼 디바이시즈, 아이엔씨. 유사 뉴런 및 뉴로 시냅스 네트웍
US6999953B2 (en) * 2002-07-03 2006-02-14 Energy Conversion Devices, Inc. Analog neurons and neurosynaptic networks
JP4204839B2 (ja) * 2002-10-04 2009-01-07 株式会社エイ・ジー・アイ 発想モデル装置、自発感情モデル装置、発想のシミュレーション方法、自発感情のシミュレーション方法、およびプログラム
JP4371699B2 (ja) * 2003-05-14 2009-11-25 独立行政法人科学技術振興機構 バイタルサイン計測システム、バイタルサイン計測方法、バイタルサイン計測プログラム、及び記録媒体
US7158966B2 (en) * 2004-03-09 2007-01-02 Microsoft Corporation User intent discovery
US9318108B2 (en) * 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
JP5394118B2 (ja) 2008-05-09 2014-01-22 株式会社Agi 行動分析装置及びコールセンターシステム
WO2011011413A2 (en) * 2009-07-20 2011-01-27 University Of Florida Research Foundation, Inc. Method and apparatus for evaluation of a subject's emotional, physiological and/or physical state with the subject's physiological and/or acoustic data
TWI413938B (zh) * 2009-12-02 2013-11-01 Phison Electronics Corp 情感引擎、情感引擎系統及電子裝置的控制方法
US10074024B2 (en) * 2010-06-07 2018-09-11 Affectiva, Inc. Mental state analysis using blink rate for vehicles
US10424318B2 (en) * 2013-07-05 2019-09-24 Patrick Levy-Rosenthal Method, system and program product for perceiving and computing emotions
US11164596B2 (en) * 2016-02-25 2021-11-02 Samsung Electronics Co., Ltd. Sensor assisted evaluation of health and rehabilitation
US10172517B2 (en) * 2016-02-25 2019-01-08 Samsung Electronics Co., Ltd Image-analysis for assessing heart failure
JP6851871B2 (ja) * 2016-03-30 2021-03-31 光吉 俊二 意思創発装置、意思創発方法および意思創発プログラム
US10769418B2 (en) * 2017-01-20 2020-09-08 At&T Intellectual Property I, L.P. Devices and systems for collective impact on mental states of multiple users

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5367454A (en) * 1992-06-26 1994-11-22 Fuji Xerox Co., Ltd. Interactive man-machine interface for simulating human emotions
US20120083700A1 (en) * 2010-10-01 2012-04-05 Ivan Osorio Detecting, quantifying, and/or classifying seizures using multimodal data
TW201423730A (zh) * 2012-12-14 2014-06-16 Hon Hai Prec Ind Co Ltd 音頻資訊檢測系統及方法
TW201431592A (zh) * 2013-02-07 2014-08-16 Univ Southern Taiwan Sci & Tec 聲控為主及腦波為輔的電玩遊戲角色操控系統與方法
JP2015128579A (ja) * 2013-12-05 2015-07-16 Pst株式会社 推定装置、プログラム、推定装置の作動方法および推定システム
JP2016012341A (ja) * 2014-06-05 2016-01-21 ソフトバンク株式会社 行動制御システム、システム及びプログラム
TW201606760A (zh) * 2014-07-21 2016-02-16 微軟技術授權有限責任公司 從音頻訊號的即時情緒辨識
CN105380655A (zh) * 2015-10-23 2016-03-09 广东小天才科技有限公司 一种移动终端的情绪预警方法、装置及移动终端
CN105426723A (zh) * 2015-11-20 2016-03-23 北京得意音通技术有限责任公司 基于声纹识别、人脸识别以及同步活体检测的身份认证方法及系统

Also Published As

Publication number Publication date
CN108885711B (zh) 2022-09-20
CA3017450C (en) 2023-05-23
RU2741934C2 (ru) 2021-01-29
RU2018138038A (ru) 2020-04-30
US10325616B2 (en) 2019-06-18
TW201810254A (zh) 2018-03-16
JP2017188097A (ja) 2017-10-12
JP6851871B2 (ja) 2021-03-31
EP3438886A4 (en) 2019-11-27
CN108885711A (zh) 2018-11-23
KR20180130539A (ko) 2018-12-07
KR102437264B1 (ko) 2022-08-29
CA3017450A1 (en) 2017-10-05
RU2018138038A3 (zh) 2020-07-14
EP3438886A1 (en) 2019-02-06
US20190027163A1 (en) 2019-01-24

Similar Documents

Publication Publication Date Title
TWI722160B (zh) 意思創發裝置、意思創發方法及意思創發程式
US11071496B2 (en) Cognitive state alteration system integrating multiple feedback technologies
RU2682607C1 (ru) Устройство оценки, программа, способ оценки и система оценки
Yannakakis et al. Psychophysiology in games
WO2022086454A1 (en) System and method for delivering personalized cognitive intervention
Ktistakis et al. Applications of ai in healthcare and assistive technologies
Frank et al. Wearable and Mobile Technologies for the Evaluation and Treatment of Obsessive-Compulsive Disorder: Scoping Review
WO2017170404A1 (ja) 意思創発装置、意思創発方法および意思創発プログラム
Gupta et al. On the estimation of difficulty in emotion regulation using spoken dialogue
FI131057B1 (fi) Menetelmä ja järjestely yhteydenoton aktivointiin
Kaur et al. Intelligent Digital Monitoring of the Levels of Stress
Espinola et al. The Sound of the Mind: Detection of Common Mental Disorders Using Vocal Acoustic Analysis and Machine Learning
Barkana et al. Deep Learning Models for Physiological Data Classification of Children During Computerized Auditory Tests: Deep Learning-Based Emotion Recognition in Child-Computer Interaction
Lee et al. Real-time deep learning-assisted mechano-acoustic system for respiratory diagnosis and multifunctional classification
Härmä et al. Survey on biomarkers in human vocalizations
Alsamarai Music Composition Using a Real-Time MRI Biofeedback System