CN109643160B - 坐标输入处理装置、感情推定装置、系统及构建装置 - Google Patents

坐标输入处理装置、感情推定装置、系统及构建装置 Download PDF

Info

Publication number
CN109643160B
CN109643160B CN201780050733.8A CN201780050733A CN109643160B CN 109643160 B CN109643160 B CN 109643160B CN 201780050733 A CN201780050733 A CN 201780050733A CN 109643160 B CN109643160 B CN 109643160B
Authority
CN
China
Prior art keywords
information
pen
electronic pen
state
emotional state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780050733.8A
Other languages
English (en)
Other versions
CN109643160A (zh
Inventor
挂晃幸
王嬿茹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wacom Co Ltd
Original Assignee
Wacom Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wacom Co Ltd filed Critical Wacom Co Ltd
Publication of CN109643160A publication Critical patent/CN109643160A/zh
Application granted granted Critical
Publication of CN109643160B publication Critical patent/CN109643160B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545Pens or stylus
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/0022Monitoring a patient using a global network, e.g. telephone networks, internet
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165Evaluating the state of mind, e.g. depression, anxiety
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/369Electroencephalography [EEG]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6813Specially adapted to be attached to a specific body part
    • A61B5/6814Head
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6898Portable consumer electronic devices, e.g. music players, telephones, tablet computers
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7264Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • A61B5/7267Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/046Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by electromagnetic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/142Image acquisition using hand-held instruments; Constructional details of the instruments
    • G06V30/1423Image acquisition using hand-held instruments; Constructional details of the instruments the instrument generating sequences of position coordinates corresponding to handwriting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/32Digital ink
    • G06V30/36Matching; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/30Writer recognition; Reading and verifying signatures
    • G06V40/37Writer recognition; Reading and verifying signatures based only on signature signals such as velocity or pressure, e.g. dynamic signature recognition
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/67ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1113Local tracking of patients, e.g. in a hospital or private home
    • A61B5/1114Tracking parts of the body
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7246Details of waveform analysis using correlation, e.g. template matching or determination of similarity
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/011Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/12Classification; Matching
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/70ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Psychiatry (AREA)
  • Artificial Intelligence (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Hospice & Palliative Care (AREA)
  • Child & Adolescent Psychology (AREA)
  • Social Psychology (AREA)
  • Educational Technology (AREA)
  • Evolutionary Computation (AREA)
  • Fuzzy Systems (AREA)
  • Signal Processing (AREA)
  • Physiology (AREA)
  • Mathematical Physics (AREA)
  • Electromagnetism (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Neurosurgery (AREA)
  • Neurology (AREA)
  • Dermatology (AREA)
  • Data Mining & Analysis (AREA)

Abstract

能够推定电子笔的输入作业者的该作业时间点的实时的感情状态,并进行与推定出的感情状态对应的处理。具备:位置检测装置部,具备检测由电子笔指示的位置的传感器和取得与使用者把持的电子笔的状态相关的笔状态信息的单元;发送部,将包括由位置检测装置部取得的笔状态信息的感情状态推定要求向包括数据库的感情推定装置发送,在该数据库中,将把持电子笔的人的感情状态与在该感情状态时与人把持的电子笔的状态相关的笔状态信息可取的值的范围信息被建立对应并进行了保存;及处理部,接收与发送出的感情状态推定要求中包含的笔状态信息对应地从感情推定装置发送来的与感情状态对应的信息,并执行使用了接收到的与感情状态对应的信息的处理。

Description

坐标输入处理装置、感情推定装置、系统及构建装置
技术领域
本发明涉及坐标输入处理装置、感情推定装置、感情推定系统及感情推定用数据库的构建装置。
背景技术
以往,进行了各种测定人的脑波等生物信息并推定该人的感情的状态的尝试。例如,在专利文献1(参照日本特开2010-131328号公报)中,公开了一种使用简易脑波计来测定脑波并根据脑波信息来判定对象者的嗜好、生理状态的方法、装置。
另外,在专利文献2(参照日本特开2015-109964号公报)中提供了一种如下的方法:测定对象者的脑波以外的生物信息,例如脉搏、血流等,基于该测定出的生物信息与脑波的相关关系,根据测定出的生物信息来推定对象者的脑波,利用推定出的脑波的特征模式来推定对象者的感情。
现有技术文献
专利文献
专利文献1:日本特开2010-131328号公报
专利文献2:日本特开2015-109964号公报
发明内容
发明所要解决的课题
近年来,作为电子设备的输入装置,电子笔的使用受到了欢迎。若能够判别(推定)该电子笔的使用者的该电子笔的输入作业中的感情,则能够对使用者提供与该判别(推定)出的感情对应的应对,是便利的。
例如,进行如下应对:当弄清楚(推定出)电子笔的输入的执行中的作业者的感情状态处于注意力散漫的状态后,进行注意唤起,当弄清楚(推定出)所述感情状态是焦躁的感情状态后,提供使心情放松的音乐,等等。
在要向实现以上目的的情况下,需要判别(推定)进行电子笔的输入作业的使用者的该时间点的实时的感情状态,可考虑使用上述的专利文献1、专利文献2的技术。但是,进行电子笔的输入的使用者在装配着简易脑波计、生物信息的传感器的状态下进行作业是不现实的,另外,各作业者都需要简易脑波计、生物信息的传感器,在成本上也是不现实的。
本发明鉴于以上的问题点,其目的在于,即使电子笔的输入作业者不装配简易脑波计、生物信息的传感器等,电子笔的输入作业者也能够判别(推定)该电子笔的输入作业者的该作业时间点的实时的感情状态。
用于解决课题的方案
为了解决上述的课题,权利要求1的发明提供一种坐标输入处理装置,其特征在于,具备:
位置检测装置部,具备检测由电子笔指示的位置的传感器和取得与使用者把持的所述电子笔的状态相关的笔状态信息的单元;
发送部,将包括由所述位置检测装置部取得的所述笔状态信息的感情状态推定要求向具备感情推定用信息保存部的感情推定装置发送,在所述感情推定用信息保存部中,将把持电子笔的人的感情状态和在所述感情状态时与所述人把持的电子笔的状态相关的笔状态信息可取的值的范围信息建立对应并进行了保存;及
处理部,接收与由所述发送单元发送出的所述感情状态推定要求中包含的所述笔状态信息对应地从所述感情推定装置发送来的与所述感情状态对应的信息,并执行使用了所述接收到的与所述感情状态对应的信息的处理。
另外,权利要求8的发明提供一种感情推定装置,其特征在于,具备:
感情推定用信息保存部,将把持电子笔的人的感情状态和在所述感情状态时与所述人把持的电子笔的状态相关的笔状态信息可取的值的范围信息建立对应并进行了保存;及
推定单元,在接收到包括与电子笔的状态相关的笔状态信息的感情状态推定要求时,通过利用所述接收到的所述笔状态信息参照所述感情推定用信息保存部,来推定发送来所述要求信息的电子笔的使用者的感情状态。
而且,权利要求16的发明提供一种感情推定用信息保存部的构建装置,其特征在于,
信息取得单元,取得利用电子笔进行指示输入的人的生物信息及与和所述生物信息建立了对应的进行所述指示输入的人把持的电子笔的状态相关的所述笔状态信息;
判断单元,根据由所述信息取得单元取得的所述生物信息来判断把持所述电子笔的人的感情状态;
根据由所述信息取得单元取得的所述笔状态信息来求出在所述判断出的感情状态时所述笔状态信息可取的值的范围信息的单元;及
保存单元,将所述判断出的感情状态与所述笔状态信息可取的值的范围信息建立对应并保存于感情推定用信息保存部。
一般来说,把持电子笔的作业者的手或指尖会进行与该作业者的该时间点下的感情状态对应的动作。因此,由作业者把持的电子笔处于与该作业者的此时的感情状态对应的手或指尖的动作所对应的高度位置,具有相对于传感器输入面的倾斜,是规定的笔压的状态。也就是说,把持电子笔的作业者的感情状态和与关于由该作业者把持的电子笔的高度位置及其变动、倾斜及其变动、笔压及其变动等电子笔的状态相关的笔状态信息具有相关性。
于是,在本发明中,事先构建将把持电子笔的人的感情状态和在所述感情状态时与把持电子笔的人把持的电子笔的状态相关的笔状态信息可取的值的范围信息建立对应并进行了保存的感情推定用信息保存部。感情推定用信息保存部设置于感情推定装置,由利用电子笔进行指示输入的人的生物信息及与和所述生物信息建立了对应的进行所述指示输入的人把持的电子笔的状态相关的笔状态信息构成。
在此,作为感情状态,例如被设为放松、集中、焦躁、注意力散漫的状态等感情状态。另外,作为笔状态信息,例如使用向电子笔的芯体施加的笔压及其变动、电子笔的传感器上的高度位置及其高度方向的变动、电子笔相对于传感器面的倾斜及其变动、电子笔未与传感器上接触的状态下的传感器的X轴方向及Y轴方向的移动等。并且,存储于感情推定用信息保存部的是各感情状态与在该感情状态时与人把持的电子笔的状态相关的笔状态信息可取的值的范围信息被建立了对应的信息。
该感情推定用信息保存部能够由权利要求16的感情推定用信息保存部构建装置构建。即,首先,取得利用电子笔进行指示输入的人的生物信息和与该生物信息建立了对应的与进行指示输入的人把持的电子笔的状态相关的笔状态信息。然后,根据取得的生物信息来判断把持电子笔的人的感情状态。然后,根据取得的笔状态信息来求出在该判断出的感情状态时笔状态信息可取的值的范围信息。然后,将判断出的感情状态与笔状态信息可取的值的范围信息建立对应并保存于感情推定用信息保存部。
上述的结构的权利要求1的坐标输入处理装置具备位置检测装置部、发送部及处理部。位置检测装置部具备检测由电子笔指示的位置的传感器和取得与使用者把持的电子笔的状态相关的笔状态信息的单元。在此,作为取得的笔状态信息,例如是前述的向电子笔的芯体施加的笔压及其变动、电子笔的传感器上的高度位置及其高度方向的变动、电子笔相对于传感器面的倾斜及其变动、电子笔未与传感器上接触的状态下的传感器的X轴方向及Y轴方向的移动等。
并且,权利要求1的坐标输入处理装置的发送部将包括取得的笔状态信息的感情状态推定要求向感情推定装置。权利要求8的发明是该感情推定装置的发明。
即,在权利要求8的感情推定装置中,在接收到包括与电子笔的状态相关的笔状态信息的感情状态推定要求时,通过利用所述接收到的所述笔状态信息参照所述感情推定用信息保存部,来推定发送来所述要求信息的电子笔的使用者的感情状态。并且,将与该推定结果的感情状态对应的信息向进行了感情状态推定要求的坐标输入处理装置发回。
权利要求1的发明的坐标输入处理装置当接收到与来自感情推定装置的推定出的感情状态对应的信息时,进行与该接收到的与感情状态对应的信息对应的处理。
如以上这样,根据本发明的坐标输入处理装置,仅通过对感情推定装置发送包括取得的笔状态信息的感情状态推定要求,就能够得知该时间点下的电子笔的使用者的推定出的感情状态,能够进行基于与该感情状态对应的信息的处理。
发明效果
根据本发明,起到如下效果:即使把持电子笔的输入作业者不装配简易脑波计或生物信息的传感器等,也能够推定利用该电子笔进行输入作业的输入作业者的该作业时间点的实时的感情状态,并进行与该感情状态对应的处理。
附图说明
图1是用于说明本发明的感情推定用信息保存部的构建装置的实施方式的图。
图2是示出构成图1的实施方式的电子笔和平板终端的电路结构例的图。
图3是示出构成图1的实施方式的感情服务器装置的结构例的框图。
图4是用于说明图1的实施方式的感情推定用信息保存部的构建装置的例子的图。
图5是用于说明图1的实施方式的感情推定用信息保存部的构建装置的例子的图。
图6是用于说明由图1的实施方式的感情推定用信息保存部的构建装置构建的感情推定用信息保存部的例子的图。
图7是示出用于说明图1的实施方式的感情推定用信息保存部的构建装置的动作处理的流程的例子的流程图的图。
图8是用于说明感情推定用信息保存部的构建装置的其他实施方式的概要的图。
图9是用于说明感情推定用信息保存部的构建装置的其他实施方式的图。
图10是示出构成图8的实施方式的电子笔和平板终端的电路结构例的图。
图11是用于说明感情推定用信息保存部的构建装置的其他实施方式的概要的图。
图12是示出构成图11的实施方式的电子笔和平板终端的电路结构例的图。
图13是用于说明包括本发明的感情推定装置的实施方式的系统的结构例的概要的图。
图14是示出构成图13的实施方式的电子笔和平板终端的电路结构例的图。
图15是示出构成图13的实施方式的感情服务器装置的结构例的框图。
图16是示出构成图13的实施方式的平板终端的处理动作的流程的例子的流程图的图。
图17是示出构成图13的实施方式的感情服务器装置的处理动作的流程的例子的流程图的图。
图18是用于说明图13的实施方式的图。
图19是用于说明在本发明的感情推定用信息保存部的构建装置的实施方式及感情推定装置的实施方式以及感情推定系统的实施方式中使用的信号格式的例子的图。
图20是用于说明本发明的感情推定系统的其他实施方式的主要部分的图。
具体实施方式
以下,参照附图来说明本发明的实施方式。首先,对感情推定用信息保存部的构建装置的实施方式进行说明。
[感情推定用信息保存部的构建系统的第一例]
图1是示出包括感情推定用信息保存部的构建装置的实施方式的感情推定用信息保存部的构建系统的第一结构例的概要的图。该例是为了判断人的感情状态而使用脑波计的情况。需要说明的是,在以下的说明中,将感情推定用信息保存部称作感情推定用数据库。
如图1所示,在该第一结构例中,电子笔的使用者3把持电子笔1来对具备检测该电子笔1的指示输入的位置检测装置部的平板终端2进行指示输入。在该例中,电子笔1及平板终端2的位置检测装置部使用电磁感应耦合方式的设备。
并且,在该例中,电子笔1具备检测向其芯体的顶端施加的笔压的功能,并且存储有用于识别自身的识别信息(笔ID),将其检测到的笔压的信息和笔ID与位置检测用信号一起向平板终端2的位置检测装置部发送。电子笔1是使用者3拥有的电子笔,笔ID承担作为使用者3的识别信息的作用。需要说明的是,向电子笔1施加的笔压能够通过使用公知的方法来检测,因此其检测方法的说明在此省略。
平板终端2的位置检测装置部基于从电子笔1送出的位置检测用信号,通过电磁感应耦合方式来检测由电子笔1指示的位置。需要说明的是,在该例中,电子笔1具备由线圈和电容器构成的谐振电路,通过利用谐振电路接收从平板终端2的位置检测装置部发送来的交流信号并使该接收到的交流信号反馈,来作为来自电子笔1的位置检测用信号而向平板终端2的位置检测装置部发送。
并且,电子笔1通过改变从谐振电路向平板终端2的位置检测装置部反馈的交流信号的频率(谐振频率)来将笔压信息向平板终端2的位置检测装置部传送,或者对从谐振电路向平板终端2的位置检测装置部反馈的交流信号进行ASK(Amplitude Shift Keying:幅移键控)调制、OOK(On-Off Keying:通断键控)调制等并作为数字信号而向平板终端2的位置检测装置部传送。平板终端2的位置检测装置部也取得如上述这样从电子笔1传送来的笔压信息和笔ID。
另外,在该例中,平板终端2的位置检测装置部具备检测电子笔1的倾斜和电子笔1的高度位置的功能。在此,电子笔1的倾斜是指电子笔1相对于位置检测装置部的传感器面(位置指示输入面)的倾斜。另外,电子笔1的高度位置是指从位置检测装置部的传感器面(位置指示输入面)起的高度位置。电子笔1的倾斜和高度位置能够通过使用公知的方法来检测,因此关于其检测方法的说明在此省略。
平板终端2将以上说明的检测到的电子笔1的指示位置的信息、电子笔1的笔压信息、电子笔1的倾斜的信息及电子笔1的高度位置的信息作为笔状态信息而向建立对应处理部4供给。需要说明的是,在该例中,与电子笔的状态相关的笔状态信息包括电子笔的指示位置的信息、笔压信息、倾斜的信息及电子笔的高度位置的信息等。
并且,在该例中,在电子笔的使用者3的头部上,为了判断其感情状态而装配有连接于脑波计5的多个电极6。脑波计5对从电极6得到的脑波数据附加内置的时钟部的时间信息(年月日时分秒的时刻信息)并向建立对应处理部4供给。
建立对应处理部4例如由个人计算机构成。建立对应处理部4从平板终端2取得电子笔的指示位置的信息、笔ID及笔状态信息,并且从脑波计5取得相同时间点下的脑波数据,将两者建立对应,并且对该建立对应后的信息附加时间戳(该时间点的年月日时分秒的时刻信息)。并且,建立对应处理部4将对该建立对应后的信息附加时间戳后的信息通过通信网络7而向感情服务器装置8发送。
通信网络7能够由包括包含互联网、便携电话网的公众网的网络构成。另外,通信网络7也可以是使用Wi-Fi(注册商标)(Wireless Fidelity:无线保真)的无线LAN。另外,通信网络7也可以是将感情服务器装置8与建立对应处理部4之间以有线方式连接的LAN的结构。
感情服务器装置8接收来自建立对应处理部4的信息,从该接收到的信息分开取得电子笔的笔ID、脑波数据及电子笔1的笔状态信息。并且,根据其中的来自脑波计5的脑波数据来判断(确认)电子笔1的使用者在该时间点下的感情状态。在该例中,作为感情状态,判断(确认)“放松状态”“集中状态”“焦躁状态”“注意力散漫状态”“发怒状态”等。作为根据脑波数据来判断这些感情状态的方法,根据脑波中所占的α波、β波、θ波等的各频率成分比率(分布)来判断的方法等是熟知的。
如后所述,感情服务器装置8根据接收到的来自平板终端2的信息,算出在关于电子笔1的使用者判断出的各感情状态下笔状态信息可取的值的范围信息。
并且,在感情服务器装置8中,将判断出的感情状态、在该感情状态时笔状态信息可取的值的范围信息及电子笔的笔ID建立对应并保存于内置的感情推定用数据库。
[电子笔1和平板终端2的位置检测装置部的电子电路结构例]
图2是示出第一例的电子笔1的等效电路和与该电子笔1通过电磁感应授受方式来进行位置检测及笔压检测的平板终端2的位置检测装置部20的电路结构例的图。
该图2的例子的平板终端2的位置检测装置部20具备传感器部21、坐标数据形成部22及控制器23。在传感器部21中,层叠形成有X轴方向环形线圈群211和Y轴方向环形线圈群212,并且设置有依次选择2个环形线圈群211、212中的一个环形线圈的选择电路213。
电子笔1具备由IC100构成的信号控制电路,并且构成为从由平板终端2的位置检测装置部20的传感器部21所具备的励磁线圈214发送出的励磁信号取得用于驱动该IC100的驱动电压。需要说明的是,在图2中,作为一例,设为传感器部21的环形线圈群211、212仅用于来自电子笔1的电磁耦合信号的接收来说明,但并不排除通过与电子笔1之间进行电磁耦合来取代励磁线圈214而驱动电子笔1所具备的信号控制电路。另外,也不排除对电子笔1所具备的信号控制电路发送规定的控制数据等信号。
在该图2的例子的平板终端2的位置检测装置部20的传感器部21中,以包围X轴方向环形线圈群211和Y轴方向环形线圈群212的方式设置有励磁线圈214。在图2中,励磁线圈214为2匝,但实际上被设为更多的匝数,例如8~10匝。如图2所示,励磁线圈214连接于驱动电路222,驱动电路222连接于以频率fo振荡的振荡电路221。
驱动电路222由微型计算机构成的处理控制部220控制。处理控制部220控制驱动电路222来控制来自振荡电路221的频率fo的振荡信号向励磁线圈214的供给,从而控制从励磁线圈214向电子笔1的信号发送。
选择电路213由处理控制部220进行选择控制而选择一个环形线圈。在由该选择电路213选择出的环形线圈产生的感应电压被接收放大器223放大,向带通滤波器224供给,仅频率fo的成分被提取出。带通滤波器224将该提取出的成分向检波电路225供给。
检波电路225检测频率fo的成分,将与该检测到的频率fo的成分对应的直流信号向样本保持电路226供给。样本保持电路226保持检波电路225的输出信号的规定定时(具体而言是接收期间中的规定定时)下的电压值,并向AD变换电路227送出。AD变换电路227将样本保持电路226的模拟输出变换为数字信号,并向处理控制部220输出。处理控制部220将所述规定定时的信号向样本保持电路226供给。
并且,处理控制部220判定来自AD变换电路227的数字信号是否是超过了规定阈值的值,判定由选择电路213选择的环形线圈是否是由电子笔1进行位置指示的位置的环形线圈,基于该判定来检测电子笔1的指示位置。
另外,如后所述,处理控制部220与电子笔1的指示位置的检测相独立地将来自电子笔1的信号的断续作为数位的数字信号而检测,检测笔压,并且检测笔ID。并且,处理控制部220将检测到的电子笔的指示位置的信息、检测到的笔压的信息及检测到的笔ID建立对应并向控制器23供给。
控制器23将接收到的电子笔的指示位置的信息、笔压的信息及笔ID存储于省略了图示的缓冲器。需要说明的是,控制器23具备带日历功能的时钟部231,在缓冲器中,以与指示位置的信息、笔压的信息及笔ID建立对应的方式也存储它们的接收时间点的年月日时分秒的时间信息。
并且,控制器23将存储于缓冲器的指示位置的信息、笔压的信息、笔ID及时间信息通过无线通信部232而向建立对应处理部4发送。
电子笔1的电路结构为在图2中由虚线包围的结构。即,对作为电感元件的线圈101并联连接电容器102而构成谐振电路103。并且,对该谐振电路103并联连接有开关电路104。该开关电路104构成为由IC100进行接通·断开控制。在该开关电路104断开时,进行由谐振电路103对来自传感器部21的信号的谐振动作。但是,在开关电路104接通时,并联连接于线圈101的电容器102被短路,由谐振电路103对来自传感器部21的信号的谐振动作停止。
并且,IC100构成为利用将在谐振电路103处从平板终端2的位置检测装置部20的传感器部21通过电磁感应而接收到的交流信号在由二极管105及电容器106构成的整流电路(电源供给电路)107处进行整流而得到的电源电压Vcc来进行动作。IC100与谐振电路103经由电容器108而连接,监视谐振电路103的动作状况。IC100通过监视谐振电路103的动作状况,能够检测与传感器部21的励磁线圈214的电磁耦合状况,或者,在该例中省略说明,检测使用2个环形线圈群211、212从位置检测装置部20的传感器部21发送出的控制数据等信号,进行期望的动作控制。
该实施方式的电子笔1具备由将向芯体施加的笔压例如作为容量可变电容器Cv的静电容量而检测的感压元件构成的笔压检测单元。如图2所示,在IC100上连接有该容量可变电容器Cv,IC100构成为能够检测与笔压对应的该容量可变电容器Cv的静电容量。IC100根据容量可变电容器Cv的静电容量的值来检测电子笔1中的笔压。并且,IC100将检测到的笔压变换为多位的数字信号,通过利用与该笔压对应的数字信号控制开关电路104,来将笔压信息作为位置检测用信号的附加信息而向平板终端2的位置检测装置部20发送。
另外,在IC100上连接有存储电子笔1的识别信息即笔ID的ID存储器10。IC100通过利用存储于该ID存储器110的数字信号的数字信号控制开关电路104,从而将该笔ID也作为位置检测用信号的附加信息而与笔压信息一起向平板终端2的位置检测装置部20发送。
对如以上这样构成的电子笔1及平板终端2的位置检测装置部20的位置检测动作及笔压信息、笔ID的检测动作进行说明。
处理控制部220首先对驱动电路222进行驱动而从励磁线圈214在规定时间内将信号向电子笔1发送。接着,处理控制部220对驱动电路222进行驱动而从励磁线圈214送出脉冲串状信号,之后将利用选择电路213选择X轴方向环形线圈群211中的一个环形线圈的处理对X轴方向环形线圈群211的全部环形线圈依次进行。电子笔1利用谐振电路103来接收脉冲串状信号,并向平板终端2的位置检测装置部20的传感器部21反馈。处理控制部220通过将该反馈的脉冲串状信号作为位置检测用信号检测,来求出由电子笔1指示的位置的X坐标值。
接着,处理控制部220对驱动电路222进行驱动而从励磁线圈214在规定时间内将信号向电子笔1发送。接着,处理控制部220对驱动电路222进行驱动而从励磁线圈214送出脉冲串状信号,之后将利用选择电路213选择Y轴方向环形线圈群212中的一个环形线圈的处理对Y轴方向环形线圈群212的全部环形线圈依次进行。电子笔1利用谐振电路103来接收脉冲串状信号,并向平板终端2的位置检测装置部20的传感器部21反馈。处理控制部220通过将该反馈的脉冲串状信号作为位置检测用信号检测,来求出由电子笔1指示的位置的Y坐标值。
如以上这样,当检测电子笔1的指示位置后,处理控制部220求出作为来自电子笔1的附加信息的笔压信息及笔ID,因此在从励磁线圈214进行了持续规定时间以上的发送后,在与坐标检测时同样的定时下将收发持续进行与附加信息的数字信号的位数对应的次数。此时,在选择电路213中,按照检测到的坐标值,选择距离电子笔1最近的环形线圈(也可以是X轴方向环形线圈、Y轴方向环形线圈中的任一者)来接收信号。
另一方面,电子笔1的IC100利用由与构成笔压检测单元的容量可变电容器Cv的静电容量对应地得到的笔压信息和笔ID构成的附加信息的数字信号,与来自平板终端2的位置检测装置部20的信号的收发同步地对开关电路104进行接通·断开控制。在开关电路104断开时,谐振电路103能够将从位置检测装置部20发送出的信号向位置检测装置部20发回,因此位置检测装置部20的环形线圈接收该信号。相对于此,在开关电路104接通时,谐振电路103处于谐振动作被禁止的状态,因而,不从谐振电路103向位置检测装置部20发回信号,位置检测装置部20的环形线圈不接收信号。
位置检测装置部20的坐标数据形成部22的处理控制部220通过将接收信号的有无的判别进行附加信息的数字信号的位数次,能够接收与笔压信息及笔ID对应的多位的数字信号,检测来自电子笔1的笔压信息及笔ID。因此,电子笔1将笔压信息和笔ID作为进行ASK(Amplitude Shift Keying:幅移键控)调制后的信号而向平板终端2的位置检测装置部20发送。
位置检测装置部20的处理控制部220检测电子笔1的指示位置的信息,并且检测来自该电子笔1的笔压信息及笔ID。并且,将检测到的电子笔1的指示位置和笔压信息及笔ID向控制器23供给。控制器23将对从处理控制部220接收到的电子笔1的指示位置和笔压信息及笔ID附加了时间信息后的信息从无线通信部232向建立对应处理部4发送。
建立对应处理部4将从平板终端2接收到的电子笔1的指示位置、笔压信息及笔ID以及来自脑波计5的脑波数据基于分别附加的时间信息来建立对应。并且,建立对应处理部4将对建立对应后的信息附加对应的时间信息后的信息通过通信网络7而向感情服务器装置8发送。
<感情服务器装置8的结构例>
图3是示出该实施方式的感情服务器装置8的硬件结构例的图。即,感情服务器装置8通过对由计算机构成的控制部81通过系统总线80连接无线通信部82、信息取得部83、感情状态判断部84、笔状态信息范围算出部85、建立对应保存处理部86及感情推定用数据库87而构成。
控制部81用于控制感情服务器装置8的整体。无线通信部82用于通过通信网络7而进行无线通信,在该例中,通过该无线通信部82而接收来自建立对应处理部4的信息。信息取得部83从无线通信部82的接收信息中将来自平板终端2的电子笔1的指示位置、笔压信息及笔ID以及来自脑波计5的脑波数据的对应信息与时间戳一起提取出而取得。
并且,信息取得部83将取得的信息中的来自脑波计5的脑波数据及笔ID向感情状态判断部84供给,将来自平板终端2的电子笔1的指示位置、笔压信息及笔ID向笔状态信息范围算出部85供给。
感情状态判断部84根据规定时间内的脑波数据来判断此时的电子笔1的使用者的感情状态,笔状态信息范围算出部85算出判断出的感情状态时的电子笔的坐标位置偏移的范围、笔压的范围、倾斜的范围、高度位置的范围。并且,感情状态判断部84将判断出的感情状态与笔ID一起向建立对应保存处理部86供给,另外,笔状态信息范围算出部85将在判断出的感情状态时算出的电子笔1的坐标位置偏移的范围、笔压的范围、倾斜的范围、高度位置的范围与笔ID一起向建立对应保存处理部86供给。
建立对应保存处理部86将接收到的感情状态和笔状态信息的各范围的信息与笔ID建立对应,并保存于感情推定用数据库87。
在此,如前所述,作为感情状态,如前所述,在该例中,判断“放松状态”“集中状态”“焦躁状态”“注意力散漫状态”“发怒状态”的各感情状态。感情状态的判断通过解析生物信息(在该例中是脑波数据)来算出。因而,在该实施方式中,对成为感情状态的判断的对象的电子笔1的使用者3以“放松状态”“集中状态”“焦躁状态”“注意力散漫状态”“发怒状态”的各感情状态分别持续规定时间以上的时间幅度的方式施加使各感情状态出现的状况刺激等,利用脑波计5来测定并确认成为了各感情状态。
例如,施加如下的状况刺激:要想使电子笔1的使用者3成为“放松状态”,将使用者3会变得心情舒畅的音乐向使用者提供规定时间,要想使电子笔1的使用者3成为“集中状态”,在规定时间内让使用者3仔细地进行使用者3能够集中的书写或绘画,要想使电子笔1的使用者3成为“焦躁状态”,故意让使用者3加快电子笔1的输入操作,等等。由此,能够让使用者成为“放松状态”“集中状态”“焦躁状态”“注意力散漫状态”“发怒状态”的各感情状态,通过利用脑波计5测定此时的脑波数据,能够确认使用者成为了所述各感情状态。
在该情况下,关于脑波数据,例如测定并记录α波、β波、θ波,根据它们的分布形状等来判断或确认使用者成为了所述各感情状态。即,在脑波的α波、β波、θ波的分布形状与感情状态之间存在相关关系,虽然省略了图示,但感情服务器装置8的感情状态判断部84具备该相关关系的数据库。并且,感情服务器装置8的感情状态判断部84通过利用测定出的脑波的α波、β波、θ波的分布形状参照所述相关关系的数据库,来推测并判断或确认使用者3的感情状况。
需要说明的是,以下的例子是人为地创造出“放松状态”“集中状态”“焦躁状态”“注意力散漫状态”“发怒状态”的各感情状态,利用脑波数据来判断并确认成为了该感情状态,测定各感情状态下的笔状态并作为数据而蓄积的方法的一例。
在该例中,如图4(A)所示,从脑波计5生成电子笔1的使用者处于“放松状态”“集中状态”“焦躁状态”“注意力散漫状态”“发怒状态”的各感情状态时的规定期间T1、T2、T3、T4、T5,在各规定期间T1、T2、T3、T4、T5中,产生与各感情状态对应的脑波数据D1、D2、D3、D4、D5。规定期间T1、T2、T3、T4、T5被设为能够由感情服务器装置8判断(确认)“放松状态”“集中状态”“焦躁状态”“注意力散漫状态”“发怒状态”的各感情状态的充分的时间长度。
并且,如图4(B)及(C)所示,在规定期间T1、T2、T3、T4、T5中,在平板终端2中,检测成为了“放松状态”“集中状态”“焦躁状态”“注意力散漫状态”“发怒状态”的各感情状态的使用者的电子笔1的指示位置的信息Crd1、Crd2、Crd3、Crd4、Crd5及笔压信息Pr1、Pr2、Pr3、Pr4、Pr5。并且,如图4(D)所示,平板终端2在规定期间T1、T2、T3、T4、T5的全部中取得相同的笔ID(=ID1)。并且,平板终端2在规定期间T1、T2、T3、T4、T5的各期间中,除了电子笔1的指示位置的信息之外,也检测电子笔的倾斜、高度位置等笔状态信息。并且,如前所述,来自平板终端2的电子笔1的指示位置的信息和笔压信息、倾斜、高度位置等笔状态信息如前述那样被与笔ID建立对应并经由建立对应处理部4而向感情服务器装置8发送。
因此,在感情状态判断部84中,根据规定期间T1、T2、T3、T4、T5的各期间中的脑波数据,来确认使用者3成为了“放松状态”“集中状态”“焦躁状态”“注意力散漫状态”“发怒状态”的各感情状态。
并且,笔状态信息范围算出部85算出与在各规定期间T1、T2、T3、T4、T5中使用者成为的各感情状态即“放松状态”“集中状态”“焦躁状态”“注意力散漫状态”“发怒状态”分别对应的多种笔状态信息的存在范围。即,处于各感情状态的使用者的电子笔1的笔状态分别成为与各感情状态对应的存在范围,因此算出该存在范围。例如,处于“放松状态”时的向电子笔1施加的笔压成为比较低的平均值,并且成为相对于该平均值的偏差成为比较小的值的存在范围。另外,处于“焦躁状态”时的向电子笔1施加的笔压成为比较高的平均值,并且成为相对于该平均值的偏差成为比较大的值的存在范围。
并且,在该例中,根据电子笔1的指示位置(也包括高度位置)的信息(参照图4(B)),算出“倾斜的范围”“高度位置的范围”“悬停状态下的笔尖位置的偏移范围”等。另外,根据电子笔1的笔压信息(参照图4(C)),算出“(书写时的)笔压的范围”。需要说明的是,笔状态信息的范围信息通过判定感情状态的判断所需的规定的时间幅度以上的时间中的笔状态信息各自的值的程度(例如90%)进入其中即存在的范围而算出。在此,算出笔状态信息的范围信息时的笔状态信息进入该范围之中的百分比的值与根据笔状态信息来推定感情状态时的精度有关系,当然越高则推定精度越高。该笔状态信息的范围信息(存在范围的信息)能够设为由上述的平均值和偏差构成的范围信息。
需要说明的是,在该实施方式中,与各感情状态对应的笔状态信息的范围信息实时地检测,但也可以蓄积在前述的规定期间T1、T2、T3、T4、T5中取得的笔状态信息,事后使用该蓄积的笔状态信息来算出各范围信息。
并且,在该实施方式中,笔状态信息范围算出部85也存储电子笔1的使用者3的各感情状态下的“文字书写时的特征模式”。因而,在该例中,使取得脑波数据的对象者即使用者3在各感情状态时在规定的矩形区域内书写规定文字。
即,如图5所示,对于使用者3,在平板终端2的显示画面上显示文字的输入四边框FL,催促其在该输入四边框FL内输入文字。如图5所示,使用者3在各感情状态下利用电子笔1在该输入四边框FL内输入要求输入的文字,在该例中是“あ”。
如图5所示,在放松状态、集中状态下,使用者3以准确地处于该输入四边框FL内的方式书写输入要求的文字。即,文字的中心位置成为输入四边框FL的中心位置的附近,文字的大小成为不超过输入四边框FL的大小。
但是,在焦躁状态、注意力散漫状态、发怒状态下,根据这些感情状态而文字的中心位置成为从输入四边框FL的中心位置偏离的状态,并且文字从输入四边框FL溢出或者成为比输入四边框FL大的文字。于是,作为作为笔状态信息的例子的文字书写时的特征模式,笔状态信息范围算出部85根据各感情状态而算出文字从中心位置的偏离的范围、文字的大小的改变范围等。
需要说明的是,作为“文字书写时的特征模式”,也可以不是关于一个文字的特征模式,而是算出连续地书写多个文字时的关于该多个文字间的特征模式。在该情况下,例如,可以将多个文字的中心位置的偏离变化、大小变化等作为特征模式而算出。
笔状态信息范围算出部85将如以上这样算出的笔状态信息的范围信息在各感情状态的检测期间即规定期间T1、T2、T3、T4、T5内分别向建立对应保存处理部86供给。
建立对应保存处理部86在规定期间T1、T2、T3、T4、T5中分别将来自感情状态判断部84的判断出的感情状态的信息与来自笔状态信息范围算出部85的关于多种笔状态信息各自的范围信息建立对应,并且与笔ID建立对应并保存于感情推定用数据库87。
图6示出此时的感情推定用数据库87的存储内容的例子。如该图6所示,以与用于识别电子笔的使用者的笔ID建立对应的方式存储有“放松状态”“集中状态”“焦躁状态”“注意力散漫状态”“发怒状态”的各感情状态,并且以与各感情状态分别建立对应的方式存储有各感情状态下的笔状态信息分别可取的范围的信息。
在图6的例子中,作为笔状态信息,存储书写输入时的“坐标指示偏移”“笔压”“倾斜”“高度位置”“悬停位置下的位置偏移”等。作为坐标指示偏移,存储使用前述的图5说明的文字从中心位置的偏离范围、文字的大小的改变范围。需要说明的是,在图6中,示意性地示出了偏离范围、改变范围,四边框与前述的图5的四边框FL对应。
需要说明的是,在“坐标指示偏移”的情况下,该偏移的速度或加速度根据感情状态而温和地变化或者剧烈地变化,因此也可以也将这些信息也一并保存于感情推定用数据库87。
关于“笔压”,可预想在使用者在各感情状态下利用电子笔1在传感器上输入时值不同,因此存储其笔压范围(例如Pra1~Prb1等)。例如,与放松状态的笔压相比,集中状态下的笔压大,且其笔压范围也窄。另外,在焦躁状态下,笔压成为各式各样,因此笔压范围变大。在发怒状态下,笔压变大。需要说明的是,不仅是笔压的范围,也可以将平均值也一并存储。另外,也可以将笔压的时间变化也一并保存于感情推定用数据库87。例如,在“放松状态”“集中状态”下,笔压的时间变化的程度变小,在“焦躁状态”“注意力散漫状态”下,笔压的时间变化的程度变大。
关于“倾斜”,由于根据使用者的感情状态而电子笔1与传感器面(输入面)所成的角改变,所以在感情推定用数据库87中根据该各感情状态而存储倾斜的范围。需要说明的是,在该情况下,也可以将倾斜的时间变化也一并保存于感情推定用数据库87。例如,在“放松状态”“集中状态”下,倾斜的时间变化的程度变小,在“焦躁状态”“注意力散漫状态”下,倾斜的时间变化的程度变大。需要说明的是,倾斜也可以针对笔压为零而处于悬停状态时和笔压比0大的与传感器接触时而分开保存于感情推定用数据库87。
“高度位置”是在使用者3拿着电子笔1进行指示输入(书写输入)前的待机状态下电子笔1处于悬停状态时的与传感器面正交的方向的高度位置的在各感情状态时可取的高度位置,该高度位置的范围信息保存于感情推定用数据库87。
“悬停位置下的位置偏移”是表示使用者3拿着电子笔1进行指示输入(书写输入)前的待机状态时的传感器面上的坐标位置的变化的范围信息。即,例如,在使用者处于“集中状态”时,“悬停位置下的位置偏移”变小,在使用者处于“焦躁状态”“注意力散漫状态”时,“悬停位置下的位置偏移”变大。需要说明的是,在该情况下,也可以将“悬停位置下的位置偏移”的时间变化也一并保存于感情推定用数据库87。
如以上这样,在该实施方式中,在感情推定用数据库87中,与由笔ID识别的每个使用者的感情状态分别对应地保存笔状态信息的各范围信息。
并且,在该实施方式中,为了使得不仅是由保存于感情推定用数据库87的笔ID识别的使用者而是关于电子笔的使用者的全部能够推定感情状态,与“放松状态”“集中状态”“焦躁状态”“注意力散漫状态”“发怒状态”的各感情状态对应地将设想了通用的使用者的通用的笔状态信息的范围信息保存于感情推定用数据库87。笔状态信息范围算出部85通过对与在感情推定用数据库87中与笔ID对应地保存的许多使用者的感情状态分别对应的笔状态信息的各范围信息进行平均化处理等来算出该通用的笔状态信息的范围信息。
需要说明的是,在以上的感情服务器装置8的结构中,信息取得部83、感情状态判断部84、笔状态信息范围算出部85及建立对应保存处理部86也可以通过控制部81执行存储于内置的存储部的程序来构成为进行这些处理的软件功能处理部。
[感情服务器装置8中的感情推定用数据库的构建处理]
图7是用于说明该感情服务器装置8中的感情推定用数据库的构建处理的流程的一例的流程图。需要说明的是,该图7的例子设为感情服务器装置8的控制部81将信息取得部83、感情状态判断部84、笔状态信息范围算出部85及建立对应保存处理部86作为软件功能处理部而实现的情况来说明。需要说明的是,该图7示出了生成关于一位使用者3的感情推定用数据库的信息的处理的流程。因此,若使用者改变,则图7的处理关于该使用者而进行。
并且,在该例中,作为关于使用者的感情状态的判断期间,如图4所示,依次执行规定期间T1、T2、T3、T4、T5的各期间。
控制部81首先通过通信网络7而接收脑波数据与电子笔的状态信息(包括电子笔1的指示位置的信息)的对应信息(步骤S101)。然后,控制部81根据取得的脑波数据来判断与笔ID对应的使用者3的感情状态(步骤S102)。在该步骤S102中,在前述的规定期间T1、T2、T3、T4、T5中的一个期间中,进行该期间内的感情状态的判断处理。
接着,控制部81关于电子笔的各状态信息,检测与在步骤S102中判断出的感情状态对应的范围值(步骤S103)。然后,判别是否成功检测到关于电子笔的各状态信息的范围值(步骤S104),在判别为未成功检测到时,通过通信网络7而进一步接收来自建立对应处理部4的信息(步骤S105)。之后,控制部81使处理返回步骤S103,反复进行该步骤S103以后的处理。
在步骤S104中判别为成功检测到关于电子笔的各状态信息的范围值时,以与取得的笔ID建立对应的方式,使在步骤S102中判断出的感情状态和在步骤S103中算出的笔状态信息的范围值对应,并保存于感情推定用数据库87(步骤S106)。
接着,控制部81判别关于所要推定的全部感情状态的规定期间T1、T2、T3、T4、T5是否已结束(步骤S107)。在该步骤S107中判别为未结束时,在下一个规定期间内,使用者成为了其他感情状态时的脑波数据及笔状态信息会被发送来,因此控制部81使处理返回步骤S101,反复进行该步骤S101以后的处理。
并且,在步骤S107中判别为关于所要推定的全部感情状态的规定期间T1、T2、T3、T4、T5已结束时,控制部81对与在感情推定用数据库87中与笔ID对应地保存的许多使用者的各感情状态对应的笔状态信息的各范围信息进行平均化处理等来生成或更新通用的笔状态信息的范围信息,将该生成或更新后的通用的笔状态信息的范围信息与“放松状态”“集中状态”“焦躁状态”“注意力散漫状态”“发怒状态”的各感情状态对应地保存于感情推定用数据库87。然后,控制部81结束处理。
如以上这样,在感情服务器装置8的感情推定用数据库87中,保存由笔ID识别的每个使用者的感情状态与笔状态信息的范围信息的对应信息,并且关于不由笔ID识别的通用的使用者,保存与该通用的使用者的感情状态对应的通用的笔状态信息的范围信息。
因而,在使用者利用电子笔在平板终端中进行了指示输入时,通过将该使用者把持的电子笔的笔状态信息作为参照信息来检索感情服务器装置8的感情推定用数据库87,能够推定与笔状态信息对应的感情状态。
在该情况下,若使用者把持的电子笔具有与登记于感情推定用数据库的笔ID一致的笔ID,则能够检索与该笔ID对应地保存于感情推定用数据库87的信息,因此能够根据由笔ID识别的使用者的习惯等电子笔操作的特性而准确地推定该使用者的感情状态。另外,在该实施方式中,在感情推定用数据库87中,由于保存有与各感情状态对应的通用的笔状态信息的范围信息,所以存在如下效果:即使关于未与笔ID对应地将感情状态与笔状态信息的对应信息保存于感情推定用数据库87的使用者,也能够根据笔状态信息来进行感情状态的推定。
[数据库的构建系统的第二例]
在上述的数据库的构建系统的第一例中,需要将作为用于判断感情状态的生物信息的例子的脑波数据与笔状态信息建立对应的建立对应处理部4。以下说明的数据库的构建系统的第二例是能够省略建立对应处理部4的例子。
图8是用于说明该数据库的构建系统的第二例的概要的图。在该例中,使用者3将例如专利文献1所公开的简易脑波计5A装配于头部。该简易脑波计5A以能够将从使用者取得的脑波数据(称作简易脑波数据)以无线方式发送的方式具备近距离无线通信标准(例如蓝牙(注册商标)标准)的无线通信部5TA。
并且,在该例中,电子笔1A以能够接收从简易脑波计5A以无线方式发送来的简易脑波数据的方式具备在图8中省略图示的蓝牙(注册商标)标准的无线通信单元。并且,电子笔1A将从简易脑波计5A接收到的简易脑波数据作为位置检测用信号的附加信息而向平板终端2A的位置检测装置部送出。
即,如图9(A)所示,电子笔1A对平板终端2A的位置检测装置部反复送出位置检测用信号和附加信息。在该例的电子笔1A中,如图9(B)所示,附加信息由笔压信息、笔ID及简易脑波数据构成。电子笔1A与上述的第一例同样地将作为数字信号的附加信息向平板终端2A的位置检测装置部送出。
平板终端2A具有与上述的第一例同样的结构。不过,在该第二例中,平板终端2A除了笔压信息及笔ID之外还取得简易脑波数据作为附加信息,因此如后所述,具备将笔状态信息及简易脑波数据与笔ID建立对应后的信息通过通信网络7而向感情服务器装置8发送的功能。
[电子笔1A和平板终端2A的位置检测装置部20A的电子电路结构例]
图10是示出该第二例中的电子笔1A的等效电路和平板终端2A的位置检测装置部20A的电路结构例的图。在该图10中,对于与图2所示的第一例的电子笔1及平板终端2的位置检测装置部20相同的部分,标注了同一附图标记。
在该第二例中,如图10所示,电子笔1A具备蓝牙(注册商标)标准的无线通信部109。对该无线通信部109供给来自整流电路107的电源电压Vcc。并且,该无线通信部109将接收到的简易脑波数据向IC100A供给。
该例的电子笔1A的IC100A除了根据容量可变电容器Cv的静电容量检测到的笔压信息和存储于ID存储器110的笔ID之外,还利用由无线通信部109接收到的简易脑波数据来生成附加信息(数字信号)。并且,与第一例的电子笔1同样,利用附加信息的数字信号对开关电路104进行接通、断开控制,将附加信息作为ASK调制信号而向平板终端2A的位置检测装置部20A的传感器部21送出。电子笔1A的其他结构及动作与第一例的电子笔1是同样的。
平板终端2A的位置检测装置部20A与第一例的平板终端2A的位置检测装置部20完全同样地基于来自电子笔1A的位置检测用信号来检测电子笔1A的指示位置,并且检测电子笔1A的高度位置、倾斜。并且,平板终端2A的位置检测装置部20A利用来自电子笔1A的附加信息来检测笔压信息、笔ID及简易脑波数据。
并且,平板终端2A的位置检测装置部20A的处理控制部220A生成由电子笔1A的指示位置的信息、笔压信息、倾斜的信息及高度位置构成的笔状态信息,并且将该笔状态信息与简易脑波数据建立对应,并且将笔ID建立对应并向控制器23发送。控制器23对将从处理控制部220A接收到的笔状态信息、简易脑波数据及笔ID建立对应后的信息进一步附加来自时钟部231的时间信息作为时间戳信息,通过无线通信部232并通过通信网络7而而向感情服务器装置8发送。
需要说明的是,平板终端2A的位置检测装置部20A处的电子笔1A的指示位置的检测动作、附加信息的检测动作以及倾斜、高度位置等笔状态信息的检测动作与第一实施方式的平板终端2的位置检测装置部20完全同样。
并且,在该第二例中,感情服务器装置8通过对从平板终端2A接收到的信息与从第一例中的建立对应处理部4接收到的信息同样地进行处理,来构建如前所述的感情推定用数据库87。
如以上这样,根据该第二例,由于不需要建立对应处理部4,所以具有数据库构建系统的结构变得简单这一效果。
需要说明的是,也可以不是由电子笔1A而是由平板终端2A来接收从简易脑波计5A以无线方式发送来的简易脑波数据。
[数据库的构建系统的第三例]
以下说明的数据库的构建系统的第三例也是能够与第二例同样地省略第一例的建立对应处理部4的例子。并且,在该例中,电子笔的使用者的感情状态不是通过脑波数据,而是通过使用专利文献2的技术测定使用者的脑波以外的生物信息(例如脉搏、血流等)来推定。
图11是用于说明该数据库的构建系统的第三例的概要的图。在该第三例中,使用者3把持与第一例同样的电子笔1。并且,在该第三例中,使用者3将例如专利文献2所公开那样的检测脉搏、血流等的生物信息检测装置5B装配于腕部3B等。该生物信息检测装置5B以能够将从使用者3检测出的脉搏、血流等生物信息的检测数据以无线方式发送的方式具备近距离无线通信标准(例如蓝牙(注册商标)标准)的无线通信部5TB。
并且,该第三例的平板终端2B以能够接收从生物信息检测装置5B以无线方式发送来的生物信息的检测数据的方式具备蓝牙(注册商标)标准的无线通信部233。并且,平板终端2B将从生物信息检测装置5B接收到的生物信息的检测数据和基于来自电子笔1的信号而如前述那样取得的笔状态信息与从电子笔1取得的笔ID建立对应,通过通信网络7而向感情服务器装置8发送。
[电子笔1B和平板终端2B的位置检测装置部20B的电子电路结构例]
图12是示出该第三例中的电子笔1的等效电路和平板终端2B的位置检测装置部20B的电路结构例的图。在该图12中,对于与图2所示的第一例相同的部分,标注有同一附图标记。
如图12所示,电子笔1具有与图2所示的电路结构同样的电路结构,进行同样的动作。平板终端2B的与电子笔1合作的部分的结构及动作也是同样的,控制器23B的结构与图2的例的控制器23不同。
即,平板终端2B的位置检测装置部20B的控制器23B具备与生物信息检测装置5B所具备的无线通信部5TB进行通信的无线通信部233。并且,平板终端2B在控制器23处将与来自处理控制部220B的笔ID建立了对应的笔状态信息与由无线通信部233接收到的生物信息的检测数据建立对应,并且附加来自时钟部231的时间信息,从无线通信部232通过通信网络7而向感情服务器装置8发送。
在该第三例中,平板终端2B的位置检测装置部20B处的电子笔1的指示位置的检测动作、附加信息的检测动作以及倾斜、高度位置等笔状态信息的检测动作与第一实施方式的平板终端2的位置检测装置部20完全同样。
根据该第三例,由于不需要建立对应处理部4,所以具有数据库构建系统的结构变得简单这一效果,并且由于与生物信息检测装置5B的无线通信部设置于平板终端2B,所以具有电子笔1的结构变得简单这一效果。
需要说明的是,在上述的例子中,作为用于判断人的感情状态的生物信息,使用了脑波数据、简易脑波数据、脉搏、血流等,但不限于此。例如,也可以将眨眼、视线的移动、微振动等单独地或者与上述的生物信息等其他生物信息并用来判断人的感情状态。
另外,在上述的第一例中,将脑波数据直接从建立对应处理部4向感情服务器装置8发送,在第二例中,将简易脑波数据通过平板终端2A而直接向服务器装置8发送,而且,在第三例中,将脉搏、血流的生物信息通过平板终端2A而直接向服务器装置8发送,由感情服务器装置8的感情状态判断部84进行了使用者的感情状态的解析。在该情况下,向感情服务器装置8传送的数据量变大,发送速度有时会变慢。
为了避免该状况,也可以由建立对应处理部4或平板终端2A或平板终端2B来进行脑波数据的感情状态的解析即感情状态判断部84的功能处理。而且,也可以在简易脑波计5A或生物信息检测装置5B的内部进行。在该情况下,在建立对应处理部4、平板终端2A、平板终端2B、简易脑波计5A或生物信息检测装置5B中,能够对判断出的各感情状态赋予感情状态识别信息。例如,对“放松状态”赋予感情状态识别信息S1,对“集中状态”赋予感情状态识别信息S2,对“焦躁状态”赋予感情状态识别信息S3,对“注意力散漫状态”赋予感情状态识别信息S4,对“发怒状态”赋予感情状态识别信息S5。并且,作为向感情服务器装置8发送时的信息,可以设为将感情状态识别信息与笔状态信息建立对应后的信息。
例如,如图4所示,在感情状态为“放松状态”的放松期间,作为笔状态信息的指示位置的信息Crd1、笔压信息Pr1、笔ID=ID1、倾斜信息SL1(图示省略)、高度信息H1(图示省略)及感情状态“放松状态”的感情状态识别信息S1作为一个集合的信息而向服务器装置8发送。由此,能够缩短发送时间。在感情服务器装置8中,能够将各感情状态的感情状态识别信息S1、S2、S3、S4或S5与笔状态信息建立对应并蓄积于感情推定用数据库87。
[感情推定系统的实施方式]
图13是用于说明使用由以上说明的数据库的构建系统构建出的感情推定用数据库87来说明推定电子笔的使用者的感情状态的系统的概要的图。
在该例的感情推定系统中,使用者31、…、3n(n是1以上的整数)分别拿着自己用的电子笔11、…、1n,使用其在平板终端2D1、…、2Dn中分别进行文字输入或其他输入。
在该例中,电子笔11、…、1n分别使用具有与上述的电子笔1同样的结构的电子笔,具备作为位置检测用信号的附加信息而将笔ID和笔压信息向平板终端2D1、…、2Dn分别发送的结构。在该例中,由各电子笔11、…、1n与各平板终端2D1、…、2Dn的对来构成各坐标输入处理装置。
各平板终端2D1、…、2Dn具有与上述的平板终端2同样地具备位置检测装置部的结构,但控制器的结构不同,并且例如具备由LCD(Liquid Crystal Display;液晶显示器)构成的显示部241、…、24n这一点不同。显示部241、…、24n的显示画面与平板终端2D1、…、2Dn各自的位置检测装置部的传感器部重叠地配置,使用者31、…、3n构成为能够在显示画面上进行电子笔11、…、1n的指示输入。即,在该例中,平板终端2D1、…、2Dn分别具备位置检测装置部,并且具备具备信息处理装置部的电子设备的结构。
需要说明的是,平板终端2D1、…、2Dn分别也可以是数据库的构建系统中的具备与平板终端同样的结构的位置检测装置部的部分和具备信息处理装置部的部分分体或成为了独立的装置,被有线连接或无线连接。
并且,平板终端2D1、…、2Dn各自的控制器与个人计算机同样地具备生成在显示部241、…、24n的显示画面上显示的显示图像的显示控制部的功能。即,当使用者31、…、3n分别利用电子笔11、…、1n进行指示输入后,平板终端2D1、…、2Dn各自的控制器在显示部241、…、24n的显示画面上显示与该指示输入对应的显示图像。
并且,在该例中,平板终端2D1、…、2Dn各自的控制器当接受了电子笔11、…、1n的指示输入时,生成包括从各电子笔取得的笔ID和笔状态信息的感情状态推定要求,通过通信网络7D而向感情服务器装置8D发送。感情服务器装置8D构成感情推定装置。
感情服务器装置8D具备如前述那样构建出的感情推定用数据库87,并且如后述的图15所示,具备感情状态推定部89及提供信息生成部90。感情状态推定部89在通过通信网络7D而接收到感情状态推定要求时,将该感情状态推定要求中包含的笔ID及笔状态信息作为参照信息来检索感情推定用数据库87,推定对应的感情状态。并且,提供信息生成部90对发送来感情状态推定要求的对方通知根据需要而推定出的感情状态,并且生成与推定出的感情状态对应的提供信息并发回。
通信网络7D能够与前述的通信网络7同样地由包括包含互联网、便携电话网的公众网的网络构成。另外,通信网络7D也可以是使用Wi-Fi(注册商标)(Wireless Fidelity)的无线LAN。另外,通信网络7D也可以是将感情服务器装置8与建立对应处理部4之间以有线方式连接的LAN的结构。
[坐标输入处理装置的结构例]
图14示出该实施方式的坐标输入处理装置的电子电路例,是相当于各电子笔11、…、1n与各平板终端2D1、…、2Dn的对中的一个对的部分。电子笔11、…、1n分别具有相同的结构,另外,平板终端2D1、…、2Dn分别具有相同的结构,因此,在图14中,将电子笔11和平板终端2D1作为代表而示出。
如图14所示,电子笔11具备与上述的电子笔1同样的结构。并且,平板终端2D1的位置检测装置部20D1除了显示部241和控制器23D1的部分之外,具备与上述的平板终端2的位置检测装置部20同样的结构。
控制器23D1具备感情状态推定要求生成部234、无线通信部235及显示控制部236。感情状态推定要求生成部234在检测出使用者31使用电子笔11向平板终端2D1进行了指示输入时,生成包括从处理控制部220接收到的笔ID和笔状态信息的感情状态推定要求,通过无线通信部235并通过通信网络7D而向感情服务器装置8D发送。
显示控制部236基于来自处理控制部220的电子笔11的指示位置的信息来进行关于在显示部241的显示画面上显示的显示图像的显示控制处理,并且在通过无线通信部235而从感情服务器装置8D接收到与感情状态推定要求对应地发回来的提供信息时,根据该提供信息而进行关于在显示部241的显示画面上显示的显示图像的显示控制处理。
[感情服务器装置8D的结构例]
图15是示出感情服务器装置8D的硬件结构例的框图。该图15的例子的感情服务器装置8D是将在具备上述的数据库的构建系统中构建出的感情推定用数据库87的感情服务器装置8直接也用作感情推定装置的情况。即,通过对控制部81D通过系统总线80而连接无线通信部82、信息取得部83、感情状态判断部84、笔状态信息范围算出部85、建立对应保存处理部86及感情推定用数据库87并且连接感情状态推定要求接收部88、感情状态推定部89及提供信息生成部90而构成。
即,如前所述,对控制部81D通过系统总线80而连接无线通信部82、信息取得部83、感情状态判断部84、笔状态信息范围算出部85、建立对应保存处理部86及感情推定用数据库87的部分是与数据库的构建系统对应的结构部分,对控制部81D通过系统总线80而连接无线通信部82、感情推定用数据库87、感情状态推定要求接收部88、感情状态推定部89及提供信息生成部90的部分是与感情推定系统对应的感情推定装置的结构部分。
需要说明的是,由于与数据库的构建系统对应的结构部分如上所述,所以在以下的说明中,对与感情推定系统对应的感情推定装置的结构部分进行说明。
在感情服务器装置8D中,无线通信部82将接收到的感情状态推定要求向感情状态推定要求接收部88传送。感情状态推定要求接收部88将接收到的感情状态推定要求中包含的笔ID及笔状态信息提取出,并向感情状态推定部89传递。感情状态推定部89利用接收到的笔ID及笔状态信息来检索感情推定用数据库87,推定对应的感情状态,并将其推定结果的感情状态向提供信息生成部90传递。
提供信息生成部90生成与接收到的推定结果的感情状态对应的提供信息,并通过无线通信部82而向进行了感情状态推定要求的对方发送。在提供信息中,包含通知推定出的感情状态的信息,或者包含与推定出的感情状态对应的显示信息。
需要说明的是,感情状态推定要求接收部88和感情状态推定部89及提供信息生成部90的处理也可以由控制部81D作为按照存储于内置的存储器的程序来进行处理的软件功能来构成。
[平板终端2D1、…、2Dn各自的感情状态推定要求处理的流程]
参照图16的流程图来说明平板终端2D1、…、2Dn各自的感情状态推定要求处理的流程的例子。需要说明的是,在此,设为平板终端2D1的控制器23D1进行感情状态推定要求的情况来进行说明。
即,控制器23D1监视来自处理控制部220的信息,判别是否检测到电子笔11的指示输入(步骤S201)。在该步骤S201中判别为未检测到电子笔11的指示输入时,控制器23D1进行其他处理(步骤S202),在该处理结束后,使处理返回步骤S201。
在步骤S201中判别为检测到电子笔11的指示输入时,控制器23D1从处理控制部220取得包括电子笔11的指示位置的信息、笔压、笔ID、倾斜、高度位置及悬停状态的位置的笔状态信息(步骤S203)。
然后,控制器23D1生成包括取得的笔状态信息和笔ID的感情状态推定要求,并向感情服务器装置8D发送(步骤S204)。对于该感情状态推定要求,会从感情服务器装置8D发送来提供信息,因此控制器23D1等待该提供信息的接收(步骤S205)。
然后,在步骤S205中确认了来自感情服务器装置8D的提供信息的接收时,控制器23D1进行基于接收到的提供信息的处理,在该例中是显示处理(步骤S206)。
[感情服务器装置8D中的感情状态推定处理的流程]
参照图17的流程图来说明感情服务器装置8D中的感情状态推定处理的流程的例子。需要说明的是,在此,设为感情服务器装置8D的控制部81D将感情状态推定要求接收部88、感情状态推定部89及提供信息生成部90的处理构成为软件处理功能的情况来进行说明。
首先,控制部81D判别是否接收到感情状态推定要求(步骤S301),在判别为未接收到时,进行其他处理(步骤S302),在结束该其他处理后,使处理返回步骤S301。
并且,在步骤S301中判别为接收到感情状态推定要求时,控制部81D将该感情状态推定要求中包含的笔ID和笔状态信息作为参照信息来检索感情推定用数据库87(步骤S303)。
接着,控制部81D判别在感情推定用数据库87中是否保存有与感情状态推定要求中包含的笔ID对应的信息(步骤S304)。在该步骤S304中判别为在感情推定用数据库87中保存有与感情状态推定要求中包含的笔ID对应的信息时,控制部81D关于与该笔ID对应的信息探索笔状态信息所符合的感情状态,将符合的感情状态推定为进行了感情状态推定要求的使用者的感情状态(步骤S305)。然后,生成与推定出的感情状态对应的提供信息,并向进行了感情状态推定要求的对方发送(步骤S307)。
另外,在步骤S304中判别为在感情推定用数据库87中未保存与感情状态推定要求中包含的笔ID对应的信息时,控制部81D关于保存于感情推定用数据库87的通用的对应信息,探索笔状态信息所符合的感情状态,将符合的感情状态推定为进行了感情状态推定要求的使用者的感情状态(步骤S306)。然后,生成与推定出的感情状态对应的提供信息,向进行了感情状态推定要求的对方发送(步骤S307)。
以上,感情服务器装置8D中的感情推定处理结束。
[平板终端中的与推定出的感情状态对应的显示处理]
例如,设想如下情况:使用者31、…、3n是使用在平板终端2D1、…、2Dn各自的显示画面上显示的学习教材,利用电子笔11、…、1n进行用于学习的输入的学生。
在该情况下,在由感情服务器装置8D推定出的感情状态例如是“集中状态”的情况下,感情服务器装置8D作为提供信息而如图18(A)所示那样提供“集中良好。请继续努力”等文字信息。另外,在由感情服务器装置8D推定出的感情状态例如是“注意力散漫状态”或“焦躁状态”的情况下,感情服务器装置8D作为提供信息而如图18(B)所示那样“请集中!加油!”等文字信息。由此,能够进行与学生的感情状态对应的叱责激励,能够期待学生的学习效果的提高。
作为另一例,通过对电子笔的使用者不是实时地显示感情状态,而是记录从电子笔得到的笔状态信息,能够之后得知使用电子笔时的使用者的感情状态。例如,若在发送对于亲属的手写消息时也一并添附笔状态信息,则打开了消息的亲属能够与手写消息一起也接受写下消息时的发送方的感情(感谢等)。即,能够除了手写的文字之外也发送感情。在手写消息中包含感谢的卡片、遗书等。
而且,由于能够根据笔状态信息来推定使用者的感情状态,所以例如能够使用根据向合同的署名栏记入时的记入者的笔状态信息推定出的感情状态来判定合同等的真伪。
需要说明的是,在上述的实施方式的说明中,分别说明了数据库的构建系统和感情推定系统。但是,如前所述,感情服务器装置8D如图15所示那样具备能够与两系统对应的结构。因此,感情服务器装置8D能够设为包括上述的数据库的构建系统和感情推定系统的一个系统用,感情服务器装置8D在该一个系统中切换执行数据库的构建系统用的动作和感情推定系统用的动作这双方的动作。
具体而言,感情服务器装置8D在判断为从建立对应处理部4、平板终端2A或平板终端2B发送来的信息中包含脑波数据、简易脑波数据、脉搏、血流等生物信息或感情状态识别信息S1~S5的情况下,作为数据库构建系统进行动作。
另一方面,在从建立对应处理部4、平板终端2A或平板终端2B向感情服务器装置8D发送来的信号中不包含脑波数据、简易脑波数据、脉搏、血流等生物信息或感情状态识别信息S1~S5的情况下,感情服务器装置8D作为感情推定系统进行动作,基于笔状态信息来进行感情推定,并对使用者将感情状态作为信息而提供等处理。
需要说明的是,也可以在从建立对应处理部4、平板终端2A或平板终端2B向感情服务器装置8D发送的信号中包含区分是数据库构建系统用还是感情推定系统用的标志信息等。在该情况下,感情服务器装置8D无需检测在从平板终端2A或平板终端2B向感情服务器装置8D发送来的信号中是否包含脑波数据、简易脑波数据、脉搏、血流等生物信息或感情状态识别信息S1~S5,仅进行标志信息的检测并判断即可。
[上述的实施方式的变形例]
需要说明的是,笔状态信息不限于上述的例子。例如,也可以在握住电子笔的部分设置传感器,检测使用者握住笔的位置、握住笔的强度,并使用该检测结果的握住笔的位置、握住笔的强度。另外,也可以在握住笔的部分设置检测出汗的传感器(出汗计),将由该传感器检测的与心理状态对应的出汗程度用作笔状态信息。
需要说明的是,在上述的例子中,由建立对应处理部4或平板终端2A、2B通过通信网络7而向感情服务器装置8发送脑波数据、简易脑波数据或脉搏、血流等生物信息和笔状态信息,并建立关联而构建了数据库,但也可以在建立对应处理部4或平板终端2中包含感情服务器8。即,也可以在建立对应处理部4或平板终端2A、2B构建数据库。由此,能够与不通过通信网络相应地轻快地进行感情推定。
需要说明的是,在上述的实施方式的说明中,作为存储于感情推定用数据库的用于识别使用者的识别信息,使用了使用者设为自身用而使用的电子笔的笔ID,但若使用者设为自身用而专用平板终端,则作为用于识别使用者的识别信息,也可以取代笔ID而使用用于识别平板终端的识别信息(终端ID)。该平板终端的终端ID在平板终端构成坐标输入处理装置的情况下,也是用于识别坐标输入处理装置的识别信息即装置ID。
在这样的情况下,平板终端、坐标输入处理装置在存储部中存储自身的终端ID、装置ID。并且,在数据库构建系统中,将该存储的终端ID、装置ID与用于判断感情状态的生物信息、笔状态信息建立对应并向感情服务器装置发送,在感情推定用数据库中与判断结果的感情状态、笔状态信息的范围信息对应地保存。
另外,在感情推定系统的情况下,坐标输入处理装置将存储于平板终端的存储部的终端ID、自身的装置ID包含于感情状态推定要求并向感情服务器装置发送。
需要说明的是,坐标输入处理装置也可以设为由具备位置检测装置部的平板终端和具备显示部的计算机等所构成的信息处理装置构成的结构。在该情况下,装置ID可以设为信息处理装置的识别信息。
需要说明的是,在上述的实施方式中,电子笔和平板终端使用了电磁感应耦合方式的设备,但不限于此,即使是静电容量耦合方式的设备,当然也能够应用。笔压构成为利用容量可变电容器的静电容量来检测,但也可以是利用电感的变化来检测的结构。
[其他实施方式或变形例]
<关于从建立对应处理部4、平板终端2A或平板终端2B向感情服务器装置8或感情服务器装置8D发送来的信号的信号格式>
以下,参照图19来说明从建立对应处理部4、平板终端2A或平板终端2B向感情服务器装置8或感情服务器装置8D发送的信号的信号格式的几个例子。需要说明的是,在图19的说明中,设为平板终端TE具备建立对应处理部的功能的情况。
在图19的例子中,平板终端TE根据来自电子笔的位置检测用信号、附加信息,作为与电子笔相关的信息而检测由指示位置的坐标数据(X、Y)、笔压数据P、倾斜数据S及高度位置数据H构成的笔状态信息、笔ID。并且,从脑波计等向平板终端TE输入脑波数据等用于判断人的感情状态的生物信息E。需要说明的是,在该例中,笔ID为了针对电子笔的每个使用者将笔状态信息数据库化并求出与电子笔的每个使用者的感情状态的关系的情况而附加。在不是求出电子笔的每个使用者的笔状态信息与感情状态的关系而是通用性地求出全部的使用者的笔状态信息与感情状态的关系的例子的情况下,该笔ID也可以不包含于信号格式。
在图19(A)的例子中,平板终端TE将与电子笔相关的信息和用于判断感情状态的生物信息E作为独立的信号而通过通信网络7向感情服务器装置8发送。但是,在感情服务器装置8中,在时间上同时发送来的与电子笔相关的信息和用于判断感情状态的生物信息E作为关联的信息而互相建立关联并保持于存储器。在该情况下,如图19(A)所示,与电子笔相关的信息例如以按照指示位置的坐标数据(X、Y)、笔压数据P、倾斜数据S、高度位置数据H、时间(坐标输入的时刻)T、笔ID的顺序排列的信号格式的状态反复向感情服务器装置8发送。
接着,在图19(B)的例子中,平板终端TE将与电子笔相关的信息和用于判断感情状态的生物信息E包含于一个信号格式并反复向感情服务器装置8发送。如图19(B)所示,该情况下的信号格式例如被设为按照指示位置的坐标数据(X、Y)、笔压数据P、倾斜数据S、高度位置数据H、时间T、笔ID、生物信息E的顺序排列的信号格式,反复向感情服务器装置8发送。
接着,图19(C)的例子示出在前述的感情推定系统的实施方式的情况下从平板终端TE向感情服务器装置8D发送笔状态信息,从该感情服务器装置8D发回表示与来自平板终端TE的笔状态信息对应地推定出的感情状态的信息(表示放松、集中、焦躁、注意力散漫、发怒等的信息)ED的情况下的信号格式的例子。
在该情况下,从平板终端TE,作为信号格式,如图19(C)所示,与电子笔相关的信息例如按照指示位置的坐标数据(X、Y)、笔压数据P、倾斜数据S、高度位置数据H、时间T、笔ID的顺序排列之后,设置有表示感情状态的信息ED用的空余空间(空余区或空字段)。并且,在该图19(C)的例子中,该信号格式的信号反复通过通信网络7而向感情服务器装置8D发送。
需要说明的是,也可以取代设置表示感情状态的信息ED用的空余空间,在该空余空间中,作为表示全零等感情状态的信息ED而包含无含义的数据,或者,在表示感情状态的信息ED用的空余空间中,也可以包含意味着感情状态的推定要求的信息。需要说明的是,感情服务器装置8D即使在空余空间中未包含明确的感情状态的推定要求,在接收到存在表示感情状态的信息ED用的空余空间的信号格式的信号时,另外,在接收到在该空余空间中作为表示全零等感情状态的信息ED而包含无含义的数据的信号格式的信号时,也可以将它们判别为伴随着感情状态的推定要求的信号。
并且,在从感情服务器装置8D向平板终端TE的发回信息中,如图19(C)所示,表示根据笔状态信息推定出的感情状态的信息ED向是信号格式的空余空间的地方插入。由此,该发回信息成为笔状态信息和表示根据该笔状态信息推定出的感情状态的信息ED包含于一个信号格式的信息。也就是说,可知道该信号格式中包含的笔状态信息是在由表示感情状态的信息ED表示的感情状态下书写的。因此,通过采用如图19(C)所示的信号格式,具有如下效果:笔状态信息能够与表示在何种感情状态下书写的信息ED一起被传送或保持,能够用于多种多样的用途。
<感情推定系统的其他实施方式;使用人工智能的例子>
近年来,使用被称作人工智能(AI(Artificial Inteligence))的神经网络的大量数据的处理(机器学习)开始普及,采取导出大量的数据的规则性的方法。
作为神经网络的构造之一,存在机器学习。在机器学习中,存在有教师学习和无教师学习,但有教师学习是适用“问题→答案”的形式,以“学习输入与输出的关系”“根据输入来预测输出”为特征。
机器学习的有教师学习是如下方法:输入数据及与其对应的输出数据大量存在,在从输入数据到导出输出为止的路径中具有多个层(layer,特征提取层,隐藏层),针对各层(layer)将输入数据根据特征而分割及统合,而且进行权重赋予,一边进行反馈一边稍微改变权重,接近输出数据。慢慢使权重变化并进行再计算通过近年来的计算处理的高速化而实现,进行机器学习。
在该实施方式的感情推定系统的感情服务器装置中,关于蓄积于感情推定用数据库的信息,通过进行上述的机器学习,根据使用电子笔书写的人的笔状态信息来生成将该人的感情状态使用于推定的已学习数据。并且,感情服务器装置通过使用该已学习数据,能够根据使用电子笔书写的人的笔状态信息来推定此时的感情状态。
即,在该实施方式的感情服务器装置中,首先,在入手与利用电子笔进行了书写的人的笔迹相关的信息即笔状态信息(以下,称作笔迹数据)的各种特征量(坐标、压力、倾斜、高度等)时,利用用于推定感情状态的生物信息(例如来自脑波数据检测装置的脑波数据的波形)来推定感情,大量蓄积笔迹数据的各种特征量(坐标、压力、倾斜、高度等)与推定出的感情的关系信息并数据库化。在该情况下,各感情下的各笔迹数据的各种特征量(坐标、压力、倾斜、高度等)呈现出规定分布。因此,从数据库能够得到规定感情下的笔迹数据的各种特征量(坐标、压力、倾斜、高度等)的分布。于是,通过判别利用电子笔进行书写时的笔迹数据的各种特征量包含于哪个感情时的笔迹数据的对应的特征量的分布之中,能够推定利用电子笔进行了书写的人的书写时的感情。
在该实施方式中,利用新的方法的机器学习来分析大量的数据,如图20所示,将输入数据(笔迹数据的各种特征量)与输出数据(感情)之间的关系行列化(张量、已学习数据;参照图20的行列),由此能够从输入数据(笔迹数据的各种特征量)瞬时地导出输出数据(感情),构成为对处理的高速化起到大的贡献。并且,在该实施方式中,通过确立已学习数据,能够利用小规模的运算来从笔迹数据导出感情。
需要说明的是,在笔迹数据中存在各种特征量。具体而言,如上所述,存在由电子笔指示的位置的坐标(X、Y)、笔压、高度、倾斜、速度、它们的变化量(微分值)等,为了高效地进行机器学习,输入何种特征量能够引出最佳的感情是重要的。
从特定的感情相连而成的笔迹数据导出多个特征量。因而,也能够从由特定的一个特征量导出的已学习数据导出感情,但通过基于多个特征量分别学习到的已学习数据的相乘,能够实现精度更高的推定。
用于得到已学习数据的运算符由神经网络构成,具有作为输入部的输入层和作为输出部的输出层,其间存在多个层(特征提取层),为了将被分割为多个的输入数据与各层(特征提取层)的要素匹配,对各层的每个要素赋予了权重,构成将各层、各要素的权重行列化的权重行列(张量、已学习模型)。权重行列能够更新。
对机器学习的方法进行说明。
<前阶段>
(数据库的构建)
从平板终端作为笔迹数据的特征量而例如接收指示位置坐标(X、Y)、压力、高度、倾斜、时间的数据,从脑波计等接收基于脑波数据等分类后的感情状态的数据,将这些书写数据与感情状态的数据建立关联并蓄积于数据库。该情况下的感情状态的数据除了来自脑波计等的计测数据之外,也可以是从计测数据导出的分类后的感情的种类(例如“发怒”“喜悦”等)。
<第一阶段>
(学习用数据组的制作)
基于蓄积于数据库的笔迹数据,制作每个笔迹数据的学习用数据组。作为学习用数据组,存在笔状态信息的指示位置坐标(X、Y)、压力、高度、倾斜及根据这些值算出的变化量(微分值)、根据时间T和指示位置坐标(X、Y)算出的书写速度及其变化量等。
<第二阶段>
(已学习模型的制作1)
从制作出的学习用数据组中选择规定的笔迹数据,进一步选择规定的特征量,进行规定的分割,并设定于运算符的输入层。对于运算符的输出层,设定基于上述规定的笔迹数据的感情状态的种类。
例如,将规定的笔迹数据(“あ”)中的规定的特征量(“坐标X、Y”)确定为输入数据,按照上述进行规定的分割并设定于输入层。将对与上述规定的笔迹数据建立了关联的感情状态相同的输出层设定的感情状态作为“真”“命中”而设定。
<第三阶段>
(已学习模型的制作2)
运算符为了接近与输入数据即笔迹数据建立了关联的输出数据即感情状态而使各要素的权重变化。将权重作为权重行列(张量),每当使权重变化时进行更新。
<第四阶段>
(已学习模型的制作3)
输入大量的笔迹数据和感情状态的生物信息数据,制作出满足全部数据的最合适的权重行列(张量)。由此,各感情状态的笔迹数据的各特征量的已学习数据完成。
<第五阶段>
(已学习模型的活用)
在新产生的笔迹数据的特征量与感情推定要求一起从平板终端向感情服务器装置发送来时,在感情服务器装置中,基于如以上这样生成的笔迹数据的各特征量的已学习数据,推定与该新产生的笔迹数据的特征量存在的分布重叠的笔迹数据的特征量对应的感情状态。
即,例如,在如图19(C)所示的与信号格式的电子笔相关的笔迹数据向感情服务器装置供给时,在感情服务器装置中,通过使用如上述这样生成的笔迹数据的各特征量的已学习数据,能够根据该来到的笔迹数据的特征量推定对应的感情状态,生成表示图19(C)的发回信息的感情状态的信号ED,并向平板终端发回。
在该情况下,在感情服务器装置中,无需探查从平板终端TE来到的感情推定要求所涉及的笔迹数据的分布,能够针对笔迹数据的各特征量,使用已学习数据来得到作为输出数据的感情状态,能够通过小规模的运算来从笔迹数据导出感情状态。
当一旦生成在该实施方式的感情服务器装置中生成的笔迹数据的各特征量的已学习数据后,通过将该生成的已学习数据存储于例如平板终端或对来自平板终端的笔迹数据进行处理的个人计算机,即使在这些平板终端或个人计算机中,也能够使用存储的已学习数据来从笔迹数据推定感情状态。
需要说明的是,在上述的AI的例子的情况下,通过使笔状态信息与笔ID对应,也能够生成电子笔的各使用者的已学习数据,当然也能够生成不是各使用者的能够通用地使用的已学习数据。
标号说明
1、1A、1B…电子笔,2、2A、2B、2D…平板终端,4…建立对应处理部,5…脑波计,5A…简易脑波计,5B…生物信息检测装置,7、7D…通信网络,8、8D…感情服务器装置,87…感情推定用数据库,88…感情状态推定要求接收部,89…感情状态推定部,90…提供信息生成部,234…感情状态推定要求生成部。

Claims (26)

1.一种坐标输入处理装置,其特征在于,具备:
位置检测装置部,具备检测由电子笔指示的位置的传感器和取得与人把持的所述电子笔的状态相关的笔状态信息的单元;及
通信部,在感情状态推定要求中将与由所述电子笔指示的位置对应的坐标和所述笔状态信息向感情推定装置发送,该感情状态推定要求具有包括多个字段的格式,所述多个字段将与由所述电子笔指示的位置对应的坐标、所述笔状态信息和与把持所述电子笔的所述人的感情状态相关的信息分别进行了保存;并且在感情状态推定应答中从所述感情推定装置接收所述感情状态推定要求中包含的所述笔状态信息、与由所述电子笔指示的位置对应的坐标和与把持所述电子笔的所述人的感情状态相关的所述信息,该感情状态推定应答具有包括所述多个字段的所述格式,所述多个字段将与由所述电子笔指示的位置对应的坐标、所述笔状态信息和与把持所述电子笔的所述人的感情状态相关的所述信息分别进行了保存。
2.根据权利要求1所述的坐标输入处理装置,其特征在于,
所述位置检测装置部从所述电子笔取得所述电子笔的识别信息,
所述通信部将与由所述电子笔指示的位置对应的坐标、所述笔状态信息和所述电子笔的识别信息向所述感情推定装置发送,
所述感情状态推定要求的所述多个字段将与由所述电子笔指示的位置对应的坐标、所述笔状态信息、所述电子笔的识别信息和与把持所述电子笔的所述人的感情状态相关的所述信息分别进行了保存,及
所述感情状态推定应答的所述多个字段将与由所述电子笔指示的位置对应的坐标、所述笔状态信息、所述电子笔的识别信息和与把持所述电子笔的所述人的感情状态相关的所述信息分别进行了保存。
3.根据权利要求1所述的坐标输入处理装置,其特征在于,
具备存储本装置的识别信息的存储部,
所述通信部将与由所述电子笔指示的位置对应的坐标、由所述位置检测装置部取得的所述笔状态信息和从所述存储部读出的所述本装置的识别信息向所述感情推定装置发送。
4.根据权利要求1所述的坐标输入处理装置,其特征在于,
具备具有显示画面的显示单元,及
处理器,使从所述感情推定装置接收到的与所述感情状态相关的所述信息向显示画面的图像反映。
5.根据权利要求1所述的坐标输入处理装置,其特征在于,
所述笔状态信息包括与向电子笔施加的笔压、电子笔相对于指示输入面的倾斜、电子笔自指示输入面起的高度、在指示输入面上检测的电子笔的移动、电子笔的指示输入时的移动速度相关的信息。
6.根据权利要求1所述的坐标输入处理装置,其特征在于,
所述位置检测装置部和所述通信部包括在信息处理装置中。
7.根据权利要求1所述的坐标输入处理装置,其特征在于,
所述位置检测装置部和具备所述通信部的信息处理装置被设为分体,通过有线或无线而连接。
8.一种感情推定装置,其特征在于,具备:
通信部,在感情状态推定要求中接收与由电子笔指示的位置对应的坐标和由位置检测装置部取得的笔状态信息,该感情状态推定要求具有包括多个字段的格式,所述多个字段将与由所述电子笔指示的位置对应的坐标、所述笔状态信息和与把持所述电子笔的人的感情状态相关的信息分别进行了保存;
感情推定用信息保存部,将与把持所述电子笔的所述人的感情状态相关的信息和与在所述感情状态时与所述人把持的所述电子笔的状态相关的所述笔状态信息以及与由所述电子笔指示的位置对应的坐标可取的值的范围相关的范围信息建立对应并进行了保存;及
处理部,在从坐标输入处理装置接收到所述感情状态推定要求时,通过参照所述感情推定用信息保存部,来推定把持发送来所述感情状态推定要求的电子笔的所述人的感情状态,并且生成感情状态推定应答,该感情状态推定应答包括与推定出的把持所述电子笔的所述人的感情状态相关的信息,该感情状态推定应答具有包括所述多个字段的所述格式,所述多个字段将与由所述电子笔指示的位置对应的坐标、所述笔状态信息和与把持所述电子笔的所述人的感情状态相关的所述信息分别进行了保存。
9.根据权利要求8所述的感情推定装置,其特征在于,
所述处理部将推定出的所述感情状态向进行了所述感情状态推定要求的对方通知。
10.根据权利要求8所述的感情推定装置,其特征在于,
在所述感情推定用信息保存部中,与所述感情状态相关的所述信息和与在该感情状态时与进行指示输入的人把持的电子笔的状态相关的笔状态信息以及与由所述电子笔指示的位置对应的坐标可取的值的范围相关的范围信息被与用于识别呈现所述感情状态的人的识别信息建立对应并进行了保存,其中与由所述电子笔指示的位置对应的坐标可取的范围信息包括在检测由电子笔指示的位置的传感器与所述电子笔接触时与由所述电子笔指示的位置对应的坐标的第一范围和在所述传感器与所述电子笔不接触时与由所述电子笔指示的位置对应的坐标的第二范围;及
所述处理部在接收到包括与电子笔的状态相关的笔状态信息和用于识别呈现所述感情状态的人的所述识别信息的所述感情状态推定要求时,参照在所述感情推定用信息保存部中被与用于识别呈现所述感情状态的人的所述识别信息建立对应并进行了保存的信息。
11.根据权利要求10所述的感情推定装置,其特征在于,
所述识别信息是所述人把持的电子笔的识别信息。
12.根据权利要求10所述的感情推定装置,其特征在于,
所述识别信息是具备检测所述人把持的电子笔的指示输入的位置检测装置部的电子设备的识别信息。
13.根据权利要求9所述的感情推定装置,其特征在于,
所述笔状态信息包括笔压数据、倾斜数据、高度位置数据、时间数据和笔识别数据,及
所述多个字段将与由所述电子笔指示的位置对应的坐标、所述笔压数据、所述倾斜数据、所述高度位置数据、所述时间数据和所述笔识别数据分别进行了保存。
14.一种感情推定系统,包含坐标输入处理装置和感情推定装置,所述坐标输入处理装置具备:电子笔;及位置检测装置部,具备检测由所述电子笔指示的位置的传感器及取得与人把持的所述电子笔的状态相关的笔状态信息的单元,所述感情推定装置与所述坐标输入处理装置通过通信网络而连接,
其特征在于,
所述坐标输入处理装置具备:
通信部,接收与由所述电子笔指示的位置对应的坐标和所述笔状态信息,并且在感情状态推定要求中将与由所述电子笔指示的位置对应的坐标和所述笔状态信息向所述感情推定装置发送,该感情状态推定要求具有包括多个字段的格式,所述多个字段将与由所述电子笔指示的位置对应的坐标、所述笔状态信息和与把持所述电子笔的人的感情状态相关的信息分别进行了保存;
所述感情推定装置具备:
接收部,以包括所述多个字段的所述格式接收与由所述电子笔指示的位置对应的坐标和所述笔状态信息,所述多个字段将与由所述电子笔指示的位置对应的坐标、由所述位置检测装置部取得的所述笔状态信息和与把持所述电子笔的人的感情状态相关的信息分别进行了保存;
感情推定用信息保存部,将与把持所述电子笔的人的感情状态相关的信息与在所述感情状态时与所述人把持的电子笔的状态相关的笔状态信息以及与由所述电子笔指示的位置对应的坐标可取的值的范围相关的范围信息建立对应并进行了保存;
处理部,在接收到感情状态推定要求时,通过参照所述感情推定用信息保存部,来推定发送来所述感情状态推定要求的电子笔的人的感情状态,并且生成感情状态推定应答,该感情状态推定应答以包括所述多个字段的所述格式包括与由所述电子笔指示的位置对应的坐标、由所述位置检测装置部取得的所述笔状态信息和与推定出的感情状态相关的信息,所述多个字段将与由所述电子笔指示的位置对应的坐标、由所述位置检测装置部取得的所述笔状态信息和与把持所述电子笔的所述人的感情状态相关的所述信息分别进行了保存。
15.根据权利要求14所述的感情推定系统,其特征在于,
所述笔状态信息包括笔压数据、倾斜数据、高度位置数据、时间数据和笔识别数据,及
所述多个字段将与由所述电子笔指示的位置对应的坐标、所述笔压数据、所述倾斜数据、所述高度位置数据、所述时间数据和所述笔识别数据分别进行了保存。
16.一种感情推定用信息保存部的构建装置,其特征在于,具备:
至少一个处理部;及
至少一个存储部,存储有计算机可读指令,在被所述至少一个处理部执行时,所述计算机可读指令使所述构建装置:
取得与利用电子笔进行指示输入的人相关的生物信息;
取得与取得的所述生物信息建立了对应的与进行所述指示输入的人把持的电子笔的状态相关的笔状态信息;
根据由所述生物信息来判断把持所述电子笔的人的感情状态;
根据取得的所述笔状态信息来求出在所述感情状态时与所述笔状态信息以及与由所述电子笔指示的位置对应的坐标可取的值的范围相关的范围信息,其中所述范围信息包括在传感器与所述电子笔接触时与由所述电子笔指示的多个位置对应的坐标的第一范围和在所述传感器与所述电子笔不接触时与由所述电子笔指示的多个位置对应的坐标的第二范围;
将与所述感情状态相关的所述信息和与所述笔状态信息以及与由所述电子笔指示的位置对应的坐标可取的值的范围相关的范围信息建立对应并保存于所述感情推定用信息保存部;
接收感情状态推定要求;及
生成包括与所述感情状态相关的所述信息的感情状态推定应答。
17.根据权利要求16所述的感情推定用信息保存部的构建装置,其特征在于,在被所述至少一个处理部执行时,所述计算机可读指令使所述构建装置:
将用于识别呈现所述感情状态的人的识别信息与所述笔状态信息建立对应并取得,
将与所述感情状态相关的信息、与所述笔状态信息存在的范围相关的范围信息及所述电子笔的识别信息建立对应并保存于所述感情推定用信息保存部。
18.根据权利要求17所述的感情推定用信息保存部的构建装置,其特征在于,
所述识别信息是所述人把持的电子笔的识别信息。
19.根据权利要求17所述的感情推定用信息保存部的构建装置,其特征在于,
所述识别信息是具备检测所述人把持的电子笔的指示输入的位置检测装置部的电子设备的识别信息。
20.根据权利要求16所述的感情推定用信息保存部的构建装置,其特征在于,在被所述至少一个处理部执行时,所述计算机可读指令使所述构建装置:
取得与所述电子笔在传感器面上方的高度对应的值的范围相关的范围信息;及
将与所述电子笔在传感器面上方的高度对应的值的范围相关的信息、与所述感情状态相关的所述信息及所述范围信息建立对应并保存。
21.根据权利要求19所述的感情推定用信息保存部的构建装置,其特征在于,
所述电子笔具备通过无线通信来接收所述生物信息的接收部,所述电子笔进一步将由所述接收部接收的所述生物信息向所述位置检测装置部供给,
所述电子笔在添加到由所述电子笔发送的位置检测信号的信息中包括所述生物信息;及
在被所述至少一个处理部执行时,所述计算机可读指令使所述构建装置从由所述位置检测装置部发送的所述位置检测信号取得所述生物信息和所述笔状态信息。
22.一种感情推定系统,包含坐标输入处理装置和感情推定装置,
所述坐标输入处理装置具备:电子笔;传感器,检测由所述电子笔指示的位置;取得与人把持的所述电子笔的状态相关的笔状态信息的单元;及通信部,在感情状态推定要求中将与由所述电子笔指示的位置对应的坐标和所述笔状态信息发送,该感情状态推定要求具有包括多个字段的格式,所述多个字段将与由所述电子笔指示的位置对应的坐标、所述笔状态信息和与把持所述电子笔的所述人的感情状态相关的信息分别进行了保存,
所述感情推定装置具有:至少一个处理部;及至少一个存储部,存储有计算机可读指令,在被所述至少一个处理部执行时,所述计算机可读指令使所述感情推定装置:从由所述坐标输入处理装置发送的所述感情状态推定要求取得与由所述电子笔指示的位置对应的坐标和所述笔状态信息,并取得生物信息;及感情推定用信息保存部,将与把持电子笔的人的感情状态相关的信息和与所述笔状态信息以及与由所述电子笔指示的位置对应的坐标可取的值的范围相关的范围信息建立对应并进行了保存,
其特征在于,
所述坐标输入处理装置的通信部:
接收所述生物信息或根据生物信息判断出的感情状态,并且,
将感情状态推定要求向所述感情推定装置发送,所述感情状态推定要求包括由所述坐标输入处理装置取得的所述笔状态信息以及与由所述电子笔指示的位置对应的坐标,并且
所述至少一个存储部存储有计算机可读指令,在被所述至少一个处理部执行时,所述计算机可读指令使所述感情推定装置:
在从所述坐标输入处理装置接收到数据构建要求的情况下,将与把持电子笔的人的感情状态相关的信息和在所述感情状态时与所述人把持的电子笔的状态相关的笔状态信息可取的值的范围相关的范围信息建立对应并保存于所述感情推定用信息保存部,
在从所述坐标输入处理装置接收到所述感情状态推定要求的情况下,通过利用所述接收到的所述笔状态信息参照所述感情推定用信息保存部,来推定发送来所述感情状态推定要求的电子笔的人的感情状态,并生成包括与由所述电子笔指示的位置对应的坐标、所述笔状态信息和与所述感情状态相关的信息的感情状态推定应答,向进行了所述感情状态推定要求的所述坐标输入处理装置发回所生成的信息,该感情状态推定应答具有包括所述多个字段的所述格式,所述多个字段将与由所述电子笔指示的位置对应的坐标、所述笔状态信息和与把持所述电子笔的所述人的感情状态相关的所述信息分别进行了保存。
23.根据权利要求22所述的感情推定系统,其特征在于,
所述笔状态信息包括坐标数据、笔压数据、倾斜数据、高度位置数据、时间数据和笔识别数据,及
所述多个字段将所述坐标数据、所述笔压数据、所述倾斜数据、所述高度位置数据、所述时间数据、所述笔识别数据和所述生物信息分别进行了保存。
24.一种感情推定装置,其特征在于,具备:
通信部,在感情状态推定要求中接收与由电子笔指示的位置对应的坐标和由位置检测装置部取得的笔状态信息,该感情状态推定要求具有包括多个字段的格式,所述多个字段将与由所述电子笔指示的位置对应的坐标、所述笔状态信息和与把持所述电子笔的人的感情状态相关的信息分别进行了保存;
至少一个处理器;及
至少一个存储部,存储有计算机可读指令,在被所述至少一个处理部执行时,所述计算机可读指令使所述感情推定装置:
将与把持电子笔的人的感情状态相关的信息和在所述感情状态时与所述人把持的电子笔的状态相关的笔状态信息建立对应并保存;
使用由所述位置检测装置部取得的所述笔状态信息和由把持所述电子笔的人装配的生物信息检测装置检测的生物信息,进行机器学习,从而生成已学习数据;
在接收到包括与所述电子笔相关的所述笔状态信息的感情状态推定要求时,使用所述已学习数据,根据所述接收到的所述笔状态信息来推定发送来所述要求信息的电子笔的人的感情状态;及
生成感情状态推定应答,包括与由所述电子笔指示的位置对应的坐标、所述笔状态信息和与把持所述电子笔的人的感情状态相关的信息,该感情状态推定应答具有包括所述多个字段的所述格式,所述多个字段将与由所述电子笔指示的位置对应的坐标、所述笔状态信息和与把持所述电子笔的所述人的感情状态相关的所述信息分别进行了保存。
25.根据权利要求24所述的感情推定装置,其特征在于,
所述笔状态信息包含多个特征量,
所述已学习数据针对所述笔状态信息的所述多个特征量而分别生成。
26.根据权利要求24所述的感情推定装置,其特征在于,
所述笔状态信息包括坐标数据、笔压数据、倾斜数据、高度位置数据、时间数据和笔识别数据,及
所述多个字段将所述坐标数据、所述笔压数据、所述倾斜数据、所述高度位置数据、所述时间数据、所述笔识别数据和所述生物信息分别进行了保存。
CN201780050733.8A 2016-09-01 2017-08-08 坐标输入处理装置、感情推定装置、系统及构建装置 Active CN109643160B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2016170574 2016-09-01
JP2016-170574 2016-09-01
JP2016249336 2016-12-22
JP2016-249336 2016-12-22
PCT/JP2017/028676 WO2018043061A1 (ja) 2016-09-01 2017-08-08 座標入力処理装置、感情推定装置、感情推定システム及び感情推定用データベースの構築装置

Publications (2)

Publication Number Publication Date
CN109643160A CN109643160A (zh) 2019-04-16
CN109643160B true CN109643160B (zh) 2023-03-17

Family

ID=61300612

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780050733.8A Active CN109643160B (zh) 2016-09-01 2017-08-08 坐标输入处理装置、感情推定装置、系统及构建装置

Country Status (6)

Country Link
US (2) US11237647B2 (zh)
EP (1) EP3508948B1 (zh)
JP (4) JP6499811B2 (zh)
CN (1) CN109643160B (zh)
TW (1) TWI764906B (zh)
WO (1) WO2018043061A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI764906B (zh) * 2016-09-01 2022-05-21 日商和冠股份有限公司 座標輸入處理裝置、情感推定裝置、情感推定系統及情感推定用資料庫之構築裝置
JP2019162207A (ja) * 2018-03-19 2019-09-26 富士ゼロックス株式会社 情報処理装置及び情報処理プログラム
JP6627059B1 (ja) * 2019-03-08 2020-01-08 株式会社ファーストアセント コンテンツ提供システム
WO2020196636A1 (ja) * 2019-03-26 2020-10-01 株式会社ワコム 家の記憶装置
JP7168768B2 (ja) * 2019-04-08 2022-11-09 株式会社ワコム デジタルインクを管理するホームuiシステム
JP7014757B2 (ja) 2019-09-03 2022-02-01 株式会社ワコム ペンの位置を導出し、導出したペンの位置を示すレポートをホストコンピュータに対して送信するデバイスにより実行される方法及びタッチコントローラ。
WO2022149443A1 (ja) 2021-01-05 2022-07-14 株式会社ワコム ペンデータ蓄積装置
CN116963667A (zh) * 2021-03-15 2023-10-27 三菱电机株式会社 情绪推测装置以及情绪推测方法
CN113610186A (zh) * 2021-08-20 2021-11-05 湖州师范学院 一种数字化书写识别情绪状态的方法
CN118843850A (zh) * 2022-06-10 2024-10-25 株式会社和冠 位置检测装置、电磁感应笔及位置检测系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6855112B2 (en) * 2000-07-14 2005-02-15 The University Of Hong Kong Method of and system for health treatment
GB2413425A (en) * 2004-04-23 2005-10-26 Hewlett Packard Development Co Biometric analysis method
CN101686815A (zh) * 2007-06-27 2010-03-31 松下电器产业株式会社 人的状态推定装置以及方法
CN103926997A (zh) * 2013-01-11 2014-07-16 北京三星通信技术研究有限公司 一种基于用户的输入确定情绪信息的方法和终端

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001350904A (ja) * 2000-06-07 2001-12-21 Canon Inc 電子機器及び営業用電子機器システム
JP3914421B2 (ja) 2000-12-13 2007-05-16 株式会社ワコム ペン型座標指示器
JP2002230485A (ja) * 2001-02-01 2002-08-16 Canon Inc 文字認識装置、携帯端末装置、および関連する方法、記録媒体、並びにプログラム
JP2003216294A (ja) * 2002-01-25 2003-07-31 Victor Co Of Japan Ltd ユーザインタフェース装置
JP2005065252A (ja) * 2003-07-29 2005-03-10 Fuji Photo Film Co Ltd 携帯電話機
JP3953024B2 (ja) * 2003-11-20 2007-08-01 ソニー株式会社 感情算出装置及び感情算出方法、並びに携帯型通信装置
WO2007113743A1 (en) * 2006-04-04 2007-10-11 Koninklijke Philips Electronics N.V. Expressive pen
JP4876718B2 (ja) * 2006-05-31 2012-02-15 カシオ計算機株式会社 電子ペーパー記録装置
JP2010131328A (ja) 2008-12-08 2010-06-17 Tokyo Univ Of Agriculture & Technology 嗜好判別装置、嗜好判別方法、嗜好判別プログラム、及び脳波解析方法
JP5534419B2 (ja) 2010-03-09 2014-07-02 株式会社ワコム 位置指示器、可変容量コンデンサ及び入力装置
JP5486977B2 (ja) * 2010-03-24 2014-05-07 株式会社日立ソリューションズ 座標入力装置及びプログラム
TWI470564B (zh) * 2012-02-21 2015-01-21 Wistron Corp 使用者情緒偵測方法與應用其之手寫輸入電子裝置
KR102011495B1 (ko) * 2012-11-09 2019-08-16 삼성전자 주식회사 사용자의 심리 상태 판단 장치 및 방법
JP2014139759A (ja) * 2013-01-21 2014-07-31 Toshiba Corp 情報機器及び情報処理方法
US9141588B2 (en) * 2013-01-28 2015-09-22 Empire Technology Development Llc Communication using handwritten input
JP2014158600A (ja) * 2013-02-20 2014-09-04 Nippon Telegr & Teleph Corp <Ntt> 集中状態推定システム、推定装置、筆記具、推定方法及びプログラム
JP2015109964A (ja) 2013-11-11 2015-06-18 株式会社電通サイエンスジャム 感情推定装置、感情推定処理システム、感情推定方法および感情推定プログラム
JP6255935B2 (ja) * 2013-11-21 2018-01-10 大日本印刷株式会社 筆跡再生装置及びプログラム
KR102346206B1 (ko) * 2014-01-22 2022-01-03 가부시키가이샤 와코무 위치 지시기, 위치 검출 장치, 위치 검출 회로 및 위치 검출 방법
US10324547B2 (en) * 2015-12-31 2019-06-18 Lg Display Co., Ltd. Active stylus pen, touch sensing system and driving method thereof
TWI764906B (zh) * 2016-09-01 2022-05-21 日商和冠股份有限公司 座標輸入處理裝置、情感推定裝置、情感推定系統及情感推定用資料庫之構築裝置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6855112B2 (en) * 2000-07-14 2005-02-15 The University Of Hong Kong Method of and system for health treatment
GB2413425A (en) * 2004-04-23 2005-10-26 Hewlett Packard Development Co Biometric analysis method
CN101686815A (zh) * 2007-06-27 2010-03-31 松下电器产业株式会社 人的状态推定装置以及方法
CN103926997A (zh) * 2013-01-11 2014-07-16 北京三星通信技术研究有限公司 一种基于用户的输入确定情绪信息的方法和终端

Also Published As

Publication number Publication date
JP6499811B2 (ja) 2019-04-10
US20190187823A1 (en) 2019-06-20
JP2022048219A (ja) 2022-03-25
TWI764906B (zh) 2022-05-21
JP7108752B2 (ja) 2022-07-28
EP3508948A4 (en) 2019-08-21
EP3508948A1 (en) 2019-07-10
JP2019136513A (ja) 2019-08-22
US11237647B2 (en) 2022-02-01
WO2018043061A1 (ja) 2018-03-08
JP7189382B2 (ja) 2022-12-13
US20220113816A1 (en) 2022-04-14
TW201812537A (zh) 2018-04-01
US11625110B2 (en) 2023-04-11
JP6908648B2 (ja) 2021-07-28
CN109643160A (zh) 2019-04-16
JPWO2018043061A1 (ja) 2019-06-24
EP3508948B1 (en) 2022-11-16
JP2021166751A (ja) 2021-10-21

Similar Documents

Publication Publication Date Title
CN109643160B (zh) 坐标输入处理装置、感情推定装置、系统及构建装置
CN107077809B (zh) 用于处理可穿戴式显示设备的媒体的系统
US20170031449A1 (en) Wearable device
CN104027103A (zh) 生物体信息检测装置以及脉搏计
JP6005880B1 (ja) 手書きデータ描画方法及び手書きデータ描画装置
KR20160084702A (ko) 운동 보조를 위한 전자 장치 및 방법
CN105224499A (zh) 电子会议装置及其控制方法和数字笔
CN106779614A (zh) 用于可穿戴设备的学习监测方法、装置及可穿戴设备
CN105094535B (zh) 在可穿戴设备中显示搜索结果信息的方法、装置和系统
KR20170076379A (ko) 웨어러블 장치 및 웨어러블 장치와 연결 가능한 사용자 단말장치
WO2018081416A1 (en) Carpal tunnel informatic monitor
JP5611021B2 (ja) 電子ペンおよびその制御方法、ならびに、サーバ装置
Yan et al. Design eye-tracking augmented reality headset to reduce cognitive load in repetitive parcel scanning task
Du et al. Personalize wayfinding information for fire responders based on virtual reality training data
CN109344757A (zh) 数据采集方法、装置及电子设备
WO2020246198A1 (ja) 操作者状態判断システム
KR102464925B1 (ko) 웨어러블 디바이스 및 웨어러블 디바이스의 제어방법
CN110517105A (zh) 服务人信息的处理方法、装置及设备
JP7055116B2 (ja) 通知方法、装置、及びプログラム
JP7322221B2 (ja) 情報処理装置、方法、及びプログラム
JP2011221908A (ja) オブジェクト管理システム及びオブジェクト表示端末並びにオブジェクトの表示制御方法
Spillers “Synch with me”: Rhythmic interaction as an emerging principle of experiential design.
JP2020187745A (ja) ビジネスヘルスレベル管理支援システム
JP2017033576A (ja) 手書きデータ描画方法、手書きデータ描画装置、及びプログラム
CN107463363A (zh) 一种监控软件的设计方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant