CN111857343B - 一种能部分实现数字永生并可与用户交互的系统 - Google Patents
一种能部分实现数字永生并可与用户交互的系统 Download PDFInfo
- Publication number
- CN111857343B CN111857343B CN202010704148.9A CN202010704148A CN111857343B CN 111857343 B CN111857343 B CN 111857343B CN 202010704148 A CN202010704148 A CN 202010704148A CN 111857343 B CN111857343 B CN 111857343B
- Authority
- CN
- China
- Prior art keywords
- user
- module
- information
- personal
- person
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000036541 health Effects 0.000 claims abstract description 39
- 229940068196 placebo Drugs 0.000 claims abstract description 21
- 239000000902 placebo Substances 0.000 claims abstract description 21
- 230000003993 interaction Effects 0.000 claims abstract description 17
- 238000004088 simulation Methods 0.000 claims abstract description 9
- 230000002452 interceptive effect Effects 0.000 claims abstract description 5
- 201000010099 disease Diseases 0.000 claims description 98
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 claims description 98
- 230000006870 function Effects 0.000 claims description 28
- 101150054987 ChAT gene Proteins 0.000 claims description 20
- 101100203187 Mus musculus Sh2d3c gene Proteins 0.000 claims description 20
- 230000008451 emotion Effects 0.000 claims description 17
- 230000006399 behavior Effects 0.000 claims description 14
- 239000000126 substance Substances 0.000 claims description 14
- 230000004913 activation Effects 0.000 claims description 11
- 230000000694 effects Effects 0.000 claims description 11
- 238000000034 method Methods 0.000 claims description 11
- 239000012634 fragment Substances 0.000 claims description 6
- 230000007935 neutral effect Effects 0.000 claims description 6
- 238000012549 training Methods 0.000 claims description 6
- 238000013528 artificial neural network Methods 0.000 claims description 5
- 230000008859 change Effects 0.000 claims description 5
- 238000007635 classification algorithm Methods 0.000 claims description 5
- 230000008569 process Effects 0.000 claims description 5
- 230000010485 coping Effects 0.000 claims description 4
- 238000004891 communication Methods 0.000 claims description 3
- 238000009434 installation Methods 0.000 claims description 3
- 230000003213 activating effect Effects 0.000 claims description 2
- 238000013480 data collection Methods 0.000 claims description 2
- 230000002747 voluntary effect Effects 0.000 claims description 2
- 230000000875 corresponding effect Effects 0.000 description 37
- 230000007613 environmental effect Effects 0.000 description 15
- 238000013461 design Methods 0.000 description 8
- 208000015181 infectious disease Diseases 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 230000002068 genetic effect Effects 0.000 description 5
- 208000035473 Communicable disease Diseases 0.000 description 4
- 239000013078 crystal Substances 0.000 description 3
- 230000002354 daily effect Effects 0.000 description 3
- 229910003460 diamond Inorganic materials 0.000 description 3
- 239000010432 diamond Substances 0.000 description 3
- 230000002996 emotional effect Effects 0.000 description 3
- 239000011521 glass Substances 0.000 description 3
- 230000008092 positive effect Effects 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 241000251468 Actinopterygii Species 0.000 description 2
- 208000024827 Alzheimer disease Diseases 0.000 description 2
- 241001672694 Citrus reticulata Species 0.000 description 2
- 206010010144 Completed suicide Diseases 0.000 description 2
- 206010058467 Lung neoplasm malignant Diseases 0.000 description 2
- 206010039203 Road traffic accident Diseases 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 239000000969 carrier Substances 0.000 description 2
- 238000010411 cooking Methods 0.000 description 2
- 230000006397 emotional response Effects 0.000 description 2
- 230000003370 grooming effect Effects 0.000 description 2
- 201000007270 liver cancer Diseases 0.000 description 2
- 208000014018 liver neoplasm Diseases 0.000 description 2
- 201000005202 lung cancer Diseases 0.000 description 2
- 208000020816 lung neoplasm Diseases 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 235000012054 meals Nutrition 0.000 description 2
- 238000003058 natural language processing Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000000717 retained effect Effects 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 206010003805 Autism Diseases 0.000 description 1
- 208000020706 Autistic disease Diseases 0.000 description 1
- 241000196324 Embryophyta Species 0.000 description 1
- 241000282326 Felis catus Species 0.000 description 1
- 208000013875 Heart injury Diseases 0.000 description 1
- 206010053615 Thermal burn Diseases 0.000 description 1
- 238000003915 air pollution Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000002498 deadly effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000035622 drinking Effects 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 235000013305 food Nutrition 0.000 description 1
- 208000019622 heart disease Diseases 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000003340 mental effect Effects 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 230000002269 spontaneous effect Effects 0.000 description 1
- 208000001072 type 2 diabetes mellitus Diseases 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/33—Querying
- G06F16/332—Query formulation
- G06F16/3329—Natural language query formulation or dialogue systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/33—Querying
- G06F16/335—Filtering based on additional data, e.g. user or group profiles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9535—Search customisation based on user profiles and personalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9538—Presentation of query results
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Human Computer Interaction (AREA)
- Mathematical Physics (AREA)
- Computational Linguistics (AREA)
- Artificial Intelligence (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
一种能部分实现数字永生并可与用户交互的系统,包括:记录模块、亲友信息问答模块、安慰协助模块、场景聊天模块、成功和幸福建议模块、健康建议模块、祭拜祈福模块、语音模拟模块、短视频调用模块和用户个人隐私保护模块,通过记录模块记录用户A的个人信息,并且生成用户A的数字人,用户A的数字人可以和用户B进行简单的语言交互,能够回答用户B提出关于用户A的问题,从而从亲人的角度安慰用户B,并且给用户B提供亲属相关的帮助和慰籍。本发明提供了一种能够部分实现数字永生并给用户建议和慰籍的系统,部分实现普通人在数字世界的永生并且为系统的使用者提供一些建议和慰籍。
Description
技术领域
本发明属于人机交互领域,涉及一种能部分实现数字永生并可与用户交互的系统。
背景技术
现有的聊天机器人和用户对话时基于大数据的训练结果,但是回答是千人一面,而不是特定人物的回答。因为每个人的个人经历偏好健康情况等个不相投,尚没有现有技术可以模拟从用户的角度以某个特定人来和用户进行交互,包括回答个人问题,从亲友的角度给用户提供人生建议和健康建议等。
从数字永生的角度看,现在尚没有一个系统能够记录人的记忆和态度,包括个人的生活事件、喜好和态度等,并且以本人的角度和其他用户进行语言交互,真正或者部分实现一个人的数字永生。
发明内容
为了克服现有技术存在的缺陷,本发明提供了一种能部分实现数字永生并可与用户交互的系统,部分实现普通人在数字世界的永生并且为系统的使用者提供一些建议和慰籍。
本发明解决其技术问题所采用的技术方案是:
一种能部分实现数字永生并可与用户交互的系统,所述系统包括:
记录模块,在用户知晓的情况下询问用户A的个人信息并把这些个人信息存储到存储介质上,用户A是指想实现数字永生的用户,数字永生是指普通人在数字世界的永生,个人信息包括个人经历重要的生活事件、个人的家庭和主要人际关系、个人的喜好、个人的声音和视频;
亲友信息问答模块,用于当用户A不在线时,通过提取用户A的信息来回答用户B的问题,用户B是指当前使用系统的真人用户。
进一步,安慰协助模块,当用户B对系统说的话里面出现需要安慰的关键词或者摄像头检测到用户B有不开心的表情,系统将以用户B的亲友的身份给予用户B一些安慰的话语;
场景聊天模块,用于根据不同的场景模拟用户A和用户B进行聊天交互;
成功和幸福建议模块,用于应用心理学中的共情原理和相近原理来给出积极的建议;
健康建议模块,用于根据收集到的用户B及其亲友的死因/疾病/习惯/爱好,以及他们的关系,给用户B提供本家族相关的健康建议;
祭拜祈福模块,用于提供电子智能祭拜功能,以逝去的亲友身份给予用户心理上的安慰和慰藉;
语音模拟模块,用于模拟用户A的声音;
短视频调用模块,用于根据用户B的问题和用户A的回答的文字内容,分析其中的情感并调用用户A的相关短视频;
用户个人隐私保护模块,用于保护用户A的个人隐私信息;
通过记录模块记录用户A的个人信息,并且生成用户A的数字人,用户A的数字人可以和用户B进行简单的语言交互,能够回答用户B提出关于用户A的问题,从而从亲友的角度安慰用户B,并且给用户B提供亲友相关的帮助和慰籍。
再进一步,所述系统将用户A的二维码与访问码和账号分开,用户A的二维码只包含了他本人的名字和获取本系统的信息,由用户A或者托管他的账户的用户决定把还有账号和访问码的物质载体提供给哪些信任的亲友。
再进一步,所述记录模块通过回答问卷记录个人信息,在不侵犯他人肖像权和隐私的条件下,用户也允许建立他不是他本人的数字人,建立以后,用户可以自用,也可以通过审批以后作为示例数字人公开。
再进一步,所述系统为一款APP,可以安装在手机上、电脑上、电子镜框、Pad或智能音箱上,用户B可以用自己的手机通过扫描存储介质上面的二维码下载APP,或者直接打开电脑/电子镜框/Pad/智能音箱,输入用户A提供的账号和访问码,如果账号和访问码均正确,那么用户A可以和用户B进行交互;如果账号或者访问码错误,或者用户没有这些信息,他可以询问用户A或者其亲友获取这些信息。
再进一步,所述亲友信息问答模块的运行步骤包括:
第一步:读取用户B的名字,在用户A的亲友列表中寻找这个人并确定用户A和用户B之间的关系;
第二步:通过关系得出相应的称呼词+合适的名字的部分;
第三步:运行下列子模块:
子模块1:非个人问题和个人问题区分模块
运用人工神经网络或者其它分类算法区分是个人问题还是非个人问题,如果区分出来是个人问题那么就进入子模块2;如果区分出来是非个人问题那么就进入子模块3;
子模块2:个人问题回答子模块,对问题的回答步骤:
第一步:提取问题中的关键词,如果没有提取到关键词,进入子模块3;
第二步:生成这些关键词的同义词;
第三步:根据关键词或者其同义词定位答案;
第四步:对于不同类型的问题,在返回查到的信息前,系统加入相应的回答词语;
子模块3:非个人问题回答子模块
第一步:提取问题中的关键词,如果没有提取到关键词,就回答:我不明白你的意思,你能否换一个问题或者换一种说法;如果提取到关键词,就进入下面第二步;
第二步:根据关键词查找网络得到答案,如果查到答案就返回结果;如果查不到答案,就生成关键词同义词再次查找网络;如果还是没有答案,那么就返回:我不明白你的意思,你能否换一个问题或者换一种说法;
所述亲友信息问答模块有两种回答方式,第一种是电子查询师查询,并且由电子查询师从第三者的角度回复相关内容;第二种是用户界面显示用户A的照片或者短视频并由用户A从第一人称的角度来回答问题;
在亲友信息问答模块中,当用户A在线时,用户B可以切换到和用户A直接聊天的切换功能;
再进一步,所述安慰协助模块的运行步骤包括:
第一步:同亲友信息问答模块的第一步;
第二步:在亲友信息问答模块的第二步的基础上,在称呼的后面加上一些语句;
第三步:按照用户B的问题/句子里面的关键词进行分类,并根据用户需要安慰的不同类别做出相应的基于用户A的回答;
如果用户B对和逝者直接对话有恐惧心理,用户B可以选择由第三方电子查询师转告。
再进一步,所述场景聊天模块的运行步骤包括:
第一步:利用安装系统的硬件上的摄像头或麦克风功能或者其它传感器,同时利用计算机视觉或者声音或者物联网信息和分类算法对真人用户现在的活动进行分类,当前时间作为正确分类的的一个辅助;
第二步:说话逻辑:描述分类的结果,分类的结果激活用户A的个人信息中相关内容,调用用户A和用户B的信息,并且调用和双方和当前激活场景都相关的一些生活经历;等待用户B回复,如果用户B有回复,则根据回复里面的关键词启动亲友信息问答模块或者安慰协助模块;
如果用户B对和逝者直接对话有恐惧心理,用户B可以选择由第三方电子查询师转告。
再进一步,所述成功和幸福建议模块包括子模块1和子模块2,该子模块1用于根据用户现在输入的生活事件给予相关的建议;
子模块2用于该用户亲友的成功或者幸福经验,当用户点击该子模块2的按钮之后,系统搜索该用户的所有的亲友的生活事件,并且用积极建议数据库判断这些该亲友应对负面生活事件的行为或者建议是积极的或者消极/中性的,如果是积极的应对行为或者建议,那么就把这些积极的应对行为或者建议返回给用户;从亲友的角度给用户提供积极的应对行为或者建议。
再进一步,所述健康建议模块的运行步骤包括:
第1大步,查询由本系统的记录模块收集到的用户B及其亲友的死因/疾病/习惯/爱好,并得到相关结果;
第2大步,根据第1大步的结果,对所有的疾病按照疾病的严重性进行排序.将最严重的疾病列在最前面;
第3大步,判断第1大步和第2大步,把亲友的疾病情况结合在健康建议中,从用户亲友的角度给出相应的健康建议。
更进一步,所述语音模拟模块包括:
真实语音调用单元:如果用户A在回答系统的问卷的问题的过程中使用了语音输入,那么这些语音输入的语音片段将被服务器保留下来,当检索到某个问题的答案的时候这些语音片段会播放出来复原用户的原始声音;
模拟语音单元:如果用户A在回答系统的问卷的问题的过程中使用了语音输入,那么这些语音输入的语音片段将作为模拟语音的数据输入。
本发明的有益效果主要表现在:能部分实现普通人在数字世界的永生并且为系统的使用者提供一些建议和慰籍。
附图说明
图1是本发明的系统框图。
图2是记录模块的框图。
图3是无照片的塑封标签的示意图。
图4是有照片的塑封标签的示意图。
图5是数字永生的物质载体是水晶的示意图。
图6是数字永生的物质载体是钻石的示意图。
图7是二维码贴在墓碑上的示意图。
图8是数字永生的物质载体是电子镜框/手机的示意图。
图9是数字永生的物质载体是小册子的示意图。
图10是数字永生的物质载体实用流程图。
图11是电子镜框的云存储设计框图。
图12是电子镜框的本地存储设计框图。
具体实施方式
下面结合附图对本发明作进一步描述。
参照图1~图12,一种能够部分实现数字永生并给用户建议和慰籍的系统,包括:
记录模块,在用户知晓的情况下询问用户A的个人信息并把这些个人信息存储到存储介质上,用户A是指想实现数字永生的用户,数字永生是指普通人在数字世界的永生,个人信息包括个人经历重要的生活事件、个人的家庭和主要人际关系、个人的喜好、个人的声音和视频;
亲友信息问答模块,用于当用户A不在线时,通过提取用户A的信息来回答用户B的问题,用户B是指当前使用系统的真人用户,包括用户A的亲友,当用户A在线时,用户B可以切换到和用户A直接聊天的切换功能;
安慰协助模块,当用户B对系统说的话里面出现需要安慰的关键词或者摄像头检测到用户B有不开心的表情,系统将以用户B的亲友的身份给予用户B一些安慰的话语;
场景聊天模块,用于根据不同的场景模拟用户A和用户B进行聊天交互;
成功和幸福建议模块,用于应用心理学中的共情原理和相近原理来给出积极的建议;
健康建议模块,用于根据收集到的用户B及其亲友的死因/疾病/习惯/爱好,以及他们的关系,给用户B提供本家族相关的健康建议;
祭拜祈福模块,用于提供电子智能祭拜功能,以逝去的亲友身份给予用户心理上的安慰和慰藉;在这个功能中系统也会向用户提示心理疏导方式和信息正确引导用户或者相关的帮助;
语音模拟模块,用于模拟用户A的声音;
短视频调用模块,用于根据用户B的问题和用户A的回答的文字内容,分析其中的情感并调用用户A的相关短视频;
用户个人隐私保护模块,用于保护用户A的个人隐私信息;
通过记录模块记录用户A的个人信息,并且生成用户A的数字人,数字人也叫数字我,用户A的数字人可以和用户B进行简单的语言交互,能够回答用户B提出关于用户A的问题,从而从亲人的角度安慰用户B,并且给用户B提供亲属相关的帮助和慰籍。
从记录功能看,系统的用户可以是任何希望留下自己记忆记录或帮助他人留下记忆记录,包括即将离世的人,逝者的亲人,致命疾病患者,普通人,高风险的从业人员(如战士警察等)。阿尔茨海默氏病患者(老年痴呆症)在疾病早期也可以使用本系统记录其本人的记忆和经历等。对于该个人的家人和后代/朋友,此数字拷贝可以帮助他们更好地了解被询问人(其祖先)的生活,选择,思维,偏好,情感和态度。这样的数字拷贝可以帮助朋友和家人更好地理解他们的亲友的生活。在更大的范围内,这种知识积累是普通百姓及其生活,信仰,思维和偏好的可以提供给定地点和时间的重要历史证据。该系统为社会增加了一种新的知识积累方法,使人们能够记录普通百姓及其生活,信仰,思想和喜好。
和传统的日记,传记等相比,系统可以和真人用户进行对话,使得留下的记录能够生动地和真人交互。
从对真人用户的帮助和慰籍看,系统可以通过安慰协助模块从亲人得角度上给用户B提供一些安慰和协助,通过健康建议模块从亲人的角度给真人用户相关的生活,工作,学习和健康建议,通过祭祀祈福模块从亲人的角度给予用户生理和心理上的一定的帮助,安慰和慰藉。
本系统为一款APP,可以安装在手机上、电脑上、电子镜框、Pad或智能音箱上。
1.记录模块,如图2所示:
功能:本模块用于记录用户的个人信息包括个人信息包括个人的主要经历、家庭和主要人际关系,个人喜好和梦想,遗憾和希望、个人的态度信仰和经验总结、个人的需要和性格、基础个人信息(姓名、籍贯等)、用户自由输入有价值的个人信息、以及个人的声音和短视频。
1)录入内容和存储:
被询问者即用户A通过手机APP/电子镜框/电脑上的软件或者人工电话咨询(特别是用户A有方言或者使用电子产品不方便的情况下),回答一套系统的问卷。该问卷一共分成8个部分,每个部分对应一个表单,包括:
A.你的主要个人经历;
B.你的家庭和主要人际关系;
C.你的喜好;
D.你的梦想遗憾和希望;
E.你的态度信仰和经验总结;
F.你的基础个人信息;
G.你的需要和性格;
H.自由输入有价值的个人信息。
除了回答问卷以外该用户的照片,本人的声音,本人的短视频都会被记录下来,存储到云存储、硬盘和光盘上面,防止信息丢失。用户A也需要留下他的账号信息包括手机或者是电子邮箱地址,账号的登录密码,以及他的数字信息的访问码。未来保证信息的安全,账号的登录密码和访问码必须不同。
在询问个人经历时,本系统可以根据被询问人的出生和成长情况,利用互联网数据库生成特定的问题,丰富每个被询问者的数据库。比如用户A出生在1945年之前而且在中国出生,系统会根据互联网数据询问抗日战争解放战争对用户A的影响。
2)录入方式:
问卷比较长,用户可以在答完几个问题之后休息一下,也有自由输入,问卷的回答有两种方式:
1.在一段时间内全部完成,比如半天或者一天时间。
2.长期记录:用户A可以把记录模块作为日记或者周记对生活事件和自己的情感偏好等进行长期记录。
如果用户A已经死亡,她的亲友也可以输入这些信息(至少需要本人的照片一张):比如用户A的家属又添加了新的成员,那么他的亲友可以通过软件/APP/电子镜框里面的问卷(关系表单)来输入新的成员的信息。他的亲友也可以添加用户A自己输入的时候没有输入的忘记输入的一些事件。
APP/电子镜框/电脑上的软件在询问用户A的时候,可以模拟客服发声。
3)建立非本人数字人
在不侵犯他人肖像权和隐私的条件下,用户也允许建立他不是他本人的数字人,比如用户已故的某个亲友。建立以后,用户可以自用。如果用户需要公开此数字人,他/她可以联系该系统的所有公司,公司确认后该数字我可以作为示例数字人公开。
2.亲友信息问答模块
2.1功能:当用户A不在线时,本模块通过提取用户A的信息来回答用户B的问题。系统也提供了当用户A在线时,用户B可以切换到和A直接聊天的切换功能。
2.2激活条件和实时聊天和非实时(用户A不在线)混合切换:
第1步,首先用户是打开系统的询问聊天按钮,并选择了他/她要聊天的对象,如用户A:系统先判断该用户A是否近日(如三天内)在线,如果近日在线,将切换到实时聊天;如果该用户A近日内不在线,则进入第2步。这个切换有2种方式,由用户自己选择。
方式1:大头模式/需要切换
方式2:普通聊天模式/不需要切换
第2步,当用户A近日不在线时
如果该用户A近日内不在线,则进入亲友信息问答模块:然后1)当用户B的问题里面没有出现需要安慰或者协助的关键词,如果是,则切换到安慰和协助模块;如果没有出现,则亲友信息问答模块激活。而且2)系统的摄像头探测到现在是普通对话场景,比如用户B的脸离系统很近,则本亲友信息问答模块激活,如果是其它场景,如吃饭看电视,则进入场景聊天模块。
2.3亲友信息问答模块的运行步骤:
第一步:读取用户B的名字,在用户A的亲友列表中寻找这个人并确定用户A和用户B之间的关系。
第二步:通过关系比如长辈、晚辈、或者同辈关系得出相应的称呼词+合适的名字的部分:
·如果用户B的名字出现在用户A的亲友表中,如果他们是亲属:
ο晚辈对长辈:只有称呼不加名(如爷爷),你好
ο同辈(哥哥姐姐等):只有称呼(如姐姐),你好
ο长辈对晚辈只加名字不加姓(如名字是李晓明),比如如果用户A是用户B的爸爸,那么系统会呈现:晓明,你好
·如果用户B的名字出现在用户A的亲友表中,如果他们是朋友/同学/同事等:你好,全名
·如果用户B的名字没有出现在用户A的亲友表中:你好
第三步运行下列子模块:
子模块1:运用人工神经网络或者其它分类算法区分是个人问题还是非个人问题,如果区分出来是个人问题那么就进入个人问题回答子模块即子模块2;如果区分出来是非个人问题那么就进入非个人问题回答子模块,即子模块3。
子模块2:个人问题回答子模块
个人问题回答子模块对问题的回答步骤:
第一步:提取问题中的关键词,如果没有提取到关键词,进入非个人问题回答子模块即子模块3;
第二步:生成这些关键词的同义词;
第三步:根据关键词或者其同义词(假设有N个关键词及其同义词)在该数字人的各个表单寻找包含这些关键词或者同义词的格子(如果找到某个格子包含了问题的关键词或者同义词,那么该格子被激活):
1)如果0个格子被激活,则返回亲友信息问答模块的第一步,提示用户比如“您刚才说的问题是有关该数字人,但是没有找到相关的信息,请换一种说法。如果还是不成功的话,那么本人在输入这个信息的时候就是不完整的。”
2)如果只有1个格子被激活,则该格子的内容作为返回的回答。
3)如果多于1个格子被激活,那么:
3.1)如果这多个格子都属于同一个表单(比如个人经历表单),则返回多个格子的所有内容作为回答。
3.2)如果这多个格子不是同一个表单(比如个人经历表单的某个格子被激活了,还有个人喜好的表单的一个格子也被激活了),则返回表的名字让用户选择(为了减少往返问答的次数,根据M的数值,来询问用户让用户选择):
如果有3个或者3个以上(M>=3)都被激活,系统问:您是问(X表单的名字),还是(Y表单的名字),还是都不是?如果用户回答都不是,则系统问,您是问(W表单的名字),还是(Z表单的名字),或者都不是?以此类推。
如果只有2个表单(M=2)都被激活,系统问:你是问(X表单的名字),还是(Y表单的名字),或者都不是?
如果用户选择了这些问题中某个表单,则返回该表单的激活的格子的内容作为回答的内容;如果用户最终选择了都不是,就回到第三步的1)。
第四步:回答逻辑
对于不同类型的问题比如为什么问题,返回查到的信息前,系统加入相应的回答词语。比如,对应于为什么问题,系统会加入“因为……”。
子模块3:非个人问题回答子模块
第一步:提取问题中的关键词,如果没有提取到关键词,就回答:我不明白你的意思,你能否换一个问题或者换一种说法;如果提取到关键词,就进入步骤第二步;
第二步:根据关键词查找网络,如百度维基百科等网站,得到答案,如果查到答案就返回结果;如果查不到答案,就生成关键词同义词再次查找网络;如果还是没有答案,那么就返回:我不明白你的意思,你能否换一个问题或者换一种说法。
本模块即亲友信息问答模块回答有两种方式,用户可以在用户界面中选择。考虑到中国的文化,为了减少某些用户和可能已经逝世的人直接对话的恐惧,第一种方式是电子查询师查询:用户界面显示电子查询师的模样,用户向电子查询师询问有关亲人的信息,由电子查询师从第三者的角度回复相关内容。如果有用户希望和数字的用户A直接对话,那么他们可以选择第二种方式:用户界面显示用户A的照片或者短视频(见短视频调用模块)并由用户A从第一人称的角度来回答问题(见亲友信息问答模块和语音模拟等模块)。
3.安慰协助模块
功能:本模块通过互联网知识和用户A的信息在用户B需要安慰的时候给予一些安慰的话语。
激活条件:首先用户是打开系统的询问聊天按钮,然后1)当用户B对系统说的话里面出现需要安慰的关键词或者摄像头检测到用户B有不开心的表情;而且2)当前是普通对话场景,则本模块激活。
运行步骤:第一步和第二步同亲友信息问答模块,只是在第二步在称呼的后面加上一些语句,比如“晓明(根据关系调用合适的称呼),我感觉你好像今天有点不开心啊,和你爸爸(调用关系词)说说吧。”
第三步:
系统将按照真人用户即用户B的问题/句子里面的关键词进行分类:普通安慰和协助(心理安慰,生活协助等)和紧急或者其他协助。
1)普通安慰和协助:按照关键词对真人用户的问题或者句子进行进一步分类:情绪方面的协助(孤独感,抑郁,无聊,等),或者非情绪性的生活协助。根据这些分类的结果提供相应的安慰或者协助回答逻辑:
回答逻辑第1部分:基于互联网知识的普通安慰和协助;比如:如果你感到孤独的话,可以去找朋友聊聊天。
回答逻辑第2部分:利用用户B的问题/句子里面的关键词,寻找用户A的个人经历等,
情况1:找到类似的经历,那么生成句子:“我在读大学的时候,也有时候会感到孤独”(调取用户A的个人经历内容)+所以你现在的情况也是正常的大家都会遇到的(系统生成)。
情况2:找到相反的经历或者情绪,那么生成句子:“你感到不开心的时候应该想想你开心的时候,我不开心的时候也会这样做所以我不开心的时候就会想到我之前开心的经历(系统生成),比如“我在过28周岁生日到时候就特别开心因为有很多朋友一起来祝贺”调取用户A的个人经历内容),你肯定也有开心的经历可以想想这些开心的经历吧(系统生成)”。
2)紧急或者其他协助
按照关键词对真人用户的问题或者句子进行分类,只有在激活特定关键词情况下面(如“烫伤“),那么激活相应的预先准备的回答。如果没有激活特定的关键词,则统一回答你的情况不知道如何处理请尽快联系你的亲友或者寻求其他帮助如拨打120,小区物业,民警110等。
除了基于第一人称的安慰以外,如果用户B对和逝者直接对话有恐惧心理,和前面的模块一样,用户B可以选择由第三方电子查询师转告,比如“这个问题的话,我们查询了您父亲的信息,他的意思是:……”
4.场景聊天模块
功能:本模块会根据不同的场景和用户进行简单的语言交流
激活条件:首先用户是打开系统的询问聊天按钮,然后当摄像头3和麦克风4发现当前非普通对话场景,而是其他场景(吃饭,看电视等),则本模块激活。
运行步骤:
第一步:利用安装系统的硬件上的摄像头或麦克风功能或者其它传感器,同时利用计算机视觉或者声音或者物联网信息和分类算法对真人用户现在的活动进行分类:吃饭,看电视,做饭等。当前时间作为正确分类的的一个辅助,比如通过计算机视觉或者计算机听觉分类当前用户的活动是做饭,但是当前时间是凌晨1:00那么返回分类错误。
第二步:说话逻辑:
说话逻辑第1部分:分类的结果激活用户A的个人经历,爱好中相应的内容,比如如果发现真人用户在吃饭,系统调取用户A和食物相关的爱好,“我最喜欢吃鱼了(调用结果)”。
说话逻辑第2部分:调用用户A和用户B的信息,并且调用和双方和当前激活场景都相关的一些生活经历,比如“晓明(调用合适的称呼),爸爸(调用关系)记得和你一起2010年去东湖钓鱼(调用共同的生活经历)”。
等待用户B回复,如果用户B有回复,则根据回复里面的关键词启动亲友信息问答模块或者安慰协助模块。
除了基于第一人称的建议以外,如果用户对和逝者直接对话有恐惧心理,和前面的模块一样,用户可以选择由第三方电子查询师转告,比如“您好,我们根据您父亲的信息,他说他也喜欢吃鱼,尤其大家热热闹闹的一起吃饭……”。本模块可以由用户随时关闭。
5.成功和幸福建议模块
本模块的设计应用了心理学中的共情原理(提取亲友可能的类似的经验)和相近原理(尽量提取可能的亲友的相关经验因为亲友和本人会有更多的背景的类似性,实在没有相关信息再提供一般的和用户无关的人员)来给出积极的建议。
激活条件和提示:用户点击本模块按钮。会看到两个按钮,分别对应子模块1和子模块2.
5.1子模块1:根据用户现在输入的生活事件给予相关的建议
当用户按下这个子模块1对应的按钮(根据您的输入经历的给予成功或幸福建议)以后,系统将检查当前登录用户(用户B)在记录模块中输入是否超过5条生活事件,如果小于5条,则提示:您现在输入的个人经历偏少(尤其是挫折方面的经历),请您回到主菜单,在建立数字我步骤2中的“您的个人经历”里再输入一些更多的生活事件,否则系统可能因为缺少信息而影响提供的建议质量和数量。并检查当前登录用户(用户B)添加的亲友数量:如果小于3个亲友,则提示:您添加的亲友数量太少,您添加的亲友数量太少可能会影响系统为您提供的成功和幸福建议质量和数量。如果可能的话,请回到主菜单在和数字我交互1查询和对话中添加更多亲友。
激活条件和提示:用户打开本子模块按钮,系统将运行:
第一步:根据消极生活事件库,查找该用户的个人经历中负面事件:
1)如果没有则返回:系统提示:按照您现在输入的生活经历来看,您没有遇到特别有挫折的事情,您可以有3个选择:A)您可以回到记录模块再添加一些新的包括有挫折或者失败的生活经历,然后系统会按照这些经历为您提供积极的建议;用户选择这个按钮以后,系统返回到记录模块;B)了解以下您的亲友他们是怎么应对挫折或者失败的生活经历(寻找本模块的第二个按钮),用户选择这个按钮之后系统进入自动播放子模块;C)跳出本子模块。
2)如果有,则进入第2步
第二步,根据记录模块里面用户对消极事件的评分,对前前面3~5个负面影响最大的生活事件(NEL,Negative Events List)找到这些生活事件的原因和结果。
第三步:用NEL搜索该用户的所有的亲友的负面生活事件,并且用积极建议数据库判断这些该亲友应对负面生活的行为是积极的或者消极/中性的:
1)如果因为输入不全,或者查找到0个所有的亲友的负面生活事件,或查到至少1个亲友的负面生活事件但对应的行为都是消极或中性的:则通过积极建议数据库,对这些负面的生活事件为用户提供一些积极的建议,包括某些著名人物的对应相似生活事件应对的行为。
2)如果查找到1个应对的行为是积极的,那么就返回:
直接对话模式(显示亲友照片或者短视频):XXX(称呼或者名字,从记录模块提取:如果是亲友是用户的同辈(包括同事,同学,朋友)或者长辈就用用户的名字;如果亲友是用户的是晚辈,就用关系词作为称呼(如爸爸)),我知道你(调用用户本人的负面事件1),我也有类似的经历(调用该亲友的相关事件),我当时是(调用该亲友的相关的积极行为),我相信你也会努力向我一样努力克服这个事情对你的影响,没有过不去的坎(或者类似的语句)。我觉得:从记录模块调取该亲友的座右铭和价值观(如果有的话)。而且我知道:叙说1)的结果(某些著名人物的对应相似生活事件应对的行为)。
电子查询师模式:你的(亲友XXX,调用关系/名字),当年他/她也遇到类似的事情:(调用该亲友的相关事件),你的(亲友XXX,调用关系/名字)当时是(调用该亲友的相关的积极行为),相信你也会努力向你的(亲友XXX,调用关系/名字)一样努力克服这个事情对你的影响,没有过不去的坎(或者类似的语句)。你的(亲友XXX,调用关系/名字)觉得:从记录模块调取该亲友的座右铭和价值观(如果有的话)。再加入:叙说1)的结果(某些著名人物的对应相似生活事件应对的行为)。
3)如果查找到>1个应对的行为是积极的,则根据自然语言处理相关度计算方法按照相关度对这些相关事件按照相关度进行排序,选择相关度最高的1-3个类似2)的建议。
第四步:如果用户还有第2个消极的生活事件那么就重复第2步。
5.2子模块2:该用户亲友的成功或者幸福经验
当用户点击本子模块的按钮之后,系统搜索该用户的所有的亲友的生活事件,并且用积极建议数据库判断这些该亲友应对负面生活的行为是积极的或者消极/中性的:
1)查找所有的负面生活事件:如果因为输入不全,或者查找到0个所有的亲友的负面生活事件,或查到至少1个亲友的负面生活事件但对应的行为都是消极或中性的,则查找该用户的所有的亲友的积极生活事件:
1A)如果没有查到任何该用户的所有亲友的积极的生活事件,则返回:因为您的亲友输入的信息太少系统无法找到他们相关的成功或者幸福经验,为您提供普通的成功或者幸福经验。然后运行积极建议数据库,为用户提供一些积极的建议,包括某些著名人物的对应相似生活事件应对的行为。
1B)如果查到该用户的所有亲友的积极的生活事件,则通过积极事件数据库评估这些生活事件的积极程度然后按照积极程度的高低依次返回:
直接对话模式(显示亲友照片或者短视频):XXX(称呼或者名字,从记录模块提取:如果是亲友是用户的同辈(包括同事,同学,朋友)或者长辈就用用户的名字;如果亲友是用户的是晚辈,就用关系词作为称呼(如爸爸)),生活是幸福美好的,因为(调用该积极生活事件的原因),所以(调用该积极生活事件的结果),我那时候觉得(调用该积极生活事件的对该亲友的情绪反应)。我觉得:从记录模块调取该亲友的座右铭和价值观(如果有的话)。再加入:为用户提供一些积极的建议,包括某些著名人物的对应相似生活事件应对的行为。
电子查询师模式:生活是幸福美好的,您的(亲友XXX,调用关系/名字),因为他/她(调用该积极生活事件的原因),所以他/她(调用该积极生活事件的结果),他/她觉得(调用该积极生活事件的对该亲友的情绪反应)。您的(亲友XXX,调用关系/名字)觉得:从记录模块调取该亲友的座右铭和价值观(如果有的话)。再加入:为用户提供一些积极的建议,包括某些著名人物的对应相似生活事件应对的行为。
2)如果查找到1个负面生活事件而且该生活事件该亲友应对的行为是积极的,那么就返回:
直接对话模式(显示亲友照片或者短视频):XXX(称呼或者名字,从记录模块提取:如果是亲友是用户的同辈(包括同事,同学,朋友)或者长辈就用用户的名字;如果亲友是用户的是晚辈,就用关系词作为称呼(如爸爸)),我知道你(调用用户本人的负面事件1),我也有类似的经历(调用该亲友的相关事件),我当时是(调用该亲友的相关的积极行为),我相信你也会努力向我一样努力克服这个事情对你的影响,没有过不去的坎(或者类似的语句)。我觉得:从记录模块调取该亲友的座右铭和价值观(如果有的话)。而且我知道:叙说1)的结果(某些著名人物的对应相似生活事件应对的行为)。
电子查询师模式:你的(亲友XXX,调用关系/名字),当年他/她也遇到类似的事情:(调用该亲友的相关事件),你的(亲友XXX,调用关系/名字)当时是(调用该亲友的相关的积极行为),相信你也会努力向你的(亲友XXX,调用关系/名字)一样努力克服这个事情对你的影响,没有过不去的坎(或者类似的语句)。你的(亲友XXX,调用关系/名字)觉得:从记录模块调取该亲友的座右铭和价值观(如果有的话)。再加入:叙说1)的结果(某些著名人物的对应相似生活事件应对的行为)。
3)如果查找到多于1个负面生活事件而且该生活事件该亲友应对的行为是积极的,则根据自然语言处理相关度计算方法按照相关度对这些相关事件按照相关度进行排序,选择相关度最高的1-3个类似2)的建议。
6.健康建议模块
功能:系统将根据收集到的用户B及其亲友的死因/疾病/习惯/爱好,以及他们的关系,通过本模块给用户B提供本家族相关的健康建议。
激活条件和提示:用户打开健康建议按钮。运用前检查当前登录用户(用户B)在记录模块中输入是否完整(包括他/她本人的疾病情况),如果不完整,则提示:请您回到主菜单,在建立数字我步骤2中的个人信息里面输入本人的健康疾病情况,否则会影响系统您提供的健康建议质量和数量。并检查当前登录用户(用户B)添加的亲友数量:并检查当前登录用户(用户B)添加的亲友数量:如果小于3个亲友,则提示:您添加的亲友数量太少可能会影响系统为您提供的健康建议质量和数量,如果可能的话,请回到主菜单在和数字我交互1查询和对话中添加更多亲友。
运行步骤:
第1大步,查询由本系统的记录模块收集到的用户B及其亲友的死因/疾病/习惯/爱好,并得到相关结果,见表1,按照用户B及其亲友的死因/疾病/习惯/爱好查询结果举例:
表1
对于某个疾病i,它的疾病严重性(SDi,Severity of Disease i),相关习惯爱好严重性(SHi,Severity of Habit),环境因素严重性(SEi,Serverity of Environement i)的计算算法如下:
Step 1.从第1行第1列的疾病开始(如D1),搜索整个表格从第2行至最后一行:
1)SDi=1(自身患病初始值);
2)如果出现与Di相同或者相似疾病且该疾病有遗传因素,则从记录模块提取相关信息:
2.1)如果本人和患病人是直系亲属关系,但患病人的死因不是Di,SDi=SDi+1并检查本人和该患病人是否相似的习惯爱好而且根据疾病数据库该习惯爱好(Hi)是Di的一个致病因素,如果有,SHi=SHi+1,并检查本人和该患病人是否相似的生活工作环境而且根据疾病数据库该环境因素(Ei)是Di的一个致病因素,如果有,SEi=SEi+1,记录相关亲人的人数(NDi)和他们的名字集合{Name 1,Name 2…}
2.2)如果本人和患病人是直系亲属关系而且患病人的死因是Di,SDi=SDi+2并检查本人和该患病人是否相似的习惯爱好而且根据疾病数据库该习惯爱好(Hi)是Di的一个致病因素,如果有,SHi=SHi+2,并检查本人和该患病人是否相似的生活工作环境而且根据疾病数据库该环境因素(Ei)是Di的一个致病因素,如果有,SEi=SEi+2,记录相关亲人的人数(SNDi)和他们的名字集合{Name A,Name B…}
注:具体数值+1或者+2,+0.2等可由具体疾病进行调整,其它情况SDi值不变。
3)如果出现与Di相同或者相似疾病,但该疾病没有遗传因素却是传染病,则从记录模块提取相关信息:
3.1)如果本人和患病人有共同生活/接触历史,但患病人的死因不是Di,SDi=SDi+1,并检查本人和该患病人是否相似的习惯爱好而且根据疾病数据库该习惯爱好(Hi)是Di的一个致病因素,如果有,SHi=SHi+1,并检查本人和该患病人是否相似的生活工作环境而且根据疾病数据库该环境因素(Ei)是Di的一个致病因素,如果有,SEi=SEi+1,更新相关亲人的人数(NDi)和他们的名字集合{Name1,Name 2…};
3.2)如果本人和患病人有共同生活/接触历史,而且患病人的死因是Di,SDi=SDi+2,并检查本人和该患病人是否相似的习惯爱好而且根据疾病数据库该习惯爱好(Hi)是Di的一个致病因素,如果有,SHi=SHi+2,并检查本人和该患病人是否相似的生活工作环境而且根据疾病数据库该环境因素(Ei)是Di的一个致病因素,如果有,SEi=SEi+2,更新相关亲人的人数(NDi)和他们的名字集合{Name1,Name 2…};
3.3)如果本人和患病人没有共同生活/接触历史而且患病人的死因不是Di,SDi=SDi+0.1,并检查本人和该患病人是否相似的习惯爱好而且根据疾病数据库该习惯爱好(Hi)是Di的一个致病因素,如果有,SHi=SHi+0.1,并检查本人和该患病人是否相似的生活工作环境而且根据疾病数据库该环境因素(Ei)是Di的一个致病因素,如果有,SEi=SEi+0.1,更新相关亲人的人数(NDi)和他们的名字集合{Name 1,Name 2…};
3.4)如果本人和患病人没有共同生活/接触历史但患病人的死因是Di,SDi=SDi+0.15,并检查本人和该患病人是否相似的习惯爱好而且根据疾病数据库该习惯爱好(Hi)是Di的一个致病因素,如果有,SHi=SHi+0.15,并检查本人和该患病人是否相似的生活工作环境而且根据疾病数据库该环境因素(Ei)是Di的一个致病因素,如果有,SEi=SEi+0.15,更新相关亲人的人数(SNDi)和他们的名字集合{Name A,Name B…};
4)如果出现与Di相同或者相似疾病,但该疾病没有遗传因素也不是传染病,从记录模块提取相关信息,则:
4.1)如果患病人的死因不是Di,SDi=SDi+0.1,并检查本人和该患病人是否相似的习惯爱好而且根据疾病数据库该习惯爱好(Hi)是Di的一个致病因素,如果有,SHi=SHi+0.1,并检查本人和该患病人是否相似的生活工作环境而且根据疾病数据库该环境因素(Ei)是Di的一个致病因素,如果有,SEi=SEi+0.1,更新相关亲人的人数(NDi)和他们的名字集合{Name 1,Name 2…};
4.2)如果患病人的死因是Di,SDi=SDi+0.3,并检查本人和该患病人是否相似的习惯爱好而且根据疾病数据库该习惯爱好(Hi)是Di的一个致病因素,如果有,SHi=SHi+0.3,并检查本人和该患病人是否相似的生活工作环境而且根据疾病数据库该环境因素(Ei)是Di的一个致病因素,如果有,SEi=SEi+0.3,更新相关亲人的人数(SNDi)和他们的名字集合{Name A,Name B…};
Step 2,对本人的第二个疾病重复Step 1,直至所有本人报告(第一行)的疾病运行完成。
Step 3,从第二行开始,对每一个疾病重复Step 1(SDi的初始值是0),直至表中所有的疾病运行完成。
以上3Step运行得到第一大步即3Steps运行结果示例,如下表2:
表2
第2大步,根据第1大步的结果,对所有的疾病按照疾病的严重性进行排序.将最严重的疾病列在最前面。
第3大步,判断第1大步和第2大步,把亲友的疾病情况结合在健康建议中,从用户亲友的角度给出相应的健康建议:只是真人用户即用户B的,还是只是他的亲友的,还是用户B和他的某些(个)亲友同时有的:
第3大步情况1:如果只是真人用户B的死因/疾病/习惯/爱好,则运行以下步骤:
情况1.1如果是疾病,则通过疾病数据库和前面两个大步的结果,按照疾病的严重性分数(SDi)高低依次,通过健康数据库提供相关的建议:A)如果通过前面两个大步得到了和这些疾病相关的习惯爱好和环境因素,则按照SHi分数和SEi分数高低依次提示相关的健康建议;B)如果没有和这些疾病疾病相关的习惯爱好和环境因素,则通过健康数据库提供相关的建议。
情况1.2如果是习惯爱好,则通过习惯爱好健康数据库,判断这个是健康的还是不健康的习惯爱好,如果是健康的,要给予鼓励的语言。如果不是健康的,则通过习惯爱好健康数据库进行相关的建议,并作为每日提醒的输入。
情况1.3如果是为非疾病的死因:对死因进行分类(比如交通事故,他杀,自杀等),针对每一类死因对用户B进行提醒或者建议。虽然大部分情况真人是活着在使用这个系统所以没有死因这个情况,但是有的时候虽然是死亡的真人的亲友代替他/她使用本系统,所以我们考虑了这个情况。
第3大步情况2:如果只是亲友的死因/疾病/习惯/爱好,则根据记录模块的信息判断用户B和该亲友是直系亲属还是非直系亲属或者朋友/同学/同事等。
情况2.1如果用户B和该亲友是直系亲属而且如果是疾病,则运行以下步骤:
1)如果病因有遗传的成分(比如Ⅱ型糖尿病,某些心脏病等)而且B是A的晚辈,通过疾病数据库,要提醒用户B:
对话模式(按照疾病的严重性分数(SDi)高低依次选择对应的亲友1-2名):我(呈现亲友照片或者短视频)曾经患过(调用疾病名称),(还有你的XXX,调用第1大步名字集合以及记录模块得到的相关关系)。这个疾病有遗传因素,建议你:A)如果通过前面两个大步得到了和这些疾病相关的习惯爱好和环境因素,则按照SHi分数和SEi分数高低依次提示相关的健康建议;B)如果没有和这些疾病疾病相关的习惯爱好和环境因素,则通过健康数据库提供相关的建议。其中语气词随严重性分数(SDi)变化:比如“你(一定/千万/等语气词按照SDi分数设定)要注意定期体检,积极预防,……”。
第三方/查询师模式(如果用户对和逝者直接对话有恐惧心理,和前面的模块一样,用户可以选择由第三方数字查询师转告):我们查询了您亲友的信息,您的X个(调用第一大步结果)XXX(亲友称呼)曾经患过(调用疾病名称),其它内容同上。
2)如果病因有生活习惯爱好的成分(比如肝癌),通过疾病数据库(肝癌←喝酒)以及调用第1大步的结果,如果找到对应的习惯爱好:
对话模式(按照疾病的严重性分数(SDi)高低依次选择对应的亲友1-2名):我曾经患过(调用疾病名称),有可能是因为我(调用第一大步Di对应的用户A的生活习惯),所以建议你(最好不要/千万不要/…措辞依据疾病的严重性分数分数)像我那样(调用第一大步Di对应的用户A的生活习惯),可以一定程度上减少这个疾病发生的可能。
第三方/电子查询师模式:我们查询了您亲友的信息,您的XXX(亲友称呼),即把第一人称换成第三人称其他内容同上。
如果没有找到,则提醒用户B:我曾经患过(调用疾病名称),研究发现这些生活习惯……(通过疾病数据库调用的生活习惯)会一定程度上增加这个疾病的发生机会,所以建议你不要(通过疾病数据库调用的生活习惯),可以一定程度上减少这个疾病发生的可能。第三方/电子查询师模式同上。
3)如果病因有环境的成分(比如肺癌),通过疾病数据库(肺癌←空气污染)以及调用第1大步的结果,寻找用户A的个人信息里面相关的信息比如工作的场所(比如污染多的化工厂)和生活的地区(xx城市空气污染)等。
如果找到,则要提醒用户B:
对话模式(按照疾病的严重性分数(SDi)高低依次选择对应的亲友1-2名):我曾经患过我曾经患过(调用疾病名称),有可能是因为我在(调用第1大步的环境因素获得的结果用户A的工作场所或者生活的地方)工作或者住过,所以建议(一般/强烈建议等措辞按照SEi分数高低)你不要再接触或者居住在这些地方,可以一定程度上减少这个疾病发生的可能。
第三方/电子查询师转换人称后内容同上。
如果没有找到,则提醒用户B:我曾经患过(调用疾病名称),研究发现这些环境因素……(通过疾病数据库调用的生活习惯)会一定程度上增加这个疾病的发生机会,所以建议你尽量避免(通过疾病数据库调用的环境因素)的地方,可以一定程度上减少这个疾病发生的可能。
4)病因有传染的成分或者是传染病,通过疾病数据库,则提醒用户B(考虑到中国文化传染病一般不由第一人称叙述,这里自动开启第三人称/查询师模式):你要注意你的亲友(XXX,调用第1大步结果)有这个(调用疾病名称),这个(调用疾病名称)是通过(传染途径)传染,如果这个人或他的物品你还接触的话,你需要注意平时防止被传染。
情况2.2如果用户B和该亲友是直系亲属而且如果是习惯/爱好,则运行以下步骤:
通过习惯爱好健康数据库,判断这个是健康的还是不健康的习惯爱好,
1)如果是健康的,则:
对话模式:我(呈现亲友照片或者短视频)这个(具体习惯/爱好)还是蛮健康的,你也也可以试一下或者保持
第三方/查询师模式:我们查询了您亲友的信息,您的XXX(亲友称呼),即把第一人称换成第三人称其他内容同上。
2)如果不是健康的,则通过习惯爱好健康数据库进行相关的建议,并作为每日提醒的输入:
对话模式:我(呈现亲友照片或者短视频)这个(具体习惯/爱好)不太好,你最好不要有。
第三方/查询师模式:我们查询了您亲友的信息,您的XXX(亲友称呼),即把第一人称换成第三人称其他内容同上。
情况2.3.如果用户B和该亲友是直系亲属而且如果为非疾病的死因,则对死因进行分类(比如交通事故,他杀,自杀等),针对每一类死因对用户B进行提醒。比如:
对话模式:我是因为(调用用户A的死因),你一定要注意……
第三方/查询师模式:我们查询了您亲友的信息,您的XXX(亲友称呼),即把第一人称换成第三人称其他内容同上。
情况2.4如果用户B和该亲友不是直系亲属而且如果是疾病,则运行情况2.1但跳过其中的1)。
情况2.5.如果用户B和该亲友不是直系亲属而且如果是习惯/爱好,则运行情况2.2。
情况2.6.如果用户B和该亲友不是直系亲属而且如果为非疾病的死因,则运行情况2.3。
第3大步情况3:如果用户B和他的亲友的共同的死因/疾病/习惯/爱好,则按照第3大步情况2运行,在第1大步的时候SD,SH,SE计分已经考虑了这个情况,相关建议在情况2的建议的基础上进行以下修改:
情况3.1:相关的建议更新成:对话模式:“我“改成”我们“;第三方/查询师模式:我们查询了您亲友的信息,您和您的XXX(亲友称呼)
情况3.2:如果是共同的爱好/习惯,则通过习惯爱好健康数据库,判断这个是健康的还是不健康的习惯爱好:
1)如果是健康的,则:
对话模式:我们(呈现亲友照片或者短视频)都有这个(具体习惯/爱好)还是蛮健康的,你也也可以试一下或者保持。
第三方/查询师模式:我们查询了您亲友的信息,您和您的XXX(亲友称呼),即把第一人称换成第三人称其他内容同上。
2)如果不是健康的,则通过习惯爱好健康数据库进行相关的建议,并作为每日提醒的输入:
对话模式:我们(呈现亲友照片或者短视频)都有这个(具体习惯/爱好)不太好,你最好不要有。
第三方/查询师模式:我们查询了您亲友的信息,您和您的XXX(亲友称呼),即把第一人称换成第三人称其他内容同上。
7.祭拜祈福模块
功能:提供电子智能祭拜功能,给予用户心理上的安慰和慰藉。
激活条件:用户打开系统的祭祀祈福按钮。
运行步骤:
第一步:用户打开系统的祭祀祈福按钮,会看到一个用户A或者多个用户A头像。
如果用户A没有死亡(用户A的信息里面有死亡日期和当前日期对比),则只运行用户A的生日提醒。
第二步:用户选择需要祭祀的用户A(或者多个用户A),则运行以下子模块;
子模块1:祭拜提醒功能
系统将在a)清明等时节b)记录的用户A的生日死亡日前夕提醒用户进行祭拜。
子模块2:祭拜祈福交互功能:
第1步:在用户B选择开始祭拜以后,系统将呈现用户A的照片和祭祀(包括香烛等)场景。
第2步:系统通过界面上的文字或者第三方的声音提示用户可以进行一些祭拜行为(如磕头作揖等)。如果系统的摄像头侦测到用户B有祭拜行为(如磕头作揖等,当用户摄像头或者计算机视觉识别出现困难的时候那么用户也可以按按钮来实现祭拜)或者系统的麦克风监测到用户B祝福忘者(用户A)的语言(比如“爷爷祝您在那边幸福),系统将呈现中国传统文化中吉利的画面(比如呈现文字:全家吉祥如意万事如意步步高等),呈现动画:福禄寿等人物以及寿桃仙鹤等动图。
第3步:如果系统的麦克风监测到用户B有和逝者(用户A)语言交流(比如“爷爷您在那边还好吗“)或者按下祈福按钮,系统将对用户的语言输入进行分类:
1)如果是询问用户A的个人信息,则启动亲友信息问答模块;
2)如果是询问用户A现在的情况,则自动回答模式及其变式,比如“我挺好的“(系统生成);
3)如果是用户B需要安慰或者协助,则启动安慰协助模块;
4)如果用户B的语言是祈福或者按下了祈福按钮,则自动启动用户A给用户B的保佑的词句。
以上步骤1)-4)运行结束以后,或者1)-4)都没有激活,则返回一般的先辈保佑晚辈的语句,比如“我会在那边好好保佑你们,你们要幸福快乐的生活(系统生成)”等等。
第4步:在界面上显示一个“发送到天堂”按钮,用户可以发送语音或者文字消息给系统里面的用户A,系统的界面会用动画显示发送的过程,系统回复“用户A收到了非常感谢”等变式,然后返回一般的先辈保佑晚辈的语句,比如“我会在那边好好保佑你们,你们要幸福快乐的生活(系统生成)”等等。
在这个模块中,系统也会向用户提示心理疏导方式和信息正确引导用户或者相关的帮助。
8.语音模拟模块
功能:模拟用户A的声音
激活条件:其他模块只要希望发出用户A的声音都会被调用
语音模拟模块包括:
真实语音调用单元:如果用户A在回答系统的问卷的问题的过程中使用了语音输入,那么这些语音输入的语音片段将被服务器保留下来,当检索到某个问题的答案的时候这些语音片段会播放出来复原用户的原始声音。
模拟语音单元:如果用户A在回答系统的问卷的问题的过程中使用了语音输入,那么这些语音输入的语音片段将作为训练模拟语音程序的训练数据输入:
第一步:根据用户的个人信息包括性别,年龄,个人经历,籍贯,教育水平,得出该人是普通话还是某种方言(比如浙江话,四川话等),在语音生成的逻辑里面调用相应的普通话或者方言发声包括性别。
第二步:根据用户A的语音片段(包括频率,说话速度等)修正第一步的产生语音,得到尽量接近用户A真人声音的语音。
为了防止本系统被不良的人利用,在系统生成的语音中,系统将加入特殊的声音信号,当真人用户听到这个特殊的声音信号,就知道是系统发出的是模拟的人的声音而非真人的声音,我们也会并将这个特殊声音信号的声纹特点告知那些需要通过声纹来验证真人的合法公司和政府机构,以区别是真人声音还是模拟的声音。。
如果没有存储语音片段,则根据第一步的结果播放声音。
9.短视频调用模块:
根据用户B的问题和用户A的回答的文字内容,分析其中的情感并调用用户A的相关短视频
1)有两种方法可以分析这些语言中的情绪:
方法1:使用较大的查找表(按照关键词将用户A的回答分五个情感类别,平静,快乐/微笑,生气,伤心,惊奇);给定文本中的每个单词,如果找到一个相应的情感,则该情感的情感分数将增加1。该文本的最终情感将以得分最高的情感进行选择。例如,如果一个文本包含“我上大学时,我很遗憾我的平均绩点不是很高”,那么只有1个单词“悲伤”和“悲伤”情绪得到1分,整个文本将被分类为伤心。
方法2:使用大文字训练ANN(神经网络)或其他模型来分类情绪状态
2)调用相应的短视频:基于步骤1),系统播放用户A使用子系统1存储的相应预存储视频(包括数字拷贝在听真人说话的时候(调用视频1-5号短视频),和回答用户B的时候(调用6-10号短视频)。
3)根据用户A自定义短视频的描述(比如我家的小猫),如果用户B的问题里面的关键词激活了描述对应的短视频,那么就播放这个短视频(调用11-14号短视频)。
10.用户个人隐私保护模块
功能:为了保护用户A的个人隐私信息。
1)首先,当一个用户希望添加其他用户的时候,他必须知道其他用户的账号(电子邮件或者电话号码)和该用户的访问码.访问码和用户的账户密码是不一样的(当系统检测到的用户设置的访问码和自己的密码一样的时候,系统将提示用户修改访问码),以增加系统的安全性;
2)如果用户A还活着或者他的账户由他人托管:其他需要访问用户A的数字我的用户,需要得到用户A的同意。并且用户A可以管理哪些用户可以访问自己的数字拷贝:如果用户在列表里面看到不熟悉的或者不正确的其他用户(包括名字和电话号码电子邮件),可以进行筛除,便于加强个人隐私信息管理。见下图:
3)如果用户已经死亡:情况1)(账户由他人托管)这个人在死亡前把他的账号和密码和访问码告诉信任的亲友,该亲友可以维护死者的账号(如添加新的亲友成员或者输入用户A没有输入的内容);情况2)用户A不希望他人托管他的账户,那么他可以把他的账号的和访问码做成的塑封标签等相对永久的物质载体(见数字永生的物质载体)留给亲友们;情况3)用户A的某个亲友(用户C)直接创建用户A的账号/密码/访问码。
4)如果某些用户对个人隐私的保护要求比较高,那么这些用户除了设置用户的密码以外还可以增加其他硬件密码或者手机验证码保护,比如说使用U盾或者手机验证码;普通用户现在可以通过账号和密码登录自己的账户。
5)在硬件实现上,本系统将用户A的二维码和访问码/账号分开。用户A的二维码只包含了他本人的名字和获取本系统的信息(比如下载本系统APP的链接),可以放在公开场合(如墓碑)。由用户A或者托管他的账户的用户决定把有账号和访问码的物质载体提供给哪些信任的亲友。
11.数字永生的物质载体和硬件集成
本系统将用户A的二维码和访问码/账号分开。用户A的二维码只包含了他本人的名字和获取本系统的信息,也就是说,为保护用户的个人隐私,陌生人扫描用户A的二维码只能够查到该用户的名字和获取本系统的方法,比如下载本系统APP的链接,可以放在公开场合,如墓碑。由用户A或者托管他的账户的用户决定把还有账号和访问码的物质载体提供给哪些信任的亲友。
1)数字永生的物质载体
数字永生的物质载体可以是:
a)塑封的标签或者普通标签包括,如图3和图4所示:放用户A照片或者不放,二维码(只包含了他本人的名字和获取本系统的信息(比如下载本系统APP的链接),账号和访问码1(用户A也可以选择把账号和访问码隐藏起来);用户可以把标签给他信任的亲友。
b)水晶/钻石或其它比较坚固的材料;用户可以把水晶/钻石给他信任的亲友,如图5和图6所示。
c)家谱(小册子),含以上材料,如图9所示。
d)墓碑上面贴二维码2,如图7所示。
e)电子镜框或者手机,如图8所示。
2)数字永生的物质载体的使用,如图10所示:
用户B可以用自己的手机通过扫描上述存储介质上面的二维码2下载APP,或者打开电子镜框/App/智能音箱,输入用户A提供的账号和访问码,如果账号和访问码均正确,那么用户A可以和用户B进行交互。如果账号或者访问码错误,或者用户没有这些信息他可以询问用户A或者其亲友获取这些信息。APP的公司也可以提供这些信息但是必须符合3个条件:该用户必须出具他是用户A的亲属的法律证明;该用户必须签署隐私保护条约和担责任声明;而且他的访问交互内容将被记录下来。
3)电子镜框的详细设计
安装本系统的硬件方面可以通过手机或者以下的电子镜框实现。电子镜框可以有两种不同的设计。第1种设计采用云存储,如图11所示,用户的数据是存在云上的,相对成本较低,用户的数据的隐私保护没有第2种好。第2种设计,如图12所示,数据是存在本机上硬盘或者其他本地介质,可以实现用户数据的更安全的保护,但是相对成本较高。电子镜框可以连接投影仪,达到比较好的交互效果。电子镜框也可以连接打印机和光盘刻录机用于制作数字永生的物质载体。
本发明的创新点:
1.该系统对被询问者的个人信息进行整理以后,就可以建立被询问者的数字拷贝,这个数字拷贝包括被询问者的个人信息、多个脸部视频和语音。
2.个人信息收集和逻辑的特点:
使用一套精心设计的系统的问卷和对应的表格结构来系统地组织一个人的信息(生活经验,人际关系,偏爱者,态度,摘要,信仰等),用户既可以在1-2天内回答这些全部的问题,也可以每天作为日记连续回答这些问题。
这是一个基于问题的数据收集系统,而不是“间谍软件”:系统在尊重个人隐私的前提下询问个人信息,被询问者以自愿的方式记录他/她的重要个人信息,包括个人的主要经历、家庭和主要人际关系,个人喜好和梦想,遗憾和希望、个人的态度信仰和经验总结、个人的需要和性格、基础个人信息(姓名、籍贯等)、用户自由输入有价值的个人信息、以及个人的声音和短视频。它不是“间谍软件”(如其它有些软件通过微信,短信,通话记录等来获取个人信息),被询问者如果因个人隐私不想回答某些问题,可以跳过这些问题。
该系统可以根据被询问人的出生和成长情况,利用互联网数据库生成特定的问题,丰富每个被询问者的数据库。
3.个人问题问答逻辑
该系统在回答用户(真人)的问题的答案来自于被询问者(特定人)之前回答的信息,而不是像其他对话系统一样产生一个来自来自大型语料库数据的千篇一律的回答。
用户语音的保留,提取和视频匹配;
如果用户在回答APP的问题的过程中使用了语音输入,那么这些语音输入的语音片段将被服务器保留下来,当检索到某个问题的答案的时候这些语音片段会播放出来复原用户的原始声音。
根据真人的输入的语言和系统产生的语言(回答真人的问题或者自发语言)自动分析其情绪,然后调用用户本人相应的短视频。
4.本发明的成功和幸福建议功能是独创的,系统根据心理学中的共情原理(提取亲友可能的类似的经验)和相近原理(尽量提取可能的亲友的相关经验因为亲友和本人会有更多的背景的类似性,实在没有相关信息再提供一般的和用户无关的人员)对用户在生活工作学习中遇到的挫折和失败给出积极的建议。
5.本发明中的智能祭拜祈福功能是一项独创,可以通过动画和语音以用户的亲人身份给予用户安慰和慰籍,并可以通过计算机视觉自动识别用户的实际祭拜行为,增加了用户体验和真实感。
6.本发明中的健康建议也是独创,不同于普通的健康建议,本发明把亲人的疾病情况结合在健康建议中,更加贴近现实。
7.本发明中的安慰协助功能也是独创的,它可以以用户的亲人身份给予用户安慰,而不是其它产品以机器人或者陌生人的角色提供安慰,达到更好的安慰效果。
8.在亲人的回答方面,本发明考虑到了中国的文化因素或者某些用户直接和逝者进行对话的恐惧心理,所以用户可以选择电子查询师作为第三方来告诉用户逝者信息。没有这些恐惧心理用户可以选择直接和数字化的逝者进行对话。
9.本发明也提供了两种在实时(对话对象近日在线)和非实时(对话对象近日不在线)的独创的切换方式,运行用户和对方进行实时和非实时的交流。
10.个人隐私的保护:
将用户的密码和访问码分开:当一个用户希望添加其他用户的时候,他必须知道其他用户的账号(电子邮件或者电话号码)和该用户的访问码.访问码和用户的账户密码是不一样的,当系统检测到的用户设置的访问码和自己的密码一样的时候,系统将提示用户修改访问码,以增加系统的安全性;
用户可以管理哪些用户可以访问自己的数字拷贝,如果用户在列表里面看到不熟悉的或者不正确的其他用户(包括名字和电话号码电子邮件),可以进行筛出,便于加强个人隐私信息管理;
将用户的二维码和其他信息(如账号和访问码)分开:二维码只能够查到该用户的名字和获取本系统的方法,保护用户隐私。这个不同于其他的专利,比如CN110778208A:直接扫二维码就可以获取用户的很多信息。
Claims (6)
1.一种能部分实现数字永生并可与用户交互的系统,其特征在于:所述系统将用户A的二维码与访问码和账号分开,用户A的二维码只包含了他本人的名字和获取本系统的信息,由用户A或者托管他的账户的用户决定把还有账号和访问码的物质载体提供给哪些信任的亲友;所述系统包括:
记录模块,在用户A知晓的情况下询问用户A的个人信息并把这些个人信息存储到存储介质上,用户A是指想实现数字永生的用户,数字永生是指普通人在数字世界的永生,个人信息包括个人经历重要的生活事件、个人的家庭和主要人际关系、个人的声音和视频;所述记录模块通过回答问卷记录个人信息,在不侵犯他人肖像权和隐私的条件下,用户A也允许建立不是他本人的数字人,建立以后,用户A可以自用,也可以通过审批以后作为示例数字人公开;所述记录模块具体通过基于问题的数据收集系统的问卷和对应的表格结构来系统地组织一个人的信息,系统在尊重个人隐私的前提下询问个人信息,被询问者以自愿的方式记录他/她的重要个人信息,包括个人的主要经历、家庭和主要人际关系,个人喜好和梦想,遗憾和希望、个人的态度信仰和经验总结、个人的需要和性格、基础个人信息、用户A自由输入有价值的个人信息、以及个人的声音和短视频,若被询问者如果因个人隐私不想回答某些问题,则跳过这些问题,且根据被询问人的出生和成长情况,利用互联网数据库生成特定的问题,丰富每个被询问者的数据库;其中,用户A通过手机APP/电子镜框/电脑上的软件或者人工电话咨询,回答一套系统的问卷,且在用户A有方言或者使用电子产品不方便的情况下采用人工电话咨询,所述问卷的各个部分为各个表单;
亲友信息问答模块,用于当用户A不在线时,通过提取用户A的信息来回答用户B的问题,用户B是指当前使用系统的真人用户;所述亲友信息问答模块的运行步骤包括:第一步:读取用户B的名字,在用户A的亲友列表中寻找这个人并确定用户A和用户B之间的关系;第二步:通过关系得出相应的称呼词+合适的名字的部分;第三步:运行下列子模块:
子模块1:非个人问题和个人问题区分模块;
运用人工神经网络区分是个人问题还是非个人问题,如果区分出来是个人问题那么就进入子模块2;如果区分出来是非个人问题那么就进入子模块3;
子模块2:个人问题回答子模块,对问题的回答步骤:
第一步:提取问题中的关键词,如果没有提取到关键词,进入子模块3;
第二步:生成这些关键词的同义词;
第三步:根据关键词或者其同义词定位答案;假设有N个关键词及其同义词,在该数字人的各个表单寻找包含这些关键词或者同义词的格子,如果找到某个格子包含了问题的关键词或者同义词,则该格子被激活;如果0个格子被激活,则返回亲友信息问答模块的第一步,提示用户B没有找到相关的信息和更换个人问题的说法;如果还是不成功的话,则判定本人在输入这个信息的时候对应答案不完整;如果只有1个格子被激活,则该格子的内容作为返回的回答;如果多于1个格子被激活,那么:如果这多个格子都属于同一个表单,则返回多个格子的所有内容作为回答;如果这多个格子不是同一个表单,则返回表的名字让用户B选择,且为了减少往返问答的次数,根据表单的数值,询问用户B让用户B选择: 如果用户B选择了这些问题中某个表单,则返回该表单的激活的格子的内容作为回答的内容;如果用户B最终选择了都不是,则如果0个格子被激活,则返回亲友信息问答模块的第一步,提示用户B没有找到相关的信息和更换个人问题的说法;
第四步:对于不同类型的问题,在返回查到的信息前,系统加入相应的回答词语;其中,当检索到某个问题的答案的时,播放对应语音片段复原用户A的原始声音,且根据真人的输入的语言和系统产生的语言自动分析其情绪,然后调用用户A本人相应的短视频;
子模块3:非个人问题回答子模块;
第一步:提取问题中的关键词,如果没有提取到关键词,就回答我不明白你的意思,你能否换一个问题或者换一种说法;如果提取到关键词,就进入下面第二步;
第二步:根据关键词查找网络得到答案,如果查到答案就返回结果;如果查不到答案,就生成关键词同义词再次查找网络;如果还是没有答案,那么就返回更换一个问题或者换一种说法的提示;
所述亲友信息问答模块有两种回答方式,第一种是电子查询师查询,并且由电子查询师从第三者的角度回复相关内容;第二种是用户界面显示用户A的照片或者短视频并由用户A从第一人称的角度来回答问题;
在亲友信息问答模块中,当用户A在线时,用户B可以切换到和用户A直接聊天的切换功能;
成功和幸福建议模块,用于应用心理学中的共情原理和相近原理来给出积极的建议;所述成功和幸福建议模块包括子模块4和子模块5,子模块4用于根据用户B现在输入的生活事件给予相关的建议;子模块5用于该用户B亲友的成功或者幸福经验,当用户B点击该子模块5的按钮之后,系统搜索该用户B的所有的亲友的生活事件,并且用积极建议数据库判断这些该亲友应对负面生活事件的行为或者建议是积极的或者消极/中性的,如果是积极的应对行为或者建议,那么就把这些积极的应对行为或者建议返回给用户B;从亲友的角度给用户B提供积极的应对行为或者建议;
健康建议模块,用于根据收集到的用户B及其亲友的死因/疾病/习惯/爱好,以及他们的关系,给用户B提供本家族相关的健康建议;所述健康建议模块的运行步骤包括:
第1大步,查询由本系统的记录模块收集到的用户B及其亲友的死因/疾病/习惯/爱好,并得到相关结果;
第2大步,根据第1大步的结果,对所有的疾病按照疾病的严重性进行排序,将最严重的疾病列在最前面;
第3大步,判断第1大步和第2大步,把亲友的疾病情况结合在健康建议中,从用户B亲友的角度给出相应的健康建议;
祭拜祈福模块,用于提供电子智能祭拜功能,以逝去的亲友身份给予用户B心理上的安慰和慰藉,所述祭拜祈福模块的运行流程包括:
第一步:用户B打开系统的祭祀祈福按钮,并显示到一个或者多个用户A头像;
第二步:用户B选择需要祭祀的用户A,并运行以下子模块;
子模块6:祭拜提醒功能:
系统将在生日死亡日前夕提醒用户B进行祭拜;
子模块7:祭拜祈福交互功能:
第1步:在用户B选择开始祭拜以后,系统将呈现用户A的照片和祭祀场景;
第2步:系统通过界面上的文字或者第三方的声音提示用户B进行一些祭拜行为,如果系统的摄像头侦测到用户B有磕头作揖的祭拜行为或者系统的麦克风监测到用户B祝福用户A的语言,系统将呈现画面和动画;
第3步:如果系统的麦克风监测到用户B有和用户A的语言交流或者按下祈福按钮,系统将对用户B的语言输入进行分类:
1)如果是询问用户A的个人信息,则启动亲友信息问答模块;
2)如果是询问用户A现在的情况,则自动回答模式及其变式;
3)如果是用户B需要安慰或者协助,则启动安慰协助模块;
4)如果用户B的语言是祈福或者按下了祈福按钮,则自动启动用户A给用户B的保佑的词句;
以上步骤1)-4)运行结束以后,或者1)-4)都没有激活,则返回先辈保佑晚辈的语句;
第4步:在界面上显示一个发送按钮,用户B发送语音或者文字消息给系统里面的用户A,系统界面通过动画显示发送的过程,系统返回先辈保佑晚辈的语句。
2.如权利要求1所述的能部分实现数字永生并可与用户交互的系统,其特征在于:所述系统还包括:
安慰协助模块,当用户B对系统说的话里面出现需要安慰的关键词或者摄像头检测到用户B有不开心的表情,系统将以用户B的亲友的身份给予用户B一些安慰的话语;
场景聊天模块,用于根据不同的场景模拟用户A和用户B进行聊天交互;
语音模拟模块,用于模拟用户A的声音;
短视频调用模块,用于根据用户B的问题和用户A的回答的文字内容,分析其中的情感并调用用户A的相关短视频;
用户个人隐私保护模块,用于保护用户A的个人隐私信息;
通过记录模块记录用户A的个人信息,并且生成用户A的数字人,用户A的数字人可以和用户B进行简单的语言交互,能够回答用户B提出关于用户A的问题,从而从亲友的角度安慰用户B,并且给用户B提供亲友相关的帮助和慰籍。
3.如权利要求2所述的能部分实现数字永生并可与用户交互的系统,其特征在于:所述系统为一款APP,可以安装在手机、电脑、电子镜框、Pad或智能音箱上,用户B可以用自己的手机通过扫描存储介质上面的二维码下载APP,或者直接打开电脑/电子镜框/Pad/智能音箱,输入用户A提供的账号和访问码,如果账号和访问码均正确,那么用户A可以和用户B进行交互。
4.如权利要求1所述的能部分实现数字永生并可与用户交互的系统,其特征在于:所述安慰协助模块的运行步骤包括:
第一步:同亲友信息问答模块的第一步;
第二步:在亲友信息问答模块的第二步的基础上,在称呼的后面自动加上一些安慰的语句;
第三步:按照用户B的问题/句子里面的关键词进行分类,并根据用户B需要安慰的不同类别做出相应的基于用户A的回答;
如果用户B对和逝者直接对话有恐惧心理,用户B可以选择由第三方电子查询师转告。
5.如权利要求2所述的能部分实现数字永生并可与用户交互的系统,其特征在于:所述场景聊天模块的运行步骤包括:
第一步:利用安装系统的硬件上的摄像头或麦克风功能或者其它传感器,同时利用计算机视觉或者声音或者物联网信息和分类算法对真人用户B现在的活动进行分类,当前时间作为正确分类的一个辅助;
第二步:说话逻辑:描述分类的结果,分类的结果激活用户A的个人信息中相关内容,调用用户A和用户B的信息,并且调用和双方和当前激活场景都相关的一些生活经历;等待用户B回复,如果用户B有回复,则根据回复里面的关键词启动亲友信息问答模块或者安慰协助模块。
6.如权利要求2所述的能部分实现数字永生并可与用户交互的系统,其特征在于:所述语音模拟模块包括:
真实语音调用单元:如果用户A在回答系统的问卷的问题的过程中使用了语音输入,那么这些语音输入的语音片段将被服务器保留下来,当检索到某个问题的答案的时候这些语音片段会播放出来复原用户A的原始声音;
模拟语音单元:如果用户A在回答系统的问卷的问题的过程中使用了语音输入,那么这些语音输入的语音片段将作为训练模拟语音程序的训练数据输入。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010704148.9A CN111857343B (zh) | 2020-07-21 | 2020-07-21 | 一种能部分实现数字永生并可与用户交互的系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010704148.9A CN111857343B (zh) | 2020-07-21 | 2020-07-21 | 一种能部分实现数字永生并可与用户交互的系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111857343A CN111857343A (zh) | 2020-10-30 |
CN111857343B true CN111857343B (zh) | 2024-04-19 |
Family
ID=73001288
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010704148.9A Active CN111857343B (zh) | 2020-07-21 | 2020-07-21 | 一种能部分实现数字永生并可与用户交互的系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111857343B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113034328A (zh) * | 2021-03-26 | 2021-06-25 | 上海信洁照明科技有限公司 | 信息保存设备 |
CN114461067A (zh) * | 2021-12-29 | 2022-05-10 | 上海盛付通电子支付服务有限公司 | 用于追忆已故对象的方法、设备、介质及程序产品 |
CN115148187B (zh) * | 2022-07-01 | 2023-08-22 | 南京硅基智能科技有限公司 | 一种智能人物复刻终端的系统实现方法 |
CN115700873A (zh) * | 2022-07-01 | 2023-02-07 | 南京硅基智能科技有限公司 | 一种智能人物复刻终端 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103400054A (zh) * | 2013-08-27 | 2013-11-20 | 哈尔滨工业大学 | 计算机辅助心理咨询自动问答机器人系统 |
JP6656447B1 (ja) * | 2019-03-27 | 2020-03-04 | ダイコク電機株式会社 | 動画出力システム |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7603330B2 (en) * | 2006-02-01 | 2009-10-13 | Honda Motor Co., Ltd. | Meta learning for question classification |
US10838967B2 (en) * | 2017-06-08 | 2020-11-17 | Microsoft Technology Licensing, Llc | Emotional intelligence for a conversational chatbot |
-
2020
- 2020-07-21 CN CN202010704148.9A patent/CN111857343B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103400054A (zh) * | 2013-08-27 | 2013-11-20 | 哈尔滨工业大学 | 计算机辅助心理咨询自动问答机器人系统 |
JP6656447B1 (ja) * | 2019-03-27 | 2020-03-04 | ダイコク電機株式会社 | 動画出力システム |
Also Published As
Publication number | Publication date |
---|---|
CN111857343A (zh) | 2020-10-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111857343B (zh) | 一种能部分实现数字永生并可与用户交互的系统 | |
CN109416816B (zh) | 支持交流的人工智能系统 | |
Ross et al. | Conducting the reference interview | |
CN112119454B (zh) | 适应多个年龄组和/或词汇水平的自动助理 | |
Rymes | How we talk about language: Exploring citizen sociolinguistics | |
Chubb et al. | Interactive storytelling for children: A case-study of design and development considerations for ethical conversational AI | |
US9727555B2 (en) | Written word refinement system and method | |
US20140186818A1 (en) | Computer based system and method for assisting an interviewee in remembering and recounting information about a prior event using a cognitive interview and natural language processing | |
US20190295199A1 (en) | Intelligent legal simulator | |
Merritt | An analysis of the discourse of Internet trolling: A case study of Reddit. com | |
Hurley et al. | The construction of self in online support groups for victims of domestic violence | |
Parrill et al. | Observers use gesture to disambiguate contrastive expressions of preference | |
CN115186148A (zh) | 一种实现数字永生的人机交互系统及其方法 | |
Rohmahwati et al. | Violation of politeness maxims in the television series the big bang theory | |
Siregar | An analysis of imperative sentences in cruella movie | |
Recchiuto et al. | Designing an experimental and a reference robot to test and evaluate the impact of cultural competence in socially assistive robotics | |
KR20210108565A (ko) | 가상 콘텐츠 생성 방법 | |
JP7350384B1 (ja) | 対話システム、及び対話方法 | |
Piotrowska | Lockdown language: online communication in South Africa during the COVID-19 pandemic | |
Bruehler | Talking about self, God, and relationships: How first-year students use Christianese to construct identity at a faith-based university | |
Mostert | The liturgy of conversion: evangelism praxis in the Methodist churches of Cape Town | |
Albrighton | How to Write Clearly: Write with purpose, reach your reader and make your meaning crystal clear | |
Missaouib et al. | Interactive Storytelling for Children: A Case-study of Design and Development Considerations for Ethical Conversational AI | |
Armstrong | Evaluating trust levels of virtual assistants utilizing different communication channels | |
Ivey | Me and God, we are cool: reconciliation between religious and sexual identity among LGBT members |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20210831 Address after: 310000 room 3f-003, block B, No. 198, Qidi Road, Xiaoshan Economic and Technological Development Zone, Xiaoshan District, Hangzhou City, Zhejiang Province Applicant after: Xinxing Technology (Hangzhou) Co.,Ltd. Address before: 313099 room 1203, building 53, Tiansheng garden, Longwangshan Road, Wuxing District, Huzhou City, Zhejiang Province Applicant before: Pan Xiaoming |
|
TA01 | Transfer of patent application right | ||
GR01 | Patent grant | ||
GR01 | Patent grant |