CN113691595A - 交互界面生成方法、装置、计算机设备和存储介质 - Google Patents
交互界面生成方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN113691595A CN113691595A CN202110923041.8A CN202110923041A CN113691595A CN 113691595 A CN113691595 A CN 113691595A CN 202110923041 A CN202110923041 A CN 202110923041A CN 113691595 A CN113691595 A CN 113691595A
- Authority
- CN
- China
- Prior art keywords
- session
- voice
- target
- information
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000002452 interceptive effect Effects 0.000 title claims abstract description 95
- 238000000034 method Methods 0.000 title claims abstract description 49
- 230000003993 interaction Effects 0.000 claims abstract description 78
- 230000006870 function Effects 0.000 claims description 234
- 230000005540 biological transmission Effects 0.000 claims description 85
- 239000012634 fragment Substances 0.000 claims description 48
- 238000006243 chemical reaction Methods 0.000 claims description 29
- 238000004590 computer program Methods 0.000 claims description 28
- 238000011156 evaluation Methods 0.000 claims description 26
- 230000011218 segmentation Effects 0.000 claims description 9
- 230000001960 triggered effect Effects 0.000 claims description 7
- 238000012549 training Methods 0.000 description 42
- 238000010586 diagram Methods 0.000 description 10
- 238000007689 inspection Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 230000018109 developmental process Effects 0.000 description 5
- 230000011664 signaling Effects 0.000 description 5
- 238000005070 sampling Methods 0.000 description 4
- 238000011161 development Methods 0.000 description 3
- 238000012360 testing method Methods 0.000 description 3
- 241000533950 Leucojum Species 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 241001391944 Commicarpus scandens Species 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000011423 initialization method Methods 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/14—Session management
- H04L67/146—Markers for unambiguous identification of a particular session, e.g. session cookie or URL-encoding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L13/00—Speech synthesis; Text to speech systems
- G10L13/02—Methods for producing synthetic speech; Speech synthesisers
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/14—Session management
- H04L67/141—Setup of application sessions
Abstract
本申请涉及一种交互界面生成方法、装置、计算机设备和存储介质。所述方法包括:接收会话交互请求,所述会话交互请求携带会话主题标识;从候选界面功能模块集合中,获取与所述会话主题标识对应的一个或者多个目标界面功能模块;获取各个所述目标界面功能模块对应的目标功能组件以及所述目标功能组件对应的文本描述信息;将所述目标功能组件以及所述文本描述信息作为交互界面的展示内容,生成目标交互界面,并设置所述目标界面功能模块与所述目标功能组件的对应关系,以在通过目标交互界面接收到针对所述目标功能组件的触发操作时,调用所述目标界面功能模块执行对应的功能。采用本方法能够提高交互界面生成效率。
Description
技术领域
本申请涉及计算机技术领域,特别是涉及一种交互界面生成方法、装置、计算机设备和存储介质。
背景技术
随着前端开发技术的发展,交互技术也得到了快速的发展,交互技术是指客户端与服务器进行协同工作完成某项任务的技术。具体地,运行在会话终端上的智能机器人,需要借助于前端模块和后端模块实现智能机器人界面组件功能,前端模块是指能够使会话终端上界面所在页面运行的模块,后端模块是指能够使界面上的界面组件功能实现的底层模块,通过前端模块和后端模块进行交互,以使智能机器人界面上的界面组件实现功能。
然而,目前的交互界面生成方法,存在界面生成效率低问题。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高界面生成效率的交互界面生成方法、装置、计算机设备和存储介质。
一种交互界面生成方法,所述方法包括:接收会话交互请求,所述会话交互请求携带会话主题标识;从候选界面功能模块集合中,获取与所述会话主题标识对应的一个或者多个目标界面功能模块;获取各个所述目标界面功能模块对应的目标功能组件以及所述目标功能组件对应的文本描述信息;将所述目标功能组件以及所述文本描述信息作为交互界面的展示内容,生成目标交互界面,并设置所述目标界面功能模块与所述目标功能组件的对应关系,以在通过目标交互界面接收到针对所述目标功能组件的触发操作时,调用所述目标界面功能模块执行对应的功能。
在其中一个实施例中,所述从候选界面功能模块集合中,获取与所述会话主题标识对应的一个或者多个目标界面功能模块包括:获取与所述会话主题标识对应的模块组合标识;从所述候选界面功能模块集合中,获取所述模块组合标识所对应的预先组合得到的功能模块组合,作为与所述会话主题标识对应的目标界面功能模块。
在其中一个实施例中,所述目标界面功能模块包括连接网关模块和会话服务模块,所述会话服务模块对应的目标功能组件包括会话开始组件,所述方法还包括:接收会话交互请求,所述会话交互请求携带所述会话主题标识,所述会话交互请求是接收到针对所述会话开始组件的触发操作触发的;调用所述会话服务模块响应于所述会话交互请求,生成对应的目标会话标识,获取所述会话主题标识对应的会话相关数据,建立所述目标会话标识与所述会话相关数据的对应关系,所述会话相关数据包括会话内容信息以及针对所述会话内容信息的标准回复内容;调用连接网关模块基于所述目标会话标识与所述会话终端建立数据传输通道,通过所述数据传输通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端;调用所述连接网关模块通过所述数据传输通道接收所述会话终端发送的用户语音信息以及所述目标会话标识;调用所述会话服务模块获取基于所述用户语音信息得到的用户回复内容,基于所述目标会话标识获取所述标准回复内容,以将所述用户回复内容与所述标准回复内容进行对比,得到会话评估结果。
在其中一个实施例中,所述方法还包括:调用会话控制模块从所述会话服务模块获取文本形式的所述会话内容信息,将所述会话内容信息进行语音转换,得到语音形式的所述机器人会话信息,将所述机器人会话信息发送给所述连接网关模块;调用会话控制模块获取所述连接网关模块接收的所述用户语音信息,对所述用户语音信息进行文本转换,得到所述用户回复内容,将所述用户回复内容发送至所述会话服务模块。
在其中一个实施例中,所述将所述会话内容信息进行语音转换,得到语音形式的所述机器人会话信息,将所述机器人会话信息发送给所述连接网关模块包括:将所述会话内容信息进行语音转换,得到机器人对应的会话语音信息;对所述会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列,将所述语音片段序列作为所述机器人会话信息;通过所述连接网关模块将所述语音片段序列发送给所述会话终端,以使得所述会话终端对所述语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个所述语音片段对应的符合播放条件的语音播放单元;所述会话终端在会话界面上展示所述会话语音信息对应的语音提示信息,当满足所述语音提示信息的语音播放条件时,按照所述语音片段序列中的顺序,播放所述语音片段对应的语音播放单元。
在其中一个实施例中,所述基于所述目标会话标识与所述会话终端建立数据传输通道包括:基于所述目标会话标识与所述会话终端建立实时会话语音通道以及额外消息传输通道;所述通过所述数据传输通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端包括:通过所述实时对话语音通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端;所述连接网关模块还用于:通过所述额外消息传输通道将所述会话评估结果发送至所述会话终端。
在其中一个实施例中,所述对所述会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列包括:获取所述会话语音信息对应的切分得到的当前语音片段的播放时长;根据所述播放时长确定所述当前语音片段对应的下一语音片段的片段时长,所述片段时长所对应的语音传输时长小于所述播放时长;基于所述片段时长从所述会话语音信息中切分得到所述当前语音片段对应的下一语音片段。
一种交互界面生成装置,所述装置包括:会话交互请求接收模块,用于接收会话交互请求,所述会话交互请求携带会话主题标识;目标界面功能模块获取模块,用于从候选界面功能模块集合中,获取与所述会话主题标识对应的一个或者多个目标界面功能模块;组件及信息获取模块,用于获取各个所述目标界面功能模块对应的目标功能组件以及所述目标功能组件对应的文本描述信息;目标交互界面生成模块,用于将所述目标功能组件以及所述文本描述信息作为交互界面的展示内容,生成目标交互界面,并设置所述目标界面功能模块与所述目标功能组件的对应关系,以在通过目标交互界面接收到针对所述目标功能组件的触发操作时,调用所述目标界面功能模块执行对应的功能。
在其中一个实施例中,目标界面功能模块,用于获取与所述会话主题标识对应的模块组合标识;从所述候选界面功能模块集合中,获取所述模块组合标识所对应的预先组合得到的功能模块组合,作为与所述会话主题标识对应的目标界面功能模块。
在其中一个实施例中,所述交互界面生成装置,用于接收会话交互请求,所述会话交互请求携带所述会话主题标识,所述会话交互请求是接收到针对所述会话开始组件的触发操作触发的;调用所述会话服务模块响应于所述会话交互请求,生成对应的目标会话标识,获取所述会话主题标识对应的会话相关数据,建立所述目标会话标识与所述会话相关数据的对应关系,所述会话相关数据包括会话内容信息以及针对所述会话内容信息的标准回复内容;调用连接网关模块基于所述目标会话标识与所述会话终端建立数据传输通道,通过所述数据传输通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端;调用所述连接网关模块通过所述数据传输通道接收所述会话终端发送的用户语音信息以及所述目标会话标识;调用所述会话服务模块获取基于所述用户语音信息得到的用户回复内容,基于所述目标会话标识获取所述标准回复内容,以将所述用户回复内容与所述标准回复内容进行对比,得到会话评估结果。
在其中一个实施例中,所述装置,用于调用会话控制模块从所述会话服务模块获取文本形式的所述会话内容信息,将所述会话内容信息进行语音转换,得到语音形式的所述机器人会话信息,将所述机器人会话信息发送给所述连接网关模块;调用会话控制模块获取所述连接网关模块接收的所述用户语音信息,对所述用户语音信息进行文本转换,得到所述用户回复内容,将所述用户回复内容发送至所述会话服务模块。
在其中一个实施例中,所述装置,用于将所述会话内容信息进行语音转换,得到机器人对应的会话语音信息;对所述会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列,将所述语音片段序列作为所述机器人会话信息;通过所述连接网关模块将所述语音片段序列发送给所述会话终端,以使得所述会话终端对所述语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个所述语音片段对应的符合播放条件的语音播放单元;所述会话终端在会话界面上展示所述会话语音信息对应的语音提示信息,当满足所述语音提示信息的语音播放条件时,按照所述语音片段序列中的顺序,播放所述语音片段对应的语音播放单元。
在其中一个实施例中,所述装置,用于基于所述目标会话标识与所述会话终端建立实时会话语音通道以及额外消息传输通道;通过所述实时对话语音通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端;通过所述额外消息传输通道将所述会话评估结果发送至所述会话终端。
在其中一个实施例中,所述装置,用于获取所述会话语音信息对应的切分得到的当前语音片段的播放时长;根据所述播放时长确定所述当前语音片段对应的下一语音片段的片段时长,所述片段时长所对应的语音传输时长小于所述播放时长;基于所述片段时长从所述会话语音信息中切分得到所述当前语音片段对应的下一语音片段。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:接收会话交互请求,所述会话交互请求携带会话主题标识;从候选界面功能模块集合中,获取与所述会话主题标识对应的一个或者多个目标界面功能模块;获取各个所述目标界面功能模块对应的目标功能组件以及所述目标功能组件对应的文本描述信息;将所述目标功能组件以及所述文本描述信息作为交互界面的展示内容,生成目标交互界面,并设置所述目标界面功能模块与所述目标功能组件的对应关系,以在通过目标交互界面接收到针对所述目标功能组件的触发操作时,调用所述目标界面功能模块执行对应的功能。
在其中一个实施例中,所述处理器执行所述计算机程序时实现以下步骤:获取与所述会话主题标识对应的模块组合标识;从所述候选界面功能模块集合中,获取所述模块组合标识所对应的预先组合得到的功能模块组合,作为与所述会话主题标识对应的目标界面功能模块。
在其中一个实施例中,所述处理器执行所述计算机程序时实现以下步骤:接收会话交互请求,所述会话交互请求携带所述会话主题标识,所述会话交互请求是接收到针对所述会话开始组件的触发操作触发的;调用所述会话服务模块响应于所述会话交互请求,生成对应的目标会话标识,获取所述会话主题标识对应的会话相关数据,建立所述目标会话标识与所述会话相关数据的对应关系,所述会话相关数据包括会话内容信息以及针对所述会话内容信息的标准回复内容;调用连接网关模块基于所述目标会话标识与所述会话终端建立数据传输通道,通过所述数据传输通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端;调用所述连接网关模块通过所述数据传输通道接收所述会话终端发送的用户语音信息以及所述目标会话标识;调用所述会话服务模块获取基于所述用户语音信息得到的用户回复内容,基于所述目标会话标识获取所述标准回复内容,以将所述用户回复内容与所述标准回复内容进行对比,得到会话评估结果。
在其中一个实施例中,所述处理器执行所述计算机程序时实现以下步骤:调用会话控制模块从所述会话服务模块获取文本形式的所述会话内容信息,将所述会话内容信息进行语音转换,得到语音形式的所述机器人会话信息,将所述机器人会话信息发送给所述连接网关模块;调用会话控制模块获取所述连接网关模块接收的所述用户语音信息,对所述用户语音信息进行文本转换,得到所述用户回复内容,将所述用户回复内容发送至所述会话服务模块。
在其中一个实施例中,所述处理器执行所述计算机程序时实现以下步骤:将所述会话内容信息进行语音转换,得到机器人对应的会话语音信息;对所述会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列,将所述语音片段序列作为所述机器人会话信息;通过所述连接网关模块将所述语音片段序列发送给所述会话终端,以使得所述会话终端对所述语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个所述语音片段对应的符合播放条件的语音播放单元;所述会话终端在会话界面上展示所述会话语音信息对应的语音提示信息,当满足所述语音提示信息的语音播放条件时,按照所述语音片段序列中的顺序,播放所述语音片段对应的语音播放单元。
在其中一个实施例中,所述处理器执行所述计算机程序时实现以下步骤:基于所述目标会话标识与所述会话终端建立实时会话语音通道以及额外消息传输通道;通过所述实时对话语音通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端;通过所述额外消息传输通道将所述会话评估结果发送至所述会话终端。
在其中一个实施例中,所述处理器执行所述计算机程序时实现以下步骤:获取所述会话语音信息对应的切分得到的当前语音片段的播放时长;根据所述播放时长确定所述当前语音片段对应的下一语音片段的片段时长,所述片段时长所对应的语音传输时长小于所述播放时长;基于所述片段时长从所述会话语音信息中切分得到所述当前语音片段对应的下一语音片段。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:接收会话交互请求,所述会话交互请求携带会话主题标识;从候选界面功能模块集合中,获取与所述会话主题标识对应的一个或者多个目标界面功能模块;获取各个所述目标界面功能模块对应的目标功能组件以及所述目标功能组件对应的文本描述信息;将所述目标功能组件以及所述文本描述信息作为交互界面的展示内容,生成目标交互界面,并设置所述目标界面功能模块与所述目标功能组件的对应关系,以在通过目标交互界面接收到针对所述目标功能组件的触发操作时,调用所述目标界面功能模块执行对应的功能。
在其中一个实施例中,所述计算机程序被处理器执行时实现以下步骤:获取与所述会话主题标识对应的模块组合标识;从所述候选界面功能模块集合中,获取所述模块组合标识所对应的预先组合得到的功能模块组合,作为与所述会话主题标识对应的目标界面功能模块。
在其中一个实施例中,所述计算机程序被处理器执行时实现以下步骤:接收会话交互请求,所述会话交互请求携带所述会话主题标识,所述会话交互请求是接收到针对所述会话开始组件的触发操作触发的;调用所述会话服务模块响应于所述会话交互请求,生成对应的目标会话标识,获取所述会话主题标识对应的会话相关数据,建立所述目标会话标识与所述会话相关数据的对应关系,所述会话相关数据包括会话内容信息以及针对所述会话内容信息的标准回复内容;调用连接网关模块基于所述目标会话标识与所述会话终端建立数据传输通道,通过所述数据传输通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端;调用所述连接网关模块通过所述数据传输通道接收所述会话终端发送的用户语音信息以及所述目标会话标识;调用所述会话服务模块获取基于所述用户语音信息得到的用户回复内容,基于所述目标会话标识获取所述标准回复内容,以将所述用户回复内容与所述标准回复内容进行对比,得到会话评估结果。
在其中一个实施例中,所述计算机程序被处理器执行时实现以下步骤:调用会话控制模块从所述会话服务模块获取文本形式的所述会话内容信息,将所述会话内容信息进行语音转换,得到语音形式的所述机器人会话信息,将所述机器人会话信息发送给所述连接网关模块;调用会话控制模块获取所述连接网关模块接收的所述用户语音信息,对所述用户语音信息进行文本转换,得到所述用户回复内容,将所述用户回复内容发送至所述会话服务模块。
在其中一个实施例中,所述计算机程序被处理器执行时实现以下步骤:将所述会话内容信息进行语音转换,得到机器人对应的会话语音信息;对所述会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列,将所述语音片段序列作为所述机器人会话信息;通过所述连接网关模块将所述语音片段序列发送给所述会话终端,以使得所述会话终端对所述语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个所述语音片段对应的符合播放条件的语音播放单元;所述会话终端在会话界面上展示所述会话语音信息对应的语音提示信息,当满足所述语音提示信息的语音播放条件时,按照所述语音片段序列中的顺序,播放所述语音片段对应的语音播放单元。
在其中一个实施例中,所述计算机程序被处理器执行时实现以下步骤:基于所述目标会话标识与所述会话终端建立实时会话语音通道以及额外消息传输通道;通过所述实时对话语音通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端;通过所述额外消息传输通道将所述会话评估结果发送至所述会话终端。
在其中一个实施例中,所述计算机程序被处理器执行时实现以下步骤:获取所述会话语音信息对应的切分得到的当前语音片段的播放时长;根据所述播放时长确定所述当前语音片段对应的下一语音片段的片段时长,所述片段时长所对应的语音传输时长小于所述播放时长;基于所述片段时长从所述会话语音信息中切分得到所述当前语音片段对应的下一语音片段。
上述交互界面生成方法、装置、计算机设备和存储介质,通过接收会话交互请求,该会话交互请求携带会话主题标识;从候选界面功能模块集合中,获取与会话主题标识对应的一个或者多个目标界面功能模块;获取各个目标界面功能模块对应的目标功能组件以及目标功能组件对应的文本描述信息;将目标功能组件以及文本描述信息作为交互界面的展示内容,生成目标交互界面,并设置目标界面功能模块与目标功能组件的对应关系,以在通过目标交互界面接收到针对上述目标功能组件的触发操作时,调用目标界面功能模块执行对应的功能。由于可以基于会话主题标识确定界面功能模块,而且能够获取各个界面功能模块对应的功能组件,因此可以快速生成该会话主题标识对应的交互界面,达到提高界面生成效率的目的,而且在通过目标交互界面接收到针对上述目标功能组件的触发操作时,调用目标界面功能模块执行对应的功能,因此使得通过生成的目标交互界面能够实现对应的交互功能。
附图说明
图1为一个实施例中交互界面生成方法的应用环境图;
图2为一个实施例中交互界面生成方法的流程示意图;
图3为一个实施例中目标界面功能模块得到步骤的流程示意图;
图4为一个实施例中会话评估结果得到方法的流程示意图;
图5为另一个实施例中交互界面生成方法的流程示意图;
图6为一个实施例中会话内容信息发送的流程示意图;
图7为一个实施例中确定语音片段的流程示意图;
图8为一个实施例中模块调用示意图;
图9为一个实施例中模块调用示意图;
图10为一个实施例中交互界面生成装置的结构框图;
图11为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的交互界面生成方法,可以应用于如图1所示的应用环境中,具体应用到一种交互系统中。该交互系统包括终端102和服务器104,其中,终端102通过网络与服务器104进行通信。服务器104执行一种交互界面生成方法,具体的,服务器104接收终端102发送的会话交互请求,该会话交互请求携带会话主题标识;从候选界面功能模块集合中,获取与上述会话主题标识对应的一个或者多个目标界面功能模块;获取各个目标界面功能模块对应的目标功能组件以及目标功能组件对应的文本描述信息;将该目标功能组件以及该文本描述信息作为交互界面的展示内容,生成目标交互界面,并设置目标界面功能模块与目标功能组件的对应关系,以在通过目标交互界面接收到针对目标功能组件的触发操作时,调用目标界面功能模块执行对应的功能。其中,终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备,服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种交互界面生成方法,以该方法应用于图1中的服务器为例进行说明,包括以下步骤:
步骤S202,接收会话交互请求,该会话交互请求携带会话主题标识。
其中,会话交互请求是指请求进行会话交互的指令;会话主题标识是指能够体现会话主题的识别标记,会话主题是指会话的主要内容。例如,会话的主要内容为某个学科的考试题目,则会话主题为该学科的试卷。
具体地,在终端与服务器进行交互时,终端发送会话交互请求给服务器,相应地,服务器接收该会话交互请求,该会话交互请求携带会话主题标识。
在一个实施例中,服务器与相应终端具有唯一的应用程序接口,通过端口监控函数,对该接口发送或者接收的请求进行监测,当监测到上述应用程序接口存在终端发送的会话交互请求时,接收该会话交互请求。
步骤S204,从候选界面功能模块集合中,获取与会话主题标识对应的一个或者多个目标界面功能模块。
其中,界面功能模块是指能够使界面实现界面功能的模块,例如在界面上设置有录音功能的按钮,与该按钮对应的界面功能模块为录音模块,当该按钮接收触发操作时,调用该录音模块,实现录音功能。
具体地,服务器接收携带会话主题标识的会话交互请求后,通过会话主题标识与目标界面功能模块之间的对应关系,从候选界面功能模块集合中,获取与会话主题标识对应的目标界面功能模块。
在一个实施例中,一个会话主题标识对应于多个目标界面功能模块,该多个目标界面功能模块可以作为一个整体,在确定会话主题标识的情况下,可以同时调用多个目标界面功能模块。例如,会话主题标识为培训考试题目001,与该会话主题标识对应的目标界面功能模块为考试模块,该考试模块是由多个目标界面功能模块组成的,例如,数据请求模块、录音模块或者播放模块等;当服务器接收到培训考试题目001的会话主题标识时,调用数据请求模块、录音模块或者播放模块等组成的整体的考试模块。
步骤S206,获取各个目标界面功能模块对应的目标功能组件以及目标功能组件对应的文本描述信息。
其中,功能组件是指能够起到界面功能的组件;例如,界面上能起到录音功能的录音按钮或者能起到会话开始功能的开始按钮等。文本描述信息是指对上述功能组件进行功能描述的文字信息;例如,具有录音功能的功能组件,在该功能组件上有进行功能描述的文字信息“录音”。
具体地,服务器在获取到一个或者多个目标界面功能模块之后,根据各个目标界面功能模块与目标功能组件之间的对应关系,获取到各个目标界面功能模块对应的目标功能组件以及目标功能组件对应的文本描述信息。
步骤S208,将目标功能组件以及文本描述信息作为交互界面的展示内容,生成目标交互界面,并设置目标界面功能模块与目标功能组件的对应关系,以在通过目标交互界面接收到针对目标功能组件的触发操作时,调用目标界面功能模块执行对应的功能。
具体地,服务器获取到目标功能组件以及目标功能组件对应的文本描述信息之后,将目标功能组件以及文本描述信息作为交互界面的展示内容,生成目标交互界面,利用目标界面功能模块的标识与目标功能组件标识之间的对应关系,以在通过目标交互界面接收到针对目标功能组件的触发操作时,调用目标界面功能模块执行对应的功能。例如,当接收到对“录音”按钮的操作时,能够调用录音模块进行录音。
上述交互界面生成方法中,通过接收会话交互请求,该会话交互请求携带会话主题标识;从候选界面功能模块集合中,获取与会话主题标识对应的一个或者多个目标界面功能模块;获取各个目标界面功能模块对应的目标功能组件以及目标功能组件对应的文本描述信息;将目标功能组件以及文本描述信息作为交互界面的展示内容,生成目标交互界面,并设置目标界面功能模块与目标功能组件的对应关系,以在通过目标交互界面接收到针对上述目标功能组件的触发操作时,调用目标界面功能模块执行对应的功能。由于可以基于会话主题标识确定界面功能模块,而且能够获取各个界面功能模块对应的功能组件,因此可以快速生成该会话主题标识对应的交互界面,达到提高界面生成效率的目的,而且在通过目标交互界面接收到针对上述目标功能组件的触发操作时,调用目标界面功能模块执行对应的功能,因此使得通过生成的目标交互界面能够实现对应的交互功能。
在一个实施例中,如图3所示,从候选界面功能模块集合中,获取与会话主题标识对应的一个或者多个目标界面功能模块包括:
步骤S302,获取与会话主题标识对应的模块组合标识。
其中,模块组合标识是指能够唯一确定模块组合的标记;例如,会话主题标识为培训考试题目001,对应的模块组合标识为培训模块001。
具体地,会话主题标识与模块组合标识之间存在有一一对应关系,服务器获取会话主题标识后,根据上述对应关系,获取模块组合标识。
步骤S304,从候选界面功能模块集合中,获取模块组合标识所对应的预先组合得到的功能模块组合,作为与会话主题标识对应的目标界面功能模块。
具体地,服务器在获取模块组合标识之后,模块组合标识对应于相应的功能模块组合,该功能模块组合为上述会话主题标识对应的目标界面功能模块。例如,模块组合标记为001,该模块组合标记对应的功能模块组合为模块A、模块B和模块C,则模块A、模块B和模块C为与会话主题标识对应的目标界面功能模块。
本实施例中,通过获取与会话主题标识对应的模块组合标识,从候选界面功能模块集合中,获取模块组合标识所对应的预先组合得到的功能模块组合,作为与会话主题标识对应的目标界面功能模块,能够达到准确获取与会话主题标识对应的目标界面功能模块的目的,提高交互的效率。
在一个实施例中,如图4所示,目标界面功能模块包括连接网关模块和会话服务模块,会话服务模块对应的目标功能组件包括会话开始组件,上述交互界面生成方法还包括:
步骤S402,接收会话交互请求,该会话交互请求携带会话主题标识,该会话交互请求是接收到针对会话开始组件的触发操作触发的。
具体地,终端界面上展示有会话开始组件,当该会话开始组件接收到触发操作触发时,服务器发送会话交互请求,相应的,服务器接收到该会话交互请求,该会话交互请求中携带会话主题标识。
步骤S404,调用会话服务模块响应于会话交互请求,生成对应的目标会话标识,获取会话主题标识对应的会话相关数据,建立目标会话标识与会话相关数据的对应关系,该会话相关数据包括会话内容信息以及针对会话内容信息的标准回复内容。
具体地,当服务器接收到终端发送的会话交互请求时,调用会话服务模块响应于会话交互请求,通过会话标识生成策略生成对应的目标会话标识,通过该目标会话标识、会话主题标识和会话相关数据之间的对应关系,获取到会话主题标识对应的会话相关数据,该会话相关数据包括会话内容信息以及会话内容信息的标准回复内容。
在一个实施例中,通过服务器接收到会话请求携带的会话请求发起的时间戳和本机IP(Internet Protocol)地址,生成对应的目标会话标识;再根据会话请求中携带的会话主题标识,得到会话主题标识对应的会话相关数据,该会话相关数据包括会话内容信息以及会话内容信息的标准回复内容。例如,机器人中的会话内容信息为培训题目,标准回复内容为推荐话术,该推荐话术可以理解为针对于培训题目得到的标准答案。
步骤S406,调用连接网关模块基于目标会话标识与会话终端建立数据传输通道,通过数据传输通道将会话内容信息对应的机器人会话信息发送至会话终端。
具体地,在服务器基于会话交互请求生成目标会话标识后,可以通过该目标会话标识与会话终端建立数据传输通道。在服务器和会话终端建立数据传输通道后,可以通过该数据传输通道将会话内容信息对应的机器人会话信息发送至会话终端。
在一个实施例中,数据传输通道包括实时会话语音通道,通过该实时会话语音通道将会话内容信息对应的机器人会话信息发送至会话终端。
步骤S408,调用连接网关模块通过数据传输通道接收会话终端发送的用户语音信息以及目标会话标识。
具体地,在服务器和会话终端建立数据传输通道后,可以调用连接网关模块通过数据传输通道接收会话终端发送的用户语音信息以及目标会话标识。
步骤S410,调用会话服务模块获取基于用户语音信息得到的用户回复内容,基于目标会话标识获取标准回复内容,以将用户回复内容与标准回复内容进行对比,得到会话评估结果。
具体地,当服务器通过数据传输通道接收会话终端发送的用户语音信息以及目标会话标识后,通过该用户语音信息与用户回复信息之间的转换关系,调用会话服务模块,得到用户回复内容。根据目标会话标识与标准回复内容之间的对应关系,得到标准回复内容。将用户回复内容与标准回复内容进行对比,得到会话评估结果。
在一个实施例中,对用户回复内容与标准回复内容分别进行语义分析,根据语义分析后的用户回复内容与语义分析后的标准回复内容之间的匹配度,得到会话评估结果。匹配度与会话评估结果之间存在正相关关系,例如,语义分析后的用户回复内容与语义分析后的标准回复内容之间的匹配度为90%,对应的会话评估结果为90分,匹配度为80%,对应的会话评估结果为80分。
在一个实施例中,数据传输通道包括额外消息传输通道,通过该额外消息传输通道将会话评估结果发送给会话终端。
本实施例中,通过接收终端发送的会话交互请求,该会话交互请求携带会话主题标识,响应于该会话交互请求,生成对应的目标会话标识,获取会话主题标识对应的会话相关数据,建立目标会话标识与会话相关数据的对应关系,该会话相关数据包括会话内容信息以及会话内容信息的标准回复内容,基于目标会话标识与会话终端建立数据传输通道,通过数据传输通道将会话内容信息对应的机器人会话信息发送至会话终端,通过数据传输通道接收会话终端发送的用户语音信息以及目标会话标识,获取基于用户语音信息得到的用户回复内容,基于目标会话标识获取标准回复内容,将用户回复内容与标准回复内容进行对比,得到会话评估结果。能够达到提高得到会话评估结果稳定性的目的。
在一个实施例中,如图5所示,上述交互界面生成方法还包括:
步骤S502,调用会话控制模块从会话服务模块获取文本形式的会话内容信息,将会话内容信息进行语音转换,得到语音形式的机器人会话信息,将机器人会话信息发送给连接网关模块。
具体地,调用会话控制模块可以用于获取节点信息,并根据节点信息确定相关的实现方式。例如,获取的节点信息为机器人节点,则会话控制模块从获取文本形式的会话内容信息,将会话内容信息进行语音转换,得到语音形式的机器人会话信息,将语音形式的机器人会话信息发送给连接网关模块。
在一个实施例中,会话控制模块通过接收上述会话服务模块的信息,获得节点信息,会话服务模块获得到节点标识,通过节点标识与节点类型之间的对应关系,将节点标识和节点类型进行封装,得到节点信息,该节点信息中包括有机器人节点和用户节点,针对节点的不同,会话控制模块确定不同的实现方式。
步骤S504,调用会话控制模块获取连接网关模块接收的用户语音信息,对用户语音信息进行文本转换,得到用户回复内容,将用户回复内容发送至会话服务模块。
具体地,服务器获取的节点信息为用户节点时,则对用户语音信息进行文本转换,得到用户回复内容,将用户回复内容发送至会话服务模块。
本实施例中,通过调用会话控制模块从会话服务模块获取文本形式的会话内容信息,将会话内容信息进行语音转换,得到语音形式的所述机器人会话信息,将机器人会话信息发送给连接网关模块,调用会话控制模块获取连接网关模块接收的用户语音信息,对用户语音信息进行文本转换,得到用户回复内容,将用户回复内容发送至会话服务模块,能够达到调用不同模块实现不同的会话功能的目的。
在一个实施例中,如图6所示,将会话内容信息进行语音转换,得到语音形式的机器人会话信息,将机器人会话信息发送给连接网关模块包括:
步骤S602,将会话内容信息进行语音转换,得到机器人对应的会话语音信息。
具体地,在服务器接收到会话内容信息之后,将该会话内容信息进行语音转换,得到机器人对应的会话语音信息。
步骤S604,对会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列,将语音片段序列作为机器人会话信息。
具体地,服务器在获取到机器人对应的会话语音信息后,根据预设语音信息大小对会话语音信息进行切分,并且根据语音的时序顺序对切分得到的语音片段进行排列,得到语音片段序列。将语音片段序列作为机器人会话信息。
步骤S606,通过连接网关模块将语音片段序列发送给会话终端,以使得会话终端对所述语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个语音片段对应的符合播放条件的语音播放单元;该会话终端在会话界面上展示会话语音信息对应的语音提示信息,当满足语音提示信息的语音播放条件时,按照语音片段序列中的顺序,播放语音片段对应的语音播放单元。
具体地,服务器在获取到机器人对应的会话语音信息并对会话语音信息进行切分得到语音片段序列之后,调用连接网关模块将语音片段序列按照先后顺序一段一段地发送给机器人对应的会话终端,以使得终端对语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个语音片段对应的符合播放条件的语音播放单元;会话终端在会话界面上展示会话语音信息对应的语音提示信息,当满足语音提示信息的语音播放条件时,按照语音片段序列中的顺序,播放语音片段对应的语音播放单元。其中,语音播放格式信息是指能够使语音片段具有播放功能的信息。例如,在语音片段后添加WAV头部,添加WAV头部后的语音片段,具备播放功能等。携带有WAV的声音文件,为一种标准数字音频文件。语音播放单元是能够独立播放的语音单元。语音提示信息是指提示存在语音信息的信息。例如,会话语音信息时长等。
在一个实施例中,服务器根据预设语音信息大小对会话语音信息进行切分,其中的预设语音信息大小小于最大传输单元MTU(Maximun Transfer Unit)。假设服务器获取到的会话语音信息大小本身小于最大传输单元MTU,则直接发送给会话终端,不进行切分。
本实施例中,通过将会话内容信息进行语音转换,得到机器人对应的会话语音信息,对会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列,将语音片段序列作为机器人会话信息,通过连接网关模块将语音片段序列发送给会话终端,以使得会话终端对所述语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个语音片段对应的符合播放条件的语音播放单元;该会话终端在会话界面上展示会话语音信息对应的语音提示信息,当满足语音提示信息的语音播放条件时,按照语音片段序列中的顺序,播放语音片段对应的语音播放单元,能够达到在发送会话语音信息时,对该会话语音信息进行切分,将切分得到的语音片段序列发送给智能机器人对应的终端,由于切分后的语音片段序列可以是一段一段的进行传输,因此会话终端可以根据已接收到的语音片段播放语音,减少语音会话时的卡顿现象,提高了语音会话的流畅度。
在一个实施例中,基于目标会话标识与终端建立数据传输通道包括:基于目标会话标识与会话终端建立实时会话语音通道以及额外消息传输通道;通过数据传输通道将会话内容信息对应的机器人会话信息发送至会话终端包括:通过实时对话语音通道将会话内容信息对应的机器人会话信息发送至会话终端;上述连接网关模块还用于:通过额外消息传输通道将会话评估结果发送至会话终端。
其中,额外消息传输通道是指用于传输实时会话语音之外的消息的通道。例如,额外消息传输通道用于传输信令或者会话评估结果的至少一个等。
具体地,服务器基于目标会话标识与会话终端建立数据传输通道,该数据传输通道包括两个传输通道,两个通道传输相互分开,互不影响。其中一个传输通道用于传输会话内容信息对应的机器人会话信息,该传输通道为实时对话语音通道;另一个传输通道用于传输信令或者会话评估结果等,该传输通道为额外消息传输通道,通过该通道可以将会话评估结果发送至会话终端。
本实施例中,通过建立实时会话语音通道以及额外消息传输通道,分别利用上述不同的两种通道传输不同的信息类型,通过两种通道将语音和文本分开传输,能够达到增强系统健壮性的目的。
在一个实施例中,如图7所示,对会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列包括:
步骤S702,获取会话语音信息对应的切分得到的当前语音片段的播放时长。
具体地,服务器能够通过音频监听插件获取到会话语音信息对应的切分得到的当前语音片段的播放时长,并将播放时长存储到本地。
步骤S704,根据播放时长确定当前语音片段对应的下一语音片段的片段时长,该片段时长所对应的语音传输时长小于所述播放时长。
其中,语音传输时长是指语音在传输线路中传输的时间长度。例如,语音片段从服务器传输到会话终端所使用的时间为30毫秒,则该语音片段的传输时长为30毫秒。
具体地,各个语音片段在通信链路中传输,都存在有语音传输时长,在获取当前语音片段的播放时长后,通过该播放时长确定下一语音片段的片段时长,该片段时长所对应的语音传输时长小于播放时长。
步骤S706,基于片段时长从会话语音信息中切分得到当前语音片段对应的下一语音片段。
具体地,服务器在得到下一语音片段的片段时长后,可以利用该片段时长从会话语音信息中切分得到当前语音片段对应的下一语音片段。
在一个实施例中,根据语音片段时长,以及对会话语音信息的采样率、采样位深和声道数等得到语音片段的大小。例如,语音片段的大小表示为A,片段时长表示为T,采样率表示为V,采样位深表示为S,声道数表示为B,则语音片段的大小A表示为公式:
A=T*V*S*B
本实施例中,通过获取会话语音信息对应的切分得到的当前语音片段的播放时长,根据播放时长确定当前语音片段对应的下一语音片段的片段时长,基于片段时长从会话语音信息中切分得到当前语音片段对应的下一语音片段,能够达到准确得到当前语音片段对应的下一语音片段的目的,从而使语音会话更加顺畅。
在一个实施例中,机器人的交互界面将公共功能做成SDK(Software DevelopmentKit),根据该SDK上交互接口,服务器获取界面生成请求;根据界面生成请求调用对应的终端所需的界面模板,以及从SDK中获取对应的公共功能数据,然后将公共功能数据添加至界面模板中生成交互界面。从而利用具有公共功能的SDK,有利于进行二次开发。当服务器接收到终端发送的界面生成请求时,根据界面生成请求调用对应的终端所需的界面模板。具体地,服务器将公共功能做成SDK,该公共功能的实现需要基础模块和高级模块实现,其中的高级模块包括多个基础模块,基础模块包括有数据请求模块、录音模块、播放模块和长连接模块等,上述多个基础模块可自由组合,灵活支持多种功能的方案;多个基础模块根据预设组合模式进行组合后,组成高级模块,例如,高级模块为考试模块,该考试模块是由基础模块按照预设组合模式组合后的通用培训模块,该通用培训模块可以应用于多种培训方案时调用;同时,提供通用的音频播放组件和对话展示组件等页面组件,该公共组件可以在其功能基础上以一定的展示方式展示于界面上,同时,可以根据不同终端的展示尺寸或者展示模式进行不同样式的展示。根据界面生成请求,生成界面生成请求调用对应的终端所需的页面组件,以及从SDK中获取对应的公共功能数据和公共模块,然后将公共功能数据添加至界面中生成交互界面。可以理解的,公共模块是能够适应不同场景的高级模块和基础模块,公共功能数据是与公共模块对应的数据,该数据可以使公共模块发挥相应的功能;例如,录音模块为公共模块,与录音相关的公共数据,例如,服务器存储的录音触发信息等,可以使该录音模块发挥相应的功能。
在一个实施例中,以考试界面的生成为例,如图8所示,当服务器接收到终端发送的界面生成请求时,调用初始化方法,完成界面生成的初始化,界面生成的初始化完成后,进行考试模式的初始化,在考试模式的初始化过程中,可以直接通过调用1调用高级模块,也可以直接通过调用2调用基础模块,其中高级模块为一个或多个基础模块组成的模块。
在一个实施例中,上述机器人的软件架构,如图9所示,包括交互展示层、业务逻辑层和技术平台层。具体地,交互展示层用于界面展示与用户交互逻辑处理,该界面可以为PC(Personal Computer)网页、手机APP(Application)或者平板电脑APP等。业务逻辑层处理复杂的业务逻辑,保障系统的可用性以及扩展性等,技术平台层提供更底层的语音,语义等技术支撑。交互展示层包括培训对话界面和培训管理界面。培训管理界面用于管理员配置产品并进行发布,例如,配置试题或者配置规则等。培训对话界面包括SDK(SoftwareDevelopment Kit)和适配不同终端的UI(User Interface)界面。SDK包含有展示层各种处理数据的通用逻辑。业务逻辑层包括长连接网关、培训对话服务、培训管理后台等。其中,培训管理后台用于配置培训对话流程的各个节点、题目、任务等。配置的数据存储在数据库中。长连接网关用于维持与培训对话用户和服务器之间长链接,统一接收客服人员培训时录入的语音信息,并将客服人员录入的语音信息传输给技术平台层的语言平台进行识别、合成、编解码等,并可以接收语音平台发送的机器人说的语音信息。长连接网关根据会话ID(Identity document)记录与培训对话界面和对话控制平台的连接信息,通过心跳机制检查连接的有效性,以保证会话过程中的连接不易断掉。长连接网关与培训对话界面的SDK之间建立两条数据传输通道,即实时对话语音通道和信令语义分析通道。实时对话语音通道用于传输语音信息,信令语义分析通道用于传输控制命令或者质检结果等信息。相比于传统的技术中只有一条数据传输通道,能够让语音和文本数据传输分离,互不影响。培训对话服务用来接收考试请求,通过雪花算法产生会话ID,获取配置数据,如配置的试题及对话节点等信息以及控制对话流程。其中的语义分析平台用来对文本信息进行质检。
在一个实施例中,以培训学员考试为例,描述上述智能机器人的软件架构中各个模块之间的交互过程:客服人员利用平板电脑进行考试,登录账号,进入培训试题考试界面,培训对话界面获取考试界面上的考试开始操作,培训对话界面根据考试按钮的开始操作,向培训对话服务发起考试请求;培训对话服务根据发起考试请求的时间戳以及服务器的IP地址,通过雪花算法会生成一个全局的会话ID,并缓存本次会话数据,将会话ID返回给培训对话界面;培训对话界面根据会话ID与长连接网关建立两条WS(Websocket)连接,长连接网关根据会话ID与对话控制平台建立连接,连接建立后,长连接网关通过会话ID的唯一性维持培训对话界面与对话控制平台之间的长连接;当对话控制平台与长连接网关建立连接成功之后,对话控制平台根据会话ID向培训对话服务获取配置信息,并获取培训对话中的节点信息。培训对话服务根据获取到的会话ID获取缓存的节点信息并返回给对话控制平台。当对话控制平台获取到节点信息之后,如果是机器人节点,则将配置的机器人文本信息转义成语音信息推送给长连接网关,长连接网关通过实时对话语音通道传给培训对话界面,培训对话界面播放机器人语音。当对话控制平台获取到是培训学员节点时,对话控制平台通过发送开始录音指令给长连接网关,长连接网关通过信令通道通知培训对话界面进行录音。培训对话界面采集用户的实时语音信息,并将实时语音信息通过语音传输通道传输给长连接网关;长连接网关通过会话ID将客服人员录入的语音信息传输对话控制平台;对话控制平台对用户录入的语音信息进行语音识别转换为文本信息,然后将文本信息传输给培训对话服务。培训对话服务获取到对话控制平台传过来的信息时,如果是机器人节点,则直接缓存信息;如果是培训学员节点,则调用语义分析平台对学员文本信息进行会话质检,得到质检结果,质检结果一般是正确或者错误,通过质检结果对本次节点信息进行节点分数的计算,以及判断是否下一次节点需要进行跳转等逻辑操作。并将文本信息和质检结果一起传输给统一网关;会话质检是可配置的,可以不需要;长连接网关会将文本信息和质检结果一起通过语义分析通道传输给培训对话界面。
应该理解的是,虽然图2-7的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-7中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图10所示,提供了一种交互界面生成装置1000,包括:会话交互请求接收模块1002、目标界面功能模块获取模块1004、组件及信息获取模块1006和目标交互界面生成模块1008,其中:会话交互请求接收模块1002,用于接收会话交互请求,所述会话交互请求携带会话主题标识;目标界面功能模块获取模块1004,用于从候选界面功能模块集合中,获取与所述会话主题标识对应的一个或者多个目标界面功能模块;组件及信息获取模块1006,用于获取各个所述目标界面功能模块对应的目标功能组件以及所述目标功能组件对应的文本描述信息;目标交互界面生成模块1008,用于将所述目标功能组件以及所述文本描述信息作为交互界面的展示内容,生成目标交互界面,并设置所述目标界面功能模块与所述目标功能组件的对应关系,以在通过目标交互界面接收到针对所述目标功能组件的触发操作时,调用所述目标界面功能模块执行对应的功能。
在一个实施例中,目标界面功能模块获取模块1004,用于获取与所述会话主题标识对应的模块组合标识;从所述候选界面功能模块集合中,获取所述模块组合标识所对应的预先组合得到的功能模块组合,作为与所述会话主题标识对应的目标界面功能模块。
在一个实施例中,所述交互界面生成装置,用于接收会话交互请求,所述会话交互请求携带所述会话主题标识,所述会话交互请求是接收到针对所述会话开始组件的触发操作触发的;调用所述会话服务模块响应于所述会话交互请求,生成对应的目标会话标识,获取所述会话主题标识对应的会话相关数据,建立所述目标会话标识与所述会话相关数据的对应关系,所述会话相关数据包括会话内容信息以及针对所述会话内容信息的标准回复内容;调用连接网关模块基于所述目标会话标识与所述会话终端建立数据传输通道,通过所述数据传输通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端;调用所述连接网关模块通过所述数据传输通道接收所述会话终端发送的用户语音信息以及所述目标会话标识;调用所述会话服务模块获取基于所述用户语音信息得到的用户回复内容,基于所述目标会话标识获取所述标准回复内容,以将所述用户回复内容与所述标准回复内容进行对比,得到会话评估结果。
在一个实施例中,所述装置,用于调用会话控制模块从所述会话服务模块获取文本形式的所述会话内容信息,将所述会话内容信息进行语音转换,得到语音形式的所述机器人会话信息,将所述机器人会话信息发送给所述连接网关模块;调用会话控制模块获取所述连接网关模块接收的所述用户语音信息,对所述用户语音信息进行文本转换,得到所述用户回复内容,将所述用户回复内容发送至所述会话服务模块。
在一个实施例中,所述装置,用于将所述会话内容信息进行语音转换,得到机器人对应的会话语音信息;对所述会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列,将所述语音片段序列作为所述机器人会话信息;通过所述连接网关模块将所述语音片段序列发送给所述会话终端,以使得所述会话终端对所述语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个所述语音片段对应的符合播放条件的语音播放单元;所述会话终端在会话界面上展示所述会话语音信息对应的语音提示信息,当满足所述语音提示信息的语音播放条件时,按照所述语音片段序列中的顺序,播放所述语音片段对应的语音播放单元。
在一个实施例中,所述装置,用于基于所述目标会话标识与所述会话终端建立实时会话语音通道以及额外消息传输通道;通过所述实时对话语音通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端;通过所述额外消息传输通道将所述会话评估结果发送至所述会话终端。
在一个实施例中,所述装置,用于获取所述会话语音信息对应的切分得到的当前语音片段的播放时长;根据所述播放时长确定所述当前语音片段对应的下一语音片段的片段时长,所述片段时长所对应的语音传输时长小于所述播放时长;基于所述片段时长从所述会话语音信息中切分得到所述当前语音片段对应的下一语音片段。
关于交互界面生成装置的具体限定可以参见上文中对于交互界面生成方法的限定,在此不再赘述。上述交互界面生成装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图11所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储交互数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种交互界面生成方法。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是终端,其内部结构图可以如图11所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信,无线方式可通过WIFI、运营商网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种交互界面生成方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图11中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,还提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述各方法实施例中的步骤。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现上述各方法实施例中的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种交互界面生成方法,其特征在于,所述方法包括:
接收会话交互请求,所述会话交互请求携带会话主题标识;
从候选界面功能模块集合中,获取与所述会话主题标识对应的一个或者多个目标界面功能模块;
获取各个所述目标界面功能模块对应的目标功能组件以及所述目标功能组件对应的文本描述信息;
将所述目标功能组件以及所述文本描述信息作为交互界面的展示内容,生成目标交互界面,并设置所述目标界面功能模块与所述目标功能组件的对应关系,以在通过目标交互界面接收到针对所述目标功能组件的触发操作时,调用所述目标界面功能模块执行对应的功能。
2.根据权利要求1所述的方法,其特征在于,所述从候选界面功能模块集合中,获取与所述会话主题标识对应的一个或者多个目标界面功能模块包括:
获取与所述会话主题标识对应的模块组合标识;
从所述候选界面功能模块集合中,获取所述模块组合标识所对应的预先组合得到的功能模块组合,作为与所述会话主题标识对应的目标界面功能模块。
3.根据权利要求1所述的方法,其特征在于,所述目标界面功能模块包括连接网关模块和会话服务模块,所述会话服务模块对应的目标功能组件包括会话开始组件,所述方法还包括:
接收会话交互请求,所述会话交互请求携带所述会话主题标识,所述会话交互请求是接收到针对所述会话开始组件的触发操作触发的;
调用所述会话服务模块响应于所述会话交互请求,生成对应的目标会话标识,获取所述会话主题标识对应的会话相关数据,建立所述目标会话标识与所述会话相关数据的对应关系,所述会话相关数据包括会话内容信息以及针对所述会话内容信息的标准回复内容;
调用连接网关模块基于所述目标会话标识与所述会话终端建立数据传输通道,通过所述数据传输通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端;
调用所述连接网关模块通过所述数据传输通道接收所述会话终端发送的用户语音信息以及所述目标会话标识;
调用所述会话服务模块获取基于所述用户语音信息得到的用户回复内容,基于所述目标会话标识获取所述标准回复内容,以将所述用户回复内容与所述标准回复内容进行对比,得到会话评估结果。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
调用会话控制模块从所述会话服务模块获取文本形式的所述会话内容信息,将所述会话内容信息进行语音转换,得到语音形式的所述机器人会话信息,将所述机器人会话信息发送给所述连接网关模块;
调用会话控制模块获取所述连接网关模块接收的所述用户语音信息,对所述用户语音信息进行文本转换,得到所述用户回复内容,将所述用户回复内容发送至所述会话服务模块。
5.根据权利要求4所述的方法,其特征在于,所述将所述会话内容信息进行语音转换,得到语音形式的所述机器人会话信息,将所述机器人会话信息发送给所述连接网关模块包括:
将所述会话内容信息进行语音转换,得到机器人对应的会话语音信息;
对所述会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列,将所述语音片段序列作为所述机器人会话信息;
通过所述连接网关模块将所述语音片段序列发送给所述会话终端,以使得所述会话终端对所述语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个所述语音片段对应的符合播放条件的语音播放单元;所述会话终端在会话界面上展示所述会话语音信息对应的语音提示信息,当满足所述语音提示信息的语音播放条件时,按照所述语音片段序列中的顺序,播放所述语音片段对应的语音播放单元。
6.根据权利要求3所述的方法,其特征在于,所述基于所述目标会话标识与所述会话终端建立数据传输通道包括:
基于所述目标会话标识与所述会话终端建立实时会话语音通道以及额外消息传输通道;
所述通过所述数据传输通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端包括:
通过所述实时对话语音通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端;
所述连接网关模块还用于:
通过所述额外消息传输通道将所述会话评估结果发送至所述会话终端。
7.根据权利要求5所述的方法,其特征在于,所述对所述会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列包括:
获取所述会话语音信息对应的切分得到的当前语音片段的播放时长;
根据所述播放时长确定所述当前语音片段对应的下一语音片段的片段时长,所述片段时长所对应的语音传输时长小于所述播放时长;
基于所述片段时长从所述会话语音信息中切分得到所述当前语音片段对应的下一语音片段。
8.一种交互界面生成装置,其特征在于,所述装置包括:
会话交互请求接收模块,用于接收会话交互请求,所述会话交互请求携带会话主题标识;
目标界面功能模块获取模块,用于从候选界面功能模块集合中,获取与所述会话主题标识对应的一个或者多个目标界面功能模块;
组件及信息获取模块,用于获取各个所述目标界面功能模块对应的目标功能组件以及所述目标功能组件对应的文本描述信息;
目标交互界面生成模块,用于将所述目标功能组件以及所述文本描述信息作为交互界面的展示内容,生成目标交互界面,并设置所述目标界面功能模块与所述目标功能组件的对应关系,以在通过目标交互界面接收到针对所述目标功能组件的触发操作时,调用所述目标界面功能模块执行对应的功能。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述的方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110923041.8A CN113691595A (zh) | 2021-08-12 | 2021-08-12 | 交互界面生成方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110923041.8A CN113691595A (zh) | 2021-08-12 | 2021-08-12 | 交互界面生成方法、装置、计算机设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113691595A true CN113691595A (zh) | 2021-11-23 |
Family
ID=78579543
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110923041.8A Pending CN113691595A (zh) | 2021-08-12 | 2021-08-12 | 交互界面生成方法、装置、计算机设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113691595A (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107424601A (zh) * | 2017-09-11 | 2017-12-01 | 深圳怡化电脑股份有限公司 | 一种基于语音识别的信息交互系统、方法及其装置 |
CN108984256A (zh) * | 2018-07-05 | 2018-12-11 | Oppo广东移动通信有限公司 | 界面显示方法、装置、存储介质及电子设备 |
CN110808038A (zh) * | 2019-11-11 | 2020-02-18 | 腾讯科技(深圳)有限公司 | 普通话评测方法、装置、设备及存储介质 |
CN112231463A (zh) * | 2020-11-10 | 2021-01-15 | 腾讯科技(深圳)有限公司 | 会话展示方法、装置、计算机设备和存储介质 |
CN112863526A (zh) * | 2021-04-26 | 2021-05-28 | 北京京安佳新技术有限公司 | 基于自动选择语音解码播放格式的语音处理方法 |
-
2021
- 2021-08-12 CN CN202110923041.8A patent/CN113691595A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107424601A (zh) * | 2017-09-11 | 2017-12-01 | 深圳怡化电脑股份有限公司 | 一种基于语音识别的信息交互系统、方法及其装置 |
CN108984256A (zh) * | 2018-07-05 | 2018-12-11 | Oppo广东移动通信有限公司 | 界面显示方法、装置、存储介质及电子设备 |
CN110808038A (zh) * | 2019-11-11 | 2020-02-18 | 腾讯科技(深圳)有限公司 | 普通话评测方法、装置、设备及存储介质 |
CN112231463A (zh) * | 2020-11-10 | 2021-01-15 | 腾讯科技(深圳)有限公司 | 会话展示方法、装置、计算机设备和存储介质 |
CN112863526A (zh) * | 2021-04-26 | 2021-05-28 | 北京京安佳新技术有限公司 | 基于自动选择语音解码播放格式的语音处理方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9530415B2 (en) | System and method of providing speech processing in user interface | |
US10673680B2 (en) | Electronic device providing dialog contents, server and method thereof | |
KR101999780B1 (ko) | 가상 챗봇을 이용하여 인스턴트 메시징 서비스를 제공하는 서버, 단말 및 방법 | |
US11762629B2 (en) | System and method for providing a response to a user query using a visual assistant | |
US20180239812A1 (en) | Method and apparatus for processing question-and-answer information, storage medium and device | |
KR20180091707A (ko) | 패킷화된 오디오 신호의 변조 | |
CN111341315B (zh) | 语音控制方法、装置、计算机设备和存储介质 | |
CN110442697B (zh) | 一种人机交互方法、系统、计算机设备和存储介质 | |
US10594840B1 (en) | Bot framework for channel agnostic applications | |
US20140045596A1 (en) | Methods and systems for determining the location of online gaming clients | |
US20220171011A1 (en) | Positioning method and device, server, storage medium and terminal | |
WO2018121024A1 (zh) | 业务语音导航方法、装置、服务器和存储介质 | |
CN110992955A (zh) | 一种智能设备的语音操作方法、装置、设备及存储介质 | |
CN111885341A (zh) | 视频通话过程语音采集方法、装置、计算机设备及介质 | |
CN113630309B (zh) | 机器人会话系统、方法、装置、计算机设备和存储介质 | |
US20170214611A1 (en) | Sip header configuration for identifying data for language interpretation/translation | |
CN113689854B (zh) | 语音会话方法、装置、计算机设备和存储介质 | |
JP2019197977A (ja) | 問い合わせ処理方法、システム、端末、自動音声対話装置、表示処理方法、通話制御方法、及び、プログラム | |
CN111031063B (zh) | 一种基于家教机的数据传输方法及设备 | |
KR101351264B1 (ko) | 음성인식 기반의 메시징 통역서비스 제공 시스템 및 그 방법 | |
US9277051B2 (en) | Service server apparatus, service providing method, and service providing program | |
US20140362982A1 (en) | Data exchange method, device, and system for group communication | |
CN113691595A (zh) | 交互界面生成方法、装置、计算机设备和存储介质 | |
CN110493120A (zh) | 一种用于发送设备操作指令的方法与设备 | |
US11893172B2 (en) | Information processing method based on electronic device interaction, and electronic device for establishing communication by sending communication protocol |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |