CN113674748A - 一种可触发虚拟成像系统 - Google Patents

一种可触发虚拟成像系统 Download PDF

Info

Publication number
CN113674748A
CN113674748A CN202111006431.5A CN202111006431A CN113674748A CN 113674748 A CN113674748 A CN 113674748A CN 202111006431 A CN202111006431 A CN 202111006431A CN 113674748 A CN113674748 A CN 113674748A
Authority
CN
China
Prior art keywords
module
instruction
sending end
instruction sending
coupled
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111006431.5A
Other languages
English (en)
Inventor
刘燃
靳立冰
韦佳顺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Crazy Shell Shenzhen Technology Co ltd
Original Assignee
Crazy Shell Shenzhen Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Crazy Shell Shenzhen Technology Co ltd filed Critical Crazy Shell Shenzhen Technology Co ltd
Priority to CN202111006431.5A priority Critical patent/CN113674748A/zh
Publication of CN113674748A publication Critical patent/CN113674748A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/005—Language recognition
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/398—Synchronisation thereof; Control thereof
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Machine Translation (AREA)

Abstract

本发明公开了一种可触发虚拟成像系统，属于虚拟成像技术领域，包括指令发送端A、指令发送端B、指令发送端C、指令处理模块、指令接收端和指令执行端，所述指令发送端A、指令发送端B和指令发送端C与指令处理模块相连接，指令发送端A、指令发送端B、指令发送端C通过TCP协议通道与指令接收端相连接。本发明中，通过设置指令发送端A、指令发送端B和指令发送端C，其中人们能够通过指令发送端A、指令发送端B和指令发送端C发送语音指令，同时指令处理模块能够筛选对语音指令进行处理，同时方言导入模块能够率先将各种方言导入，配合现实累计的方言达到更好的识别效果，而错误言语淘汰模块能够淘汰错误的方言，进一步提高识别效果。

Description

一种可触发虚拟成像系统
技术领域
本发明涉及虚拟成像技术领域，更具体地说，它涉及一种可触发虚拟成像系统。
背景技术
虚拟成像是由国内开发商创造的名词，是一种在三维空间中投射三维立体影像(影像为物理上的"立体"而非单纯视觉上的"立体")的次世代显示技术。
现有技术中具有人机互动功能的虚拟成像装置，主要利用语言指令与虚拟成像装置交互，但是在交互过程中有些情况下，人们会说出方言，方言会对虚拟成像装置的识别效果造成影响，这样人们发出的指令无法有效控制虚拟成像装置，同时在交互的过程中可能会出现无法执行的指令，这样也会人们人机交互的体验造成影响。
发明内容
本发明的目的在于：为了解决现有技术中具有人机互动功能的虚拟成像装置，主要利用语言指令与虚拟成像装置交互，但是在交互过程中有些情况下，人们会说出方言，方言会对虚拟成像装置的识别效果造成影响，这样人们发出的指令无法有效控制虚拟成像装置，同时在交互的过程中可能会出现无法执行的指令，这样也会人们人机交互的体验造成影响的问题，而提出的一种可触发虚拟成像系统。
为实现上述目的，本发明提供了如下技术方案：
一种可触发虚拟成像系统，包括指令发送端A、指令发送端B、指令发送端C、指令处理模块、指令接收端和指令执行端，所述指令发送端A、指令发送端B和指令发送端C与指令处理模块相连接，指令发送端A、指令发送端B、指令发送端C通过TCP协议通道与指令接收端相连接，指令接收端与指令执行端相连接。
通过采用上述技术方案，通过指令发送端A、指令发送端B、指令发送端C发送指令，指令接收端接收指令并发送给指令执行端，由指令执行端执行指令。
进一步地，所述指令处理模块包括无线传输模块、文字转换模块、语音提示模块、语音识别模块、指令验证模块、验证失败提醒模块、语言存储模块、方言信息导入模块、错误言语淘汰模块、方言信息收录模块、特征提取模块和训练模块，所述语音识别模块与文字转换模块相连接，文字转换模块与无线传输模块相连接，文字转换模块与语音提示模块相连接，所述语音识别模块与指令验证模块相连接，指令验证模块与验证失败提醒模块相连接，验证失败提醒模块为红外指示灯，语音识别模块与方言信息收录模块相连接，方言信息收录模块与特征提取模块相连接，特征提取模块与训练模块相连接，所述训练模块与语言存储模块相连接，语言存储模块与语音识别模块相连接，语言存储模块与方言信息导入模块相连接，语言存储模块与错误语言淘汰模块相连接。
通过采用上述技术方案，语音识别模块能够识别发送的语音指令，同时将信息传递给指令验证模块，验证指令是否能够虚拟体验，如果验证失败，验证失败提醒模块能够提醒人们无法实现该指令，语音识别模块将信息发送给方言信息收录模块，方言信息收录模块收录各种方言，同时特征提取模块能够提取各种方言中的特点，并输送至训练模块中进行累计，将训练成果发送给语言存储模块，语言存储模块存储方言信息。
进一步地，所述指令执行端与违禁指令输入模块相连接，指令执行端包括投屏显示模块、指令执行记录模块、无法执行指令筛选模块、存储模块、指令传输模块、功能判别模块、可行性指令录入模块、指令匹配模块、新添加指令输入模块和新指令录入模块，所述指令执行记录模块与无法执行指令筛选模块相连接，无法执行指令筛选模块与存储模块相连接，存储模块与指令传输模块相连接，所述指令执行记录模块与功能判别模块相连接，功能判别模块与可行性指令录入模块相连接，可行性指令录入模块与指令匹配模块相连接，指令匹配模块与新添加指令输入模块相连接，指令匹配模块与新指令录入模块相连接。
通过采用上述技术方案，无法执行指令筛选模块能够筛选无法执行的指令，同时将信息传递给存储模块，存储模块存储无法执行指令，而功能判别模块能够判别可执行但未录入指令，而可行性指令录入模块将信息录入至指令匹配模块。
综上所述，本发明具有以下有益效果：
1、本方案中，通过设置指令发送端A、指令发送端B和指令发送端C，指令发送端A、指令发送端B和指令发送端C为三个功能相同的指令发送端，人们可以通过不同的指令发送端A、指令发送端B和指令发送端C发送指令，可以供多人同时使用，其中人们能够通过指令发送端A、指令发送端B和指令发送端C发送语音指令，同时指令处理模块能够筛选对语音指令进行处理，其中语音识别模块能够识别发送的语音指令，同时将信息传递给指令验证模块，验证指令是否能够虚拟体验，如果验证失败，验证失败提醒模块能够提醒人们无法实现该指令，语音识别模块将信息发送给方言信息收录模块，方言信息收录模块收录各种方言，同时特征提取模块能够提取各种方言中的特点，并输送至训练模块中进行累计，将训练成果发送给语言存储模块，语言存储模块存储方言信息，当语音识别模块再次识别方言后调取语言存储模块中的信息与之配对，能够有效识别方言，同时方言导入模块能够率先将各种方言导入，配合现实累计的方言达到更好的识别效果，而错误言语淘汰模块能够淘汰错误的方言，进一步提高识别效果。
2、通过设置违禁指令输入模块，能够向指令执行端输入违禁指令信息，指令执行记录模块能够记录需要执行的指令，如果需要执行违禁指令则指令传输模块能够将信息传递给指令处理模块，提醒人们是违禁指令无法虚拟成像，由无法执行指令筛选模块能够筛选无法执行的指令，同时将信息传递给存储模块，存储模块存储无法执行指令，而功能判别模块能够判别可执行但未录入指令，而可行性指令录入模块将信息录入至指令匹配模块，而工作人员可以将新制作的指令通过新添加指令输入模块输入至指令匹配模块中，匹配完成后将信息传递给新指令录入模块，新指令录入模块将指令录入至指令执行端，后续人们发出相应指令后指令执行端能够有效执行该指令，而投屏显示模块能够将文字转换模块转换的信息投屏，方便人们能够看到。
附图说明
图1为本发明提出的一种可触发虚拟成像系统的系统结构示意图；
图2为本发明提出的一种可触发虚拟成像系统中指令处理模块的子模块结构示意图；
图3为本发明提出的一种可触发虚拟成像系统中指令执行端的子模块结构示意图。
具体实施方式
请参阅图1-3，本发明提供一种技术方案：一种可触发虚拟成像系统，包括指令发送端A、指令发送端B、指令发送端C、指令处理模块、指令接收端和指令执行端，所述指令发送端A、指令发送端B和指令发送端C与指令处理模块相连接，所述指令处理模块包括无线传输模块、文字转换模块、语音提示模块、语音识别模块、指令验证模块、验证失败提醒模块、语言存储模块、方言信息导入模块、错误言语淘汰模块、方言信息收录模块、特征提取模块和训练模块，所述语音识别模块与文字转换模块相连接，文字转换模块与无线传输模块相连接，文字转换模块与语音提示模块相连接，所述语音识别模块与指令验证模块相连接，指令验证模块与验证失败提醒模块相连接，验证失败提醒模块为红外指示灯，语音识别模块与方言信息收录模块相连接，方言信息收录模块与特征提取模块相连接，特征提取模块与训练模块相连接，所述训练模块与语言存储模块相连接，语言存储模块与语音识别模块相连接，语言存储模块与方言信息导入模块相连接，语言存储模块与错误语言淘汰模块相连接；
实施方式具体为：指令发送端A、指令发送端B和指令发送端C，其中人们能够通过指令发送端A、指令发送端B和指令发送端C发送语音指令，同时指令处理模块能够筛选对语音指令进行处理，其中语音识别模块能够识别发送的语音指令，同时将信息传递给指令验证模块，验证指令是否能够虚拟体验，如果验证失败，验证失败提醒模块能够提醒人们无法实现该指令，语音识别模块将信息发送给方言信息收录模块，方言信息收录模块收录各种方言，同时特征提取模块能够提取各种方言中的特点，并输送至训练模块中进行累计，将训练成果发送给语言存储模块，语言存储模块存储方言信息，当语音识别模块再次识别方言后调取语言存储模块中的信息与之配对，能够有效识别方言，同时方言导入模块能够率先将各种方言导入，配合现实累计的方言达到更好的识别效果，而错误言语淘汰模块能够淘汰错误的方言，进一步提高识别效果。
指令发送端A、指令发送端B、指令发送端C通过TCP协议通道与指令接收端相连接，指令接收端与指令执行端相连接，所述指令执行端与违禁指令输入模块相连接，指令执行端包括投屏显示模块、指令执行记录模块、无法执行指令筛选模块、存储模块、指令传输模块、功能判别模块、可行性指令录入模块、指令匹配模块、新添加指令输入模块和新指令录入模块，所述指令执行记录模块与无法执行指令筛选模块相连接，无法执行指令筛选模块与存储模块相连接，存储模块与指令传输模块相连接，所述指令执行记录模块与功能判别模块相连接，功能判别模块与可行性指令录入模块相连接，可行性指令录入模块与指令匹配模块相连接，指令匹配模块与新添加指令输入模块相连接，指令匹配模块与新指令录入模块相连接，指令发送端和指令接收端需要在一个局域网内，两者需要使用TCP协议通道进行长连接，指令接收端和指令执行端是通过串口进行通信，指令接收端接收到指令后会立即通过串口转发到指令执行端；
实施方式具体为：违禁指令输入模块，能够向指令执行端输入违禁指令信息，指令执行记录模块能够记录需要执行的指令，如果需要执行违禁指令则指令传输模块能够将信息传递给指令处理模块，提醒人们是违禁指令无法虚拟成像，由无法执行指令筛选模块能够筛选无法执行的指令，同时将信息传递给存储模块，存储模块存储无法执行指令，而功能判别模块能够判别可执行但未录入指令，而可行性指令录入模块将信息录入至指令匹配模块，而工作人员可以将新制作的指令通过新添加指令输入模块输入至指令匹配模块中，匹配完成后将信息传递给新指令录入模块，新指令录入模块将指令录入至指令执行端，后续人们发出相应指令后指令执行端能够有效执行该指令。
工作原理：用户打开指令发送端的交互应用，并通过语音向交互软件提出问题；
交互软件匹配到对应答案，并准备播放对应答案，同时想指令接收端发送指令“@speak”；
指令接收端收到指令“@speak”,确认指令格式正确，并将指令通过转发给指令执行端(虚拟成像设备)；
指令执行端(虚拟成像设备)查找自身定义指令库，发现“@speak”指令对应的一个人物说话的动画；
指令执行端(虚拟成像设备)播放这个动画，同时交互软件播放声音；
用户感知自己似乎在跟一个虚拟出来的人物在进行对话。
本具体实施例仅仅是对本发明的解释，其并不是对本发明的限制，本领域技术人员在阅读完本说明书后可以根据需要对本实施例做出没有创造性贡献的修改，但只要在本发明的权利要求范围内都受到专利法的保护。

Claims (8)

1.一种可触发虚拟成像系统，其特征在于，包括指令发送端A、指令发送端B、指令发送端C、指令处理模块、指令接收端和指令执行端，所述指令发送端A、指令发送端B和指令发送端C与指令处理模块相连接，指令发送端A、指令发送端B、指令发送端C通过TCP协议通道与指令接收端相连接，指令接收端与指令执行端相连接。
2.根据权利要求1所述的一种可触发虚拟成像系统，其特征在于，所述指令处理模块包括无线传输模块、文字转换模块、语音提示模块、语音识别模块、指令验证模块、验证失败提醒模块、语言存储模块、方言信息导入模块、错误言语淘汰模块、方言信息收录模块、特征提取模块和训练模块。
3.根据权利要求2所述的一种可触发虚拟成像系统，其特征在于，所述语音识别模块与文字转换模块相连接，文字转换模块与无线传输模块相连接，文字转换模块与语音提示模块相连接。
4.根据权利要求3所述的一种可触发虚拟成像系统，其特征在于，所述语音识别模块与指令验证模块相连接，指令验证模块与验证失败提醒模块相连接，验证失败提醒模块为红外指示灯，语音识别模块与方言信息收录模块相连接，方言信息收录模块与特征提取模块相连接，特征提取模块与训练模块相连接。
5.根据权利要求4所述的一种可触发虚拟成像系统，其特征在于，所述训练模块与语言存储模块相连接，语言存储模块与语音识别模块相连接，语言存储模块与方言信息导入模块相连接，语言存储模块与错误语言淘汰模块相连接。
6.根据权利要求1所述的一种可触发虚拟成像系统，其特征在于，所述指令执行端与违禁指令输入模块相连接，指令执行端包括投屏显示模块、指令执行记录模块、无法执行指令筛选模块、存储模块、指令传输模块、功能判别模块、可行性指令录入模块、指令匹配模块、新添加指令输入模块和新指令录入模块。
7.根据权利要求6所述的一种可触发虚拟成像系统，其特征在于，所述指令执行记录模块与无法执行指令筛选模块相连接，无法执行指令筛选模块与存储模块相连接，存储模块与指令传输模块相连接。
8.根据权利要求7所述的一种可触发虚拟成像系统，其特征在于，所述指令执行记录模块与功能判别模块相连接，功能判别模块与可行性指令录入模块相连接，可行性指令录入模块与指令匹配模块相连接，指令匹配模块与新添加指令输入模块相连接，指令匹配模块与新指令录入模块相连接。
CN202111006431.5A 2021-08-30 2021-08-30 一种可触发虚拟成像系统 Pending CN113674748A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111006431.5A CN113674748A (zh) 2021-08-30 2021-08-30 一种可触发虚拟成像系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111006431.5A CN113674748A (zh) 2021-08-30 2021-08-30 一种可触发虚拟成像系统

Publications (1)

Publication Number Publication Date
CN113674748A true CN113674748A (zh) 2021-11-19

Family

ID=78547624

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111006431.5A Pending CN113674748A (zh) 2021-08-30 2021-08-30 一种可触发虚拟成像系统

Country Status (1)

Country Link
CN (1) CN113674748A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101001287A (zh) * 2006-12-26 2007-07-18 华为技术有限公司 语音服务器及语音应答方法
CN103617749A (zh) * 2013-11-15 2014-03-05 中国航空无线电电子研究所 一种机载陆空指令管理系统及其管理方法
CN105408891A (zh) * 2013-06-03 2016-03-16 机械地带有限公司 用于多用户多语言通信的系统和方法
CN109064799A (zh) * 2018-08-31 2018-12-21 苏州竹原信息科技有限公司 一种基于虚拟现实的语言培训系统及方法
CN111079384A (zh) * 2019-11-18 2020-04-28 佰聆数据股份有限公司 一种用于智能质检服务禁语的识别方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101001287A (zh) * 2006-12-26 2007-07-18 华为技术有限公司 语音服务器及语音应答方法
CN105408891A (zh) * 2013-06-03 2016-03-16 机械地带有限公司 用于多用户多语言通信的系统和方法
CN103617749A (zh) * 2013-11-15 2014-03-05 中国航空无线电电子研究所 一种机载陆空指令管理系统及其管理方法
CN109064799A (zh) * 2018-08-31 2018-12-21 苏州竹原信息科技有限公司 一种基于虚拟现实的语言培训系统及方法
CN111079384A (zh) * 2019-11-18 2020-04-28 佰聆数据股份有限公司 一种用于智能质检服务禁语的识别方法及系统

Similar Documents

Publication Publication Date Title
CN106131057B (zh) 基于虚拟现实场景的认证和装置
CN104618780B (zh) 电器设备控制方法及系统
CN104777911B (zh) 一种基于全息技术的智能交互方法
CN106782551A (zh) 一种语音识别系统及方法
CN108027725B (zh) 指导终端设备操作的方法、装置和设备
CN104360736A (zh) 基于手势的终端控制方法和系统
CN109086276B (zh) 数据翻译方法、装置、终端及存储介质
CN110992955A (zh) 一种智能设备的语音操作方法、装置、设备及存储介质
CN106529379A (zh) 一种活体识别方法及设备
CN106453228B (zh) 一种用于智能机器人的用户登录方法以及系统
CN104768235B (zh) 一种设备间自动连接的方法和设备
CN103472994A (zh) 一种基于语音实现操作控制的方法、装置和系统
CN107948566A (zh) 实现即插即用传屏的方法及装置
CN105320268A (zh) 装置以及用户控制装置的方法
CN111899859A (zh) 手术器械清点方法及装置
CN109478206B (zh) 多语言沟通系统及多语言沟通提供方法
CN107803845A (zh) 一种工业机器人的示教方法及系统
CN113674748A (zh) 一种可触发虚拟成像系统
CN106168974A (zh) 多系统截屏文件的处理方法和系统
CN111796794B (zh) 语音数据的处理方法、系统及虚拟机
CN106358068B (zh) 大数据解决网络直播绘画的系统及方法
CN110955331A (zh) 一种基于计算机虚拟界面的人机交互系统
CN114598913B (zh) 一种多人双录交互控制方法、系统
CN105979394A (zh) 智能电视的浏览器操作方法及智能电视
CN112202985B (zh) 信息处理方法、客户端设备、服务端设备及信息处理系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination