CN103744309A - 一种基于语音或图像识别的车用装定系统 - Google Patents
一种基于语音或图像识别的车用装定系统 Download PDFInfo
- Publication number
- CN103744309A CN103744309A CN201310739806.8A CN201310739806A CN103744309A CN 103744309 A CN103744309 A CN 103744309A CN 201310739806 A CN201310739806 A CN 201310739806A CN 103744309 A CN103744309 A CN 103744309A
- Authority
- CN
- China
- Prior art keywords
- information
- voice
- control circuit
- circuit
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000005540 biological transmission Effects 0.000 claims abstract description 13
- 239000000284 extract Substances 0.000 claims description 9
- 238000000605 extraction Methods 0.000 claims description 5
- 230000009471 action Effects 0.000 claims description 4
- 238000004891 communication Methods 0.000 claims description 4
- 230000010355 oscillation Effects 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 6
- NIOPZPCMRQGZCE-WEVVVXLNSA-N 2,4-dinitro-6-(octan-2-yl)phenyl (E)-but-2-enoate Chemical compound CCCCCCC(C)C1=CC([N+]([O-])=O)=CC([N+]([O-])=O)=C1OC(=O)\C=C\C NIOPZPCMRQGZCE-WEVVVXLNSA-N 0.000 abstract description 4
- 230000003321 amplification Effects 0.000 abstract 1
- 238000003199 nucleic acid amplification method Methods 0.000 abstract 1
- 238000000034 method Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 5
- 238000012790 confirmation Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000010304 firing Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种基于语音或图像识别的车用装定系统，属于武器系统信息化和控制技术领域。装定器由人机界面模块和装定模块组成，其中人机界面模块主要包括摄像头、语音感测器、扬声器、图像/语音存储器、放大电路、界面控制电路、语音资料库存储器和手势特征库存储器；装定模块包括控制电路、发送调制电路、反馈解调电路和装定接口；操作者通过瞄准镜或其他渠道获得目标的距离等装定信息后，将装定信息用事先约定好的语音或手势进行描述，通过获得扬声器反馈的语音信息了解装定效果情况。在装定的同时允许炮长保持双眼注视瞄准镜的状态，并且能提高装定的工作效率和便捷性，进而改善武器系统的整体作战效能。
Description
技术领域
发明涉及一种在坦克等现代战车上使用的装定系统，属于武器系统信息化和控制技术领域。
背景技术
以坦克为代表的现代战车面临着信息化升级的技术课题，而现有战车一般没有实现装定器与战车平台的信息互联，在使用信息化弹药时一般由操作者采用手工装定器，操作者人工操作装定器的按键，利用人工按键和手工输入的方式将装定信息输入到装定器中。但是，在装定时操作者也需要同时观察瞄准镜完成对战场观察、搜索目标、对目标的瞄准等工作，这就造成现有装定方法按键操作错按概率高，工作效率低的问题。进而降低了战车射速、延长了射击准备时间。
发明内容
有鉴于此，本发明提供了一种基于语音或图像识别的车用装定系统，利用操作者的语音或手势作为装定系统的输入信号，整个操作过程无需双眼参与，操作者在装定过程中可以继续观察、瞄准，提高装弹的速度和整个战车的作战效果。
一种基于语音或图像识别的车用装定系统，由人机界面模块和装定模块组成，其中人机界面模块主要包括摄像头、语音感测器、扬声器、图像/语音存储器、放大电路、界面控制电路、语音资料库存储器和手势特征库存储器；
摄像头和语音感测装置分别通过接线与图像/语音存储器相连，并将采集到的信号传输给图像/语音存储器；界面控制电路通过接线分别与图像/语音存储器、手势特征库存储器、语音资料存储器、放大电路相连，放大电路与扬声器连接；界面控制电路通过数据线与装定模块控制电路相连，控制电路分别与发送调制电路和反馈调制电路相连，发送调制电路和反馈调制电路与装定接口相连；
所述装定系统实现的步骤如下：
第一步：语音感测装置和摄像头实时采集车内操作者发出的语音信息或图像信息，并将采集的语音信息或图像信息转换成数字信号传输给图像/语音存储器；
第二步：界面控制电路对图像/语音存储器中的信号进行分割、特征提取，经过提取的特征信息与手势特征信息存储器或语音资料库存储器中的特征信息进行比对，判断是否为事先约定好的包括目标信息在内的装定指令信息，如果不是约定好的装定指令信息的话对其进行忽略，如果是约定好的装定指令信息，界面控制电路将识别出的装定指令信息内容发送到语音资料库存储器，界面控制电路从语音资料库存储器中提取与装定指令信息对应的语音信息，语音信息经放大电路放大后通过扬声器进行反馈；
第三步：如果判定目标距离信息正确，车内操作者给出发送指令的语音或手势，界面控制电路不再通过语音反馈，直接将目标距离信息发送给核心电路控制进行装定；如果判定目标距离信息有误，则给出取消的指令的语音或手势，界面控制电路在识别操作者的语音或手势后不再通过语音反馈，直接将有误的目标距离信息清空；
第四步：目标距离信息发送至控制电路后，控制电路将目标距离信息解算成弹药作用时间信息，控制电路将装定信息发送至发送调制电路，调制电路将装定信息调制成高频振荡信号后经过装定接口以有线或者无线传输的方式传送到信息化弹药，信息化弹药将接收到的装定信息存储以备使用；
第五步：信息化弹药将接收到的装定信息传输给反馈解调电路，由反馈解调电路将反馈回的信息解调成数字信号，进一步由控制电路反馈给界面控制电路，界面控制电路从语音资料库存储器中提取对应的语音指令信息，传递给放大电路和扬声器，以语音的形式提供装定结果的反馈。
所述语音信息或图像信息是事先约定好的操作者发出的表示目标距离的语音指令信息或手势指令特征信息；所述图像/语音存储器用于暂存语音感测装置和摄像头采集到的数字信号。
所述手势特征信息存储器内存储事先约定好的手势指令特征信息，提供给界面控制电路进行对比；所述语音资料库存储器内存储事先约定好的语音指令和语音指令特征信息，将语音指令提供给界面控制电路和放大电路，经扬声器反馈给操作者，将语音指令特征信息提供给界面控制电路进行对比。
有益效果：
1、本发明提出的语音或图像识别的车用装定系统，可以收到比传统按键式手工装定器操作更加方便的效果，改善炮手的操作体验。方便的操作模式有利于缩短弹药装定时间，提高战车的射速。
2、由于装定过程不再需要炮手双眼注视装定器按键，使炮手在装定过程中还可以同时进行战场观察、搜索目标、瞄准等操作，改善了战车的作战效果，进而提高整个战车的作战效能。
附图说明
图1为本发明的功能模块结构示意图。
具体实施方式
下面结合附图并举实施例，对本发明进行详细描述。
如附图1所示，本发明提供了一种基于语音或图像识别的车用装定系统，由人机界面模块和装定模块组成，其中人机界面模块主要包括摄像头、语音感测器、扬声器、图像/语音存储器、放大电路、界面控制电路、语音资料库存储器和手势特征库存储器；
摄像头实时采集操作者手势的图像信息并将采集到的图像信息转换成数字信号；
语音感测器接收声信息并将接收到的声信息转换成数字信号；
扬声器以语音的形式提供装定工作情况的反馈；反馈包括手势/语音装定信息的识别结果情况和引信的实际装定情况；
图像/语音存储器是一个大容量高速缓存模块，用于暂存摄像头和语音感测装置采集到的数据，实现高速采集电路和低速处理电路之间的速率匹配，从而降低界面控制电路的计算资源开销，保证系统高速稳定运行；
放大电路对界面控制电路传来的声信号进行放大，并提供给扬声器；
界面控制电路是人机界面模块的控制核心，有三项功能：A、对图像信号或者声信号进行信号分割、特征提取等运算，经过提取的特征信息与手势特征库中存储的手势特征信息或语音资料存储库中存储的语音特征信息进行比对，判断接收到的信息是否是指令信息，如果是指令信息，指令的内容是什么；B、当界面电路识别了装定信息的内容后或者界面控制电路接收到装定系统反馈回的装定结果信息后，从语音资料存储器中提取对应的语音指令信息，传递给放大电路和扬声器，以语音的形式给操作者提供识别情况和装定结果的反馈；C、实现人机界面模块和装定系统模块的通信；
语音资料库存储器内存储事先约定好的语音指令特征信息和语音指令，提供给界面控制电路进行对比和向放大电路、扬声器提供识别出的对应反馈信息；
手势特征库存储器内存储事先约定好的手势指令特征信息，提供给界面控制电路进行对比；
装定模块包括控制电路、发送调制电路、反馈解调电路和装定接口；
控制电路是装定系统的核心,负责将语音人机界面传输来的信息进行进一步的处理，有两项功能：A、控制电路通过内置的算法将操作人员通过手势和语音给出的目标距离信息解算成弹药作用时间信息；B、将解算出的弹药作用时间信息发送给发送调制电路，接受反馈解调电路的反馈信号，并能与人机界面模块实现通讯；
发送调制电路负责将装定信息进行调制并通过装定接口与弹药实现信息交换；与控制电路实现信息交换；
反馈解调电路负责将装定信息进行解调并通过装定接口与弹药实现信息交换；与控制电路实现信息交换；
装定接口主要是一个以线圈为主的信息发送装置，利用分离式变压器的原理与信息化弹药中的感应线圈实现信息交互。
装定器内部的连接关系：摄像头和语音感测装置分别通过接线与图像/语音存储器并将采集到的信号传输给图像/语音存储器；界面控制电路通过接线分别与图像/语音存储器、手势特征库存储器、语音资料存储器、放大电路相连，放大电路与扬声器连接；界面控制电路通过数据线与装定模块控制电路相连，控制电路分别与发送调制电路和反馈调制电路相连。发送调制电路和反馈调制电路与装定接口相连。
工作原理：装定器在使用时，操作者根据实际情况或者个人习惯，采用约定好手势或者语音描述装定信息，摄像头持续实时拍摄图像，语音感测装置也持续实时接收语音信息，图像或语音信息由图像/语音存储器暂存，界面控制电路对信号进行分析，判断是否含有事先约定好的指令；当操作者采用事先约定好的手势或语音描述装定信息时，摄像头或语音感测装置采集到的图像或语音信息由图像/语音存储器暂存，然后交界面控制电路进行信号分割、特征提取，经过提取的特征信息与手势特征库存储器和语音资料库存储器存储的特征信息进行比对，判断是否为装定信息，如果不是装定信息的话对其进行忽略，如果是装定信息，界面控制电路将识别出的装定信息内容发送到语音资料存储器，提取对应的语音信息，通过扬声器反馈给操作者，由操作者判断和确认信息是否准确；操作者确认信息准确无误后，给出发送指令的语音或手势，界面控制电路不再通过语音反馈寻求确认，直接将装定信息发送给装定系统模块进行装定；如果操作者判断信息有误，则给出取消的指令的语音或手势，界面控制电路在识别操作者的语音或手势后不再通过语音反馈寻求确认，直接将将有误的装定信息清空；在对弹药完成装定后，控制电路将对弹药装定的结果情况反馈给界面控制电路，界面控制电路从语音资料存储器中提取对应的语音指令信息，传递给放大电路和扬声器，以语音的形式提供装定结果的反馈；操作者通过获得扬声器反馈的语音信息了解装定效果情况，并通过装定效果情况判断是否需要重新装定，覆盖之前的装定信息。
装定信息发送至装定模块后，由控制电路将信息发送至发送调制电路，调制成高频振荡信号后经过装定接口以有线或者无线（通过电磁线圈）传输的方式传送到信息化弹药，信息化弹药将接收到的装定信息存储以备使用；之后，信息化弹药将接收到的信息传输给反馈解调电路，由解调电路将反馈回的信息解调成数字信号，进一步由控制电路反馈给人机界面模块，最终由人机界面模块将弹药装定的情况反馈给操作者。
综上所述，以上仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (3)
1.一种基于语音或图像识别的车用装定系统，其特征在于，由人机界面模块和装定模块组成；其中人机界面模块主要包括摄像头、语音感测器、扬声器、图像/语音存储器、放大电路、界面控制电路、语音资料库存储器和手势特征库存储器；装定模块包括控制电路、发送调制电路、反馈解调电路和装定接口；
摄像头和语音感测装置分别通过接线与图像/语音存储器相连，并将采集到的信号传输给图像/语音存储器；界面控制电路通过接线分别与图像/语音存储器、手势特征库存储器、语音资料存储器、放大电路相连，放大电路与扬声器连接；界面控制电路通过数据线与装定模块控制电路相连，控制电路分别与发送调制电路和反馈调制电路相连，发送调制电路和反馈调制电路与装定接口相连；
所述装定系统实现的步骤如下：
第一步：语音感测装置和摄像头实时采集车内操作者发出的语音信息或图像信息，并将采集的语音信息或图像信息转换成数字信号传输给图像/语音存储器；
第二步：界面控制电路对图像/语音存储器中的信号进行分割、特征提取，经过提取的特征信息与手势特征信息存储器或语音资料库存储器中的特征信息进行比对，判断是否为事先约定好的包括目标信息在内的装定指令信息，如果不是约定好的装定指令信息的话对其进行忽略，如果是约定好的装定指令信息，界面控制电路将识别出的装定指令信息内容发送到语音资料库存储器，界面控制电路从语音资料库存储器中提取与装定指令信息对应的语音信息，语音信息经放大电路放大后通过扬声器进行反馈；
第三步：如果判定目标距离信息正确，车内操作者给出发送指令的语音或手势，界面控制电路不再通过语音反馈，直接将目标距离信息发送给核心电路控制进行装定；如果判定目标距离信息有误，则给出取消的指令的语音或手势，界面控制电路在识别操作者的语音或手势后不再通过语音反馈，直接将有误的目标距离信息清空；
第四步：目标距离信息发送至控制电路后，控制电路将目标距离信息解算成弹药作用时间信息，控制电路将装定信息发送至发送调制电路，调制电路将装定信息调制成高频振荡信号后经过装定接口以有线或者无线传输的方式传送到信息化弹药，信息化弹药将接收到的装定信息存储以备使用；
第五步：信息化弹药将接收到的装定信息传输给反馈解调电路，由反馈解调电路将反馈回的信息解调成数字信号，进一步由控制电路反馈给界面控制电路，界面控制电路从语音资料库存储器中提取对应的语音指令信息，传递给放大电路和扬声器，以语音的形式提供装定结果的反馈。
2.如权利要求1所述的基于语音或图像识别的车用装定系统，其特征在于，所述语音信息或图像信息是事先约定好的操作者发出的表示目标距离的语音指令信息或手势指令特征信息；所述图像/语音存储器用于暂存语音感测装置和摄像头采集到的数字信号。
3.如权利要求1所述的基于语音或图像识别的车用装定系统，其特征在于，所述手势特征信息存储器内存储事先约定好的手势指令特征信息，提供给界面控制电路进行对比；所述语音资料库存储器内存储事先约定好的语音指令和语音指令特征信息，将语音指令提供给界面控制电路和放大电路，经扬声器反馈给操作者，将语音指令特征信息提供给界面控制电路进行对比。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310739806.8A CN103744309B (zh) | 2013-12-26 | 2013-12-26 | 一种基于语音或图像识别的车用装定系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310739806.8A CN103744309B (zh) | 2013-12-26 | 2013-12-26 | 一种基于语音或图像识别的车用装定系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN103744309A true CN103744309A (zh) | 2014-04-23 |
| CN103744309B CN103744309B (zh) | 2016-04-27 |
Family
ID=50501338
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201310739806.8A Expired - Fee Related CN103744309B (zh) | 2013-12-26 | 2013-12-26 | 一种基于语音或图像识别的车用装定系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103744309B (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105278817A (zh) * | 2014-05-30 | 2016-01-27 | 金兆栋 | 一种语音、唇语控制装置及控制方法 |
| CN106331874A (zh) * | 2016-08-31 | 2017-01-11 | 浙江创佳数字技术有限公司 | 机顶盒的控制方法及设备 |
| CN109283999A (zh) * | 2018-07-26 | 2019-01-29 | 杭州懒陈鑫网络科技有限公司 | 一种手势交互方法以及交互系统 |
| CN113077219A (zh) * | 2021-04-16 | 2021-07-06 | 北京理工大学 | 一种物资设备的装定方法、装置及系统 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20080204553A1 (en) * | 2000-09-11 | 2008-08-28 | Pinotage L.L.C. | System and method for obtaining and utilizing maintenance information |
| CN201924745U (zh) * | 2010-10-29 | 2011-08-10 | 广州市浩云安防科技工程有限公司 | 一种枪弹柜智能管理装置 |
| CN102521668A (zh) * | 2011-12-31 | 2012-06-27 | 成都炳辉科技有限公司 | 弹药管理系统及其使用方法 |
| CN202502376U (zh) * | 2011-12-29 | 2012-10-24 | 山西北方惠丰机电有限公司 | 基于cpld的多路译码车载装定电路 |
-
2013
- 2013-12-26 CN CN201310739806.8A patent/CN103744309B/zh not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20080204553A1 (en) * | 2000-09-11 | 2008-08-28 | Pinotage L.L.C. | System and method for obtaining and utilizing maintenance information |
| CN201924745U (zh) * | 2010-10-29 | 2011-08-10 | 广州市浩云安防科技工程有限公司 | 一种枪弹柜智能管理装置 |
| CN202502376U (zh) * | 2011-12-29 | 2012-10-24 | 山西北方惠丰机电有限公司 | 基于cpld的多路译码车载装定电路 |
| CN102521668A (zh) * | 2011-12-31 | 2012-06-27 | 成都炳辉科技有限公司 | 弹药管理系统及其使用方法 |
Non-Patent Citations (1)
| Title |
|---|
| 舒鑫等: "基于故障树的某自行火炮供输弹机构故障分析", 《科学技术与工程》 * |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105278817A (zh) * | 2014-05-30 | 2016-01-27 | 金兆栋 | 一种语音、唇语控制装置及控制方法 |
| CN106331874A (zh) * | 2016-08-31 | 2017-01-11 | 浙江创佳数字技术有限公司 | 机顶盒的控制方法及设备 |
| CN109283999A (zh) * | 2018-07-26 | 2019-01-29 | 杭州懒陈鑫网络科技有限公司 | 一种手势交互方法以及交互系统 |
| CN109283999B (zh) * | 2018-07-26 | 2021-09-21 | 杭州懒陈鑫网络科技有限公司 | 一种手势交互方法以及交互系统 |
| CN113077219A (zh) * | 2021-04-16 | 2021-07-06 | 北京理工大学 | 一种物资设备的装定方法、装置及系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN103744309B (zh) | 2016-04-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103744309B (zh) | 一种基于语音或图像识别的车用装定系统 | |
| US11334077B2 (en) | Method and device for locating faulty photovoltaic panel, and unmanned aerial vehicle | |
| CN110969644B (zh) | 人员轨迹追踪方法、装置及系统 | |
| CN205179207U (zh) | 一种无人机的拍摄系统 | |
| CN110443908A (zh) | 一种基于无人机的电力巡检方法及系统 | |
| CA3039642C (en) | Systems and methods for recovering information from a recording device | |
| US11293722B2 (en) | Smart safety contraption and methods related thereto for use with a firearm | |
| CN105141915A (zh) | 一种视频查找方法及系统 | |
| CN107248091A (zh) | 一种人脸识别互动营销系统 | |
| CN111294748A (zh) | 战场态势共享和目标识别系统 | |
| US20150063665A1 (en) | Information processing device, specifying method, and non-transitory computer readable storage medium | |
| CN110688913B (zh) | 一种基于智能设备的障碍物检测方法及装置 | |
| KR101865273B1 (ko) | 캅스 블랙박스를 이용한 총기 관리 시스템과, 캅스 블랙박스 및 그 방법 | |
| CN108873938A (zh) | 一种无人机控制平台及控制方法 | |
| CN108536156A (zh) | 目标跟踪系统和目标跟踪方法 | |
| CN107436749A (zh) | 基于三维虚拟现实场景的文字输入方法及系统 | |
| CN106303408A (zh) | 一种基于定位分析的卫星破案的方法和装置 | |
| CN108871066B (zh) | 一种枪瞄视频接口设备 | |
| CN104851151A (zh) | 一种安全识别监控系统 | |
| CN115100595A (zh) | 一种安全隐患检测方法、系统、计算机设备和存储介质 | |
| CN207586996U (zh) | 智能拍摄装置 | |
| CN103412887A (zh) | 远程在线图侦图控身份特征比对确认方法及实现系统 | |
| CN206879011U (zh) | 一种弹载制导设备 | |
| CN211503865U (zh) | 一种激光排爆系统 | |
| CN204731797U (zh) | 一种指纹识别监控系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20160427 |