CN219642283U - 一种多角度的唇语采集识别装置 - Google Patents
一种多角度的唇语采集识别装置 Download PDFInfo
- Publication number
- CN219642283U CN219642283U CN202320339767.1U CN202320339767U CN219642283U CN 219642283 U CN219642283 U CN 219642283U CN 202320339767 U CN202320339767 U CN 202320339767U CN 219642283 U CN219642283 U CN 219642283U
- Authority
- CN
- China
- Prior art keywords
- lip language
- angle
- interactive screen
- lower magnet
- adjusting mechanism
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000007246 mechanism Effects 0.000 claims abstract description 62
- 230000002452 interceptive effect Effects 0.000 claims abstract description 56
- 238000000034 method Methods 0.000 claims description 9
- 239000000428 dust Substances 0.000 claims description 3
- 238000009826 distribution Methods 0.000 claims description 2
- 230000006870 function Effects 0.000 abstract description 3
- 230000001737 promoting effect Effects 0.000 abstract description 2
- 230000000007 visual effect Effects 0.000 abstract description 2
- 230000008569 process Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 230000001105 regulatory effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000001276 controlling effect Effects 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 208000016354 hearing loss disease Diseases 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000001681 protective effect Effects 0.000 description 1
Landscapes
- Toys (AREA)
Abstract
本实用新型涉及了唇语影像采集技术领域，尤其为一种多角度的唇语采集识别装置，该装置由唇语采集识别交互屏、交互屏转动调节机构、升降调节机构和多角度采集识别机构组成；通过唇语采集识别交互屏可以实时收集唇语内容，并通过芯片进行识别，然后将结果通过显示屏显示或通过音响播报；通过交互屏转动调节机构，可以手动调节屏幕的俯仰角度，提供更好的交互视角；通过升降调节机构自动调节到适当的高度，实现人脸追踪；通过多角度采集识别机构，可以收集到同一唇语在不同角度的情况，方便后续的唇语识别研究；该唇语采集识别装置可选择调节的角度更广，操作更为简便，实现了更为智能化的调节和采集识别功能，可以为唇语后续的研究起到促进作用。
Description
技术领域
本实用新型涉及了唇语影像采集技术领域，具体设计一种多角度的唇语采集识别装置。
背景技术
唇语识别，是从图像中连续识别出人脸，判断其中正在说话的人并提取此人连续的口型变化特征；再将连续变化的特征输入到唇语识别模型中，识别出讲话人口型对应的发音；随后根据识别出的发音，计算出可能性最大的自然语言语句的过程。
唇语识别项技术应用场景广泛，不仅能够帮助听力障碍者，在语音识别、安防系统和公共安全分析等领域都有应用；语音识别：在某些嘈杂的环境下，人机语音交互过程中，信噪比过小，语音识别准确率低；安防系统：由于每个人说话都各有特点，包括说话时口型的变化有自身的规律，利用人说话时口型变化的每个人不同的特点，可以进行人的身份鉴别；进行活体检测：配合其他生物特征识别技术来提高其安全性；公共安全：在日常案件侦破过程中，遇到只拍到图像而声音由于距离远而没录制到的情况，可以通过分析其中关键语音信息。
唇语识别方面的进步，离不开对数据集的采集工作，目前数据集有较高的环境复杂度，但对不同人脸角度情况下，同一词语的唇语视频收集不多，如若加入对多角度的唇语情况采集，将增加数据集的丰富性，能在唇语深度学习方面起到促进作用。
发明内容
本实用新型的目的是：多角度的采集唇语信息，丰富唇语数据集，从而提高唇语识别的准确率，提供了一种多角度的唇语采集识别装置，使唇语采集识别装置可选择调节的角度更广，操作更为简洁，实现了更为智能化的调节和采集识别功能，可以为唇语后续的研究起到促进作用。
本实用新型的目的是这样实现的：一种多角度的唇语采集识别装置，包括唇语采集识别交互屏、交互屏转动调节机构、升降调节机构和多角度采集识别机构；其特征在于：唇语采集识别交互屏与交互屏转动调节机构铰链连接，交互屏转动调节机构与升降调节机构通过螺纹连接，升降调节机构与多角度采集识别机构的通过导轨槽和导轨连接。
所述唇语采集识别交互屏由摄像头、显示屏、音响、内部芯片电池、转动调节连接杆组成，所述摄像头、显示屏、音响、转动调节连接杆均固定在唇语采集识别交互屏的外表面，且音响有两组分布于唇语采集交互屏的两侧，唇语识别采集相关程序存贮于芯片上，内部芯片电池固定在唇语采集识别交互屏的内部。
所述交互屏转动调节机构由连接块、转动调节槽、转动调节轴、上下移动块、内螺纹孔组成，连接块与上下移动块固定连接，转动调节槽于连接块上，为转动调节轴与唇语采集识别交互屏的转动调节杆铰链连接提供相应的空间，内螺纹孔位于上下移动快中心处。
所述升降调节机构由升降装置保护壳、外螺纹杆、角度调节座、上连接座、下连接座、轴座、马达、上部磁铁、导轨槽组成，所述上连接座与下连接座间固定有外螺纹杆，在其外部有升降装置保护壳，用于减少灰尘对内部结构的影响，外螺纹杆与交互屏转动调节机构的内螺纹孔配合，当外螺纹杆转动时，带动交互屏转动调节机构及唇语采集识别交互屏完成上下移动，所述角度调节座内部有轴座、马达、上部磁铁、导轨槽，在外螺纹杆及下连接座下部连接有轴座，轴座与马达相连，在马达下方开有导轨槽，并在导轨槽上表面贴有上部磁铁。
所述多角度采集识别机构由导轨、固定座、正视处下部磁铁、15°下部磁铁、30°下部磁铁、45°下部磁铁、60°下部磁铁组成，所述固定座与导轨固定连接，其固定座高度与升降装置中导轨槽底部到角度调节座底部的距离相同，正视处下部磁铁、15°下部磁铁、30°下部磁铁、45°下部磁铁与60°下部磁铁固定于导轨上，其底部与导轨底部在同一平面上，且15°下部磁铁、30°下部磁铁、45°下部磁铁与60°下部磁铁分别有两组，对称分布于正视处下部磁铁两侧。
与现有技术相比，本实用新型的有益效果：本实用新型通过唇语采集识别交互屏可以实时收集唇语内容，并通过芯片进行识别，然后将结果通过显示屏显示或通过音响播报；通过交互屏转动调节机构，可以手动调节屏幕的俯仰角度，提供更好的交互视角；通过升降调节机构自动调节到适当的高度，实现人脸追踪；通过多角度采集识别机构，可以收集到同一唇语在不同角度的情况，方便后续的唇语识别研究；该唇语采集识别装置可选择调节的角度更广，操作更为简便，实现了更为智能化的调节和采集识别功能，可以为唇语后续的研究起到促进作用。
附图说明
图1是本实用新型的结构侧视图；
图2是本实用新型的结构正视图；
图3是本实用新型的唇语采集识别交互屏结构图；
图4是本实用新型的唇语采集识别交互屏侧视图；
图5是本实用新型的交互屏转动调节机构结构示意图；
图6是本实用新型的升降调节机构正视图；
图7是本实用新型的升降调节机构内部结构示意图；
图8是本实用新型的多角度采集识别机构结构示意图；
图9是本实用新型的多角度采集识别机构俯视图。
图中：1、唇语采集识别交互屏；11、摄像头；12、显示屏；13、音响；14、内部芯片电池；15、转动调节连接杆；2、交互屏转动调节机构；21、连接块；22、转动调节槽；23、转动调节轴；24、上下移动块；25、内螺纹孔；3、升降调节机构；31、升降装置保护壳； 32、外螺纹杆；33、角度调节座； 34、上连接座；35、下连接座； 36、轴座；37、马达；38、上部磁铁；39、导轨槽； 4、多角度采集识别机构；41、导轨；42、固定座；43、正视处下部磁铁；44、15°下部磁铁；45、30°下部磁铁；46、45°下部磁铁；47、60°下部磁铁。
具体实施方案
下面结合附图对本实用新型做进一步的说明。
实施例：如图1、图2所示，一种多角度的唇语采集识别装置，包括唇语采集识别交互屏1、交互屏转动调节机构2、升降调节机构3和多角度采集识别机构4；其特征在于：唇语采集识别交互屏1与交互屏转动调节机构2铰链连接，交互屏转动调节机构2与升降调节机构3通过螺纹连接，升降调节机构3与多角度采集识别机构4的通过导轨槽39和导轨41连接。
如图3、图4所示，所述唇语采集识别交互屏1由摄像头11、显示屏12、音响13、内部芯片电池14、转动调节连接杆15组成，所述摄像头11、显示屏12、音响13、转动调节连接杆15均固定在唇语采集识别交互屏1的外表面，且音响13有两组分布于唇语采集交互屏1的两侧，唇语识别采集相关程序存贮于芯片上，内部芯片电池14固定在唇语采集识别交互屏1的内部。
如图5所示，所述交互屏转动调节机构2由连接块21、转动调节槽22、转动调节轴23、上下移动块24、内螺纹孔25组成，连接块21与上下移动块24固定连接，转动调节槽22于连接块21上，为转动调节轴23与唇语采集识别交互屏1的转动调节连接杆15铰链连接提供相应的空间，内螺纹孔25位于上下移动块24中心处。
如图6、图7所示，所述升降调节机构3由升降装置保护壳31、外螺纹杆32、角度调节座33、上连接座34、下连接座35、轴座36、马达37、上部磁铁38、导轨槽39组成，所述上连接座34与下连接座35间固定有外螺纹杆32，在其外部有升降装置保护壳31，用于减少灰尘对内部结构的影响，外螺纹杆32与交互屏转动调节机构2的内螺纹孔25配合，当外螺纹杆32转动时，带动交互屏转动调节机构2及唇语采集识别交互屏1完成上下移动，所述角度调节座33内部有轴座36、马达37、上部磁铁38、导轨槽39，在外螺纹杆32及下连接座34下部连接有轴座36，轴座36与马达37相连，在马达37下方开有导轨槽39，并在导轨槽39上表面贴有上部磁铁38。
如图8、图9所示，所述多角度采集识别机构4由导轨41、固定座42、正视处下部磁铁43、15°下部磁铁44、30°下部磁铁45、45°下部磁铁46、60°下部磁铁47组成，所述固定座42与导轨41固定连接，其固定座42高度与升降调节机构3中导轨槽39底部到角度调节座33底部的距离相同，正视处下部磁铁43、15°下部磁铁44、30°下部磁铁45、45°下部磁铁46与60°下部磁铁47固定于导轨41上，其底部与导轨41底部在同一平面上，均能与升降调节机构3的下部的导轨槽39中上部铁磁38相配合磁吸，且15°下部磁铁44、30°下部磁铁45、45°下部磁铁46与60°下部磁铁47分别有两组，对称分布于正视处下部磁铁43两侧。
本实用新型的工作过程是：在进行唇语识别时，通过交互屏转动调节机构1，进行俯仰角度的调节，让摄像头11能捕捉到面部信息，且显示屏12能看到相应图像，内部芯片会有相关程序，使音响13根据实际需要进行调节建议的播报，直到调节到合适的角度，由于转动调节连接杆15和转动调节轴23是铰链连接，在完成调节后可以自锁；芯片还可以通过控制升降调节机构3的马达37，从而带动外螺纹杆32旋转，实现上下高度的调整；在确定好角度后，点击显示屏12即可开始唇语的识别；在进行唇语信息的采集时，调节同唇语识别过程，在进行同一唇语的多角度信息收集时，先在正视处确定好位置，轨道槽39处的上部磁铁38和正视处下部磁铁43相互磁吸，保证位置的相对固定，在正面采集完成后，可以移动角度调整座到15°下部磁铁44、30°下部磁铁45、45°下部磁铁46与60°下部磁铁47处，进行不同角度的信息收集。
上面结合附图对本实用新型的实施方式作了详细说明，但是本实用新型不限于上述实施方式，本技术领域的普通技术人员在本实用新型的实质范围内所做出的均等变化与改进等，均应归属于本实用新型的专利涵盖范围内。
Claims (5)
1.一种多角度的唇语采集识别装置，包括唇语采集识别交互屏、交互屏转动调节机构、升降调节机构和多角度采集识别机构；其特征在于：唇语采集识别交互屏与交互屏转动调节机构通过铰链连接，交互屏转动调节机构与升降调节机构通过螺纹连接，升降调节机构与多角度采集识别机构的通过导轨槽和导轨连接。
2.如权利要求1所述的一种多角度的唇语采集识别装置，其特征在于：所述唇语采集识别交互屏由摄像头、显示屏、音响、内部芯片电池、转动调节连接杆组成，所述摄像头、显示屏、音响、转动调节连接杆均固定在唇语采集识别交互屏的外表面，且音响有两组分布于唇语采集交互屏的两侧，唇语识别采集相关程序存贮于芯片上，内部芯片电池固定在唇语采集识别交互屏的内部。
3.如权利要求1所述的一种多角度的唇语采集识别装置，其特征在于：所述交互屏转动调节机构由连接块、转动调节槽、转动调节轴、上下移动块、内螺纹孔组成，连接块与上下移动块固定连接，转动调节槽于连接块上，为转动调节轴与唇语采集识别交互屏的转动调节杆铰链连接提供相应的空间，内螺纹孔位于上下移动快中心处。
4.如权利要求1所述的一种多角度的唇语采集识别装置，其特征在于：所述升降调节机构由升降装置保护壳、外螺纹杆、角度调节座、上连接座、下连接座、轴座、马达、上部磁铁、导轨槽组成，所述上连接座与下连接座间固定有外螺纹杆，在其外部有升降装置保护壳，用于减少灰尘对内部结构的影响，外螺纹杆与交互屏转动调节机构的内螺纹孔配合，当外螺纹杆转动时，带动交互屏转动调节机构及唇语采集识别交互屏完成上下移动，所述角度调节座内部有轴座、马达、上部磁铁、导轨槽，在外螺纹杆及下连接座下部连接有轴座，轴座与马达相连，在马达下方开有导轨槽，并在导轨槽上表面贴有上部磁铁。
5.如权利要求1所述的一种多角度的唇语采集识别装置，其特征在于：所述多角度采集识别机构由导轨、固定座、正视处下部磁铁、15°下部磁铁、30°下部磁铁、45°下部磁铁、60°下部磁铁组成，所述固定座与导轨固定连接，其固定座高度与升降装置中导轨槽底部到角度调节座底部的距离相同，正视处下部磁铁、15°下部磁铁、30°下部磁铁、45°下部磁铁与60°下部磁铁固定于导轨上，其底部与导轨底部在同一平面上，且15°下部磁铁、30°下部磁铁、45°下部磁铁与60°下部磁铁分别有两组，对称分布于正视处下部磁铁两侧。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202320339767.1U CN219642283U (zh) | 2023-02-27 | 2023-02-27 | 一种多角度的唇语采集识别装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202320339767.1U CN219642283U (zh) | 2023-02-27 | 2023-02-27 | 一种多角度的唇语采集识别装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN219642283U true CN219642283U (zh) | 2023-09-05 |
Family
ID=87807291
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202320339767.1U Active CN219642283U (zh) | 2023-02-27 | 2023-02-27 | 一种多角度的唇语采集识别装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN219642283U (zh) |
-
2023
- 2023-02-27 CN CN202320339767.1U patent/CN219642283U/zh active Active
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10891472B2 (en) | Automatic body movement recognition and association system | |
| CN101305913B (zh) | 一种基于视频的人脸美丽评价方法 | |
| CN103856689B (zh) | 面向新闻视频的人物对话字幕提取方法 | |
| WO2020119630A1 (zh) | 一种多模态客户满意度综合评价系统、方法 | |
| JP5323770B2 (ja) | ユーザ指示取得装置、ユーザ指示取得プログラムおよびテレビ受像機 | |
| CN106096662B (zh) | 基于加速度传感器的人体运动状态识别 | |
| CN103413113A (zh) | 一种服务机器人智能情感交互的方法 | |
| CN202130312U (zh) | 一种驾驶员疲劳驾驶监控装置 | |
| JP5751610B2 (ja) | 会話ロボット | |
| JPWO2005114576A1 (ja) | 動作内容判定装置 | |
| CN109785857A (zh) | 基于mfcc+mp融合特征的异常声事件识别方法 | |
| Yargıç et al. | A lip reading application on MS Kinect camera | |
| Goecke et al. | The audio-video Australian English speech data corpus AVOZES | |
| CN110933316A (zh) | 一种基于双摄交互式的教师跟踪教学系统 | |
| CN110363129A (zh) | 基于微笑范式和音视频行为分析的孤独症早期筛查系统 | |
| Saitoh et al. | SSSD: Speech scene database by smart device for visual speech recognition | |
| CN110750152A (zh) | 一种基于唇部动作的人机交互方法和系统 | |
| CN110414314A (zh) | 一种可进行人脸跟踪识别的摄像头结构及系统 | |
| Zhao et al. | Real-time sign language recognition based on video stream | |
| WO2021017096A1 (zh) | 一种将人脸信息录入数据库的方法和装置 | |
| Caridakis et al. | A multimodal corpus for gesture expressivity analysis | |
| CN116109455B (zh) | 一种基于人工智能的语言教学辅助系统 | |
| CN111460997B (zh) | 一种基于全方位动态捕捉的人脸识别系统及识别方法 | |
| US20220360837A1 (en) | Media playing device and self-service terminal | |
| CN219642283U (zh) | 一种多角度的唇语采集识别装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| GR01 | Patent grant | ||
| GR01 | Patent grant |