CN211653601U - 基于体感交互的桌面系统 - Google Patents
基于体感交互的桌面系统 Download PDFInfo
- Publication number
- CN211653601U CN211653601U CN201922415405.2U CN201922415405U CN211653601U CN 211653601 U CN211653601 U CN 211653601U CN 201922415405 U CN201922415405 U CN 201922415405U CN 211653601 U CN211653601 U CN 211653601U
- Authority
- CN
- China
- Prior art keywords
- somatosensory interaction
- desktop system
- desktop
- voice
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 35
- 230000003238 somatosensory effect Effects 0.000 title claims abstract description 31
- 230000002452 interceptive effect Effects 0.000 claims abstract description 23
- 238000012544 monitoring process Methods 0.000 claims abstract description 21
- 230000000007 visual effect Effects 0.000 claims abstract description 9
- 230000001960 triggered effect Effects 0.000 claims abstract description 8
- 238000004891 communication Methods 0.000 claims description 5
- 238000003491 array Methods 0.000 claims description 4
- 230000000694 effects Effects 0.000 abstract description 7
- 238000010586 diagram Methods 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 238000000034 method Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 210000000697 sensory organ Anatomy 0.000 description 2
- 238000010276 construction Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
本申请公开了一种基于体感交互的桌面系统。该基于体感交互的桌面系统包括智能终端和体感交互设备,以使用户在真实场景中,通过所述体感交互设备与所述智能终端进行体感交互,所述体感交互设备,用于提供可进行体感交互的一个或多个互动道具,所述智能终端设备,包括:图像采集装置、语音采集装置、显示装置以及语音播报装置,所述图像采集装置,用于监控桌面范围内的图像信息;所述语音采集装置,用于监听桌面场景中触发的语音信息;所述显示装置,用于将视觉信息进行显示并输出视频信息;所述语音播报装置,用于输出音频信息。本申请解决了桌面系统的交互效果不佳的技术问题。
Description
技术领域
本申请涉及智能硬件领域,具体而言,涉及一种基于体感交互的桌面系统。
背景技术
随着智能手机和平板电脑的普及,只动动手指头越来越满足不了用户的其他感官的需求,甚至弱化了其他的感官的功能,进而造成感知及动手能力越来越差。
发明人发现,现有桌面系统的无法在保证用户与现实世界产生交互的同时,又能对交互体验进行即时反馈。
针对相关技术中桌面系统的交互效果不佳的问题,目前尚未提出有效的解决方案。
实用新型内容
本申请的主要目的在于提供一种基于体感交互的桌面系统,以解决桌面系统的交互效果不佳的问题。
为了实现上述目的,根据本申请的一个方面,提供了一种基于体感交互的桌面系统。
根据本申请的基于体感交互的桌面系统包括:智能终端和体感交互设备,以使用户在真实场景中,通过所述体感交互设备与所述智能终端进行体感交互,所述体感交互设备,用于提供可进行体感交互的一个或多个互动道具,所述智能终端设备,包括:图像采集装置、语音采集装置、显示装置以及语音播报装置,所述图像采集装置,用于监控桌面范围内的图像信息;所述语音采集装置,用于监听桌面场景中触发的语音信息;所述显示装置,用于将视觉信息进行显示并输出视频信息;所述语音播报装置,用于输出音频信息。
可选地,所述图像采集装置的监控范围覆盖桌面上的一个体验区域中,并输入持续视频流。
可选地,所述图像采集装置,为监视角度朝下的摄像头,并且嵌入到智能音箱、智能台灯、儿童故事机或者桌面机器人的设备中。
可选地,所述图像采集装置,为监视角度非朝下的摄像头,并且与反光设备配合。
可选地,所述语音采集装置,包括:一个或多个麦克风阵列。
可选地,所述显示装置,包括:显示装置或者投影装置。
可选地,所述智能终端,包括:通信装置,用于接入网络。
可选地,所述体感交互设备,为带有图片式的绘本或故事书的实体道具。
可选地,所述体感交互设备,为卡片或游戏模块的游戏道具。
可选地,所述体感交互设备,为图书、课本、习题中的用于学习单词、句子或者习题的文本道具。
在本申请实施例中基于体感交互的桌面系统,采用智能终端和体感交互设备,以使用户在真实场景中,通过所述体感交互设备与所述智能终端进行体感交互的方式,通过所述体感交互设备,用于提供可进行体感交互的一个或多个互动道具,所述智能终端设备,包括:图像采集装置、语音采集装置、显示装置以及语音播报装置,所述图像采集装置,用于监控桌面范围内的图像信息;所述语音采集装置,用于监听桌面场景中触发的语音信息;所述显示装置,用于将视觉信息进行显示并输出视频信息;所述语音播报装置,用于输出音频信息,达到了通过肢体动作来达到与机器进行交互,让机器理解使用者的行为和意图,从而达到帮助使用者获取所需信息的目的,从而实现了体感交互的技术效果,进而解决了桌面系统的交互效果不佳的技术问题。
附图说明
构成本申请的一部分的附图用来提供对本申请的进一步理解,使得本申请的其它特征、目的和优点变得更明显。本申请的示意性实施例附图及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1是根据本申请实施例的基于体感交互的桌面系统内部结构示意图;
图2是根据本申请实施例的基于体感交互的桌面系统实体结构示意图;
图3是根据本申请实施例的基于体感交互的桌面系统一种实现方式示意图;
图4是根据本申请实施例的基于体感交互的桌面系统另一种实现方式示意图;
图5是根据本申请实施例的基于体感交互的桌面系统再一种实现方式示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本申请中,术语“上”、“下”、“左”、“右”、“前”、“后”、“顶”、“底”、“内”、“外”、“中”、“竖直”、“水平”、“横向”、“纵向”等指示的方位或位置关系为基于附图所示的方位或位置关系。这些术语主要是为了更好地描述本申请及其实施例,并非用于限定所指示的装置、元件或组成部分必须具有特定方位,或以特定方位进行构造和操作。
并且,上述部分术语除了可以用于表示方位或位置关系以外,还可能用于表示其他含义,例如术语“上”在某些情况下也可能用于表示某种依附关系或连接关系。对于本领域普通技术人员而言,可以根据具体情况理解这些术语在本申请中的具体含义。
此外,术语“安装”、“设置”、“设有”、“连接”、“相连”、“套接”应做广义理解。例如,可以是固定连接,可拆卸连接,或整体式构造;可以是机械连接,或电连接;可以是直接相连,或者是通过中间媒介间接相连,又或者是两个装置、元件或组成部分之间内部的连通。对于本领域普通技术人员而言,可以根据具体情况理解上述术语在本申请中的具体含义。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
如图1所示,本申请实施例中的基于体感交互的桌面系统,包括:智能终端10和体感交互设备20,以使用户在真实场景中,通过所述体感交互设备20 与所述智能终端10进行体感交互,所述体感交互设备20,用于提供可进行体感交互的一个或多个互动道具,所述智能终端设备10,包括:图像采集装置 102、语音采集装置103、显示装置104以及语音播报装置105,所述图像采集装置102,用于监控桌面范围内的图像信息;所述语音采集装置103,用于监听桌面场景中触发的语音信息;所述显示装置104,用于将视觉信息进行显示并输出视频信息;所述语音播报装置105,用于输出音频信息。本申请实施例中的基于体感交互的桌面系统,相比于鼠标、键盘、触摸屏,该体感交互系统能够更快的理解使用者的意图,更快的完成信息检索和获取,同时也更加符合用户的使用习惯。上述系统结合了计算机视觉技术和语音识别技术,并将其应用到桌面信息检索,帮助使用者提升学习的效率和游戏的乐趣。该交互系统强调使用者在真实世界进行触碰式体感交互。
具体地,所述图像采集装置102设置于所述智能终端10中,用于监控桌面范围内的图像信息。桌面范围是指用于实施体感交互的载体,在本申请的实施例中并不进行具体限定。所述语音采集装置103设置于所述智能终端10中,用于监听桌面场景中触发的语音信息。而所触发的语音信息主要是指在环境中的人的声音,去除相应的噪声干扰。所述显示装置104用于将视觉信息进行显示并输出视频信息,并且可以通过显示屏或者投影的方式进行呈现。所述语音播报装置105,用于输出音频信息,从而与用户进行交互或者应答。
从以上的描述中,可以看出,本申请实现了如下技术效果:
在本申请实施例中,采用智能终端和体感交互设备,以使用户在真实场景中,通过所述体感交互设备与所述智能终端进行体感交互的方式,通过所述体感交互设备,用于提供可进行体感交互的一个或多个互动道具,所述智能终端设备,包括:图像采集装置、语音采集装置、显示装置以及语音播报装置,所述图像采集装置,用于监控桌面范围内的图像信息;所述语音采集装置,用于监听桌面场景中触发的语音信息;所述显示装置,用于将视觉信息进行显示并输出视频信息;所述语音播报装置,用于输出音频信息,达到了通过肢体动作来达到与机器进行交互,让机器理解使用者的行为和意图,从而达到帮助使用者获取所需信息的目的,从而实现了体感交互的技术效果,进而解决了桌面系统的交互效果不佳的技术问题。
根据本申请实施例,作为本实施例中的优选,所述图像采集装置102的监控范围覆盖桌面上的一个体验区域中,并输入持续视频流。
具体地,图像采集装置102可以监控桌面,可视范围覆盖桌面体验区域,然后输出一个持续的视频流。
根据本申请实施例,作为本实施例中的优选,所述图像采集装置102,为监视角度朝下的摄像头,并且嵌入到智能音箱、智能台灯、儿童故事机或者桌面机器人的设备中。
具体地,所述图像采集装置102为直接朝下的摄像头,并以嵌入到智能音箱、智能台灯、儿童故事机或者桌面机器人的设备为载体。
根据本申请实施例,作为本实施例中的优选,所述图像采集装置102,为监视角度非朝下的摄像头,并且与反光设备配合。
具体地,所述图像采集装置102为非直接朝下的摄像头,而是通过配合反光镜达到监控桌面的效果。
根据本申请实施例,作为本实施例中的优选,所述语音采集装置103,包括:一个或多个麦克风阵列。
具体地,通过所述一个或者多个麦克风阵列,能够持续监听桌面场景的语音信息。
根据本申请实施例,作为本实施例中的优选,如图2所示,所述显示装置 104,包括:显示装置或者投影装置。
所述显示装置104可以是显示屏也可能是投影装置,即能够将视觉信息显示并传达给使用者就可以,在本申请的实施例中并不进行具体限定。
根据本申请实施例,作为本实施例中的优选,如图2所示,所述智能终端 10,包括:通信装置(未示出),用于接入网络。通过所述通信装置可以进行联网或者网络接入。
根据本申请实施例,作为本实施例中的优选,如图2所示,所述体感交互设备20,为带有图片式的绘本或故事书的实体道具。
根据本申请实施例,作为本实施例中的优选,如图2所示,所述体感交互设备20,为卡片或游戏模块的游戏道具。
根据本申请实施例,作为本实施例中的优选,如图2所示,所述体感交互设备20,为图书、课本、习题中的用于学习单词、句子或者习题的文本道具。
具体地,所述体感交互设备20的桌面体验物品可以有书、课本、习题等用于学习单词、句子以及习题等文本;也可能有图片式的绘本、故事书;又或者是卡片、模块等游戏的互动道具。比如,如图3所示,当使用者手指单击书本某个词语下方,即告知系统希望查询该词语的意思。又比如,如图4所示,当使用者在书本某句文字下方划过一条线,即告知系统希望解释该句子的意思。再比如,如图5所示,当使用者在书本某道作业题划过一个圈,即告知系统希望解答该题目。
以上所述仅为本申请的优选实施例而已,并不用于限制本申请,对于本领域的技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。
Claims (10)
1.一种基于体感交互的桌面系统,其特征在于,包括:智能终端和体感交互设备,以使用户在真实场景中,通过所述体感交互设备与所述智能终端进行体感交互,所述体感交互设备,用于提供可进行体感交互的一个或多个互动道具,所述智能终端设备,包括:图像采集装置、语音采集装置、显示装置以及语音播报装置,
所述图像采集装置,用于监控桌面范围内的图像信息;
所述语音采集装置,用于监听桌面场景中触发的语音信息;
所述显示装置,用于将视觉信息进行显示并输出视频信息;
所述语音播报装置,用于输出音频信息。
2.根据权利要求1所述的基于体感交互的桌面系统,其特征在于,所述图像采集装置的监控范围覆盖桌面上的一个体验区域中,并输入持续视频流。
3.根据权利要求2所述的基于体感交互的桌面系统,其特征在于,所述图像采集装置,为监视角度朝下的摄像头,并且嵌入到智能音箱、智能台灯、儿童故事机或者桌面机器人的设备中。
4.根据权利要求2所述的基于体感交互的桌面系统,其特征在于,所述图像采集装置,为监视角度非朝下的摄像头,并且与反光设备配合。
5.根据权利要求1所述的基于体感交互的桌面系统,其特征在于,所述语音采集装置,包括:一个或多个麦克风阵列。
6.根据权利要求1所述的基于体感交互的桌面系统,其特征在于,所述显示装置,包括:显示装置或者投影装置。
7.根据权利要求1所述的基于体感交互的桌面系统,其特征在于,所述智能终端,包括:通信装置,用于接入网络。
8.根据权利要求1所述的基于体感交互的桌面系统,其特征在于,所述体感交互设备,为带有图片式的绘本或故事书的实体道具。
9.根据权利要求1所述的基于体感交互的桌面系统,其特征在于,所述体感交互设备,为卡片或游戏模块的游戏道具。
10.根据权利要求1所述的基于体感交互的桌面系统,其特征在于,所述体感交互设备,为图书、课本、习题中的用于学习单词、句子或者习题的文本道具。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201922415405.2U CN211653601U (zh) | 2019-12-26 | 2019-12-26 | 基于体感交互的桌面系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201922415405.2U CN211653601U (zh) | 2019-12-26 | 2019-12-26 | 基于体感交互的桌面系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN211653601U true CN211653601U (zh) | 2020-10-09 |
Family
ID=72700326
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201922415405.2U Expired - Fee Related CN211653601U (zh) | 2019-12-26 | 2019-12-26 | 基于体感交互的桌面系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN211653601U (zh) |
-
2019
- 2019-12-26 CN CN201922415405.2U patent/CN211653601U/zh not_active Expired - Fee Related
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Ehret et al. | Embodied composition in real virtualities: Adolescents’ literacy practices and felt experiences moving with digital, mobile devices in school | |
US5982853A (en) | Telephone for the deaf and method of using same | |
CN105320262A (zh) | 操作虚拟世界里的电脑和手机的方法、装置以及使用其的眼镜 | |
CN105590486A (zh) | 一种基于机器视觉的座台式点读机及相关系统装置与方法 | |
Aghajan et al. | Human-centric interfaces for ambient intelligence | |
EP2926224B1 (en) | Virtual and augmented reality instruction system | |
CN110263041B (zh) | 一种运动轨迹信息的单界面显示方法及系统 | |
CN203260212U (zh) | 增强现实三维互动学习机 | |
CN205521501U (zh) | 一种基于全息投影3d立体头像的机器人 | |
CN106776449A (zh) | 一种植物科普电子书阅读展示方法及装置 | |
CN104575138A (zh) | 一种情景互动式多媒体系统及其应用 | |
JP2021006977A (ja) | コンテンツ制御システム、コンテンツ制御方法、およびコンテンツ制御プログラム | |
CN108563327A (zh) | 增强现实方法、装置、存储介质及电子设备 | |
CN111324201A (zh) | 基于体感交互的阅读方法以及装置、系统 | |
CN111103982A (zh) | 基于体感交互的数据处理方法以及装置、系统 | |
CN110473436A (zh) | 一种阅读辅助学习设备 | |
CN211653601U (zh) | 基于体感交互的桌面系统 | |
CN211146174U (zh) | 一种台灯 | |
CN209785287U (zh) | 一种智能书写云联一体机电控教学系统 | |
WO2022166039A1 (zh) | 一种基于磁性卡片的汉字拼搭互动学习系统及方法 | |
Wise | A hole in the hand: Assemblages of attention and mobile screens | |
JP2021009351A (ja) | コンテンツ制御システム、コンテンツ制御方法、およびコンテンツ制御プログラム | |
CN215576614U (zh) | 基于二维码识别的翻书阅读展项装置 | |
CN214670483U (zh) | 基于ar技术的多点触控显示展项装置 | |
CN215814107U (zh) | 基于体感互动的漫画墙展示系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20201009 |