CN115061606A - 一种裸眼3d沉浸式体验设备 - Google Patents
一种裸眼3d沉浸式体验设备 Download PDFInfo
- Publication number
- CN115061606A CN115061606A CN202210133814.7A CN202210133814A CN115061606A CN 115061606 A CN115061606 A CN 115061606A CN 202210133814 A CN202210133814 A CN 202210133814A CN 115061606 A CN115061606 A CN 115061606A
- Authority
- CN
- China
- Prior art keywords
- naked eye
- eye
- naked
- display
- immersive experience
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000000712 assembly Effects 0.000 claims abstract description 15
- 238000000429 assembly Methods 0.000 claims abstract description 15
- 210000001508 eye Anatomy 0.000 claims description 178
- 210000005252 bulbus oculi Anatomy 0.000 claims description 41
- 230000009471 action Effects 0.000 claims description 14
- 238000005516 engineering process Methods 0.000 description 12
- 238000000034 method Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 6
- 230000008901 benefit Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000011218 segmentation Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 3
- 230000003068 static effect Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 238000007654 immersion Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 210000001145 finger joint Anatomy 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明提供了一种裸眼3D沉浸式体验设备，所述裸眼3D沉浸式体验设备包括：裸眼3D播放模组，用于获取裸眼3D画面；所述裸眼3D画面为预先创建的视频文件或通过图像采集设备实时采集的视频文件；裸眼3D显示终端，与所述裸眼3D播放模组模组连接；所述3D显示终端包括环绕设置的多个裸眼3D显示组件，多个所述裸眼3D显示组件受控于所述裸眼3D播放模组，以协同显示所述裸眼3D画面。本发明的裸眼3D沉浸式体验设备能够替代了传统的VR头盔等设备，营造环绕式的裸眼3D沉浸式体验场景。
Description
技术领域
本发明涉及裸眼3D技术领域，特别是一种裸眼3D沉浸式体验设备。
背景技术
虚拟现实技术是仿真技术的一个重要方向，同时也是仿真技术与计算机图 形学人机接口技术多媒体技术传感技术网络技术等多种技术的集合的交叉技术 前沿学科和研究领域。虚拟现实技术主要包括模拟环境、感知、自然技能和传 感设备等方面。目前，用户可以通过VR头显实现3D环境的感知，但是VR 头显整体较为笨重，佩戴过程中也会给用户带来不适感，从而影响用户的使用 体验。
发明内容
鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地 解决上述问题的裸眼3D沉浸式体验设备。
本发明提供了一种裸眼3D沉浸式体验设备，包括：
裸眼3D播放模组，用于获取裸眼3D画面；所述裸眼3D画面为预先创建 的视频文件或通过图像采集设备实时采集的视频文件；
裸眼3D显示终端，与所述裸眼3D播放模组模组连接；所述3D显示终端 包括环绕设置的多个裸眼3D显示组件，多个所述裸眼3D显示组件受控于所述 裸眼3D播放模组，以协同显示所述裸眼3D画面。
可选地，还包括眼球追踪模组；
所述眼球追踪模组，与所述裸眼3D播放模组连接，用于实时采集所述裸 眼3D沉浸式体验设备使用对象的眼球位置信息，并将所述眼球位置传输至所 述裸眼3D播放模组；
所述裸眼3D播放模组，还用于根据所述眼球追踪模组采集的所述眼球位 置信息实时调整所述裸眼3D显示终端实时显示的裸眼3D画面，以使所述裸眼 3D画面适配所述使用对象的眼球位置。
可选地，多个所述裸眼3D显示组件分布在水平方向上和垂直方向上；
所述裸眼3D显示终端在水平方向上形成不少于80°的水平视场角，在垂 直方向上形成不少于20°的垂直视场角。
可选地，所述裸眼3D显示终端包括在水平方向上设置的至少两个裸眼3D 显示组件，以及在垂直方向上设置的至少一个裸眼3D显示组件。
可选地，所述眼球追踪模组设置于所述裸眼3D显示终端的水平视场角不 少于20°的范围内。
可选地，所述裸眼3D沉浸式体验设备还包括手势追踪模组；
所述手势追踪模组，用于实时采集所述使用对象的手部位置信息和/或动作 信息；
所述裸眼3D播放模组，还用于根据所述手势追踪模组采集的所述手部位 置信息和/或动作信息实时调整所述裸眼3D画面。
可选地，所述手势追踪模组用于检测所述使用对象的手部在所述裸眼3D 沉浸式体验设备的部署空间对应的手部位置信息；根据所述手部位置信息追踪 所述使用对象的手部在所述部署空间内的手势动作信息，将所述手势动作信息 传输至所述所述裸眼3D播放模组；
所述裸眼3D播放模组，还用于根据所述手势动作信息对所述裸眼3D画面 的至少局部画面进行调整。
可选地，所述裸眼3D显示终端还用于受控于所述所述裸眼3D播放模组显 示虚拟操控器，并检测所述使用对象的手部基于所述虚拟控制器生成的手势动 作信息。
可选地，所述追踪模组通过USB接口、Type-c接口和/或HDMI接口与所 述裸眼3D显示终端连接。
可选地，其特征在于，所述裸眼3D显示终端包括LCD屏、OLED屏、LED 屏、micro led屏、mini Led屏或投影显示屏。
本实施例提供了一种裸眼3D沉浸式体验设备通过设置多个裸眼3D显示组 件设置在使用对象周围，以营造环绕式的裸眼3D沉浸式体验场景，替代了传 统的VR头盔等设备，在用户体验裸眼3D画面时，无需佩戴笨重的头盔，也 解决了VR头盔所带来的舒适性问题。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术 手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、 特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
根据下文结合附图对本发明具体实施例的详细描述，本领域技术人员将会 更加明了本发明的上述以及其他目的、优点和特征。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领 域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并 不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的 部件。在附图中：
图1示出了根据本发明实施例的裸眼3D沉浸式体验设备结构示意图；
图2示出了根据本发明一实施例的多边显示终端示意图；
图3示出了根据本发明另一实施例的多边显示终端示意图；
图4示出了根据本发明实施例的环形显示终端示意图；
图5示出了根据本发明实施例的球形显示终端示意图；
图6示出了根据本发明实施例的最佳观看位置示意图；
图7A～7B示出了根据本发明实施例的左眼图像和右眼图像示意图；
其中，10-裸眼3D播放模组，20-裸眼3D显示终端，21-裸眼3D显示组件， 30-眼球追踪模组，40-手势追踪模组。
具体实施方式
在本发明的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、 “长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、 “右”、“竖直”、“水平”、“顶”、“底”“内”、“外”、“顺时针”、 “逆时针”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具 有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。
此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗 示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、 “第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的 描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。
在本发明中，除非另有明确的规定和限定，术语“安装”、“相连”、“连 接”、“固定”等术语应做广义理解，例如，可以是固定连接，也可以是可拆 卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连， 也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普 通技术人员而言，可以根据具体情况理解上述术语在本发明中的具体含义。
下面将参照附图更详细地描述本发明的示例性实施例。虽然附图中显示了 本发明的示例性实施例，然而应当理解，可以以各种形式实现本发明而不应被 这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本 发明，并且能够将本发明的范围完整的传达给本领域的技术人员。
本发明实施例提供了一种裸眼3D沉浸式体验设备，参见图1可知，本实 施例的裸眼3D沉浸式体验设可以包括：裸眼3D播放模组10和与所述裸眼3D 播放模组10连接的裸眼3D显示终端20。其中，裸眼3D播放模组10用于获 取裸眼3D画面。裸眼3D播放模组10其实相当于裸眼3D沉浸式体验设备的 总处理器，裸眼3D播放模组10实现裸眼3D画面的播放控制以及裸眼3D画 面的处理等等。
裸眼3D播放模组10获取的所述裸眼3D画面为预先创建的视频文件或通 过图像采集设备实时采集的视频文件。其中，预先创建的视频文件，可以是预 先录制或剪辑得到的视频文件，该视频文件可以预先存储至裸眼3D播放模组 10，裸眼3D播放模组10可直接获取进行播放。亦或是，视频文件可以存储在 云端服务器，裸眼3D播放模组10可经由通讯模组与云端服务器进行连接，以 从云端服务器获取需要播放的视频文件。其中，通讯模组可以为裸眼3D沉浸 式体验设备的一个组成部分，裸眼3D沉浸式体验设备可以利用通讯组件与云 端服务器或者其他智能设备建立通讯连接，连接方式可以包括：蓝牙、WiFi、 4G、5G等方式。
除上述介绍的之外，裸眼3D播放模组10获取的所述裸眼3D画面还可以 是通过图像采集设备实时采集的视频文件，例如是与其他设备进行即时通讯时， 其他设备实时采集的视频流文件，或者是利用摄像头实时采集的视频流文件。
本实施例的所述3D显示终端是包括LCD屏、OLED屏、LED屏、micro led 屏、miniLed屏或投影显示的显示终端，可选地，3D显示终端可以是一种多边 的显示终端，也可以是一种多边的显示终端、环形的显示终端，或是一种球形 的显示终端。
所述3D显示终端可以包括环绕设置的多个裸眼3D显示组件21，多个所 述裸眼3D显示组件21受控于所述裸眼3D播放模组10，以协同显示所述裸眼 3D画面。多个裸眼3D显示组件形成多边形式显示终端、环形形式显示终端或 球形形式显示终端。其中，每个裸眼3D显示组件21利用柱镜式光栅，圆点式 光栅，夹缝式光栅实现裸眼3D画面的显示，或者是采用全息技术实现裸眼3D 画面的显示。本实施例提供了一种裸眼3D沉浸式体验设备通过设置多个裸眼 3D显示组件21设置在使用对象周围，以营造环绕式的裸眼3D沉浸式体验场景，替代了传统的VR头盔等设备，在用户体验裸眼3D画面时，无需佩戴笨 重的头盔，也解决了VR头盔所带来的舒适性问题。
在本实施例中，多个所述裸眼3D显示组件21分布在水平方向上和垂直方 向上，所述裸眼3D显示终端20在水平方向上形成不少于80°的水平视场角， 在垂直方向上形成不少于20°的垂直视场角。可选地，所述裸眼3D显示终端20包括在水平方向上设置的至少两个裸眼3D显示组件21，以及在垂直方向上 设置的至少一个裸眼3D显示组件21。
前文介绍，裸眼3D显示终端20可以为多边的显示终端、环形显示终端或 球形显示终端。其中，多边显示终端即裸眼3D显示终端20中的多个裸眼3D 显示组件21整体组成多个拼接的显示区域，多个裸眼3D显示组件21均可设 置有固定件(如卡扣)，各裸眼3D显示组件21可通过卡扣进行固定连接。或 者是，裸眼3D沉浸式体验设备还可以设置有集成支架，各裸眼3D显示组件 21可以安装于集成支架上，以组成裸眼3D显示终端20。
图1示出了多边显示终端形式的裸眼3D显示终端20，本实施例的裸眼3D 显示终端20可包括六个裸眼3D显示组件21，其中，水平方向上有设置有三个 裸眼3D显示组件21，垂直方向上设置有两个裸眼3D显示组件21。图1中， α角为水平视场角，β角为垂直视场角，α角大于等于80°，β角大于等于 20°。裸眼3D显示终端20包括用于驱动各裸眼3D显示组件21进行工作的驱 动系统板，裸眼3D播放模组10可以安装在该驱动系统板上，驱动系统板安装在任一3D裸眼显示组件上，且与各裸眼3D显示组件连接。
图2～图3示意性示出了一实施例的裸眼3D显示终端20部分示意图，图2 所示裸眼3D显示终端20中，两个裸眼3D显示组件21的夹角为γ。两个裸眼 3D显示组件21的屏幕中心的法线L1和法线L2汇聚一点O，点O还可以是裸 眼3D显示组件21的边缘交点依次连线所形成的圆形的圆心，使用对象处在圆 心位置观看3D内容可以获得最佳的沉浸式体验和裸眼3D效果体验，该圆形半 径基于组件的裸眼3D显示的最佳观看距离确定，两者相互关系为：最佳观看 距离/半径＝sin(相邻组件夹角/2)。也即，图2～3中的点O即为最佳观看位置点，点O与各裸眼3D显示组件21的屏幕中心的距离H即为最佳观看距离。 图2中的距离A，是任一裸眼3D显示组件21的长度。满足相邻夹角γ与多边 显示终端长度A和最佳观看距离H的相互关系公式：tanγ＝2H/A，可确定最佳 观看位置。
图4示出了环形显示终端形式的裸眼3D显示终端20，图4所示裸眼3D 显示终端20中，各裸眼3D显示组件21形成一个曲面显示区域，图5示出了 球形显示终端形式的裸眼3D显示终端20中，各裸眼3D显示组件21可以形成 一球形显示区域。环形显示终端的裸眼3D显示终端20和球形显示终端的裸眼 3D显示终端20，同样具有圆心或球心，对应的半径或球径长度等于裸眼3D显 示终端20的裸眼3D最佳观看距离。3D最佳观看距离和沉浸感及水平视场角 相关，最佳观看距离控制在1～5米，优选2～3米，同时满足在水平方向上形成 不少于80度的水平视场角，在垂直方向上形成不少于20度的垂直视场角。环 形显示终端和球形显示终端也是由多个有弧度的小片显示终端拼接而成，依照 选定的观看距离拼接多个小模块，进而满足视场角要求。
实际应用中，结合图6，无论采用图1～图5中任意一种裸眼3D显示终端 20，裸眼3D沉浸式体验设备的水平视场角α角大于等于80°，最佳观看距离 H可以采用上文介绍进行设定。
在本实施例中，如图1～图5，裸眼3D沉浸式体验设备还可以包括眼球追 踪模组30，所述眼球追踪模组30与所述裸眼3D播放模组10连接，用于实时 采集所述裸眼3D沉浸式体验设备使用对象的眼球位置信息，并将所述眼球位 置传输至所述裸眼3D播放模组10。所述裸眼3D播放模组10，还用于根据所 述眼球追踪模组30采集的所述眼球位置信息实时调整所述裸眼3D显示终端20 实时显示的裸眼3D画面，以使所述裸眼3D画面适配所述使用对象的眼球位置。
可选地，所述眼球追踪模组30设置于所述裸眼3D显示终端20的水平视 场角不少于20°的范围内。本实施例在水平视场角不少于20度的范围内设置 眼球追踪模组30，以实时追踪使用对象眼球位置信息及观看方向，并将该位置 信息反馈给显示终端播放系统，进而及时调整裸眼3D显示内容。
所述追踪模组通过USB接口、Type-c接口和/或HDMI接口与所述裸眼3D 显示终端20连接。眼球追踪模组30可以是红外感应设备或是图像采集设备。 相对应的，裸眼3D播放模组10可以安装在裸眼3D显示终端20内的驱动系统 板上，眼球追踪模组30对应的驱动程序对接在裸眼3D播放模组10上，裸眼 3D播放模组10内集成有具备核心的裸眼3D交织算法程序包，基于眼球追踪 模块反馈的眼球位置信息实时判断和显示相对应的裸眼3D画面，进而利用裸 眼3D交织算法程序包实现对裸眼3D画面的调整。
本实施例中，裸眼3D交织算法工具包可以为裸眼3D交织算法SDK工具 包，其可以集成设置于裸眼3D显示器10的控制器，裸眼3D交织算法SDK工 具包可以将一路左右格式或上下格式的视频内容，基于裸眼3D显示器10件的 3D设计方案进行实时交织成相匹配的裸眼3D影像，以使所述裸眼3D交织影 像适配所述使用对象的双眼位置。当人的眼睛看向不同方向时，眼部会有细微 的变化，这些变化会产生可以提取的特征，本实施例中的眼球追踪模组30可以 通过图像捕捉或扫描提取这些特征，从而实时追踪眼睛的变化。本实施例中的眼球追踪模组30可以为红外设备，或是图像采集设备。
如图7A～7B所示，裸眼3D交织算法是基于显示模块内的像素点分别显示 左眼图像L和右眼图像R，当眼球追踪模组30确认使用对象的眼球位置信息 如图5所示，则交织算法处理像素点显示图7A～7B的左眼图像L和左眼图像R， 此时裸眼3D显示终端20投射出的左右眼影像与人眼位置符合，使用对象能体 验正确的3D影像，当眼球追踪模组30确认使用对象的眼球位置信息如图7B 所示，此时使用对象的左右眼位置发生的变化，交织算法会处理像素点显示图 像同步变化成图7B所示内容，然后经裸眼3D显示终端20投射到使用对象左 右眼，使用对象再次体验到正确的3D影像。
在本实施例中，继续参见图1～图5，裸眼3D播放模组10可以根据使用对 象眼球对应的位置，使显示在正前方的内容具有更好的立体效果。实际应用中， 立体效果的好坏体现在清晰度、景深等参数上，裸眼3D播放模组10调节裸眼 3D画面时，可通过以下两点：第一点是开始阶段，裸眼3D播放模组10基于 初始眼球观看位置，即在正前方显示全画幅影像的中心关键影像区域，此影像 具有最好的景深立体感和清晰度；第二点是调整四周影像的清晰度适当下降， 依每个裸眼3D显示组件21进行即时调整，或者对各个裸眼3D显示组件21中的各个显示单元(如各像素块或者是由多个像素块组合形成的像素组)进行 即时调整。然后，根据视场角的逐渐变大，使立体效果逐渐变小，匹配人眼在 较小视场角内对影像的正确识别和敏感度，进而提升使用对象的沉浸感和视觉 临场感，同时因减小了最佳3D内容播放，减少了裸眼3D播放系统的数据处理， 提升的播放流畅度。
实际应用中，裸眼3D播放模组10除了可以控制裸眼3D显示终端20播放 全屏裸眼3D内容外，也可以播放2D平面显示内容，实现2D和3D显示兼容， 播放的3D内容或2D内容可以一整幅画面，可以是相互单独的画面，可以是画 中画等，本发明实施例对此不做限定。
本实施例的所述裸眼3D沉浸式体验设备还可以包括手势追踪模组40；所 述手势追踪模组40，用于实时采集所述使用对象的手部位置信息和/或动作信 息；所述裸眼3D播放模组10，还用于根据所述手势追踪模组40采集的所述手 部位置信息和/或动作信息实时调整所述裸眼3D画面。
手势追踪模组40对应的驱动运行程序同样可以对接在裸眼3D播放模组10 上，裸眼3D播放模组10上具备核心的裸眼3D交织算法程序包，基于眼球追 踪模组30反馈的眼球位置信息实时判断和显示相对应的裸眼3D画面，基于手 势追踪模组40反馈的手部位置信息和动作信息实时判断和调整相对应的显示 内容，例如手势从左往右滑动，即调整显示内容从左往右调整等。
本实施例中，所述手势追踪模组40用于检测所述使用对象的手部在所述裸 眼3D沉浸式体验设备的部署空间对应的手部位置信息；根据所述手部位置信 息追踪所述使用对象的手部在所述部署空间内的手势动作信息，将所述手势动 作信息传输至所述所述裸眼3D播放模组10。所述裸眼3D播放模组10还用于 根据所述手势动作信息对所述裸眼3D画面的至少局部画面进行调整。
也就是说，手势追踪模组40可以采集使用对象的手部位置信息和手势动作 信息，具体地，可以包括：
S1，捕捉使用对象的手部对应的连续图像帧信息；
S2，根据连续图像帧信息进行手势检测和分割以及手势分析；手势分割法 主要包括基于单目视觉的手势分割和基于立体视觉的手势分割。手势分析时， 可以获得手势的形状特征或运动轨迹，手势分析的主要方法有以下几类：边缘 轮廓提取法、质心手指等多特征结合法以及指关节式跟踪法等。
S3，根据手势分析结构进行静态手势识别后再进行动态手势识别。手势识 别是将模型参数空间里的轨迹(或点)分类到该空间里某个子集的过程，其包括 静态手势识别和动态手势识别，动态手势识别最终可转化为静态手势识别。从 手势识别的技术实现来看，常见手势识别方法主要有:模板匹配法神经网络法 和隐马尔可夫模型法。
例如，手势追踪模组40可以先抓取使用对象手部位置信息，即为初始点， 接下来抓取相应的动作信息，包括不限于往前伸、往后缩、往左、往右、抓取、 往上、往下等，将该动作信息反馈给裸眼3D播放模组10，裸眼3D播放模组 10基于该信息实时调整裸眼3D显示内容，实现对影像的全部或局部进行对应 的调整，进而实现内容与使用对象之间的互动。
可选地，所述裸眼3D显示终端20还用于受控于所述所述裸眼3D播放模 组10显示虚拟操控器，并检测所述使用对象的手部基于所述虚拟控制器生成的 手势动作信息。例如，裸眼3D影像在正前方显示一个球体，悬浮在半空中， 手部对动作可以使用该球体进行对应的前后左右放大缩小等变化。
本实施例的眼球追踪模组30和手势追踪模组40可以是一种隐藏式的布局 安装，眼球追踪模块和手势追踪模组40硬件部分主要是摄像头模块，通过屏下 摄像头技术可以实现隐藏式布局，使其不对显示内容进行干扰。本实施例通过 在裸眼3D沉浸式体验设备中设置眼球追踪模组30可以实时根据使用对象的位 置适应性调整裸眼3D显示终端20所播放的裸眼3D画面，以使得使用对象看 到的画面具有立体感和沉浸感，通过设置手势追踪模组40可以实现使用对象和 裸眼3D沉浸式体验设备的互动，增加用户的参与感，有效提升用户的使用体 验。
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其 限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术 人员应当理解：在本发明的精神和原则之内，其依然可以对前述各实施例所记 载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而 这些修改或者替换，并不使相应技术方案脱离本发明的保护范围。
Claims (10)
1.一种裸眼3D沉浸式体验设备，其特征在于，包括：
裸眼3D播放模组，用于获取裸眼3D画面；所述裸眼3D画面为预先创建的视频文件或通过图像采集设备实时采集的视频文件；
裸眼3D显示终端，与所述裸眼3D播放模组模组连接；所述3D显示终端包括环绕设置的多个裸眼3D显示组件，多个所述裸眼3D显示组件受控于所述裸眼3D播放模组，以协同显示所述裸眼3D画面。
2.根据权利要求1所述的裸眼3D沉浸式体验设备，其特征在于，还包括眼球追踪模组；
所述眼球追踪模组，与所述裸眼3D播放模组连接，用于实时采集所述裸眼3D沉浸式体验设备使用对象的眼球位置信息，并将所述眼球位置传输至所述裸眼3D播放模组；
所述裸眼3D播放模组，还用于根据所述眼球追踪模组采集的所述眼球位置信息实时调整所述裸眼3D显示终端实时显示的裸眼3D画面，以使所述裸眼3D画面适配所述使用对象的眼球位置。
3.根据权利要求2所述的裸眼3D沉浸式体验设备，其特征在于，多个所述裸眼3D显示组件分布在水平方向上和垂直方向上；
所述裸眼3D显示终端在水平方向上形成不少于80°的水平视场角，在垂直方向上形成不少于20°的垂直视场角。
4.根据权利要求3所述的裸眼3D沉浸式体验设备，其特征在于，
所述裸眼3D显示终端包括在水平方向上设置的至少两个裸眼3D显示组件，以及在垂直方向上设置的至少一个裸眼3D显示组件。
5.根据权利要求3所述的裸眼3D沉浸式体验设备，其特征在于，所述眼球追踪模组设置于所述裸眼3D显示终端的水平视场角不少于20°的范围内。
6.根据权利要求1-5中任一项所述的裸眼3D沉浸式体验设备，其特征在于，所述裸眼3D沉浸式体验设备还包括手势追踪模组；
所述手势追踪模组，用于实时采集所述使用对象的手部位置信息和/或动作信息；
所述裸眼3D播放模组，还用于根据所述手势追踪模组采集的所述手部位置信息和/或动作信息实时调整所述裸眼3D画面。
7.根据权利要求6所述的裸眼3D沉浸式体验设备，其特征在于，所述手势追踪模组用于检测所述使用对象的手部在所述裸眼3D沉浸式体验设备的部署空间对应的手部位置信息；根据所述手部位置信息追踪所述使用对象的手部在所述部署空间内的手势动作信息，将所述手势动作信息传输至所述所述裸眼3D播放模组；
所述裸眼3D播放模组，还用于根据所述手势动作信息对所述裸眼3D画面的至少局部画面进行调整。
8.根据权利要求6所述的裸眼3D沉浸式体验设备，其特征在于，
所述裸眼3D显示终端还用于受控于所述所述裸眼3D播放模组显示虚拟操控器，并检测所述使用对象的手部基于所述虚拟控制器生成的手势动作信息。
9.根据权利要求6所述的裸眼3D沉浸式体验设备，其特征在于，所述追踪模组通过USB接口、Type-c接口和/或HDMI接口与所述裸眼3D显示终端连接。
10.根据权利要求1-6中任一项所述的裸眼3D沉浸式体验设备，其特征在于，所述裸眼3D显示终端包括LCD屏、OLED屏、LED屏、micro led屏、mini Led屏或投影显示屏。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210133814.7A CN115061606A (zh) | 2022-02-14 | 2022-02-14 | 一种裸眼3d沉浸式体验设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210133814.7A CN115061606A (zh) | 2022-02-14 | 2022-02-14 | 一种裸眼3d沉浸式体验设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115061606A true CN115061606A (zh) | 2022-09-16 |
Family
ID=83196393
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210133814.7A Pending CN115061606A (zh) | 2022-02-14 | 2022-02-14 | 一种裸眼3d沉浸式体验设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115061606A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117111873A (zh) * | 2023-10-23 | 2023-11-24 | 南昌市一境信息技术有限公司 | 一种基于cave环境的沉浸交互系统 |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104050859A (zh) * | 2014-05-08 | 2014-09-17 | 南京大学 | 可交互数字化立体沙盘系统 |
| US20170048514A1 (en) * | 2014-06-19 | 2017-02-16 | Hangzhou 3Dworld Technology Co., Ltd. | Control Circuit of High-Definition Naked-Eye Portable Stereoscopic Video Player and Stereoscopic Video Conversion Method |
| CN106791794A (zh) * | 2016-12-30 | 2017-05-31 | 重庆卓美华视光电有限公司 | 一种显示设备、图像处理方法及装置 |
| CN108111838A (zh) * | 2017-12-25 | 2018-06-01 | 上海玮舟微电子科技有限公司 | 一种裸眼3d显示校正治具及校正方法 |
| CN108337339A (zh) * | 2018-03-12 | 2018-07-27 | 深圳超多维科技有限公司 | 用于移动终端的立体显示配件以及立体显示方法 |
| CN108836236A (zh) * | 2018-05-11 | 2018-11-20 | 张家港康得新光电材料有限公司 | 内窥镜手术裸眼3d图像显示系统与显示方法 |
| CN109640180A (zh) * | 2018-12-12 | 2019-04-16 | 上海玮舟微电子科技有限公司 | 视频3d显示的方法、装置、设备及存储介质 |
| CN111123549A (zh) * | 2020-01-20 | 2020-05-08 | 广东省半导体产业技术研究院 | 一种裸眼3d显示模块与装置 |
| CN114035682A (zh) * | 2021-10-29 | 2022-02-11 | 王朋 | 一种裸眼3d可交互沉浸式虚拟现实cave系统 |
| CN217690044U (zh) * | 2022-02-14 | 2022-10-28 | 邹良伍 | 一种裸眼3d沉浸式体验设备 |
-
2022
- 2022-02-14 CN CN202210133814.7A patent/CN115061606A/zh active Pending
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104050859A (zh) * | 2014-05-08 | 2014-09-17 | 南京大学 | 可交互数字化立体沙盘系统 |
| US20170048514A1 (en) * | 2014-06-19 | 2017-02-16 | Hangzhou 3Dworld Technology Co., Ltd. | Control Circuit of High-Definition Naked-Eye Portable Stereoscopic Video Player and Stereoscopic Video Conversion Method |
| CN106791794A (zh) * | 2016-12-30 | 2017-05-31 | 重庆卓美华视光电有限公司 | 一种显示设备、图像处理方法及装置 |
| CN108111838A (zh) * | 2017-12-25 | 2018-06-01 | 上海玮舟微电子科技有限公司 | 一种裸眼3d显示校正治具及校正方法 |
| CN108337339A (zh) * | 2018-03-12 | 2018-07-27 | 深圳超多维科技有限公司 | 用于移动终端的立体显示配件以及立体显示方法 |
| CN108836236A (zh) * | 2018-05-11 | 2018-11-20 | 张家港康得新光电材料有限公司 | 内窥镜手术裸眼3d图像显示系统与显示方法 |
| CN109640180A (zh) * | 2018-12-12 | 2019-04-16 | 上海玮舟微电子科技有限公司 | 视频3d显示的方法、装置、设备及存储介质 |
| CN111123549A (zh) * | 2020-01-20 | 2020-05-08 | 广东省半导体产业技术研究院 | 一种裸眼3d显示模块与装置 |
| CN114035682A (zh) * | 2021-10-29 | 2022-02-11 | 王朋 | 一种裸眼3d可交互沉浸式虚拟现实cave系统 |
| CN217690044U (zh) * | 2022-02-14 | 2022-10-28 | 邹良伍 | 一种裸眼3d沉浸式体验设备 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117111873A (zh) * | 2023-10-23 | 2023-11-24 | 南昌市一境信息技术有限公司 | 一种基于cave环境的沉浸交互系统 |
| CN117111873B (zh) * | 2023-10-23 | 2024-01-09 | 南昌市一境信息技术有限公司 | 一种基于cave环境的沉浸交互系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| TWI439120B (zh) | 顯示裝置 | |
| US11277603B2 (en) | Head-mountable display system | |
| TW201234838A (en) | Stereoscopic display device and control method of stereoscopic display device | |
| JP5110182B2 (ja) | 映像表示装置 | |
| WO2016098412A1 (ja) | 頭部装着型表示装置、及び映像表示システム | |
| US10631008B2 (en) | Multi-camera image coding | |
| CN112616048B (zh) | Ar眼镜及其显示方法和系统、图像处理方法及设备 | |
| JP2016015683A (ja) | 画像生成装置および画像生成方法 | |
| WO2017022291A1 (ja) | 情報処理装置 | |
| WO2022267573A1 (zh) | 裸眼3d显示模式的切换控制方法、介质和系统 | |
| CN217690044U (zh) | 一种裸眼3d沉浸式体验设备 | |
| JP2007086716A (ja) | 画像表示システム、画像表示方法、符号化方法及び立体表示用印刷物 | |
| CN115061606A (zh) | 一种裸眼3d沉浸式体验设备 | |
| US11187895B2 (en) | Content generation apparatus and method | |
| WO2020017435A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
| KR101670328B1 (ko) | 다중 실시간 영상 획득 카메라를 통한 실감영상표출장치 및 이를 통한 영상 제어 인식방법 | |
| US20210058611A1 (en) | Multiviewing virtual reality user interface | |
| KR101980297B1 (ko) | 3차원 vr 영상 처리 장치, 방법 및 프로그램 | |
| EP3402410B1 (en) | Detection system | |
| CN103248910A (zh) | 三维成像系统及其图像再现方法 | |
| KR100917100B1 (ko) | 입체 영상 디스플레이 장치 및 그 입체 영상 디스플레이장치에서의 표시부 위치 조절 방법 | |
| JP2017046065A (ja) | 情報処理装置 | |
| WO2023056803A1 (zh) | 一种全息展示方法及装置 | |
| JP3425402B2 (ja) | 立体画像を表示する装置および方法 | |
| CN111782040A (zh) | 一种裸眼虚拟现实屏幕 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |