CN116529654A - 三维图像数据的处理方法及装置、设备和介质 - Google Patents

三维图像数据的处理方法及装置、设备和介质 Download PDF

Info

Publication number
CN116529654A
CN116529654A CN202180003661.8A CN202180003661A CN116529654A CN 116529654 A CN116529654 A CN 116529654A CN 202180003661 A CN202180003661 A CN 202180003661A CN 116529654 A CN116529654 A CN 116529654A
Authority
CN
China
Prior art keywords
view
target
display terminal
indication information
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180003661.8A
Other languages
English (en)
Inventor
苗京花
牛栋华
王雪丰
赵砚秋
武玉龙
李文宇
李治富
陈丽莉
张�浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Beijing BOE Display Technology Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Beijing BOE Display Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd, Beijing BOE Display Technology Co Ltd filed Critical BOE Technology Group Co Ltd
Publication of CN116529654A publication Critical patent/CN116529654A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/27—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving lenticular arrays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Optics & Photonics (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本公开提供了一种三维图像数据的处理方法及装置、设备和介质，属于显示技术领域。所述方法包括：接收指示信息，所述指示信息用于指示目标子区域的数量，所述目标子区域为所述观看区域中存在观看者的子区域；基于所述指示信息，确定目标视图，其中，所述目标子区域的数量等于1时确定出的目标视图的数量小于所述目标子区域的数量大于1时确定出的目标视图的数量；将所述目标视图的图像数据发送给所述三维显示终端。

Description

三维图像数据的处理方法及装置、设备和介质 技术领域
本公开涉及显示技术领域，特别涉及一种三维图像数据的处理方法及装置、设备和介质。
背景技术
目前，基于集成成像原理的三维显示技术(又称光场显示技术)已经进入了商业应用阶段。基于集成成像原理的三维显示终端包括光学透镜阵列和显示面板，光学透镜阵列位于显示面板的出光面。光学透镜阵列中的每个透镜对应多个子像素，主要作用是将不同子像素的光线投射到不同的方向，从而产生多个视点。
发明内容
本公开实施例提供了一种三维图像数据的处理方法及装置、设备和介质。所述技术方案如下：
第一方面，提供了一种三维图像数据的处理方法，用于为三维显示终端提供三维图像数据，所述三维显示终端具有依次排列的多个视点，所述三维显示终端的观看区域包括多个子区域，所述多个子区域的排列方向与所述多个视点的排列方向相同，不同的所述子区域对应的视点至少部分不同，所述方法包括：
接收指示信息，所述指示信息用于指示目标子区域的数量，所述目标子区域为所述观看区域中存在观看者的子区域；基于所述指示信息，确定目标视图，其中，所述目标子区域的数量等于1时确定出的目标视图的数量小于所述目标子区域的数量大于1时确定出的目标视图的数量；将所述目标视图的图像数据发送给所述三维显示终端。
可选地，所述多个视点分别对应一个视图，所述目标子区域的数量大于1，所述基于所述指示信息，确定目标视图，包括：将所述多个视点对应的视图均作为所述目标视图。
可选地，所述多个视点分别对应一个视图，所述目标子区域的数量等于1， 所述基于所述指示信息，确定目标视图，包括：确定所述三维显示终端的观看者所使用的视点；将所述多个视点对应的视图中，与所述观看者所使用的视点对应的视图作为所述目标视图。
可选地，所述指示信息包括所述三维显示终端的观看者的观看位置，所述指示信息是所述三维显示终端在所述目标子区域的数量为1时生成的；所述确定所述三维显示终端的观看者所使用的视点，包括：根据预设的视点与观看位置的对应关系，确定所述目标子区域对应的第一视点；将所述第一视点和N个第二视点作为所述观看者所使用的视点，所述N个第二视点为所述多个视点中与所述第一视点的最近的N个视点；其中，N为偶数，且N≥0。
可选地，所述指示信息包括目标视点的标识，所述指示信息是所述三维显示终端在所述目标子区域的数量为1时生成的；所述确定模块用于根据所述目标视点的标识，确定所述三维显示终端的观看者所使用的视点，其中，所述目标视点包括第一视点，或者，所述目标视点包括第一视点和N个第二视点，所述第一视点为与所述目标子区域对应的视点，所述N个第二视点为所述多个视点中与所述第一视点的最近的N个视点，其中，N为偶数，且N≥0；所述观看者所使用的视点包括所述第一视点和所述N个第二视点。
可选地，所述将所述目标视图的图像数据发送给所述三维显示终端，包括：响应于确定所述观看者处于运动状态，将具有第一分辨率的所述目标视图的图像数据发送给所述三维显示终端；响应于确定所述观看者处于静止状态，将具有第二分辨率的所述目标视图的图像数据发送给所述三维显示终端；其中，所述第一分辨率低于所述第二分辨率。
可选地，所述目标子区域的数量等于1时确定出的目标视图的分辨率大于所述目标子区域的数量大于1时确定出的目标视图的分辨率。
第二方面，提供一种三维图像数据的处理方法，用于为多个三维显示终端提供三维图像数据，所述多个三维显示终端包括第一显示终端和至少一个第二显示终端，所述方法包括：接收第一视角指示信息，所述第一视角指示信息用于指示所述第一显示终端针对目标对象的第一视角；根据所述第一视角指示信息，确定所述第一视角对应的第一目标视图，所述第一目标视图的数量小于所述第一显示终端所具有的视点的数量；将所述第一目标视图的图像数据发送给所述第一显示终端和所述至少一个第二显示终端。
可选地，所述第一视角指示信息包括所述第一显示终端的观看者的观看位置；所述根据所述第一视角指示信息，确定所述第一视角对应的第一目标视图，包括：根据预设的视点与观看位置的对应关系，确定所述第一视角指示信息所指示的观看位置对应的第一视点；将所述第一视点和N个第二视点对应的视图作为所述第一目标视图，所述N个第二视点为所述多个视点中与所述第一视点的最近的N个视点；其中，N为偶数，且N≥0。
可选地，所述第一视点信息包括所述目标视点的标识，所述目标视点包括第一视点，或者，所述目标视点包括第一视点和N个第二视点，所述第一视点为与所述第一显示终端的观看者的观看位置对应的视点，所述N个第二视点为所述多个视点中与所述第一视点的最近的N个视点，其中，N为偶数，且N≥0；所述根据所述第一视角指示信息，确定所述第一视角对应的第一目标视图，包括：根据所述目标视点的标识，将所述第一视点和所述N个第二视点对应的视图作为所述第一目标视图。
可选地，所述方法还包括：接收第三显示终端发送的第二视角指示信息，所述第三显示终端为所述至少一个第二显示终端中的一个，所述第二视角指示信息用于指示所述第三显示终端针对所述目标对象的第二视角；确定所述第二视角对应的第二目标视图；将所述第二目标视图的图像数据发送给所述第三显示终端。
第三方面，提供了一种图像数据的处理装置，用于为三维显示终端提供三维图像数据，所述三维显示终端具有依次排列的多个视点，所述三维显示终端的观看区域包括多个子区域，所述多个子区域的排列方向与所述多个视点的排列方向相同，不同的所述子区域对应的视点至少部分不同，所述装置包括：接收模块，用于接收指示信息，所述指示信息用于指示目标子区域的数量，所述目标子区域为所述观看区域中存在观看者的子区域；确定模块，用于基于所述指示信息，确定目标视图，其中，所述目标子区域的数量等于1时确定出的目标视图的数量小于所述目标子区域的数量大于1时确定出的目标视图的数量；发送模块，用于将所述目标视图的图像数据发送给所述三维显示终端。
可选地，所述多个视点分别对应一个视图，所述目标子区域的数量大于1，所述确定模块用于将所述多个视点对应的视图均作为所述目标视图。
可选地，所述多个视点分别对应一个视图，所述目标子区域的数量等于1，所述确定模块用于确定所述三维显示终端的观看者所使用的视点；将所述多个 视点对应的视图中，与所述观看者所使用的视点对应的视图作为所述目标视图。
可选地，所述指示信息包括所述三维显示终端的观看者的观看位置，所述指示信息是所述三维显示终端在所述目标子区域的数量为1时生成的；所述确定模块用于根据预设的视点与观看位置的对应关系，确定所述目标子区域对应的第一视点；将所述第一视点和N个第二视点作为所述观看者所使用的视点，所述N个第二视点为所述多个视点中与所述第一视点的最近的N个视点；其中，N为偶数，且N≥0。
可选地，所述指示信息包括目标视点的标识，所述指示信息是所述三维显示终端在所述目标子区域的数量为1时生成的；所述确定所述三维显示终端的观看者所使用的视点，包括：根据所述目标视点的标识，确定所述三维显示终端的观看者所使用的视点，其中，所述目标视点包括第一视点，或者，所述目标视点包括第一视点和N个第二视点，所述第一视点为与所述目标子区域对应的视点，所述N个第二视点为所述多个视点中与所述第一视点的最近的N个视点，其中，N为偶数，且N≥0；所述观看者所使用的视点包括所述第一视点和所述N个第二视点。
可选地，所述发送模块用于，响应于确定所述观看者处于运动状态，将具有第一分辨率的所述目标视图的图像数据发送给所述三维显示终端；响应于确定所述观看者处于静止状态，将具有第二分辨率的所述目标视图的图像数据发送给所述三维显示终端；其中，所述第一分辨率低于所述第二分辨率。
可选地，所述目标子区域的数量等于1时确定出的目标视图的分辨率大于所述目标子区域的数量大于1时确定出的目标视图的分辨率。
第四方面，提供一种三维图像数据的处理装置，用于为多个三维显示终端提供三维图像数据，所述多个三维显示终端包括第一显示终端和至少一个第二显示终端，所述装置包括：接收模块，用于接收第一视角指示信息，所述第一视角指示信息用于指示所述第一显示终端针对目标对象的第一视角；确定模块，用于根据所述第一视角指示信息，确定所述第一视角对应的第一目标视图，所述第一目标视图的数量小于所述第一显示终端所具有的视点的数量；发送模块，用于将所述第一目标视图的图像数据发送给所述第显示终端和所述至少一个第二显示终端。
可选地，所述第一视角指示信息包括所述第一显示终端的观看者的观看位 置；所述确定模块用于，根据预设的视点与观看位置的对应关系，确定所述第一显示终端的观看者的观看位置对应的第一视点；将所述第一视点和N个第二视点对应的视图作为所述第一目标视图，所述N个第二视点为所述多个视点中与所述第一视点的最近的N个视点；其中，N为偶数，且N≥0。
可选地，所述第一视角指示信息包括所述目标视点的标识，所述目标视点包括第一视点，或者，所述目标视点包括第一视点和N个第二视点，所述第一视点为与所述第一显示终端的观看者的观看位置对应的视点，所述N个第二视点为所述多个视点中与所述第一视点的最近的N个视点，其中，N为偶数，且N≥0；所述确定模块用于，根据所述目标视点的标识，将所述第一视点和所述N个第二视点对应的视图作为所述第一目标视图。
可选地，所述接收模块还用于接收第三显示终端发送的第二视角指示信息，所述第三显示终端为所述至少一个第二显示终端中的一个，所述第二视角指示信息用于指示所述第三显示终端针对所述目标对象的第二视角；所述确定模块还用于根据所述第二视角指示信息，确定所述第二视角对应的第二目标视图；所述发送模块还用于将所述第二目标视图的图像数据发送给所述第三显示终端。
第五方面，提供了一种计算机设备，所述计算机设备包括处理器和存储器；
其中，所述存储器，用于存储计算机程序；
所述处理器，用于执行所述存储器中存放的计算机程序，以实现第一方面任一所述的三维图像数据的处理方法，或者第二方面所述的三维图像数据的处理方法。
第六方面，提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机指令，存储的所述计算机指令被处理器执行时能够实现第一方面任一所述的三维图像数据的处理方法，或者第二方面所述的三维图像数据的处理方法。
第七方面，提供了一种计算机程序产品，所述该计算机程序产品中存储有指令，当其在计算机上运行时，使得计算机能够执行第一方面任一所述的三维图像数据的处理方法，或者第二方面所述的三维图像数据的处理方法。
附图说明
为了更清楚地说明本公开实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本公开实施例提供的一种三维显示终端的结构及工作原理示意图；
图2是本公开实施例提供的一种显示系统的结构示意图；
图3是本公开实施例提供的一种三维图像数据的处理方法的流程图；
图4是本公开实施例提供的另一种三维图像数据的处理方法的流程图；
图5是本公开实施例提供的观看位置与视点之间的关系示意图；
图6是本公开实施例提供的又一种三维图像数据的处理方法的流程图；
图7是本公开实施例提供的又一种三维图像数据的处理方法的流程图；
图8是本公开实施例的一种应用场景的示意图；
图9是本公开实施例的另一种应用场景的示意图；
图10是本公开实施例提供的一种三维图像数据的处理装置的框图；
图11是本公开实施例提供的另一种三维图像数据的处理装置的框图；
图12是本公开实施例提供的一种计算机设备的结构示意图。
具体实施方式
为使本公开的目的、技术方案和优点更加清楚，下面将结合附图对本公开实施方式作进一步地详细描述。
为了便于理解本公开实施例，下面先对基于集成成像原理的三维显示终端进行介绍。
图1是本公开实施例提供的一种三维显示终端的结构及工作原理示意图。如图1所示，该三维显示终端10包括显示面板11和透镜阵列12，透镜阵列12位于显示面板11的出光面。显示面板11发出的光线经过透镜阵列12后出射。
显示面板11包括阵列布置的多个像素，每个像素包括多个子像素。例如，每个像素包括三个子像素，分别为红色子像素、蓝色子像素和绿色子像素。需要说明的是，本公开实施例对每个像素所包含的子像素的数量和颜色不做限制，可以根据实际需要设置。
透镜阵列12包括并列设置的多个柱透镜，图中的每个箭头表示一个柱透镜。 在多个柱透镜的排列方向(即图1中的左右方向)上，每个柱透镜121对应多个子像素。每个柱透镜121对应的子像素的数量可以相同，从而将显示面板上的子像素分为多组。每组子像素对应一个视点，多个视点沿着多个柱透镜121的排列方向a间隔分布。
例如，图1中，透镜阵列包括8个柱透镜，每个柱透镜对应6个像素，显示面板的像素被分为6组。其中，编号为1的像素为一组，编号为2的像素为一组，……以此类推。三维显示终端具有6个视点。
需要说明的是，图1所示示例中，每个柱透镜对应整数个子像素，在其他示例中，可能每个柱透镜对应的子像素不是整数，而是多个柱透镜(例如3个柱透镜)对应整数个子像素。在本公开实施例中，将对应整数个子像素的最小柱透镜组合作为一个周期，视点的数量与每个周期对应的子像素数量相等。本公开实施例对三维显示终端具有的视点的数量不做限制。
每个视点分别对应一个视图。以图1为例，6个视点则对应6个视图。三维显示终端需要将6个视图合成为1个图像后，根据合成后的图像控制各个像素发光，透镜阵列对各个像素发出的光进行调制，实现视点分离及汇聚成像。同一视点的信息汇聚到一个区域，该区域可以被称为对应的视点的观看区域。各视点的观看区域是离散的，但是在人的视觉感知上，图像是连续的。
用户在观看时，左右眼对应的视点至少部分不同，不同视点对应的视图不同，因此，观看者的左右眼看到的图像存在差异，基于双目视差原理，从而使得观看者看到三维图像。
示例性地，显示面板包括但不限于液晶显示面板、OLED(Organic Light-Emitting Diode，有机发光二极管)显示面板和QLED(Quantum Dot Light Emitting Diodes，量子点发光二极管)显示面板等。
在本公开实施例中，该三维显示终端还包括通信组件，用于与服务器和/或其他终端进行通信。
可选地，该三维显示终端还可以包括交互组件，用于与用户进行交互，接收用户输入的操作指令。交互组件包括但不限于定点设备，例如，鼠标、控制球和触控板等。
在本公开实施例中，三维显示终端可以为裸眼三维显示终端或者VR(Virtual Reality，虚拟现实)眼镜等。
在本公开实施例中，将三维显示终端的观看区域划分为多个子区域，多个子区域的排列方向与多个视点的排列方向相同。不同的子区域对应的视点至少部分不同，也即是，观看者位于不同的子区域时，所使用的视点至少部分不同。例如，如图1所示，对于裸眼三维显示终端，当观看者位于第一子区域时，左眼对应的视点是视点2，右眼对应的视点是视点5，而当观看者位于第二子区域时，左眼对应的视点是视点3，右眼对应的视点是视点6。
图2是本公开实施例提供的一种显示系统的结构示意图。如图2所示，该显示系统包括服务器21和多个三维显示终端22，每个三维显示终端22和服务器21之间通过网络连接。服务器21可以为单台服务器或者服务器集群。三维显示终端22为图1所示的三维显示终端，在此不再详细描述。
服务器中存储有三维图像的图像数据。三维显示终端可以向服务器发送请求，该请求用于请求服务器发送三维图像的图像数据。服务器根据该请求向三维显示终端发送图像数据。三维显示终端展示接收到的图像数据，从而使得用户能够观看到对应的三维图像。
在一些示例中，该请求中可以包括视角信息，该视角信息用于指示目标视角。则服务器向三维显示终端发送的图像数据为该目标视角下所有视点对应的视图的图像数据。这样，当用户在不同的视点观看时，均可以观看到对应视角的三维图像，且观看到的目标对象的角度略有不同。
在本公开实施例中，服务器会先对视图进行渲染，然后将渲染后得到的图像数据发送给三维显示终端。
由于服务器发送给三维显示终端的图像数据包括所有视点对应的视图的图像数据，数据量较大，导致服务器的数据处理压力和网络传输压力均较大。
图3是本公开实施例提供的一种三维图像数据的处理方法的流程图。该方法可以由服务器执行。该方法用于为三维显示终端提供三维图像数据，三维显示终端具有依次排列的多个视点，三维显示终端的观看区域包括多个子区域，多个子区域的排列方向与多个视点的排列方向相同，不同的子区域对应的视点至少部分不同。如图3所示，该方法包括：
在步骤301中，接收指示信息，指示信息用于指示目标子区域的数量，目标子区域为观看区域中存在观看者的子区域。
其中，三维显示终端可以为图2中的三维显示终端的任一个。服务器可以接收三维显示终端发送的指示信息。该指示信息是三维显示终端根据检测到的观看者的数量和观看位置生成的。本公开实施例对三维显示终端如何确定观看者的数量和观看位置不做限制，三维显示终端可以采用例如图像识别或者红外感应等技术来确定观看者的数量。
在一些示例中，该指示信息包括数值，该数值等于目标子区域的数量。例如，1、2或3等。在另一些示例中，该指示信息包括目标子区域的数量对应的标识符，标识符的不同取值对应不同的数量区间。例如，当目标子区域的数量等于1时，该标识符为第一值，例如“0”；当目标子区域的数量大于1时，该标识符为第二值，例如“1”。
在前述示例中，指示信息直接或者显示指示目标子区域的数量，而在其他实施例中，指示信息还可以间接或者隐式指示目标子区域的数量。例如，在一些示例中，指示信息包括观看者的观看位置，该指示信息是三维显示终端在目标子区域的数量为1时生成的。又例如，在另一些示例中，指示信息包括目标视点的标识，指示信息是三维显示终端在目标子区域的数量为1时生成的。因此，服务器在收到包括观看位置或者目标视点的标识的指示信息时，能够根据该指示信息确定出三维显示终端的目标子区域的数量等于1。
在步骤302中，基于指示信息，确定目标视图。
其中，目标子区域的数量等于1时确定出的目标视图的数量小于目标子区域的数量大于1时确定出的目标视图的数量。
在步骤303中，将目标视图的图像数据发送给三维显示终端。
在本公开实施例中，服务器会先对目标视图进行渲染，然后将渲染得到的图像数据发送给三维显示终端。三维显示终端在接收到该图像数据后，基于图像数据控制显示面板发光，从而展示对应的三维图像。
如前，三维显示终端具有多个视点，每个视点分别对应一个视图，也即是不同的视点对应不同的视图。不同的视图用于呈现三维图像。当观看者较多时，一般会在不同的观看位置观看，即位于不同的子区域，不同的子区域所对应的视点至少部分不同，因此，会有较多的视点被观看者使用，而当观看者较少时，被使用的视点的数量也较少。
在本公开实施例中，根据显示终端的目标子区域的数量来确定目标视图，且目标子区域的数量等于1时确定出的目标视图的数量小于目标子区域的数量 大于1时确定出的目标视图的数量，这样能够在观看者有多个且位于多个子区域时，发送给显示终端较多视图的图像数据，使得不同的观看者能够在不同的视点观看，以保证多个观看者的观看效果；而观看者的数量为1个或者观看者的数量大于1个但位于同一个子区域时，发送给显示终端较少视图的图像数据，一方面，观看者在接收到的视图所对应的视点观看即能保证显示效果，另一方面，由于视图对应的数据量较小，所以可以减轻服务器的数据处理压力和降低网络传输压力。
图4是本公开实施例提供的一种三维图像数据的处理方法的流程图。该方法可以由三维显示终端和服务器共同执行。如图4所示，该方法包括：
在步骤401中，三维显示终端确定观看者的数量。
在一些示例中，三维显示终端包括图像采集设备，例如摄像头。可选地，摄像头包括RGB(Red，Green，Blue，红绿蓝)摄像头、深度摄像头(例如TOF(Timeof Flight，飞行时间)摄像头等)、广角相机和鱼眼相机中的一种或者多种的组合。摄像头的种类、数量和安装位置可以根据实际需要设置，本公开对此不做限制。
通过该图像采集设备可以采集三维显示终端的观看区域中的图像。采用图像识别技术，例如人脸检测技术能够确定出图像中存在的用户数量，从而确定出观看者的数量。
在一些示例中，采用以下方式确定观看者的数量：首先，利用人脸检测技术对图像中的人脸进行识别；然后，将识别出的人脸中不完整的人脸去除；最后，将剩余的人脸的数量作为观看者的数量。
在一些场景下，可能存在经过三维显示终端的观看区域，但并未观看三维显示终端的显示内容的用户。如果将该用户的位置对应的视图作为目标视图，并将其图像数据发送给三维显示终端，将会浪费服务器的计算资源和网络资源。因此，需要将这类用户识别出来并且不作为显示终端的观看者。通常情况下，人脸朝向三维显示终端的用户才能够看到三维显示终端的显示内容，如果识别出的人脸是不完整的，表示该用户的脸部没有朝向三维显示终端，即并未观看三维显示终端的显示内容，所以可以通过去除不完整的人脸来将这类用户去除。
在另一些示例中，也可以不去除不完整的人脸，将图像中存在的人脸的数量作为观看者的数量。
本公开实施例对三维显示终端如何确定观看者的数量不做限制，只要能够确定观看者的数量即可。例如，在另一些示例中，三维显示设备可以接收用户输入的数量，将接收到的数量确定为观看者的数量。
在步骤402中，三维显示终端确定观看者的观看位置。
可选地，三维显示终端采用头部跟踪技术或者眼部跟踪技术确定观看者的观看位置。
在一些示例中，三维显示终端为裸眼三维显示终端，观看者的观看位置为观看者的目标部位的参考点所处的位置，目标部位可以为头部或者眼部。可选地，观看者的观看位置为双眼中心点所处的位置，或者，观看者的观看位置包括左眼眼球所处的位置和右眼眼球所处的位置等。
在另一些示例中，三维显示终端为近眼显示终端，例如VR眼镜，则观看者的观看位置包括左眼眼球所处的位置和右眼眼球所处的位置等。
可选地，该位置可以采用空间坐标表示，该空间坐标是基于图像识别技术确定的。该空间坐标的坐标系，以显示面板的出光面为XY平面，即Z轴0平面，垂直于出光面的方向为Z轴方向，且Z轴经过显示面板的中心。示例性地，X方向可以为显示面板中像素排列的行方向，Y方向可以为显示面板中像素排列的列方向。当显示面板竖直放置时，X方向为水平方向，Y方向为竖直方向。
可选地，该位置可以采用相对于三维显示终端的中心面的角度表示，其中，该中心面与柱透镜的排列方向垂直且与三维显示终端的显示面板的出光面垂直。也即是，该中心面是在三维显示终端正常放置时的竖直中心面，即前述坐标系中的YZ平面。该角度是指观看位置到三维显示终端的垂直中心线(即Y轴)的垂线与该中心面之间的夹角，可以根据参考点的空间坐标计算得到的。
在步骤403中，三维显示终端生成指示信息。
如果三维显示终端的观看者的数量大于1且三维显示终端的观看者位于至少两个子区域，则三维显示终端生成第一指示信息，该第一指示信息用于指示目标子区域的数量大于1。
示例性地，第一指示信息用于指示目标子区域的数量的数值，或者，包括用于指示目标子区域的数量大于1的指示符等。
如果三维显示终端的观看者的数量为1，或者，三维显示终端的观看者的数量大于1且三维显示终端的观看者均位于同一子区域(可以被认为位于同一观看位置)，则三维显示终端生成第二指示信息，该第二指示信息包括该观看者的 观看位置。这种情况下，第二指示信息用于指示目标子区域的数量等于1。
这里，目标子区域为观看区域中存在观看者的子区域。
在本公开实施例中，当观看者的数量大于1时，目标子区域的数量根据观看者的观看位置确定。
三维显示终端具有依次排列的多个视点，三维显示终端的观看区域包括多个子区域，多个子区域的排列方向与多个视点的排列方向相同，不同的子区域对应的视点至少部分不同。
在本公开实施例中，每个子区域为一个空间区域，可以由空间坐标表示，也可以由相对于参考面的角度区间表示，该参考面可以为前述三维显示终端的中心面。三维显示终端确定各个观看者的位置所处的空间区域，然后将确定出的空间区域的数量，作为目标子区域的数量。
在步骤404中，三维显示终端向服务器发送指示信息。
相应地，服务器接收该指示信息。
在步骤405中，服务器基于指示信息，确定目标视图。
对于第一指示信息，该步骤405包括：服务器将三维显示终端所具有的视点对应的视图均作为目标视图。也即是，目标视图包括三维显示终端的全部视点对应的视图。
对于第二指示信息，该步骤405包括：第一步，确定三维显示终端的观看者所使用的视点；第二步、将多个视点对应的视图中，与观看者所使用的视点对应的视图作为目标视图。也即是，目标视图包括三维显示终端的部分视点对应的视图。
可见，在该实施例中，目标子区域的数量等于1时目标视图的数量小于目标子区域的数量大于1时目标视图的数量。
在一些示例中，确定三维显示终端的观看者所使用的视点，包括：根据预设的视点与观看位置的对应关系，确定目标子区域对应的第一视点；将第一视点和N个第二视点作为观看者所使用的视点，N个第二视点为多个视点中与第一视点的最近的N个视点。其中，N为偶数，且N≥0。
示例性地，该对应关系可以采用列表的形式存储。
在本公开实施例中，第一视点也可以被称为中心视点。该对应关系中，一个观看位置对应一个或多个第一视点。
例如，当三维显示终端为裸眼三维显示终端时，如果观看位置为双眼中心 位置，则观看位置对应一对第一视点，每对第一视点中的两个第一视点分别对应观看者的左右眼。又例如，当三维显示终端为裸眼三维显示终端时，如果观看位置包括左眼眼球的位置和右眼眼球的位置，则每个观看位置对应一个第一视点。
当三维显示终端为近眼显示终端，且观看者的观看位置包括左眼眼球的位置和右眼眼球的位置，每个观看位置对应多个第一视点，例如每个观看位置对应2个或者3个第一视点。
在一些示例中，该对应关系为视点与角度的对应关系。在视点与角度的对应关系中，每个视点对应一个角度。指示信息所指示的观看位置采用相对于三维显示终端的前述中心面的角度表示，则服务器可以先从视点与角度的对应关系中确定与观看位置对应的角度最接近的目标角度，然后将该对应关系中，目标角度所对应的视点作为第一视点。
下面结合图5对如何确定第一视点进行示例性说明。如图5所示，视点2对应的角度为a2，视点3对应的角度为a3。则在视点与角度的对应关系包括……(视点2，a2)，(视点3，a3)……，左眼对应的角度为A。在该对应关系中，与A最接近的角度为a2，则将a2对应的视点2作为左眼对应的第一视点。
在另一些示例中，该对应关系为视点与角度区间的对应关系，指示信息所指示的观看位置采用相对于三维显示终端的前述中心面的角度表示，则服务器可以先确定指示信息对应的角度所处的目标角度区间，然后将该对应关系中，目标角度区间所对应的视点作为第一视点。示例性地，子区域与角度区间可以一一对应。
在另一些示例中，该对应关系为视点与角度区间的对应关系或者视点与角度的对应关系。指示信息所指示的观看位置采用空间坐标表示，则服务器可以先将空间坐标转换为相对于三维显示终端的中心面的角度，然后根据指示信息对应的角度和该对应关系，确定第一视点。
在本公开实施例中，三维显示终端需要在执行该方法前，预先将视点与角度区间的对应关系预先存储在服务器中。例如，服务器中可以预先存储有三维显示终端的型号与对应关系的映射关系，这样，服务器可以根据三维显示终端的型号获取对应的对应关系。
N的取值可以根据三维显示终端的光学系统的参数确定。例如，如果三维显示终端的光线串扰情况较严重，则N的取值较大，例如等于4，如果三维显 示终端的光线串扰情况较轻微，则N的取值较小，例如等于2。在本公开实施例中，N个第二视点对称分布在对应的第一视点的两侧。
需要说明的是，N个第二视点与对应的第一视点可以为同一视区中的视点，或者，N个第二视点中的部分第二视点可以是与第一视点所在视区的相邻视区中的视点。这里，显示面板的所有子像素通过正对的透镜出光成像的区域可以被称为主瓣区，显示面板的所有子像素通过非正对的透镜成像的区域可以被称为旁瓣区。主瓣区和旁瓣区分别为一个视区。当第一视点为主瓣区的两侧的视点时，第一视点对应的部分第二视点为主瓣区相邻的旁瓣区中的视点。
可替代地，在其他实施例中，第二指示信息中可以不包括观看者的观看位置，而是包括目标视点的标识。其中，目标视点包括第一视点，或者，目标视点包括第一视点和N个第二视点，第一视点为与目标子区域对应的视点，N个第二视点为多个视点中与第一视点的最近的N个视点，其中，N为偶数，且N≥0。
这种情况下，确定三维显示终端的观看者所使用的视点可以替换为以下方式：根据目标视点的标识，确定三维显示终端的观看者所使用的视点。观看者所使用的视点包括第一视点和N个第二视点。
需要说明的是，在该实施例中，区分了目标子区域的数量等于1和目标子区域的数量大于1的两种情况，当目标子区域的数量大于1时，直接将三维显示终端所具有的视点对应的视图作为目标视图，这样可以简化实现流程。在其他实施例中，当目标子区域的数量大于1时，也可以根据实际数量确定目标视图的数量，例如，目标视图的数量与目标子区域的数量正相关，即目标子区域的数量越多，目标视图的数量越多，当目标子区域的数量达到设定的上限值时，再将三维显示终端所具有的视点对应的视图均作为目标视图。
在步骤406中，服务器将目标视图的图像数据发送给三维显示终端。
可选地，服务器中存储有至少一种分辨率的目标视图的图像数据，或者基于至少一种分辨率对目标视图进行渲染，得到对应分辨率的目标视图的图像数据。
在一些示例中，服务器将默认分辨率或者指定分辨率的目标视图的图像数据发送给三维显示终端。
在另一些示例中，第二指示信息还用于指示观看者的数量为1，在这种情况下，服务器根据三维显示终端的观看者的观看状态选择对应分辨率的目标视图 的图像数据发送给三维显示终端。例如，当观看者处于运动状态时，将具有第一分辨率的目标视图的图像数据发送给三维显示终端。又例如，当观看者处于静止状态时，将具有第二分辨率的目标视图的图像数据发送给三维显示终端。其中，第一分辨率低于第二分辨率。
这样，静止状态下的观看者能够看到分辨率较高的图像，以提升三维图像的清晰度。此外，对于运动状态下的观看者而言，即使显示分辨率较高的图像，其观看到的图像仍然是模糊的，因此可以发送较低分辨率的目标视图的图像数据，以降低网络传输压力。
在一些示例中，如果指示信息包括观看者的观看位置，则服务器可以根据最近接收到的X次观看位置确定观看者的观看状态，X为整数且X≥2。如果X次观看位置均不相同，或者，X次观看位置中任意两次观看位置之间的偏差值大于阈值，则确定观看者处于运动状态。如果X次观看位置均相同，或者，X次观看位置中任意两次观看位置之间的偏差值不大于阈值，则确定观看者处于静止状态。示例性地，X等于2或者3。
在另一些示例中，如果指示信息包括目标视点的标识，则服务器可以根据最近接收到的Y个指示信息中的目标视点的标识确定观看者的观看状态，Y为整数且Y≥2。如果Y个指示信息中的目标视点的标识均不相同，或者，Y个指示信息中的目标视点的标识至少部分不同，则确定观看者处于运动状态。如果Y个指示信息中的目标视点的标识均相同，则确定观看者处于静止状态。示例性地，Y等于2或者3。
在又一些实施例中，如果网络质量不佳，例如，三维显示终端对应的传输速率小于阈值和/或三维显示终端的传输带宽小于阈值等，则服务器可以根据确定出的目标视图的数量选择目标视图的分辨率，以使得目标子区域的数量等于1时确定出的目标视图的分辨率大于目标子区域的数量大于1时确定出的目标视图的分辨率。
例如，在将多个视点对应的视图均作为目标视图的情况下，目标视图的分辨率为第三分辨率，而在将多个视点对应的视图中，与观看者所使用的视点对应的视图作为目标视图的情况下，目标视图的分辨率为第二分辨率，第三分辨率小于第二分辨率。由于分辨率较低的视图的图像数据的数据量较小，因此，在目标视图的数量较多的情况下，通过降低目标视图的分辨率，可以减小目标视图的图像数据的整体数据量，从而降低网络传输压力。
当然，也可以不考虑网络质量，使目标子区域的数量等于1时确定出的目标视图的分辨率等于目标子区域的数量大于1时确定出的目标视图的分辨率。
在步骤407中，三维显示终端显示接收到的图像数据。
当观看者处于运动状态时，三维显示终端以第一刷新率显示该第一分辨率的目标视图；当观看者处于静止状态时，三维显示终端以第二刷新率显示该第二分辨率的目标视图。这里，第一刷新率大于第二刷新率。这样，能够提高运动状态下的观看者看到的画面的流畅度。
在本公开实施例中，根据显示终端的目标子区域的数量来确定目标视图，且目标子区域的数量等于1时确定出的目标视图的数量小于目标子区域的数量大于1时确定出的目标视图的数量，这样能够在观看者有多个且位于多个子区域时，发送给显示终端较多视图的图像数据，使得不同的观看者能够在不同的视点观看，以保证多个观看者的观看效果；而观看者的数量为1个或者观看者的数量大于1个但位于同一个子区域时，发送给显示终端较少视图的图像数据，一方面，观看者在接收到的视图所对应的视点观看即能保证显示效果，另一方面，由于视图对应的数据量较小，所以可以减轻服务器的数据处理压力和降低网络传输压力。
此外，通过包括该观看者的观看位置的指示信息间接指示目标子区域的数量，使得服务器既可以根据指示信息确定目标子区域的数量，又可以根据指示信息确定观看者的观看状态，这样，可以减少服务器和三维显示终端之间的信息交互，进一步降低网络传输压力。
图6是本公开实施例提供的一种三维图像数据的处理方法的流程图。该方法可以由服务器执行。该方法用于为多个三维显示终端提供三维图像数据，所述多个三维显示终端包括第一显示终端和至少一个第二显示终端，如图6所示，该方法包括：
在步骤501中，接收第一视角指示信息。
其中，第一视角指示信息用于指示第一显示终端针对目标对象的第一视角。
在步骤502中，根据第一视角指示信息，确定第一视角对应的第一目标视图。
在一些示例中，第一目标视图的数量小于第一显示终端所具有的视点的数量。通过将部分视点对应的视图的图像数据发送给第一显示终端和第二显示终 端进行显示，与发送所有视点对应的视图的图像数据相比，图像数据的数据量减少，可以减轻服务器的图像处理压力以及减轻网络传输的压力。
在步骤503中，将第一目标视图的图像数据发送给第一显示终端和至少一个第二显示终端。
通过将所述第一目标视图的图像数据同时发送给第一显示终端和至少一个第二显示终端，即将相同的视图的图像数据发送给第一显示终端和第二显示终端，从而可以实现第一显示终端和第二显示终端的同步显示。并且，第一目标视图是根据第一显示终端对应的第一视角指示信息确定的，这样，可以保证第二显示终端显示的内容跟随第一显示终端显示的内容，可以适用于教学场景、会议场景和直播场景等。
图7是本公开实施例提供的一种三维图像数据的处理方法的流程图。如图7所示，该方法由第一显示终端、服务器和第二显示终端共同执行。第一显示终端和第二显示终端均为图2所示的三维显示终端。该方法包括：
在步骤601中，第一显示终端发送第一视角指示信息。
相应地，服务器接收第一视角指示信息。
其中，第一视角指示信息用于指示第一显示终端针对目标对象的第一视角。
在一些示例中，该第一视角指示信息可以直接指示第一视角，例如，第一视角指示信息包括第一显示终端的观看者的观看角度。或者，该第一视角指示信息可以间接指示第一视角，例如，第一视角指示信息包括第一显示终端的观看者的观看位置，或者，包括第一显示终端的观看者的观看位置对应的视点。
在一些示例中，该第一视角指示信息是根据第一显示终端的观看者的观看位置生成的。
在另一些示例中，该第一视角指示信息是第一显示终端根据用户输入的操作指令生成的。该操作指令用于指示用户选择的第一视角。本公开实施例对用户输入操作指令的方式不做限制，包括但不限于语音输入、手势输入以及通过触摸屏输入等。
第一视角指示信息的相关内容可以参见前述步骤403中第二指示信息的相关内容，在此省略详细描述。
在步骤602中，服务器根据第一视角指示信息，确定第一视角对应的第一目标视图。
在一些示例中，第一目标视图的数量小于第一显示终端所具有的视点的数量。通过将部分视点对应的视图的图像数据发送给第一显示终端和第二显示终端进行显示，与发送所有视点对应的视图的图像数据相比，图像数据的数据量减少，可以减轻服务器的图像处理压力以及减轻网络传输的压力。
在一些示例中，第一视角指示信息包括第一显示终端的观看者的观看位置。该步骤602包括：根据预设的视点与观看位置的对应关系，确定第一显示终端的观看者的观看位置对应的第一视点；将第一视点和N个第二视点对应的视图作为第一目标视图，N个第二视点为多个视点中与第一视点的最近的N个视点；其中，N为偶数，且N≥0。
在另一些示例中，第一视点信息包括目标视点的标识，目标视点包括第一视点，或者，目标视点包括第一视点和N个第二视点，第一视点为与观看者的观看位置对应的视点，N个第二视点为多个视点中与第一视点的最近的N个视点，其中，N为偶数，且N≥0；该步骤602包括：将第一视点和N个第二视点对应的视图作为第一目标视图。
相关内容可以参见前述步骤405，在此不再详细描述。
在步骤603中，服务器将第一目标视图的图像数据发送给第一显示终端和至少一个第二显示终端。
在步骤604中，第一显示终端和第二显示终端显示接收到的图像数据。
通过将所述第一目标视图的图像数据同时发送给第一显示终端和至少一个第二显示终端，即将相同的视图的图像数据发送给第一显示终端和第二显示终端，从而可以实现第一显示终端和第二显示终端的同步显示。并且，第一目标视图是根据第一显示终端对应的第一视角指示信息确定的，这样，可以保证第二显示终端显示的内容跟随第一显示终端显示的内容。
并且，由于在不同视点的观看者所看到的三维图像的角度(或画面)会有所不同，当第一显示终端只有一个观看者，且第一目标视图与第一显示终端的观看者的观看位置对应时，通过将第一目标视图的图像数据发送给第一显示终端，第二显示终端的观看者必须在对应的位置才能够看到清楚的图像，这样，能够保证第二显示终端的观看者与第一显示终端的观看者看到的内容高度一致。
在一些场景下，可能存在至少一个第二显示终端需要观看不同视角的三维图像，并且不影响其他第二显示终端和第一显示终端的情况。在这种情况下，该方法还可以包括：
在步骤605中，第三显示终端根据用户输入的操作指令生成第二视角指示信息。
其中，第三显示终端为至少一个第二显示终端中的一个，第二视角指示信息用于指示第三显示终端针对目标对象的第二视角。
操作指令的输入方式参见步骤601，在此省略详细描述。
在步骤606中，第三显示终端向服务器发送第二视角指示信息。
相应地，服务器接收第三显示终端发送的第二视角指示信息。
在步骤607中，服务器根据第二视角指示信息，确定第二视角对应的第二目标视图。
该步骤的实现方式参见前述步骤602，在此省略详细描述。
在步骤608中，服务器将第二目标视图的图像数据发送给第三显示终端。第三显示终端接收第二目标视图的图像数据。第三显示终端在接收到第二目标视图的图像数据后，基于接收到的图像数据控制显示面板发光，从而展示对应的三维图像。而第一显示终端和其他显示终端仍然基于第一目标视图的图像数据进行显示，这样，第三显示终端能够显示与第一显示终端和其他第二显示终端不同的三维图像，实现异步显示。
可选地，该第一视角指示信息还用于指示是否同步，当第一视角指示信息指示同步的时候，再执行步骤603和604。当第一视角指示信息指示不同步的时候，步骤603和604将被替换为服务器将第一目标视图的图像数据发送给第一显示终端，第一显示终端显示接收到的图像数据。
需要说明的是，该方法还可以包括：在步骤601之前，服务器建立多个显示终端之间的关联关系；从多个显示终端中确定第一显示终端和第二显示终端。
在本公开实施例中，建立关联关系的方式包括但不限于：将多个显示终端加入同一群组，或者，将多个显示终端加入同一会议等。
可选地，第一显示终端可以是固定不变的，例如，在群组解散之前或者在会议结束之前，始终以同一个三维显示终端作为第一显示终端。在一些示例中，服务器可以将群组的建立者对应的三维显示终端或者会议的发起者对应的三维显示终端确定为第一显示终端。在另一些示例中，服务器可以根据三维显示终端的使用者的身份信息确定第一显示终端。
可替代地，第一显示终端也可以是变化的，例如，在群组解散之前或者在会议接收之前，服务器可以根据预定的规则从存在关联关系的多个三维显示终 端中确定第一显示终端，例如将当前发言的用户使用的三维显示终端作为第一显示终端。
存在关联关系的多个三维显示终端中，除了第一显示终端之外的其他三维显示终端即为第二显示终端。本公开实施例对第二显示终端的数量不做限制。
下面结合图8和图9对图7所示方法的应用场景进行举例说明。
如图8所示，在教学场景下，第一显示终端A为授课者使用的终端，第二显示终端B、C和D为听课者使用的终端。服务器(图未示)通过第一显示终端A确定授课者指定的视角，并确定授课者使用的视点，然后统一向第一显示终端A和第二显示终端B、C和D推送当前的教学内容，比如化学分子结构等，以保证听课者和授课者看到相同角度的三维模型。
在会议场景下，第一显示终端为当前发言者使用的三维显示终端，其他三维显示终端为第二显示终端。每个三维显示终端可以分别进行语音检测，当检测到语音输入时，则向服务器发送请求，服务器将接收到的请求对应的三维显示终端作为第一显示终端。
以讨论设计方案的会议为例，在方案发表环节，三维显示终端A为主讲人使用的三维显示终端，即为第一显示终端，其他三维显示终端B、C和D为第二显示终端。三维显示终端A根据主讲人的当前分享进度对物体正面、侧面、俯视角、横切面进行逐一展示。服务器将三维显示终端A显示的内容同步推送给三维显示终端B、C和D，实现同步显示。在此过程中，三维显示终端C(第三显示终端)的使用者想对某个角度进行详细观察了解，则向服务器发送第二视角指示信息，并且不共享自己使用的视角，服务器将第二视角指示信息对应的视图的图像数据发送给三维显示终端C，三维显示终端C实现异步显示。
到了问题讨论环节，发言者的三维显示终端为第一显示终端，第一显示终端随着发言者的切换而变化。当三维显示终端D的使用者发言时，三维显示终端D变为第一显示终端。服务器根据三维显示终端D选择的视角向三维显示终端发送对应视图的图像数据，并将该对应视图的图像数据同步到三维显示终端A、B和C。
在直播场景下，主播使用的终端为第一显示终端，观众使用的终端为第二显示终端。在第二显示终端对应的用户首次进入直播间时，服务器可以向第二显示终端发送与第一显示终端相同视角的图像数据，此时实现同步共享。第二显示终端的使用者可以选择想要观看的视角，向服务器发送视角指示信息，服 务器根据接收到的视角指示信息对该第二显示终端的图像数据对应的视角进行调整，使得第二显示终端能够显示使用者想要观看的视角的图像，并且不会对其他第二显示终端产生影响，从而实现异步显示。
图10是本公开实施例提供的一种三维图像数据的处理装置的框图。如图10所示，该装置900用于为三维显示终端提供三维图像数据，所述三维显示终端具有依次排列的多个视点，所述三维显示终端的观看区域包括多个子区域，所述多个子区域的排列方向与所述多个视点的排列方向相同，不同的所述子区域对应的视点至少部分不同。该装置900包括：接收模块901、确定模块902和发送模块903。
接收模块901用于接收指示信息，所述指示信息用于指示目标子区域的数量，所述目标子区域为所述观看区域中存在观看者的子区域；确定模块902用于基于所述指示信息，确定目标视图，其中，所述目标子区域的数量等于1时确定出的目标视图的数量小于所述目标子区域的数量大于1时确定出的目标视图的数量；发送模块903用于将所述目标视图的图像数据发送给所述三维显示终端。
可选地，所述多个视点分别对应一个视图，所述目标子区域的数量大于1，所述确定模块902用于将所述多个视点对应的视图均作为所述目标视图。
可选地，所述多个视点分别对应一个视图，所述目标子区域的数量等于1，所述确定模块902用于确定所述三维显示终端的观看者所使用的视点；将所述多个视点对应的视图中，与所述观看者所使用的视点对应的视图作为所述目标视图。
可选地，所述指示信息包括所述三维显示终端的观看者的观看位置，所述指示信息是所述三维显示终端在所述目标子区域的数量为1时生成的；所述确定模块902用于根据预设的视点与观看位置的对应关系，确定所述目标子区域对应的第一视点；将所述第一视点和N个第二视点作为所述观看者所使用的视点，所述N个第二视点为所述多个视点中与所述第一视点的最近的N个视点；其中，N为偶数，且N≥0。
可选地，所述指示信息包括目标视点的标识，所述指示信息是所述三维显示终端在所述目标子区域的数量为1时生成的；所述确定模块902用于根据所述目标视点的标识，确定所述三维显示终端的观看者所使用的视点，其中，所 述目标视点包括第一视点，或者，所述目标视点包括第一视点和N个第二视点，所述第一视点为与所述目标子区域对应的视点，所述N个第二视点为所述多个视点中与所述第一视点的最近的N个视点，其中，N为偶数，且N≥0；所述观看者所使用的视点包括所述第一视点和所述N个第二视点。
可选地，所述发送模块903用于，响应于确定所述观看者处于运动状态，将具有第一分辨率的所述目标视图的图像数据发送给所述三维显示终端；响应于确定所述观看者处于静止状态，将具有第二分辨率的所述目标视图的图像数据发送给所述三维显示终端；其中，所述第一分辨率低于所述第二分辨率。
可选地，所述目标子区域的数量等于1时确定出的目标视图的分辨率大于所述目标子区域的数量大于1时确定出的目标视图的分辨率。
图11为本公开实施例提供的一种三维图像数据的处理装置的框图。如图11所示，该装置1000用于为多个三维显示终端提供三维图像数据，所述多个三维显示终端包括第一显示终端和至少一个第二显示终端，该装置1000包括：接收模块1001、确定模块1002和发送模块1003。接收模块1001用于接收第一视角指示信息，所述第一视角指示信息用于指示第一显示终端针对目标对象的第一视角；确定模块1002用于根据所述第一视角指示信息，确定所述第一视角对应的第一目标视图，所述第一目标视图的数量小于所述第一显示终端所具有的视点的数量；发送模块1003用于将所述第一目标视图的图像数据发送给所述第显示终端和至少一个第二显示终端。
可选地，所述第一视角指示信息包括所述第一显示终端的观看者的观看位置；所述确定模块1002用于根据预设的视点与观看位置的对应关系，确定所述第一显示终端的观看者的观看位置对应的第一视点；将所述第一视点和N个第二视点对应的视图作为所述第一目标视图，所述N个第二视点为所述多个视点中与所述第一视点的最近的N个视点；其中，N为偶数，且N≥0。
可选地，所述第一视角指示信息包括所述目标视点的标识，所述目标视点包括第一视点，或者，所述目标视点包括第一视点和N个第二视点，所述第一视点为与所述第一显示终端的观看者的观看位置对应的视点，所述N个第二视点为所述多个视点中与所述第一视点的最近的N个视点，其中，N为偶数，且N≥0；所述确定模块1002用于，根据所述目标视点的标识，将所述第一视点和所述N个第二视点对应的视图作为所述第一目标视图。
可选地，所述接收模块1001还用于接收第三显示终端发送的第二视角指示信息，所述第三显示终端为所述至少一个第二显示终端中的一个，所述第二视角指示信息用于指示所述第三显示终端针对所述目标对象的第二视角；所述确定模块1002还用于根据所述第二视角指示信息，确定所述第二视角对应的第二目标视图；所述发送模块1003还用于将所述第二目标视图的图像数据发送给所述第三显示终端。
需要说明的是：上述实施例提供的三维图像数据的处理装置在进行三维图像数据的处理时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的三维图像数据的处理装置与三维图像数据的处理方法实施例属于同一构思，其实现过程详见方法实施例，这里不再赘述。
如图12所示，本公开实施例还提供了一种计算机设备1100，该计算机设备1100可以为三维图像数据的处理设备，例如前述服务器。该计算机设备1100可以用于执行上述各个实施例中提供的三维图像数据的处理方法。参见图12，该计算机设备1100包括：存储器1101、处理器1102和通信组件1103，存储器1101和通信组件1103可以通过总线与处理器1102连接。本领域技术人员可以理解，图12中示出的计算机设备1100的结构并不构成对计算机设备1100的限定，在实际应用中可以包括比图示更多或更少的组件，或者组合某些组件，或者不同的组件布置。其中：
存储器1101可用于存储计算机程序以及模块，存储器1101可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序等。存储器1101可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器1101还可以包括存储器控制器，以提供处理器1102对存储器1101的访问。
处理器1102通过运行存储在存储器1101的软件程序以及模块，从而执行各种功能应用以及数据处理。
通信组件1103用于与三维显示终端进行通信，例如接收三维显示终端发送 的指示信息、第一视角指示信息等，以及向三维显示终端发送图像数据等。
本公开实施例还提供了一种显示系统，包括服务器和三维显示终端。三维显示终端具有依次排列的多个视点，三维显示终端的观看区域包括多个子区域，多个子区域的排列方向与多个视点的排列方向相同，不同的子区域对应的视点至少部分不同。三维显示终端用于发送指示信息，指示信息用于指示目标子区域的数量，目标子区域为观看区域中存在观看者的子区域；服务器用于基于接收到的指示信息，确定目标视图，其中，目标子区域的数量等于1时确定出的目标视图的数量小于目标子区域的数量大于1时确定出的目标视图的数量；以及将目标视图的图像数据发送给三维显示终端。三维显示终端还用于根据接收到的图像数据显示三维图像。
关于服务器和三维显示终端的其他内容可以参见图3和图4所示方法实施例，在此不再赘述。
本公开实施例还提供了一种显示系统，包括服务器、第一显示终端和第二显示终端。第一显示终端用于发送第一视角指示信息，第一视角指示信息用于指示第一显示终端针对目标对象的第一视角。服务器用于根据第一视角指示信息，确定第一视角对应的第一目标视图，所述第一目标视图的数量小于所述第一显示终端所具有的视点的数量；以及将第一目标视图的图像数据发送给第一显示终端和至少一个第二显示终端。第一显示终端和第二显示终端还用于根据接收到的图像数据显示三维图像。
关于服务器、第一显示终端和第二显示终端的其他内容可以参见图6和图7所示方法实施例，在此不再赘述。
在示例性实施例中，还提供了一种计算机可读存储介质，该计算机可读存储介质为非易失性存储介质，该计算机可读存储介质中存储有计算机程序，当该计算机可读存储介质中的计算机程序由处理器执行时，能够执行本公开实施例提供的三维图像数据的处理方法。
在示例性实施例中，还提供了一种计算机程序产品，该计算机程序产品中存储有指令，当其在计算机上运行时，使得计算机能够执行本公开实施例提供的三维图像数据的处理方法。
在示例性的实施例中，还提供了一种芯片，该芯片包括可编程逻辑电路和/或程序指令，当该芯片运行时能够执行本公开实施例提供的三维图像数据的处 理方法。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。
以上所述仅为本公开的可选实施例，并不用以限制本公开，凡在本公开的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本公开的保护范围之内。

Claims (16)

  1. 一种三维图像数据的处理方法，其特征在于，用于为三维显示终端提供三维图像数据，所述三维显示终端具有依次排列的多个视点，所述三维显示终端的观看区域包括多个子区域，所述多个子区域的排列方向与所述多个视点的排列方向相同，不同的所述子区域对应的视点至少部分不同，所述方法包括：
    接收指示信息，所述指示信息用于指示目标子区域的数量，所述目标子区域为所述观看区域中存在观看者的子区域；
    基于所述指示信息，确定目标视图，其中，所述目标子区域的数量等于1时确定出的目标视图的数量小于所述目标子区域的数量大于1时确定出的目标视图的数量；
    将所述目标视图的图像数据发送给所述三维显示终端。
  2. 根据权利要求1所述的方法，其特征在于，所述多个视点分别对应一个视图，所述目标子区域的数量大于1，
    所述基于所述指示信息，确定目标视图，包括：
    将所述多个视点对应的视图均作为所述目标视图。
  3. 根据权利要求1所述的方法，其特征在于，所述多个视点分别对应一个视图，所述目标子区域的数量等于1，
    所述基于所述指示信息，确定目标视图，包括：
    确定所述三维显示终端的观看者所使用的视点；
    将所述多个视点对应的视图中，与所述观看者所使用的视点对应的视图作为所述目标视图。
  4. 根据权利要求3所述的方法，其特征在于，所述指示信息包括所述三维显示终端的观看者的观看位置，所述指示信息是所述三维显示终端在所述目标子区域的数量为1时生成的；
    所述确定所述三维显示终端的观看者所使用的视点，包括：
    根据预设的视点与观看位置的对应关系，确定所述目标子区域对应的第一视点；
    将所述第一视点和N个第二视点作为所述观看者所使用的视点，所述N个第二视点为所述多个视点中与所述第一视点的最近的N个视点；
    其中，N为偶数，且N≥0。
  5. 根据权利要求3所述的方法，其特征在于，所述指示信息包括目标视点的标识，所述指示信息是所述三维显示终端在所述目标子区域的数量为1时生成的；
    所述确定所述三维显示终端的观看者所使用的视点，包括：
    根据所述目标视点的标识，确定所述三维显示终端的观看者所使用的视点，
    其中，所述目标视点包括第一视点，或者，所述目标视点包括第一视点和N个第二视点，所述第一视点为与所述目标子区域对应的视点，所述N个第二视点为所述多个视点中与所述第一视点的最近的N个视点，其中，N为偶数，且N≥0；所述观看者所使用的视点包括所述第一视点和所述N个第二视点。
  6. 根据权利要求3至5任一项所述的方法，其特征在于，所述将所述目标视图的图像数据发送给所述三维显示终端，包括：
    响应于确定所述观看者处于运动状态，将具有第一分辨率的所述目标视图的图像数据发送给所述三维显示终端；
    响应于确定所述观看者处于静止状态，将具有第二分辨率的所述目标视图的图像数据发送给所述三维显示终端；
    其中，所述第一分辨率低于所述第二分辨率。
  7. 根据权利要求1所述的方法，其特征在于，所述目标子区域的数量等于1时确定出的目标视图的分辨率大于所述目标子区域的数量大于1时确定出的目标视图的分辨率。
  8. 一种三维图像数据的处理方法，其特征在于，用于为多个三维显示终端提供三维图像数据，所述多个三维显示终端包括第一显示终端和至少一个第二显示终端，所述方法包括：
    接收第一视角指示信息，所述第一视角指示信息用于指示所述第一显示终 端针对目标对象的第一视角；
    根据所述第一视角指示信息，确定所述第一视角对应的第一目标视图，所述第一目标视图的数量小于所述第一显示终端所具有的视点的数量；
    将所述第一目标视图的图像数据发送给所述第一显示终端和所述至少一个第二显示终端。
  9. 根据权利要求8所述的方法，其特征在于，所述第一视角指示信息包括所述第一显示终端的观看者的观看位置；
    所述根据所述第一视角指示信息，确定所述第一视角对应的第一目标视图，包括：
    根据预设的视点与观看位置的对应关系，确定所述第一显示终端的观看者的观看位置对应的第一视点；
    将所述第一视点和N个第二视点对应的视图作为所述第一目标视图，所述N个第二视点为所述多个视点中与所述第一视点的最近的N个视点；
    其中，N为偶数，且N≥0。
  10. 根据权利要求8所述的方法，其特征在于，所述第一视角指示信息包括所述目标视点的标识，所述目标视点包括第一视点，或者，所述目标视点包括第一视点和N个第二视点，所述第一视点为与所述第一显示终端的观看者的观看位置对应的视点，所述N个第二视点为所述多个视点中与所述第一视点的最近的N个视点，其中，N为偶数，且N≥0；
    所述根据所述第一视角指示信息，确定所述第一视角对应的第一目标视图，包括：
    根据所述目标视点的标识，将所述第一视点和所述N个第二视点对应的视图作为所述第一目标视图。
  11. 根据权利要求8至10任一项所述的方法，其特征在于，所述方法还包括：
    接收第三显示终端发送的第二视角指示信息，所述第三显示终端为所述至少一个第二显示终端中的一个，所述第二视角指示信息用于指示所述第三显示 终端针对所述目标对象的第二视角；
    根据所述第二视角指示信息，确定所述第二视角对应的第二目标视图；
    将所述第二目标视图的图像数据发送给所述第三显示终端。
  12. 一种三维图像数据的处理装置，其特征在于，用于为三维显示终端提供三维图像数据，所述三维显示终端具有依次排列的多个视点，所述三维显示终端的观看区域包括多个子区域，所述多个子区域的排列方向与所述多个视点的排列方向相同，不同的所述子区域对应的视点至少部分不同，所述装置包括：
    接收模块，用于接收指示信息，所述指示信息用于指示目标子区域的数量，所述目标子区域为所述观看区域中存在观看者的子区域；
    确定模块，用于基于所述指示信息，确定目标视图，其中，所述目标子区域的数量等于1时确定出的目标视图的数量小于所述目标子区域的数量大于1时确定出的目标视图的数量；
    发送模块，用于将所述目标视图的图像数据发送给所述三维显示终端。
  13. 一种三维图像数据的处理装置，其特征在于，用于为多个三维显示终端提供三维图像数据，所述多个三维显示终端包括第一显示终端和至少一个第二显示终端，所述装置包括：
    接收模块，用于接收第一视角指示信息，所述第一视角指示信息用于指示所述第一显示终端针对目标对象的第一视角；
    确定模块，用于根据所述第一视角指示信息，确定所述第一视角对应的第一目标视图，所述第一目标视图的数量小于所述第一显示终端所具有的视点的数量；
    发送模块，用于将所述第一目标视图的图像数据发送给所述第一显示终端和所述至少一个第二显示终端。
  14. 一种计算机设备，其特征在于，所述计算机设备包括处理器和存储器；
    其中，所述存储器，用于存储计算机程序；
    所述处理器，用于执行所述存储器中存放的计算机程序，以实现权利要求1至7任一所述的三维图像数据的处理方法，或者权利要求8至11任一所述的三 维图像数据的处理方法。
  15. 一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机指令，存储的所述计算机指令被处理器执行时能够实现如权利要求1至7任一所述的三维图像数据的处理方法，或者权利要求8至11任一所述的三维图像数据的处理方法。
  16. 一种计算机程序产品，其特征在于，所述计算机程序产品中存储有指令，当其在计算机上运行时，使得计算机能够执行如权利要求1至7任一所述的三维图像数据的处理方法，或者，权利要求8至11任一所述的三维图像数据的处理方法。
CN202180003661.8A 2021-11-29 2021-11-29 三维图像数据的处理方法及装置、设备和介质 Pending CN116529654A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2021/134121 WO2023092595A1 (zh) 2021-11-29 2021-11-29 三维图像数据的处理方法及装置、设备和介质

Publications (1)

Publication Number Publication Date
CN116529654A true CN116529654A (zh) 2023-08-01

Family

ID=86538785

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180003661.8A Pending CN116529654A (zh) 2021-11-29 2021-11-29 三维图像数据的处理方法及装置、设备和介质

Country Status (3)

Country Link
US (1) US12093449B2 (zh)
CN (1) CN116529654A (zh)
WO (1) WO2023092595A1 (zh)

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5732986B2 (ja) * 2011-04-08 2015-06-10 ソニー株式会社 画像処理装置、画像処理方法、およびプログラム
CN103048866B (zh) * 2012-12-13 2015-07-08 浙江大学 基于平面显示器的悬浮式360°光场三维显示装置和方法
KR101856568B1 (ko) * 2013-09-16 2018-06-19 삼성전자주식회사 다시점 영상 디스플레이 장치 및 제어 방법
KR102140080B1 (ko) * 2013-09-27 2020-07-31 삼성전자주식회사 다시점 영상 디스플레이 장치 및 제어 방법
US10475274B2 (en) * 2014-09-23 2019-11-12 Igt Canada Solutions Ulc Three-dimensional displays and related techniques
CN104702939B (zh) * 2015-03-17 2017-09-15 京东方科技集团股份有限公司 图像处理系统、方法、确定位置的方法及显示系统
CN105353559B (zh) * 2015-12-03 2019-04-26 京东方科技集团股份有限公司 一种三维显示装置及其驱动方法
CN106291958B (zh) * 2016-10-21 2021-04-23 京东方科技集团股份有限公司 一种显示装置及图像显示方法
CN108540791B (zh) * 2018-04-25 2020-01-24 京东方科技集团股份有限公司 一种双视显示方法和装置
CN108810627B (zh) * 2018-07-05 2021-05-07 京东方科技集团股份有限公司 一种显示装置及其显示方法
CN112866676B (zh) * 2021-01-06 2022-06-03 东南大学 一种基于单像素多视点重建的裸眼三维显示算法

Also Published As

Publication number Publication date
US12093449B2 (en) 2024-09-17
WO2023092595A1 (zh) 2023-06-01
US20240241577A1 (en) 2024-07-18

Similar Documents

Publication Publication Date Title
US9848184B2 (en) Stereoscopic display system using light field type data
KR102174258B1 (ko) 무안경 3d 디스플레이 장치 및 그 제어 방법
KR102121389B1 (ko) 무안경 3d 디스플레이 장치 및 그 제어 방법
CN102572484B (zh) 立体显示控制方法、立体显示控制装置和立体显示系统
US10694173B2 (en) Multiview image display apparatus and control method thereof
US20060066718A1 (en) Apparatus and method for generating parallax image
US8723920B1 (en) Encoding process for multidimensional display
CN102970569A (zh) 视域调整装置、视频处理装置以及视域调整方法
US8947512B1 (en) User wearable viewing devices
EP3182702B1 (en) Multiview image display device and control method therefor
US20160014400A1 (en) Multiview image display apparatus and multiview image display method thereof
TW201320719A (zh) 立體畫像顯示裝置、畫像處理裝置及畫像處理方法
US10482671B2 (en) System and method of providing a virtual environment
EP3273687B1 (en) Image processing system and method, method for determining location, and display system
KR102143463B1 (ko) 다시점 영상 디스플레이 장치 및 그 제어 방법
CN114040184B (zh) 图像显示方法、系统、存储介质及计算机程序产品
CN116529654A (zh) 三维图像数据的处理方法及装置、设备和介质
JP2012222549A (ja) 映像表示装置および映像表示方法
US20140362197A1 (en) Image processing device, image processing method, and stereoscopic image display device
US9832458B2 (en) Multi view image display method in which viewpoints are controlled and display device thereof
US20240193896A1 (en) Information processing apparatus, program, and information processing method
CN118678114A (zh) 一种xr立体互动直播构建方法、主播端及观众端
KR20240005492A (ko) 3d 영상을 제공하는 디스플레이 장치 및 그 제어 방법
CN118689363A (zh) 显示3d图像的方法、装置、电子设备和存储介质
Joachimiak et al. View Synthesis with Kinect-Based Tracking for Motion Parallax Depth Cue on a 2D Display

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination